Как измерить, чему на самом деле научился подросток? Разработан ИИ-опросник для валидации СКП

tg 23 октября 2026

Методический центр «Навигатум» представляет инструмент, который оценивает не заученные термины, а реальные изменения в мышлении школьников. Приглашаем образовательные организации к участию в пилотной апробации.


Представьте: подросток прошёл курс по профориентации по «Смысловой классификации профессий» (СКП). Он уверенно перечисляет «корневые функции» и «каскадные связи». Но изменилось ли его мышление на самом деле — или он просто выучил новые слова? До недавнего времени ответить на этот вопрос объективно было почти невозможно. Традиционные тесты с готовыми вариантами ответов нечувствительны к глубинным сдвигам, а развёрнутые интервью — слишком трудоёмки для больших выборок.

Мы разработали диагностический комплекс, который решает эту задачу. В его основе — интеграция методики СКП и больших языковых моделей (LLM). Комплекс анализирует открытые ответы учащихся 14–17 лет (текстовые и аудио) и фиксирует не декларативные знания, а реальную динамику ментальных моделей.

Как это работает

Учащийся проходит два зеркальных опросника — «ДО» и «ПОСЛЕ» курса. Сюжеты кейсов в них различаются, чтобы исключить эффект запоминания, но измеряемые конструкты остаются теми же. Например, в тесте «ДО» предлагается найти общую суть между агрономом в вертикальной теплице, шеф-поваром молекулярной кухни и технологом пищевых добавок. В тесте «ПОСЛЕ» — между VR-разработчиком, средневековым сказителем и сценаристом Netflix.

Ответы проходят через четырёхступенчатый ИИ-конвейер:

  1. Speech-to-Text — голосовые ответы переводятся в текст с сохранением пауз и слов-паразитов (это важные маркеры когнитивного процесса).
  2. Нормализация — текст очищается, но маркеры живой речи остаются.
  3. Психометрическая оценка — LLM сравнивает ответы «ДО» и «ПОСЛЕ» и выставляет баллы по трём критериям СКП: иерархическая системность, глубина функционального анализа и осознанность личностно-профессионального самоопределения.
  4. Нарратив — генерируется текстовый отчёт для экспертов и персональный мотивационный профиль для самого подростка.
Пример ИИ-опросника для валидации СКП


Пример кейса на корневую функцию в опроснике «ДО».

Зачем нужна валидация и как устроен open science-подход

Комплекс создавался не как замена педагогу или психологу, а как инструмент доказательной диагностики. Его задача — дать практике ответ на вопрос: действительно ли курс СКП меняет мышление, а не просто расширяет словарный запас?

Мы следуем принципам открытой науки (open science). Для воспроизводимости и независимой проверки мы публикуем полные тексты опросников, их структуру, системные промпты для LLM и методологию обработки данных. Все материалы доступны в репозитории Zenodo:

Kireeva, A., & Smirnov, A. (2026). Оценка трансформации ментальных моделей подростков в профориентации: ИИ-конвейер анализа открытых ответов как инструмент валидации Смысловой классификации профессий (СКП) (Version 1.3). Zenodo. https://doi.org/10.5281/zenodo.23529726

Это означает, что любой исследователь или методист может самостоятельно изучить инструмент, проверить его логику и при необходимости адаптировать под свои задачи.

Приглашаем экспериментальные площадки

Сейчас мы запускаем пилотную апробацию комплекса. К участию приглашаются образовательные организации, работающие с подростками 14–17 лет.

Что получает площадка:

  • Методические материалы для педагогов: сценарии, инструкции, шаблоны согласий для родителей.
  • Сопровождение: установочные вебинары и канал обратной связи.
  • Полный доступ к ИИ-опроснику для учащихся (веб-приложение).
  • Результаты диагностики в обезличенном виде для анализа динамики.

Что требуется от образовательной организации:

  • Наличие у подростков смартфона или компьютера с доступом в интернет.
  • Следование протоколу пилотного исследования (стандартизированные сценарии занятий для экспериментальной и контрольной групп).
  • Назначение ответственного педагога-навигатора.

Участие бесплатно. Все расходы на разработку, серверную инфраструктуру и оплату вычислительных мощностей LLM берут на себя Методический центр «Навигатум» и АНО «Центр научных исследований в сфере профориентации и психологии труда».

Если ваша организация готова присоединиться к исследованию или у вас есть вопросы, напишите нам: aigul@navigatum.ru (А.А. Киреева, руководитель Методического центра).


Пилотная апробация позволит оценить работоспособность инструмента, проверить надёжность автоматической оценки в сравнении с экспертной и получить первичные данные для статистической валидации. Результаты будут представлены во второй публикации.

Рубрики: Новости
Вернуться ко всем новостям
tg