Skillbox с командой Международной лаборатории оценки практик и инноваций в образовании НИУ ВШЭ разработали модель, которая предсказывает вовлеченность пользователей онлайн-платформы. Она учитывает количество начатых занятий, выполненных домашних заданий, результаты тестирований, число недосмотренных видео, результаты прохождения тестов и другие характеристики. Ценность модели в возможностях дальнейшего практического применения — своевременная разработка мер поддержки обучающихся с низкой вовлеченностью и помощь в достижении их образовательных целей. В планах компании использовать информацию о вовлеченности студентов для выстраивания персонализированных треков обучения и сопровождения.
Одним из факторов результативного обучения взрослых на сегодняшний день является их вовлеченность в образовательный процесс. Под результатом в данном случае понимается достижение целей, которые ставили перед собой обучающиеся. При этом автоматизированной системы измерения вовлеченности, учитывающей также личный опыт обучающихся, на рынке образования сегодня не существует. Так, целями исследовательского проекта стали: научное доказательство того, что вовлеченность поддается измерению через цифровые следы, а также построение модели, которая поможет отслеживать степень вовлечения обучающихся и разрабатывать системные меры их поддержки.
«Skillbox в своей модели образовательного продукта всегда был ориентирован на занятых взрослых людей, которые осознанно выбирают асинхронное обучение и самостоятельно максимально подстраивают его под свой жизненный ритм. Мы, однако, понимаем, что вовлеченность в обучение при таком подходе может падать из-за перерывов в обучении, и активно исследуем поведение пользователей для построения более результативных отношений между учащимся и платформой», — комментирует Наталья Влодавская, директор по сервису, Skillbox.
Работа над моделью велась в четыре этапа:
- Сбор данных. Это позволило определить вовлеченность более традиционными методами, а после сравнить эти результаты с результатами разработанной модели. Анкета состояла из 13 утверждений, распределенных по трем компонентам вовлеченности (согласно классической модели вовлеченности Дженнифер Фредрикс) — поведенческий (например, «Я регулярно делаю домашние задания»), когнитивный («Если я что-то не понимаю, я стараюсь разобраться в этом до конца») и эмоциональный («Я редко чувствую беспомощность во время обучения на курсе»). Финальная выборка составила 2 234 пользователя.
- Сегментирование аудитории. По результатам опроса было выделено три сегмента студентов по уровню вовлеченности: низкий, средний и высокий.
- Построение предиктивной модели. Модель разработана с помощью алгоритмов машинного обучения. Учитывалось количество начатых занятий, выполненных домашних заданий, число недосмотренных видео, сумма всех попыток прохождения тестов и другие характеристики.
- Валидация модели. Финальным этапом после получения данных и разработки модели стало интервью с обучающимися, с помощью которого проверили насколько выводы, полученные путем анализа цифровых следов, соотносятся с их субъективным опытом.
«В последние годы естественным образом вырос интерес исследовательского сообщества к созданию автоматизированных систем мониторинга опыта и прогресса обучающихся. И это задача не только и не столько техническая — такие системы позволяют нам лучше понять факторы, связанные с вовлеченностью, мотивацией, благополучием обучающихся, посмотреть на них в динамике, и, как результат — проектировать образовательный опыт более эффективно», — комментирует Юлия Герасимова, руководитель проекта, Институт образования НИУ ВШЭ.
Измерение вовлеченности на всех этапах подразумевает возможность использования цифровых следов и их автоматическое определение
В дальнейших планах — доработать модель таким образом, чтобы она предсказывала показатель дропаута (отсева) обучающихся. Для этого потребуется собрать данные об учебном статусе студентов, принявших участие в исследовании вовлеченности, через несколько месяцев. Кроме того, на основании ретроспективных данных уже сейчас можно сформировать и адаптировать условия обучения, при которых возможно увеличить шанс достижения образовательных целей. Низкая вовлеченность человека — не только показатель того, что человек не хочет учиться. Вариантов может быть много: отсутствие времени, невозможность его корректно распределять, сложность в восприятии обучающей программы. В случае возможности определения пользователей, которым требуется помощь в достижении образовательных целей, модель также позволит повысить результативность обучения и удовлетворенность обучающихся.
О компании
Skillbox работает на базе собственной инновационной платформы (LMS), разработанной для онлайн-обучения, и предлагает самый большой на российском рынке выбор курсов по разным направлениям — дизайн, программирование, управление, маркетинг, кино и музыка, разработка игр и т.д.
Компания входит в Skillbox Holding Limited — международный образовательный холдинг, в составе которого также Школа английского Skillbox, GeekBrains, Skillfactory, Mentorama и Lerna (ключевой инвестор холдинга — VK). Холдинг работает с пользователями по всему миру. По итогу первого квартала 2023 года на платформах холдинга зарегистрировано 14 млн пользователей, из которых 556 тыс обучаются на платных программах
