Основные функции — бесплатно и навсегда
Сервис для создания
онлайн-курсов
- До 30 активных участников
- 500 МБ для хранения данных
- Загрузка любого контента
- Журнал курса и статистика
- Тесты и голосования
- Поддержка SSO
Попробуйте бесплатно сервис МТС Линк Курсы
Ничего не найдено. Попробуйте еще
Какие метрики и инструменты помогают отличать формальное прохождение курса от реального обучения
-
АвторИрина ПоловинкинаИногда бросает курсы на полпути -
ЭкспертКристина ГеворкянМетодический директор в сфере образовательных технологий
- Журнал курса и статистика
- Тесты и голосования
- Поддержка SSO
Авторы обучающих курсов часто смотрят на доходимость как на главный показатель успеха. Если 90% учеников дошли до конца, значит, это отличный результат. Но эксперты предупреждают: цифры без контекста обманчивы.
Вместе с методическим директором в сфере образовательных технологий Кристиной Геворкян и менеджером по учебным технологиям МТС Линк Валерией Капитоновой разбираемся, почему высокая доходимость не гарантия полученных знаний, на что обращать внимание в «Журнале успеваемости» и почему грамотная аналитика начинается ещё до начала обучения.
Какие метрики помогают понять, как прошёл курс
Есть несколько базовых метрик, на которые стоит ориентироваться при оценке онлайн-курса. Менеджер по учебным технологиям МТС Линк Валерия Капитонова выделяет такие ключевые позиции:
- высокий процент завершения курса с равномерными показателями прогресса
- отсутствие массовых «подвисаний» на конкретных уроках
- высокие и стабильные средние баллы по тестам и проверочным заданиям.
Сигналы сбоев эксперт отмечает следующие:
- падение процента завершения курса, застревание на модулях, спад активности
- низкие и неравномерные баллы по тестам и проверочным заданиям
- негативные отзывы от обучающихся.
Вот несколько основных метрик, на которые стоит обратить внимание при анализе качества образовательных программ.
Доходимость до завершения курса (Completion Rate)
Метрика показывает, сколько учеников полностью прошли обучение. Это важно замерять не только по итогам всего обучения, но и по каждому модулю или уроку — так картина будет наиболее полной.
При этом методический директор в сфере образовательных технологий Кристина Геворкян подчёркивает, что эту метрику важно не вырывать из контекста. Сам по себе показатель отражает только факт прохождения, а не обучения. Высокий процент может означать, что курс слишком простой, линейный и не требует усилий. А низкий — что курс сложный, но при этом даёт реальный рост. Поэтому важно интегрировать показатель в общую систему анализа и параллельно оценивать, кто именно из группы дошёл до конца и какие у этих людей результаты.
Индекс лояльности (Net Promoter Score, или NPS)
Эта метрика показывает, насколько ученики, прошедшие курс, готовы порекомендовать его коллегам или друзьям. Организатор обучения понимает, сколько у курса сторонников (тех, кто оценил обучение на 9 или 10 баллов по 10-балльной шкале) и критиков (которые оценили курс на 6 и менее баллов). Разница между ними составит индекс лояльности.
Кристина Геворкян рекомендует учитывать особенности показателя. Индекс демонстрирует эмоциональную оценку ученика, но не объективную ценность курса.
«Чем выше когнитивное усилие и дискомфорт, тем ниже удовлетворённость, но при этом может быть выше реальный результат обучения», — подчёркивает эксперт.
Авторам курса важно найти баланс при подготовке учебных материалов: ученики не должны выбиваться из сил, но и не стоит делать слишком лёгким курс для конкретной группы. В результате организаторам важно быть уверенным в посильности и адекватности курса и учитывать метрики прогресса в онлайн-обучении.
Метрики прогресса
Это основные показатели, которые видит преподаватель и на которые он может повлиять. Например, результаты домашних заданий и тестов, затраченное на них время, количество итераций при выполнении одного задания. Если студенты регулярно возвращаются к повторному прохождению урока или уходят, когда появляется сложный инструмент, это повод срочно менять подход.
Эти показатели важно оценивать в динамике — после каждого урока, модуля и курса. Если у курса 90% доходимости, домашние задания выполняют на 10 из 10, а затраченное среднее время на тесты — 5–10 минут, скорее всего, курс слишком лёгкий для группы. При этом если у курса около 15% доходимости, средние баллы варьируются от 2 до 6, а время выполнения теста — более часа, скорее всего, уровень обучения для конкретной группы чрезмерно сложный.
Чтобы исправить ситуацию, можно переработать вопросы в тестах, а группам, испытывающим сложности с организационной частью, — предложить более удобные инструменты. Часто преподаватели включают в курс работу с онлайн-досками, вебинары с обратной связью или деловые игры. Это делает обучение интереснее и упрощает восприятие.
Когда и с помощью каких инструментов проводить аналитику
Если смотреть на курс не как на что-то цельное, а как на серию решений, то можно выстроить под каждое конкретное обучение опорную схему, рассказывает Кристина Геворкян. Тогда метрики перестают быть просто оценкой эффективности онлайн-курса и становятся способом увидеть, в какой именно момент человек передумывает учиться или испытывает затруднения.
Самая недооценённая точка, по мнению эксперта, — время до старта курса.
Мы привыкли думать, что проблема начинается внутри контента. Но часто она появляется раньше — на посадочной странице, в описании, в обещании. Если курс отлично продаётся, но люди массово не доходят до второго урока, это почти всегда про рассинхрон ожиданий.
Но есть и более глубокий слой. Люди приходят на курс с разными типами мотивации. Поэтому одинаковая конверсия может скрывать разные сценарии поведения впоследствии.
Первый урок — это момент, когда между человеком и курсом формируется негласный контракт: сколько усилий потребуется от студента и стоит ли оно того. С одной стороны, человек проверяет, совпадают ли ожидания с реальностью. С другой — он калибрует сложность. Если обучающийся ожидал лёгкий вход, а получил перегруз, он уйдёт. Если ожидал вызов, а получил банальность — тоже уйдёт.
В середине курса человек часто начинает сомневаться в себе и своих силах. Ключевая метрика здесь — ощущение прогресса. Если обучающийся не чувствует, что становится лучше, он почти неизбежно выпадает. Эксперт рекомендует смотреть на карту оттока — на каком уроке происходит максимальный спад, где люди начинают «застревать».
В конце курса важно проанализировать итоговые результаты в целом по обучению и по каждому ученику. Для этого в сервисе для создания онлайн-курсов и организации обучения МТС Линк Курсы есть «Журнал успеваемости» и панель с результатами. Валерия Капитонова отмечает, что в этих разделах стоит обратить внимание на успехи участников, средние оценки эффективности обучения и уровень активности.
Журнал успеваемости в МТС Линк Курсах содержит основные показатели прогресса участников
Панель с информацией покажет статистику в общем по курсу. Именно здесь можно посмотреть, какая доходимость по конкретному обучению, какой средний балл и прогресс у группы.
Общая визуализация данных по обучению в МТС Линк Курсах
«МТС Линк Курсы избавляют руководителей от страха перед аналитикой, предлагая простые дашборды, журналы прогресса и готовые отчёты без формул и кодинга. Сервис автоматически обрабатывает 121 показатель, отслеживая успехи сотрудников, их вовлечённость и риски ухода, чтобы наглядно показывать, где нужно вмешаться», — дополняет эксперт.
Инструменты аналитики выделяют и пользователи сервиса. Так, например, учебный центр «Содействие» перенёс курсы в онлайн — переход на сервисы МТС Линк помог создать эффективную систему обучения в разных форматах. В учебном центре отметили, что подробная статистика по участникам помогает преподавателям понять, какие модули вызывают сложности, а организаторам позволяет не тратить время на ручной сбор и анализ данных. В «Содействии» особенно выделили такие функции, как журнал успеваемости студентов, контроль и управление вовлечённостью, а также техническую поддержку 24/7.
Подробная аналитика на платформе для создания онлайн-курсов помогает организаторам корпоративного обучения систематизировать уроки, ускорить адаптацию новых сотрудников, повысить прозрачность развития компетенций и снизить риски недостаточной квалификации. Это реально благодаря скорости запуска обучения, удобному редактору учебных программ, бесшовной интеграции с другими сервисами, например с Вебинарами и Досками. Также МТС Линк Курсы предлагают интеграцию с «Яндекс Метрикой».
Где чаще всего ошибаются при анализе курса
Частая ошибка — пытаться оптимизировать только одну отдельную метрику оценки эффективности обучения, а не поведение живого человека. Например, растёт отказ от обучения, поэтому авторы начинают дробить уроки и упрощать задания. Метрика улучшается, но вместе с тем обучение даёт более слабые результаты. Как отмечает Кристина Геворкян, это классическая подмена: вместо вопроса «Что мешает человеку учиться?» задаётся вопрос «Как сделать, чтобы он не уходил?». Это принципиально разные задачи.
Большая ошибка — игнорировать сегменты и работать только со «средним пользователем». Есть новички и продвинутые, люди с разными целями, с разным темпом. Один и тот же курс может работать отлично в одной группе и «ломаться» в другой.
Как практик качественных исследований я вижу большие ограничения в стремлении работать только с количественными метриками. Цифры показывают, что происходит, но они не рассказывают нам почему. Без качественных данных аналитика остаётся поверхностной.
Главная ошибка — пытаться улучшать курс, не понимая, какое именно поведение вы пытаетесь изменить. То есть улучшать обучение ради красивых отчётов, а не ради метрик реального качества электронных курсов.
Эксперты оценивают курс как эффективный не только по числу студентов, дошедших до конца. В первую очередь они смотрят на то, насколько обучение было прикладным и полезным, получил ли человек реальные навыки, было ли ему комфортно и посоветует ли он программу коллеге. Совокупность этих метрик отражает настоящую эффективность курса.
Базовые метрики — это доходимость, индекс лояльности и метрики прогресса. Доходимость стоит смотреть в разбивке по модулям, а не только общую. Индекс лояльности показывает, готов ли человек рекомендовать курс коллеге. А среди метрик прогресса стоит обратить внимание на баллы за тесты, время на задания и количество повторов курса.
Офлайн-тренинг сложнее проанализировать с точки зрения сценария поведения пользователей. Нет подробной аналитики по кликам, а журнал успеваемости часто отражает только общий результат тренинга. Онлайн-формат позволяет отслеживать основные метрики курса и динамику его прохождения.
Смотрите не на галочки посещаемости, а на когнитивные усилия обучающихся: время выполнения тестов, количество возвратов к сложным урокам и результаты заданий. Если доходимость 90%, а средний балл 10 из 10, скорее всего, это имитация. Реальное обучение требует небольшого дискомфорта и прогресса в баллах.
Ориентируйтесь на средние баллы и равномерность прохождения программы — они показывают реальный прогресс. Тесты не должны раздражать, если они адекватны уровню группы. Частота индивидуальна, но если студенты массово уходят при появлении сложного инструмента или теста, это повод срочно менять подход, а не нагружать контрольными ещё сильнее.
Подпишитесь на рассылку МТС Линк Медиа
Каждую пятницу присылаем самые интересные статьи об эффективной работе и коммуникациях в онлайне на почту