- Метрики удовлетворенности учащихся. В фокусе – впечатления студентов о образовательном продукте (курсе, тренинге), репутация образовательного заведения.
- Метрики непосредственно качества обучения. Учитывается, насколько результативен сам образовательный процесс, образовательные программы, какой уровень прогресса достигают пользователи.
- Бизнес-метрики. За ними стоит прибыль, экономическая эффективность образовательного продукта.
Метрики качества обучения и удовлетворенности учащихся
- COR (Completion Rate) – одна из базовых метрик, которая отображает количество (процент) учащихся, прошедших обучение от начала до конца (т.е. процент завершивших обучение от зарегистрировавшихся). Вычислить COR – нехитрое дело. Количество выпускников нужно разделить на количество записавшихся на курс и умножить на сто. Увы, бывает так, что у курса – громкая реклама, записи активны, но буквально несколько занятий и слушатели отсеиваются, так как ожидания и реальность не совпадают. Учащихся раздражает, что курс отнимает много времени, а по факту дается одна «вода», учебная информация нерелевантна запросам.
- CSAT (Customer Satisfaction Score) или индекс удовлетворенности клиента. Объект измерения здесь – взаимодействие учащегося с курсом, тренингом, с образовательным продуктом или их компонентами. Почему важно обращать внимание на компоненты? Всё просто! Иногда бывает так, что от качества лекций, домашних заданий студент в полном восторге, а вот служба поддержки, сопровождения продукта вызывает в нем недоверие. Наиболее точным способом определения CSAT является обратная связь от учащихся. Здесь важно определиться со шкалой измерения (стандартный вариант – пятибалльная) и грамотно сформулировать вопросы для обратной связи. Идеально, если это будут и общие, и частные вопросы («Насколько вам понравилась лекция номер 2?», «Оцените в баллах качество сопровождения техническим тренером/взаимодействие со службой поддержки», «Интересна ли вам программа», «Насколько для вас удобна платформа обучения» и т.д. Непосредственно CSA – это процент положительных оценок (четверок и пятерок) от общего количества оценок.
- Transformation Rate. Метрика «привязана» к оценке учащимся результативности обучения. Это не те результаты, которые показывают промежуточные контрольные работы или финальное тестирование. Это именно самооценка. За Transformation Rate фактически стоит ответ на вопрос, а достиг ли выпускник целей обучения. Лучше всего определить Transformation Rate помогает анкетирование. Оптимальный вариант – двухэтапное. Перед прохождением курса и после. При заполнении анкеты первый раз указывается индивидуальная цель обучения. При заполнении второй раз – оценка, достигнута ли поставленная цель благодаря обучению. Для кого-то это развитие умений по определенному направлению, для кого-то – трудоустройство.
- NPS (Net Promoter Score). Индекс потребительской лояльности, готовность порекомендовать школу. Можно долго спорить о том, реальны ли в сети отзывы о школах, а можно на эти отзывы влиять. Работая над лояльностью, репутацией онлайн школы, вы повышаете индекс NPS.
- Реферальность. Близка к NPS, но отображает уже непосредственно процент новых клиентов по рекомендациям.
- Прогресс обучения. Помогает непосредственно отследить движение по учебной программе, рост студента.
Бизнес-метрики
Программы могут быть интересны, но организаторам обучения также важно понимать, рентабельны ли они. Организаторам обучения важна прибыль.
- ROI (Return on Investment). Непосредственно возврат инвестиций. Рассчитывается в процентах. От дохода (средств за определенный период) отнимаются инвестиции - вложения, которые потребовались (то есть инвестиции). Это число делится опять-таки на инвестиции и умножается на сто.
- При учете инвестиций важно не упустить все вложения: затраты на создание курса, набор учеников, учебный процесс
- ROMI. Рентабельность маркетинговых затрат. Кроме образовательных технологий при запуске курса активно применяются и маркетинговые. И показатель ROMI находится в зоне ответственности привлечения клиента (канала привлечения, например, таргетированная реклама в ВК, контекстная реклама в Яндекс). Особенности расчета схожи с ROI. От доходов на рекламу вычитают расходы на нее. Это число делится на расходы на рекламу и умножается на 100.
Среди показателей, на которые стоит обратить внимание - вовлеченность учащихся в общение в чате, а также характер этого общения. Такое общение может свидетельствовать как о вовлеченности группы в учебный процесс, т.е. выступать положительной характеристикой, так и отражать негативное положение вещей: студенты не находят нужный материал, не получают должную техподдержку и вынуждены искать ответы самостоятельно.
