Как измерить эффективность онлайн-курса

Помогаем освоить востребованную профессию с нуля

Принять участие

Метрики обучения

Метрики обучения — инструмент для систематической оценки курса. Они дают возможность измерять эффективность курса, отслеживать изменения в динамике, анализировать качество работы сотрудников курса и влияние конкретных факторов и делать статистически обоснованные выводы.

Для оценки того, насколько эффективен курс можно использовать ключевые метрики. Разберем несколько метрик для оценки онлайн-обучения. Например:

• Доля слушателей, которым курс помог достичь поставленную цель. Эта цель может быть такой: узнать новое или освоить профессию. Это — главный критерий, позволяющий измерить пользу продукта. Обучение и курс имеет эффективность, если после выпуска человек устроился на желаемую работу, получил повышение, собрал портфолио или другое.
• COP (Completion rate). Эта метрика позволяет оценить доходимость до финала студентов, то есть процент завершивших обучение и курс. Для подсчета индекса доходимости нужно число получивших диплом поделить на количество учащихся на старте. В этом контексте важно собрать обратную связь от учащихся, кто бросил курс. Что стало причиной: банальная лень или слишком сложная подача материала? Во втором случае методисту лучше пересмотреть программу.
• Метрика CSAT (Customer Satisfaction). Индекс удовлетворённости пользователей показывает общую эффективность с учетом того, как влияет отдельный критерий. Например, выпускников курса попросят оценить от 1 до 10, насколько они удовлетворены качеством образования, работой педагогов и кураторов, техническим сопровождением.
• Момент оттока. Когда человек попал на неподходящий курс и понимает это, он хочет вернуть за него деньги. Если слушатели бросают курс или обучение на конкретном этапе, организатору стоить разобраться, почему.
• Индекс лояльности. Эта метрика позволяет узнать, насколько человек готов порекомендовать курс и/или платформу друзьям и знакомым.

Еще можно оценивать LTV (пожизненная ценность клиента) — метрика показывает прибыль от отношений с клиентом за весь период. Вы могли заметить, что каждый ключевой критерий в списке — скорее маркетинговый. Эти показатели ориентированы на привлечение клиентов, их лояльность и отражают проблемные моменты, которые мешают это делать. Однако есть еще такие факторы, как педагогический подход, учебный контент, соотношение теории и практики, загруженность и прочее. Именно они влияют на удовлетворенность слушателей и их намерение пройти онлайн курс до конца. Без хорошей методической базы тяжелее добиться выдающихся маркетинговых результатов.

Иными словами, чтобы оценить качество обучения и то, насколько эффективен курс или проект, нужно учитывать и учебные метрики:

• Промежуточные и финальные итоги: сдача домашних заданий, практических работ, написание тестов и экзаменов.
• Присутствие на занятиях, просмотр вебинаров в записи.
• Скорость и интенсивность выполнения работ учащимися.
• Качество обратной связи от преподавателей и наставников.
• Структурированность, полезность, актуальность учебного контента.
• Вовлеченность слушателей: активность в чатах и на занятиях.

На практике эффективность системы дистанционного обучения можно проверить с помощью популярной модели Киркпатрик. Схема позволяет проверить, насколько полезна программа и полезен курс для целей бизнеса.

Модель или шкала профессора Киркпатрика включает 4 уровня. Первый — реакция: понравился ли курс? Второй — усвоение: проверка знаний, проведение тестов. Третий — применение: используются ли полученные умения на практике? Четвертый — итог: как обучение повлияло на работу компании?

При благоприятном исходе организация выходит в плюс. Работники начинают выполнять профессиональные задачи лучше, используют изученное для повышения продуктивности. 

Другой ученый, Филлипс, добавил к модели Киркпатрика еще один критерий — ROI (Return on Investment). Это оценка окупаемости вложений одного курса. Смог ли обучающийся заработать больше, чем потратил на курс, и если да, то в какой срок?

Для наибольшей достоверности отслеживать перечисленные метрики необходимо регулярно. Это помогает не пропустить ключевые факторы, влияющие на качество образовательной программы. По итогам исследований нужно проводить работу над ошибками — вносить изменения в курс.

Бесплатно получите новую профессию и помощь с поиском работы

За 2-4 месяца вы сможете освоить специальность 
в остальном направлении: IT, маркетинг, дизайн, маркетплейсы, психология, менеджмент, сервис

Начать учиться

Что такое эффективность обучения

Эффективность в широком смысле — способность получить результат с наименьшими затратами. В контексте онлайн-образования это означает, что курс эффективен, когда он принес информацию, которая помогла окупить вложения и инвестиции в курс и онлайн-обучение.

Этот показатель можно измерять в конкретных цифрах. Например, сотрудник научился работать с новой программой, контентом и стал тратить на 20% меньше времени на рутинные задачи. Для бизнеса, по расхожему выражению, время = деньги, а значит, в теории можно посчитать и изменения в доходах.

Оценка эффективности образовательной программы проводится по внутренним и внешним критериям. К первым относят успеваемость, уровень знаний, степень отработки компетенций. Ко вторым — готовность к профессиональной деятельности, образованность, темпы роста самообразования и прочее. 

Ожидаемый итог дистанционного обучения — это способность выпускника выполнить задачу на некотором уровне. Если говорить о программировании, то после прохождения курса для новичков, слушатель станет junior-разработчиком и сможет претендовать на соответствующие вакансии. Еще перед началом учебы человек понимает, на что может рассчитывать.

Когда вы выбираете образовательный курс, обращайте внимание на его структуру и содержание, компетентность преподавателей, их педагогический и профессиональный опыт, формат учебы, наличие отзывов, информацию о трудоустройстве выпускников и рейтинг платформы в целом. 

Бесплатно освойте нужную профессию и станьте дипломированным специалистом

Пройдите бесплатное обучение актуальным специальностям или курсы повышения квалификации в любом направлении: IT, маркетинг, дизайн, маркетплейсы, психология, аналитика, менеджмент, сервис.

• Бесплатные программы для разных категорий граждан: от безработных и мам в декрете до пенсионеров
• Помощь с поиском работы: от составления резюме до трудоустройства
• Онлайн-обучение из любого города России и гибкий график

Выбрать курс

Что входит в оценку результатов обучения

Для оценки эффективности курса, корпоративного обучения или обычного обучения нужно выполнить несколько важных шагов. 

Разберем их: 

1. Проанализировать результаты обучения студентов, включая показатели до и после прохождения курса, выполнение промежуточных и заключительных заданий. Возможно, предстоит еще раз проанализировать результаты после внедрения изменений.
2. Рассчитать метрики конкретной группы обучающихся, включая промежуточные и заключительные показатели CSI (индекс удовлетворенности клиентов) и COR (показывает, какой процент студентов дошел до финала обучения), а также заключительный NPS (замеряет уровень лояльности клиентов, готовности рекомендовать продукт другим). 
3. Получить обратную связь от сотрудников, от студентов, преподавателей, аудитории и коллег-методистов по результатам обучения.

В зависимости от данных метрик уже можно принять решение о дальнейшей судьбе курса: оставить его без изменений, прекратить его проведение, изменить формат, содержание, частоту приема новых групп и т. д. При необходимости внести изменения в курс составляется план модификаций на основе полученной обратной связи. Оценки эффективности обучения и его улучшение привлекут к нему больше потенциальных клиентов.

Частые ошибки при оценке в обучении

Какие ошибки часто совершают при оценке обучения? Существуют два распространенных упущения, которые многие допускают: 

— Мнение о курсе и образовательном проекте спрашивают в самом конце обучения. Если вы не получите обратную связь в начале и середине курса, то вы упустите возможность узнать мнение тех людей, которые покинули обучение по каким-то причинам. Эта информация может быть очень полезной: если вы поймете, что именно не понравилось учащимся в курсе, то сможете внести изменения, а разработка курса будет проще.

— Домашние задания проверяет сам эксперт и создатель курса. Из-за занятости автора студенты иногда вынуждены долго ждать обратной связи по выполненным заданиям. В таких случаях лучше поручить проверку куратору или тьютору — хотя бы частично. Также стоит нанять методиста, чтобы он помогал улучшать программу. Полезно организовать чат для оперативного ответа на вопросы студентов. Это положительно скажется на уровне удовлетворенности учащихся.

Знание этих ошибок поможет вам избежать их, вовремя дорабатывать онлайн-обучение и разрабатывать новые линейки продуктов.

Как оценить эффективность обучения на онлайн-курсе

Чтобы понять, насколько эффективна программа и полезен ли курс, и избежать количество возвратов средств, вернемся к уже упомянутой модели Киркпатрика и рассмотрим каждый из четырех уровней повнимательнее. 

На первой ступени оценки эффективности онлайн-обучения ученый советует оценивать удовлетворенность тех, кто прошел курс. Классический инструмент — опрос, интервью, форма обратной связи. Если выпускник заполнит анкету, где оценит определенные элементы курса по шкале от 0 до 10, от 1 до 10, от 1 до 6 или от 1 до 5, организатор курса сможет провести статистический анализ, который покажет, в какой степени каждый из факторов влияет на общую оценку. Интервью позволит копнуть глубже и погрузиться в субъективное восприятие конкретного обучающегося. 

У слушателей, проходящих курс, можно спросить:

• Понравилось ли вам обучение?
• Понятно ли преподаватель объяснял материал?
• Что можно улучшить?
• Какие трудности возникали во время обучения?

Второй уровень предполагает, что вы будете оценивать набор полученных знаний и навыков. Чтобы проверить hard skills, хитрости не нужны. Онлайн-тестов, практических заданий, экзаменов будет достаточно. У клиентов образовательных платформ прогресс отображается в личном кабинете.

С soft skills придется постараться. Они раскрываются при решении кейсов, участии в учебных симуляциях. Компании иногда прибегают к помощи ассессмент центров. 

На третьей ступени организатор может оценивать, изменилось ли поведение выпускников на практике. Если курс эффективен, они должны начать применять полученные компетенции. Чтобы уточнить этот вопрос, можно пообщаться с руководителями и коллегами. Нужно задать студентам вопрос об обучении, собрать фактические данные о времени выполнения задач, количестве ошибок и прочего.

На финальной стадии результат оценивается в комплексе. Например, возросла конверсия, сократилось время работы, уменьшилось число отказов, улучшился сервис.

Если включать в эту схему ROI, возврат от инвестиций, можно посчитать и оценивать окупаемость вложений. Показатель измеряется в процентах и высчитывается по формуле «(дополнительные доходы от обучения — расходы)/расходы». 

Очевидно, что когда доп.доходы больше затрат коэффициент выйдет в плюс, а когда меньше — в минус. ROI, следовательно, может быть как положительным, так и отрицательным. Однако на объемы прибыли влияют и другие факторы. Нельзя сбрасывать со счетов экономическую ситуацию, рыночные колебания, внедрение иных мер повышения эффективности и прочее.

Выводы

Грамотно выстроенный курс — инструмент, который может открыть путь в мир новой современной специальности. После завершения курса можно получить диплом установленного образца, помощь в поиске работы. Дистанционное обучение помогает изучить актуальные навыки с минимальными усилиями. Слушатель, выбравший курс, занимается в удобное для него время по разработанной опытными методистами программе. Обучающийся может задать вопрос эксперту, пообщаться с наставником в чате, завести полезные знакомства. На многих курсах или корпоративном обучении используют такую функцию онлайн-платформы, как система напоминаний о самых важных активностях, например, лекциях, проектах и важных вебинарах. Она помогает держать фокус на обучении и не пропускать дедлайны. 

Федеральная программа «Содействие занятости» предлагает бесплатное обучение для нескольких категорий граждан:

• Мамы в отпуске по уходу за ребенком до 3 лет
• Мамы детей до 7 лет, находящиеся в поиске работы
• Граждане, у которых есть только аттестат о школьном образовании
• Россияне старше 50 лет
• Предпенсионеры
• Безработные, зарегистрированные в органах службы занятости
• Те, кто ищет работу 4 месяца с момента окончания учебы

Если вы относитесь к одной из этих категорий, приходите учиться новому на практический курс для новичков. На площадке есть бесплатные курсы по программированию, маркетингу, дизайну, менеджменту, психологии, финансам и другим направлениям. Вы сможете слушать лекции в записи на отдельной платформе LMS Odin, а домашние задания в процессе обучения выполнять в удобное время.

После завершения обучения также вы получите диплом о профессиональной переподготовке или удостоверение о повышении квалификации.

Изучайте каталог на сайте, выбирайте курс, который хотите пройти, и оставляйте заявку на обучение!