Метрики в обучении

Как понять, что обучение работает? Пожалуй, это самый вопрос в проектировании обучения. И для тех, кто его финансирует и для тех, кто его делает. Как вообще можно понять, что все, что сделано, приносит пользу?

Если все сократить, то ответ простой. Эффективность обучения измеряется через показатели деятельности.
✅До обучения показатель деятельности был такой.
✅Стремились к такому-то изменению.
✅Замер после обучения показал такое-то изменение.
Есть положительная динамика - обучение работает. Нет - что-то пошло не так.

Но сделать это часто крайне не просто, особенно, если речь идет о гибких навыках. Они иногда проявляются сложно и долго. И не каждая компания серьезно занимается постоянными замерами по всем тем направлениям, по которым она учит.

На что смотреть тогда?

Есть несколько метрик, которые могут показать общую картину. Их лучше всего использовать в комплексе, то есть несколько сразу.

1. Уровень вовлеченности. Количество сотрудников, которые активно участвовали в учебных мероприятиях. Участвовали в вебинарах, задавали вопросы онлайн и в группах, готовили самостоятельные работы, проходили курсы. Сейчас некоторые платформы для вебинаров позволяют собрать данные автоматически. О чем говорит: если сотрудники вовлечены, то тема для них интересна и актуальна - значит, скорее всего, будут думать как использовать. Нет вовлечения - не понимают тему и ее смысла - не будут думать, как использовать.
2. Применение на рабочем месте. Эта метрика собирается через опросы сотрудников через некоторое время после обучения (лучше всего - через 3-5 недель). Спрашиваем, что используют, а что нет. Можно прямыми вопросами, можно через ситуационные задачи. Применяют хотя бы 50% - уже хороший результат. Применяют мало - нужно разбираться почему.
3. Завершенность обучения + участие в обучении. Эти 2 метрики подходят больше для необязательного обучения, потому как в обязательном они нам ничего не скажут. Особенно если обязательное настолько обязательное, что без него премии не будет. Здесь считаем:
- сколько сотрудников пришло на обучение из тех, кому это обучение нужно;
- сколько сотрудников завершили обучение из тех, кто его начал.

Для метрики участия нужно сначала определить расчетное значение, то есть что для компании норма. Для метрики завершенности нужно помнить, что 100% даже на обязательном обучении не будет, потому что люди болеют, увольняются и вообще всякое бывает. Норма завершенности - 70-80%, ниже - не очень хорошо.

Мне еще нравится метрика “Время выхода на нужную компетенцию”. Она применима для серии курсов и программ и для всей системы обучения в целом. Тут задача замерить, в течении какого времени сотрудник выходит на тот уровень компетенций, который ему нужен по должности. В начале должно быть определено расчетное значение, то есть, что мы считаем нормальным временем. Потом замеряем.

Но еще раз скажу, что единственный точный способ узнать эффект от обучения, это замерять показатели деятельности до и после. Потому что у вас может быть не очень хороший уровень завершенности, но при этом хорошие показатели деятельности.