Человек, группа, система. Поговорим про метрики образовательных продуктов😎

Решила перечитать книгу любимой Джулии Дирксен «Talk to elephant». Понравилось как она описывает, что метрики можно измерять на трех уровнях: индивидуальном, групповом и системном. Давайте разберемся, как это работает.

1️⃣ Индивидуальный уровень

Здесь оцениваются результаты конкретного ученика.

Пример:
🔹 Поведение: студент проходит курс и выполняет задания.
🔹 Результат: он получает высокий балл за тест или успешно применяет знания на работе.

Такой подход хорошо работает в случаях, когда важно отследить прогресс отдельных людей, например, в тестировании знаний или в навыковом обучении.

2️⃣ Групповой уровень

Этот уровень оценивает результаты группы или команды, сравнивая их между собой. Пример:
🔹 Поведение: 10 сотрудников компании прошли тренинг по продажам.
🔹 Результат: один менеджер увеличил продажи на 180%, а остальные – на 100%.

Такой анализ помогает понять не только, как работает курс, но и выявить закономерности внутри группы, например, кто лучше усвоил материал и почему.

3️⃣ Системный уровень

Здесь измеряются глобальные последствия обучения в масштабах всей организации или индустрии. Пример:
🔹 Поведение: больница внедрила курс по гигиене рук для врачей.
🔹 Результат: общее количество инфекций снизилось, но чтобы понять, насколько, нужно сравнить с данными других больниц.

На этом уровне результаты становятся видимыми только при наличии статистики и сравнительных данных.

Какой уровень важнее?
Джулия утверждает, что все три уровня дополняют друг друга. Если ваш образовательный продукт оценивается только на индивидуальном уровне, вы можете упустить более широкую картину. А если сразу смотреть на систему, но не отслеживать индивидуальные изменения, можно не понять, какие конкретно элементы обучения работают лучше всего.

Люблю такие простые подходы🖤