Digital Tools for Creative Education

Метрики для обучающих продуктов/программ обучения

Небольшой, но крутой компанией мы сделали памятку по метрикам. Постарались сделать ее довольно универсальной, поэтому не все влезло 😊 И фокус получился больше на продукт, который мы делаем и продаем за деньги.

Добавлю текстом, что стоит измерять в корпоративном обучении.

❗️Спрашивать нужно:
🔹И заказчика (руководителя), и обучаемых, когда речь идет не об электронных курсах, а о каких-то групповых историях.
🔹Спрашивать одно и то же нужно два раза минимум: сразу в моменте окончания обучения и в оговоренный с заказчиком срок для контроля приживаемости. Это 3 месяца для прагматических программ и 6 месяцев для управленческих.
❗️Мы в корпобуче спрашиваем, чтобы что-то сделать: улучшить, масштабировать и т.п. в условиях ограниченного человеческого ресурса. Плюс мы ориентируемся на бизнес-цели и те критерии, которые важны заказчикам и обучаемым.

🔻CSI (есть в памятке) - это просто общий индикатор по всей Talent функции и action trigger (повод вмешаться), если видим спад по конкретным программам, тренерам, службам (например, организации обучения).
▪️Вопрос: "Насколько вы удовлетворены..." (1 — совсем не удовлетворен, 5 — полностью удовлетворен). Стоит включать "программой в целом" и обычно не более 3х вопросов по аспектам, которые являются специфически (работой тренера, организацией обучения, дополнительным материалам job aid). Если это прям огромная программа с проектным треком, можно поднять количество этих вопросов до 5ти.
▪️Математика: среднее арифметическое

🔻ROTI - return of time investment - "окупаемость временных затрат". Важная оценка для бизнес-обучения.
▪️Вопрос: Насколько обучение было ценным по сравнению с затраченным временем (1 — совсем не стоит времени, 5 — полностью оправдано)
▪️Математика: % оценок 4 и 5.

🔻Alignment - соответствие бизнес-целям.
▪️ Вопрос: Оцените степень соответствия обучения бизнес-целям (1 — совсем не связано, 5 — полностью соответствует)
▪️Математика: % оценок 4 и 5.

🔻Time to deliver - скорость реализации. Если нет богической HR-цифровизации, мы не можем автоматически считать это время как закрытие тикетов в системе. Ну, и заказчик может пульнуть запрос, а потом сам попросить обождать. В общем, его субъективная оценка - это ок.
▪️Вопрос: Оцените скорость реализации запроса командой обучения (1 — слишком долго, 5 — очень быстро)
▪️Математика: среднее арифметическое, где целевой показатель по функции 3.5 и выше.

Иногда имеет смысл спросить про эффективность затраченных денежных средств, но это если заказчик платил со своего бюджета, конечно.
🔻Value for Money -соотношение ценность/затраты
▪️Вопрос: Дало ли обучение достаточную ценность для бизнеса с учётом вложенного бюджета? (1 — не стоит затраченных средств, 5 — средства потрачены эффективно)
▪️Математика: % оценок 4 и 5.

Вот теперь я довольна. А памятку сохраняйте - она довольно хорошо сделана и будет полезна в любом случае.


🧙‍♀️Канал Ани Бабиной  Телеграм | Макс | Сетка

Остаемся на связи

Дружочки, я-то Телеграм подниму примерно всегда ибо без кружочков сына из Лондона как-то не готова обходиться 😊 Но знаю, что VPN и прочие штуки для некоторых моих читателей могут быть проблемой.

Буду очень-очень рада сохранить всех своих читателей - благодаря каналу у меня появилось много интересных знакомств и ощущение, что профессиональный мир в хорошем смысле слова тесен и многогранен.

Подпишитесь на мой канал, пожалуйста, в удобной для вас сети.

🧙‍♀️Канал Ани Бабиной Макс
🧙‍♀️Канал Ани Бабиной Сетка

Моя биполярочка, моё расщепление личности, мой богатый духовный мир будет щаслиф, а не как на фоточке выше

Обработка ИИ обратной связи Miro VS ChatGPT

В Миро теперь ИИ работает. И лучше всего он справляется со стикерами. Например, если вам куда-то накидали стикеров с обратной связью и комментариями, он на доске может их разделить на позитив/нейтрал/негатив и покрасить, может перегруппировать по темам и эти темы обозначить на стикерах нового цвета. Может разложить на темы/подтемы по уровням.

Затестила
🔻Точно не надо этого для работы с командами - именно в таких задачах, люди обсуждают и вдумываются.
🔹Если это накидали вам как обратную связь по мероприятию - может быть полезно для сбора аналитики
👎 Попросила его Шаг 1 разделить высказывания на позитив/негатив/нейтрал - сделал. Попросила его Шаг 2 внутри каждой группы поделить на темы - удалил все нейтральные стикеры.

Еще он может сделать количественно-качественную семантическую аналитику группы стикеров с обратной связью и т.п. Делает это текстом в диалоговом окне.

Сделала копипаст стикеров в ChatGPT для сравнения результатов.

Шаг 1 - выделить высказывания в отдельные строки и посчитать. ✅
Шаг 2 - сделать деление на позитив, нейтрал, негатив и выделить ключевые темы в каждой группе✅ в формате удобной таблицы
Шаг 3 - дать рекомендации✅

Сравнила результаты обеих ИИшниц с моим человеческим взглядом на эту ОС и между собой.

1️⃣ Скорость обработки. ChatGPT вне конкуренции 💚
2️⃣ Логика деления на позитив/негатив/нейтрал - мы все молодцы.
3️⃣ Логика деления по темам. Я -богиня, но ChatGPT💚. Он понимает разницу между высказываниями про командные коммуникации и прозрачность решений - сделал две группы.
4️⃣ Дополнительная работа с семантикой. Конечно ChatGPT, но уже начинает врать, если не обновлять исходный контент. Но это с ним всегда так.
5️⃣ Рекомендации. Miro - дает рекомендации, которые будут ближе его ЦА - диджиталам, продуктовым ребятам. ChatGPT по умолчанию - идет как корп.нейтральный.

ИТОГО

🔹 Если прям много-много стикеров с ОС на доске, их удобно визуализировать как нейтрал/позитив/негатив при помощи встроенного ИИ. Наколхозил тепловую карту - это иногда нужно.
🔹Можно ему доверить объединять по темам внутри этих групп.
❗️Он держит в памяти предыдущие итерации, пока вы не нажмете "Добавить на канвас". Лучше всего каждую итерацию копипастить на доску
❗️Контент ИИ-чата не сохранится при перезагрузке доски. Лучше его сразу забирать, если он вам нужен.

НО

Если хочется это все проанализировать, лучше засовывать в ChatGPT.

1️⃣ Просто тупо выделяем все стикеры на Миро и смотрим, сколько их (количество выделенных объектов)
2️⃣ Делаем копипаст в ЧатГПТ. Он их принимает как предложения с enter между стикерами. Просим сделать таблицу, где 1 высказывание - 1 ячейка. Проверяем количество.
3️⃣ Далее именно в чате делаем промпты на аналитику. ❗️Лучше заново подгружать документ, когда хотим смотреть в новом разрезе.

‼️Типовые проблемы с этой вашей ОС
▪️Люди в одно высказывание запулили стопицот тем и смыслов.
- Миро - не вывезет
- ChatGPT - в несколько итераций может вывезти. 1. Подсветить в таблице такие высказывания 2. Сделать из них несколько 3. Добавить в таблицу
▪️Высказывания типа "насрал в каменты" - какие-то знаки препинания или нечленораздельное
- Миро - не вывезет
- ChatGPT - надо давать промпты по выявлению и удалению до анализа, если нет иного в вашей методологии

🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

ИИ в Miro - личный пользовательский опыт

Нет, нельзя взять из Miroverse крутой канвас, нажать на кнопку и получить аналог на русском. Расходимся.

Я часто использую библиотеку Miroverse, чтобы учиться, адаптировать крутые шаблоны для своих целей и т.п. Там есть треш, жемчужины и бриллианты. Всегда ручками делаю перевод. Хотелось найти способ ускорить ИИ-шкой.

1. Взяла группу простых элементов: Форма с текстом и Текст. Попросила сделать копию на русском. Промптила на английском. Результат - документ с кодом.
2. Отпинала. Результат - картинка (не форма с текстом) и с ошибками.
3. Отпинала. Получила стикер на русском без орфографических ошибок, но с кусками кода.
4. Побилась головой апстену.
5. Попросила картинку - Сказал, что сделал, но не сделал. - Отпинала - Получила картинку.

❌ В общем, тырить чужие канвасы и делать автоперевод не получается.
✅ Русские и английские говнопромпты понимает и переходит в чате на русский. И это для многих может быть важно.
❤️ Что полезного удалось все же сделать, расскажу позже. Некоторые L&D/T&D задачки при создании проекта на Миро уже можно деладть прям там, а не таскать туда-сюда с ChatGPT


🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

Моделирование исследований при помощи ИИ:
что полезно знать L&D

Один из юзкейсов использования ИИ нашими бизнес-заказчиками - это моделирование разного типа исследований:
▪️фокус-группы по хорошо прописанным персонам,
▪️опросов целевой аудитории по какой-то идее, изменениям в продукте, маркетинговой компании
и т.п.

L&D могут и для собственных нужд моделировать исследования:

▪️Прописал максимально подробно и четко профиль компании, культуру (по-честному, а не то, что в HR-гайдбуке, конечно), персоны потенциальных обучаемых, дизайн исследования - и можно обстучать об ChatGPT свои гипотезы о проектах обучения. Из плюсов - он не поленится давать развернутые ответы, хех.
▪️Можно скормить ему материалы прототипов тренингов или др.разработки, заставить его сделать скрипты кастдев интервью, хорошенько прописав персоны, контекст и цели, а потом его же и заставить проанализировать и сделать гипотезы и аналитику. Получится дольше, но прям намного инсайтовей.

Я и сама в своих мастер-классах показываю, как это делать. Но всегда поясняла риски, ограничения и варианты, как эти ИИ-шные результаты можно применять, а как - не стоит.

Поэтому с огромным интересом посмотрела лекцию Криса Чапмена с критикой использования ИИ для моделирования исследований. Вот чем хочется поделиться.

❌ ОПАСЕНИЯ И КРИТИКА

1️⃣ ИИ накормлен старыми данными, их много, он не может воспроизвести какой-то сдвиг, который уже пошел, но еще не стал трендом.

2️⃣ ИИ генерит ответы статистически. Это вам не гений литературы, который сделает странный диалог, по которому вы своей человеческой эмпатией, прагматикой, контекстом выловите глубинные гипотезы и зададите уточняющий вопрос, который приведет вас к инсайту.

3️⃣ Нет никакого рабочего механизма получить от ИИ релевантную критику данного типа работ. Это вам не код.


✅ ПОЛЕЗНЫЕ СЦЕНАРИИ

1️⃣ Моделировать дополнительных участников мозгового штурма. Они внезапно могут натолкнуть реальных участников на инсайт.

2️⃣ Тестировать анкеты, опросники и др.материалы, которые вы дадите людям. Вот тут ИИ очень полезен, когда у вас не толпа компетентных сотрудников добросовестно чекает, когда у вас глаз замылился от своего думания и внесения правок.

3️⃣ Моделировать оценку концептов, но не принимать к исполнению результат, а подумать дальше.

4️⃣ Подготовка исследований. ИИ очень хорошо их проектирует под присмотром эксперта и берет на себя рутинную часть этой работы.

❗️Главная мысль: Synthetic survey data — это не данные, а модель предположений о людях.

Сама лекция и спикер стоят того, чтобы посмотреть целиком, особенно если вы не так чтобы имеете много личного опыта по такому сценарию использования ИИ.

🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

Буду членом жюри VIII конкурса "Мастер бизнес-обучения" и очень надеюсь на интересные и качественные работы

Как проходит конкурс:
🔸 Два этапа: анализ готовой программы и разработка собственной в ответ на задачу реального корпоративного заказчика.
🔸 Каждый этап проходит дистанционно в комфортном для участников темпе (нужно сделать задание в обозначенный срок и прислать организаторам).

Кому будет полезно:
🔸 методистам и методологам корпоративного обучения,
🔸 бизнес-тренерам и тренерам-фрилансерам, которые хотят усилить методическую часть и портфолио,
🔸 сотрудникам корпоративных университетов и обучающих подразделений.

Что даёт участие:
🔸 признание профессионального сообщества,
🔸 знакомство с потенциальными работодателями и заказчиками,
🔸 обратная связь от экспертного жюри (для финалистов),
🔸 разнообразные призы от партнёров,
🔸 профессиональный вызов на реальных кейсах.

Регистрация открыта до 29 марта 2026. Старт первого этапа — 30 марта.

Узнать подробности и подать заявку

🧙‍♀️Торжественно обещаю не душнить, а быть максимально полезной в своей обратной связи участникам.

Фреймворк для оценки убеждающего выступления

На спонтанном читательском клубе осознала, что для взаимной оценки выступлений не надо мудрить - можно просто взять фреймворк от Аристотеля.

В своём трактате «Риторика» Аристотель объяснил, что для эффективного убеждения оратор должен воздействовать сразу на три уровня:

✅Ethos - доверие к говорящему
«Мы доверяем людям, которые кажутся благоразумными, добродетельными и доброжелательными».
Это про авторитет, опыт, честность и компетентность источника.

✅Logos - логика аргумента
«Убеждение происходит через доказательство, когда мы демонстрируем истину посредством логических доводов».
Это структура, доказательства, факты, данные.

✅Pathos - эмоциональное воздействие
«Оратор должен вызвать те эмоции, которые будут полезны в данной ситуации».
Это история, визуальные элементы, эмоции, вовлечение.

Собственно, когда вы готовите к выступлению экспертов и проводите групповые занятия, можно просто дать им вот такой фрейм для оценки друг друга. Он помогает структурировать обратную связь и подсветить, что в первую очередь нужно улучшить.

Можно сделать голосовалку хоть в телеграм, внести среднее значение, а потом обсуждать. детали и проговаривать голосом. Люди реально будут слушать друг друга более осознанно и вовлеченно и параллельно улучшать свои выступления.

🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

Стартап дня - зачем L&D читать канал Александра Горного

Раз в неделю (это для меня часто) я читаю подборку 10 каналов, которые видимо не имеют связи с обучением и образованием. Один из них - канал Саши, и вот почему.

1️⃣ Саша на понятном описывает интересные новые технологичные стартапы - как люди придумали на основе технологий сделать что-то, решающее проблему массового пользователя.
🔻Просто интересно и полезно для всевозможных креативных сессий, тренингов, кейсов и т.п. с бизнесом в обучении - готовый контент.

2️⃣ Люблю рубрику "Повтор поста". Саша иногда возвращается к стартапам, о которых писал несколько лет назад, повторяет пост и дает апдейт: как у стартапа дела сегодня, что с ним произошло.
🔻Очень удобно делать кейсы для обучения на этом контенте 😊 И опять же - просто интересно. Можно читать Повтор с начала, сформировать гипотезу и проверить ее по Сашиному апдейту.

Саша тут правда лучше ЧатаГПТ, ссылки на все проекты настоящие, при желании не так сложно добрать информации, если что-то заинтересовало.

В общем, рекомендую.

Курс AI-Fluency (беглое и уверенное использование ИИ) от Anthropic

В очередной раз снимаю шляпу перед методологами Anthropic. Прошла этот курс с тем же азартом, с которым можно залипнуть в хорошей книге.

1️⃣ Полное название курса AI Fluency: Framework & Foundations.
❗️Это история не про "более лучшие промпты", а про новый майндсет и новые навыки взаимодействия с эмммм интерактивным объектом.

▪️Человек обычно взаимодействует с ИИ в трех режимах: автоматизация (ты ему сказал, что делать - он делает), совместная работа (вы вместе думаете в диалоге), настройка агента (он сам что-то делает без твоего участия).
▪️Ресурсность ИИ не в автоматизации, а в соучастии и агентности - тут он бустит результаты в интеллектуальном и креативном труде
▪️Наличие ИИ дает возможности, но и требует от нас освоения новых навыков, адаптации своей работы под взаимодействие с таким партнером и/или сотрудником

2️⃣ В курсе ты проходишь по 4D Competence Framework - Anthropic выделили 4 ключевые компетенции для уверенного и эффективного использования ИИ, рассказывают о них, дают упражнения (их можно делать и в Claude, и в других моделях - я делала в ChatGPT).

▪️Description - как описывать ситуацию и задачу
▪️Delegation - как делегировать задачи
▪️Discrenment - как понимать, что ии может, что он сделал, как его перенаправить и т.п.
▪️Diligence - как быть добросовестным относительно результата, за который все равно отвечаете вы

Это все очень похоже на освоение управленческих навыков и интеллектуальную эмпатию с вербальным проявлением, где объект управления не имеет субъектности, но имеет сложное внутреннее устройство, а мы хотим влиять на его поведение.

3️⃣ Упражнения в курсе

▪️Не имеют четкой цели типа как в курсах по промптингу
▪️Они построены по принципу "Попробуй - Отрефлексируй" (я рассказывала много, почему это эффективно при обучении а) сложному б) в неопределенности)
▪️Авторы рекомендуют работать с разными моделями и оттачивать наблюдательность: чем они отличаются, как с какой лучше взаимодействовать и т.п.
▪️Пробы и рефлексия - направленные, т.е. тебе дают хорошие гайды.

4️⃣ Про "промптинг" тоже есть, но это не шаблоны, а методы в рамках того самого 4D. Суть в том, что именно во взаимодействии с машиной вы сможете получить от нее нужный именно вам результат.

На мои глаза, курс стоит пройти, чтобы систематизировать свои стихийно наработанные скиллы - на мне прям отлично сработало. Ну, и реабилитировать наличие в онлайн-курсах открытых заданий в формате "попробуй и отрефлексируй" - это прям было приятно.

🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

Map It: The Hands-on Guide to Strategic Training Design (Cathy Moore)
крутой учебник для тех, кто хочет работать в бизнес-обучении

С одной стороны, дико бесячая книжка: ну, что они с L&D и T&D разговаривают как с тупыми училками. С другой... ну, автор же реально очень качественно отрабатывает ровно то, что меня бесит в коллегах...

1️⃣ Первая глава начинается с квиза Are you infected? - Загажен ли твой моск типовыми багами обучателя, которые не дают тебе нормально работать с бизнесом? - и он хорош!
Дальше разбираются типовые косяки педагогического дизайнера в контексте бизнес-среды. И да, Кэти это видит, потому что она работала и в education, и в L&D для бизнеса.
🧙‍♀️По моим наблюдениям, люди из обучения и развития, которые горды тем, что всю карьеру в бизнесе, намного чаще грешат косяками образованца. Скорее всего, они соотносят свой опыт объекта образования (школа и вуз) с контентом всяких курсов типа "методист корпоративного обучения", которые строятся как образованческие по форме и духу. Да и в среде мало где можно увидеть другое. И они как раз не видят, что делают все ту же школку, когда работают с бизнесом.

2️⃣ Вторая глава неплохо разжевывает тему: If we don't teach, what do we do? На одном и том же кейсе (ТЗ: онлайн-курс по безопасности для работников больницы) Кэти показывает, каким путем идет образованец, а каким - обучатель бизнеса, сравнивает их логику и в проекте курса, и тезисно. Мысль очевидная: бизнес-обучалово решает проблему, а не дает знания. Но формат ее раскрытия очень и очень доходчивый. А дальше реально толковое дерево решений.

3️⃣ Третья глава о том, как вести заказчика в нужно ему же самому направлении. И это не только инструкция, там божественные скрипты похожих на реальные диалогов с заказчиком и их разбор.

4️⃣5️⃣6️⃣ Максимально подробно поясняет, как пройти по фреймворку для прояснения желаемых изменений в поведении обучаемых.

7️⃣ Седьмая глава и далее - это вам вместо курса по педагогическому дизайну и проектированию образовательного опыта. Это фреймворк здорового человека с кучей примеров, лайфхаков и инструкций без зауми, а по делу.

❤️ Я уже давно читаю только те книжки, где речевой стиль классный и нет смысла сокращать до тезисов, потому что "мясо" дает инсайты, даже если ты "все это знаешь".

Но если вдруг читать не хочется, зайдите на сайт Кэти Мур и просто воспользуйтесь ее фреймворками для работы. Уже польза.

❤️❤️С искренней благодарностью к моим студентам, благодаря которым я вернулась к чтению по профессии в больших объемах.


🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка

«Демонстратор» — сервис для совместной работы над интерактивным контентом

Итак, хватит держать это в себе и в узком кругу единомышленников — пора отправить продукт в мир.

Вот сайт: https://app.longread.agency

Вот целевые сценарии использования.

Вот коротко про воркфлоу в сервисе.

Если вкратце про «что это и зачем»:

Это инструмент для создания наглядных прототипов будущих интерактивных уроков с функцией сбора комментариев.

Лично я считаю, что inline-комментарии к любому блоку прямо в интерфейс рабочей области без беготни по почтам и обработки гуглодоков с вордами — это отличная фича для всех участников процесса разработки независимо от религиозной принадлежности (лонгриды vs. слайды) и выбранной экосистемы (iSpring, Courseditor, Scroll, Lynda, ДелайКурс).

Пробуйте. Я пока отложу сервис в сторонку и пойду подышу воздухом.

Если что-то упало — напишите @philanek, разберёмся.

Приходите в среду 18.02, в 17:00 на эфир в канале: покажу, как работает, и отвечу на вопросы.

Написать про баг, идею, отзыв или впечатления можно по кнопке «Написать нам» в Личном кабинете или по иконке «конверта» в режиме редакторе (справа на панели кнопок, увидите).

Поехали! (с)

P.S. Забыл важные ключевые слова:

✅ Импорт из буфера обмена Word и Google Docs
✅ Мобильная версия редактора
✅ «Поделиться» проектом с автообновлением и паролем
✅ Есть ИИ, на первом этапе сервисный, активно раскроется позже.

Стоимость в месяц — 1290 рублей.
В честь старта — 790 рублей.

А первым 25 пользователям — 399 рублей по промокоду ЗАПУСК.

〰️〰️〰️

🔥 — огонь, тестируем
😐 — ожидали другого
🗿 — это что щас было?..

#edtech #elearning #медиа #инновации #мой_контент

Cynefin - инструмент для командных сессий в ситуации неопределенности

Это совершенно магический фреймворк, когда все в перегрузе и как будто вообще непонятно, что делать. Он мне тяжеловато давался, а тут узнала лайфхак и делюсь.

В этом фреймворке сначала надо разделить все-все проблемы на 4 группы:
▪️Simple (простое, понятно, как решать)
▪️Complicated (не оч.простое, но в целом плавали, знаем)
▪️Complex (сложная системная хрень)
▪️Chaotic (вообще ничего не понятно, как это вот порешать)

А потом проcто расписывать решения по паттернам:
▪️ Simple - Лучшие практики - Осознали - Типизировали - Порешали
▪️Complicated - Экспертные практики - Осознали - Проанализировали - Порешали
▪️Complex - Эмерджентные (рождаемые по ходу дела) практики - Поэкспериментировали - Осознали - Порешали
▪️Chaotic - Инновационные практики - Ткнули палкой (сделали действие) - Осознали - Порешали

🔻Мне всегда сложно давалось донести разницу между Complex и Complicated и Complex и Chaotic так, чтобы я была собой довольна. И вот тут наткнулась на лего-игру, которая очень помогает и сама по себе работает как ворм-ап.

❤️ Этот фреймворк доходчиво показывает, почему арт-практики крепко связаны с обучением лидерству в изменениях. Они научают идти от эксперимента и от действия, а не от анализа. "Сначала сделай, потом подумай", - опираемся на авторитет Майкрософт и внедряем.


🧙‍♀️Канал Ани Бабиной Телеграм | Макс | Сетка