Недавно вышел подробный исследовательский отчет о работе трёх профессоров университетов Стокгольма и Гонконга «Учебный ущерб от использования генеративного ИИ: данные из китайского среднего образования».
 
Авторы проанализировали 30-месячную панель из 26 811 китайских школьников (7–12 классы).

Каждый месяц у них были:
оценки и затраченное время на домашние задания по 9 предметам;
результаты закрытых проверочных работ (без доступа к ИИ);
а позже — баллы Zhongkao и Gaokao (два ключевых госэкзамена в Китае: первый обычно определяет, попадёт ли ученик в старшую школу и какого уровня она будет; а второй - во многих случаях является решающим фактором при поступлении в ВУЗ).

Поскольку разные ученики подключались к чат-ботам в разное время, исследователи использовали дизайн «разница-в-разницах»: сравнивали траектории тех, кто уже перешёл на ИИ, с теми, кто ещё нет.
 
Ключевые результаты

- Домашние задания. Сразу после перехода на чат-боты средний балл за домашку подскакивает примерно на 18 %, а время на её выполнение падает на треть.
- Закрытые ежемесячные контрольные. Через шесть месяцев использования ИИ показатели тех же учеников проседают на 20 %.
- Zhongkao - госэкзамен после 9-го класса.  Полный эффект учебы с ИИ проявляется лишь через два года: минус 24 % от прежних результатов.
- Gaokao - госэкзамен после 12-го класса.
Та же двухлетняя инерция, но просадка чуть меньше — около 18 %.
 
Кого бьёт сильнее

Предметы: сильнее всего просели обществознание и история (–27 %), затем STEM ( –22 %), меньше всего — английский и китайский.
Группы: больше теряют младшие классы старшеклассников, отличники и мальчики.
 
Механизм

Около 80 % «ИИ-пользователей» предельно сокращали время на домашнюю работу, получая при этом высокие «бот-баллы». Именно у них отмечались основные провалы на экзаменах — типичный паттерн «аутсорсинг домашек».
Те же, кто продолжал тратить на задания столько же времени, сколько и до ИИ, почти не пострадали в учёбе.
 
Вывод
·       Чат-боты позволяют делать домашнюю работу быстрее и чище, но «съедают» пятый балл на экзамене.
·       В Китае это значит 20%-е понижение шансов социального лифта, поскольку госэкзамены сильно влияют на дальнейшую образовательную траекторию и, косвенно, на карьерные перспективы.

Иными словами, дети на бумаге показывают хорошие результаты, но проваливаются на экзаменах.

Что, собственно, очень напоминает происходящее в нашей системе образования: кого интересует, какие знания получают дети и учатся ли вообще, если таблички красивые?

А на ЕГЭ натаскаем, тем же ИИ.

П.С. Отчет можно скачать тут: «Искусственный интеллект разрушает образование. Автоматизация и путь наименьшего сопротивления»

Источник