Нейронки и тест на креативность

Учёные под руководством Карима Джерби из Монреальского университета протестировали на креативность больше 100 тысяч человек и несколько нейросетей: GPT-4, Claude, Gemini. Задача называлась Divergent Association Task (DAT) — нужно было назвать десять слов, максимально далёких друг от друга по смыслу. Также отдельно проверяли творческое письмо: хайку, сценарии, рассказы.

Что получилось: нейросети обошли «среднестатистического» человека. Но 10% самых креативных участников выборки обошли все протестированные модели без исключения.

Джерби формулирует это так: «Наши данные показывают, что некоторые системы на основе больших языковых моделей уже превосходят среднестатистического человека по креативности в чётко очерченных задачах». Но добавляет, что соревнование между человеком и нейронкой обманчивое, и стоит отказаться от такого восприятия.

Вывод автора: справится ли ИИ с креативными задачами? С задачами, где требуется средний результат, — да. Для по-настоящему креативных задач ИИ не подойдёт.