Что мы на самом деле читаем: текст или представление о нём?

Исследователи из Университета Виллановы проверили, насколько хорошо люди умеют отличать рассказы, написанные человеком, от текстов, созданных ChatGPT, и какие из них им нравятся больше.

В первом эксперименте участникам показывали один из шести рассказов и сообщали, кто якобы его написал. Причём эта информация не всегда была правдивой.

В двух следующих экспериментах участникам давали по одному человеческому и одному сгенерированному рассказу на одну тему уже без подсказок и просили определить их происхождение.

Результаты показали, что люди практически не способны надёжно отличать ИИ-тексты от человеческих. В одном эксперименте правильно определили авторство около 40% участников, в другом — 52%.

При этом рассказы, созданные ИИ, в среднем получили более высокие оценки за качество и способность увлечь читателя. А самые высокие оценки участники давали текстам, которые считали написанными человеком.

Интересно, что опыт чтения художественной литературы почти не помогал распознавать ИИ-тексты, тогда как люди, хорошо знакомые с генеративным ИИ, справлялись заметно лучше. Исследователи предполагают, что со временем пользователи учатся замечать характерные особенности стиля ИИ.

Одним из возможных объяснений популярности ИИ-рассказов авторы исследования называют их простоту: такие тексты легче читать и воспринимать.

Получается любопытная вещь: мы оцениваем не только то, что читаем, но и то, что знаем об авторе.

#актуально