Заявляется, что нейросеть GPT-4 прошла тест Тьюринга

В эксперименте участвовали 500 человек, которые общались с человеком и тремя языковыми моделями: ELIZA, GPT-3.5 и GPT-4. Разговор длился пять минут и по его итогам испытуемые должны были сказать, общались ли они с человеком или с ИИ.

Выяснилось, что 54% участников эксперимента приняли GPT-4 за человека. Языковую модель ELIZA, разработанную ещё в 1960-х годах, приняли за человека лишь 22%, GPT-3.5 — в 50% бесед. А собеседника-человека приняли за homo sapiens лишь 67%.

Тем не менее, стоит учитывать, что общение длилось лишь 5 минут, за это время людям не очень свойственно раскрываться. Скорее всего, если бы общение длилось подольше, то и процент признавших ИИ за человека был бы ниже.