🔍 OpenAI признала ошибку на презентации GPT-5

Во время прямой трансляции презентации модели GPT-5 компания OpenAI представила несколько диаграмм, которые должны были продемонстрировать мощь новой модели. Однако анализ показал, что некоторые графики содержат серьезные неточности.

На одной из диаграмм, демонстрирующей результаты по оценке склонности к обману у различных моделей, данные оказались несоответствующими. Например, значение, указанное для GPT-5 (50,0 %), оказалось выше, чем у модели o3 (47,4 %), хотя наглядно столбец для o3 был выше. Более того, в корпоративном блоге OpenAI указано совсем иное значение для GPT-5 — 16,5 %.

Генеральный директор OpenAI, Сэм Альтман, признал ошибку и отметил, что в корпоративном блоге уже опубликованы исправленные данные. На данный момент неясно, использовалась ли сам текстовой ИИ для создания диаграмм, что вызывает вопросы о доверии к заявленным результатам, особенно о снижении уровня "галлюцинаций" в новой модели.

📸 Некорректное отображение данных
Источник изображения: x.com/shreyk0

📸 Сравнение между моделями
Источник изображения: x.com/EgeErdil2

🔗 Читать оригинал