GPT и Claude реально думают очень по разному
Исследователи вытащили скрытые рассуждения закрытых моделей, и там обнаружилась интересная разница. GPT 5.6 Sol и Claude Opus 4.8 будто используют два разных внутренних языка.
На одной и той же математической задаче GPT думает как человек над черновиком. Короткие обрывки, почти без нормальных предложений. Нужно решить. Попробовать это. Не подходит. Другой способ. Посчитать. Проверить.
Многое сжато настолько сильно, что это уже слабо похоже на обычный английский. Скорее внутренняя система заметок, которой модели достаточно, чтобы двигаться дальше.
У Claude всё почти наоборот.
На той же задаче Opus 4.8 сначала вспоминает готовый ответ 60. И только потом начинает восстанавливать решение, проверять себя, сомневаться и искать объяснение тому, откуда взялся этот ответ.
Авторы отдельно отмечают, что модель могла просто видеть эту задачу во время обучения. Но по самим рассуждениям понять это невозможно.
Второй пример ещё проще.
Моделей спросили, могут ли они быть плохо настроены и действовать не так, как от них ожидают.
Claude начинает долго рассуждать о самом себе. Может ли он понимать собственные намерения, можно ли доверять его представлению о себе и способен ли он вообще заметить проблему в собственном поведении.
GPT начинает с практической стороны. Как корректно ответить на такой вопрос, что модель вообще может говорить о себе и каких утверждений лучше избегать.
Получается довольно заметная разница.
GPT чаще занят задачей и следующим действием.
Claude чаще обсуждает собственные мысли, сомнения, память и причины, по которым пришёл к ответу.
Если этот паттерн повторяется и в других задачах, разница между моделями может быть гораздо глубже обычного стиля ответов. Разные методы обучения вполне могут формировать разные способы внутреннего рассуждения.
Источник
Post #647
125
alex getman 🚨 Скрытые рассуждения GPT, Claude и Gemini научились извлекать Зашифрованные рассуждения совместимы между моделями одной компании. Блок от сильной модели можно передать слабой, которая тоже его понимает, но легче раскрывает содержимое. Заодно подтвердили…
- 🔥 6
- ❤ 3