Post #22730
3




По результатам бенчмарков GPT-6.1 Sol больше похоже на GPT-6 Astra чем на GPT-6 Sol – возникает вопрос: почему так? У меня возникло подозрение, что это может быть зажатая по рассуждениям GPT-6 Astra, но это не подтвердилось, она больше Астры генерирует токенов (но всё равно немного в сравнение с другими моделями, то есть она честно дешёвая), поэтому остаётся только предположить, что GPT-6 Sol релизнули совсем недоваренной. Обращает на себя внимание, что она на программерских бенчмарках показывает себя даже лучше чем GPT-6 Astra (причём на xhigh лучше чем на max!), но меня больше интересовали результаты GDPval-AA v2.1 – я считаю этот бенчмарк главным, мне программерские уже неинтересны, на них давно человеческий уровень побит, интересно, как в остальных профессиях ИИ справляется с работой, а на этом бенчмарке GPT-6 Astra просела относительно GPT-5.6 Sol, а GPT-6 Sol просела ещё больше – GPT-6.1 Sol отыграла потери, но не полностью – GPT-5.6 Sol на этом бенчмарке по прежнему лучшая из моделей OpenAI