Решил посмотреть архивные оценки Artificial Analysis (они делают один из самых уважаемых независимых бенчмарков) для разных версий Gemini:
Gemini 1.0 Pro (декабрь 2023) - 6
Gemini 1.5 Pro (май 2024) - 19
Gemini 2.0 Pro (февраль 2025) - 35
Gemini 2.5 Pro (март 2025) - 54
Gemini 2.5 Pro (июнь 2025) - 60
Gemini 3.0 Pro (ноябрь 2025) - 73
Это оценка Intelligence Index, интегрирующая ключевые показатели, связанные с общими знаниями, сложностью рассуждений и некоторыми специализированными способностями (к математике и т.п.).
Легко забыть насколько быстро всё развивается и насколько феноменальны изменения. Большая часть критики способностей ИИ основана на оценках и впечатлениях от моделей годичной и двухлетней давности или ещё более ранних релизах - но ИИ за это время перешёл от уровня весьма одарённого, хотя и очень своенравного ребёнка к уровню учёного, показывающего потрясающие результаты и готовящегося вот-вот сделать эпохальное открытие.
Post #419
903
- ❤ 14
- 🔥 2