В ноябре 2025 инструменты для кодинга с AI перешли через порог. Сдвиг был большой и случился очень быстро.
Чтобы это стало видно, один гений прогнал 22 модели на одном и том же промпте, по пять прогонов на каждую. Целью которого было: собрать с нуля рабочие аналоговые часы на HTML, CSS и JavaScript. От самых старых моделей (2023 года) к самым новым (2026 года). Один промпт. Одинаковые условия.
На картинке сравнение GPT-4o и Claude Opus 4.5. Разница говорит сама за себя.
Рабочие аналоговые часы это на удивление хороший бенчмарк. Модель должна понимать, что значит аналог, нарисовать нормальный циферблат, правильно расставить три стрелки и анимировать их каждую секунду. Стабильно сделать это правильно в пяти независимых прогонах подряд это честная и заметная планка.
Пролистать все 22 модели можно по ссылке. Там видно ровно где именно происходит этот сдвиг ☺️
Post #2690
10.3K
