Потестил composer 2.5. Обновил бенчмарк.
Что могу сказать:
👍 Модель SOTA - да, однозначно
👍 Лучше чем composer 2 - бесспорно и существенно
👍 Быстро, удобно, дешево, красиво - несомненно
👍 Уровень чуть выше чем GLM 5.1 по моим оценкам - это очень хорошо
👎 Claude и DeepSeek и даже Kimmi 2.6 для кодинга в 1С пока выглядят приятнее.
Вцелом если вам нравится Cursor, вы используете правила и MCP c SDD, то разницу с Claude можете даже не почувствовать. Но если пустой репозиторий на ровном месте, то пока Composer конечно слабее.
⚠️ Текущий бенч конечно не учитывает четкость следования инструкциям, более агентское поведение и многие другие сложные факторы, будет обновлён с выходом чего-нибудь нового от Anthropic. Но для общего ориентира более чем достаточно. Все примеры сгенерированного кода внутри есть.
P.S. про конференцию же не забыли? Там на круглом столе обязательно обсудим и поделимся кто какие модели использует.
Post #1690
1.9K

- 👍 18
- ❤ 1
- 👏 1