TGViewer
IT Does Matter IT Does Matter @comol_it_does_matter · 4.62K subscribers
Post #2169 2.02K
IT Does Matter Обещают обогнать и opus и Fable. Посмотрим. Думаю ждать осталось недолго. Особенно прикольно выглядит 100% по ExploitBench. Ровно то о чем сегодня говорил. Они в curl 10ки дыр находят. Что уже про приложения говорить. Кажется с классическими saas, какими мы…
Что то настроения что уже "всё, вышла AGI, Скайнет уже тут".
Вы сильно то не обольщайтесь:
🤨 OpenAI на IPO скоро. Маркетинг будет агрессивным насколько это возможно
🤨 Как показала практика современные модели учатся "проходить бенчи", а то что они становятся умнее на ваших задачах - побочный эффект :)
🤨 То что systemprompt "зашьют" из harness внутрь модели конечно сделает ей прохождение бенчей намного лучше, но вот ваша работа он этого лучше не станет. Она будет "заточена" на определенные задачи
🤨 То что в super ultra max reasoning эффект модель будет 8 раз перепроверять себя, напишет 10-ок тестов и будет сверять выведенные hash-и слова "hallow world" для одноименной программы позволит ей выбить с 10-ок лишних баллов в бенче, но вам ей будет пользоваться практически нереально в таком виде

Так что разжали 🍞 и спокойно ждём выхода Astra, а потом будем её тестить, искать косяки и адаптировать правила - как обычно.
  • 😁 9
  • ❤ 5
  • 👍 5
More from @comol_it_does_matter
  1. Oct 2, 2026"Скоро во всех прикладных решениях на 1С"... Немного скринов от участников чата... ну и де…
  2. Oct 2, 2026Ай ай Антропики... Если что в тесте показано как модели Тупеют со временем после релиза. O…
  3. Oct 1, 2026Post #2267
  4. Oct 1, 2026Коллеги, про 📝 Напарник ничего говорить в канале, тестировать и писать я не буду. Что то…
  5. Oct 1, 2026Обновился бенч. Закончилось тестирование новых GPT Sol 6.1 и Claude Sonnet 5.5. Модели +-…
  6. Oct 1, 2026Ну что, dots все попробовали? OpenAI конечно умеют в маркетинг. Work видимо не пошло как т…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →