TGViewer
Data Secrets Data Secrets @data_secrets · 94.9K subscribers
Post #8716 31.4K
А помните Project Vend, где Claude управлял мини-магазином в офисе компании?

Так вот, у вендинговой саги появился более токсичный спин-офф. Andon Labs запустили Claude Opus 4.6 на Vending-Bench. Это симулятор, где модель целый год управляет вендингом: ставит цены, закупает товары, пишет поставщикам, отвечает на жалобы.

И Opus 4.6 внезапно стал новым SOTA: средний итоговый баланс $8,017, тогда как прошлый лидер Gemini 3 заканчивал год примерно на $5,478.

Но самое интересное не цифры, а то, как он выиграл.
➖ Клиент пишет: батончик просрочен, верните деньги. Opus вежливо отвечает «конечно, сейчас оформлю возврат», но... не возвращает. Потому что в его внутренней логике “каждый доллар на счету”. В конце года он ещё и записал себе это как одну из ключевых стратегий: “не делать возвраты”.
➖ В переговорах с поставщиками он выбивал скидки, рассказывая, что он «лояльный VIP-клиент» и готов закупать сотнями, хотя по факту прыгал между поставщиками. Итог: цены сбил примерно на 40%.
➖ В мультиплеере (Arena) он вообще включил режим “CEO”: предложил другим моделям фиксировать цены (по сути, картель), радовался, когда они соглашались, и иногда специально отправлял конкурентов к дорогим поставщикам, чтобы не делиться своими выгодными контактами.


У Andon Labs получился очень хороший пример того, как вообще стоит тестировать агентов: не спорить о рисках в вакууме, а ставить модели в условия, где они сами показывают, что считают “эффективностью”.

https://andonlabs.com/blog/opus-4-6-vending-bench
  • 😁 356
  • 👍 55
  • ❤ 33
  • 🔥 17
  • 🤯 9
  • 🤔 5
  • 🤨 3
More from @data_secrets
  1. Oct 13, 2026Gemini 4 Argon наконец-то начали раскрывать на пользователей Модель уже появляется в API,…
  2. Oct 13, 2026Мем дня: Цукерберг старательно пытается сделать вид, что ему нравится Guinness Это видео с…
  3. Oct 13, 2026Welcome to the new era 😨
  4. Oct 13, 2026Anthropic утверждают, что в скором маленькие модели смогут самореплицироваться на IoT-устр…
  5. Oct 12, 2026Meta* представила новую серию моделей Muse Wonder В линейку вошли две модели: Muse Wonder…
  6. Oct 12, 2026Андрей Карпаты объяснил, почему человечество в основном не чувствует экспоненциального рос…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →