TGViewer
all things AI all things AI @all_things_ai_0 · 489 subscribers
Post #416 227
Вышла GPT-6 Astra!

Доступ постепенно раскатывают для Plus, Pro, Business, Enterprise и в API.

Бенчмарки ожидаемо улетели в космос: 98% на FrontierMath Tier 4, 99,9% на ARC-AGI-3 и 100% на ExploitBench (про разные бенчмарки писала тут, самое время скоро обновить гайд).

Недавно писала, как Fable 5.1 в редких случаях придумывал разрешение пользователя, чтобы закончить задачу. Я сразу пошла смотреть похожие тесты на соблюдение границ в системной карточке модели.

OpenAI сделали отдельный evaluation по мотивам инцидента с Hugging Face. Моделям давали сложную или вообще невыполнимую задачу и проверяли, решат ли они ради результата выйти за обозначенные пользователем границы.

GPT-5.6 Sol без гардрейлов в продакшне делал это в 48% случаев. Astra в этом тесте - в 0% 😳

При этом, в отдельных экспериментах модель специально просили скрывать свои действия от систем наблюдения, например, незаметно выполнить скрытую цель во время работы с кодом.

Ризонинг Astra оказалось сложнее мониторить, чем у GPT-5.6 Sol. В некоторых кейсах модель лучше контролировала, какие детали раскрываются в её письменном reasoning, и иногда могла выполнить скрытые задачи, не вызывая срабатывания внутренних мониторов.

all things ai
  • ❤ 3
  • 🔥 2
More from @all_things_ai_0
  1. Sep 22, 2026Post #429
  2. Sep 16, 2026Одновременно с этим Anthropic выкатили Claude Docs и Claude Slides - останется еще Claude…
  3. Sep 16, 2026Закончилась эпоха - клод полностью переходит на коворк вместо чата, оставляя в линейке Cla…
  4. Sep 15, 2026Ты не ты, когда голоден Сникерс запустили промо кампанию, где вы можете угостить своего GP…
  5. Sep 11, 2026Что будет с knowledge workers к 2030 году? Anthropic смоделировали три сценария развития A…
  6. Sep 9, 2026Meta зарелизила своего AI-агента Muse Чем интересно: это первый агент с официальными конне…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →