TGViewer
Анализ данных (Data analysis) Анализ данных (Data analysis) @data_analysis_ml · 51.4K subscribers
Post #4592 7.7K
🧠🚫 Как отучить LLM “думать по кругу” и сэкономить токены

У продвинутых LLM есть скрытая проблема: overthinking.

Модель уже нашла ответ…
но продолжает писать лишние рассуждения, самопроверки и повторяет одно и то же разными словами.

В итоге вы платите не за ум модели - а за повторение.
По оценкам, до 70% токенов уходит именно на такую “избыточную рефлексию”.

YuanLab выпустили Yuan3.0 Flash, где модель учат останавливаться вовремя.

Что внутри:

✅ RIRM - reward-механизм: модель получает сигнал *когда пора завершать ответ*
(нашёл решение - закончи, не раздувай)

✅ RAPO - адаптивная оптимизация policy, ускоряющая обучение на 50%+

Что это даёт:
- до 75% дешевле инференс
- без потери качества
- быстрее ответы, меньше затрат

Главная идея:

Запуск LLM будет не только за “самый умный ответ”,
а за самый дешёвый и быстрый умный ответ.

🚀Model: https://modelscope.cn/models/Yuanlab/Yuan3.0-Flash
🔧Github: https://github.com/Yuan-lab-LLM/Yuan3.0
📄 Paper: https://modelscope.cn/papers/2601.01718

#LLM #AI #Tokens #Inference #Optimization
  • 👍 29
  • ❤ 18
  • 🔥 6
  • 🤔 1
More from @data_analysis_ml
  1. Oct 15, 2026Post #5957
  2. Oct 15, 2026С вас идея, а Т-Банк за нее заплатит В Т-Банке ищут трейдеров, разработчиков и тех, кто пр…
  3. Oct 15, 2026openTPU: открытый ускоритель для декода LLM на SystemVerilog, пока только в симуляции FeSe…
  4. Oct 15, 2026🧠 BERT жив. UltraBERT показал, что рецепт обучения может быть важнее дополнительных трилл…
  5. Oct 15, 2026Google показала ИИ-агента для геоданных: оценка зон риска Эболы за часы вместо недель Goog…
  6. Oct 14, 2026🤖 ИИ-агенты с Tencent Cloud прочитали расследование о самих себе и вышли на связь Исследо…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →