TGViewer
Agentic Engineer Agentic Engineer @data_engi · 685 subscribers
Post #1319 163
У агента нашли внутреннюю ручку «вызывать инструмент или нет» 🧐

Исследователи UC Santa Cruz и UC Berkeley обнаружили в LLM линейное направление, которое управляет склонностью модели обращаться к инструментам.

Если прибавлять или вычитать этот вектор в одном из внутренних слоёв, частота tool calls меняется почти от 0 до 100% — без дообучения и изменения промпта. При этом модель в основном сохраняет правильный выбор между поиском, калькулятором и Python.

В эксперименте с реальным поиском точность Qwen3-4B на редких фактах выросла с 29% до 56% при среднем расходе 1,1 запроса на вопрос. Метод сработал на пяти моделях разных архитектур и перенёсся на шесть незнакомых инструментов.

Для тебя это потенциальная ручка между стоимостью и надёжностью агента: в критичных сценариях можно чаще отправлять модель за проверкой, а в дешёвых — подавлять лишние вызовы.

Но подход требует доступа к внутренним активациям модели, поэтому поверх закрытого API его не применить. Слишком сильное вмешательство также начинает ломать формат tool call.

Пруфы:
🔘исследование от 25 августа 2026 года
🔘код экспериментов

#aiagents #toolcalling #representationsteering #llm #inference #agentengineering

@data_engi
arXiv.org Tunable Tool-Call Rates in LLM Agents via Representation Steering Deciding whether to call a tool is a core competence of an LLM agent, and a costly one to get wrong: needless calls add latency, accrue cost, and may trigger irreversible side effects, while...
More from @data_engi
  1. Oct 3, 2026Agentic Engineer pinned a photo
  2. Oct 3, 2026Давно хотел сделать удобную управляемую солнечную систему с картиной текущего положения пл…
  3. Oct 3, 2026Видеопродакшн в стиле 3blue1brown с Gemini 4 #ml #courses #coolstorybob Давно чесались рук…
  4. Oct 3, 2026Правильный ответ скрыл неправильный процесс в 92% запусков агента 😱 Исследователи IBM про…
  5. Oct 3, 2026Kafka может перераспределять партиции без остановки всей группы 😙 1 октября AWS подтверди…
  6. Oct 3, 2026@if_memes #meme #memes #mem #мем #мемы
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →