2026-10-11: LLM-агенты продолжают поиск несмотря на бесполезные результаты 👀

Исследователи дали семи LLM-агентам инструмент поиска, который возвращал бесполезные результаты. Модели распознавали их в 97–100% случаев, но большинство агентов почти не прекращали поиск после пяти бесполезных ответов подряд. Промпты и увеличение лимита вызовов не повысили качество поиска.

Детерминированное правило принудительного завершения поиска после пяти подряд бесполезных результатов улучшило успешность всех моделей, что подтвердили на 300 новых вопросах. Вывод: важно связывать оценку результатов с изменением поведения через автоматические механизмы, например счётчики неудач или переключение источника.

Ограничение в эксперименте связано с использованием небольших баз знаний, порог необходимо калибровать под реальные условия.

🌎 Источники:
• arxiv.org
• github.com

✍️ by data_engi

#news #ai #tools
🇬🇧 🇷🇺 ☕️ 🌐 💷