Всем привет, нашел интересный playbook для оценки ИИ агентов, в котором разбирается:
- Общее концептуальное понимание того, что такое ИИ агент
- Основные сложности при создании и оценке ИИ агентов
- Основные области оценки и на чем стоит фокусироваться
- Важности мониторинга и оценки в продакшене

В общем если вы интересуетесь оценкой ИИ агентов, советую почитать, думаю какие-то моменты можно взять себе на заметку.


Полезная информация:
Курс по evaluation AI |
Мой фреймворк для оценки AI |
С чего начать изучение AI | Инструменты для оценки AI |
Инструменты для оценки AI (ч.2)