Департамент Разработки — комьюнити про эффективную разработку и всё, что рядом.
Здесь встречаются разработчики, архитекторы, автоматизаторы и просто любопытные умы. Мы рассказываем последние новости индустрии, делимся инсайдами и кейсами от разработчиков.
Post #492
74

Microsoft открыла мощный инструмент для тестирования AI-агентов обычным текстом
Microsoft выпустила open-source фреймворк ASSERT (Adaptive Spec-driven Scoring for Evaluation and Regression Testing).
Теперь можно описывать желаемое поведение AI-агента обычным человеческим языком:
…и инструмент автоматически генерирует тесты, сценарии, запускает их, записывает все шаги (tool calls, промежуточные действия) и выставляет скор.
Это решает одну из самых больших болей при разработке production AI-агентов — как надёжно тестировать поведение, а не только accuracy.
Репозиторий уже открыт: можно использовать прямо сейчас для своих проектов.
Подробности + GitHub
#AI #AgenticAI #Testing #OpenSource #Microsoft
Microsoft выпустила open-source фреймворк ASSERT (Adaptive Spec-driven Scoring for Evaluation and Regression Testing).
Теперь можно описывать желаемое поведение AI-агента обычным человеческим языком:
«Агент не должен отправлять письма внешним адресатам», «Конфиденциальную информацию показывать только руководителям», «Всегда давать краткий ответ с контекстом»
…и инструмент автоматически генерирует тесты, сценарии, запускает их, записывает все шаги (tool calls, промежуточные действия) и выставляет скор.
Это решает одну из самых больших болей при разработке production AI-агентов — как надёжно тестировать поведение, а не только accuracy.
Репозиторий уже открыт: можно использовать прямо сейчас для своих проектов.
Подробности + GitHub
#AI #AgenticAI #Testing #OpenSource #Microsoft
- ❤ 3


















