Ребята из Mendral построили агента для анализа CI-сбоев. Архитектура двухуровневая: дешёвый Haiku смотрит на каждый сбой и решает, видела ли система это раньше. Если проблема известная, то останавливается, если нет, то информация передаётся в Opus.
В итоге 80% сбоев до дорогой модели вообще не доходят. А счёт за использование Opus + Haiku ниже, чем был на чистом Sonnet.
Маленькие модели сильно подросли за последнее время. Особенно заметно это в связке с MCP и SKILLs — там, где сценарий чётко описан, точность вырастает ощутимо. Я сам недавно попробовал переключиться с Opus на MiniMax для одной из задач и модель справилась без проблем, потому что шла по заранее спроектированному сценарию в SKILLs.
Если последний раз пробовали маленькие модели давно — возможно, стоит попробовать ещё раз, уже с нормальным харнессом (SKILLs + MCP).
Конкретный кейс Mendral с цифрами и архитектурой читайте и комментируйте на Хабре.
@ai_for_devs