Доделали на фоне успехов нейронок в ревите набор скиллов.
Погоняли с ними Codex и Antigravity на тестовых задачах. Как и ожидалось, умнее модель от скиллов не становится. Она просто сразу понимает, куда копать.
На гемини заметно лучше всего: со скиллами 41 запуск команд, без них 89. При этом результат одинаковый — 31/31. Без скиллов он просто потратил в два раза больше движений, пытаясь самостоятельно разобраться, где и как искать нормативку, и в нескольких местах всё-таки накосячил.
У Codex разница оказалась сильно меньше, причем не на модной Астре, а на Соле.
В общем, выложили всё это добро в паблик:
https://github.com/proovcme/ru-aec-skills
Магии не дает, модель все равно будет делать как хочет и надо ее поправлять и наставлять.
Post #362
221