AI Makes Me Hate

хочу протестить давний миф, что написание скиллов и инструкций на английском экономит дохералион токенов.

По разным источникам скиллы на англ экономней скиллов на русском х1.5. Есть ли у вас замеры или интересные доклады/статьи с пруфами?

пока по https://platform.openai.com/tokenizer разница будто некритичная было 2,912 стало 2,453

Чем умнее модель, тем вычурней галлюцинации

Каждый релиз новой модели соннет или fable, неважно, встречают как очередную революцию. Но чем больше мы в команде строим обвязки и агентов, тем очевиднее, что сама модель не главный множитель качества.

Свежий кейс. Разбирался с багом в BDUI. Была задержка при открытии ботом шита. Я знал, что баг тривиальный. Фейбл полдня водил меня кругами. то рассказывал про проблемы с диспетчеризацией, предлагал уходить в нативные SDK и создавать пропосал там (хотя доступ к ним у него был), валил все на iOS 26.

В итоге банальный дебаунс в моем же BDUI-коде.

Причем нашел я его, когда перестал скармливать модели описание симптомов и дал минимальный репро с логами. С правильным контекстом модель сошлась на ответе за пару итераций.

Мне понравилось как в аи комьюнити модель это лишь один из шести этапов качества результата. И не решающий.

Качество делится на такие слои:
• Модель это догадки и рассуждения
• Цикл. Дает фреймворк для работы
• Инструменты.
• Контекст
• Память
• Валидация

Когда агент тупит, тупит не он целиком, а конкретный слой. И по симптому почти всегда видно, какой. В моем случае это была модель. Но чинился он на слое контекста.

Ну и главный вывод — умная модель не перестает галлюцинировать. Она просто галлюцинирует убедительнее.

Читаю всякие стать, книги и тп. И понимаю, что лучший метод обучения — это практика. Она легко фильтрует булщит.

Думаю сделать хакатоны в стиле:
• построй свой харнесс
• настрой команду агентов
• оркестраторы
• rag, skill, context менеджмент

Как думаете? Будем разделяться на миникоманды. Делать защиты, прогонять на тестах?

Ставь 👍 если интересно

еще нарезки интересных заметок

очень хорошее лакончиное объяснение агента

кстати, тут в комментах поделились лайфхаком как не платить конские комиссии за подписку.

За антифрод не гарантирую, но говорят работает

оказывается на ютубе клода есть Claude FM

https://www.youtube.com/watch?v=tRsQsTMvPNg

кодекс, пока

Так, фидбэк спустя неделю на кодексе

- дико тупит. Код пишет некомпилируемый. Выдумывает дичь.
- в задачах «сравни анроид и сделай также в иос» очень плох. Может в простых тасках 20 минут проверять разные стейты к которым уже обращался
- жрет дико много токенов на codex effort medium.
- я начал много материться с ним

В общем не выдержу месяца на нем, завтра куплю клода.

Че думаем

Это я через пару лет

короче статус по кодексу.

подписка 100$.
За 2 дня недельные лимиты сожрало на 40%.
с клодом ни разу в неделю и за 50% не выходил.

Сегодня кстати с ней по рассуждал почему бэтмен борется с преступностью не инвестициями и уровнем образования, а выбегает в костюме летучей мыши и бьет по лицу

Очень советую и вам. Разбор идет не глупый, а с точки зрения драматургии, мифологии, режиссуры и глубоких социальных проблем