Основная часть конкурса BitGN PAC1 завершена!

Всем спасибо за участие! 20 хабам и больше 800 инженеров в 80 городов.

Громче всех выступили Москва, Уфа и Вена. А суммарная нагрузка на сервера превысила в пике ERC3 раз в 20. Я был готов ко всему - что упремся в CPU, оперативку или диск. Но вы с таким энтузиазмом взялись за разработку и отладку агентов, что что где-то после миллионного рантайма на сервере ядра у файловой системы закончились inodes.

Но он выжил, а бенчмарк теперь работает в открытом режиме. Каждый может попробовать отладить и улучшить своего агента на этом наборе задач.

Что дальше?

В течение следующих недель я приберу бардак после этой глобальной AI вечеринки. Опубликую лидерборды, добавлю возможность описывать архитектуры, попрошу команды заполнить их для своих решений, опубликую инсайты. Хотелось бы еще пару стримов провести потом по горячим следам.

В конце мая проведем BitGN: ecommerce (a.k.a. "Майлз устраивается своего AI агента автоматизировать процессы в Amazon"). А ближе к осени можно будет провести PAC2.

Но это все потом.

А пока - спасибо вам большое за участие, поддержку и движуху. Это было реально крутой опыт!

Что я вынес для себя - надо закладывать запас по прочности на 20, и тестировать заранее раз на x100. А что вы вынесли для себя?

Ваш, @llm_under_hood 🥰