В первые выходные декабря подвели итоги Хакатона от Альфа-Будущее 🙂 — всероссийского соревнования для студентов по AI и ML-разработке.
Было 2 трека: настройка вопросно-ответной функции RAG и создание Copilot-приложения для малого бизнеса.
Мы сделали трек RAG — сложный, инженерный и максимально прикладной.
🔥 Задание отбора
Разработать retriever-pipeline, имитирующий реальную работу вопросно-ответной функции — для 6977 вопросов из 1938 веб-страниц участники подбирали топ-5 самых релевантных. Оценка работы ретривера проходила с помощью взвешенной метрики Hit@k.
🔥 Задание финала
Участникам предстояло сформировать полноценную вопросно-ответную функцию с модулем генерации и локально обучить LLM отвечать на вопросы по размеченным ранее данным. Качество ответов оценивалось агрегационной метрикой BERTScore, учитывающей соответствие ответов эталонным. Особое внимание было уделено работе команд с вопросами, на которые в базе знаний нет ответа.
🏆 В отборочном этапе участие приняли студенты из 230+ вузов со всей России. В финале в двух треках соревновалось 20 команд, авторы 6 лучших решений получили денежные призы от Альфа-Банка и фаст-трек в команду.
❤️ Спасибо всем участникам и до встречи в следующем году!
#aaa_events