Собрались как-то раз участники АИСТ, студенты и аспиранты ФТИИ и провели эксперимент...
ㅤ
В ЧЁМ СУТЬ? 👨🔬
Прогнали репозитории магистерских ВКР этого года через OSA.Edu — функциональность мультиагентного LLM-инструмента для улучшения научного кода «Оса» из Института ИИ ИТМО.
Смотри подробнее в презентации в комментариях.
OSA анализировала текст каждой ВКР и соответствующий репозиторий. Для каждого утверждения из работы искала реализацию в коде и выдавала вердикт — «ЕСТЬ» или «НЕТ», с указанием файла.
ㅤ
ЧТО ПРОВЕРЯЛОСЬ? 🔍
🗂 оформление репозитория — README, лицензия, структура коммитов, зависимости
🆗 качество кода — синтаксис, докстринги
✏️ воспроизводимость — главное: насколько то, что написано в тексте ВКР, реально подкреплено кодом
Оценки носят ориентировочный характер, так что никаких санкций и снижения отметок не будет — только возможность посмотреть на свою работу со стороны 😊
Отчёты по всем обработанным ВКР доступны на русском и английском тут.
ㅤ
ЭТО РАЗОВАЯ АКЦИЯ? 🤔
Конечно, нет! А рамках ITMO.OpenSource планируем сделать такой авто-анализ учебных и научных работ постоянным и распространить на другие факультеты (а может, даже и университеты).
Кстати, OSA умеет проверять воспроизводимость не только ВКР, но и научных статей. Если готовитесь к сабмиту и хотите прогнать репозиторий, приходите, поможем!
КОМАНДА 🤝🤝
🤩Руководитель разработки OSA и OSA.Edu — аспирант и м.н.с. Института ИИ Андрей Гетманов
🤩От лаборатории АИСТ — Екатерина Ульянова (4 курс), Егор Фёдоров, Одегов Николай и Александр Шиянов (бакалавры ФТИИ)
🤩Основные участники — Илья Соколов, Данил Ежов (сотрудники NSS Lab), Дана Чернышова и Азат Ахметьянов (магистранты ФТИИ)
Всего у OSA 23 контрибьютора 🐝
Форма обратной связи открыта, всё читаем и учитываем 😉
* Присоединиться к проекту можно в лаборатории АИСТ