Наши учёные представили ряд статей про искусственный интеллект и генеративные модели, среди которых:
➡️ SWE-MERA
динамический бенчмарк для автоматизированной оценки качества больших языковых моделей в задачах программной инженерии
➡️ LIBRA
бенчмарк из 18 задач на русском языке, предназначенных для оценки LLM на длинном контексте
➡️ 2Columns1Row
бенчмарк на русском языке с открытым исходным кодом, который оценивает способность моделей делать выводы о взаимосвязях между строками и столбцами таблиц
➡️ Logos
крупнейший датасет по русскому жестовому языку, который используется для предобучения универсального энкодера всех жестовых языков
❤️ — если хотите знать о достижениях российской науки больше!