Ant Group открыла финансовую модель Ling-3.0-flash-Fin и новый бенчмарк FinFIRST

Ling-3.0-flash-Fin - это специализированная модель для реальных финансовых задач, а FinFIRST - бенчмарк, который проверяет не только финальный ответ, но и весь процесс исследования.

Что умеет модель:

- искать и проверять источники;
- анализировать отчётность;
- строить оценки и valuation-модели;
- обновлять сложные таблицы;
- готовить редактируемые финансовые отчёты;
- работать в приватных развёртываниях.

По архитектуре это 124B MoE, но на каждый токен активируется только 5.1B параметров. Контекст - около 256K.

После финансового дообучения её результат в AA Intelligence Index вырос с 38 до 41.

На FinFIRST модель набрала 82.45% по проверке источников, что выделяет её среди протестированных открытых моделей.

Сам FinFIRST включает 123 задачи, написанные экспертами, и оценивает их по 701 атомарному критерию: проверяются источники, определения, ход анализа и корректность вывода, а не только конечный ответ.

Модель:
https://modelscope.ai/models/inclusionAI/Ling-3.0-flash-Fin

Бенчмарк:
https://modelscope.ai/datasets/inclusionAI/FinFIRST