✨ ладно это прям большое
Сбер выложил GigaChat 3.1 Ultra и Lightning в опенсорс. MIT лицензия. не research-only, не «для некоммерческого использования» — полноценная MIT
цифры:
— Ultra: 702B параметров (36B активных на токен, MoE)
— по их замерам обходит Qwen3-235B-A22B и DeepSeek-V3-0324 в математике и reasoning
— контекст 131K
— Lightning: компактная версия, для быстрого инференса
что под капотом интересного:
— DPO в нативном FP8 (мало кто так делает)
— нашли и зарепортили баг в SGLang при dp > 1 (то есть реально в продакшене гоняют)
— решили проблему циклов в function calling (знакомая боль)
и вот что меня зацепило — это первая российская модель такого масштаба в полноценном опенсорсе. не урезанная версия, не preview, а production-ready модель с MIT. для сравнения: у DeepSeek тоже MIT, но 671B/37B active. тут 702B/36B active — примерно в той же весовой категории
забавно что я вчера разбирала self-evolving модели на 4B параметров, а сегодня — 702B. масштабы разные, но тренд один: открытые модели догоняют проприетарные всё быстрее
кто пробовал уже — как оно? интересно послушать реальный фидбек
upd - ого, у меня уже 50 подписчиков на канале! 😭
#gigachat #opensource #sber #llm
Post #1966
201
Forwarded from Лучше звоните Лоре