Meta* выпустила Muse Spark Open - модель с открытыми весами

Это MoE-модель на 816 млрд параметров, из которых 42 млрд активных.

Она нативно мультимодальная, контекст у нее 1 млн токенов, заточена под программирование и долгие агентные задачи.

Можно запускать локально на двух Mac Studio M5 Ultra.
HF.
*запрещена в России.