NVIDIA SANA-WM: минутное видео на одной видеокарте

NVLabs выпустили SANA-WM, модель мира с 2,6 млрд параметров, которая генерирует 60 секунд видео в 720p и следует по заданной траектории камеры. Обычно для этого нужна стойка GPU, а здесь хватит одного H100. Или домашнего RTX 5090, если вы предпочитаете греть квартиру самостоятельно.

При этом камера движется точнее, чем у конкурентов в 4-5 раз крупнее, работающих на восьми видеокартах. Полная конфигурация с 17-миллиардным refiner выдает 22 ролика в час.

Код под Apache 2.0, веса под лицензией LTX-2 Community. Материал от Awesome Agents.

@your_tech (теперь ещё в VK и Max)