Новый метод для работы с 3D — Гаусcианные функции, они же сплаты, для визуализации сцены (3DGS). Он позволяет сохранить желательные свойства непрерывных нерфов (не только изолированных объектов) и избегать ненужных вычислений в пустом пространстве за счёт рендеринга с учетом видимости.

Теперь можно в реальном времени синтезировать новые виды на разрешении 1080p со скоростью не менее 30 кадров в секунду, что является значительным достижением в этой области.

Для тренировки нужно 24 ГБ VRAM, хотя говорят можно запустить и на 8, если поиграться с параметрами. Для интерактивного просмотра нужно 4 ГБ VRAM.

Сайт