WorldCrafter

Видеомодель мира с неявной 3D-памятью. Видеогенераторы теряют мир, когда камера отворачивается - WorldCrafter запоминает сцену и восстанавливает ее при возврате

• исследование мира с одной картинки
• генерация мира из текста + управление камерой
• возврат к знакомым ракурсам
• синтез новых ракурсов из нескольких изображений
• реалтайм-стриминг

• минуты исследования сцен, статика и динамика

Доказательство: из сгенерированных видео реконструируют point clouds - геометрия и позы камер сходятся при повторных проходах

Гитхаб
HF

#world #t2w #i2w

MAX