Подводим итог тестирования WorldCrafter
Помимо сказанного выше мы также попробовали формировать трек камеры, подаваемой в модель, в надежде, что можно будет делать плавное перемещение по сцене. К сожалению, выяснилось, что модель этого не умеет, и все перемещения все равно превращает отдельно в перемещение по осям, отдельно - в повороты, причем каждый из них - кусок по 33 кадра. Хочешь, не хочешь - 33 кадра только двигаешься вдоль одной из осей или только вращаешься на заданный угол. Смешанные перемещения модель практически не обрабатывает - так что никакой плавной произвольной навигации по сцене. Если бы не это, то модели можно было бы придумать много применений, скажем, в метаверсе и играх.
Итак, плюсы и минусы:
🟩 быстрая генерация длинных роликов с хорошей структурой сцены;
🟥 посредственная генерация движений и совсем никакая - визуальных эффектов, сильные ограничения на треки камеры.
⏏️ Вывод: у подхода есть потенциал, но пока это добротный PoC, а не MVP. Ждем новых чекпоинтов. Может, и к роботам, как FLUX 3 Action найдется приложение.
Post #32
70
- 👍 2