Танец + AI + проекция + свет

Сначала мы попросили танцора Маргариту Костакову станцевать для нас на камеру танец Прометея (танцовщики все равно прозвали его Игорем).

По задумке, Прометей появляется то в левых окнах, то в правых и направляет потоки огня на наших живых танцоров.

Затем я убрала фон с помощью Capcat и немного поцветкорила в AE. Потом создала референсное изображение металлического лава-мужика Прометея в Midjourney и отправила это все в проект ComfyUI.

Для практикующих - поделюсь json-файлом в комментариях.

AI позаимствовала стиль с картинки с помощью IPAdapter-а, а далее с помощью Controlnet создала карту глубины по видео и на базе нее с помощью Animatediff сгенерировала секвенцию картинок.

Видео использовали в проекции, добавив простые эффекты в AE + запрограммировали свет, опираясь на контент. А танцоры подстроились.