A Dance Through the Ages

С самого начала этот проект для меня был значимым, так как применение ИИ здесь казалось по-настоящему оправданным. В основе — материал, снятый и смонтированный живыми людьми, с настоящим человеком в кадре, и генеративные модели по задумке планировалось использовать как инструмент редактирования — то есть как надстройку, а не замену.

Производственная специфика заключалась в том, что модель, используемая нами для редактирования видео, должна была быть доступна на платформе Adobe Firefly. На момент старта проекта это была только Runway Aleph 2.0, и Google Omni должна была появиться к моменту выхода кампании.

Я сделал тесты. Лица в Aleph 2.0 разваливались, картинка в целом получалась довольно искусственной, хотя движения модель сохраняла идеально. Качество изображения и лица у Omni были заметно лучше, но он постоянно галлюцинировал движения и слишком далеко отходил от оригинала. Здесь можно посмотреть тест Aleph 2.0 с моими закадровыми комментариями, в конце — тест Omni, где расхождение видно наглядно. А здесь, кстати, забавные тесты Runway и Omni для предыдущего ролика Food Fight.

Первую черновую версию генераций после монтажа мы полностью сделали в Aleph 2.0 — и это был провал. При всем преимуществе Runway в сохранении движения, общий результат не шел ни в какое сравнение с Seedance 2.0, который мы протестировали ради эксперимента. После серьезного разговора клиент подтвердил, что Seedance будет доступен на Firefly, и только тогда началась нормальная работа.

Основной ролик (22 генеративных шота):
https://www.youtube.com/watch?v=dZhnLYuEExE