😺+😘 Тестирую GPT Astra в связке с блендером через MCP коннект. Задача - повторить по видеорефренсу сложную анимацию из моушен ролика.

Работа выглядит так - загрузил в GPT видеореф, сказал ему посмотреть его, подключиться к блендеру и самостоятельно создать сцену со всей анимацией. Первые попытки были очень слабыми. GPT Astra плохо воспринимает визуально сложные движения и большое количество объектов на видео.

Приходится вручную прописывать все правки, стараясь наперёд учитывать где он может накосячить) Каждая итерация правок занимает у GPT где-то 5-15 минут в зависимости от объёма изменений в сцене.

Я использовал базовый тариф за 18$. Там есть 5 часовые лимиты токенов. Т.е. потратив лимит на задачу, нужно ждать сброса лимита 5 часов. На 2 этих шота ушло четыре пятичасовых лимита

В итоге сходство с референсной анимацией примерно 70%. По времени - 3 часа работы (не считая ожидания сбросов лимитов)

Дальше я пытался по 3д блокингу сцены сделать видео в seedance 2.5 и оказалось, что на сегодняшний день такие ролики - это его ахилесова пята) Нейросеть не может работать с такими сложными превизами анимаций с большим количеством объектов. Для составления промптов использовал скиллы Seedance 2.5. При стандартном подходе - загрузить видео реф и реф изображений сцен, он просто выдавал видео превиза. Хоть немного получилось добиться результата загрузив ключевые изображения сцен. Но GPT при генерации изображений постоянно менял фактуру персика, поэтому и на видео всё это стрёмно выглядит.

Но при этом можно спокойно заменить на анимации инстансы блокинга геометрии фруктов на детализированные объекты и отрендерить фулл 3д сцену, получив приемлемый результат