Этот гайд состоит из двух частей:
1. Как сгенерировать видео?
2. Что сгенерировать, чтобы это зашло?
ЧАСТЬ I. ТЕХНИЧЕСКАЯ
Есть два способа генерации в VEO 3: по текстовому промпту и по первому кадру. В этом посте мы разберем второй вариант — он лучше сохраняет внешность персонажа.
По текстовой генерации тоже будет отдельный пост. Но скажу сразу, что там вся «консистентность героя» сводится к двум правилам:
— Важно всегда использовать одно и то же детальное описание внешности в каждом промпте
— Использовать монтажные хитрости. Например, не ставить крупные планы подряд, чтобы не бросались в глаза отличия.
Вернемся к генерации по кадру.
1. Создание персонажа
→ Генерируем в Midjourney портрет будущего блогера
Образ выбирайте сами, но у героя должна быть узнаваемая «фишка» — как шрам у Гарри Поттера или очки у Кати Пушкарёвой.
Пример промпта:
portrait photograph, medium close-up (head & shoulders) of a young woman; heterochromatic eyes left teal, right amber; porcelain skin; a distinctive star-shaped russet birthmark radiates from the outer corner of her right eye; silver hair pulled back in a low bun with one thin teal-dyed strand framing her face; wearing a plain charcoal turtleneck; neutral gray studio background; calm, thoughtful expression; sharp focus
→ Генерируем еще несколько портретов с разных ракурсов
Это можно сделать с помощью функции Omni References в том же Midjourney.
→ Обучаем на этих кадрах LoRA и получаем любое фото с нашим героем
Как это сделать — я уже объяснял в предыдущих постах. Если коротко, идем в Krea или Flux и загружаем наши фото в модель, чтобы можно было генерировать любые картинки с этим героем по текстовому промпту, и он всегда выглядел одинаково.
2. Генерируем кадры с героем
→ Пишем сценарий каждой сцены
Первое, что нужно сделать — придумать, что будет происходить в ролике. Какой формат блога, стиль «съемки», диалоги, потенциальные конфликты, сюжетные ходы. Подробнее об этом — во второй части гайда.
→ Генерируем первые кадры каждой сцены
Открываем Krea или Flux, выбираем обученную модель, пишем промпт и получаем нужный кадр с героем. Примеры всех промптов — в комментариях.
3. Генерируем видео
Я генерировал в официальном Flow, но это можно сделать, например, в SYNTX-боте. Вставляем наш кадр, добавляем промпт и первый короткий ролик готов.
Несколько советов:
— Предварительно тестируйте промпты на Fast-версии, так можно сэкономить кредиты.
— VEO 3 работает только в формате 16х9, но есть лайфхак, как делать вертикальные видео. Изначально генерируйте все изображения в 9х16 и просто поворачивайте их на 90° перед загрузкой в нейронку.
4. Финальный монтаж
Когда несколько коротких роликов готовы, переходим к монтажу финального видео. Выносите все самое интересное в начало, следите за качеством звука, добавляйте субтитры. Это всё делает ролик лучше. Но главное — продуманный формат и драматургия. Большинство блогов проваливается только из-за того, что не доработали на препродакшне. Подробнее об этом — во второй части гайда.
___________
Вторая часть гайда: что генерировать, чтобы это зашло
@iichnizza