Цифровые аватары для Reels (и не только)

В социальных сетях (TikTok, YouTube shorts и др) последние несколько месяцев популярность набирают так называемые 👩‍💻 “цифровые аватары” - ИИ копии авторов контента, которые позволяют своим живым протеже не только экономить время на записи видео, но и на его монтаже

Однако как на самом деле работают эти “цифровые аватары”?

Принцип работы данной технологии следующий:

1️⃣ Пользователь подает на вход в сервис своё собственное видео (необходимо, чтобы пользователь находился в анфас перед камерой, не допускал перекрытия руками или иными предметами собственных губ и что-то говорил)
2️⃣ Далее пользователь вводит в необходимую область текст, который аватар должен будет произносить
3️⃣ Затем пользователь выбирает стандартный голос (мужской или женский) / иногда можно добавить запись собственного голоса, синтезировать его и использовать для аватара
4️⃣ Далее вся эта информация (видео, текст, голос) направляются на сервер, где с помощью набора нейронных сетей, происходит синтезирование “цифрового аватара”

НО на самом деле, синтезируется не “цифровой аватар” пользователя, а обновленное видео пользователя. Т.е. в итоговом видео, сохраняется вся оригинальная мимика пользователя, его движение руками, освещение и т.д. А меняется только содержание речи пользователя, его голос (если он выбрал из стандартных вариантов) и, соответственно, движение его губ.

И ключевым элементом этого процесса является именно оригинальное видео ▶️ Его необходимо сделать очень качественно и с соблюдением условий, которые я обозначил выше, чтобы обновленное видео было максимально правдоподобным

И вот таким образом, оригинальное, правильно записанное видео, пользователь может использовать с различным текстом множество раз при создании контента (без необходимости постоянно, заново снимать себя на камеру и монтировать ролик)

К наиболее популярным сервисам, где любой пользователь может создать свой собственный цифровой аватар, залив своё оригинальное видео, относится Heygen (США) и Synthesia (США).

Почему я так уверен, что цифровые аватары работают именно так? 👍Потому что еще несколько месяцев назад, до пика этого хайпа, мы с командой создали свой собственный прототип сервиса для генерации цифровых аватаров (пример работы прикрепил к этому посту…есть над чем работать, но всё же)

В чем наши основные преимущества (в отличие от Heygen и Synthesia)?

5️⃣ Интерфейс полностью на русском языке
6️⃣ Генерирование цифровых аватаров у нас бесплатно

Поэтому если вам интересно узнать больше про наш сервис, то ставьте 🔥