🤖 Я вам обещал сделать целый выпуск через HeyGen? Ну вот ловите: https://youtu.be/4qxgYkptAKw

Делал по следам конференции "Made by Google '23", в две генерации по 2 минуты. Оказывается, что если HeyGen генерирует видео длиннее референсного (на котором обучался), то на отрезке превышающем длину референса аватар начинает очень неестественно двигаться и моргать, потому две генрации, а не одна. К тому же генерация одного и того же видео отличается от раза к разу, первая вообще не понравилась, потому по факту было три генерации по несколько минут.

Еще, я попробовал сделать платный клон голоса. Качество вроде улучшилось по сравнению с предыдущими генерациями. Для обучения пришлось пять минут начитывать английский текст на ломаном языке.

Текст для видео делался через ChatGPT по моим скудным заметкам с конфренции. Бэкграунд обложки рисовал бесплатный инстанс SDXL на JAX и Google Cloud TPU. Тайтл и описание ролика - совместная работа ChatGPT и меня.

Итоговый ролик отмонтажен за пару часов в Premier Pro. Теперь я точно знаю, что аватары не заменят авторов на ютубе полностью, так как кроме съёмок остается ещё куча рутины по монтажу, спим спокойно. Но на английском он говорит прям сильно лучше меня, это факт 😅

#ai