🔥 HunyuanVideo-Avatar — крутой инструмент для создания реалистичных анимированных аватаров в различных стилях оживающих от звука.

Система синхронизирует речь с мимикой и движениями персонажа:
💬 Эмоции, выражения лица и жесты точно подстраиваются под аудиодорожку, создавая ощущение живого человека, а не зацикленной анимации.
💬 Поддерживается одновременная анимация нескольких персонажей, что делает инструмент подходящим для диалогов, сцен и сложных видеоформатов.

Как работает внутри:
🟢модуль внедрения изображения фиксирует внешний облик персонажа.
🟢модуль аудио-эмоций анализирует интонации, ритм и настроение речи.
🟢интеллектуальный аудиоадаптер учитывает особенности лица и переводит звук в естественную анимацию.

⚙️ В результате получается плавное, динамичное и правдоподобное движение, где голос и визуал работают как единое целое.

▶️ Установка:

# 1. Create conda environment
conda create -n HunyuanVideo-Avatar python==3.10.9

# 2. Activate the environment
conda activate HunyuanVideo-Avatar

# 3. Install PyTorch and other dependencies using conda
# For CUDA 11.8
conda install pytorch==2.4.0 torchvision==0.19.0 torchaudio==2.4.0 pytorch-cuda=11.8 -c pytorch -c nvidia
# For CUDA 12.4
conda install pytorch==2.4.0 torchvision==0.19.0 torchaudio==2.4.0 pytorch-cuda=12.4 -c pytorch -c nvidia

# 4. Install pip dependencies
python -m pip install -r requirements.txt
# 5. Install flash attention v2 for acceleration (requires CUDA 11.8 or above)
python -m pip install ninja
python -m pip install git+https://github.com/Dao-AILab/flash-attention.git@v2.6.3

♎️ GitHub/Инструкция

⚡️ Отлично подойдет для видеоконтента, виртуальных ведущих, аватаров, презентаций и ИИ-персонажей нового поколения.

#python #soft #github