Linly-Dubbing

Это инструмент с открытым исходным кодом для автоматического перевода видео на различные языки с использованием искусственного интеллекта.

Он поддерживает функции автоматической загрузки видео, разделения вокала, распознавания речи, перевода с помощью больших языковых моделей и синтеза речи.

Интегрирует технологии, такие как yt-dlp для загрузки видео, Demucs и UVR5 для разделения вокала, WhisperX и FunASR для распознавания речи, а также OpenAI API и Qwen для перевода.

Для синтеза речи используются Edge TTS, XTTS, CosyVoice и GPT-SoVITS, обеспечивая высококачественное озвучивание.

Также поддерживается синхронизация губ с помощью цифровых аватаров, улучшая реалистичность переведенного контента.

Lang: Jupyter Notebook
https://github.com/Kedreamix/Linly-Dubbing
================
👁 News | 👁 Soft | 👁 Gear | 👁 Links