Переводите видео на другие языки с сохранением голоса и адаптацией движений губ



Интернетик захлестнула волна переозвученных мемов: идущий к реке и Данила Багров заговорили на английском, а Маск освоил испанский. Выглядит и звучит настолько хорошо, что сложно отличить оригинал от перевода. Давайте разберёмся, что за нейросеть такое вытворяет.



Video Translate от HeyGen — сервис на базе ИИ, позволяющий переозвучить видео с любого языка. Загружаете видеофайл, выбираете один из 8 языков, ждёте своей очереди примерно вечность и получаете профессиональный дубляж. Помимо перевода, нейросеть копирует голос и даже дорисовывает движения губ так, чтобы всё выглядело естественно. К сожалению, на русский пока не переводит.



Что умеет Video Translate от HeyGen:

1. Переводить видео на английский, француский, испанский, индийский, итальянский, немецкий, польский и португальский языки

2. Позволяет обрабатывать видео длительностью от 30 секунд до 5 минут и весом до 500мб

3. Работает с файлами в форматах MP4, WEBM и Quicktime



После регистрации вам будет бесплатно доступен 1 кредит (внутренняя валюта), что равняется 1 минуте видео. Потратьте его с умом)

За каждую последующую минуту (кредит) нужно будет отдать $2, минимальный пакет 15 минут или $29 долларов. Платить с российских карт нельзя.



На самом деле Video Translate — часть большой платформы по созданию видео HeyGen. Ребята разрабатывают нейросети, позволяющие из текста создавать полноценные видео с цифровым аватаром, копированием голоса, разными фонами и т.п. Чуть позже сделаю на HeyGen отдельный обзор.



-----

Авторские обзоры ИИ-инструментов несколько раз в неделю. Подпишитесь, чтобы идти в ногу со временем — https://t.me/universe_ai