Spotify собирается клонировать голоса подкастеров и переводить их на другие языки. В партнерстве с OpenAI, компания предлагает подкастерам возможность воспроизводить свои подкасты на других языках, используя их собственный голос.
Spotify уже начал тестирование, начали с перевода англоязычных подкастов на испанский, В ближайшие недели планируется выпустить переводы на французский и немецкий языки. Среди первых участников такие известные имена, как Dax Shepard, Monica Padman, Lex Fridman, Bill Simmons и Steven Bartlett.
Эта технология основана на голосовом транскрипторе Whisper от OpenAI, который не только разбирает речь на английском, но и может переводить на английский. Я им пользовался для своих внутренних ботов, работает отлично. Однако технология Spotify идёт ещё дальше, она переводит подкаст на другой язык и воспроизводит его синтезированным голосом самого подкастера.
Здесь можно посмотреть пример.
КOpenAI на днях анонсировала несколько новых продуктов, включая инструмент, который может создавать "похожие на человека" аудио из текста и нескольких секунд образца речи. Однако из-за вопросов безопасности и конфиденциальности OpenAI ограничивает доступ к этому инструменту. Спотифай также тестирует свою технологию перевода только с "выбранным кругом" подкастеров, и пока не раскрывает подробности о том, когда она будет доступна широкой аудитории.
Кстати они планируют привлечь новый раунд по оценке 80-90 миллиардов долларов. OpenAI, на 49% принадлежащий Microsoft сообщил инвесторам что ожидает выручку около $1 миллиарда этом году и "много миллиардов" в 2024.
Spotify уже начал тестирование, начали с перевода англоязычных подкастов на испанский, В ближайшие недели планируется выпустить переводы на французский и немецкий языки. Среди первых участников такие известные имена, как Dax Shepard, Monica Padman, Lex Fridman, Bill Simmons и Steven Bartlett.
Эта технология основана на голосовом транскрипторе Whisper от OpenAI, который не только разбирает речь на английском, но и может переводить на английский. Я им пользовался для своих внутренних ботов, работает отлично. Однако технология Spotify идёт ещё дальше, она переводит подкаст на другой язык и воспроизводит его синтезированным голосом самого подкастера.
Здесь можно посмотреть пример.
КOpenAI на днях анонсировала несколько новых продуктов, включая инструмент, который может создавать "похожие на человека" аудио из текста и нескольких секунд образца речи. Однако из-за вопросов безопасности и конфиденциальности OpenAI ограничивает доступ к этому инструменту. Спотифай также тестирует свою технологию перевода только с "выбранным кругом" подкастеров, и пока не раскрывает подробности о том, когда она будет доступна широкой аудитории.
Кстати они планируют привлечь новый раунд по оценке 80-90 миллиардов долларов. OpenAI, на 49% принадлежащий Microsoft сообщил инвесторам что ожидает выручку около $1 миллиарда этом году и "много миллиардов" в 2024.