Esta nova ferramenta de dublagem de IA pode traduzir áudio preservando a voz do locutor

Esse novo recurso de dublagem com inteligência artificial é capaz de traduzir áudio mantendo a voz do locutor

Mulher com microfone

Se você já assistiu a um filme ou programa que foi dublado, sabe como isso parece pouco natural. Muitas vezes, a voz do falante não muda entre diferentes personagens, ou os padrões e as variações são completamente errados. O novo recurso de IA da ElevenLab pretende resolver esse problema.

Nesta terça-feira, a ElevenLabs revelou o AI Dubbing, um novo recurso que pode converter conteúdo falado para outro idioma, mantendo a voz, os padrões de fala, as emoções e as entonações do falante original.

Também: Gen AI uma ameaça de emprego? Pelo contrário, os trabalhadores humanos têm muito a ganhar

O recurso AI Dubbing pretende permitir que audiências ao redor do mundo desfrutem do seu conteúdo favorito em seu idioma nativo, convertendo-o em apenas alguns minutos.

O recurso AI Dubbing combina síntese de fala multilíngue, clonagem de voz, texto e processamento de áudio da ElevenLab para preservar a natureza do conteúdo original ao criar uma tradução, de acordo com a empresa.

No comunicado, o CEO e co-fundador da ElevenLabs, Mati Staniszewski, compartilhou sua experiência negativa com conteúdo dublado quando criança e como a nova tecnologia poderia ser uma solução.

“Crescendo na Polônia, assistíamos a filmes em língua inglesa que eram dublados por um único narrador. Isso significa que todos os atores têm a mesma voz. Tira toda a magia da experiência”, disse Staniszewski.

“O lançamento do AI Dubbing é nosso maior passo até agora para eliminar essas barreiras linguísticas do conteúdo. Isso vai ajudar as audiências a desfrutar de qualquer conteúdo que desejarem, independentemente do idioma que falem.”

Também: IA e dados: Aperfeiçoando a hiper-personalização para construir o banco do futuro

O recurso AI Dubbing oferecerá suporte a mais de 20 idiomas atualmente suportados pelo modelo Multilingual v2 da Eleven Multilingual v2 model.

A lista completa inclui inglês, japonês, chinês, alemão, hindi, francês, coreano, português, italiano, espanhol, indonésio, holandês, turco, filipino, polonês, sueco, búlgaro, romeno, árabe, tcheco, grego, finlandês, croata, malaio, eslovaco, dinamarquês, tâmil e ucraniano.

O AI Dubbing está disponível para todos os usuários a partir de hoje, e o preço depende de quantos personagens você deseja dublar.