ElevenLabs apresenta AI Dubbing: Inovação na tradução de conteúdo audiovisual
A startup ElevenLabs, especializada em clonagem e síntese de voz, lançou o AI Dubbing, um produto revolucionário capaz de traduzir qualquer discurso para mais de 20 idiomas. Este lançamento representa um importante passo à frente na eliminação de barreiras linguísticas para os criadores de conteúdo.
O AI Dubbing está disponível para todos os usuários da plataforma ElevenLabs. Este método inovador para dublar conteúdo audiovisual promete transformar o panorama do setor. A startup trabalhou em conjunto com centenas de criadores para testar e aperfeiçoar esta função, com o objetivo de oferecer uma ferramenta eficiente e fácil de usar.
Funcionamento e capacidades do AI Dubbing
O funcionamento do AI Dubbing é completamente automático: identifica o número de falantes em um conteúdo e traduz seu discurso para outro idioma. Para isso, utiliza um método patenteado pela ElevenLabs que filtra o ruído de fundo e distingue a música e o ruído do diálogo real. Posteriormente, transcreve o diálogo original para texto, traduz e adapta ao idioma alvo mantendo as características vocais originais do falante.
Para gerar o discurso final a partir do texto traduzido, o AI Dubbing usa o modelo Multilingual v2. Este modelo suporta mais de 20 idiomas, incluindo hindi, português, espanhol, japonês, ucraniano, polonês e árabe.
No entanto, o AI Dubbing apresenta algumas limitações. Por exemplo, existe um limite na quantidade de caracteres que podem ser traduzidos em uma única função. Anteriormente, a ElevenLabs oferecia ferramentas separadas para clonagem de voz e síntese de texto em voz.
O panorama competitivo da síntese de voz impulsionada por IA
O avanço em vozes baseadas em IA não é exclusivo da ElevenLabs. Outras empresas, como a OpenAI apoiada pela Microsoft, também estão explorando essa tecnologia. Essas empresas usam modelos de texto para voz e voz para texto para converter áudio e colaboram com parceiros selecionados para prevenir o mau uso dessas capacidades.
No espaço de síntese de voz e fala impulsionado por IA, existem outros jogadores ativos como MURF.AI, Play.ht e WellSaid Labs. Recentemente, a Meta lançou o SeamlessM4T, um modelo multilíngue de código aberto. Segundo estimativas, espera-se que o mercado global para essas ferramentas atinja quase $5 bilhões em 2032.
Em conclusão, o AI Dubbing da ElevenLabs representa um grande avanço na eliminação de barreiras linguísticas para os criadores de conteúdo. Apesar das limitações existentes e uma forte concorrência no setor, a startup está bem posicionada para liderar este mercado emergente.
Sarah é, além de uma especialista em marketing digital, uma criadora de conteúdo com vasta experiência no campo. Graduada em Sociologia pela Universidade de Barcelona e com uma Pós-graduação em Marketing Digital pelo Inesdi, Sarah conseguiu se destacar como Diretora de Marketing Digital. Seu profundo conhecimento das tendências digitais e sua habilidade para identificar oportunidades de crescimento foram fundamentais para o sucesso de inúmeras campanhas. Além disso, ela dá aulas e palestras em prestigiosas escolas de negócios, universidades e eventos, compartilhando seus conhecimentos e experiências com outros profissionais e estudantes.