Dublagem por IA torna estrelas de cinema multilíngues

Um campo emergente de tecnologia de inteligência artificial (IA) generativa elevou a dublagem de voz a um novo nível, onde atores que falam inglês podem realmente parecer falar em espanhol, grego ou russo fluente.

Os estúdios de dublagem tradicionais podem levar até meses para produzir versões dubladas, com um processo complexo que inclui encontrar o dublador certo e gravar a leitura do roteiro. Os estúdios gastam até US$ 150 mil na dublagem de um único filme.

O software AI da startup israelense Deepdub pode reduzir drasticamente o tempo e o esforço necessários para dublar. Usando algoritmos de AI, seu software de dublagem pode ser treinado para aprender rapidamente os padrões de uma amostra de voz específica e transmitir o tom e a emoção específicos do dublador.

Com sede em Tel Aviv, a empresa foi cofundada em 2019 pelos irmãos Ofir e Nir Krakowksi. Com experiência em aprendizado de máquina e inteligência artificial, os dois queriam atender às necessidades emergentes de streaming de televisão.

“Percebemos que existe um mercado onde você pode criar um impacto muito grande nas pessoas ao redor do mundo”, diz Oz Krakowksi, diretor da Deepdub e irmão dos cofundadores.

“Atualmente, grandes populações não têm acesso a conteúdo audível, como televisão e cinema. E cursos de e-learning que são apenas em inglês? Se eles não falam inglês, ficam limitados no tipo de acesso à educação que temos porque falamos inglês. E é aí que falamos em democratizar o conteúdo”.

LEIA TAMBÉM

• 09/06/2023 – Empresa constrói novo supercomputador em Israel
• 03/02/2023 – Diplomata israelense fala oito idiomas usando IA
• 17/09/2021 – Startups tornam o mercado de culinária mais atraente

Ao habilitar a dublagem de voz em diferentes idiomas, as pessoas com dificuldades de leitura e escrita ou com problemas de visão podem ter acesso a novos tipos de conteúdo de áudio. O software da Deepdub é capaz de traduzir conteúdo para 65 idiomas, incluindo dialetos regionais.

Os dialetos são essenciais para localizar adequadamente o conteúdo ou adaptar a fala para se adequar às nuances e sutilezas culturais.

No entanto, o Deepdub quer ultrapassar os limites das linguagens de dublagem “neutras” e realmente habilitar os dialetos que tornam cada região única.

Krakowksi diz que é isso que diferencia o Deepdub: a capacidade de expandir para uma variedade de idiomas que não seria possível sem sua infraestrutura de aprendizado profundo.

Empresas proeminentes de dublagem de voz por IA, como Lovo.ai e Synthesys, também oferecem uma variedade de emoções e idiomas para pessoas que desejam que seu conteúdo seja dublado. No entanto, o algoritmo Deepdub é capaz de reproduzir e localizar o mesmo locutor em vários idiomas, o que Krakowksi diz ter sido o que permitiu que eles entrassem na indústria de Hollywood antes de outras empresas.

Em meio a um furor sobre a IA na indústria do entretenimento, o Deepdub encara os desafios éticos de seu uso na dublagem de voz. Os dubladores podem ficar sem crédito e sem remuneração, como a dubladora canadense Bev Standing, que atualmente está processando a TikTok por supostamente usar uma versão sintética de sua voz “sem compensação ou crédito”.

A Deepdub possui credenciamento da Trusted Partner Network (TPN), o que significa que a empresa passou por medidas legais e de segurança rígidas para trabalhar com a Motion Picture Association, a organização que representa grandes estúdios de cinema como Disney, Netflix e Universal.

“Trabalhamos de forma ética e controlada”, diz Krakowksi. Deepdub fornece a plataforma em vez da tecnologia para que as amostras de voz permaneçam seguras.

No entanto, o crescimento da dublagem de voz AI também significa que a indústria de dublagem terá que se adaptar. Em 2018, havia mais de 500.000 dubladores empregados nos Estados Unidos.

Oz Krakowksi acredita que a nova tecnologia de IA do Deepdub criará diferentes oportunidades para dubladores e conteúdo. “Se tivéssemos muito medo de adotar uma nova tecnologia porque ela poderia tirar empregos, ainda estaríamos dirigindo carruagens puxadas por cavalos”, diz ele.

Em dezembro de 2021, a Deepdub anunciou um acordo com o serviço de streaming norte-americano Topic, que apresenta conteúdo em mais de 20 idiomas de 40 países. Em janeiro de 2022, a startup encerrou sua rodada de financiamento da Série A com mais de US$ 20 milhões em financiamento, liderada pela empresa de capital de risco Insight Partners, com sede em Nova York.

A startup lançou recentemente o Deepdub GO, que permite que qualquer pessoa se registre online e acesse seus serviços de dublagem de voz. De YouTubers a cineastas independentes, Oz diz que a nova plataforma permite que os criadores de conteúdo peguem seus vídeos e os traduzam de forma acessível para várias vozes dubladas.

“Tradicionalmente, a dublagem de um filme levaria de 6 a 10 semanas. Dependendo do tipo de filme, poderíamos ser 30 a 50% mais rápidos e, em alguns casos, também poderíamos concluir todo o trabalho em 2 a 4 dias e em vários idiomas simultaneamente”, diz ele. Além disso, pode levar apenas algumas semanas para integrar um novo idioma à plataforma.

A empresa também permite que um público que fala inglês acesse conteúdo em outro idioma.

Um dos maiores projetos da Deepdub tem sido a criação de uma versão dublada em inglês da brasileira Vanda, uma série dramática originalmente em português.

No início deste ano, a empresa fez parceria com a gigante americana de streaming Hulu para lançar a primeira temporada em inglês.

“Você pode dizer que há muita atenção nas vozes, na sincronização labial, como o fundo soa com as vozes. Você pode ouvir as chamas, você pode ouvir a conversa na TV e as crianças e tudo como se fosse originalmente em inglês”.

Fonte: Revista Bras.il a partir de NoCamels
Foto: Canva