Prime Video lança série que utiliza inteligência artificial para sincronização labial em dublagens

Amazon inova com tecnologia de dublagem por IA, buscando uma experiência mais imersiva.

Recentemente, a Amazon anunciou planos para aprimorar a experiência de visualização em sua plataforma Prime Video, utilizando inteligência artificial para criar uma forma mais fluida de consumir conteúdo global.

Essa inovação se refere a uma ferramenta de IA que modifica digitalmente os lábios e a parte inferior do rosto de atores e atrizes em vídeos, quadro a quadro, para que a sincronização labial coincida com a dublagem em diferentes idiomas.

Embora a empresa ainda não tenha disponibilizado vídeos demonstrativos, foi confirmado que a tecnologia está sendo testada na série alemã Maxton Hall, que já utiliza a dublagem em inglês. A Amazon planeja expandir essa tecnologia para outros títulos, mas ainda não divulgou um cronograma ou se a IA será aplicada em mais idiomas além do inglês.

A Amazon está investindo fortemente em IA para sua plataforma de vídeo. Além da sincronização labial, a empresa já implementou sistemas de dublagem assistida por IA para filmes e séries em inglês e espanhol, além de dublagens totalmente geradas por IA para alguns animes, o que gerou reações negativas por parte do público e dos atores.

Além disso, a Amazon também utiliza IA para criar resumos automáticos de séries, embora alguns tenham sido removidos devido a erros frequentes. A companhia já possui produções desenvolvidas com IA, como Love, Diana e Music Hunters, entre outras.

Sincronização labial não é nova

A Amazon busca maximizar o potencial da tecnologia de sincronização labial, que não é uma novidade no setor de entretenimento. Empresas como a Flawless AI foram criadas especificamente para desenvolver essa tecnologia, que já é utilizada em videogames como Cyberpunk 2077 para melhorar a sincronização labial em diferentes idiomas.

Embora essa tecnologia possa ser bem recebida por aqueles que se incomodam com a falta de sincronia entre a dublagem e os movimentos labiais, ela pode também causar estranhamento. Pequenas alterações faciais geradas por computador podem ser notadas pelo público, gerando uma percepção negativa.

A IA tem a capacidade de aprender e melhorar, mas os seres humanos são naturalmente sensíveis a qualquer perturbação nas feições faciais. Essa habilidade inata pode resultar em uma rejeição maior à tecnologia do que a simples falta de sincronização labial.

Rejeição profissional

Um ponto relevante é que a ambição da Amazon em usar IA gerou conflitos com o setor de dublagem. Um exemplo notável é o caso da voz de Lara Croft no jogo Tomb Raider: Legacy of Atlantis, que não contará com as atrizes que dublam a personagem desde 1998, devido à ausência de dublagem em vários idiomas.

O problema não reside apenas na dublagem por IA, mas na exigência de que os atores cedam os direitos de suas vozes para treinar a IA, algo que sindicatos e associações de dublagem se opuseram. Como resultado, algumas empresas enfrentam dificuldades para dublar seus títulos em determinados idiomas.