Os filmes “Brutalist” e “Emilia Perez” ultrapassaram os limites da edição de áudio com IA?

O filme vencedor do Globo de Ouro, The Brutalist e Emilia Perez, estão sob críticas por usar IA para alterar as vozes dos atores no filme aclamado pela crítica.

Estrelado por Adrien Brody, Felicity Jones e Guy Pearce, “The Brutalist” segue um visionário que, após fugir da Europa do pós-guerra, reinicia sua vida e carreira na América com a ajuda de um rico empresário.

Enquanto isso, “Emilia Perez” retrata Manitas del Monte, uma chefe do cartel mexicano que se torna Emilia Perez, interpretada por Carla Sofia Gascón.

Junto com sua advogada Rita, interpretada por Zoe Saldaña, e sua esposa, Jessi, interpretada por Selena Gomez, o filme entrelaça suas mudanças dramáticas com interlúdios musicais.

Controvérsia sobre IA

A controvérsia atual surge na sequência de uma greve de meses em 2023, na qual o uso de inteligência artificial por Hollywood para substituir atores humanos pagos se tornou um tema quente de discórdia.

No entanto, numa entrevista ao Red Shark News, o húngaro brutalista O editor David Janso revelou como a ferramenta Respeecher (uma espécie de ajuste automático de conversação) alimentada por IA melhorou a pronúncia húngara dos dois protagonistas do filme.

“Sou falante nativo de húngaro e sei que o húngaro é uma das línguas mais difíceis de aprender a pronunciar”, disse Janso. “É uma linguagem única. Treinamos[Brody e Jones]e eles fizeram um ótimo trabalho, mas queríamos que fosse perfeito para que mesmo os habitantes locais não percebessem a diferença.”

Janso disse que as estrelas Adrien Brody e Felicity Jones participaram do uso da IA, usando suas próprias vozes para melhorá-las.

“A maior parte do diálogo húngaro inclui partes minhas falando. Tivemos muito cuidado para manter o seu desempenho”, disse ele. Principalmente apenas substituindo caracteres aqui e ali. Você poderia fazer isso sozinho no ProTools, mas como havia muito diálogo em húngaro, precisei acelerar o processo. ”

Uma das preocupações que os membros do SAG-AFTRA tiveram durante a greve de 2023 foi que a IA seria usada para substituir os membros e as suas imagens seriam usadas sem compensação.

“O mais importante é que estamos falando de tecnologias emergentes que impactarão o mundo inteiro”, disse anteriormente o porta-voz da SAG-AFTRA, Zeke Alton. descriptografia Em uma sessão de perguntas e respostas da mídia.

“Acontece que somos os canários na mina de carvão. Estamos estabelecendo um precedente sobre como a força de trabalho em geral é tratada nos Estados Unidos e em todo o mundo”, disseram.

Embora o uso de IA na produção cinematográfica permaneça controverso, os desenvolvedores de IA acolheram favoravelmente o uso desta tecnologia.

“Para a produção de “The Brutalist”, usamos o GenAI do ucraniano Respeaker para melhorar sutilmente a pronúncia húngara do ator americano, que é notoriamente difícil de aprender e falar.” A equipe sênior do Google Deepmind disse o pesquisador Alex Polozov no X (anteriormente Twitter). ). Este é um ótimo exemplo de uso de ferramentas de IA para aprimorar, em vez de substituir, o processo de criação de uma obra de arte famosa. ”

O diretor brutalista Brady Corbet falou sobre a polêmica em entrevista ao Indiewire.

“A atuação de Adrienne e Felicity é completamente própria. Elas trabalharam durante meses com a treinadora de dialeto Tanella Marshall para aperfeiçoar seus sotaques”, disse Corbett. “A inovadora tecnologia Respeecher foi usada apenas para edição de diálogos em húngaro, especificamente para ajustar com precisão certas vogais e letras. O inglês permaneceu inalterado.”

Corbett disse que a IA foi usada na pós-produção para “preservar a autenticidade das performances de Adrian e Felicity em um idioma diferente, não para substituí-las ou alterá-las, e com o máximo respeito pela tecnologia”, ele disse. adicionado.

Entretanto, Janso defendeu o uso da IA ​​em The Brutalist, enfatizando o seu papel como uma ferramenta prática e não como uma inovação revolucionária.

“Deveríamos ter uma discussão muito aberta sobre quais ferramentas a IA pode fornecer”, disse ele. “Não há nada neste filme que use IA que não tenha sido feito antes. Isso apenas acelera muito o processo. Crie esses pequenos detalhes.

Estudo de caso de aprimoramento de voz com IA

Em maio, em entrevista no Festival de Cinema de Cannes, o mixador de som de Emilia Pérez, Cyril Holz, explicou o uso prático de tecnologias como o ReSpeaker, um software de clonagem de voz e imagem para expandir o alcance vocal de Gascón.

“Originalmente era o Plano B, mas tornou-se o Plano A”, disse Holtz.

Respeecher trabalhará com atores icônicos como Jimmy Stewart de “It’s a Wonderful Life”, Elvis Presley, James Earl Jones e o dublador Miłogost “Mirek” Reczek de “Cyberpunk 2077: Phantom Liberty”, que faleceu em 2021. foi usado para clonar vozes.

“Os dubladores são, e continuarão a ser, uma parte essencial da síntese de fala de IA de alta qualidade”, disse Alex Serdiuk, CEO da Respeecher, em comunicado publicado no X. .

“Desenvolvemos o Respeecher como uma ferramenta complementar para ajudar os dubladores a amplificar, monetizar e proteger suas vozes. Um dos nossos princípios orientadores é ‘capacitar, não substituir’.”

Editado por Sebastian Sinclair