Sociedad

Esta IA permite a Robert De Niro tocar líneas en perfecto alemán

Esta IA permite a Robert De Niro tocar líneas en perfecto alemán

Paul Bednyakov | imágenes falsas

¿Me hablas … en alemán?

Gracias a la nueva tecnología deepfake, Robert De Niro puede ofrecer su famosa línea desde conductor de taxien alemán impecable, con movimientos de labios y expresiones faciales realistas. El software de IA manipula los labios y las expresiones faciales de un actor para que coincidan de manera convincente con el idioma de una persona que habla las mismas líneas en un idioma diferente. La tecnología basada en inteligencia artificial podría transformar la industria cinematográfica de formas seductoras e inquietantes.

La tecnología se relaciona con el deepfaking, que es el uso de IA para pegar la cara de una persona a otra. Promete a los directores volver a filmar películas en diferentes idiomas, haciendo que las versiones extranjeras sean menos disruptivas y más fieles al original para la audiencia. Sin embargo, la capacidad de cambiar automáticamente la cara de un actor con tanta facilidad también puede resultar controvertida si no se usa con cuidado.

La tecnología de sincronización de IA fue desarrollada por Flawless, una empresa británica cofundada por el director Scott Mann.

Después de ver una versión extranjera de su última película, roboMann, quien interpretó a De Niro, estaba consternado por cómo el doblaje arruinó escenas cuidadosamente elaboradas. (Se niega a indicar el idioma). El doblaje a veces cambia significativamente el diálogo, dice Mann, para que coincida mejor con los movimientos de los labios de un actor. «Recuerdo que estaba devastado», dice. «Haces un pequeño cambio en una palabra o una actuación, puede hacer un gran cambio en un personaje en el ritmo de la historia y, a su vez, en la película».

Mann comenzó a investigar trabajos académicos relacionados con deepfakes, lo que lo llevó a un proyecto con sincronización de IA dirigido por Christian Theobalt, profesor del Instituto Max Planck de Ciencias de la Computación en Alemania. El trabajo es más exigente que un deepfake convencional. Se trata de capturar las expresiones faciales y los movimientos de un actor en una escena y de una persona que habla las mismas líneas en otro idioma. Luego, esta información se combina para crear un modelo 3D que conecta la cara y la cabeza del actor con los movimientos de los labios del doblador. Finalmente, en una escena, el resultado se borda digitalmente en el actor.

Flawless se inspiró en el proyecto de Theobalt para su producto. Según Mann, la compañía está en conversaciones con estudios sobre la creación de versiones extranjeras de varias películas. Otros clips de demostración de Flawless presentan a Jack Nicholson y Tom Cruise entregando líneas famosas de Un par de buenos hombres en francés y Tom Hanks pronuncia español y japonés en escenas Forrest Gump.

«Va a ser invisible muy pronto», dice Mann. “La gente verá algo y no se dará cuenta de que se rodó originalmente en francés o lo que sea. «

Mann dice que Flawless también está explorando cómo su tecnología puede ayudar a los estudios a evitar costosas regrabaciones al hacer que un actor diga nuevas líneas. Pero dice que algunos actores se sienten un poco inseguros cuando se ven manipulados con IA. «Hay miedo y asombro, esas son las dos reacciones que sigo teniendo», dice.

Virginia Gardner, una actriz que protagoniza la última película de Mann y que habla español gracias al software Flawless, no parece demasiado preocupada, aunque asume que las películas modificadas con IA incluirían un descargo de responsabilidad. «Creo que esta es la mejor manera de mantener tu desempeño como actor», dice en otro idioma. «Si confías en tu director y confías en que este proceso solo mejorará una película, entonces realmente no veo ningún inconveniente».

La manipulación de videos de IA es controvertida, y por una buena razón. Los programas deepfake gratuitos, que se utilizan para transferir sin problemas la cara de una persona a otra en una escena de video, han proliferado con los avances en IA. El software identifica puntos clave en el rostro de una persona y utiliza el aprendizaje automático para capturar cómo se mueve el rostro de esa persona.

La tecnología se ha utilizado para crear pornografía de celebridades falsa y dañar clips de pornografía de venganza dirigidos a mujeres. Los expertos temen que las falsificaciones que muestran a una persona famosa en una situación comprometedora puedan difundir información errónea e influir en las elecciones.

La manipulación de rostros de las estanterías podría resultar controvertida en la industria cinematográfica. Darryl Marks, fundador de Adapt Entertainment, una compañía de Tel Aviv que trabaja en otra herramienta de sincronización de inteligencia artificial, dice que no está seguro de cómo reaccionarían algunos actores ante un cambio en su desempeño, especialmente si no está claro que lo hace desde una computadora. «Si hay un actor muy famoso, podrían bloquearlo», dice.

«Hay usos legítimos y éticos para esta tecnología», dice Duncan Crabtree-Ireland, consejero general del Screen Actors Guild. Sin embargo, esta tecnología solo podrá utilizarse con el consentimiento de los artistas involucrados y con una remuneración adecuada y apropiada ”.

Hao Li, un artista de efectos visuales que se especializa en el uso de inteligencia artificial para manipular rostros, dice que los directores y productores de cine están mostrando un creciente interés en las falsificaciones profundas y la tecnología de inteligencia artificial relacionada. La creación de un deepfake suele llevar horas de procesamiento algorítmico, pero Li está trabajando en una película en la que un director puede ver a un actor transformado en tiempo real utilizando un software deepfake más avanzado.

Según Li, la situación se siente similar cuando el uso de gráficos por computadora fotorrealistas se generalizó en la década de 2000. Ahora, gracias a la IA, «de repente todo el mundo quiere hacer algo», dice.

Esta historia apareció originalmente en wired.com.

Más populares

To Top