Sociedad

Esta IA permite a Robert De Niro tocar líneas en perfecto alemán

Esta IA permite a Robert De Niro tocar líneas en perfecto alemán

Paul Bednyakov | imágenes falsas

¿Me hablas … en alemán?

Gracias a la nueva tecnología deepfake, Robert De Niro puede ofrecer su famosa línea desde conductor de taxien alemán impecable, con movimientos de labios y expresiones faciales realistas. El software de IA manipula los labios y las expresiones faciales de un actor para que coincidan de manera convincente con el idioma de una persona que habla las mismas líneas en un idioma diferente. La tecnología basada en inteligencia artificial podría transformar la industria cinematográfica de formas seductoras e inquietantes.

La tecnología se relaciona con el deepfaking, que es el uso de IA para pegar la cara de una persona a otra. Promete a los directores volver a filmar películas en diferentes idiomas, haciendo que las versiones extranjeras sean menos disruptivas y más fieles al original para la audiencia. Sin embargo, la capacidad de cambiar automáticamente la cara de un actor con tanta facilidad también puede resultar controvertida si no se usa con cuidado.

La tecnología de sincronización de IA fue desarrollada por Flawless, una empresa británica cofundada por el director Scott Mann.

Después de ver una versión extranjera de su última película, roboMann, quien interpretó a De Niro, estaba consternado por cómo el doblaje arruinó escenas cuidadosamente elaboradas. (Se niega a indicar el idioma). El doblaje a veces cambia significativamente el diálogo, dice Mann, para que coincida mejor con los movimientos de los labios de un actor. «Recuerdo que estaba devastado», dice. «Haces un pequeño cambio en una palabra o una actuación, puede hacer un gran cambio en un personaje en el ritmo de la historia y, a su vez, en la película».

Mann comenzó a investigar trabajos académicos relacionados con deepfakes, lo que lo llevó a un proyecto con sincronización de IA dirigido por Christian Theobalt, profesor del Instituto Max Planck de Ciencias de la Computación en Alemania. El trabajo es más exigente que un deepfake convencional. Se trata de capturar las expresiones faciales y los movimientos de un actor en una escena y de una persona que habla las mismas líneas en otro idioma. Luego, esta información se combina para crear un modelo 3D que conecta la cara y la cabeza del actor con los movimientos de los labios del doblador. Finalmente, en una escena, el resultado se borda digitalmente en el actor.

Flawless se inspiró en el proyecto de Theobalt para su producto. Según Mann, la compañía está en conversaciones con estudios sobre la creación de versiones extranjeras de varias películas. Otros clips de demostración de Flawless presentan a Jack Nicholson y Tom Cruise entregando líneas famosas de Un par de buenos hombres en francés y Tom Hanks pronuncia español y japonés en escenas Forrest Gump.

«Va a ser invisible muy pronto», dice Mann. “La gente verá algo y no se dará cuenta de que se rodó originalmente en francés o lo que sea. «

Mann dice que Flawless también está explorando cómo su tecnología puede ayudar a los estudios a evitar costosas regrabaciones al hacer que un actor diga nuevas líneas. Pero dice que algunos actores se sienten un poco inseguros cuando se ven manipulados con IA. «Hay miedo y asombro, esas son las dos reacciones que sigo teniendo», dice.

Virginia Gardner, una actriz que protagoniza la última película de Mann y que habla español gracias al software Flawless, no parece demasiado preocupada, aunque asume que las películas modificadas con IA incluirían un descargo de responsabilidad. «Creo que esta es la mejor manera de mantener tu desempeño como actor», dice en otro idioma. «Si confías en tu director y confías en que este proceso solo mejorará una película, entonces realmente no veo ningún inconveniente».

La manipulación de videos de IA es controvertida, y por una buena razón. Los programas deepfake gratuitos, que se utilizan para transferir sin problemas la cara de una persona a otra en una escena de video, han proliferado con los avances en IA. El software identifica puntos clave en el rostro de una persona y utiliza el aprendizaje automático para capturar cómo se mueve el rostro de esa persona.

La tecnología se ha utilizado para crear pornografía de celebridades falsa y dañar clips de pornografía de venganza dirigidos a mujeres. Los expertos temen que las falsificaciones que muestran a una persona famosa en una situación comprometedora puedan difundir información errónea e influir en las elecciones.

La manipulación de rostros de las estanterías podría resultar controvertida en la industria cinematográfica. Darryl Marks, fundador de Adapt Entertainment, una compañía de Tel Aviv que trabaja en otra herramienta de sincronización de inteligencia artificial, dice que no está seguro de cómo reaccionarían algunos actores ante un cambio en su desempeño, especialmente si no está claro que lo hace desde una computadora. «Si hay un actor muy famoso, podrían bloquearlo», dice.

«Hay usos legítimos y éticos para esta tecnología», dice Duncan Crabtree-Ireland, consejero general del Screen Actors Guild. Sin embargo, esta tecnología solo podrá utilizarse con el consentimiento de los artistas involucrados y con una remuneración adecuada y apropiada ”.

Hao Li, un artista de efectos visuales que se especializa en el uso de inteligencia artificial para manipular rostros, dice que los directores y productores de cine están mostrando un creciente interés en las falsificaciones profundas y la tecnología de inteligencia artificial relacionada. La creación de un deepfake suele llevar horas de procesamiento algorítmico, pero Li está trabajando en una película en la que un director puede ver a un actor transformado en tiempo real utilizando un software deepfake más avanzado.

Según Li, la situación se siente similar cuando el uso de gráficos por computadora fotorrealistas se generalizó en la década de 2000. Ahora, gracias a la IA, «de repente todo el mundo quiere hacer algo», dice.

Esta historia apareció originalmente en wired.com.

Entradas relacionadas:

Reseña: Omar Sy brilla más que nunca como un ladrón caballero en Lupin Part 2
Los auriculares más nuevos de HTC señalan el final de la misión de 5 años de Vive "VR para el hogar"
The Anacrusis: Left 4 Dead + Science Fiction + Persistent AI, llega a PC y Xbox este otoño
Prueba de gabinete de pinball Arcade1Up: bueno para familias, interesante para modders
Todo lo que anunció Nintendo en su presentación “Direct” para el E3 2021
Kena: Bridge of Spirits estreno a tu alcance: tan bueno como suena "Legend of Pikmin"
Tenemos nuestro mejor vistazo al súper villano mandarín en el nuevo tráiler de Shang Chi
El lema de Sony "Generaciones importantes" se está desmoronando: Gran Turismo 7 será de género cruza...
El documental de los Beatles de 6 horas de Peter Jackson confirmado para Disney + este noviembre
NPD: los primeros 5 meses de PlayStation 5 son los mejores para el lanzamiento de una consola en EE....
Mass Effect Legendary Edition: Pruebas, pensamientos y una transmisión de Twitch a las 10 en punto E...
Recorre, o monta en bicicleta, la pista del famoso Circuito de las Américas de F1
Gabe Newell de Valve insinúa vagos planes de consola que vendrán "este año".
Google está tratando de atraer a los editores de Stadia con un mejor reparto de ingresos
Juega a este juego de Dreamcast Castlevania más de 20 años después de su cancelación
Comenzó como un juego de mazmorras impulsado por IA. Entonces se puso mucho más oscuro
Revelación de Starfield: Exclusivamente para PC, Xbox Series X / S a partir del 11 de noviembre de 2...
DCs Rorschach: un detective entra en un mundo formado por pulpos y superhéroes
Epic Games vs Apple en números: ¿Fortnite vale tanto dinero?
Acertijos sin resolver del universo de Warhammer 40k protagonizado por Loremaster Dan Abnett
Por que la definición de Roblox de "juegos" es clave para el caso de Epic vs.Apple
Míranos hoy como la apertura del prometedor regreso exclusivo de PS5 de Sony
Schumacher, Senna y el modo multijugador cooperativo son nuevas incorporaciones para F1 2021
El interruptor de apagado del software amenazante acecha en el hardware envejecido de PlayStation
Una visión extraña de la velocidad de fotogramas: así es como funciona el primer juego de "40 fps" e...
Invincible S1: Obviamente, los programas de superhéroes más entretenidos de la televisión en estos d...
Playdate, la consola de manivela, se reservará por $ 179 en julio, detalles del juego
¿Qué pasó con el boicot de Left 4 Dead 2 en 2009? Aquí está la historia interna
¿Quieres viajar más rápido en Skyward Sword HD? ¡Compra este amiibo de $ 25!
DirectStorage en Windows 11: rendimiento de juegos de próxima generación con requisitos de PC
La emergencia de COVID cierra el Super Nintendo World de Japón un mes después de su apertura
Sony dijo que podría ser difícil encontrar PS5 para 2022

Más populares

To Top