Amazon presentó una herramienta de inteligencia artificial que no se limita a traducir o sustituir a actores de doblaje: reescribe digitalmente el movimiento labial de los actores y actrices para que parezca que pronuncian las palabras del idioma doblado. La compañía ya la prueba en la serie alemana 'Maxton Hall', según reportó Futurism.
Raf Soltanovich, vicepresidente de tecnología de Prime Video y Amazon GMM Studios, señaló que la compañía busca crear una forma "más fluida e inmersiva de disfrutar del contenido global". La herramienta toma el video original como referencia y altera los labios y la zona inferior del rostro, fotograma a fotograma, para que la boca coincida con la pista de audio doblada.
El anuncio se enmarca en una estrategia más amplia de la empresa, que también empuja la inteligencia artificial en otros frentes, como los servicios de AWS y la publicidad sobre estadísticas deportivas procesadas con IA, según el medio especializado.
Sin demo pública y con un solo título confirmado
Amazon no ha publicado ningún video ni demo tecnológica del sistema. Lo que sí se sabe es que el despliegue empieza con 'Maxton Hall', una serie alemana que ya usa esta tecnología para el doblaje al inglés. La compañía indicó que se trata de una prueba, pero tiene planes de extenderlo a más títulos en el futuro. No hay calendario definido ni confirmación de si llegará a idiomas distintos del inglés.
La apuesta de Amazon por la IA en su plataforma de video es más amplia. La empresa está probando sistemas de doblaje "asistido por IA" para películas y series en inglés y español, y también ha recurrido a doblajes generados íntegramente por IA para algunos anime, lo que provocó una reacción negativa de usuarios y actores. Además, retiró resúmenes de series generados con IA por la cantidad de errores que contenían, y produjo títulos hechos con IA como 'Love, Diana Music Hunters'.
Una tecnología que ya existe en la industria
La sincronización labial por IA no es nueva. Empresas como Flawless AI se fundaron hace años precisamente para este fin, y videojuegos como 'Cyberpunk 2077' ya la usaron para mejorar la sincronización en distintos idiomas. Cuando los deepfakes empezaban a popularizarse, la tecnología ya se empleaba para este tipo de ajustes.
El punto crítico, según el artículo, es el llamado "valle inquietante": los humanos detectan de inmediato cualquier perturbación mínima en las facciones de un rostro, porque gran parte de la comunicación humana depende de leer rostros. Eso podría generar más rechazo que una ligera desincronización labial.
El rechazo del sector del doblaje
El sector del doblaje se ha enfrentado a Amazon por este uso de la IA. Uno de los casos más sonados es el de la voz de Lara Croft en el juego 'Tomb Raider: Legacy of Atlantis', que no contará con las actrices que doblan al personaje desde 1998 porque el título no tendrá doblaje a muchos idiomas.
"Las empresas entrenan modelos de IA capaces de generar voces imitándoles, sin permiso y sin compensación", afirmó Adoma, el mayor sindicato de actores y actrices de voz a nivel nacional.
Adoma cuestionó a la compañía por no proteger a los actores de doblaje con una cláusula de IA adecuada. El conflicto de fondo no es solo el doblaje con IA, sino que Amazon pide a los actores que trabajen con ellos ceder los derechos de su voz para entrenar la IA. Sindicatos y asociaciones de doblaje se han negado, y por eso hay idiomas a los que ciertas compañías no están doblando sus títulos.
Queda pendiente conocer si Amazon publicará una demo del sistema y si la prueba con 'Maxton Hall' se extenderá a más idiomas además del inglés.
Comentarios
Comparte tu opinión de manera respetuosa.
Inicia sesión para dejar un comentario.