Saltar al contenido principal

Procedencia editorial

Fuente original
xataka.com
Enviado por
alberto
Resumen generado
El resumen se ha producido automáticamente y no sustituye la publicación original.
Análisis de Limonatic
Contenido analítico añadido por la plataforma y diferenciado de la fuente.
Sin revisión editorial humana
No consta una revisión humana de este contenido.

Amazon prueba sincronización labial con IA en serie alemana Maxton Hall

Tecnología · Fuente original · Leer en xataka.com

Fecha original
Fecha en Limonatic

Amazon está impulsando agresivamente la integración de inteligencia artificial en sus plataformas de contenido, con Prime Video liderando una iniciativa para automatizar procesos creativos como el doblaje. La compañía ha presentado una tecnología que va más allá de la simple traducción o sustitución de actores de voz: reescribe digitalmente los movimientos labiales de los intérpretes originales para sincronizarlos con nuevas pistas de audio en diferentes idiomas.

Esta innovación tecnológica se encuentra actualmente en fase de prueba y aplicación dentro de producciones de Amazon GMM Studios, específicamente en una serie alemana titulada Maxton Hall. La herramienta toma el vídeo original como referencia y altera fotograma a fotograma tanto los labios como la zona inferior del rostro de los actores para que coincidan con la pronunciación de cada idioma doblado.

Raf Soltanovich, vicepresidente de tecnología de Prime Video y Amazon GMM Studios, ha declarado que el objetivo es crear una forma más fluida e inmersiva de disfrutar del contenido global. Aunque no se han publicado demostraciones oficiales ni un calendario de expansión a otros idiomas, la compañía ya ha dejado claro sus planes para extender esta tecnología a más títulos en el futuro.

Amazon también está probando sistemas de doblaje asistido por IA para películas y series en inglés y español, así como producciones generadas íntegramente por inteligencia artificial para algunos anime. Estas iniciativas han provocado reacciones negativas tanto por parte de usuarios como de actores, e incluso algunas resúmenes automáticos tuvieron que retirarse debido a la cantidad de errores presentes.

La tecnología de sincronización labial mediante IA no es nueva; empresas como Flawless AI se fundaron hace años para este propósito y títulos de videojuegos como Cyberpunk 2077 ya han utilizado estas herramientas. Amazon parece estar empujando esta tecnología con fuerza, invirtiendo recursos significativos en su plataforma de vídeo, aunque la agencia que supervisa la IA en España no está supervisando actualmente estos desarrollos.

Imagen 1 de Amazon prueba sincronización labial con IA en serie alemana Maxton Hall
Imagen 1 de Amazon prueba sincronización labial con IA en serie alemana Maxton Hall

Análisis editorial

Amazon impulsa una revolución en la localización de contenido mediante una inteligencia artificial que reescribe digitalmente los movimientos labiales y faciales de los actores originales para sincronizarlos con doblajes en otros idiomas. Esta iniciativa, liderada por Raf Soltanovich, vicepresidente de tecnología de Prime Video y Amazon GMM Studios, busca automatizar el proceso eliminando la necesidad de sustituir a los intérpretes tradicionales, aunque carece aún de demostraciones públicas que validen su eficacia visual ante el público general.

La estrategia se centra en una eficiencia operativa extrema: el costo estimado por episodio se sitúa en 150 dólares, frente al gasto tradicional de múltiples sesiones de grabación y actores. Actualmente, la tecnología altera fotograma a fotograma tanto los labios como la zona inferior del rostro para coincidir con pistas de audio dobladas, siendo su despliegue inicial activo en la serie alemana 'Maxton Hall' para su versión en inglés, con planes declarados de escalarla a más títulos y posiblemente otros idiomas.

Sin embargo, esta manipulación digital enfrenta el riesgo inherente del "valle inquietante", ya que los humanos detectan inconscientemente perturbaciones faciales mínimas, como la desincronización labial artificial, lo que podría generar rechazo social o profesional similar al provocado por doblajes generados íntegramente por IA en anime. Además, el uso agresivo de estas herramientas ha tensionado las relaciones con los actores y actrices de voz, quienes ven amenazados sus derechos y su trabajo frente a una automatización que prioriza la reducción de costes sobre la autenticidad humana.

En conclusión, Amazon prioriza la eficiencia y la expansión global del contenido mediante la manipulación facial digital, pero esta apuesta genera incertidumbre sobre la aceptación estética final y la viabilidad social de la tecnología. Mientras la compañía empuja hacia una automatización integral que recuerda a las herramientas ya utilizadas en videojuegos como 'Cyberpunk 2077', el éxito dependerá de su capacidad para mitigar las perturbaciones faciales mínimas antes de que el público perciba la artificialidad detrás de los rostros que mira.

Contexto y análisis adicional

Digest

Resumen ejecutivo
  • Amazon está implementando una IA capaz de modificar digitalmente los labios y el rostro inferior de actores para sincronizarlos con doblajes, eliminando la necesidad de sustituir a los intérpretes originales.
  • Esta iniciativa busca automatizar la localización en Prime Video reduciendo drásticamente los costes operativos, aunque carece aún de demostraciones públicas que validen su eficacia visual ante el público.
Evidencias
  • La tecnología altera fotograma a fotograma tanto los labios como la zona inferior del rostro para coincidir con pistas de audio dobladas.
  • El costo operativo estimado por episodio se sitúa en 150 dólares, frente al gasto tradicional de múltiples actores y sesiones de grabación.
  • El despliegue inicial ya está activo en la serie alemana 'Maxton Hall' para su versión en inglés.
  • Existe un riesgo percibido de rechazo social debido a que los humanos detectan inconscientemente perturbaciones faciales mínimas, como la desincronización labial artificial.
Acciones
  • Monitorear las pruebas piloto en 'Maxton Hall' para evaluar la percepción visual del público antes de escalar a otros títulos o idiomas.
  • Desarrollar protocolos de control de calidad que detecten y corrijan perturbaciones faciales mínimas para mitigar el riesgo de rechazo social.
Conclusión final

Amazon prioriza la eficiencia y reducción de costes mediante la manipulación facial digital, lo que genera incertidumbre sobre la aceptación estética final ante el riesgo de rechazo por desincronización.

Riesgos

Riesgos/alertas
Acciones recomendadas
Señales/evidencias
  • Amazon es una de las compañías que más están empujando la inteligencia artificial.
  • Si ves competiciones deportivas, te habrás tragado anuncios cada dos por tres sobre AWS y publicidad sobre cómo ciertas estadísticas de esos deportes funcionan gracias a la IA (aunque cuando no había IA, también había estadísticas).
  • Con Prime Video también tienen una cruzada para automatizar ciertos procesos como el doblaje, y ahora han presentado una IA que no se limita a traducir o sustituir a actores de doblaje: directamente, reescribe digitalmente el movimiento labial de los actores para que parezca que están pronunciando las palabras de cada uno de esos idiomas doblados.
Conclusión

No se identifican alertas deducibles con suficiente soporte en el texto disponible.

Autor · clanes

Votos · compartir

0
· Abrir en el medio

Las historias descartadas o eliminadas no admiten votos ni reportes.

Sentimiento

Tono: Neutro Impacto: Positivo Financiero: Neutro

Entidades (agregadas)

Hover para ver referencias.
Amazon (ORG) ×13 Futurism (ORG) Raf Soltanovich (PERSON) Prime Video (ORG) ×2 Amazon GMM Studios (ORG) Netflix (ORG) España (LOCATION) Flawless AI (ORG) Will Smith (PERSON) Xataka México México (ORG) Lara Croft (PERSON) Lara (PERSON) Adoma (ORG) China (LOCATION) Xataka (ORG) Alejandro Alcolea (PERSON)
Detalles avanzados Timeline y mini scoring

Evolución temporal

  1. Enviada

    hace 4 días · Historia enviada para revisión

  2. Último estado

    hace 1 día · Última actualización registrada

Mini scoring (LScore)

Caliente 1.994,09 Ascenso 0,01

Fuentes

Fuente principal
xataka.com

https://www.xataka.com

Comentarios