YouTube implementa sincronización labial en los vídeos doblados automáticamente a otros idiomas utilizando IA

YouTube se ha convertido en la plataforma de visualización de vídeos más visitada del mundo, pues dispone de más usuarios activos mensuales que redes sociales como Instagram o TikTok. La plataforma ya ha cumplido un año y aunque en esencia es lo mismo que existía en aquel entonces, ha habido una gran cantidad de mejoras. Tenemos todo tipo de funciones añadidas como la selección de resoluciones HD, Full HD, 1440p y 4K, los subtítulos en todo tipo de idiomas o el reciente "auto-dubbing" o doblaje automático. Esta función se anunció en diciembre de 2024 y finalmente llegó a los creadores verificados en junio de 2025. Ahora YouTube ha revelado la evolución de este concepto, pues se ha añadido sincronización labial (lip sync) con IA para que la traducción a otros idiomas se sienta más natural.

YouTube tardó poco en llamar la atención de una de las mayores empresas del mundo, Google, la cual adquirió la plataforma y desde entonces, es propiedad suya. Esta plataforma de vídeos ha ido cambiando con los años y lo que antes eran vídeos a resolución 144p, 240p y 360p donde veíamos todo pixelado en monitores 4:3 ahora se han convertido en vídeos a 4K y 60 FPS que podemos ver en nuestros monitores o TV.

YouTube añade una tecnología de sincronización labial por IA en los vídeos doblados a otros idiomas

La función de traducción automática o doblaje automático que implementó YouTube ha recibido algunos elogios, pero mucha más gente la ha criticado y siente que esta no hace un buen trabajo. Vemos comentarios de personas que consideran que la voz traducida a otro idioma suena muy robótica, muy falsa y que no se parece a la original. También se ha criticado el hecho de que no está totalmente sincronizada y no coinciden las palabras con los gestos. Es un tema controvertido, pero YouTube considera que es una buena función y está haciendo todo lo posible por mejorarla.

De hecho, tenemos ahora una nueva tecnología, que, como podemos ver en el vídeo, logra una sincronización labial cuando seleccionamos el nuevo idioma. Puede que la voz siga teniendo ese toque falso y que se nota que no es exactamente el mismo tono y tipo de voz, pero la IA hace un trabajo bastante bueno. Eso sí no es perfecto, pues si que se nota que hay cierto retraso en el movimiento en la sincronización, pero sigue siendo mejor que lo que teníamos antes.

Se han traducido por IA más de 60 millones de vídeos en el último año

YouTube ha mostrado esto en el evento "Made on YouTube" de este mes, donde aseguran que se han auto traducido más de 60 millones de vídeos en un año. Según la compañía, este doblaje a distintos idiomas utiliza modelos de IA como Gemini y Aloud que generan el audio traducido, simulan el tono y la emoción de la persona y separan las voces de los sonidos de fondo con exactitud.

Los usuarios han criticado tanto los resultados como el hecho de que este tipo de tecnologías podrían acabar con actores de doblaje en canales grandes que se han segmentado en otros con diversos idiomas. Ahora un solo canal puede tener decenas de idiomas sin necesidad de crear canales secundarios. A pesar de todas las quejas y controversia que ha creado, hay canales de YouTube que han conseguido triplicar su audiencia en otros idiomas distintos del nativo tras añadir esta opción en sus vídeos. Respecto a la nueva tecnología de lip sync, esta se implementará inicialmente en 20 idiomas, incluyendo el inglés, español, alemán y francés.