Así es el primer robot que sincroniza labios al hablar y cantar en varios idiomas

Banner

Redacción / Fernanda Valdespino

Un equipo de investigadores de la Universidad de Columbia ha desarrollado un robot pionero que puede sincronizar el movimiento de sus labios mientras habla y canta en varios idiomas, gracias a un avanzado sistema de inteligencia artificial. Esta tecnología marca un hito en robótica al abordar uno de los mayores desafíos en la interacción humano-robot: la coordinación facial realista.

El proyecto, liderado por el profesor Hod Lipson, equipa al robot con un rostro flexible impulsado por 26 pequeños motores que permiten reproducir gestos labiales complejos. Para aprender, el robot primero observó su propio reflejo en un espejo para mapear los movimientos faciales, y posteriormente analizó horas de videos en YouTube con personas hablando y cantando, lo que le permitió asociar sonidos y fonemas con movimientos específicos de labios de forma automática.

El resultado es un robot capaz de articular frases y canciones sin necesidad de codificar previamente reglas de sincronización labial: la IA traduce directamente el audio en movimiento, sin comprender el significado del lenguaje. Incluso ha demostrado cantar un tema de un álbum generado por inteligencia artificial, manteniendo los movimientos de labios en sintonía con los cambios de ritmo y vocales.

Aunque el movimiento aún no es perfecto —con sonidos complicados como la “B” o la “W” siendo un reto—, los investigadores consideran que este avance tiene potencial para futuras aplicaciones en educación, atención médica y cuidado de adultos mayores, donde la expresividad facial realista puede enriquecer la comunicación entre humanos y máquinas.