Inteligencia Artificial genera un rostro humano realista usando solo audio

Seamos realistas, los actores de voz suelen ser más fáciles de encontrar y no le costarán tanto, pero a veces, la pista de audio puede necesitar una cara.

Para ello se ha creado Omniverse Audio2Face de NVIDIA.

Puede generar una animación de un personaje 3D para que coincida con cualquier pista de voz en off, ya sea para un videojuego, una película, asistentes digitales en tiempo real o simplemente como un experimento.

Puede utilizar la aplicación para aplicaciones interactivas en tiempo real o como una herramienta de creación de animación facial tradicional.

¿Como funciona?

La herramienta viene precargada con “Digital Mark“, que es esencialmente un modelo de personaje en 3D que se puede animar con una pista de audio.

Para comenzar seleccione su audio y luego súbalo.

Luego, esta pista de audio se alimenta a una red neuronal profunda previamente entrenada y la salida impulsa los vértices 3D de la malla de su personaje para crear la animación facial en tiempo real.

“Audio2Face le permite cambiar el objetivo a cualquier cara humana o humana en 3D, ya sea realista o estilizada.

Es fácil ejecutar múltiples instancias de Audio2Face con varios personajes en una escena, todo animado a partir de las mismas o diferentes pistas de audio”, dijo NVIDIA.

Fuente: NVIDIA