Facebook está trabajando en una aplicación que usa solo la música para controlar los movimientos de un avatar de realidad aumentada.
En otras palabras, ingrese algo de música, y el avatar se moverá como lo haría un pianista o violinista humano.
La investigación, realizada en asociación con la Universidad de Washington y Stanford, acaba de ser presentada por Facebook en la conferencia CVPR (Computer Vision and Pattern Recognition).
El equipo quería ver si la dinámica natural del cuerpo podía predecirse a partir de la música, y si bien la animación base es bastante básica y débil, sin dudas están en camino de lograr eso.
Luego se detallarán movimientos de brazos y dedos.
Esta es la primera vez que alguien intenta predecir el movimiento del cuerpo a partir de solo música.
Es una interesante pieza de investigación de realidad aumentada y también podría tener aplicaciones de amplio espectro para la música no solo en juegos, sino también en el mundo real.
Si quisiera aprender una pieza de música de piano, por ejemplo, podrías simplemente ingresar el audio y luego imitar los movimientos clave del pianista avatar, mucho más divertido que los métodos tradicionales.
Fuente: Engadget
Artículos relacionados:
Vea a un solo músico tocar cada instrumento de una orquesta de 70 personas 
Inteligencia Artificial genera un rostro humano realista usando solo audio 
Cree un video clip musical gratis con su Facebook 
Más de 25 personajes del cine reunidos magistralmente en un solo video-clip 
Inteligencia artificial capaz de crear videos deepfake realistas a partir de un clip de audio 
La tecnología de captura de movimiento en tiempo real de Disney sólo necesita unos cuantos sensores