Para ver los rostros se utilizan modelos 3D dinámicos de las caras de los usuarios.
YouTube ya ha perfeccionado el arte de los videos de realidad mixta que muestran el mundo en Realidad Virtual y el mundo real al mismo tiempo.
Pero los auriculares de realidad virtual no permiten ver el rostro de los usuarios.
Google Research y Daydream Labs tuvieron que unirse para resolver el problema, y lo hicieron con la ayuda del aprendizaje automático, la visión por computadora 3D y técnicas avanzadas de renderizado.
Con el fin de “quitar” el auricular VR en un video, la cara del usuario tiene que ser escaneada con una cámara y reconstruida como un modelo 3D dinámico que parpadea y mira en diferentes direcciones.
El auricular de Realidad Virtual, Google utilizó un HTC Vive para sus pruebas, tiene que ser equipado con tecnología de seguimiento de ojos para detectar dónde está mirando el usuario.
La técnica de Google y Daydream superpone al modelo 3D en la cara de la persona real.
No se quita completamente el auricular, sin embargo: lo reemplaza con una versión transparente.
Google está explorando maneras de hacerlo accesible a YouTubers.
También podría adaptarse para mostrar las caras de las personas en las videoconferencias de realidad virtual o las caras de los amigos que juegan juegos de realidad virtual.
Fuente: Engadget
Artículos relacionados:
Ahora puede tomar fotos en realidad virtual, gratis para Android 
Google presenta Daydream View, su casco de realidad virtual 
Aplicativo gratuito de Samsung le permite experimentar la realidad virtual sin necesidad de auriculares 
Ahora puede escalar el Monte Everest en Realidad Virtual 
Ahora puede jugar con personajes de realidad aumentada sin auriculares o teléfonos inteligentes 
Ahora se puede ser un escultor en realidad virtual