El equipo dice que C-Face funciona incluso cuando el sujeto usa una máscara.

Investigadores de la Universidad de Cornell han creado un sistema de auriculares que puede rastrear las expresiones faciales del usuario incluso cuando lleva una máscara.

C-Face puede monitorear el contorno de las mejillas y convertir la expresión del usuario en un emoji.

Eso podría permitir a las personas, por ejemplo, transmitir sus emociones durante las llamadas grupales sin tener que encender su cámara web.

“Este dispositivo es más simple, menos molesto y más capaz que cualquier tecnología portátil existente montada en la oreja para rastrear expresiones faciales“, dijo Cheng Zhang, director del SciFi Lab de Cornell y autor principal de un artículo sobre C-Face, en un comunicado.

“En la tecnología portátil anterior que tenía como objetivo reconocer las expresiones faciales, la mayoría de las soluciones necesitaban colocar sensores en la cara e incluso con tanta instrumentación, solo podían reconocer un conjunto limitado de expresiones faciales discretas“.

El auricular usa dos cámaras RGB que se colocan debajo de cada oreja.

Pueden registrar cambios en los contornos de las mejillas cuando se mueven los músculos faciales del usuario.

Una vez que las imágenes se han reconstruido utilizando visión por computadora y un modelo de aprendizaje profundo, una red neuronal convolucional analiza las imágenes en 2D.

La tecnología puede traducirlos en 42 puntos de rasgos faciales que representan la posición y la forma de la boca, los ojos y las cejas del usuario.

C-Face puede traducir esas expresiones en ocho emoji, incluidos los que representan caras neutrales o enojadas.

El sistema también puede usar señales faciales para controlar las opciones de reproducción en una aplicación de música.

Otros usos posibles incluyen tener avatares en juegos u otros entornos virtuales que expresan las emociones reales de una persona.

Los profesores también pueden hacer un seguimiento de la participación de sus alumnos durante las clases remotas.

Debido al impacto de COVID-19, los investigadores solo pudieron probar C-Face con nueve participantes.

Aún así, el reconocimiento de emoji fue más del 88 por ciento de precisión y las señales faciales más del 85 por ciento de precisión.

Los investigadores encontraron que la capacidad de la batería de los auriculares limitaba el sistema.

Como tal, planean desarrollar tecnología de detección que consuma menos energía.

Fuente: Engadget

Artículos relacionados:

Crean el primer sistema para reproducir todas las expresiones faciales y de manera continua a partir de una sola imagen Nuevo robot con expresiones faciales, contacto visual y piel casi real Silla de ruedas con inteligencia artificial se puede controlar mediante expresiones faciales Computadores aprenden a leer sus expresiones faciales ocultas Nano tatuajes para rastrear expresiones faciales Software que detecta el engaño en las expresiones faciales