Investigadores de Cornell inventan auriculares que rastrean las expresiones faciales incluso con mascarilla

Investigadores de la Universidad de Cornell han inventado un auricular que puede rastrear continuamente expresiones faciales completas, incluso cuando la cara está cubierta por una máscara. El dispositivo montado en la oreja, llamado C-Face, funciona observando el contorno de las mejillas y luego traduce las expresiones en emojis o comandos de voz.

Con el dispositivo C-Face, los usuarios pueden expresar emociones a los colaboradores en línea sin tener que sostener cámaras frente a sus caras. Esto parece una herramienta útil para la comunicación, especialmente en un momento en que el mundo está involucrado en el trabajo o el aprendizaje a distancia debido a la pandemia de COVID-19 en curso.

Demostración de C-Face

Cheng Zhang, profesor asistente de ciencia de la información y autor principal de esta investigación, ha dicho que “este dispositivo es más simple, menos molesto y más capaz que cualquier tecnología portátil existente en el oído para rastrear expresiones faciales”.

Como el dispositivo funciona detectando el movimiento de los músculos, C-Face puede capturar expresiones faciales incluso cuando los usuarios llevan máscaras. También se puede usar para dirigir un sistema informático, como un reproductor de música, simplemente usando solo señales faciales.

ELECCIÓN DEL EDITOR: Una patente de diseño de pantalla Samsung revela un tercer factor de forma plegable posible para teléfonos inteligentes

Al usar el dispositivo, los avatares en entornos de realidad virtual pueden expresar cómo se sienten realmente sus usuarios, y los instructores también pueden obtener información valiosa sobre la participación de los estudiantes durante las lecciones en línea.

En cuanto a su funcionamiento, una vez capturadas las imágenes, se reconstruyen mediante visión artificial y un modelo de aprendizaje profundo. Luego, una red neuronal convolucional, un modelo de IA para clasificar, detectar y recuperar imágenes, reconstruye los contornos en expresiones.

Traduce las imágenes de las mejillas a 42 puntos de rasgos faciales, o puntos de referencia, que representan las formas y posiciones de la boca, los ojos y las cejas, ya que esos rasgos son los más afectados por los cambios en la expresión.

Los investigadores probaron el dispositivo C-Face en nueve participantes y el error promedio de los puntos de referencia reconstruidos fue inferior a 0,8 mm. También encontraron que el reconocimiento de emoji era más del 88 por ciento de precisión y el habla silenciosa era casi un 85 por ciento de precisión.

ARRIBA A CONTINUACIÓN: Huawei planea crear más puestos de trabajo y aumentar las inversiones en los mercados extranjeros

Like this post? Please share to your friends:
Leave a Reply

;-) :| :x :twisted: :smile: :shock: :sad: :roll: :razz: :oops: :o :mrgreen: :lol: :idea: :grin: :evil: :cry: :cool: :arrow: :???: :?: :!: