Microsoft aprovecha el poder de la comunidad para mejorar la investigación en el reconocimiento del lenguaje de señas

Más de 360 ​​millones de personas con pérdida auditiva severa utilizan el lenguaje de señas todos los días. Dado que la mayoría de las personas oyentes no entienden el lenguaje de señas, no pueden entablar una comunicación no escrita en tiempo real con personas con pérdida auditiva. Para resolver este problema, Microsoft Research inició en febrero de 2012 el proyecto Kinect Sign Language en colaboración con la Academia China de Ciencias (CAS) y la Universidad Unión de Beijing. Han desarrollado una herramienta llamada Traductor de lenguaje de señas Kinect que permite conversaciones en tiempo real entre participantes con y sin señas al convertir el lenguaje de señas en palabras habladas por una computadora y, al mismo tiempo, cambiar las palabras habladas en lenguaje de señas representado por un avatar.

Ahora, recientemente han comenzado Grupo de trabajo de lenguaje de señas de Kinect comunidad para avanzar en la investigación sobre el reconocimiento del lenguaje de señas.

Como primer paso, estamos abriendo al mundo académico DEVISIGN, base de datos de lenguaje de señas chino. Compilado por el Aprendizaje y procesamiento de información visual (VIPL) del Instituto de Tecnología Informática, bajo el patrocinio de Microsoft Research Asia, DEVISIGN cubre alrededor de 4,400 palabras estándar del lenguaje de señas chino basado en 331,050 30 piezas de datos de vocabulario de 13 firmantes (17 hombres y XNUMX mujeres). Los datos de vocabulario comprenden video RGB (en formato AVI) e información de profundidad y esqueleto (en formato BIN). El DEVISIGN proporciona así a los investigadores del lenguaje de señas una gran cantidad de datos para entrenar y evaluar sus algoritmos y para crear aplicaciones prácticas de última generación, como soluciones para entrenar el sistema para adaptarse a un firmante desconocido.

Lea más sobre esto en el siguiente enlace.

Fuente: MSR