Microsoft sfrutta il potere della community per migliorare la ricerca nel riconoscimento della lingua dei segni

Oltre 360 ​​milioni di persone con grave ipoacusia usano il linguaggio dei segni ogni giorno. Poiché la maggior parte delle persone udenti non comprende la lingua dei segni, non sono in grado di impegnarsi in comunicazioni non scritte in tempo reale con persone ipoacusiche. Per risolvere questo problema, Microsoft Research nel febbraio 2012 ha avviato il progetto Kinect Sign Language in collaborazione con l'Accademia cinese delle scienze (CAS) e la Beijing Union University. Hanno sviluppato uno strumento chiamato Kinect Sign Language Translator che consente conversazioni in tempo reale tra partecipanti con e senza firma trasformando la lingua dei segni in parole pronunciate da un computer e contemporaneamente cambiando le parole pronunciate nella lingua dei segni resa da un avatar.

Ora, hanno iniziato di recente Gruppo di lavoro Kinect sulla lingua dei segni comunità per promuovere la ricerca nel riconoscimento della lingua dei segni.

Come primo passo, stiamo aprendo al mondo accademico il DEVISIGN, il database della lingua dei segni cinese. Compilato dal Elaborazione e apprendimento delle informazioni visive (VIPL) dell'Institute of Computing Technology, con il patrocinio di Microsoft Research Asia, il DEVISIGN copre circa 4,400 parole standard della lingua dei segni cinese basate su 331,050 dati di vocabolario di 30 firmatari (13 maschi e 17 femmine). I dati del vocabolario comprendono video RGB (in formato AVI) e informazioni sulla profondità e sullo scheletro (in formato BIN). Il DEVISIGN fornisce così ai ricercatori del linguaggio dei segni un ricco archivio di dati per addestrare e valutare i loro algoritmi e per creare applicazioni pratiche all'avanguardia, come soluzioni per addestrare il sistema ad adattarsi a un firmatario sconosciuto.

Leggi di più a riguardo dal link qui sotto.

Fonte: MSR