Microsoft profită de puterea comunității pentru a îmbunătăți cercetarea în recunoașterea limbajului semnelor

Peste 360 ​​de milioane de persoane cu pierdere severă de auz folosesc limbajul semnelor zilnic. Deoarece majoritatea persoanelor auzătoare nu înțeleg limbajul semnelor, ei nu sunt capabili să se angajeze într-o comunicare în timp real, nescrisă, cu persoanele cu deficiență de auz. Pentru a rezolva această problemă, Microsoft Research a început în februarie 2012 proiectul Kinect Sign Language în colaborare cu Academia Chineză de Științe (CAS) și Beijing Union University. Ei au dezvoltat un instrument numit Kinect Sign Language Translator care permite conversații în timp real între participanții care semnează și nesemnează, transformând limbajul semnelor în cuvinte rostite de un computer și schimbând simultan cuvintele rostite în limbajul semnelor redat de un avatar.

Acum, au început recent Grupul de lucru pentru limbajul semnelor Kinect comunitate pentru a avansa cercetarea în recunoașterea limbajului semnelor.

Ca prim pas, deschidem pentru mediul academic DEVISIGN, baza de date a limbajului semnelor chineze. Compilat de către Procesarea și învățarea informațiilor vizuale (VIPL) al Institutului de Tehnologie de Calcul, sub sponsorizarea Microsoft Research Asia, DEVISIGN acoperă aproximativ 4,400 de cuvinte standard în limbajul semnelor chinezești bazate pe 331,050 de date de vocabular de la 30 de semnatari (13 bărbați și 17 femei). Datele de vocabular includ video RGB (în format AVI) și informații despre adâncime și schelet (în format BIN). DEVISIGN oferă astfel cercetătorilor în limbajul semnelor un depozit bogat de date pentru instruirea și evaluarea algoritmilor lor și pentru crearea de aplicații practice de ultimă generație, cum ar fi soluții pentru instruirea sistemului pentru a se adapta la un semnatar necunoscut.

Citiți mai multe despre el din linkul de mai jos.

Sursa: MSR