Microsoft koristi snagu zajednice kako bi poboljšao istraživanje prepoznavanja znakovnog jezika

Više od 360 milijuna ljudi s teškim oštećenjem sluha svakodnevno koristi znakovni jezik. Budući da većina osoba koje čuju ne razumije znakovni jezik, nisu u mogućnosti sudjelovati u stvarnom vremenu, nepisanoj komunikaciji s osobama s oštećenjem sluha. Kako bi riješio ovaj problem, Microsoft Research je u veljači 2012. pokrenuo projekt Kinect Sign Language u suradnji s Kineskom akademijom znanosti (CAS) i Sveučilištem Beijing Union. Razvili su alat pod nazivom Kinect Prevoditelj znakovnog jezika koji omogućuje razgovore u stvarnom vremenu između sudionika koji potpisuju i ne potpisuju se pretvaranjem znakovnog jezika u riječi koje izgovori računalo i istovremeno mijenjanjem izgovorenih riječi u znakovni jezik koji prikazuje avatar.

Sada su nedavno počeli Radna skupina za znakovni jezik Kinect zajednice za unapređenje istraživanja u prepoznavanju znakovnog jezika.

Kao prvi korak, otvaramo akademskoj zajednici DEVISIGN, bazu podataka kineskog znakovnog jezika. Sastavio je Obrada vizualnih informacija i učenje (VIPL) grupa Instituta za računarsku tehnologiju, pod pokroviteljstvom Microsoft Research Asia, DEVISIGN pokriva oko 4,400 riječi standardnog kineskog znakovnog jezika na temelju 331,050 podataka iz rječnika od 30 potpisnika (13 muškaraca i 17 žena). Podaci o rječniku sadrže RGB video (u AVI formatu), te informacije o dubini i kosturu (u BIN formatu). DEVISIGN tako pruža istraživačima znakovnog jezika bogatu pohranu podataka za obuku i evaluaciju njihovih algoritama te za stvaranje najsuvremenijih praktičnih aplikacija, kao što su rješenja za obuku sustava da se prilagodi nepoznatom potpisniku.

Više o tome pročitajte na linku ispod.

Izvor: MSR