Microsoft hyödyntää yhteisön voimaa parantaakseen viittomakielen tunnistamisen tutkimusta

Yli 360 miljoonaa vakavasta kuulovauriosta kärsivää ihmistä käyttää viittomakieltä päivittäin. Koska suurin osa kuulevista ei ymmärrä viittomakieltä, he eivät pysty reaaliaikaiseen, kirjoittamattomaan kommunikaatioon kuulovammaisten kanssa. Tämän ongelman ratkaisemiseksi Microsoft Research käynnisti helmikuussa 2012 Kinect Viittomakieli -projektin yhteistyössä Kiinan tiedeakatemian (CAS) ja Beijing Union Universityn kanssa. He ovat kehittäneet työkalun nimeltä Kinect Sign Language Translator, joka mahdollistaa reaaliaikaisen keskustelun viittomakielisten ja allekirjoittamattomien osallistujien välillä muuttamalla viittomakielen tietokoneella puhutuiksi sanoiksi ja samalla muuttamalla puhutut sanat avatarin tuottamaksi viittomakieleksi.

Nyt ne ovat alkaneet hiljattain Kinectin viittomakielen työryhmä yhteisöä edistämään tutkimusta viittomakielen tunnistamisessa.

Ensimmäisenä askeleena avaamme korkeakouluille DEVISIGN-kiinan viittomakielitietokannan. Kokoanut Visuaalinen tiedonkäsittely ja oppiminen (VIPL) Institute of Computing Technology, Microsoft Research Asian sponsoroima DEVISIGN kattaa noin 4,400 331,050 standardikiinan viittomakielen sanaa, jotka perustuvat 30 13 sanastotietoon 17 allekirjoittajalta (XNUMX miestä ja XNUMX naista). Sanastotiedot sisältävät RGB-videon (AVI-muodossa) sekä syvyys- ja luurankotiedot (BIN-muodossa). DEVISIGN tarjoaa siis viittomakielen tutkijoille runsaan tietovaraston algoritmien koulutusta ja arviointia varten sekä huippuluokan käytännön sovellusten luomista, kuten ratkaisuja järjestelmän kouluttamiseen sopeutumaan tuntemattomaan allekirjoittajaan.

Lue aiheesta lisää alla olevasta linkistä.

Lähde: MSR