Novi Kinect može s lakoćom čitati ljudski znakovni jezik

Microsoft Kinect stvara pravu revoluciju u polju prirodnog korisničkog sučelja. Jeftina 3D dubinska kamera poput Kinecta otvara beskonačne mogućnosti u našem svijetu računala. Znakovni jezik je primarni jezik za mnoge gluhe i nagluhe osobe, ali trenutno nije moguće da te osobe komuniciraju s računalima koristeći svoj materinji jezik. Microsoft Research Asia razvio je sustav pomoću Kinecta koji može detektirati znakovne jezike koje koriste ti ljudi i dobro radi.

Evo nekoliko informacija o projektu,

Kinect, sa svojom sposobnošću pružanja informacija o dubini i podataka o boji istovremeno, olakšava točnije i brže praćenje radnji ruku i tijela.

U ovom projektu—koji se prikazuje tijekom DemoFest dio od Fakultetski samit 2013, koji dovodi više od 400 akademskih istraživača u sjedište Microsofta kako bi podijelili uvid u dojmljiva istraživanja—praćenje ruke vodi do procesa 3-D usklađivanja putanje kretanja i podudaranja za pojedinačne riječi u znakovnom jeziku. Riječi se generiraju putem praćenja ruke od strane Kinect za Windows softvera, a zatim se normalizira, a rezultati podudaranja se izračunavaju kako bi se identificirali najrelevantniji kandidati kada se analizira potpisana riječ.

Algoritam za ovo 3-D usklađivanje trajektorija je, pak, omogućio konstrukciju sustava za prepoznavanje i prevođenje znakovnog jezika, koji se sastoji od dva načina. Prvi, način prevođenja, prevodi znakovni jezik u tekst ili govor. Tehnologija trenutno podržava američki znakovni jezik, ali ima potencijal za sve varijante znakovnog jezika.

Drugi, Communications Mode, omogućuje komunikaciju između osobe koja čuje i gluhe ili nagluhe osobe korištenjem avatara. Vodeći se unosom teksta s tipkovnice, avatar može prikazati odgovarajuću rečenicu na znakovnom jeziku. Gluha ili nagluha osoba odgovara znakovnim jezikom, a sustav taj odgovor pretvara u tekst.

Pročitajte više na linku ispod.

Izvor: microsoft