Microsoft využívá sílu komunity ke zlepšení výzkumu v oblasti rozpoznávání znakového jazyka

Více než 360 milionů lidí s těžkou ztrátou sluchu používá znakový jazyk každý den. Protože většina slyšících jedinců nerozumí znakové řeči, nejsou schopni se zapojit do nepsané komunikace v reálném čase s lidmi se sluchovou ztrátou. K vyřešení tohoto problému zahájil Microsoft Research v únoru 2012 projekt Kinect Sign Language ve spolupráci s Čínskou akademií věd (CAS) a Univerzitou v Pekingu. Vyvinuli nástroj nazvaný Kinect Sign Language Translator, který umožňuje konverzace v reálném čase mezi podepisujícími a nepodepisujícími účastníky tím, že převádí znakový jazyk na slova mluvená počítačem a současně mění mluvená slova na znakový jazyk vykreslený avatarem.

Nyní nedávno začali Pracovní skupina pro znakový jazyk Kinect komunita k pokroku ve výzkumu v rozpoznávání znakového jazyka.

Jako první krok otevíráme akademické obci DEVISIGN, databázi čínského znakového jazyka. Sestavil Zpracování a učení vizuálních informací (VIPL) skupiny Institute of Computing Technology, pod záštitou společnosti Microsoft Research Asia, DEVISIGN pokrývá asi 4,400 331,050 standardních slov čínského znakového jazyka na základě 30 13 slovní zásoby od 17 signatářů (XNUMX mužů a XNUMX žen). Data slovníku zahrnují RGB video (ve formátu AVI) a informace o hloubce a kostře (ve formátu BIN). DEVISIGN tak poskytuje výzkumníkům znakového jazyka bohatou zásobu dat pro trénování a vyhodnocování jejich algoritmů a pro vytváření nejmodernějších praktických aplikací, jako jsou řešení pro trénování adaptace systému na neznámého signatáře.

Přečtěte si o tom více z odkazu níže.

Zdroj: MSR