A Microsoft a közösség erejével fejleszti a jelnyelv-felismeréssel kapcsolatos kutatást
2 perc olvas
Publikálva
Ossza meg ezt a cikket
Javítsa ezt az útmutatót
Olvassa el közzétételi oldalunkat, hogy megtudja, hogyan segítheti az MSPowerusert a szerkesztői csapat fenntartásában Tovább
Több mint 360 millió súlyos halláskárosodásban szenvedő ember használ mindennap jelbeszédet. Mivel a legtöbb halló egyén nem érti a jelnyelvet, nem tud valós idejű, íratlan kommunikációt folytatni hallássérültekkel. A probléma megoldására a Microsoft Research 2012 februárjában elindította a Kinect Sign Language projektet a Kínai Tudományos Akadémiával (CAS) és a Peking Union Egyetemmel együttműködve. Kifejlesztettek egy Kinect Sign Language Translator nevű eszközt, amely valós idejű beszélgetést tesz lehetővé aláíró és nem aláíró résztvevők között azáltal, hogy a jelnyelvet számítógép által kimondott szavakká alakítja, és ezzel egyidejűleg a kimondott szavakat avatar által megjelenített jelnyelvre változtatja.
Most nemrég kezdték el Kinect jelnyelvi munkacsoport közösséget a jelnyelv-felismeréssel kapcsolatos kutatás előmozdítása érdekében.
Első lépésként megnyitjuk a tudományos körök előtt a DEVISIGN kínai jelnyelvi adatbázist. Összeállította a Vizuális információfeldolgozás és tanulás Az Institute of Computing Technology (VIPL) csoportja, a Microsoft Research Asia támogatásával, a DEVISIGN mintegy 4,400 szabványos kínai jelnyelvi szót fed le 331,050 aláíró (30 férfi és 13 nő) 17 XNUMX szókincsei alapján. A szókincs adatok tartalmazzák az RGB videót (AVI formátumban), valamint a mélység- és vázinformációkat (BIN formátumban). A DEVISIGN így gazdag adattárral látja el a jelnyelvi kutatókat az algoritmusaik képzéséhez és értékeléséhez, valamint a legkorszerűbb gyakorlati alkalmazások létrehozásához, például olyan megoldásokhoz, amelyek a rendszert az ismeretlen aláíróhoz való alkalmazkodásra tanítják.
Olvasson róla bővebben az alábbi linken.
Forrás: MSR
