Az új Kinect könnyedén olvassa az emberi jelnyelvet
2 perc olvas
Publikálva
Ossza meg ezt a cikket
Javítsa ezt az útmutatót
Olvassa el közzétételi oldalunkat, hogy megtudja, hogyan segítheti az MSPowerusert a szerkesztői csapat fenntartásában Tovább
A Microsoft Kinect forradalmat hoz létre a természetes felhasználói felület területén. Az alacsony költségű 3D mélységkamera, mint a Kinect, végtelen lehetőségeket nyit meg számítástechnikánkban. Sok siket és nagyothalló ember számára a jelnyelv az elsődleges nyelv, de jelenleg ezek az emberek nem tudnak anyanyelvükön kommunikálni a számítógépekkel. A Microsoft Research Asia kifejlesztett egy olyan rendszert a Kinect segítségével, amely képes felismerni az emberek által használt jelnyelveket, és jól működik.
Íme néhány információ a projektről,
A Kinect, amely képes egyidejűleg biztosítani a mélységi információkat és a színadatokat, megkönnyíti a kéz és a test mozgásának pontosabb – és gyorsabb – nyomon követését.
Ebben a projektben – amely a következő időszakban kerül bemutatásra DemoFest egy része A kari csúcstalálkozó 2013, amely több mint 400 akadémiai kutatót hoz a Microsoft központjába, hogy megosszák a hatásos kutatásokba való betekintést – a kézi nyomon követés a 3D-s mozgáspályák összehangolásának és az egyes szavak jelnyelvi egyeztetésének folyamatához vezet. A szavakat a kézi követéssel generálja a Kinect for Windows szoftverrel, majd normalizálják, és a megfelelő pontszámokat számítják ki, hogy azonosítsák a legrelevánsabb jelölteket az előjeles szó elemzésekor.
Ennek a 3D-s pályaillesztésnek az algoritmusa viszont lehetővé tette a jelnyelv felismerésére és fordítására szolgáló rendszer felépítését, amely két módból áll. Az első, a Fordítási mód a jelnyelvet szöveggé vagy beszédre fordítja. A technológia jelenleg támogatja az amerikai jelbeszédet, de a jelbeszéd minden fajtájára alkalmas.
A második, a kommunikációs mód lehetővé teszi a kommunikációt egy halló személy és egy siket vagy nagyothalló személy között avatar használatával. A billentyűzetről érkező szövegbevitellel az avatar képes megjeleníteni a megfelelő jelnyelvi mondatot. A siket vagy nagyothalló személy jelbeszéddel válaszol, és a rendszer ezt a választ szöveggé alakítja.
Olvass tovább az alábbi linken.
Forrás: microsoft
