Nieuwe Kinect kan menselijke gebarentaal met gemak lezen
2 minuut. lezen
Uitgegeven op
deel dit artikel
Verbeter deze handleiding
Lees onze openbaarmakingspagina om erachter te komen hoe u MSPoweruser kunt helpen het redactieteam te ondersteunen Lees meer
Microsoft Kinect zorgt voor een ware revolutie op het gebied van Natural User Interface. De goedkope 3D-dieptecamera zoals Kinect opent oneindige mogelijkheden in onze computerwereld. Gebarentaal is de primaire taal voor veel doven en slechthorenden, maar momenteel is het voor deze mensen niet mogelijk om met computers te communiceren in hun moedertaal. Microsoft Research Asia heeft een systeem ontwikkeld dat Kinect gebruikt dat gebarentalen kan detecteren die door deze mensen worden gebruikt en dat goed werkt.
Hier wat informatie over het project,
Kinect, met zijn vermogen om tegelijkertijd diepte- en kleurgegevens te verstrekken, maakt het gemakkelijker om hand- en lichaamsacties nauwkeuriger en sneller te volgen.
In dit project – dat te zien is tijdens de DemoFest deel van Facultaire Top 2013, die meer dan 400 academische onderzoekers naar het hoofdkantoor van Microsoft brengt om inzicht te delen in impactvol onderzoek - het volgen van de hand leidt tot een proces van 3D-bewegingstrajectuitlijning en afstemming voor afzonderlijke woorden in gebarentaal. De woorden worden gegenereerd via handtracking door de Kinect voor Windows software en vervolgens genormaliseerd, en overeenkomende scores worden berekend om de meest relevante kandidaten te identificeren wanneer een ondertekend woord wordt geanalyseerd.
Het algoritme voor deze 3D-trajectorisatie heeft op zijn beurt de constructie mogelijk gemaakt van een systeem voor herkenning en vertaling van gebarentaal, bestaande uit twee modi. De eerste, vertaalmodus, vertaalt gebarentaal in tekst of spraak. De technologie ondersteunt momenteel Amerikaanse gebarentaal, maar heeft potentieel voor alle soorten gebarentaal.
De tweede, Communicatiemodus, maakt communicatie tussen een horende persoon en een dove of slechthorende persoon mogelijk door middel van een avatar. Geleid door tekstinvoer vanaf een toetsenbord, kan de avatar de bijbehorende gebarentaalzin weergeven. De dove of slechthorende reageert met gebarentaal en het systeem zet dat antwoord om in tekst.
Lees meer via onderstaande link.
Bron: Microsoft
