Microsoft benut de kracht van de gemeenschap om het onderzoek naar de herkenning van gebarentaal te verbeteren

Meer dan 360 miljoen mensen met ernstig gehoorverlies gebruiken elke dag gebarentaal. Aangezien de meeste horenden geen gebarentaal begrijpen, kunnen ze niet in realtime, ongeschreven communiceren met mensen met gehoorverlies. Om dit probleem op te lossen, startte Microsoft Research in februari 2012 het Kinect Sign Language-project in samenwerking met de Chinese Academie van Wetenschappen (CAS) en de Beijing Union University. Ze hebben een tool ontwikkeld met de naam Kinect Sign Language Translator die realtime gesprekken mogelijk maakt tussen gebarende en niet-ondertekenende deelnemers door gebarentaal om te zetten in woorden die door een computer worden gesproken en tegelijkertijd gesproken woorden te veranderen in gebarentaal die wordt weergegeven door een avatar.

Nu zijn ze onlangs begonnen Werkgroep Kinect Gebarentaal gemeenschap om onderzoek naar gebarentaalherkenning vooruit te helpen.

Als eerste stap openen we voor de academische wereld de DEVISIGN, Chinese Sign Language Database. samengesteld door de Visuele informatieverwerking en leren (VIPL) groep van het Institute of Computing Technology, onder de sponsoring van Microsoft Research Asia, de DEVISIGN omvat ongeveer 4,400 standaard Chinese gebarentaalwoorden op basis van 331,050 stukjes vocabulaire van 30 ondertekenaars (13 mannen en 17 vrouwen). De vocabulairegegevens omvatten RGB-video (in AVI-formaat) en diepte- en skeletinformatie (in BIN-formaat). De DEVISIGN biedt gebarentaalonderzoekers dus een rijke hoeveelheid gegevens voor het trainen en evalueren van hun algoritmen en voor het creëren van ultramoderne praktische toepassingen, zoals oplossingen om het systeem te trainen om zich aan te passen aan een onbekende ondertekenaar.

Lees er meer over via onderstaande link.

Bron: MSR