Microsoft Research visar upp mekaniskt tangentbord för rörelseavkänning, upptäcker typ – sväva – svep gester

2dn gen Microsoft Surface Touch Covers stöder redan gester i dem. Men du måste utföra gesterna på tangentbordet. Detta nya projekt från Microsoft Research gör att du kan utföra gester över tangentbordet utan att ens röra dem. En sådan användarupplevelse möjliggörs av en lågupplöst matris av infraröda (IR) närhetssensorer mellan tangenterna på det mekaniska tangentbordet. Se videodemon ovan.

Vi presenterar en ny typ av utökat mekaniskt tangentbord, som känner av rika och uttrycksfulla rörelsegester som utförs både på och direkt ovanför enheten. En lågupplöst matris av infraröda (IR) närhetssensorer varvas med tangenterna på ett vanligt mekaniskt tangentbord. Detta resulterar i grov men hög bildhastighets rörelsedata. Vi utökar en maskininlärningsalgoritm, som traditionellt används endast för statisk klassificering, för att robust stödja dynamiska, tidsmässiga gester. Vi föreslår användningen av rörelsesignaturer, en teknik som använder par av rörelsehistoriska bilder och en slumpmässig skogsklassificerare för att robust känna igen en stor uppsättning rörelsegester. Vår teknik uppnår en genomsnittlig klassificeringsnoggrannhet per bildruta på 75:6 % vid lämna-ett-ämne-ute och 89:9 % i korsvalidering av halvt test/halvträning. Vi detaljerar hårdvara och algoritm för gestigenkänning, ger exakta resultat och visar en stor uppsättning gester som är designade för att utföras med enheten. Vi avslutar med kvalitativ feedback från användare, diskussion om begränsningar och områden för framtida arbete.

via: @h0xod