Microsoft Research esittelee liikkeentunnistavan mekaanisen näppäimistön, joka tunnistaa tyyppi-hover-pyyhkäiseleet

2dn-sukupolven Microsoft Surface Touch Covers tukee jo niissä eleitä. Mutta sinun on suoritettava eleet näppäimistöllä. Tämän Microsoft Researchin uuden projektin avulla voit suorittaa eleitä näppäimistön yli edes koskematta niihin. Tällaisen käyttökokemuksen mahdollistaa mekaanisen näppäimistön näppäinten välissä olevien infrapuna- (IR) läheisyysanturien matalaresoluutioinen matriisi. Katso video demo yllä.

Esittelemme uudenlaisen lisätyn mekaanisen näppäimistön, joka tunnistaa täyteläisiä ja ilmeikkäitä liikeeleitä sekä laitteen päällä että suoraan sen yläpuolella. Matalaresoluutioinen infrapuna-läheisyysanturien matriisi on välissä tavallisen mekaanisen näppäimistön näppäimien kanssa. Tämä johtaa karkeaan, mutta korkean kuvanopeuden liikedataan. Laajennamme koneoppimisalgoritmia, jota käytetään perinteisesti vain staattiseen luokitukseen, tukemaan vahvasti dynaamisia, ajallisia eleitä. Ehdotamme liiketunnisteiden käyttöä tekniikkaa, joka hyödyntää liikehistoriakuvien pareja ja satunnaista metsäluokittajaa suuren joukon liikeeleiden tunnistamiseen. Tekniikkamme saavuttaa keskimääräisen kehyskohtaisen luokitustarkkuuden, joka on 75:6 % jätä – yksi – tutkittava – ja 89:9 % puolitestin/harjoittelun ristiinvalidaatiossa. Esittelemme yksityiskohtaisesti laitteiston ja eleiden tunnistusalgoritmin, tarjoamme tarkkoja tuloksia ja esittelemme suuren joukon eleitä, jotka on suunniteltu suoritettaviksi laitteella. Päätämme käyttäjien laadulliseen palautteeseen, keskusteluun rajoituksista ja tulevaisuuden työalueista.

kautta: @h0xod