Microsofts siste Human Interaction Research vil forvirre deg

Av og til ser vi at teknologi blir demonstrert som gjør det veldig tydelig at vi lever i fremtiden. Et slikt eksempel er teknologi som utvikles av menneskelig interaksjonsforskere ved Microsoft research.

Et nylig patent "TRE-DIMENSJONELL OBJEKTSPORING TIL AUMENT DISPLAY OMRÅDE” ville ha en datamaskin til å bruke et kamera for å spore bevegelsen til fingre eller styli på området foran enheten, og dermed tillate interaksjoner på et større overflateareal enn enheten i seg selv ville tillate.

Abstraktet lyder:

I noen eksempler kan en overflate, slik som et skrivebord, foran eller rundt en bærbar elektronisk enhet brukes som en relativt stor overflate for å samhandle med den bærbare elektroniske enheten, som typisk har en liten skjerm. En bruker kan skrive eller tegne på overflaten ved å bruke en hvilken som helst gjenstand som en finger, penn eller pekepenn. Overflaten kan også brukes til å simulere et delvis eller full størrelse tastatur. Bruken av et kamera for å registrere den tredimensjonale (3D) plasseringen eller bevegelsen til objektet kan muliggjøre bruk av bevegelser over overflaten, inntasting av retningsbestemthet og fangst av virkelige objekter i et dokument som behandles eller lagres av den elektroniske enhet. En eller flere gjenstander kan brukes til å manipulere elementer som vises av den bærbare elektroniske enheten.

Svakheten med den teknologien er selvfølgelig at kun områder rett foran enheten kan spores.

Microsoft Research Seniorforsker Eyal Ofek har imidlertid funnet en måte å overvinne dette problemet, ved å forbløffende spore refleksjonene av fingeren i linsene til standard mørke solbriller.

Den ville bruke enhetens standard frontkamera og måtte kalibreres for krumningen til brillene, men kunne til og med tillate sporing av bevegelser i luften.

Ofek skriver:

Vi presenterer en ny tilnærming for å utvide inndataområdet rundt umodifiserte mobile enheter. Ved å bruke innebygde frontvendte kameraer av umodifiserte håndholdte enheter, estimerer GlassHands håndstillinger og bevegelser gjennom refleksjoner i solbriller, skibriller eller visir. Derved skaper GlassHands et forstørret inndataområde, konkurrerende inngangsrekkevidde på store berøringsskjermer. Vi introduserer ideen sammen med dets tekniske konsept og implementering. Vi demonstrerer gjennomførbarheten og potensialet til vår foreslåtte tilnærming i flere applikasjonsscenarier, for eksempel kartsurfing eller tegning ved å bruke et sett med interaksjonsteknikker som tidligere kun var mulig med modifiserte mobile enheter eller på store berøringsskjermer. Vår forskning er støttet opp med en brukerstudie.

Se den teknologien, kalt GlassHands, demonstrert i videoen nedenfor.

Vi kan selvfølgelig aldri se noe sånt i et faktisk produkt, men bare det faktum at det er mulig gir en frysninger.

Les mer om GlassHands hos Microsoft Research her.