La dernière recherche sur l'interaction humaine de Microsoft va vous époustoufler

De temps en temps, nous voyons des démonstrations technologiques, ce qui montre très clairement que nous vivons dans le futur. Un tel exemple est la technologie développée par les chercheurs en interaction humaine de Microsoft Research.

Un brevet récent "SUIVI D'OBJET EN TROIS DIMENSIONS POUR AUGMENTER LA ZONE D'AFFICHAGE« Un ordinateur utiliserait une caméra pour suivre le mouvement des doigts ou des stylets sur la zone devant l'appareil, permettant ainsi des interactions sur une surface plus grande que l'appareil lui-même ne le permettrait.

Le résumé se lit comme suit :

Dans certains exemples, une surface, telle qu'un bureau, devant ou autour d'un dispositif électronique portable peut être utilisée comme une surface relativement grande pour interagir avec le dispositif électronique portable, qui a typiquement un petit écran d'affichage. Un utilisateur peut écrire ou dessiner sur la surface en utilisant n'importe quel objet tel qu'un doigt, un stylo ou un stylet. La surface peut également être utilisée pour simuler un clavier partiel ou complet. L'utilisation d'une caméra pour détecter l'emplacement ou le mouvement tridimensionnel (3D) de l'objet peut permettre l'utilisation de gestes au-dessus de la surface, l'entrée de la directionnalité et la capture d'objets réels dans un document en cours de traitement ou de stockage par le système électronique. appareil. Un ou plusieurs objets peuvent être utilisés pour manipuler des éléments affichés par le dispositif électronique portable.

La faiblesse de cette technologie est bien sûr que seules les zones directement devant l'appareil peuvent être suivies.

Le chercheur principal de Microsoft Research, Eyal Ofek, a cependant trouvé un moyen de surmonter ce problème, en suivant de manière étonnante les reflets de votre doigt dans les verres des lunettes de soleil foncées standard.

Il utiliserait la caméra frontale standard de l'appareil et devrait être calibré pour la courbure des lunettes, mais pourrait même permettre le suivi des gestes dans les airs.

Ofek écrit :

Nous présentons une nouvelle approche pour étendre l'espace d'entrée autour des appareils mobiles non modifiés. À l'aide de caméras frontales intégrées d'appareils portables non modifiés, GlassHands estime les poses et les gestes de la main à travers les reflets dans les lunettes de soleil, les lunettes de ski ou les visières. Ainsi, GlassHands crée un espace de saisie agrandi, rivalisant avec la portée de saisie sur les grands écrans tactiles. Nous introduisons l'idée ainsi que son concept technique et sa mise en œuvre. Nous démontrons la faisabilité et le potentiel de notre approche proposée dans plusieurs scénarios d'application, tels que la navigation sur carte ou le dessin à l'aide d'un ensemble de techniques d'interaction auparavant possibles uniquement avec des appareils mobiles modifiés ou sur de grands écrans tactiles. Notre recherche est étayée par une étude d'utilisateurs.

Voyez cette technologie, appelée GlassHands, démontrée dans la vidéo ci-dessous.

Nous ne verrons peut-être jamais quelque chose comme ça dans un produit réel, mais le simple fait que ce soit possible donne des frissons.

En savoir plus sur GlassHands chez Microsoft Research ici.