A mais recente pesquisa de interação humana da Microsoft vai te surpreender

Ocasionalmente, vemos a tecnologia sendo demonstrada, o que deixa muito claro que estamos vivendo no futuro. Um exemplo é a tecnologia que está sendo desenvolvida pelos pesquisadores de interação humana na pesquisa da Microsoft.

Uma patente recente “RASTREAMENTO DE OBJETOS TRIDIMENSIONAIS PARA AUMENTAR A ÁREA DE EXIBIÇÃO” faria um computador usar uma câmera para rastrear o movimento dos dedos ou pontas na área na frente do dispositivo, permitindo interações em uma área de superfície maior do que o próprio dispositivo permitiria.

O resumo diz:

Em alguns exemplos, uma superfície, como um desktop, na frente ou ao redor de um dispositivo eletrônico portátil pode ser usada como uma superfície relativamente grande para interagir com o dispositivo eletrônico portátil, que normalmente possui uma pequena tela de exibição. Um usuário pode escrever ou desenhar na superfície usando qualquer objeto, como um dedo, caneta ou caneta. A superfície também pode ser usada para simular um teclado de tamanho parcial ou completo. O uso de uma câmera para detectar a localização tridimensional (3D) ou movimento do objeto pode permitir o uso de gestos acima da superfície, entrada de direcionalidade e captura de objetos reais em um documento que está sendo processado ou armazenado pelo sistema eletrônico. dispositivo. Um ou mais objetos podem ser usados ​​para manipular elementos exibidos pelo dispositivo eletrônico portátil.

A fraqueza dessa tecnologia é, obviamente, que apenas as áreas diretamente na frente do dispositivo podem ser rastreadas.

No entanto, o pesquisador sênior da Microsoft Research, Eyal Ofek, encontrou uma maneira de superar esse problema, rastreando surpreendentemente os reflexos do seu dedo nas lentes dos óculos escuros padrão.

Ele usaria a câmera frontal padrão do dispositivo e precisaria ser calibrado para a curvatura dos óculos, mas poderia até permitir o rastreamento de gestos no ar.

Ofek escreve:

Apresentamos uma nova abordagem para estender o espaço de entrada em torno de dispositivos móveis não modificados. Usando câmeras frontais embutidas de dispositivos portáteis não modificados, o GlassHands estima poses e gestos das mãos por meio de reflexos em óculos de sol, óculos de esqui ou viseiras. Assim, o GlassHands cria um espaço de entrada ampliado, rivalizando com o alcance de entrada em grandes telas de toque. Apresentamos a ideia juntamente com o seu conceito técnico e implementação. Demonstramos a viabilidade e potencial da nossa abordagem proposta em vários cenários de aplicação, como navegação em mapas ou desenho usando um conjunto de técnicas de interação anteriormente possíveis apenas com dispositivos móveis modificados ou em grandes telas sensíveis ao toque. Nossa pesquisa é apoiada por um estudo de usuário.

Veja essa tecnologia, chamada GlassHands demonstrada no vídeo abaixo.

É claro que podemos nunca ver algo assim em um produto real, mas o mero fato de que é possível dá arrepios.

Leia mais sobre GlassHands na Microsoft Research aqui.