Microsoft의 최신 인간 상호 작용 연구는 당신을 놀라게 할 것입니다

때때로 우리는 우리가 미래에 살고 있음을 분명히 하는 기술이 시연되는 것을 봅니다. 그러한 예는 Microsoft 연구의 인간 상호 작용 연구원이 개발 중인 기술입니다.

최근 특허 "증강 디스플레이 영역에 대한 XNUMX차원 물체 추적"는 컴퓨터가 카메라를 사용하여 장치 앞 영역에서 손가락이나 스타일러스의 움직임을 추적하도록 하여 장치 자체에서 허용하는 것보다 더 넓은 표면적에서 상호 작용을 허용합니다.

초록은 다음과 같습니다.

일부 예들에서, 휴대용 전자 디바이스의 전면 또는 주변의 데스크탑과 같은 표면은 일반적으로 작은 디스플레이 스크린을 갖는 휴대용 전자 디바이스와 상호작용하기 위한 상대적으로 큰 표면으로서 사용될 수 있다. 사용자는 손가락, 펜 또는 스타일러스와 같은 어떤 물체를 사용하여 표면에 글을 쓰거나 그릴 수 있습니다. 표면은 부분 또는 전체 크기 키보드를 시뮬레이션하는 데에도 사용할 수 있습니다. 물체의 3차원(XNUMXD) 위치 또는 움직임을 감지하기 위한 카메라의 사용은 표면 위 제스처의 사용, 방향성 입력, 전자 장치에 의해 처리되거나 저장되는 문서에 실제 물체의 캡처를 가능하게 할 수 있습니다. 장치. 하나 이상의 객체는 휴대용 전자 장치에 의해 표시되는 요소를 조작하는 데 사용될 수 있습니다.

물론 이 기술의 약점은 장치 바로 앞에 있는 영역만 추적할 수 있다는 것입니다.

그러나 Microsoft Research의 선임 연구원인 Eyal Ofek은 표준 다크 선글라스 렌즈에서 손가락의 반사를 놀랍도록 추적하여 이 문제를 극복하는 방법을 찾았습니다.

장치의 표준 전면 카메라를 사용하고 안경의 곡률에 맞게 보정해야 하지만 공중에서 제스처를 추적할 수도 있습니다.

Ofek은 다음과 같이 씁니다.

수정되지 않은 모바일 장치 주변의 입력 공간을 확장하는 새로운 접근 방식을 제시합니다. GlassHands는 수정되지 않은 핸드헬드 장치의 내장 전면 카메라를 사용하여 선글라스, 스키 고글 또는 바이저의 반사를 통해 손 포즈와 제스처를 추정합니다. 따라서 GlassHands는 대형 터치 디스플레이의 입력 범위에 필적하는 확장된 입력 공간을 만듭니다. 우리는 기술 개념 및 구현과 함께 아이디어를 소개합니다. 이전에는 수정된 모바일 장치 또는 대형 터치 디스플레이에서만 가능했던 일련의 상호 작용 기술을 사용하여 지도 탐색 또는 그리기와 같은 여러 응용 시나리오에서 제안된 접근 방식의 실현 가능성과 잠재력을 보여줍니다. 우리의 연구는 사용자 연구로 뒷받침됩니다.

아래 비디오에서 설명된 GlassHands라는 기술을 참조하십시오.

물론 실제 제품에서는 그런 모습을 한 번도 본 적이 없을 수도 있지만, 그것이 가능하다는 사실만으로도 전율을 느끼게 됩니다.

GlassHands에 대해 자세히 알아보기 여기 Microsoft Research에서.