연구에 따르면 HoloLens가 시각 장애인의 눈 역할을 하는 방법(비디오)

Caltech와 University of Southern California의 연구원들이 Microsoft HoloLens가 시각 장애인의 눈 역할을 할 수 있는 방법에 대해 논의하는 새로운 연구 논문을 발표했습니다.

시각 장애인의 시력을 회복하기 위해 원시 이미지를 뇌에 전달하는 몇 가지 접근 방식이 탐색되었습니다. 이러한 접근 방식은 대역폭 요구 사항과 비정상적인 자극을 해석하는 데 필요한 광범위한 교육 때문에 효과적이지 않았습니다. 이 새로운 연구 논문에서 연구자들은 대안적인 접근 방식을 제안했습니다. 전체 감각 데이터를 뇌로 전달하는 대신, 그들의 새로운 접근 방식은 인지 수준에서 시력을 복원합니다.

그들은 이 목적을 위해 Microsoft HoloLens를 사용하고 있습니다. 모두 알다시피 HoloLens는 사용자 주변 환경을 인식할 수 있고 환경에서 사용자의 위치를 ​​알 수 있으며 자세한 장면 지식을 위해 비디오 및 기타 데이터를 캡처할 수도 있습니다. 연구에서는 이러한 데이터를 사용하여 청각 증강 현실을 통해 시각 장애인에게 전달합니다.

이 시스템은 장애물 회피에서 공간 기억의 형성 및 회상, 장거리 탐색에 이르기까지 시각적 인지의 여러 측면을 지원합니다. 물리적 환경의 훈련이나 수정이 필요하지 않습니다. 시각 장애인은 처음 시도할 때 익숙하지 않은 다층 건물을 탐색할 수 있습니다. 웨어러블 장치의 전례 없는 컴퓨팅 성능과 증강 현실 기술의 결합은 소프트웨어로만 제한되는 비침습적 보철의 새로운 시대를 약속합니다.

그곳에서 연구원들은 실제 시각 장애인들과 함께 그들의 시스템을 시험해 보았습니다. 그들은 시각 장애인이 오디오 신호에서 물체를 안정적으로 찾고 가리킬 수 있음을 발견했습니다. 예를 들어, 그들은 평소보다 훨씬 짧은 시간에 방에서 의자를 찾을 수 있었습니다. 전체 연구 논문을 읽을 수 있습니다 여기에서 지금 확인해 보세요. 아래 비디오에서 기술이 실제로 작동하는지 확인하십시오.

비아 : 테크 크런치 (TechCrunch)