Forskning visar hur HoloLens kan fungera som ögon för blinda användare (video)

Forskare från Caltech och University of Southern California har publicerat en ny forskningsartikel som diskuterar hur Microsoft HoloLens kan fungera som ögon för blinda.

För att återställa blinda människors syn har några metoder utforskats för att förmedla råa bilder till hjärnan. Dessa tillvägagångssätt var inte effektiva på grund av bandbreddskraven och den omfattande utbildning som krävdes för att tolka ovanliga stimuli. I detta nya forskningsdokument har forskare föreslagit ett alternativt tillvägagångssätt. Istället för att försöka förmedla hela sensoriska data till hjärnan, återställer deras nya tillvägagångssätt synen på den kognitiva nivån.

De använder Microsoft HoloLens för detta ändamål. Som ni alla vet kan HoloLens känna igen miljön runt sin användare, känner till användarens position i miljön och den kan även fånga video och annan data för detaljerad scenkännedom. Forskare använder dessa data och förmedlar dem till blinda människor genom auditiv förstärkt verklighet.

Detta system stöder många aspekter av visuell kognition: från undvikande av hinder till bildande och återkallande av rumsliga minnen, till långdistansnavigering. Varken träning eller modifiering av den fysiska miljön krävs: Blinda personer kan navigera i en obekant flervåningsbyggnad på sitt första försök. Kombinationen av oöverträffad datorkraft i bärbara enheter med augmented reality-teknik lovar en ny era av icke-invasiva proteser som endast begränsas av mjukvara.

Där provade forskare också sitt system med faktiska blinda. De fann att blinda användare på ett tillförlitligt sätt kunde lokalisera och peka på föremål från ljudsignaler. Till exempel kunde de hitta en stol i ett rum på en bråkdel av den tid de normalt skulle. Du kan läsa hela forskningsartikeln här. och se tekniken i aktion i videon nedan.

via: TechCrunch