Forskning viser, hvordan HoloLens kan fungere som øjne for blinde brugere (video)

Forskere fra Caltech og University of Southern California har offentliggjort et nyt forskningspapir, der diskuterer, hvordan Microsoft HoloLens kan fungere som øjne for blinde.

For at genoprette blinde menneskers syn er nogle metoder blevet udforsket til at formidle rå billeder til hjernen. Disse tilgange var ikke effektive på grund af båndbreddekravene og den omfattende træning, der kræves for at fortolke usædvanlige stimuli. I dette nye forskningspapir har forskere foreslået en alternativ tilgang. I stedet for at forsøge at formidle hele sensoriske data til hjernen, genopretter deres nye tilgang synet på det kognitive niveau.

De bruger Microsoft HoloLens til dette formål. Som I alle ved, kan HoloLens genkende miljøet omkring sin bruger, kender brugerens position i miljøet og det kan også optage video og andre data for detaljeret scenekendskab. Forskere bruger disse data og formidler dem til blinde mennesker gennem auditiv augmented reality.

Dette system understøtter mange aspekter af visuel kognition: fra undgåelse af forhindringer til dannelse og genkaldelse af rumlige minder, til langdistancenavigation. Hverken træning eller ændring af det fysiske miljø er påkrævet: Blinde forsøgspersoner kan navigere i en ukendt bygning med flere etager i deres første forsøg. Kombinationen af ​​hidtil uset computerkraft i bærbare enheder med augmented reality-teknologi lover en ny æra af ikke-invasive proteser, der kun er begrænset af software.

Der prøvede forskere også deres system med faktiske blinde. De fandt ud af, at blinde brugere var i stand til pålideligt at lokalisere og pege på objekter fra lydsignaler. For eksempel var de i stand til at finde en stol i et rum på en brøkdel af den tid, de normalt ville. Du kan læse hele forskningsoplægget link. og se teknologien i aktion i videoen nedenfor.

via: TechCrunch