Cercetările arată cum HoloLens poate acționa ca ochi pentru utilizatorii nevăzători (video)

Pictograma timp de citire 2 min. citit


Cititorii ajută la sprijinirea MSpoweruser. Este posibil să primim un comision dacă cumpărați prin link-urile noastre. Pictograma Tooltip

Citiți pagina noastră de dezvăluire pentru a afla cum puteți ajuta MSPoweruser să susțină echipa editorială Află mai multe

Cercetătorii de la Caltech și Universitatea din California de Sud au publicat o nouă lucrare de cercetare care discută despre modul în care Microsoft HoloLens poate acționa ca ochi pentru persoanele nevăzătoare.

Pentru a restabili vederea orbilor, au fost explorate unele abordări pentru a transmite imagini brute către creier. Aceste abordări nu au fost eficiente din cauza cerințelor de lățime de bandă și a pregătirii extinse necesare pentru a interpreta stimuli neobișnuiți. În această nouă lucrare de cercetare, cercetătorii au propus o abordare alternativă. În loc să încerce să transmită toate datele senzoriale către creier, noua lor abordare restabilește vederea la nivel cognitiv.

Ei folosesc Microsoft HoloLens în acest scop. După cum știți cu toții, HoloLens poate recunoaște mediul din jurul utilizatorului său, cunoaște poziția utilizatorului în mediu și poate captura, de asemenea, videoclipuri și alte date pentru cunoașterea detaliată a scenei. Cercetările folosesc aceste date și le transmit oamenilor nevăzători prin intermediul realității auditive augmentate.

Acest sistem acceptă multe aspecte ale cunoașterii vizuale: de la evitarea obstacolelor până la formarea și rememorarea amintirilor spațiale, până la navigarea pe distanțe lungi. Nu sunt necesare nici antrenament, nici modificarea mediului fizic: Subiecții nevăzători pot naviga într-o clădire necunoscută cu mai multe etaje la prima încercare. Combinația dintre puterea de calcul fără precedent în dispozitivele portabile cu tehnologia de realitate augmentată promite o nouă eră a protezelor neinvazive care sunt limitate doar de software.

Acolo, cercetătorii și-au încercat sistemul și cu oameni nevăzători. Ei au descoperit că utilizatorii nevăzători au putut să localizeze și să arate în mod fiabil obiectele din indicații audio. De exemplu, au reușit să găsească un scaun într-o cameră într-o fracțiune de timp în care ar fi în mod normal. Puteți citi întreaga lucrare de cercetare aici și vedeți tehnologia în acțiune în videoclipul de mai jos.

S TechCrunch

Mai multe despre subiecte: Oameni orbi, Ochi, hololens, microsoft, Cercetare