A kutatások azt mutatják, hogy a HoloLens hogyan viselkedhet szemként a vak felhasználók számára (videó)

A Caltech és a Dél-Kaliforniai Egyetem kutatói új kutatási tanulmányt tettek közzé arról, hogy a Microsoft HoloLens miként működhet szemként a vakok számára.

A vakok látásának helyreállítása érdekében feltártak néhány megközelítést a nyers képek agyba juttatására. Ezek a megközelítések nem voltak hatékonyak a sávszélesség-igény és a szokatlan ingerek értelmezéséhez szükséges kiterjedt képzés miatt. Ebben az új kutatási cikkben a kutatók egy alternatív megközelítést javasoltak. Ahelyett, hogy az összes szenzoros adatot megpróbálnák eljuttatni az agyhoz, új megközelítésük helyreállítja a látást a kognitív szinten.

Erre a célra a Microsoft HoloLenst használják. Mint mindenki tudja, a HoloLens képes felismerni a felhasználót körülvevő környezetet, ismeri a felhasználó helyzetét a környezetben, valamint videót és egyéb adatokat is rögzíthet a jelenet részletes megismeréséhez. A kutatások felhasználják ezeket az adatokat, és a kibővített hallási valóságon keresztül eljuttatják a vak emberekhez.

Ez a rendszer a vizuális megismerés számos aspektusát támogatja: az akadálykerüléstől a térbeli emlékek kialakításáig és felidézéséig, a nagy távolságú navigációig. Sem képzés, sem a fizikai környezet módosítása nem szükséges: a vak alanyok első próbálkozásra el tudnak navigálni egy ismeretlen többszintes épületben. A hordható eszközök példátlan számítási teljesítményének és a kiterjesztett valóság technológiájának kombinációja a non-invazív protézisek új korszakát ígéri, amelyeknek csak szoftver szab határt.

Ott a kutatók valódi vakokkal is kipróbálták a rendszerüket. Azt találták, hogy a vak felhasználók megbízhatóan meg tudták határozni a tárgyak helyét és rámutattak hangjelzések alapján. Például a szokásos idő töredéke alatt tudtak széket találni egy szobában. A teljes kutatási anyagot elolvashatja itt és nézze meg a technológiát működés közben az alábbi videóban.

Keresztül: TechCrunch