Tutkimus osoittaa, kuinka HoloLens voi toimia sokeiden käyttäjien silminä (video)

Caltechin ja Etelä-Kalifornian yliopiston tutkijat ovat julkaisseet uuden tutkimuspaperin, jossa keskustellaan siitä, kuinka Microsoft HoloLens voi toimia sokeiden silminä.

Sokeiden näön palauttamiseksi on tutkittu joitakin tapoja välittää raakoja kuvia aivoihin. Nämä lähestymistavat eivät olleet tehokkaita kaistanleveysvaatimusten ja epätavallisten ärsykkeiden tulkitsemiseen tarvittavan laajan koulutuksen vuoksi. Tässä uudessa tutkimuspaperissa tutkijat ovat ehdottaneet vaihtoehtoista lähestymistapaa. Sen sijaan, että he yrittäisivät välittää koko aistitietoa aivoille, heidän uusi lähestymistapansa palauttaa näön kognitiivisella tasolla.

He käyttävät Microsoft HoloLensiä tähän tarkoitukseen. Kuten kaikki tiedätte, HoloLens tunnistaa käyttäjäänsä ympäröivän ympäristön, tietää käyttäjän sijainnin ympäristössä ja voi myös kaapata videota ja muuta dataa saadakseen yksityiskohtaista tietoa kohtauksesta. Tutkimukset käyttävät näitä tietoja ja välittävät ne sokeille kuulon lisätyn todellisuuden kautta.

Tämä järjestelmä tukee monia visuaalisen kognition näkökohtia: esteiden välttämisestä tilamuistojen muodostamiseen ja palauttamiseen pitkän matkan navigointiin. Koulutusta tai fyysisen ympäristön muokkaamista ei vaadita: Sokeat voivat navigoida tuntemattomassa monikerroksisessa rakennuksessa ensimmäisellä yrityksellään. Puettavien laitteiden ennennäkemättömän laskentatehon yhdistelmä lisätyn todellisuuden teknologian kanssa lupaa uuden aikakauden non-invasiivisille proteeseille, joita rajoittavat vain ohjelmistot.

Siellä tutkijat kokeilivat järjestelmää myös todellisten sokeiden kanssa. He havaitsivat, että sokeat käyttäjät pystyivät paikantamaan ja osoittamaan kohteita luotettavasti äänimerkkien avulla. He esimerkiksi pystyivät löytämään tuolin huoneesta murto-osassa normaalista ajasta. Voit lukea koko tutkimuspaperin tätä ja katso tekniikka toiminnassa alla olevalta videolta.

Via: TechCrunch