Microsoftin ja Volkswagenin yhteistyö: tarina HoloLens 2:n liikkuvan alustan takana

Mixed reality -kuulokkeet voivat olla todella hyödyllisiä, mutta niiden kyky kohtaa rajoituksia, kun niitä käytetään yhdessä tietyssä tilanteessa: liikkuvassa ympäristössä. Microsoft ja Volkswagen ovat löytäneet tähän ratkaisun yhteisellä ponnistelulla, joka toi meille "liikkuvan alustan" -tilan HoloLens 2.

Volkswagen näkee lisätyn todellisuuden tärkeänä osana tulevaisuuden liikkuvuuskonsepteja. Joten se aloitti eri vaiheet tekniikan tutkimiseksi. Vuonna 2015 se toteutti tutkimusprojektin, jossa hyödynnettiin itseohjattavia ajoneuvoja ja lisättyä todellisuutta. Race Trainer -järjestelmä opettaa ajamista kilparadalla. Se esitteli myös lisätyn todellisuuden head-up-näyttö sen tunnuksessa. sähköautoperhe vuonna 2020, jossa erilaista tietoa ajoneuvon edessä olevasta ympäristöstä (kuten navigointinuolet ja kaistamerkinnät) projisoidaan tuulilasiin.

"Mielestämme sekatodellisuustieto on intuitiivisin tieto, jonka voimme tarjota parantaaksemme asiakkaidemme käyttökokemusta", tohtori Volkswagen Group Innovationin tietotieteiden tiimin johtaja Andro Kleen kertoi Microsoftille. "Koska se, mitä siellä näet ja mitä sinun täytyy käsitellä, on hyvin lähellä sitä, mitä ihmiset tavallisesti näkevät ja käsittelevät. Se ei ole niin abstraktia."

Pyrkiessään saamaan enemmän irti tekniikasta saksalainen moottoriajoneuvovalmistaja käytti HoloLensiä toiseen tutkimusprojektiin, jossa se laitettiin liikkuvaan ajoneuvoon. Asiat eivät valitettavasti menneet hyvin. Anturit menettivät seurantakykynsä ja hologrammit katosivat. Ongelma viittasi siihen, että laitteen kaksi liikkeeseen liittyvää anturia kokivat hämmennystä signaalissa, jotka ne poimivat ajoneuvon liikkuessa. Tässä Volkswagen pyysi Microsoftilta apua, ja yritysten matka alkoi vuonna 2018.

"Keskustelimme laajasti", sanoo Marc Pollefeys, Microsoftin tiedejohtaja ja 3D-tietokonenäön ja koneoppimisen asiantuntija ja nyt Microsoftin Mixed Realityn ja tekoälylaboratorion johtaja Zürichissä, Sveitsissä. ”He esittelivät käyttötapansa ja mitä he toivoivat mahdollistavan. He olivat innokkaita työskentelemään kanssamme löytääkseen ratkaisun ja voidakseen käyttää HoloLensiä näissä tilanteissa."

Pandemia aiheutti tuhoa ympäri maailmaa, joten tutkimuksessa ilmeisesti oli useita ongelmia. Covid-19-rajoitukset Sveitsissä estivät tiimiä testaamasta tekniikkaa ajoneuvon sisällä muiden matkustajien kanssa, joten Joshua Elsdonin – Microsoftin vanhempi ohjelmistosuunnittelija osana projektia – joutui työskentelemään sen parissa ja suorittamaan testejä Zürichin asunnossaan.

"Meidän piti tehdä paljon testejä asunnossani. Nämä eivät ole ihanteellisia kehitysolosuhteita”, Elsdon sanoo. "Kaikki nämä asiat tehtiin etänä ja jaettiin eri maihin, mikä oli mielenkiintoista."

Myöhemmin tiimi testasi prototyyppiä Puget Soundissa ajamalla huviveneitä ja sitten Volkswagenin kanssa ajoneuvoissa.

"Yhdistimme paikannusjärjestelmän, joka seuraa ajoneuvon sijaintia", sanoo Michael Wittkämper, Volkswagenin lisätyn todellisuuden asiantuntija. ”Tällä tavalla pystyimme sijoittamaan auton ulkopuolelle myös 3D-elementtejä, kuten tietoa kiinnostavista kohteista. Tämä avaa täysin uusia mahdollisuuksia näyttää hologrammeja kuljettajan eteenpäin suuntautuvassa näkökentässä, mutta myös minne tahansa silmälaseja käyttävä käyttäjä katsoo."

Kaikesta tuli menestys, mikä antoi Microsoftille mahdollisuuden ottaa käyttöön liikkuvan alustan ominaisuuden. Tällä hetkellä teknologia on suuri vetovoima merenkulkualan yrityksille, jotka yhdistävät HoloLensin laivan huoltohenkilöstön neuvottelemaan asiantuntijoiden kanssa muista paikoista. Microsoftilla on suurempia suunnitelmia uudelle ominaisuudelle tulevaisuudessa, erityisesti silloin, kun kyseessä ovat liikkuvat ympäristöt. Pollefeys sanoi myös, että yritys toivoo saavansa sen toimivaksi jokapäiväisessä elämässä kannettavien älylasien avulla. Kuitenkin nykyisellä hintalaput HoloLens 2:sta (3,500 5,199–XNUMX XNUMX dollaria), suunnitelma saattaa silti olla kaukana todellisuudesta, varsinkin jos Microsoft haluaa laitteen tavoittavan tavallisia kuluttajia markkinoilla.