Suradnja Microsofta i Volkswagena: priča iza značajke pokretne platforme HoloLensa 2

Slušalice za miješanu stvarnost mogu biti uistinu korisne, ali njihova sposobnost suočava se s ograničenjima kada se koriste u jednom specifičnom scenariju: pokretnom okruženju. microsoft i Volkswagen pronašli rješenje za to zajedničkim naporima koji su nam donijeli način rada “pokretne platforme” za HoloLens 2.

Volkswagen predviđa proširenu stvarnost kao glavnu komponentu budućih koncepata mobilnosti. Dakle, započeli su različiti koraci u istraživanju tehnologije. U 2015. godini provela je istraživački projekt koristeći samoupravljačka vozila i proširenu stvarnost za svoje Sustav Race Trainer podučavati vožnju na trkaćoj stazi. Također je uvela head-up zaslon proširene stvarnosti u svom ID-u. obitelji električnih automobila 2020., pri čemu se različite informacije o okolišu ispred vozila (poput navigacijskih strelica i oznaka trake) projiciraju na vjetrobransko staklo.

“Smatramo da su informacije o mješovitoj stvarnosti najintuitivnije informacije koje možemo pružiti kako bismo poboljšali korisničko iskustvo naših kupaca,” rekao je za Microsoft voditelj tima za podatkovnu znanost dr. Volkswagen Grupe Andro Kleen. “Zato što je ono što tamo vidite i što trebate obraditi vrlo je blisko onome što ljudi inače vide i obrađuju. Nije tako apstraktno.”

Sa težnjom da izvuče više od tehnologije, njemački proizvođač motornih vozila koristio je HoloLens za još jedan istraživački projekt, gdje je stavljen u vozilo u pokretu. Stvari, nažalost, nisu išle dobro. Senzori su gubili sposobnost praćenja, a hologrami su nestajali. Problem je ukazao na to da su dva senzora uređaja povezana s kretanjem doživjela zbrku u signalima koje su hvatali dok se vozilo kretalo. S tim je Volkswagen zatražio pomoć od Microsofta, a put tvrtki krenuo je 2018. godine.

“Imali smo opsežne rasprave”, kaže Marc Pollefeys, Microsoftov direktor znanosti i stručnjak za 3D računalni vid i strojno učenje, a sada direktor Microsoftovog laboratorija Mixed Reality and AI Lab u Zürichu, Švicarska. “Predstavili su svoje slučajeve korištenja i ono što su se nadali omogućiti. Bili su željni surađivati ​​s nama kako bismo pronašli rješenje i mogli koristiti HoloLens u tim situacijama.”

Budući da je pandemija izazvala pustoš diljem svijeta, istraživanje se očito suočilo s raznim problemima. Ograničenja Covid-19 u Švicarskoj spriječila su tim da testira tehnologiju u vozilu s drugim putnicima, pa je Joshua Elsdon – Microsoftov viši softverski inženjer koji je dio projekta – morao raditi na tome i provoditi testove u svom stanu u Zurichu.

“Morali smo napraviti mnogo testiranja u mom stanu. Ovo nisu idealni uvjeti za razvoj”, kaže Elsdon. "Sve su te stvari rađene na daljinu i distribuirane u različitim zemljama, što je bilo zanimljivo."

Kasnije je tim testirao prototip na Puget Soundu vozeći se rekreacijskim čamcima, zatim s Volkswagenom u vozilima.

“Povezali smo sustav za pozicioniranje koji prati lokaciju vozila”, kaže Michael Wittkämper, Volkswagenov stručnjak za proširenu stvarnost. “Na ovaj način smo također mogli postaviti 3D elemente kao što su informacije o zanimljivim mjestima izvan automobila. To otvara potpuno nove mogućnosti za prikazivanje holograma ne samo u vozačevom vidnom polju okrenutom prema naprijed, već i kamo god korisnik koji nosi naočale gleda.”

Sve je postalo uspjeh, omogućivši Microsoftu da uvede značajku pokretne platforme. Trenutno je tehnologija velika atrakcija za pomorske tvrtke, koje koriste HoloLens za povezivanje ekipa za održavanje na brodu kako bi konzultirale stručnjake s drugih lokacija. Microsoft ima veće planove za novu značajku u budućnosti, posebno kada su uključena pokretna okruženja. Pollefeys je također rekao da se tvrtka nada da će je učiniti funkcionalnom u svakodnevnom životu kroz prijenosne pametne naočale. Međutim, sa strujom oznake cijena HoloLensa 2 (3,500 do 5,199 dolara), plan bi još uvijek mogao biti daleko od stvarnosti, pogotovo ako Microsoft želi da uređaj dosegne obične potrošače na tržištu.