În loc de 5 camere, HoloLens 2.0 poate avea doar una

Generația actuală HoloLens (mai sus) are de fapt 5 camere - două pe fiecare parte pentru detectarea adâncimii folosind emițători de puncte în infraroșu, la fel ca Kinect, și o cameră centrală RGB care utilizează lumina ambientală obișnuită pentru localizare și cartografiere simultană (SLAM), asemănător cu modul în care camerele din căștile Windows Mixed Reality sunt capabile să calculeze mișcarea și poziția relativă pe baza peisajului din mediul dumneavoastră.

Într-un nou brevet solicitat în martie 2017 și publicat astăzi, Microsoft descrie o nouă cameră multi-spectrală care poate înlocui cele 5 camere cu doar una.

Rezumatul aplicației, MODUL DE ILUMINARE ȘI SENSOR MULTI-SPECTRUM PENTRU URMĂRIREA CAPULUI, RECUNOAȘTERE GESTURĂ ȘI HARTARE SPAȚIALĂ, arată:

Un dispozitiv și o metodă utilizează mai mulți emițători de lumină cu un singur senzor de imagine cu spectru multiplu pentru a realiza o detectare a adâncimii pe bază de lumină infraroșie multimodală și localizare și cartografiere simultană (SLAM) pe bază de lumină vizibilă. Sensarea multimodală a adâncimii pe bază de infraroșu poate include, de exemplu, orice combinație de cartografiere spațială pe bază de infraroșu, urmărire a mâinii pe bază de infraroșu și/sau etichetare semantică pe bază de infraroșu. SLAM-ul bazat pe lumină vizibilă poate include urmărirea capului, de exemplu.

Microsoft explică în continuare inovația cheie, senzorul de imagine cu spectru multiplu, ca atare:

Figura 4 ilustrează schematic un senzor cu spectru multiplu pentru detectarea atât a luminii vizibile, cât și a luminii IR. Senzorul cu spectru multiplu 400 include două tipuri diferite de pixeli senzori: pixeli de lumină vizibilă și pixeli de lumină IR. Pixelii de lumină vizibilă (fiecare notați cu un „V” în Figura 4) sunt sensibili la lumina vizibilă în bandă largă (de exemplu, de la 400 nm la 650 nm) și au sensibilitate limitată la lumina IR. Pixelii de lumină IR (fiecare notați cu un „IR” în Figura 4) sunt sensibili la lumina IR și au o sensibilitate limitată la diafonia optică din lumina vizibilă. În varianta de realizare ilustrată pixelii IR și pixelii luminii vizibile sunt intercalate pe senzor 400 într-o tablă de șah (adică, alternantă bidimensională) moda. Senzorul cu spectru multiplu 400 poate fi cuplat la un filtru trece-bandă IR (nu este prezentat în Figura 4) pentru a minimiza cantitatea de lumină IR ambientală care incide pe pixelii luminii IR. în unele exemple de realizare, filtrul trece-bandă trece lumina vizibilă cu lungimi de undă în intervalul 400-650 nm și bandă îngustă IR (de exemplu, lungimea de undă mai mică de 30 nm).

în unele exemple de realizare, pixelii de lumină vizibilă ai senzorului cu spectru multiplu 400 servesc în mod colectiv ca un senzor de imagine pasiv pentru a colecta lumina vizibilă și a înregistra imagini cu lumină vizibilă în tonuri de gri. Dispozitivul HMD poate folosi imaginile cu lumină vizibilă pentru un scop SLAM, cum ar fi urmărirea capului. Pixelii de lumină IR ai senzorului cu spectru multiplu 400 servesc în mod colectiv ca senzor de cameră de adâncime pentru a colecta lumina IR și a înregistra imagini IR (numite și imagini IR monocrome) pentru detectarea adâncimii, cum ar fi urmărirea mâinii, maparea spațială și/sau etichetarea semantică a obiectelor.

Reducerea numărului de părți din următorul HoloLens, desigur, are potențialul de a reduce costul, dimensiunea, complexitatea și consumul de energie al dispozitivului, ceea ce poate însemna un HoloLens 2 mai mic și mai ieftin, care este, desigur, exact ceea ce Microsoft trebuie să rămână. competitiv.

Următorul HoloLens este de așteptat să aibă o unitate de procesare holografică îmbunătățită, cu mai multe capacități AI, Și un cameră îmbunătățită de adâncime asemănătoare Kinect. Principala provocare a Microsoft cu noul Hololens este de a îmbunătăți câmpul vizual, care la 35 de grade a fost descris ca privind lumea printr-un slot de e-mail. Se pare că Microsoft aduce dezvoltarea lentilelor pe plan intern pentru a realiza acest lucru la un cost rezonabil.

HoloLens 2 va fi alimentat de cel anunțat recent Procesor Qualcomm Snapdragon XR1, care a fost conceput cu scopul expres de a oferi o experiență VR și AR „de înaltă calitate”. Dispozitivul va rula probabil versiunea ARM a Windows 10 cu interfața Microsoft Mixed Reality UI.

Cu următoarea generație de căști așteptată în următoarele 6 luni, sperăm că vom vedea multe dintre aceste inovații brevetate apărând în dispozitivul real.

Vedea brevetul complet aici.