Istället för 5 kameror kan HoloLens 2.0 bara ha en
4 min. läsa
Publicerad den
Dela den här artikeln
Förbättra den här guiden
Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer
Den nuvarande generationen HoloLens (ovan) har faktiskt 5 kameror – två på varje sida för djupavkänning med infraröda punktsändare, ungefär som Kinect, och en central RGB-kamera som använder vanligt omgivande ljus för simultan lokalisering och kartläggning (SLAM), liknande hur kamerorna i Windows Mixed Reality-headset kan beräkna din relativa rörelse och position baserat på landskapet i din miljö.
I ett nytt patent ansökt i mars 2017 och publicerat idag beskriver Microsoft en ny multispektral kamera som kan ersätta de 5 kamerorna med bara en.
Sammanfattningen för applikationen, MULTI-SPECTRUM BELYSNING-OCH-SENSORMODUL FÖR HUVUDSPÅRNING, GESTERIGENKÄNNING OCH SPATIAL MAPPING, lyder:
En enhet och metod använder flera ljussändare med en enda multispektrumavbildningssensor för att utföra multimodal infrarött ljusbaserad djupavkänning och synligt ljusbaserad simultan lokalisering och kartläggning (SLAM). Den multimodala infrarödbaserade djupavkänningen kan inkludera, till exempel, vilken kombination som helst av infrarödbaserad rumslig kartläggning, infrarödbaserad handspårning och/eller infrarödbaserad semantisk märkning. Den synliga ljusbaserade SLAM kan inkludera huvudspårning, till exempel.
Microsoft förklarar vidare nyckelinnovationen, multispektrumavbildningssensorn, som sådan:
Figur 4 illustrerar schematiskt en multispektrumsensor för att detektera både synligt ljus och IR-ljus. Multispektrumsensorn 400 innehåller två olika typer av sensorpixlar: synliga ljuspixlar och IR-ljuspixlar. De synliga ljuspixlarna (var och en betecknad med ett "V" i figur 4) är känsliga för synligt bredbandsljus (t.ex. från 400 nm till 650 nm) och har begränsad känslighet för IR-ljus. IR-ljuspixlarna (var och en betecknad med en "IR" i figur 4) är känsliga för IR-ljus och har begränsad känslighet för optisk överhörning från det synliga ljuset. I den illustrerade utföringsformen IR-pixlarna och de synliga ljuspixlarna är insprängda på sensorn 400 i en schackbräde-liknande (dvs tvådimensionellt alternerande) mode. Multispektrum 400-sensorn kan kopplas till ett IR-bandpassfilter (ej visat i figur 4) för att minimera mängden omgivande IR-ljus som infaller på IR-ljuspixlarna. I vissa utföringsformer släpper bandpassfiltret igenom synligt ljus med våglängder inom intervallet 400-650 nm och IR-smalband (t.ex. våglängdsspann mindre än 30 nm).
I vissa utföringsformer tjänar de synliga ljuspixlarna hos multispektrumsensorn 400 kollektivt som en passiv bildsensor för att samla in synligt ljus och registrera synliga ljusbilder i gråskala. HMD-enheten kan använda de synliga ljusbilderna för ett SLAM-ändamål, såsom huvudspårning. IR-ljuspixlarna i multispektrumsensorn 400 fungerar tillsammans som en djupkamerasensor för att samla in IR-ljus och spela in IR-bilder (även kallade monokroma IR-bilder) för djupavkänning, såsom för handspårning, rumslig kartläggning och/eller semantisk märkning av objekt.
Att minska antalet delar av nästa HoloLens har naturligtvis potentialen att minska enhetens kostnad, storlek, komplexitet och strömförbrukning, vilket kan innebära en mindre och billigare HoloLens 2, vilket naturligtvis är precis vad Microsoft behöver för att förbli. konkurrenskraftig.
Nästa HoloLens förväntas ha en förbättrad holografisk bearbetningsenhet med fler AI-funktioner, Och en förbättrad Kinect-liknande djupkamera. Microsofts främsta utmaning med nya Hololens är att förbättra synfältet, som vid 35 grader har beskrivits som att man tittar på världen genom en postfack. Microsoft kommer enligt uppgift utveckling av linserna internt att uppnå detta till en rimlig kostnad.
HoloLens 2 kommer enligt uppgift att drivas av den nyligen tillkännagivna Qualcomm Snapdragon XR1-processor, som har utformats med det uttryckliga syftet att leverera en VR- och AR-upplevelse av "hög kvalitet". Enheten kommer förmodligen att köra ARM-versionen av Windows 10 med Microsofts Mixed Reality UI.
Med nästa generation av headsetet som förhoppningsvis väntas inom de närmaste 6 månaderna, kommer vi att se många av dessa patenterade innovationer dyka upp i själva enheten.
