แทนที่จะเป็นกล้อง 5 ตัว HoloLens 2.0 อาจมีเพียงตัวเดียว

HoloLens รุ่นปัจจุบัน (ด้านบน) มีกล้อง 5 ตัว โดยแต่ละด้านมีกล้องสองตัวสำหรับการตรวจจับความลึกโดยใช้ตัวปล่อยจุดอินฟราเรด เช่นเดียวกับ Kinect และกล้อง RGB ตรงกลางซึ่งใช้แสงแวดล้อมปกติสำหรับ Simultaneous Localization and Mapping (SLAM) คล้ายกับวิธีที่กล้องในชุดหูฟัง Windows Mixed Reality สามารถคำนวณการเคลื่อนไหวและตำแหน่งสัมพัทธ์ของคุณตามทิวทัศน์ในสภาพแวดล้อมของคุณ

ในสิทธิบัตรใหม่ที่ยื่นขอในเดือนมีนาคม 2017 และเผยแพร่ในวันนี้ Microsoft อธิบายถึงกล้องหลายสเปกตรัมใหม่ซึ่งอาจแทนที่กล้อง 5 ตัวด้วยกล้องเพียงตัวเดียว

บทคัดย่อสำหรับแอปพลิเคชัน MULTI-SPECTRUM ILLUMINATION-AND-SENSOR MODULE สำหรับการติดตามส่วนหัว การจดจำท่าทาง และการทำแผนที่เชิงพื้นที่ อ่านว่า:

อุปกรณ์และวิธีการใช้ตัวปล่อยแสงหลายตัวพร้อมเซ็นเซอร์ภาพหลายสเปกตรัมเพียงตัวเดียวเพื่อดำเนินการตรวจจับความลึกตามแสงอินฟราเรดแบบหลายโมดัลและแสงที่มองเห็นได้โดยใช้ Simultaneous Localization and Mapping (SLAM) การตรวจจับความลึกโดยใช้อินฟราเรดแบบหลายโมดอลอาจรวมถึง ตัวอย่างเช่น การรวมกันของการทำแผนที่เชิงพื้นที่บนอินฟราเรด การติดตามด้วยมือแบบอินฟราเรด และ/หรือการติดฉลากเชิงความหมายแบบอินฟราเรด SLAM ที่ใช้แสงที่มองเห็นได้อาจรวมถึงการติดตามส่วนหัว เป็นต้น

Microsoft อธิบายเพิ่มเติมเกี่ยวกับนวัตกรรมที่สำคัญ เซ็นเซอร์ภาพหลายสเปกตรัม เช่น:

รูปที่ 4 แสดงแผนผังของเซ็นเซอร์แบบหลายสเปกตรัมเพื่อตรวจจับทั้งแสงที่มองเห็นได้และแสงอินฟราเรด เซ็นเซอร์หลายสเปกตรัม 400 ประกอบด้วยพิกเซลเซ็นเซอร์สองประเภท: พิกเซลแสงที่มองเห็นได้และพิกเซลแสงอินฟราเรด พิกเซลแสงที่มองเห็นได้ (แต่ละจุดแสดงด้วย "V" ในรูปที่ 4) มีความไวต่อแสงที่มองเห็นได้แบบบรอดแบนด์ (เช่น ตั้งแต่ 400 นาโนเมตรถึง 650 นาโนเมตร) และมีความไวต่อแสงอินฟราเรดจำกัด พิกเซลแสงอินฟราเรด (แต่ละพิกเซลแสดงด้วย “IR” ในรูปที่ 4) มีความไวต่อแสงอินฟราเรดและมีความไวที่จำกัดต่อการครอสทอล์คแบบออปติคัลจากแสงที่มองเห็นได้ ในรูปลักษณ์ที่มีภาพประกอบ พิกเซล IR และพิกเซลแสงที่มองเห็นจะกระจายอยู่บนเซ็นเซอร์ 400 ในกระดานหมากรุกเหมือน (กล่าวคือ สองมิติสลับกัน) แฟชั่น เซ็นเซอร์ 400 สเปกตรัมสามารถเชื่อมต่อกับฟิลเตอร์ IR bandpass (ไม่แสดงในรูปที่ 4) เพื่อลดปริมาณแสงอินฟราเรดรอบข้างที่ตกกระทบบนพิกเซลแสงอินฟราเรด ในบางรูปลักษณ์ ตัวกรองแบนด์พาสผ่านแสงที่มองเห็นได้ด้วยความยาวคลื่นในช่วง 400-650 นาโนเมตรและแถบแคบอินฟราเรด (เช่น ช่วงความยาวคลื่นน้อยกว่า 30 นาโนเมตร)

ในบางรูปลักษณ์ พิกเซลแสงที่มองเห็นได้ของเซ็นเซอร์หลายสเปกตรัม 400 รวมกันทำหน้าที่เป็นเซ็นเซอร์ภาพแบบพาสซีฟเพื่อรวบรวมแสงที่มองเห็นและบันทึกภาพแสงที่มองเห็นได้ในระดับสีเทา อุปกรณ์ HMD สามารถใช้ภาพแสงที่มองเห็นได้เพื่อวัตถุประสงค์ SLAM เช่นการติดตามศีรษะ พิกเซลแสงอินฟราเรดของเซ็นเซอร์หลายสเปกตรัม 400 รวมกันเป็นเซ็นเซอร์กล้องความลึกเพื่อรวบรวมแสงอินฟราเรดและบันทึกภาพอินฟราเรด (เรียกอีกอย่างว่าภาพอินฟราเรดขาวดำ) สำหรับการตรวจจับความลึก เช่น สำหรับการติดตามด้วยมือ การทำแผนที่เชิงพื้นที่ และ/หรือ การติดฉลากความหมายของวัตถุ

แน่นอนว่าการลดจำนวนชิ้นส่วนของ HoloLens รุ่นถัดไปนั้นมีศักยภาพในการลดต้นทุน ขนาด ความซับซ้อนและการใช้พลังงานของอุปกรณ์ ซึ่งอาจหมายถึง HoloLens 2 ที่เล็กลงและถูกกว่า ซึ่งแน่นอนว่าสิ่งที่ Microsoft จะต้องคงไว้ การแข่งขัน.

HoloLens รุ่นต่อไปคาดว่าจะมี หน่วยประมวลผลโฮโลแกรมที่ได้รับการปรับปรุงพร้อมความสามารถด้าน AI ที่มากขึ้นและ ปรับปรุงกล้องความลึกเหมือน Kinect ความท้าทายหลักของ Microsoft กับ Hololens ใหม่คือการปรับปรุงขอบเขตการมองเห็น ซึ่ง 35 องศาได้รับการอธิบายว่าเป็นการมองโลกผ่านช่องอีเมล มีรายงานว่า Microsoft กำลังนำ การพัฒนาเลนส์ภายใน เพื่อให้บรรลุสิ่งนี้ด้วยต้นทุนที่สมเหตุสมผล

มีรายงานว่า HoloLens 2 จะขับเคลื่อนโดยประกาศล่าสุด โปรเซสเซอร์ Qualcomm Snapdragon XR1ซึ่งได้รับการออกแบบโดยมีวัตถุประสงค์เพื่อมอบประสบการณ์ VR และ AR ที่ "คุณภาพสูง" อุปกรณ์น่าจะใช้งาน Windows 10 เวอร์ชัน ARM ด้วย UI แบบผสมของ Microsoft

คาดว่าชุดหูฟังรุ่นต่อไปในอีก 6 เดือนข้างหน้า เราจะได้เห็นนวัตกรรมที่ได้รับการจดสิทธิบัตรจำนวนมากปรากฏขึ้นในอุปกรณ์จริง

ดู สิทธิบัตรฉบับเต็มได้ที่นี่