Microsoft 的 SIGMA 專為現實世界的任務而設計。這就是人工智慧透過 HoloLens 進入你的眼睛的方式
Me 用於 HoloLens 2 的實際任務
2分鐘讀
發表於
請閱讀我們的揭露頁面,了解如何幫助 MSPoweruser 維持編輯團隊的發展 閱讀更多
重點說明
- 微軟推出 SIGMA,一個用於現實世界任務的開源平台
- SIGMA 融合混合實境和人工智慧,透過 HoloLens 2 提供逐步指導
- 任務可以是預先定義的或動態的,語言和視覺模型有助於物件偵測和使用者查詢
微軟研究人員剛剛 宣布 週一,它推出了 SIGMA。它是情境互動式指導、監控和協助的縮寫,是一個專為現實世界任務而設計的「開源研究平台和測試平台原型」。
現已推出 GitHub上SIGMA是一款專為HoloLens 2設計的互動工具,融合了混合實境和AI技術。它透過提供指導和回答問題來幫助使用者執行逐步任務,或者更簡單地說,它讓人工智慧進入你的眼睛。
然後可以預先定義或動態生成任務,SIGMA 使用語言和視覺模型來偵測和突出顯示環境中的相關物件。它還可以使用 Detic 和 SEEM 等視覺模型回答使用者問題並檢測環境中與任務相關的物件。
「SIGMA 旨在作為一個研究平台。我們開源該系統的目標是幫助其他研究人員跨越建立全端互動應用程式的基本工程挑戰,」微軟表示。
SIGMA 基於情境智慧平台框架構建,可實現快速原型設計並提供視覺化、調試和維護工具。該系統採用客戶端-伺服器架構設計,允許在桌面伺服器上處理來自 HoloLens 2 的資料流,從而繞過設備限制。
長期以來,微軟一直處於人工智慧競賽的前沿。這家總部位於雷德蒙的公司 數十億美元 在投資 OpenAI 時,其 AI模型數量和 副駕駛人工智慧工具 Windows 11/10 和行動裝置中僅舉幾例。
使用者論壇
0消息