Facebook 通過新的 Presence 平台採用 Microsoft Mesh

Facebook（現稱為 Meta）今天宣布了新的 Presence 平台，該平台將允許開發人員創建新的混合現實體驗。 Presence 平台將與微軟的 Mesh 平台競爭。 宣布 今年年初。 Presence Platform 功能包括直通、空間錨點和場景理解。

洞察 SDK

今天，我們宣布 洞察 SDK，使您能夠構建混合現實體驗，創造出逼真的臨場感。

今年早些時候，我們 介紹 Passthrough API Experimental，使您能夠構建將虛擬內容與物理世界融為一體的體驗。 今天，我們宣佈在下一個版本中全面推出 Passthrough，這意味著您將能夠使用 Passthrough 功能構建、測試和交付體驗。

我們還宣布了 Spatial Anchors，這是一種世界鎖定的參考框架，可讓您將虛擬內容放置在可以跨會話持久保存的物理空間中。 借助即將推出的 Spatial Anchors Experimental，您將能夠創建特定 6DoF 姿勢的空間錨，跟踪相對於耳機的 6DoF 姿勢，在設備上保持空間錨，並檢索當前跟踪的空間錨列表。

我們還宣布了一個新的 場景理解 能力。 與 Passthrough 和 Spatial Anchors 一起，場景理解允許您快速構建與用戶環境具有豐富交互的複雜和場景感知體驗。 作為場景理解的一部分，場景模型提供了用戶空間的幾何和語義表示，因此您可以構建房間規模的混合現實體驗。 場景模型是可索引和可​​查詢的物理世界的單一、全面、最新的表示。 例如，您可以將虛擬屏幕附加到用戶的牆上，或者讓虛擬角色在地板上以逼真的遮擋導航。 此外，您可以將現實生活中的物理對象帶入 VR。 為了創建這個場景模型，我們提供了一個系統引導的場景捕捉流程，讓用戶可以四處走動並捕捉他們的場景。 我們很高興在明年初將場景理解功能作為實驗功能提供。

借助 Insight SDK 中新的 Passthrough、Spatial Anchors 和 Scene Understanding 功能，您將能夠構建將虛擬內容與物理世界融合在一起的混合現實體驗，從而為社交聯繫、娛樂、生產力等創造新的可能性。

保護人們物理空間的隱私對我們很重要。 我們設計了 Passthrough、Spatial Anchors 和 Scene Understanding，以便開發人員可以創建融合物理和虛擬環境的體驗，而無需訪問 Quest 傳感器的原始圖像或視頻。

交互 SDK

借助 Interaction SDK，我們可以讓您更輕鬆地集成手和以控制器為中心的交互。 明年年初推出的 Unity 庫將附帶一組即用型、強大的交互組件，例如抓取、戳、目標和選擇。 所有組件都可以一起使用、獨立使用，甚至可以集成到其他交互框架中。 交互 SDK 解決了與基於計算機視覺的手部跟踪相關的許多棘手的交互挑戰，提供標準化的交互模式，並防止隨著技術的發展出現回歸。 最後但同樣重要的是，它還提供了工具來幫助您構建自己的自定義手勢。

我們一直提供的數據保護 手部追踪 在這裡申請。 特定於您手的圖像和估計點在處理後會被刪除，並且不會存儲在我們的服務器上。

跟踪鍵盤 SDK

去年，我們宣布了一項 履帶式鍵盤 開發人員的能力。 我們正在努力推出 Tracked Keyboard SDK，並有望在明年初將其作為 Presence Platform 的一部分發布。

語音 SDK 實驗

我們還宣布 語音 SDK 實驗，在我們的下一個版本中可用，因此您可以開始構建和試驗。 Voice SDK 是一組自然語言功能，可讓您創建免提導航和新的語音驅動遊戲。 使用語音 SDK，您可以創建語音導航和搜索或啟用語音常見問題解答以允許用戶尋求幫助或提醒。 我們還啟用了新的語音驅動遊戲——比如用語音激活的魔法贏得一場戰鬥，或者與一個角色或頭像交談。 Voice SDK 由 Facebook 的 Wit.ai 自然語言平台提供支持，可免費註冊並開始使用。

資源： Facebook