Facebook tar sig an Microsoft Mesh med den nya närvaroplattformen

Facebook (nu känd som Meta) tillkännagav idag den nya Presence-plattformen som gör det möjligt för utvecklare att skapa nya mixed reality-upplevelser. Närvaroplattformen kommer att konkurrera med Microsofts Mesh-plattform som var meddelade tidigt i år. Närvaroplattformsfunktioner inkluderar Passthrough, Spatial Anchors och Scene Understanding.

Insight SDK

Idag tillkännager vi Insight SDK, vilket gör att du kan bygga blandade verklighetsupplevelser som skapar en realistisk känsla av närvaro.

Tidigare i år har vi introducerade Passthrough API Experimental, vilket gör att du kan bygga upplevelser som blandar virtuellt innehåll med den fysiska världen. Idag tillkännager vi allmän tillgänglighet av Passthrough i vår nästa release, vilket innebär att du kommer att kunna bygga, testa och skicka upplevelser med Passthrough-funktioner.

Vi tillkännager också Spatial Anchors, världslåsta referensramar som gör att du kan placera virtuellt innehåll i ett fysiskt utrymme som kan bevaras under sessioner. Med Spatial Anchors Experimental, tillgänglig snart, kommer du att kunna skapa Spatial Anchors vid specifika 6DoF-positioner, spåra 6DoF-positionen i förhållande till headsetet, bevara Spatial Anchors på enheten och hämta en lista över för närvarande spårade Spatial Anchors.

Vi tillkännager också en ny Scenförståelse förmåga. Tillsammans med Passthrough och Spatial Anchors låter Scene Understanding dig snabbt bygga komplexa och scenmedvetna upplevelser som har rik interaktion med användarens miljö. Som en del av Scene Understanding ger Scene Model en geometrisk och semantisk representation av användarens utrymme, så att du kan bygga rumsskaliga blandade verklighetsupplevelser. Scene Model är en enda, heltäckande, uppdaterad representation av den fysiska världen som är indexerbar och frågebar. Du kan till exempel fästa en virtuell skärm på användarens vägg eller låta en virtuell karaktär navigera på golvet med realistisk ocklusion. Vidare kan du ta med verkliga, fysiska objekt till VR. För att skapa den här scenmodellen tillhandahåller vi ett systemstyrt Scene Capture-flöde som låter användare gå runt och fånga sin scen. Vi är glada över att göra Scene Understanding-funktioner tillgängliga som en experimentfunktion i början av nästa år.

Med de nya funktionerna Passthrough, Spatial Anchors och Scene Understanding i Insight SDK kommer du att kunna bygga blandade verklighetsupplevelser som blandar virtuellt innehåll med den fysiska världen, vilket skapar nya möjligheter för social anslutning, underhållning, produktivitet och mer.

Att skydda privatlivet i människors fysiska utrymme är viktigt för oss. Vi designade Passthrough, Spatial Anchors och Scene Understanding så att utvecklare kan skapa upplevelser som blandar den fysiska och virtuella omgivningen utan att behöva tillgång till de råa bilderna eller videorna från dina Quest-sensorer.

Interaktions-SDK

Med Interaction SDK gör vi det enklare för dig att integrera händer och kontrollercentrerade interaktioner. Unity-biblioteket, tillgängligt i början av nästa år, kommer att levereras med en uppsättning färdiga, robusta interaktionskomponenter som grab, peta, target och select. Alla komponenter kan användas tillsammans, oberoende eller till och med integreras i andra interaktionsramverk. Interaction SDK löser många av de tuffa interaktionsutmaningarna kopplade till datorvisionsbaserad handspårning, erbjuder standardiserade interaktionsmönster och förhindrar regressioner när tekniken utvecklas. Sist men inte minst ger det verktyg som hjälper dig att bygga dina egna anpassade gester också.

Det dataskydd vi alltid har erbjudit runt omkring Handspårning ansök här. Bilderna och uppskattade poäng som är specifika för dina händer raderas efter bearbetning och lagras inte på våra servrar.

Tracked Keyboard SDK

Förra året tillkännagav vi en Tracked tangentbord kapacitet för utvecklare. Vi jobbar hårt för att lansera en Tracked Keyboard SDK, och vi är på väg att släppa den i början av nästa år som en del av Presence Platform.

Röst SDK Experimentell

Vi annonserar också Röst SDK Experimentell, tillgänglig i vår nästa version så att du kan börja bygga och experimentera. Voice SDK är en uppsättning naturliga språkfunktioner som låter dig skapa handsfree-navigering och nytt röststyrt spel. Med Voice SDK kan du skapa Voice Navigation & Search eller aktivera Voice FAQ så att användare kan be om hjälp eller en påminnelse. Vi möjliggör också nytt Voice-Drive-spel – som att vinna en strid med en röstaktiverad magisk besvärjelse eller prata med en karaktär eller avatar. Voice SDK drivs av Facebooks Wit.ai naturliga språkplattform och det är gratis att registrera sig och komma igång.

Källa: Facebook