Facebook ottaa Microsoft Meshin käyttöön uudella Presence-alustalla

Facebook (nykyisin Meta) julkisti tänään uuden Presence-alustan, jonka avulla kehittäjät voivat luoda uusia sekatodellisuuden kokemuksia. Presence-alusta kilpailee Microsoftin Mesh-alustan kanssa, joka oli ilmoitti tämän vuoden alussa. Presence Platformin ominaisuuksia ovat läpivienti, spatiaaliset ankkurit ja kohtauksen ymmärtäminen.

Insight SDK

Tänään ilmoitamme Insight SDK, jonka avulla voit rakentaa sekatodellisuuskokemuksia, jotka luovat realistisen läsnäolon tunteen.

Aiemmin tänä vuonna me esitteli Passthrough API Experimentalin, jonka avulla voit rakentaa kokemuksia, jotka yhdistävät virtuaalisen sisällön fyysiseen maailmaan. Tänään ilmoitamme Passthroughin yleisestä saatavuudesta seuraavassa julkaisussamme, mikä tarkoittaa, että voit rakentaa, testata ja lähettää kokemuksia Passthrough-ominaisuuksien avulla.

Julkaisemme myös Spatial Anchors -ankkurit, maailmanlaajuisesti lukitut viitekehykset, joiden avulla voit sijoittaa virtuaalista sisältöä fyysiseen tilaan, joka voidaan säilyttää istuntojen aikana. Pian saatavilla olevan Spatial Anchors Experimental -sovelluksen avulla voit luoda spatiaalisia ankkureita tietyissä 6DoF-asennoissa, seurata 6DoF-asentoa suhteessa kuulokemikrofoniin, säilyttää Spatial Anchors -ankkurit laitteella ja hakea luettelon tällä hetkellä seuratuista spatiaalisista ankkureista.

Ilmoitamme myös uudesta Kohtauksen ymmärtäminen kyky. Yhdessä Passthrough- ja Spatial Anchors -ankkureiden kanssa Scene Understanding antaa sinun luoda nopeasti monimutkaisia ​​ja kohtaustietoisia kokemuksia, jotka ovat monipuolisesti vuorovaikutuksessa käyttäjän ympäristön kanssa. Osana Scene Understandingia Scene Model tarjoaa geometrisen ja semanttisen esityksen käyttäjän tilasta, joten voit rakentaa huoneen mittakaavan sekatodellisuuden kokemuksia. Scene Model on yksittäinen, kattava, ajan tasalla oleva esitys fyysisestä maailmasta, joka on indeksoitavissa ja kyselyssä. Voit esimerkiksi kiinnittää virtuaalisen näytön käyttäjän seinälle tai saada virtuaalisen hahmon navigoimaan lattialla realistisella tukkeutumalla. Lisäksi voit tuoda todellisia fyysisiä esineitä VR:ään. Tämän kohtausmallin luomiseksi tarjoamme järjestelmäohjatun Scene Capture -virran, jonka avulla käyttäjät voivat kävellä ympäriinsä ja tallentaa kohtauksensa. Olemme innoissamme voidessamme tuoda Scene Understanding -ominaisuudet saataville kokeellisena ominaisuutena ensi vuoden alussa.

Insight SDK:n uusien Passthrough-, Spatial Anchors- ja Scene Understanding -ominaisuuksien avulla voit rakentaa sekatodellisuuden kokemuksia, jotka yhdistävät virtuaalisen sisällön fyysiseen maailmaan ja luovat uusia mahdollisuuksia sosiaaliseen yhteyteen, viihteeseen, tuottavuuteen ja muuhun.

Ihmisten fyysisen tilan yksityisyyden suojaaminen on meille tärkeää. Suunnittelimme Passthrough-, Spatial Anchors- ja Scene Understanding -sovellukset, jotta kehittäjät voivat luoda kokemuksia, jotka yhdistävät fyysisen ja virtuaalisen ympäristön tarvitsematta pääsyä Quest-antureidesi raakakuviin tai videoihin.

Vuorovaikutus SDK

Interaction SDK:n avulla helpotamme käsien ja ohjainkeskeisen vuorovaikutuksen integrointia. Ensi vuoden alussa saatavilla oleva Unity-kirjasto sisältää joukon käyttövalmiita, vankkoja vuorovaikutuskomponentteja, kuten nappaa, poke, target and select. Kaikkia komponentteja voidaan käyttää yhdessä, itsenäisesti tai jopa integroida muihin vuorovaikutuskehikkoihin. Interaction SDK ratkaisee monet tietokonenäköön perustuvaan käsiseurantaan liittyvät vaikeista vuorovaikutushaasteista, tarjoaa standardoituja vuorovaikutusmalleja ja estää regressioita tekniikan kehittyessä. Viimeisenä mutta ei vähäisimpänä, se tarjoaa työkaluja, joiden avulla voit myös luoda omia mukautettuja eleitäsi.

Tietosuoja, jota olemme aina tarjonneet Käsien seuranta hakea tästä. Käsiisi liittyvät kuvat ja arvioidut pisteet poistetaan käsittelyn jälkeen, eikä niitä tallenneta palvelimillemme.

Tracked Keyboard SDK

Viime vuonna julkistimme a Seurattu näppäimistö kyky kehittäjille. Teemme kovasti töitä julkaistaksemme Tracked Keyboard SDK:n, ja julkaisemme sen ensi vuoden alussa osana Presence Platformia.

Voice SDK kokeellinen

Ilmoitamme myös Voice SDK kokeellinen, saatavilla seuraavassa julkaisussamme, jotta voit alkaa rakentaa ja kokeilla. Voice SDK on joukko luonnollisia kieliominaisuuksia, joiden avulla voit luoda handsfree-navigointia ja uutta ääniohjattua peliä. Voice SDK:n avulla voit luoda ääninavigoinnin ja -haun tai ottaa käyttöön Voice FAQ:n, jotta käyttäjät voivat pyytää apua tai muistutusta. Otamme myös käyttöön uuden Voice-Drive-pelin – kuten taistelun voittamisen ääniaktivoidulla taikuudella tai puhumisen hahmon tai avatarin kanssa. Voice SDK toimii Facebookin luonnollisen kielen Wit.ai-alustalla, ja rekisteröityminen ja aloittaminen on ilmaista.

Lähde: Facebook