Facebook prevzema Microsoft Mesh z novo platformo Presence

Facebook (zdaj znan kot Meta) je danes objavil novo platformo Presence, ki bo razvijalcem omogočila ustvarjanje novih izkušenj mešane resničnosti. Platforma Presence bo tekmovala z Microsoftovo platformo Mesh, ki je bila razglasitve v začetku tega leta. Zmogljivosti platforme za prisotnost vključujejo prehod, prostorska sidra in razumevanje scene.

SDK za Insight

Danes objavljamo SDK za Insight, ki vam omogoča ustvarjanje izkušenj mešane resničnosti, ki ustvarjajo realističen občutek prisotnosti.

V začetku tega leta smo predstavili Passthrough API Experimental, ki vam omogoča ustvarjanje izkušenj, ki združujejo virtualno vsebino s fizičnim svetom. Danes objavljamo splošno razpoložljivost Passthrougha v naši naslednji izdaji, kar pomeni, da boste lahko gradili, testirali in pošiljali izkušnje z zmogljivostmi Passthrough.

Napovedujemo tudi prostorska sidra, svet zaklenjene referenčne okvire, ki vam bodo omogočili, da navidezno vsebino postavite v fizični prostor, ki ga je mogoče vzdrževati med sejami. S Spatial Anchors Experimental, ki bo kmalu na voljo, boste lahko ustvarili prostorska sidra v določenih položajih 6DoF, sledili pozi 6DoF glede na slušalke, obdržali prostorska sidra v napravi in ​​pridobili seznam trenutno sledenih prostorskih sider.

Objavljamo tudi novo Razumevanje scene zmogljivost. Skupaj s prehodom in prostorskimi sidri vam razumevanje scene omogoča hitro izgradnjo kompleksnih izkušenj, ki se zavedajo scene in imajo bogate interakcije z okoljem uporabnika. Kot del razumevanja prizora model scene zagotavlja geometrijsko in semantično predstavitev uporabnikovega prostora, tako da lahko ustvarite izkušnje mešane resničnosti v velikosti sobe. Scenski model je enotna, celovita, posodobljena predstavitev fizičnega sveta, ki jo je mogoče indeksirati in poizvedovati. Na steno uporabnika lahko na primer pritrdite navidezni zaslon ali pa navidezni lik pomikate po tleh z realistično okluzijo. Poleg tega lahko v VR vnesete resnične fizične predmete. Za ustvarjanje tega modela scene nudimo sistemsko voden tok zajemanja scene, ki uporabnikom omogoča, da se sprehajajo in posnamejo svojo sceno. Navdušeni smo, da bomo zmožnosti razumevanja prizorov na voljo kot eksperimentalno zmogljivost v začetku naslednjega leta.

Z novimi zmogljivostmi Passthrough, Spatial Anchors in Scene Understanding v SDK Insight boste lahko zgradili izkušnje mešane resničnosti, ki združujejo virtualno vsebino s fizičnim svetom, ustvarjajo nove možnosti za družbeno povezavo, zabavo, produktivnost in še več.

Zaščita zasebnosti fizičnega prostora ljudi je za nas pomembna. Zasnovali smo prehod, prostorska sidra in razumevanje scene, tako da lahko razvijalci ustvarijo izkušnje, ki združujejo fizično in virtualno okolje, ne da bi potrebovali dostop do neobdelanih slik ali videoposnetkov iz vaših senzorjev Quest.

SDK za interakcijo

Z Interaction SDK vam olajšamo integracijo interakcij, ki so osredotočene na roke in krmilnik. Knjižnica Unity, ki bo na voljo v začetku prihodnjega leta, bo prišla z naborom pripravljenih za uporabo, robustnih interakcijskih komponent, kot so grab, poke, target in select. Vse komponente se lahko uporabljajo skupaj, neodvisno ali celo integrirane v druge interakcijske okvire. Interaction SDK rešuje številne težke izzive interakcije, povezane s sledenjem rok, ki temelji na računalniškem vidu, ponuja standardizirane vzorce interakcij in preprečuje nazadovanje, ko se tehnologija razvija. Nenazadnje ponuja orodje, ki vam pomaga pri izdelavi lastnih potez po meri.

Zaščita podatkov, ki smo jo vedno ponujali Sledenje rok prijavi se tukaj. Slike in ocenjene točke, specifične za vaše roke, se po obdelavi izbrišejo in niso shranjene na naših strežnikih.

SDK za sledeno tipkovnico

Lani smo napovedali a Sledena tipkovnica zmogljivost za razvijalce. Trdo delamo, da bi predstavili SDK za sledilno tipkovnico in smo na pravi poti, da ga izdamo v začetku prihodnjega leta kot del platforme Presence.

Poskusni SDK za glas

Prav tako najavljamo Poskusni SDK za glas, na voljo v naši naslednji izdaji, tako da lahko začnete graditi in eksperimentirati. Voice SDK je nabor zmožnosti naravnega jezika, ki vam omogoča, da ustvarite prostoročno navigacijo in novo glasovno vodeno igranje. S SDK za Voice lahko ustvarite glasovno navigacijo in iskanje ali omogočite glasovna pogosta vprašanja, da uporabnikom omogočite, da zaprosijo za pomoč ali opomnik. Omogočamo tudi novo igranje Voice-Drive – na primer zmaga v bitki z glasovno aktiviranim čarobnim urokom ali pogovor z likom ali avatarjem. SDK za Voice poganja Facebookova platforma naravnega jezika Wit.ai in je brezplačna prijava in začetek.

vir: Facebook