Facebook preia Microsoft Mesh cu noua platformă Presence

Facebook (cunoscut acum sub numele de Meta) a anunțat astăzi noua platformă Prezență care va permite dezvoltatorilor să creeze noi experiențe de realitate mixtă. Platforma Prezență va concura cu platforma Mesh a Microsoft, care a fost a anunțat începutul acestui an. Capacitățile platformei de prezență includ passthrough, ancore spațiale și înțelegerea scenei.

Insight SDK

Astăzi anunțăm Insight SDK, permițându-vă să construiți experiențe de realitate mixtă care creează un sentiment realist de prezență.

La începutul acestui an, noi a introdus Passthrough API Experimental, permițându-vă să construiți experiențe care îmbină conținutul virtual cu lumea fizică. Astăzi, anunțăm disponibilitatea generală a Passthrough în următoarea noastră versiune, ceea ce înseamnă că veți putea construi, testa și livra experiențe cu capabilitățile Passthrough.

De asemenea, anunțăm ancore spațiale, cadre de referință blocate la nivel mondial, care vă vor permite să plasați conținut virtual într-un spațiu fizic care poate fi continuat pe parcursul sesiunilor. Cu Spatial Anchors Experimental, disponibil în curând, veți putea crea ancore spațiale la anumite poziții de 6DoF, veți putea urmări poziția 6DoF în raport cu setul cu cască, veți putea persista ancorele spațiale pe dispozitiv și veți putea prelua o listă a ancorelor spațiale urmărite în prezent.

De asemenea, anunțăm un nou Înțelegerea scenei capacitatea. Împreună cu Passthrough și Spatial Anchors, Scene Understanding vă permite să construiți rapid experiențe complexe și conștiente de scenă, care au interacțiuni bogate cu mediul utilizatorului. Ca parte a Scene Understanding, Scene Model oferă o reprezentare geometrică și semantică a spațiului utilizatorului, astfel încât să puteți construi experiențe de realitate mixtă la scara camerei. Scene Model este o reprezentare unică, cuprinzătoare și actualizată a lumii fizice, care poate fi indexată și interogabilă. De exemplu, puteți atașa un ecran virtual pe peretele utilizatorului sau puteți cere unui personaj virtual să navigheze pe podea cu ocluzie realistă. În plus, puteți aduce obiecte fizice din viața reală în VR. Pentru a crea acest model de scenă, oferim un flux de captură scenă ghidat de sistem, care le permite utilizatorilor să se plimbe și să-și captureze scena. Suntem încântați să punem la dispoziție capabilitățile de înțelegere a scenei ca o capacitate experimentală la începutul anului viitor.

Cu noile capabilități Passthrough, Spatial Anchors și Scene Understanding din Insight SDK, veți putea construi experiențe de realitate mixtă care îmbină conținutul virtual cu lumea fizică, creând noi posibilități de conexiune socială, divertisment, productivitate și multe altele.

Protejarea intimității spațiului fizic al oamenilor este importantă pentru noi. Am proiectat Passthrough, Spatial Anchors și Scene Understanding, astfel încât dezvoltatorii să poată crea experiențe care îmbină împrejurimile fizice și virtuale fără a avea nevoie de acces la imaginile brute sau videoclipurile de la senzorii dvs. Quest.

Interaction SDK

Cu Interaction SDK, vă ajutăm să integrați mâinile și interacțiunile centrate pe controler. Biblioteca Unity, disponibilă la începutul anului viitor, va veni cu un set de componente de interacțiune robuste, gata de utilizare, cum ar fi grab, poke, target and select. Toate componentele pot fi utilizate împreună, independent sau chiar integrate în alte cadre de interacțiune. Interaction SDK rezolvă multe dintre provocările dificile de interacțiune legate de urmărirea mâinilor bazată pe viziunea computerizată, oferă modele de interacțiune standardizate și previne regresiile pe măsură ce tehnologia evoluează. Nu în ultimul rând, oferă instrumente care vă ajută să vă creați și propriile gesturi personalizate.

Protecția datelor pe care le-am oferit întotdeauna în jur Urmărirea manuală aplica aici. Imaginile și punctele estimate specifice mâinilor dumneavoastră sunt șterse după procesare și nu sunt stocate pe serverele noastre.

SDK pentru tastatură urmărită

Anul trecut, am anunțat o Tastatură urmărită capacitate pentru dezvoltatori. Ne străduim să lansăm un SDK pentru tastatură urmărită și suntem pe cale să îl lansăm la începutul anului viitor, ca parte a platformei Presence.

Voice SDK Experimental

Anunțăm și noi Voice SDK Experimental, disponibil în următoarea noastră versiune, astfel încât să puteți începe să construiți și să experimentați. Voice SDK este un set de capabilități în limbaj natural care vă permit să creați o navigare fără mâini și un joc nou bazat pe voce. Cu Voice SDK, puteți crea navigare și căutare vocală sau activa Voice FAQ pentru a permite utilizatorilor să ceară ajutor sau un memento. De asemenea, activăm un nou mod de joc Voice-Drive, cum ar fi câștigarea unei bătălii cu o vrajă magică activată prin voce sau vorbirea cu un personaj sau un avatar. Voice SDK este alimentat de platforma de limbaj natural Wit.ai de la Facebook și este gratuit să vă înscrieți și să începeți.

Sursa: Facebook