פייסבוק תופסת את Microsoft Mesh עם פלטפורמת הנוכחות החדשה

פייסבוק (הידועה כיום בשם Meta) הכריזה היום על פלטפורמת הנוכחות החדשה שתאפשר למפתחים ליצור חוויות חדשות של מציאות מעורבת. פלטפורמת הנוכחות תתחרה בפלטפורמת Mesh של מיקרוסופט שהייתה הודיע מוקדם השנה. יכולות פלטפורמת הנוכחות כוללות מעבר, עוגנים מרחביים והבנת סצנה.

Insight SDK

היום אנחנו מכריזים Insight SDK, המאפשר לך לבנות חוויות מציאות מעורבות היוצרות תחושת נוכחות מציאותית.

מוקדם יותר השנה, אנחנו הציג Passthrough API Experimental, המאפשר לך לבנות חוויות המשלבות תוכן וירטואלי עם העולם הפיזי. היום, אנו מכריזים על זמינות כללית של Passthrough במהדורה הבאה שלנו, מה שאומר שתוכל לבנות, לבדוק ולשלוח חוויות עם יכולות Passthrough.

אנו מכריזים גם על עוגנים מרחביים, מסגרות התייחסות נעולים בעולם שיאפשרו לך למקם תוכן וירטואלי במרחב פיזי שניתן להתמיד בו לאורך הפעלות. עם Spatial Anchors Experimental, זמין בקרוב, תוכל ליצור עוגנים מרחביים בתנוחות ספציפיות של 6DoF, לעקוב אחר תנוחות ה-6DoF ביחס לאוזניות, להתמיד בעוגנים מרחביים במכשיר, ולאחזר רשימה של עוגנים מרחביים שנמצאים במעקב כרגע.

אנחנו גם מכריזים על חדש הבנת סצנה יכולת. יחד עם Passthrough ו-Spatial Anchors, Scene Understanding מאפשרת לבנות במהירות חוויות מורכבות ומודעות לסצינה בעלות אינטראקציות עשירות עם סביבת המשתמש. כחלק מ- Scene Understanding, Scene Model מספק ייצוג גיאומטרי וסמנטי של המרחב של המשתמש, כך שתוכל לבנות חוויות מציאות מעורבת בקנה מידה של חדר. Scene Model הוא ייצוג יחיד, מקיף ועדכני של העולם הפיזי שניתן לאינדקס ולשאילתה. לדוגמה, ניתן להצמיד מסך וירטואלי לקיר של המשתמש או לגרום לדמות וירטואלית לנווט על הרצפה עם חסימה מציאותית. יתר על כן, אתה יכול להביא אובייקטים פיזיים מהחיים האמיתיים לתוך VR. כדי ליצור מודל סצנה זה, אנו מספקים זרימת לכידת סצנות מונחה מערכת המאפשרת למשתמשים להסתובב וללכוד את הסצנה שלהם. אנו שמחים להפוך את יכולות הבנת הסצינות לזמינות כיכולת נסיונית בתחילת השנה הבאה.

עם יכולות ה-Passthrough, Spatial Anchors ו-Scene Understanding החדשות ב-Insight SDK, תוכל לבנות חוויות מציאות מעורבות המשלבות תוכן וירטואלי עם העולם הפיזי, תוך יצירת אפשרויות חדשות לחיבור חברתי, בידור, פרודוקטיביות ועוד.

הגנה על פרטיות המרחב הפיזי של אנשים חשובה לנו. עיצבנו Passthrough, Spatial Anchors ו-Scene Understanding כך שמפתחים יוכלו ליצור חוויות הממזגות את הסביבה הפיזית והווירטואלית מבלי להזדקק לגישה לתמונות הגולמיות או לסרטונים מחיישני ה-Quest שלך.

SDK של אינטראקציה

עם Interaction SDK, אנו מקלים עליך לשלב ידיים ואינטראקציות ממוקדות בבקר. ספריית Unity, הזמינה בתחילת השנה הבאה, תגיע עם ערכה של רכיבי אינטראקציה חזקים ומוכנים לשימוש כמו תפיסה, חיטוט, מטרה ובחירה. ניתן להשתמש בכל הרכיבים ביחד, באופן עצמאי, או אפילו לשלב במסגרות אינטראקציה אחרות. Interaction SDK פותר רבים מאתגרי האינטראקציה הקשים הקשורים למעקב יד מבוסס ראייה ממוחשבת, מציע דפוסי אינטראקציה סטנדרטיים ומונע רגרסיות עם התפתחות הטכנולוגיה. אחרון חביב, הוא מספק כלים שיעזרו לך לבנות גם מחוות מותאמות אישית משלך.

הגנות הנתונים שתמיד הצענו בסביבה מעקב ידני להחיל כאן. התמונות והנקודות המשוערות הספציפיות לידיים שלך נמחקות לאחר העיבוד ואינן נשמרות בשרתים שלנו.

SDK של מקלדת מעקב

בשנה שעברה הכרזנו על א מקלדת מעקב יכולת למפתחים. אנחנו עובדים קשה על השקת SDK של מקלדת מעקב, ואנחנו בדרך לשחרר אותו בתחילת השנה הבאה כחלק מפלטפורמת נוכחות.

Voice SDK ניסיוני

אנחנו גם מכריזים Voice SDK ניסיוני, זמין במהדורה הבאה שלנו כדי שתוכל להתחיל לבנות ולהתנסות. Voice SDK הוא קבוצה של יכולות שפה טבעית המאפשרות לך ליצור ניווט ללא ידיים ומשחק מונע קול חדש. עם Voice SDK, אתה יכול ליצור ניווט וחיפוש קולי או להפעיל שאלות נפוצות קוליות כדי לאפשר למשתמשים לבקש עזרה או תזכורת. אנחנו גם מאפשרים משחק קולי חדש - כמו ניצחון בקרב עם לחש קסם המופעל על ידי קול או דיבור עם דמות או אווטאר. Voice SDK מופעל על ידי פלטפורמת השפה הטבעית Wit.ai של פייסבוק והיא בחינם להירשם ולהתחיל.

מקור: פייסבוק