فیس‌بوک با پلتفرم جدید Presence، مایکروسافت مش را می‌پذیرد

فیس‌بوک (که اکنون به نام متا شناخته می‌شود) امروز پلتفرم جدید Presence را معرفی کرد که به توسعه‌دهندگان اجازه می‌دهد تا تجربیات جدیدی از واقعیت ترکیبی ایجاد کنند. پلتفرم Presence با پلتفرم Mesh مایکروسافت که بود رقابت خواهد کرد اعلام کرد اوایل امسال قابلیت‌های Presence Platform عبارتند از Passthrough، Spatial Anchors و Scene Understanding.

Insight SDK

امروز ، ما اعلام می کنیم Insight SDK، به شما امکان می دهد تجارب واقعیت ترکیبی بسازید که حس واقعی حضور را ایجاد می کند.

اوایل امسال ، ما Passthrough API Experimental را معرفی کرد، به شما امکان می دهد تجربیاتی بسازید که محتوای مجازی را با دنیای فیزیکی ترکیب کند. امروز، ما در دسترس بودن عمومی Passthrough را در نسخه بعدی خود اعلام می کنیم، به این معنی که شما می توانید تجربیاتی را با قابلیت های Passthrough بسازید، آزمایش کنید و ارسال کنید.

ما همچنین Spatial Anchors را اعلام می‌کنیم، چارچوب‌های مرجع قفل‌شده در جهان که به شما امکان می‌دهد محتوای مجازی را در فضای فیزیکی قرار دهید که می‌تواند در طول جلسات ماندگار شود. با Spatial Anchors Experimental که به زودی در دسترس است، می‌توانید لنگرهای فضایی را در حالت‌های خاص 6DoF ایجاد کنید، وضعیت 6DoF را نسبت به هدست ردیابی کنید، لنگرهای فضایی را روی دستگاه ادامه دهید، و فهرستی از لنگرهای فضایی را که در حال حاضر ردیابی شده‌اند بازیابی کنید.

ما همچنین یک جدید را اعلام می کنیم درک صحنه قابلیت همراه با Passthrough و Spatial Anchors، Scene Understanding به شما امکان می دهد تا به سرعت تجربیات پیچیده و آگاه از صحنه را بسازید که تعاملات غنی با محیط کاربر دارند. به عنوان بخشی از Scene Understanding، Scene Model یک نمایش هندسی و معنایی از فضای کاربر ارائه می‌کند، بنابراین می‌توانید تجربیات واقعیت ترکیبی در مقیاس اتاق بسازید. Scene Model یک نمایش واحد، جامع و به روز از دنیای فیزیکی است که قابل نمایه سازی و پرس و جو است. به عنوان مثال، می توانید یک صفحه مجازی را به دیوار کاربر وصل کنید یا یک شخصیت مجازی را با انسداد واقعی روی زمین حرکت دهید. علاوه بر این، می توانید اشیاء واقعی و فیزیکی را به VR بیاورید. برای ایجاد این مدل صحنه، ما یک جریان ضبط صحنه هدایت‌شده توسط سیستم ارائه می‌کنیم که به کاربران امکان می‌دهد در اطراف قدم بزنند و صحنه خود را ثبت کنند. ما هیجان زده هستیم که قابلیت های Scene Understanding را به عنوان یک قابلیت آزمایشی در اوایل سال آینده در دسترس قرار دهیم.

با قابلیت‌های جدید Passthrough، Spatial Anchors و Scene Understanding در Insight SDK، می‌توانید تجربیات واقعیت ترکیبی بسازید که محتوای مجازی را با دنیای فیزیکی ترکیب می‌کند و امکانات جدیدی برای ارتباط اجتماعی، سرگرمی، بهره‌وری و موارد دیگر ایجاد می‌کند.

حفاظت از حریم خصوصی فضای فیزیکی افراد برای ما مهم است. ما Passthrough، Spatial Anchors و Scene Understanding را طراحی کردیم تا توسعه دهندگان بتوانند تجربیاتی ایجاد کنند که محیط فیزیکی و مجازی را بدون نیاز به دسترسی به تصاویر یا ویدیوهای خام از حسگرهای Quest شما ترکیب کند.

تعامل SDK

با Interaction SDK، ادغام دست‌ها و تعاملات کنترل‌محور را برای شما آسان‌تر می‌کنیم. کتابخانه Unity که در اوایل سال آینده در دسترس است، با مجموعه‌ای از اجزای تعاملی آماده برای استفاده و قوی مانند grab، poke، target و select ارائه خواهد شد. همه اجزا را می توان با هم، به طور مستقل، یا حتی در سایر چارچوب های تعاملی ادغام کرد. Interaction SDK بسیاری از چالش‌های تعامل سخت مرتبط با ردیابی دست مبتنی بر بینایی رایانه‌ای را حل می‌کند، الگوهای تعامل استاندارد شده را ارائه می‌دهد و از رگرسیون با تکامل فناوری جلوگیری می‌کند. آخرین اما نه کم‌اهمیت، ابزاری را فراهم می‌کند که به شما کمک می‌کند ژست‌های سفارشی خود را نیز بسازید.

حفاظت از داده هایی که ما همیشه در اطراف ارائه کرده ایم ردیابی دستی اینجا درخواست دهید تصاویر و نقاط تخمینی مختص دستان شما پس از پردازش حذف می شوند و در سرورهای ما ذخیره نمی شوند.

SDK صفحه کلید ردیابی شده

سال گذشته یک را اعلام کردیم صفحه کلید ردیابی شده قابلیت برای توسعه دهندگان ما سخت در حال کار برای راه‌اندازی Tracked Keyboard SDK هستیم و در مسیر انتشار آن در اوایل سال آینده به عنوان بخشی از Presence Platform هستیم.

Voice SDK Experimental

ما هم اعلام می کنیم Voice SDK Experimental، در نسخه بعدی ما موجود است تا بتوانید شروع به ساخت و آزمایش کنید. Voice SDK مجموعه‌ای از قابلیت‌های زبان طبیعی است که به شما امکان می‌دهد ناوبری هندزفری و گیم‌پلی جدید مبتنی بر صدا ایجاد کنید. با Voice SDK، می‌توانید پیمایش و جستجوی صوتی را ایجاد کنید یا سؤالات متداول صوتی را فعال کنید تا به کاربران اجازه درخواست کمک یا یادآوری بدهید. همچنین گیم‌پلی Voice-Drive جدید را فعال می‌کنیم—مانند برنده شدن در نبرد با طلسم جادویی فعال با صدا یا صحبت کردن با یک شخصیت یا آواتار. Voice SDK توسط پلت فرم زبان طبیعی Wit.ai فیس بوک پشتیبانی می شود و ثبت نام و شروع به کار رایگان است.

منبع: فیس بوک