Facebook จับมือ Microsoft Mesh ด้วย Presence Platform ใหม่

Facebook (ปัจจุบันรู้จักกันในชื่อ Meta) ได้ประกาศเปิดตัวแพลตฟอร์ม Presence ใหม่ ซึ่งจะช่วยให้นักพัฒนาสามารถสร้างประสบการณ์ความเป็นจริงแบบผสมรูปแบบใหม่ได้ แพลตฟอร์ม Presence จะแข่งขันกับแพลตฟอร์ม Mesh ของ Microsoft ซึ่งก็คือ ประกาศ ต้นปีนี้ ความสามารถของ Presence Platform ได้แก่ Passthrough, Spatial Anchors และ Scene Understanding

ข้อมูลเชิงลึก SDK

วันนี้มาประกาศ ข้อมูลเชิงลึก SDKช่วยให้คุณสร้างประสบการณ์ความเป็นจริงผสมที่สร้างความรู้สึกสมจริง

เมื่อต้นปีที่ผ่านมาเรา แนะนำ Passthrough API Experimentalช่วยให้คุณสร้างประสบการณ์ที่ผสมผสานเนื้อหาเสมือนจริงกับโลกจริง วันนี้ เรากำลังประกาศความพร้อมใช้งานทั่วไปของ Passthrough ในรุ่นถัดไป ซึ่งหมายความว่าคุณจะสามารถสร้าง ทดสอบ และจัดส่งประสบการณ์ด้วยความสามารถ Passthrough

นอกจากนี้ เรายังประกาศ Spatial Anchors ซึ่งเป็นกรอบอ้างอิงที่ล็อกไว้ทั่วโลก ซึ่งจะช่วยให้คุณสามารถวางเนื้อหาเสมือนในพื้นที่ทางกายภาพที่สามารถคงอยู่ตลอดเซสชันได้ ด้วย Spatial Anchors Experimental ซึ่งมีให้ใช้งานเร็วๆ นี้ คุณจะสามารถสร้าง Spatial Anchors ที่ท่า 6DoF เฉพาะ ติดตามท่า 6DoF ที่สัมพันธ์กับชุดหูฟัง ยืนยัน Spatial Anchors บนอุปกรณ์ และดึงรายการ Spatial Anchors ที่ติดตามอยู่ในปัจจุบัน

เรายังประกาศใหม่ ความเข้าใจฉาก ความสามารถ การทำความเข้าใจฉากร่วมกับ Passthrough และ Spatial Anchors ช่วยให้คุณสร้างประสบการณ์ที่ซับซ้อนและรับรู้เหตุการณ์ได้อย่างรวดเร็วซึ่งมีการโต้ตอบที่หลากหลายกับสภาพแวดล้อมของผู้ใช้ ในฐานะที่เป็นส่วนหนึ่งของการทำความเข้าใจเกี่ยวกับฉาก Scene Model ให้การแสดงทางเรขาคณิตและเชิงความหมายของพื้นที่ของผู้ใช้ คุณจึงสามารถสร้างประสบการณ์ความเป็นจริงผสมในขนาดห้องได้ Scene Model คือการแสดงโลกที่มีอยู่จริงเพียงรายการเดียวที่ครอบคลุมและเป็นปัจจุบันซึ่งสามารถจัดทำดัชนีและสืบค้นได้ ตัวอย่างเช่น คุณสามารถแนบหน้าจอเสมือนกับผนังของผู้ใช้ หรือให้ตัวละครเสมือนนำทางไปบนพื้นด้วยการบดเคี้ยวที่เหมือนจริง นอกจากนี้ คุณยังสามารถนำวัตถุจริงในชีวิตจริงมาไว้ใน VR ได้อีกด้วย ในการสร้าง Scene Model นี้ เรามีขั้นตอน Scene Capture ที่แนะนำโดยระบบ ซึ่งให้ผู้ใช้เดินไปรอบๆ และจับภาพฉากของตนได้ เรารู้สึกตื่นเต้นที่จะทำให้ความสามารถในการทำความเข้าใจฉากพร้อมใช้งานเป็นความสามารถทดลองในต้นปีหน้า

ด้วยความสามารถ Passthrough, Spatial Anchors และ Scene Understanding ใหม่ใน Insight SDK คุณจะสามารถสร้างประสบการณ์ความเป็นจริงผสมที่ผสมผสานเนื้อหาเสมือนจริงกับโลกทางกายภาพ สร้างความเป็นไปได้ใหม่ๆ สำหรับการเชื่อมต่อทางสังคม ความบันเทิง ประสิทธิภาพการทำงาน และอื่นๆ

การปกป้องความเป็นส่วนตัวของพื้นที่ทางกายภาพของผู้คนเป็นสิ่งสำคัญสำหรับเรา เราออกแบบ Passthrough, Spatial Anchors และ Scene Understanding เพื่อให้นักพัฒนาสามารถสร้างประสบการณ์ที่ผสมผสานสภาพแวดล้อมทางกายภาพและเสมือนจริงโดยไม่จำเป็นต้องเข้าถึงภาพดิบหรือวิดีโอจากเซ็นเซอร์ Quest ของคุณ

ปฏิสัมพันธ์ SDK

ด้วย Interaction SDK เรากำลังทำให้การผสานรวมมือและการโต้ตอบที่เน้นคอนโทรลเลอร์เป็นเรื่องง่ายขึ้นสำหรับคุณ ไลบรารี Unity ซึ่งพร้อมให้ใช้งานในต้นปีหน้าจะมาพร้อมกับชุดส่วนประกอบการโต้ตอบที่แข็งแกร่งและพร้อมใช้งาน เช่น คว้า สะกิด กำหนดเป้าหมาย และเลือก ส่วนประกอบทั้งหมดสามารถใช้ร่วมกัน แยกจากกัน หรือแม้แต่รวมเข้ากับเฟรมเวิร์กการโต้ตอบอื่นๆ Interaction SDK แก้ปัญหาการโต้ตอบที่ยากลำบากหลายอย่างที่เชื่อมโยงกับ Hand Tracking ตามการมองเห็นของคอมพิวเตอร์ นำเสนอรูปแบบการโต้ตอบที่เป็นมาตรฐาน และป้องกันการถดถอยเมื่อเทคโนโลยีพัฒนาขึ้น สุดท้ายแต่ไม่ท้ายสุด มันมีเครื่องมือที่จะช่วยคุณสร้างท่าทางที่กำหนดเองเช่นกัน

การปกป้องข้อมูลที่เรามีให้เสมอมา การติดตามด้วยมือ สมัครได้ที่นี่. รูปภาพและคะแนนโดยประมาณเฉพาะสำหรับมือของคุณจะถูกลบออกหลังจากการประมวลผลและจะไม่ถูกเก็บไว้ในเซิร์ฟเวอร์ของเรา

คีย์บอร์ดที่ติดตาม SDK

ปีที่แล้วเราได้ประกาศ a คีย์บอร์ดที่ติดตาม ความสามารถสำหรับนักพัฒนา เรากำลังทำงานกันอย่างหนักเพื่อเปิดตัว Tracked Keyboard SDK และเราพร้อมที่จะเปิดตัวในต้นปีหน้าโดยเป็นส่วนหนึ่งของ Presence Platform

การทดลอง SDK เสียง

เรายังประกาศ การทดลอง SDK เสียงพร้อมใช้งานในรุ่นถัดไปของเรา เพื่อให้คุณสามารถเริ่มสร้างและทดลองได้ Voice SDK เป็นชุดของความสามารถทางภาษาธรรมชาติที่ให้คุณสร้างการนำทางแบบแฮนด์ฟรีและการเล่นเกมที่ขับเคลื่อนด้วยเสียงใหม่ ด้วย Voice SDK คุณสามารถสร้างการนำทางด้วยเสียงและการค้นหา หรือเปิดใช้งานคำถามที่พบบ่อยเกี่ยวกับเสียง เพื่อให้ผู้ใช้สามารถขอความช่วยเหลือหรือการแจ้งเตือนได้ เรายังเปิดใช้งานการเล่นเกม Voice-Drive ใหม่ เช่น ชนะการต่อสู้ด้วยเวทมนตร์ที่สั่งงานด้วยเสียง หรือการพูดคุยกับตัวละครหรืออวาตาร์ Voice SDK ขับเคลื่อนโดยแพลตฟอร์มภาษาธรรมชาติ Wit.ai ของ Facebook และลงทะเบียนและเริ่มต้นได้ฟรี

ที่มา: Facebook