Facebook tiếp nhận Microsoft Mesh với Nền tảng hiện diện mới

Facebook (nay được gọi là Meta) hôm nay đã công bố nền tảng Presence mới cho phép các nhà phát triển tạo ra trải nghiệm thực tế hỗn hợp mới. Nền tảng Hiện diện sẽ cạnh tranh với nền tảng Mesh của Microsoft, vốn đã công bố đầu năm nay. Các khả năng của Nền tảng hiện diện bao gồm Truyền qua, Neo không gian và Hiểu cảnh.

SDK thông tin chi tiết

Hôm nay, chúng tôi thông báo SDK thông tin chi tiết, cho phép bạn xây dựng trải nghiệm thực tế hỗn hợp tạo cảm giác hiện diện thực tế.

Đầu năm nay, chúng tôi đã giới thiệu Thử nghiệm API thông qua, cho phép bạn xây dựng trải nghiệm kết hợp giữa nội dung ảo với thế giới thực. Hôm nay, chúng tôi công bố tính khả dụng chung của Passthrough trong bản phát hành tiếp theo của chúng tôi, có nghĩa là bạn sẽ có thể xây dựng, thử nghiệm và cung cấp trải nghiệm với khả năng Passthrough.

Chúng tôi cũng đang công bố Spatial Anchors, hệ quy chiếu được khóa thế giới sẽ cho phép bạn đặt nội dung ảo trong một không gian thực có thể tồn tại qua các phiên. Với Thử nghiệm neo không gian sắp ra mắt, bạn sẽ có thể tạo Neo không gian ở các tư thế 6DoF cụ thể, theo dõi tư thế 6DoF liên quan đến tai nghe, duy trì Neo không gian trên thiết bị và truy xuất danh sách các neo không gian hiện đang được theo dõi.

Chúng tôi cũng đang công bố một Hiểu cảnh khả năng. Cùng với Passthrough và Spatial Anchors, Scene Hiểu biết cho phép bạn nhanh chóng xây dựng các trải nghiệm phức tạp và nhận biết cảnh có tương tác phong phú với môi trường của người dùng. Là một phần của tính năng Hiểu cảnh, Mô hình cảnh cung cấp biểu diễn hình học và ngữ nghĩa cho không gian của người dùng, vì vậy bạn có thể xây dựng trải nghiệm thực tế hỗn hợp quy mô phòng. Scene Model là một bản đại diện duy nhất, toàn diện, cập nhật về thế giới thực có thể lập chỉ mục và truy vấn. Ví dụ: bạn có thể gắn một màn hình ảo vào tường của người dùng hoặc để một nhân vật ảo điều hướng trên sàn với sự tắc nghẽn thực tế. Hơn nữa, bạn có thể đưa các vật thể thực, cuộc sống thực vào VR. Để tạo Mô hình cảnh này, chúng tôi cung cấp quy trình Chụp cảnh do hệ thống hướng dẫn cho phép người dùng đi bộ xung quanh và chụp cảnh của họ. Chúng tôi rất vui được cung cấp khả năng Hiểu cảnh ở dạng khả năng thử nghiệm vào đầu năm sau.

Với khả năng Truyền qua, Neo không gian và Hiểu cảnh mới trong Insight SDK, bạn sẽ có thể xây dựng trải nghiệm thực tế hỗn hợp kết hợp nội dung ảo với thế giới thực, tạo ra những khả năng mới cho kết nối xã hội, giải trí, năng suất và hơn thế nữa.

Bảo vệ sự riêng tư trong không gian vật lý của mọi người là điều quan trọng đối với chúng tôi. Chúng tôi đã thiết kế Passthrough, Spatial Anchors và Scene Hiểu biết để các nhà phát triển có thể tạo ra trải nghiệm kết hợp giữa môi trường thực và ảo mà không cần truy cập vào hình ảnh hoặc video thô từ cảm biến Nhiệm vụ của bạn.

SDK tương tác

Với SDK tương tác, chúng tôi đang giúp bạn tích hợp các tương tác tập trung vào tay và người điều khiển dễ dàng hơn. Thư viện Unity, có sẵn vào đầu năm tới, sẽ đi kèm với một tập hợp các thành phần tương tác mạnh mẽ, sẵn sàng để sử dụng như grab, poke, target và select. Tất cả các thành phần có thể được sử dụng cùng nhau, độc lập hoặc thậm chí được tích hợp vào các khuôn khổ tương tác khác. SDK tương tác giải quyết nhiều thách thức tương tác khó khăn liên quan đến Theo dõi tay dựa trên thị giác máy tính, cung cấp các mẫu tương tác được chuẩn hóa và ngăn chặn sự thoái lui khi công nghệ phát triển. Cuối cùng nhưng không kém phần quan trọng, nó cung cấp công cụ để giúp bạn xây dựng các cử chỉ tùy chỉnh của riêng mình.

Các biện pháp bảo vệ dữ liệu mà chúng tôi luôn cung cấp xung quanh Theo dõi tay đăng ký ở đây. Hình ảnh và điểm ước tính cụ thể cho bàn tay của bạn sẽ bị xóa sau khi xử lý và không được lưu trữ trên máy chủ của chúng tôi.

SDK bàn phím được theo dõi

Năm ngoái, chúng tôi đã công bố một Bàn phím theo dõi khả năng dành cho nhà phát triển. Chúng tôi đang nỗ lực làm việc để ra mắt SDK bàn phím được theo dõi và chúng tôi đang trên đà phát hành vào đầu năm sau như một phần của Nền tảng hiện diện.

Thử nghiệm SDK thoại

Chúng tôi cũng đang thông báo Thử nghiệm SDK thoại, có sẵn trong bản phát hành tiếp theo của chúng tôi để bạn có thể bắt đầu xây dựng và thử nghiệm. SDK giọng nói là một tập hợp các khả năng ngôn ngữ tự nhiên cho phép bạn tạo điều hướng rảnh tay và trò chơi điều khiển bằng giọng nói mới. Với SDK giọng nói, bạn có thể tạo Điều hướng và tìm kiếm bằng giọng nói hoặc bật Câu hỏi thường gặp về giọng nói để cho phép người dùng yêu cầu trợ giúp hoặc lời nhắc. Chúng tôi cũng đang bật Trò chơi Drive bằng giọng nói mới — chẳng hạn như chiến thắng trong trận chiến bằng phép thuật kích hoạt bằng giọng nói hoặc nói chuyện với một nhân vật hoặc hình đại diện. SDK giọng nói được cung cấp bởi nền tảng ngôn ngữ tự nhiên Wit.ai của Facebook và bạn có thể đăng ký và bắt đầu sử dụng miễn phí.

nguồn: Facebook