Hệ thống mới của Microsoft Research có thể theo dõi chuyển động chi tiết của bàn tay

Kinect cho phép con người tương tác tự nhiên với máy tính, cảm biến mới nhất — cho dù đó là cảm biến Kinect dành cho Xbox One hay cảm biến Kinect dành cho Windows v2 — và bộ phát triển phần mềm miễn phí (SDK) 2.0 cung cấp cho các nhà phát triển nền tảng cần thiết để tạo và triển khai tính năng tương tác các ứng dụng phản hồi lại các chuyển động, cử chỉ và lệnh thoại tự nhiên của mọi người. Nhưng nó có một số nhược điểm như cần phòng rộng, người tương tác phải cách xa cảm biến hàng mét và hơn thế nữa.

Gần đây, chúng tôi đã báo cáo rằng Microsoft Research hiện đang phát triển một hệ thống theo dõi bàn tay theo thời gian thực mới dựa trên một camera độ sâu duy nhất có thể được nhúng vào thiết bị di động. Đọc về nó ở đây.

Microsoft hiện đang trình bày một Sử dụng hệ thống có thể theo dõi - trong thời gian thực - tất cả các chuyển động tay tinh vi và sắc thái mà mọi người thực hiện bằng tay trong cuộc sống hàng ngày của họ.

Chúng tôi giới thiệu một công cụ theo dõi bàn tay có khớp nối thời gian thực mới có thể cho phép các khả năng mới cho tương tác giữa người và máy tính (HCI). Hệ thống của chúng tôi tái tạo lại chính xác các tư thế tay phức tạp trên nhiều đối tượng chỉ bằng một camera độ sâu duy nhất. Nó cũng cho phép mức độ mạnh mẽ, liên tục phục hồi sau các lỗi theo dõi. Tuy nhiên, khía cạnh độc đáo nhất của trình theo dõi của chúng tôi là tính linh hoạt về vị trí đặt máy ảnh và phạm vi hoạt động.

Các nhà nghiên cứu của Microsoft sẽ trình bày Giấy tay vào năm nay Hội nghị CHI về tương tác giữa con người và máy tính tại Seoul, nơi nó đã nhận được Giải thưởng Danh dự Tốt nhất CHI.

Handpose sử dụng máy ảnh để theo dõi chuyển động tay của một người. Hệ thống này khác với công nghệ theo dõi bàn tay trước đây ở chỗ nó được thiết kế để phù hợp với các thiết lập linh hoạt hơn nhiều. Điều đó cho phép người dùng làm những việc như đứng dậy và di chuyển xung quanh phòng trong khi máy ảnh theo dõi mọi thứ, từ chuyển động zig-zag đến các dấu hiệu thích, trong thời gian thực.

Hệ thống có thể sử dụng một cơ bản Hệ thống Kinect, giống như nhiều người có trên bảng điều khiển trò chơi Xbox của riêng họ ở nhà. Nhưng không giống như mô hình tại nhà hiện tại, theo dõi các chuyển động của toàn bộ cơ thể, hệ thống này được thiết kế để nhận biết các chuyển động nhỏ hơn và tinh tế hơn của bàn tay và ngón tay.

Tìm hiểu thêm về nó tại đây.