Microsoft khám phá khả năng của cử chỉ trong không khí xung quanh điện thoại thông minh hiện đại

Microsoft Research gần đây đã tiết lộ một dự án mới trong đó họ đang phát triển hệ thống nhận dạng cử chỉ trên không cho điện thoại thông minh. Khi cầm điện thoại thông minh bằng một tay, bạn có thể sử dụng tay kia để thực hiện các cử chỉ tương tác với nội dung. Nó tăng cường cơ chế màn hình cảm ứng hiện có mà chúng ta đã quen. Nó có thể được áp dụng cho nhiều trường hợp sử dụng khác nhau bao gồm chơi game, lập bản đồ và hơn thế nữa.

Mô tả dự án:

Chúng tôi trình bày một thuật toán dựa trên máy học mới mở rộng không gian tương tác xung quanh các thiết bị di động. Kỹ thuật này chỉ sử dụng camera RGB hiện phổ biến trên các thiết bị di động có sẵn. Thuật toán của chúng tôi nhận dạng mạnh mẽ nhiều cử chỉ trong không khí, hỗ trợ sự thay đổi của người dùng và các điều kiện ánh sáng khác nhau. Chúng tôi chứng minh rằng thuật toán của chúng tôi chạy trong thời gian thực trên các thiết bị di động chưa được sửa đổi, bao gồm cả điện thoại thông minh và đồng hồ thông minh có giới hạn tài nguyên. Mục tiêu của chúng tôi không phải là thay thế màn hình cảm ứng làm thiết bị đầu vào chính mà là tăng cường và làm phong phú vốn từ vựng tương tác hiện có bằng cử chỉ. Mặc dù đầu vào bằng cảm ứng hoạt động tốt trong nhiều trường hợp, nhưng chúng tôi cũng chứng minh nhiều tác vụ tương tác như chuyển đổi chế độ, quản lý ứng dụng và tác vụ, chọn menu và một số loại điều hướng nhất định, trong đó đầu vào đó có thể được bổ sung hoặc phục vụ tốt hơn bằng cử chỉ trong không khí. Điều này loại bỏ các vấn đề về bất động sản màn hình trên màn hình cảm ứng nhỏ và cho phép mở rộng đầu vào sang không gian 3D xung quanh thiết bị. Chúng tôi trình bày các kết quả về độ chính xác nhận dạng (kiểm tra 93% và đào tạo 98%), tác động của dấu chân bộ nhớ và các thông số mô hình khác. Cuối cùng, chúng tôi báo cáo kết quả đánh giá sơ bộ của người dùng, thảo luận về những ưu điểm, hạn chế và đưa ra những hướng đi cho công việc trong tương lai.

Nguồn: Microsoft