Microsoft Menjajaki Kemungkinan Gerakan In-Air di Sekitar Smartphone Modern

Microsoft Research baru-baru ini mengungkapkan sebuah proyek baru di mana mereka mengembangkan sistem pengenalan gerakan di udara untuk smartphone. Saat Anda memegang ponsel cerdas di satu tangan, Anda dapat menggunakan tangan lainnya untuk membuat gerakan untuk berinteraksi dengan konten. Ini menambah mekanisme layar sentuh yang ada yang biasa kita gunakan. Ini dapat diterapkan ke banyak kasus penggunaan yang berbeda termasuk game, pemetaan, dan lainnya.

Deskripsi Proyek:

Kami menghadirkan algoritme berbasis pembelajaran mesin baru yang memperluas ruang interaksi di sekitar perangkat seluler. Teknik ini hanya menggunakan kamera RGB yang sekarang biasa digunakan pada perangkat seluler yang tersedia. Algoritme kami dengan kuat mengenali berbagai gerakan di udara, mendukung variasi pengguna, dan berbagai kondisi pencahayaan. Kami menunjukkan bahwa algoritme kami berjalan secara real-time pada perangkat seluler yang tidak dimodifikasi, termasuk ponsel cerdas dan jam tangan pintar dengan sumber daya terbatas. Tujuan kami bukan untuk menggantikan layar sentuh sebagai perangkat input utama, melainkan untuk menambah dan memperkaya kosakata interaksi yang ada menggunakan gerakan. Sementara input sentuh berfungsi dengan baik untuk banyak skenario, kami mendemonstrasikan banyak tugas interaksi seperti sakelar mode, aplikasi dan manajemen tugas, pemilihan menu, dan jenis navigasi tertentu, di mana input tersebut dapat dilengkapi atau dilayani dengan lebih baik oleh gerakan di udara. Ini menghilangkan masalah real-estate layar pada layar sentuh kecil, dan memungkinkan input diperluas ke ruang 3D di sekitar perangkat. Kami menyajikan hasil untuk akurasi pengenalan (pengujian 93% dan pelatihan 98%), dampak jejak memori dan parameter model lainnya. Akhirnya, kami melaporkan hasil dari evaluasi pengguna awal, mendiskusikan kelebihan dan keterbatasan dan menyimpulkan dengan arahan untuk pekerjaan di masa depan.

Sumber: Microsoft