Η Microsoft διερευνά τις δυνατότητες των χειρονομιών στον αέρα γύρω από τα σύγχρονα smartphone

Η Microsoft Research αποκάλυψε πρόσφατα ένα νέο έργο στο οποίο αναπτύσσει ένα σύστημα αναγνώρισης χειρονομιών στον αέρα για smartphone. Όταν κρατάτε το smartphone σας στο ένα χέρι, μπορείτε να χρησιμοποιήσετε το άλλο χέρι για να κάνετε χειρονομίες για να αλληλεπιδράσετε με το περιεχόμενο. Αυξάνει τον υπάρχοντα μηχανισμό της οθόνης αφής που έχουμε συνηθίσει. Μπορεί να εφαρμοστεί σε πολλές διαφορετικές περιπτώσεις χρήσης, όπως gaming, χαρτογράφηση και πολλά άλλα.

Περιγραφή Έργου:

Παρουσιάζουμε έναν νέο αλγόριθμο που βασίζεται στη μηχανική μάθηση που επεκτείνει τον χώρο αλληλεπίδρασης γύρω από κινητές συσκευές. Η τεχνική χρησιμοποιεί μόνο την κάμερα RGB που συνηθίζεται πλέον σε κινητές συσκευές εκτός ραφιού. Ο αλγόριθμός μας αναγνωρίζει αξιόπιστα ένα ευρύ φάσμα χειρονομιών στον αέρα, υποστηρίζοντας την παραλλαγή χρήστη και τις διαφορετικές συνθήκες φωτισμού. Δείχνουμε ότι ο αλγόριθμός μας εκτελείται σε πραγματικό χρόνο σε μη τροποποιημένες κινητές συσκευές, συμπεριλαμβανομένων των smartphone με περιορισμένους πόρους και των smartwatches. Στόχος μας δεν είναι να αντικαταστήσουμε την οθόνη αφής ως κύρια συσκευή εισόδου, αλλά μάλλον να αυξήσουμε και να εμπλουτίσουμε το υπάρχον λεξιλόγιο αλληλεπίδρασης χρησιμοποιώντας χειρονομίες. Ενώ η είσοδος αφής λειτουργεί καλά για πολλά σενάρια, επιδεικνύουμε πολλές εργασίες αλληλεπίδρασης, όπως διακόπτες λειτουργίας, διαχείριση εφαρμογών και εργασιών, επιλογή μενού και ορισμένους τύπους πλοήγησης, όπου αυτή η είσοδος μπορεί είτε να συμπληρωθεί είτε να εξυπηρετηθεί καλύτερα με χειρονομίες στον αέρα. Αυτό καταργεί προβλήματα με την ακίνητη περιουσία της οθόνης σε μικρές οθόνες αφής και επιτρέπει την επέκταση της εισόδου στον τρισδιάστατο χώρο γύρω από τη συσκευή. Παρουσιάζουμε αποτελέσματα για την ακρίβεια αναγνώρισης (3% δοκιμή και 93% τρένο), την επίδραση του αποτυπώματος μνήμης και άλλες παραμέτρους μοντέλου. Τέλος, αναφέρουμε αποτελέσματα από προκαταρκτικές αξιολογήσεις χρηστών, συζητάμε τα πλεονεκτήματα και τους περιορισμούς και καταλήγουμε με οδηγίες για μελλοντική εργασία.

Πηγή: Microsoft