מיקרוסופט בוחנת את האפשרויות של מחוות באוויר סביב סמארטפונים מודרניים

Microsoft Research חשפו לאחרונה פרויקט חדש בו הם מפתחים מערכת זיהוי מחוות באוויר לסמארטפונים. כאשר אתה מחזיק את הטלפון החכם שלך ביד אחת, אתה יכול להשתמש ביד השנייה כדי לבצע מחוות לאינטראקציה עם התוכן. זה מגדיל את מנגנון מסך המגע הקיים שאליו אנחנו רגילים. זה יכול להיות מיושם על הרבה מקרי שימוש שונים כולל משחקים, מיפוי ועוד.

תיאור פרויקט:

אנו מציגים אלגוריתם חדשני מבוסס למידת מכונה המרחיב את מרחב האינטראקציה סביב מכשירים ניידים. הטכניקה משתמשת רק במצלמת RGB הנפוצה כיום במכשירים ניידים מדף. האלגוריתם שלנו מזהה בצורה חזקה מגוון רחב של מחוות באוויר, תומך בווריאציות משתמש ותנאי תאורה משתנים. אנו מדגימים שהאלגוריתם שלנו פועל בזמן אמת על מכשירים ניידים ללא שינוי, כולל סמארטפונים ושעונים חכמים מוגבלים במשאבים. המטרה שלנו היא לא להחליף את מסך המגע כהתקן קלט ראשי, אלא להגדיל ולהעשיר את אוצר המילים הקיים של האינטראקציה באמצעות מחוות. בעוד שקלט מגע עובד היטב עבור תרחישים רבים, אנו מדגימים משימות אינטראקציה רבות כגון מתגי מצבים, ניהול יישומים ומשימות, בחירת תפריט וסוגים מסוימים של ניווט, כאשר קלט כזה יכול להיות משלים או לשרת טוב יותר על ידי מחוות באוויר. זה מסיר בעיות נדל"ן במסך במסכי מגע קטנים, ומאפשר להרחיב את הקלט למרחב התלת-ממדי סביב המכשיר. אנו מציגים תוצאות עבור דיוק זיהוי (3% בדיקה ו-93% רכבת), השפעת טביעת הרגל של הזיכרון ופרמטרים אחרים של המודל. לבסוף, אנו מדווחים על תוצאות מהערכות ראשוניות של משתמשים, דנים ביתרונות ובמגבלות ומסיימים עם כיוונים לעבודה עתידית.

מקור: Microsoft