שיתוף הפעולה של מיקרוסופט ופולקסווגן: הסיפור מאחורי תכונת הפלטפורמה הנעה של HoloLens 2

אוזניות מציאות משולבת יכולות להיות שימושיות באמת, אבל היכולת שלהן עומדת בפני מגבלות כאשר משתמשים בהן בתרחיש ספציפי אחד: סביבה נעה. מיקרוסופט ו פולקסווגן מצאו לכך פתרון באמצעות מאמץ משותף שהביא לנו את מצב "הפלטפורמה הנעה" עבור הולווליקס 2.

פולקסווגן רואה בעיני רוחו את המציאות המוגברת כמרכיב מרכזי בתפיסות הניידות העתידיות. אז זה התחיל בצעדים שונים כדי לחקור את הטכנולוגיה. בשנת 2015 היא ערכה פרויקט מחקר באמצעות כלי רכב מנוהלים ומציאות מוגברת. מערכת Race Trainer ללמד נהיגה במעגל מירוצים. זה גם הציג את תצוגת ראש-מעלה למציאות רבודה בתעודת הזהות שלו. משפחת המכוניות החשמליות בשנת 2020, שבה מידע שונה על הסביבה מול הרכב (כמו חיצי ניווט וסימון נתיבים) מוקרן על השמשה הקדמית.

"אנחנו חושבים שמידע מציאות מעורבת הוא המידע הכי אינטואיטיבי שנוכל לספק כדי לשפר את חווית המשתמש של הלקוחות שלנו", אמר ראש צוות מדעי הנתונים של ד"ר פולקסווגן גרופ החדשנות, אנדרו קליין, למיקרוסופט. "כי מה שאתה רואה שם, ומה שאתה צריך לעבד, קרוב מאוד למה שבני אדם רואים ומעבדים בדרך כלל. זה לא כל כך מופשט".

מתוך שאיפה להפיק יותר מטכנולוגיה, יצרנית הרכב הגרמנית השתמשה ב-HoloLens לפרויקט מחקר נוסף, שבו הוכנס לרכב נע. דברים לא הלכו טוב, למרבה הצער. החיישנים איבדו את יכולת המעקב שלהם, וההולוגרמות נעלמו. הבעיה הצביעה על שני החיישנים הקשורים לתנועה של המכשיר שחווים בלבול באותות שהם קולטים בזמן שהרכב נע. בכך ביקשה פולקסווגן עזרה ממיקרוסופט, והמסע של החברות החל ב-2018.

"היו לנו דיונים נרחבים", אומר מארק פולפייס, מנהל המדע של מיקרוסופט ומומחה בראייה ממוחשבת תלת מימדית ולמידת מכונה וכעת מנהל מעבדת המציאות המעורבת וה-AI של מיקרוסופט בציריך, שוויץ. "הם הציגו את מקרי השימוש שלהם ואת מה שהם קיוו לאפשר. הם היו להוטים לעבוד איתנו כדי למצוא פתרון ולהיות מסוגלים להשתמש ב-HoloLens במצבים אלה".

מכיוון שהמגיפה גורמת להרס ברחבי העולם, המחקר כנראה התמודד עם בעיות שונות. ההגבלות של Covid-19 בשוויץ מנעו מהצוות לבדוק את הטכנולוגיה בתוך רכב עם נוסעים אחרים, ולכן ג'ושוע אלסדון - מהנדס תוכנה בכיר של מיקרוסופט חלק מהפרויקט - נאלץ לעבוד על זה ולבצע בדיקות בתוך דירתו בציריך.

"היינו צריכים לעשות הרבה בדיקות בדירה שלי. אלו לא תנאי פיתוח אידיאליים", אומר אלסדון. "כל הדברים האלה נעשו מרחוק והופצו במדינות שונות, וזה היה מעניין."

מאוחר יותר, הצוות בדק את אב הטיפוס ב-Puget Sound על ידי רכיבה על סירות פנאי, ואז עם פולקסווגן בתוך כלי רכב.

"חיברנו מערכת מיקום שעוקבת אחר מיקום הרכב", אומר מייקל ויטקמפר, מומחה המציאות הרבודה של פולקסווגן. "בדרך זו הצלחנו למקם גם אלמנטים תלת מימדיים כמו מידע על נקודות עניין מחוץ למכונית. זה פותח אפשרויות חדשות לגמרי לא רק להציג הולוגרמות בתוך שדה הראייה של הנהג הפונה קדימה, אלא גם בכל מקום שבו מסתכל המשתמש המרכיב את המשקפיים”.

הכל הפך להצלחה, ומאפשר למיקרוסופט להפעיל את תכונת הפלטפורמה הנעה. נכון לעכשיו, הטכנולוגיה היא אטרקציה גדולה עבור חברות ימיות, המשתמשות ב-HoloLens כדי לחבר צוותי תחזוקה על הספינה כדי להתייעץ עם מומחים ממקומות אחרים. למיקרוסופט יש תוכניות גדולות יותר עבור התכונה החדשה בעתיד, במיוחד כאשר מדובר בסביבות נעות. Pollefeys אמר גם כי החברה מקווה להפוך אותו לפונקציונלי בחיי היומיום באמצעות משקפיים חכמות ניידות. עם זאת, עם הנוכחי תג מחיר של HoloLens 2 ($3,500 עד $5,199), ייתכן שהתוכנית עדיין רחוקה מהמציאות, במיוחד אם מיקרוסופט רוצה שהמכשיר יגיע לצרכנים רגילים בשוק.