Microsoftとフォルクスワーゲンのコラボレーション：HoloLens2の移動プラットフォーム機能の裏話

複合現実ヘッドセットは本当に便利ですが、移動環境というXNUMXつの特定のシナリオで使用すると、その能力には限界があります。 Microsoft & フォルクスワーゲン 私たちに「移動プラットフォーム」モードをもたらした共同の努力を通じて、これに対する解決策を見つけました ホロレンズ2.

フォルクスワーゲンは、拡張現実を将来のモビリティコンセプトの主要コンポーネントとして想定しています。 そこで、テクノロジーを探求するためのさまざまなステップを開始しました。 2015年には、自家用車と拡張現実を使用した研究プロジェクトを実施しました。 レーストレーナーシステム レースサーキットでの運転を教えるために。 また、 拡張現実ヘッドアップディスプレイ そのIDで。 2020年の電気自動車のファミリー。車両の前の環境に関するさまざまな情報（ナビゲーション矢印や車線のマーキングなど）がフロントガラスに投影されます。

「複合現実情報は、お客様のユーザーエクスペリエンスを向上させるために提供できる最も直感的な情報だと思います」と、フォルクスワーゲングループイノベーションのデータサイエンスチームの責任者であるアンドロクリーン氏はマイクロソフトに語りました。 「そこで目にするもの、そして処理する必要があるものは、人間が通常見たり処理したりするものに非常に近いからです。 それほど抽象的ではありません。」

ドイツの自動車メーカーは、テクノロジーをさらに活用することを目指して、HoloLensを別の研究プロジェクトに使用しました。このプロジェクトでは、HoloLensを移動車両に搭載しました。 残念ながら、物事はうまくいきませんでした。 センサーは追跡能力を失い、ホログラムは消えていきました。 問題は、デバイスの2018つのモーション関連センサーが、車両の移動中に拾っていた信号で混乱を経験していることを指摘しました。 これにより、フォルクスワーゲンはマイクロソフトに支援を求め、企業の旅はXNUMX年に始まりました。

「私たちは広範な議論を行いました」と、マイクロソフトの科学ディレクターであり、3Dコンピュータービジョンと機械学習の専門家であり、現在はスイスのチューリッヒにあるマイクロソフトの複合現実とAIラボのディレクターであるマークポレフィーズは述べています。 「彼らは彼らのユースケースと彼らが可能にしたいと思っていたものを提示しました。 彼らは私たちと協力して解決策を見つけ、そのような状況でHoloLensを使用できるようにすることを熱望していました。」

パンデミックが世界中で大混乱を引き起こしているため、研究は明らかにさまざまな問題に直面していました。 スイスでのCovid-19の制限により、チームは他の乗客と一緒に車内で技術をテストできませんでした。そのため、プロジェクトのマイクロソフトシニアソフトウェアエンジニアであるJoshua Elsdonは、チューリッヒのアパートでテストを行う必要がありました。

「アパートでたくさんのテストをしなければなりませんでした。 これらは理想的な開発条件ではありません」とElsdon氏は言います。 「これらすべての作業はリモートで行われ、さまざまな国に分散されていました。これは興味深いことでした。」

その後、チームはピュージェット湾でレクリエーションボートに乗ってプロトタイプをテストし、次にフォルクスワーゲンを車内でテストしました。

「車両の位置を追跡する測位システムを接続しました」と、フォルクスワーゲンの拡張現実の専門家であるMichaelWittkämperは述べています。 「このようにして、車の外の名所に関する情報などの3D要素を配置することもできました。 これにより、ドライバーの前向きの視野内だけでなく、眼鏡をかけているユーザーが見ている場所にホログラムを表示するというまったく新しい可能性が開かれます。」

すべてが成功し、Microsoftは移動プラットフォーム機能を展開できるようになりました。 現在、このテクノロジーは、HoloLensを使用して船のメンテナンスクルーを接続し、他の場所の専門家に相談する海事会社にとって大きな魅力です。 マイクロソフトは、特に移動環境が関係する場合、将来的に新機能のより大きな計画を立てています。 Pollefeys氏はまた、ポータブルスマートグラスを通じて日常生活で機能するようにしたいと述べています。 しかし、現在では 値札 HoloLens 2（$3,500から$5,199）の場合、特にMicrosoftがデバイスを市場の一般消費者に届けたい場合は、計画はまだ現実からかけ離れている可能性があります。