マイクロソフトは、現代のスマートフォンの周りの空中ジェスチャーの可能性を探ります

Microsoft Researchは最近、スマートフォン用の空中ジェスチャ認識システムを開発している新しいプロジェクトを明らかにしました。 スマートフォンを片手に持っているときは、もう片方の手でジェスチャーをしてコンテンツを操作できます。 これは、私たちが慣れ親しんでいる既存のタッチスクリーンメカニズムを補強します。 ゲーム、マッピングなど、さまざまなユースケースに適用できます。

プロジェクトの説明：

モバイルデバイスの周りの相互作用空間を拡張する新しい機械学習ベースのアルゴリズムを提示します。 この手法では、市販のモバイルデバイスで現在一般的に使用されているRGBカメラのみを使用します。 私たちのアルゴリズムは、さまざまな空中ジェスチャーを確実に認識し、ユーザーのバリエーションやさまざまな照明条件をサポートします。 私たちのアルゴリズムは、リソースに制約のあるスマートフォンやスマートウォッチなど、変更されていないモバイルデバイスでリアルタイムに実行されることを示しています。 私たちの目標は、タッチスクリーンを主要な入力デバイスとして置き換えることではなく、ジェスチャーを使用して既存のインタラクション語彙を強化および強化することです。 タッチ入力は多くのシナリオでうまく機能しますが、モードスイッチ、アプリケーションとタスクの管理、メニューの選択、特定の種類のナビゲーションなど、さまざまなインタラクションタスクを示します。このような入力は、空中ジェスチャーによって補完またはより適切に処理できます。 これにより、小さなタッチスクリーンでの画面領域の問題が解消され、デバイスの周囲の3D空間に入力を拡張できるようになります。 認識精度（93％のテストと98％のトレイン）、メモリフットプリントの影響、およびその他のモデルパラメータの結果を示します。 最後に、予備的なユーザー評価の結果を報告し、利点と制限について説明し、今後の作業の方向性について結論を出します。

出典：マイクロソフト