Microsoft の最新のヒューマンインタラクション研究は衝撃的です

読書時間アイコン 3分。読んだ

カレンダーアイコン上で公開 ２０２２年７月１１日

上の公表 ２０２２年７月１１日

読者は MSpoweruser のサポートを支援します。私たちのリンクを通じて購入すると、手数料が発生する場合があります。

時折、私たちが将来生きていることを非常に明確にするテクノロジーが実証されているのを目にします。そのような例のXNUMXつは、マイクロソフトリサーチのヒューマンインタラクション研究者によって開発されているテクノロジです。

最近の特許「表示領域を拡張するためのXNUMX次元オブジェクトトラッキング」では、コンピューターがカメラを使用して、デバイスの前の領域での指やスタイラスの動きを追跡し、それによってデバイス自体が許可するよりも広い表面積での相互作用を可能にします。

要約は次のとおりです。

いくつかの例では、携帯型電子機器の前または周囲のデスクトップなどの表面を、通常は小さな表示画面を有する携帯型電子機器と相互作用するための比較的大きな表面として使用することができる。ユーザーは、指、ペン、スタイラスなどの任意のオブジェクトを使用して、表面に書き込みまたは描画することができます。サーフェスは、パーシャルまたはフルサイズのキーボードをシミュレートするためにも使用できます。カメラを使用してオブジェクトの3次元（XNUMXD）位置または動きを検知すると、表面上のジェスチャの使用、方向性の入力、および電子機器によって処理または保存されているドキュメントへの実際のオブジェクトのキャプチャが可能になります。デバイス。１つまたは複数のオブジェクトを使用して、携帯型電子デバイスによって表示される要素を操作することができる。

もちろん、このテクノロジーの弱点は、デバイスの真正面の領域しか追跡できないことです。

しかし、MicrosoftResearchの主任研究員であるEyalOfekは、標準的な濃いサングラスのレンズで指の反射を驚くほど追跡することで、この問題を克服する方法を見つけました。

デバイスの標準の前面カメラを使用し、眼鏡の曲率を調整する必要がありますが、空中でのジェスチャーの追跡も可能です。

Ofekは書いています：

変更されていないモバイルデバイスの周囲に入力スペースを拡張するための新しいアプローチを紹介します。 GlassHandsは、変更されていないハンドヘルドデバイスの組み込みの前面カメラを使用して、サングラス、スキーゴーグル、またはバイザーでの反射を通じて手のポーズとジェスチャーを推定します。これにより、GlassHandsは、大きなタッチディスプレイの入力リーチに匹敵する、拡大された入力スペースを作成します。技術的なコンセプトと実装とともにアイデアを紹介します。変更されたモバイルデバイスまたは大型タッチディスプレイでのみ以前は可能だった一連の対話手法を使用した地図の閲覧や描画など、いくつかのアプリケーションシナリオで提案されたアプローチの実現可能性と可能性を示します。私たちの調査は、ユーザー調査によって裏付けられています。

下のビデオで示されているGlassHandsと呼ばれるその技術を参照してください。