テレプレゼンスとバーチャルリアリティのための3Dオーディオに取り組んでいるMicrosoftResearch

Microsoft Researchは、音が空間の特定のポイントから発生しているように見えるシステムに取り組んでいます。 ヘッドホン上部の電子機器には、着用者の頭の動きを追跡するセンサーがあります。 Microsoftの研究者はこれを3Dオーディオと呼んでいます。 Technology Reviewは最近、マイクロソフトのシリコンバレーラボでこのテクノロジーを体験する機会がありました。

近くの物が突然飛び出すようなワイヤレスヘッドホンを装着しました。 携帯ラジオのダンボールモデルから声が出ているように見えた。 高品質の音楽は、偽のHi-Fiスピーカーから来ているように見えました。 そして、地面から高く上がった鳥のぬいぐるみは、リアルなチャープを生み出しました。 歩き回ると音が変わったので、耳に対する位置が変わっても幻想が滑ることはありませんでした。

3分も経たないうちに、Kinect 3-Dセンサーの前に座って、少しの間左右に向きを変えたため、そのやや不気味な体験が可能になりました。 ソフトウェアは私の頭と肩のXNUMXDモデルを作成し、そのモデルを使用して、聴覚をだますことを可能にするパーソナライズされたフィルターを計算しました。

これがマイクロソフトからのプロジェクトに関する情報です。

この研究プロジェクトはXNUMXつの技術を特徴としています。

• 個々のユーザーの音声入力に合わせた人体測定データを使用して合成された、レンダリングされたパーソナライズされた頭部伝達関数（HRTF）。
• ヘッドホンとレンダリングされた3Dオーディオによる人/頭の追跡を使用した没入型オーディオ体験の作成。

このプロジェクトでは、Kinect for Windowsデバイスを使用して人をスキャンし、ヘッドセットを使用して事前定義された領域を特定することにより、パーソナライズされたHRTFを生成します。 これにより、ユーザーは、音楽の再生、会話、呼び出し音を鳴らし始める、AMラジオ、マネキン、電話、テレビなどの仮想オブジェクトのセットと対話できます。 ユーザーは自由に動き、頭を回転させ、仮想体験内で個々の音源に近づくことができます。

それについてもっと読む テクノロジーレビュー。