微軟研究院致力於遠程呈現和虛擬現實的 3D 音頻

微軟研究院正在開發一種系統，使聲音似乎來自太空中的特定點。 耳機頂部的電子設備有傳感器來跟踪佩戴者頭部的運動。 微軟研究人員稱其為 3-D 音頻。 Technology Review 最近有機會在微軟的矽谷實驗室體驗了這項技術。

我戴上一副無線耳機，讓附近的物體頓時生機勃勃。 一個聲音似乎是從便攜式收音機的紙板模型中發出的。 更高質量的音樂似乎來自假的高保真揚聲器。 一隻離地高高的毛絨小鳥發出逼真的啁啾聲。 當我四處走動時，聲音發生了變化，因此幻覺不會隨著它們相對於我耳朵的位置的變化而消失。

這種有點怪異的體驗之所以成為可能，是因為不到一分鐘前，我坐在 Kinect 3-D 傳感器前，並被短暫地左右轉動。 軟件構建了我的頭部和肩部的 3D 模型，然後使用該模型計算了一個個性化的過濾器，它可以欺騙我的聽覺。

這是來自微軟的項目信息，

該研究項目採用兩種技術：

• 渲染的個性化頭部相關傳遞函數 (HRTF)，使用針對單個用戶的音頻輸入量身定制的人體測量數據進行合成。
• 通過渲染的 3-D 音頻使用耳機和人/頭部跟踪創建身臨其境的音頻體驗。

該項目通過使用 Kinect for Windows 設備掃描人，然後使用耳機識別預定義區域來生成個性化 HRTF。 它使用戶能夠與開始播放音樂、說話和響鈴的一組虛擬物理對象（例如 AM 收音機、人體模型、電話或電視）進行交互。 用戶可以在虛擬體驗中自由移動、旋轉頭部並接近每個單獨的聲源。

了解更多有關它的信息 技術評論。