Microsoft Research pracuje nad dźwiękiem 3D dla teleobecności i wirtualnej rzeczywistości
2 minuta. czytać
Opublikowany
Udostępnij ten artykuł
Ulepsz ten przewodnik
Przeczytaj naszą stronę z informacjami, aby dowiedzieć się, jak możesz pomóc MSPoweruser w utrzymaniu zespołu redakcyjnego Czytaj więcej
Microsoft Research pracuje nad systemem, który sprawia, że dźwięki wydają się pochodzić z określonych punktów w przestrzeni. Elektronika na górze słuchawek ma czujniki śledzące ruch głowy użytkownika. Badacze firmy Microsoft nazywają to dźwiękiem 3D. Technology Review miał niedawno okazję zapoznać się z tą technologią w laboratorium Microsoftu w Dolinie Krzemowej.
Założyłem parę bezprzewodowych słuchawek, które sprawiły, że pobliskie obiekty nagle ożyły. Głos wydawał się emanować z kartonowego modelu przenośnego radia. Muzyka wyższej jakości wydawała się pochodzić z fałszywego głośnika hi-fi. A wypchany ptak wysoko nad ziemią wydawał realistyczne ćwierkanie. Kiedy chodziłem, dźwięki zmieniały się tak, że iluzja nigdy nie znikała, gdy zmieniało się ich położenie względem moich uszu.
To nieco upiorne doświadczenie było możliwe, ponieważ niecałą minutę wcześniej usiadłem przed sensorem Kinect 3D i zostałem na chwilę obrócony w lewo iw prawo. Oprogramowanie zbudowało trójwymiarowy model mojej głowy i ramion, a następnie użyło tego modelu do obliczenia spersonalizowanego filtra, który umożliwił oszukanie moich zmysłów słuchowych.
Oto informacje o projekcie firmy Microsoft,
Ten projekt badawczy obejmuje dwie technologie:
- Renderowane spersonalizowane funkcje przenoszenia związane z głową (HRTF), zsyntetyzowane przy użyciu danych antropometrycznych dostosowanych do wejścia audio indywidualnego użytkownika.
- Tworzenie wciągających wrażeń dźwiękowych przy użyciu słuchawek i śledzenia osoby/głowy za pomocą renderowanego dźwięku 3D.
Projekt generuje spersonalizowane HRTF, skanując osobę za pomocą urządzenia Kinect dla systemu Windows, a następnie używając zestawu słuchawkowego w celu zidentyfikowania predefiniowanego obszaru. Umożliwia użytkownikowi interakcję z wirtualnym zestawem fizycznych obiektów — takich jak radio AM, manekin, telefon lub telewizor — które zaczynają odtwarzać muzykę, mówić i dzwonić. Użytkownik może się swobodnie poruszać, obracać głową i zbliżać się do każdego źródła dźwięku w ramach wirtualnego doświadczenia.
Przeczytaj więcej na ten temat na Przegląd technologii.
