Microsoft Research arbejder på 3D-lyd til telepresence og virtual reality

Ikon for læsetid 2 min. Læs


Læsere hjælper med at understøtte MSpoweruser. Vi får muligvis en kommission, hvis du køber via vores links. Værktøjstip-ikon

Læs vores oplysningsside for at finde ud af, hvordan du kan hjælpe MSPoweruser med at opretholde redaktionen Læs mere

Microsoft Research arbejder på et system, der får lyde til at komme fra bestemte steder i rummet. Elektronik på toppen af ​​hovedtelefonerne har sensorer til at spore bevægelsen af ​​bærerens hoved. Microsoft-forskere kalder det en 3-D-lyd. Technology Review havde for nylig en chance for at opleve denne teknologi i Microsofts Silicon Valley-laboratorium.

Jeg tog et par trådløse hovedtelefoner på, der fik genstande i nærheden til pludselig at sprænge til live. En stemme så ud til at udgå fra en papmodel af en bærbar radio. Musik af højere kvalitet så ud til at komme fra en falsk hi-fi-højttaler. Og en udstoppet fugl højt fra jorden producerede realistiske kvidren. Mens jeg gik rundt, ændrede lydene sig, så illusionen aldrig gled, da deres position i forhold til mine ører ændrede sig.

Den lidt uhyggelige oplevelse blev mulig, fordi jeg mindre end et minut tidligere havde sat mig foran en Kinect 3-D sensor og kortvarigt blevet drejet til venstre og højre. Software byggede en 3D-model af mit hoved og skuldre og brugte derefter denne model til at beregne et personligt filter, der gjorde det muligt at narre mine høresanser.

Her er info om projektet fra Microsoft,

Dette forskningsprojekt omfatter to teknologier:

  • Gengivne personlige hovedrelaterede overførselsfunktioner (HRTF'er), syntetiseret ved hjælp af antropometriske data skræddersyet til en individuel brugers lydinput.
  • Oprettelse af en fordybende lydoplevelse ved hjælp af hovedtelefoner og person/hovedsporing gennem gengivet 3D-lyd.

Projektet genererer personlige HRTF'er ved at scanne en person ved hjælp af en Kinect til Windows-enhed og derefter bruge et headset til at identificere et foruddefineret område. Det gør det muligt for brugeren at interagere med et virtuelt sæt fysiske objekter - såsom en AM-radio, en dukke, en telefon eller et fjernsyn - der begynder at spille musik, tale og ringe. Brugeren kan bevæge sig frit, dreje hovedet og nærme sig hver enkelt lydkilde i en virtuel oplevelse.

Læs mere om det på Teknologigennemgang.

Mere om emnerne: 3D lyd, microsoft, Occulus, forskning, telepresence, virtual reality