Microsoft Research werkt aan 3D-audio voor telepresence en virtual reality

Pictogram voor leestijd 2 minuut. lezen


Lezers helpen MSpoweruser ondersteunen. We kunnen een commissie krijgen als u via onze links koopt. Tooltip-pictogram

Lees onze openbaarmakingspagina om erachter te komen hoe u MSPoweruser kunt helpen het redactieteam te ondersteunen Lees meer

Microsoft Research werkt aan een systeem dat ervoor zorgt dat geluiden afkomstig lijken te zijn van specifieke punten in de ruimte. Elektronica aan de bovenkant van de hoofdtelefoon heeft sensoren om de beweging van het hoofd van de drager te volgen. Microsoft-onderzoekers noemen het een 3D-audio. Technology Review had onlangs de kans om deze technologie te ervaren in het Silicon Valley-lab van Microsoft.

Ik zette een draadloze koptelefoon op waardoor objecten in de buurt plotseling tot leven kwamen. Er leek een stem uit een kartonnen model van een draagbare radio te komen. Muziek van hogere kwaliteit leek uit een nep-hifi-luidspreker te komen. En een opgezette vogel hoog boven de grond produceerde realistische tjilpen. Terwijl ik rondliep, veranderden de geluiden zodat de illusie nooit weggleed als hun positie ten opzichte van mijn oren veranderde.

Die ietwat griezelige ervaring werd mogelijk gemaakt doordat ik nog geen minuut eerder voor een Kinect 3D-sensor was gaan zitten en kort naar links en rechts was gedraaid. Software bouwde een 3D-model van mijn hoofd en schouders en gebruikte dat model om een ​​gepersonaliseerd filter te berekenen waarmee ik mijn auditieve zintuigen voor de gek kon houden.

Hier is de informatie over het project van Microsoft,

Dit onderzoeksproject omvat twee technologieën:

  • Gerenderde gepersonaliseerde hoofdgerelateerde overdrachtsfuncties (HRTF's), gesynthetiseerd met behulp van antropometrische gegevens die zijn afgestemd op de audio-invoer van een individuele gebruiker.
  • Creatie van een meeslepende audio-ervaring met behulp van hoofdtelefoons en persoon/hoofd-tracking via gerenderde 3D-audio.

Het project genereert gepersonaliseerde HRTF's door een persoon te scannen met een Kinect voor Windows-apparaat en vervolgens een headset te gebruiken om een ​​vooraf gedefinieerd gebied te identificeren. Het stelt de gebruiker in staat om te communiceren met een virtuele set fysieke objecten, zoals een AM-radio, een oefenpop, een telefoon of een televisie, die muziek begint af te spelen, te spreken en te rinkelen. De gebruiker kan vrij bewegen, haar hoofd draaien en elke individuele geluidsbron benaderen binnen een virtuele ervaring.

Lees er meer over op Technologie recensie.

Meer over de onderwerpen: 3D Audio, microsoft, Oculus, onderzoek, telepresence, virtual reality