Microsoft Research arbetar med 3D-ljud för telenärvaro och virtuell verklighet

Lästid ikon 2 min. läsa


Läsare hjälper till att stödja MSpoweruser. Vi kan få en provision om du köper via våra länkar. Verktygstipsikon

Läs vår informationssida för att ta reda på hur du kan hjälpa MSPoweruser upprätthålla redaktionen Läs mer

Microsoft Research arbetar med ett system som gör att ljud verkar komma från specifika punkter i rymden. Elektronik på toppen av hörlurarna har sensorer för att spåra rörelsen i bärarens huvud. Microsofts forskare kallar det ett 3-D-ljud. Technology Review fick nyligen en chans att uppleva denna teknik på Microsofts Silicon Valley-labb.

Jag tog på mig ett par trådlösa hörlurar som fick närliggande föremål att plötsligt spränga liv. En röst verkade komma från en kartongmodell av en bärbar radio. Musik av högre kvalitet verkade komma från en falsk hi-fi-högtalare. Och en uppstoppad fågel högt uppe från marken producerade realistiska kvitter. När jag gick runt förändrades ljuden så att illusionen aldrig gled när deras position i förhållande till mina öron förändrades.

Den där lite kusliga upplevelsen möjliggjordes för att jag mindre än en minut tidigare hade satt mig framför en Kinect 3-D-sensor och vänts kort åt vänster och höger. Mjukvara byggde en 3D-modell av mitt huvud och axlar och använde sedan den modellen för att beräkna ett personligt filter som gjorde det möjligt att lura mina hörsinne.

Här är informationen om projektet från Microsoft,

Detta forskningsprojekt innehåller två teknologier:

  • Återgivna personliga huvudrelaterade överföringsfunktioner (HRTFs), syntetiserade med antropometrisk data skräddarsydd för en enskild användares ljudingång.
  • Skapa en uppslukande ljudupplevelse med hjälp av hörlurar och spårning av person/huvud genom renderat 3D-ljud.

Projektet genererar personliga HRTF:er genom att skanna en person som använder en Kinect för Windows-enhet och sedan använda ett headset för att identifiera ett fördefinierat område. Det gör det möjligt för användaren att interagera med en virtuell uppsättning fysiska objekt - som en AM-radio, en docka, en telefon eller en tv - som börjar spela musik, tala och ringa. Användaren kan röra sig fritt, rotera huvudet och närma sig varje enskild ljudkälla i en virtuell upplevelse.

Läs mer om det på Teknikgranskning.

Mer om ämnena: 3D Audio, microsoft, Occulus, forskning, Telenärvaro, virtuell verklighet