Microsoft helpt blinde artiest om soundscapes aan zijn landschappen toe te voegen

Microsoft heeft de bekende Schotse landschapskunstenaar Keith Salmon geholpen een geluidselement toe te voegen aan zijn landschapsschilderijen.

Salmon maakt etherische, humeurige abstracties van skylines en bergen, geïnspireerd door de ruige hooglanden in zijn land en naarmate zijn gezichtsvermogen is verminderd door diabetische retinopathie, heeft hij geleerd hoe hij verf in textuur kan breken en pastelkrijt kan krassen voor krabbels om minder een afbeelding van een plaats op te roepen en meer een exquise ervaring van het wild.

Met de hulp van Microsoft heeft hij een installatie gelanceerd die geluid gebruikt om zijn kunst nog meer te verrijken, met proxemic audio om tweedimensionale beelden te interpreteren.

Het wordt 'The Oregon Project' genoemd en gebruikt vier Kinects, 15 overheadspeakers en 54 soundtracks om een ​​akoestische en ruimtelijke interpretatie te produceren van drie tekeningen die Salmon maakte van het prachtig afgelegen Hells Canyon-gebied in Oregon.

Voor elke tekening is een 3D-ruimte met 18 soundtracks die kunnen worden afgespeeld. De Kinects volgen beweging om verschillende geluiden te triggeren, waardoor de kunst levendig en interactief wordt voor mensen met en zonder visie. Van ver kunnen waarnemers vogelgezang, stromend water en gras dat in de wind ruist, horen - opgenomen in Hells Canyon door Salmon en zijn medewerkers.

Als u dichterbij komt, worden digitale tonen geactiveerd die passen bij het palet van blauw, groen, bruin en oker van Salmon. Ga nog dichterbij staan ​​en je kunt Salmon in zijn studio horen werken terwijl hij pastelkrijt op papier krabbelt, een ervaring die vergelijkbaar is met hoe een ziende persoon details kan zien wanneer hij naar voren leunt. De Kinects volgen ook handgolven om te veranderen wat je hoort, waardoor waarnemers worden deel van het stuk en maken hun eigen akoestische mixen met beweging. Bij de tentoonstelling activeerden volwassenen geluiden voornamelijk door te lopen, terwijl kinderen sprongen en met hun armen zwaaiden om een ​​andere mix van geluid te produceren.

"Als een manier om van een buitenste naar binnenste laag naar de tekeningen te gaan, werken natuurlijke geluiden naar industriële geluiden heel goed", zegt Salmon. "Het heeft een prachtig, sfeervol, ruimtelijk, landschappelijk gevoel dat het geheel bij elkaar brengt."

Veel musea bieden ervaringen voor mensen met een visuele beperking, van gedetailleerde audiobeschrijvingen van kunst tot speciale evenementen waar mensen sculpturen kunnen aanraken met gehandschoende handen. Maar de onderzoekers wilden een meer persoonlijke ervaring creëren die nog steeds gemeenschappelijk was, en iets minder geregisseerd en samengesteld door docenten.

"Het zou geweldig zijn om te bedenken dat je over een paar jaar naar een nationaal museum of kunstgalerie zou kunnen gaan en deze technologie daar zou zijn als onderdeel van de ervaring", zegt Salmon.

De installatie ging in première in Seattle tijdens de 9e2-tentoonstelling van kunst en technologie als een krachtige nieuwe manier voor Salmon om te creëren en voor mensen met een slecht gezichtsvermogen om visuele kunst te ervaren en ervan te genieten. Het "Oregon Project" zal in april 2017 te zien zijn in de Tent Gallery van het Edinburgh College of Art in Schotland.

Lees meer over het werk bij Microsoft hier.