Microsoft aiuta l'artista cieco ad aggiungere paesaggi sonori ai suoi paesaggi

Microsoft ha aiutato il noto paesaggista scozzese Keith Salmon ad aggiungere un elemento sonoro ai suoi dipinti di paesaggi.

Salmon crea astratti eterei e lunatici di skyline e montagne ispirati agli aspri altopiani del suo paese e poiché la sua vista è diminuita a causa della retinopatia diabetica ha imparato a spaccare la vernice nella trama e graffiare i pastelli per scarabocchi per evocare meno una rappresentazione del luogo e altro una squisita esperienza della natura selvaggia.

Con l'aiuto di Microsoft ha debuttato con un'installazione che utilizza il suono per arricchire ancora di più la sua arte, con audio prossemico per interpretare immagini bidimensionali.

Chiamato "The Oregon Project", utilizza quattro Kinect, 15 altoparlanti da soffitto e 54 colonne sonore per produrre un'interpretazione acustica e spaziale di tre disegni che Salmon ha fatto della meravigliosamente remota area dell'Hells Canyon in Oregon.

Davanti a ogni disegno c'è uno spazio 3D contenente 18 colonne sonore che possono essere riprodotte. I Kinect tracciano il movimento per attivare suoni diversi, rendendo l'arte vivace e interattiva per le persone con e senza vista. Da lontano, gli osservatori possono sentire il canto degli uccelli, l'acqua scrosciante e l'erba che fruscia nel vento, registrato a Hells Canyon da Salmon e dai suoi collaboratori.

Avvicinandosi si attivano i toni digitali abbinati alla tavolozza di Salmon di blu, verde, marrone e ocra. Avvicinati ancora di più e puoi sentire Salmon lavorare nel suo studio mentre scarabocchi pastelli su carta, in un'esperienza che è parallela al modo in cui una persona vedente può vedere i dettagli quando si avvicina. I Kinect tracciano anche le onde della mano per cambiare ciò che senti, aiutando gli osservatori a diventare parte del pezzo e creano i propri mix acustici con il movimento. Alla mostra, gli adulti attivavano i suoni principalmente camminando, mentre i bambini saltavano e agitavano le braccia per produrre una diversa miscela di rumore.

"Per passare da uno strato esterno a uno interno ai disegni, i suoni naturali e i suoni industriali funzionano davvero bene", afferma Salmon. "Ha una sensazione meravigliosa, suggestiva, spaziale e paesaggistica che unisce il tutto."

Molti musei offrono esperienze per persone con disabilità visive, da descrizioni audio dettagliate dell'arte a eventi speciali in cui le persone possono toccare le sculture con i guanti. Ma i ricercatori volevano creare un'esperienza più personalizzata che fosse ancora comunitaria e qualcosa di meno diretto e curato dai docenti.

"Sarebbe bello pensare che tra qualche anno potresti andare in un museo nazionale o in una galleria d'arte e questa tecnologia sarebbe lì come parte dell'esperienza", afferma Salmon.

L'installazione è stata presentata in anteprima a Seattle alla mostra 9e2 di arte e tecnologia come un nuovo modo potente per Salmon di creare e per le persone ipovedenti di sperimentare e godersi l'arte visiva. Il "Progetto Oregon" sarà in mostra presso la Tent Gallery presso l'Edinburgh College of Art in Scozia nell'aprile del 2017.

Leggi di più sul lavoro a Microsoft qui.