Microsoft pomaga niewidomym artystom dodawać pejzaże dźwiękowe do jego krajobrazów

Microsoft pomógł znanemu legalnie działającemu szkockiemu artyście krajobrazu Keithowi Salmonowi dodać element dźwiękowy do jego pejzaży.

Salmon tworzy eteryczne, nastrojowe abstrakcje panoram i gór, inspirowane surowymi wyżynami w jego kraju, a gdy jego wzrok pogorszył się z powodu retinopatii cukrzycowej, nauczył się, jak rozbijać farbę na fakturze i rysować pastele, aby tworzyć gryzmoły, które mniej przedstawiają miejsca, a więcej wykwintne przeżycie dzikiej przyrody.

Z pomocą Microsoftu zadebiutował instalacją, która wykorzystuje dźwięk, aby jeszcze bardziej wzbogacić jego sztukę, z dźwiękiem proksemicznym do interpretacji dwuwymiarowych obrazów.

Nazywany „Projektem Oregon”, wykorzystuje cztery Kinecty, 15 głośników górnych i 54 ścieżki dźwiękowe, aby stworzyć akustyczną i przestrzenną interpretację trzech rysunków, które Salmon wykonał z pięknie odległego obszaru Hells Canyon w stanie Oregon.

Przed każdym rysunkiem znajduje się przestrzeń 3D zawierająca 18 ścieżek dźwiękowych, które można odtworzyć. Kinects śledzą ruch, aby wywoływać różne dźwięki, dzięki czemu sztuka jest żywa i interaktywna dla osób z wizją i bez. Z daleka obserwatorzy słyszą śpiew ptaków, pędzącą wodę i szelest trawy na wietrze — nagrane w Hells Canyon przez Salmona i jego współpracowników.

Przysunięcie bliżej aktywuje cyfrowe odcienie dopasowane do palety Salmon błękitu, zieleni, brązu i ochry. Stań jeszcze bliżej, a usłyszysz Salmona pracującego w swoim studio, gdy kreśli pastelami na papierze, w doświadczeniu podobnym do tego, jak osoba widząca może widzieć szczegóły, gdy się do niej pochyla. części utworu i tworzą własne miksy akustyczne z ruchem. Na wystawie dorośli wyzwalali dźwięki głównie chodząc, podczas gdy dzieci skakały i machały rękami, aby wytworzyć inną mieszankę hałasu.

„Jako sposób na przejście od warstwy zewnętrznej do wewnętrznej do rysunków, naturalne dźwięki do dźwięków industrialnych działają naprawdę dobrze”, mówi Salmon. „Ma cudowne, klimatyczne, przestrzenne, krajobrazowe wrażenie, które łączy całość”.

Wiele muzeów oferuje doświadczenia dla osób z wadami wzroku, od szczegółowych audiodeskrypcji sztuki po specjalne wydarzenia, podczas których ludzie mogą dotykać rzeźb rękami w rękawiczkach. Ale badacze chcieli stworzyć bardziej spersonalizowane doświadczenie, które nadal byłoby wspólne i mniej kierowane i nadzorowane przez docentów.

„Wspaniale byłoby pomyśleć, że za kilka lat możesz pójść do muzeum narodowego lub galerii sztuki, a ta technologia będzie tam częścią doświadczenia” – mówi Salmon.

Instalacja miała swoją premierę w Seattle na wystawie sztuki i technologii 9e2 jako potężny nowy sposób dla Salmona na tworzenie i dla osób z wadami wzroku na doświadczanie i cieszenie się sztuką wizualną. Projekt „Oregon” zostanie zaprezentowany w Galerii Tent w Edinburgh College of Art w Szkocji w kwietniu 2017 roku.

Przeczytaj więcej o pracy w Microsoft tutaj.