Microsoft ajuda artista cego a adicionar paisagens sonoras às suas paisagens

A Microsoft ajudou o conhecido paisagista escocês Keith Salmon a adicionar um elemento sonoro às suas pinturas de paisagens.

Salmon cria abstratos etéreos e sombrios de horizontes e montanhas inspirados nas terras altas escarpadas de seu país e, à medida que sua visão diminuiu devido à retinopatia diabética, ele aprendeu a esmagar tinta em textura e riscar pastéis para rabiscos para evocar menos uma representação de lugar e mais uma experiência requintada da natureza.

Com a ajuda da Microsoft, ele estreou uma instalação que usa o som para enriquecer ainda mais sua arte, com áudio proxêmico para interpretar imagens bidimensionais.

Chamado de “The Oregon Project”, ele usa quatro Kinects, 15 alto-falantes suspensos e 54 trilhas sonoras para produzir uma interpretação acústica e espacial de três desenhos que Salmon fez da área lindamente remota de Hells Canyon em Oregon.

Na frente de cada desenho há um espaço 3D contendo 18 trilhas sonoras que podem ser reproduzidas. O Kinects acompanha o movimento para acionar diferentes sons, tornando a arte viva e interativa para pessoas com e sem visão. De longe, os observadores podem ouvir o canto dos pássaros, a água correndo e a grama balançando ao vento – gravado em Hells Canyon por Salmon e seus colaboradores.

Aproximar-se ativa tons digitais combinados com a paleta de azul, verde, marrom e ocre de Salmon. Fique ainda mais perto e você pode ouvir Salmon trabalhando em seu estúdio enquanto ele rabisca pastéis no papel, em uma experiência que se assemelha a como uma pessoa com visão pode ver detalhes quando se inclina. parte da peça e fazem suas próprias mixagens acústicas com movimento. Na exposição, os adultos acionavam sons principalmente ao caminhar, enquanto as crianças pulavam e balançavam os braços para produzir uma mistura diferente de ruído.

“Como uma maneira de passar de uma camada externa para uma camada interna para os desenhos, sons naturais para sons industriais funcionam muito bem”, diz Salmon. “Tem uma sensação maravilhosa, atmosférica, espacial e de paisagem que une a coisa toda.”

Muitos museus oferecem experiências para pessoas com deficiência visual, desde descrições detalhadas em áudio de arte até eventos especiais onde as pessoas podem tocar esculturas com as mãos enluvadas. Mas os pesquisadores queriam criar uma experiência mais personalizada que ainda fosse comunitária e algo menos dirigido e curado por docentes.

“Seria ótimo pensar que, em alguns anos, você poderia ir a um museu ou galeria de arte nacional e essa tecnologia estaria lá como parte da experiência”, diz Salmon.

A instalação estreou em Seattle na exposição de arte e tecnologia 9e2 como uma nova maneira poderosa para Salmon criar e para pessoas com baixa visão experimentar e desfrutar de arte visual. O “Oregon Project” estará em exibição na Tent Gallery no Edinburgh College of Art, na Escócia, em abril de 2017.

Leia mais sobre o trabalho na Microsoft aqui.