מיקרוסופט עוזרת לאמן עיוור להוסיף נופי סאונד לנופים שלו

מיקרוסופט סייעה לאמן הנוף הסקוטי הידוע מבחינה משפטית, קית' סלמון, להוסיף אלמנט קולי לציורי הנוף שלו.

סלמון יוצר תקצירים ערכיים ומלאי מצב רוח של קווי רקיע והרים בהשראת הרמות הקשוחות בארצו, וכאשר ראייתו פחתה באמצעות רטינופתיה סוכרתית, הוא למד כיצד לרסק צבע למרקם ולגרד פסטלים לשרבוטים כדי לעורר פחות תיאור של המקום ועוד. חוויה נהדרת בטבע.

בעזרתה של מיקרוסופט הוא הציג לראשונה מיצב המשתמש בסאונד כדי להעשיר את האמנות שלו עוד יותר, עם אודיו פרוקסמי לפירוש תמונות דו-ממדיות.

המכונה "פרויקט אורגון", הוא משתמש בארבעה קינקטים, 15 רמקולים עיליים ו-54 פסקולים כדי לייצר פרשנות אקוסטית ומרחבית לשלושה ציורים שסלמון עשה של אזור הלס קניון המרוחק להפליא באורגון.

לפני כל ציור חלל תלת מימדי המכיל 3 פסקולים שניתן להשמיע. ה-Kinects עוקבים אחר תנועה כדי להפעיל צלילים שונים, מה שהופך את האמנות לתוססת ואינטראקטיבית עבור אנשים עם ובלי חזון. מרחוק, הצופים יכולים לשמוע שירת ציפורים, מים שוצפים ועשב מתנדנד ברוח - שהוקלט בקניון הלס על ידי סלמון ומשתפי הפעולה שלו.

התקרבות מפעילה גוונים דיגיטליים המותאמים ללוח הצבעים של סלמון של כחול, ירוק, חום ואוקר. תעמוד אפילו קרוב יותר ותוכל לשמוע את סלמון עובד בסטודיו שלו כשהוא משרבט פסטלים על נייר, בחוויה המקבילה לאופן שבו אדם רואה יכול לראות פרטים כשהוא רוכן פנימה. הקינקטים גם עוקבים אחר גלי ידיים כדי לשנות את מה שאתה שומע, ועוזר לצופים להפוך חלק מהיצירה ולעשות תערובות אקוסטיות משלהם עם תנועה. בתערוכה, מבוגרים הפעילו צלילים בעיקר בהליכה, בעוד ילדים קפצו ונופפו בזרועותיהם כדי להפיק תערובת שונה של רעש.

"כדרך לעבור משכבה חיצונית לפנימית לציורים, צלילים טבעיים לצלילים תעשייתיים עובדים ממש טוב", אומר סלמון. "יש לו תחושה נפלאה, אטמוספרית, מרווחת, נוף שמושכת את כל העניין ביחד."

מוזיאונים רבים מציעים חוויות לאנשים עם לקות ראייה, מתיאורי אודיו מפורטים של אמנות ועד לאירועים מיוחדים שבהם אנשים יכולים לגעת בפסלים עם ידיים כפפות. אבל החוקרים רצו ליצור חוויה אישית יותר שעדיין הייתה קהילתית, ומשהו שפחות מכוון ואוצר על ידי דוצנטים.

"יהיה נהדר לחשוב שבעוד כמה שנים אולי תלכו למוזיאון לאומי או לגלריה לאמנות והטכנולוגיה הזו תהיה שם כחלק מהחוויה", אומר סלמון.

המיצב הוצג לראשונה בסיאטל בתערוכת 9e2 של אמנות וטכנולוגיה כדרך חדשה ועוצמתית לסלמון ליצור ולאנשים עם ראייה לקויה לחוות וליהנות מאמנות חזותית. "פרויקט אורגון" יוצג בגלריית האוהל במכללת אדינבורו לאמנות בסקוטלנד באפריל 2017.

קרא עוד על העבודה ב- Microsoft כאן.