Araştırmalar, HoloLens'in görme engelli kullanıcılar için nasıl göz görevi görebileceğini gösteriyor (video)

Caltech ve Güney Kaliforniya Üniversitesi'nden araştırmacılar, Microsoft HoloLens'in kör insanlar için nasıl göz görevi görebileceğini tartışan yeni bir araştırma makalesi yayınladılar.

Kör insanların vizyonunu eski haline getirmek için, ham görüntüleri beyne iletmek için bazı yaklaşımlar araştırılmıştır. Bu yaklaşımlar, bant genişliği gereksinimleri ve olağandışı uyaranları yorumlamak için gereken kapsamlı eğitim nedeniyle etkili değildi. Bu yeni araştırma makalesinde, araştırmacılar alternatif bir yaklaşım önerdiler. Tüm duyusal verileri beyne aktarmaya çalışmak yerine, yeni yaklaşımları vizyonu bilişsel düzeyde geri yükler.

Bu amaçla Microsoft HoloLens kullanıyorlar. Hepinizin bildiği gibi HoloLens, kullanıcısının etrafındaki ortamı tanıyabilir, kullanıcının ortamdaki konumunu bilir ve ayrıntılı sahne bilgisi için video ve diğer verileri de yakalayabilir. Araştırmalar bu verileri kullanır ve işitsel artırılmış gerçeklik aracılığıyla kör insanlara iletir.

Bu sistem, görsel bilişin birçok yönünü destekler: engellerden kaçınmadan uzamsal anıların oluşturulmasına ve hatırlanmasına, uzun menzilli navigasyona kadar. Fiziksel çevrede ne eğitim ne de değişiklik gerekli: Kör denekler, ilk denemelerinde tanıdık olmayan çok katlı bir binada gezinebilirler. Giyilebilir cihazlarda benzeri görülmemiş bilgi işlem gücünün artırılmış gerçeklik teknolojisiyle birleşimi, yalnızca yazılımla sınırlı olan invaziv olmayan yeni bir protez çağını vaat ediyor.

Orada araştırmacılar, sistemlerini gerçek kör insanlarla da denediler. Görme engelli kullanıcıların sesli ipuçlarından nesneleri güvenilir bir şekilde bulup işaret edebildiklerini buldular. Örneğin, normalde buldukları zamandan çok daha kısa bir sürede bir odada bir sandalye bulabildiler. Araştırma makalesinin tamamını okuyabilirsiniz okuyun ve aşağıdaki videoda hareket halindeki teknolojiyi görün.

Via Techcrunch