La recherche montre comment HoloLens peut servir d'yeux pour les utilisateurs aveugles (vidéo)

Des chercheurs de Caltech et de l'Université de Californie du Sud ont publié un nouveau document de recherche expliquant comment Microsoft HoloLens peut servir d'yeux pour les personnes aveugles.

Pour restaurer la vision des personnes aveugles, certaines approches ont été explorées pour transmettre des images brutes au cerveau. Ces approches n'étaient pas efficaces en raison des exigences de bande passante et de la formation approfondie requise pour interpréter les stimuli inhabituels. Dans ce nouveau document de recherche, les chercheurs ont proposé une approche alternative. Au lieu d'essayer de transmettre l'ensemble des données sensorielles au cerveau, leur nouvelle approche restaure la vision au niveau cognitif.

Ils utilisent Microsoft HoloLens à cette fin. Comme vous le savez tous, HoloLens peut reconnaître l'environnement autour de son utilisateur, connaître la position de l'utilisateur dans l'environnement et il peut également capturer des vidéos et d'autres données pour une connaissance détaillée de la scène. Les recherches utilisent ces données et les transmettent aux personnes aveugles grâce à la réalité augmentée auditive.

Ce système prend en charge de nombreux aspects de la cognition visuelle : de l'évitement d'obstacles à la formation et au rappel de mémoires spatiales, en passant par la navigation à longue distance. Ni formation ni modification de l'environnement physique ne sont nécessaires : les sujets aveugles peuvent naviguer dans un bâtiment à plusieurs étages inconnu dès leur première tentative. La combinaison d'une puissance de calcul sans précédent dans les appareils portables avec la technologie de réalité augmentée promet une nouvelle ère de prothèses non invasives qui ne sont limitées que par le logiciel.

Là, les chercheurs ont également essayé leur système avec de vrais aveugles. Ils ont constaté que les utilisateurs aveugles étaient capables de localiser et de pointer des objets de manière fiable à partir de signaux audio. Par exemple, ils ont pu trouver une chaise dans une pièce en une fraction du temps qu'ils auraient normalement. Vous pouvez lire le document de recherche complet ici et voyez la technologie en action dans la vidéo ci-dessous.

Via: Techcrunch