Исследование показывает, как HoloLens может служить глазами для слепых пользователей (видео)
2 минута. читать
Опубликовано
Поделиться этой статьей
Улучшите это руководство
Прочтите нашу страницу раскрытия информации, чтобы узнать, как вы можете помочь MSPoweruser поддержать редакционную команду. Читать далее
Исследователи из Калифорнийского технологического института и Университета Южной Калифорнии опубликовали новый исследовательский документ, в котором обсуждаются возможности использования Microsoft HoloLens в качестве глаз для слепых.
Чтобы восстановить зрение слепых людей, были изучены некоторые подходы к передаче необработанных изображений в мозг. Эти подходы не были эффективными из-за требований к пропускной способности и длительной подготовки, необходимой для интерпретации необычных стимулов. В этой новой исследовательской работе исследователи предложили альтернативный подход. Вместо того, чтобы пытаться передать все сенсорные данные в мозг, их новый подход восстанавливает зрение на когнитивном уровне.
Для этого они используют Microsoft HoloLens. Как вы все знаете, HoloLens может распознавать среду вокруг своего пользователя, знает положение пользователя в среде, а также может захватывать видео и другие данные для подробного изучения сцены. Исследователи используют эти данные и передают их слепым людям через слуховую дополненную реальность.
Эта система поддерживает многие аспекты визуального познания: от избегания препятствий до формирования и воспроизведения пространственных воспоминаний и навигации на большие расстояния. Не требуется ни обучения, ни изменения физической среды: слепые субъекты могут перемещаться по незнакомому многоэтажному зданию с первой попытки. Сочетание беспрецедентной вычислительной мощности носимых устройств с технологией дополненной реальности обещает новую эру неинвазивных протезов, которые ограничены только программным обеспечением.
Там исследователи также опробовали свою систему на реальных слепых людях. Они обнаружили, что слепые пользователи могут надежно находить объекты и указывать на них по звуковым сигналам. Например, они смогли найти стул в комнате за гораздо меньшее время, чем обычно. Вы можете прочитать полный текст исследования здесь и посмотрите технологию в действии в видео ниже.
Via: Techcrunch
