Nghiên cứu cho thấy cách HoloLens có thể hoạt động như mắt cho người dùng mù (video)

Các nhà nghiên cứu từ Caltech và Đại học Nam California đã xuất bản một bài báo nghiên cứu mới thảo luận về cách Microsoft HoloLens có thể hoạt động như mắt cho người mù.

Để khôi phục thị lực của người mù, một số phương pháp đã được khám phá để truyền tải hình ảnh thô đến não. Những cách tiếp cận này không hiệu quả vì các yêu cầu về băng thông và sự đào tạo rộng rãi cần thiết để giải thích các kích thích bất thường. Trong bài báo nghiên cứu mới này, các nhà nghiên cứu đã đề xuất một cách tiếp cận thay thế. Thay vì cố gắng truyền tải toàn bộ dữ liệu giác quan đến não, cách tiếp cận mới của họ khôi phục thị lực ở cấp độ nhận thức.

Họ đang sử dụng Microsoft HoloLens cho mục đích này. Như các bạn đã biết, HoloLens có thể nhận ra môi trường xung quanh người dùng, biết vị trí của người dùng trong môi trường và nó cũng có thể thu thập video và các dữ liệu khác để biết cảnh chi tiết. Các nghiên cứu sử dụng những dữ liệu này và chuyển tải chúng đến những người khiếm thị thông qua thực tế tăng cường thính giác.

Hệ thống này hỗ trợ nhiều khía cạnh của nhận thức trực quan: từ tránh chướng ngại vật đến hình thành và nhớ lại ký ức không gian, đến điều hướng tầm xa. Không cần đào tạo hay sửa đổi môi trường vật chất: Đối tượng mù có thể điều hướng một tòa nhà nhiều tầng lạ lẫm trong lần thử đầu tiên. Sự kết hợp của sức mạnh tính toán chưa từng có trong các thiết bị đeo được với công nghệ thực tế tăng cường hứa hẹn một kỷ nguyên mới của bộ phận giả không xâm lấn chỉ bị giới hạn bởi phần mềm.

Ở đó, các nhà nghiên cứu cũng đã thử hệ thống của họ với những người mù thực tế. Họ phát hiện ra rằng những người dùng khiếm thị có thể xác định vị trí và trỏ đến các đối tượng một cách đáng tin cậy từ các tín hiệu âm thanh. Ví dụ, họ có thể tìm thấy một chiếc ghế trong phòng chỉ bằng một phần nhỏ thời gian so với bình thường. Bạn có thể đọc toàn bộ tài liệu nghiên cứu tại đây và xem công nghệ đang hoạt động trong video bên dưới.

Via: Techcrunch