Penelitian menunjukkan bagaimana HoloLens dapat bertindak sebagai mata bagi pengguna tunanetra (video)
2 menit Baca
Ditampilkan di
Bagikan artikel ini
Sempurnakan panduan ini
Baca halaman pengungkapan kami untuk mengetahui bagaimana Anda dapat membantu MSPoweruser mempertahankan tim editorial Baca lebih lanjut
Para peneliti dari Caltech dan University of Southern California telah menerbitkan makalah penelitian baru yang membahas bagaimana Microsoft HoloLens dapat bertindak sebagai mata bagi orang buta.
Untuk memulihkan penglihatan orang buta, beberapa pendekatan telah dieksplorasi untuk menyampaikan gambar mentah ke otak. Pendekatan ini tidak efektif karena kebutuhan bandwidth dan pelatihan ekstensif yang diperlukan untuk menginterpretasikan rangsangan yang tidak biasa. Dalam makalah penelitian baru ini, para peneliti telah mengusulkan pendekatan alternatif. Alih-alih mencoba menyampaikan seluruh data sensorik ke otak, pendekatan baru mereka mengembalikan penglihatan pada tingkat kognitif.
Mereka menggunakan Microsoft HoloLens untuk tujuan ini. Seperti yang Anda ketahui, HoloLens dapat mengenali lingkungan di sekitar penggunanya, mengetahui posisi pengguna di lingkungan tersebut dan juga dapat merekam video dan data lainnya untuk pengetahuan adegan yang terperinci. Para peneliti menggunakan data ini dan menyampaikannya kepada orang buta melalui augmented reality pendengaran.
Sistem ini mendukung banyak aspek kognisi visual: dari penghindaran rintangan hingga pembentukan dan pemanggilan kembali memori spasial, hingga navigasi jarak jauh. Pelatihan atau modifikasi lingkungan fisik tidak diperlukan: Subyek tunanetra dapat menavigasi gedung bertingkat yang tidak dikenal pada upaya pertama mereka. Kombinasi kekuatan komputasi yang belum pernah ada sebelumnya dalam perangkat yang dapat dikenakan dengan teknologi augmented reality menjanjikan era baru prostesis non-invasif yang hanya dibatasi oleh perangkat lunak.
Di sana peneliti juga mencoba sistem mereka dengan orang buta yang sebenarnya. Mereka menemukan bahwa pengguna tunanetra dapat dengan andal menemukan dan menunjuk ke objek dari isyarat audio. Misalnya, mereka dapat menemukan kursi di sebuah ruangan dalam waktu yang lebih singkat dari biasanya. Anda dapat membaca makalah penelitian lengkap di sini dan lihat teknologinya beraksi dalam video di bawah ini.
via: Techcrunch
