Новый Kinect может легко читать человеческий язык жестов
2 минута. читать
Опубликовано
Поделиться этой статьей
Улучшите это руководство
Прочтите нашу страницу раскрытия информации, чтобы узнать, как вы можете помочь MSPoweruser поддержать редакционную команду. Читать далее
Microsoft Kinect производит настоящую революцию в области естественного пользовательского интерфейса. Недорогая 3D-камера глубины, такая как Kinect, открывает безграничные возможности в нашем компьютерном мире. Язык жестов является основным языком для многих глухих и слабослышащих людей, но в настоящее время эти люди не могут взаимодействовать с компьютерами на своем родном языке. Microsoft Research Asia разработала систему, использующую Kinect, которая может определять языки жестов, используемые этими людьми, и она работает хорошо.
Вот немного информации о проекте,
Kinect с его способностью одновременно предоставлять информацию о глубине и цвете позволяет более точно и быстро отслеживать действия рук и тела.
В этом проекте, который демонстрируется во время ДемоФест часть Факультетский саммит 2013, которая собирает более 400 ученых-исследователей в штаб-квартире Microsoft, чтобы поделиться своими мыслями о важных исследованиях — отслеживание рук приводит к процессу трехмерного выравнивания траектории движения и сопоставления отдельных слов на языке жестов. Слова генерируются с помощью отслеживания рук Kinect для Windows программного обеспечения, а затем нормализуются, и вычисляются оценки совпадения для выявления наиболее подходящих кандидатов при анализе подписанного слова.
Алгоритм сопоставления трехмерных траекторий, в свою очередь, позволил создать систему распознавания и перевода жестового языка, состоящую из двух режимов. Первый, режим перевода, переводит язык жестов в текст или речь. В настоящее время технология поддерживает американский язык жестов, но потенциально может работать со всеми разновидностями языка жестов.
Второй, режим связи, позволяет общаться между слышащим человеком и глухим или слабослышащим человеком с помощью аватара. Руководствуясь вводом текста с клавиатуры, аватар может отображать соответствующее предложение на жестовом языке. Глухой или слабослышащий человек отвечает на языке жестов, а система преобразует этот ответ в текст.
Подробнее читайте по ссылке ниже.
Источник: Microsoft
