新的 Kinect 可以輕鬆閱讀人類手語
2分鐘讀
發表於
請閱讀我們的揭露頁面,了解如何幫助 MSPoweruser 維持編輯團隊的發展 阅读更多
微軟 Kinect 正在自然用戶界面領域掀起一場革命。 像 Kinect 這樣的低成本 3D 深度相機在我們的計算世界中開闢了無限可能。 手語是許多聾啞人和聽障人士的主要語言,但目前這些人無法使用他們的母語與計算機進行交互。 微軟亞洲研究院開發了一個使用 Kinect 的系統,可以檢測這些人使用的手語,並且運行良好。
以下是該項目的一些信息,
Kinect 能夠同時提供深度信息和顏色數據,可以更輕鬆、更準確、更快速地跟踪手部和身體動作。
在這個項目中——在 演示節 的一部分 2013年教師峰會,它將 400 多名學術研究人員帶到微軟總部,分享對有影響力的研究的見解——手部跟踪導致 3-D 運動軌跡對齊和匹配手語中的單個單詞的過程。 單詞是通過手動跟踪生成的 適用於 Windows 的 Kinect 軟件,然後標準化,併計算匹配分數以在分析簽名詞時識別最相關的候選者。
反過來,這種 3D 軌跡匹配算法能夠構建一個由兩種模式組成的手語識別和翻譯系統。 第一種是翻譯模式,將手語翻譯成文本或語音。 該技術目前支持美國手語,但對所有種類的手語都有潛力。
第二種,通信模式,通過使用化身,能夠在聽力正常的人與失聰或聽力障礙的人之間進行通信。 在鍵盤輸入文本的引導下,虛擬形象可以顯示相應的手語句子。 失聰或聽力障礙的人使用手語做出回應,系統會將答案轉換成文本。
從下面的鏈接閱讀更多內容。
資源: Microsoft微軟