微軟利用社區的力量來改進手語識別研究

每天有超過 360 億患有嚴重聽力損失的人使用手語。 由於大多數聽力正常的人不懂手語，他們無法與聽力損失者進行實時的、不書面的交流。 為了解決這個問題，微軟研究院於 2012 年 XNUMX 月與中國科學院 (CAS) 和北京聯合大學合作啟動了 Kinect 手語項目。 他們開發了一種名為 Kinect 手語翻譯器的工具，該工具通過將手語轉換為計算機說出的單詞並同時將口語轉換為化身呈現的手語，從而實現手語和非手語參與者之間的實時對話。

現在，他們最近開始 Kinect 手語工作組 社區推進手語識別研究。

作為第一步，我們向學術界開放了 DEVISIGN 中國手語數據庫。 由編 視覺信息處理與學習 計算技術研究所（VIPL）小組，在微軟亞洲研究院的讚助下，基於來自4,400名手語者（331,050名男性和30名女性）的13條詞彙數據，DEVISIGN涵蓋了約17個標準中文手語單詞。 詞彙數據包括RGB視頻（AVI格式），深度和骨架信息（BIN格式）。 因此，DEVISIGN 為手語研究人員提供了豐富的數據存儲，用於訓練和評估他們的算法以及創建最先進的實際應用程序，例如用於訓練系統以適應未知簽名者的解決方案。

從下面的鏈接中了解更多信息。

資源： MSR