微软利用社区的力量来改进手语识别研究

每天有超过 360 亿患有严重听力损失的人使用手语。 由于大多数听力正常的人不懂手语，他们无法与听力损失者进行实时的、不书面的交流。 为了解决这个问题，微软研究院于 2012 年 XNUMX 月与中国科学院 (CAS) 和北京联合大学合作启动了 Kinect 手语项目。 他们开发了一种名为 Kinect 手语翻译器的工具，该工具通过将手语转换为计算机说出的单词并同时将口语转换为化身呈现的手语，从而实现手语和非手语参与者之间的实时对话。

现在，他们最近开始 Kinect 手语工作组 社区推进手语识别研究。

作为第一步，我们向学术界开放了 DEVISIGN 中国手语数据库。 由编 视觉信息处理与学习 计算技术研究所（VIPL）小组，在微软亚洲研究院的赞助下，基于来自4,400名手语者（331,050名男性和30名女性）的13条词汇数据，DEVISIGN涵盖了约17个标准中文手语单词。 词汇数据包括RGB视频（AVI格式），深度和骨架信息（BIN格式）。 因此，DEVISIGN 为手语研究人员提供了丰富的数据存储，用于训练和评估他们的算法以及创建最先进的实际应用程序，例如用于训练系统以适应未知签名者的解决方案。

从下面的链接中了解更多信息。

Sumber: MSR