新的 Kinect 可以轻松阅读人类手语
2分钟读
发表于
阅读我们的披露页面,了解如何帮助 MSPoweruser 维持编辑团队 查看更多
微软 Kinect 正在自然用户界面领域掀起一场革命。 像 Kinect 这样的低成本 3D 深度相机在我们的计算世界中开辟了无限可能。 手语是许多聋哑人和听障人士的主要语言,但目前这些人无法使用他们的母语与计算机进行交互。 微软亚洲研究院开发了一个使用 Kinect 的系统,可以检测这些人使用的手语,并且运行良好。
以下是该项目的一些信息,
Kinect 能够同时提供深度信息和颜色数据,可以更轻松、更准确、更快速地跟踪手部和身体动作。
在这个项目中——在 演示节 的一部分 2013年教师峰会,它将 400 多名学术研究人员带到微软总部,分享对有影响力的研究的见解——手部跟踪导致 3-D 运动轨迹对齐和匹配手语中的单个单词的过程。 单词是通过手动跟踪生成的 Windows 版 Kinect 软件,然后标准化,并计算匹配分数以在分析签名词时识别最相关的候选者。
反过来,这种 3D 轨迹匹配算法能够构建一个由两种模式组成的手语识别和翻译系统。 第一种是翻译模式,将手语翻译成文本或语音。 该技术目前支持美国手语,但对所有种类的手语都有潜力。
第二种,通信模式,通过使用化身,能够在听力正常的人与聋人或听力障碍者之间进行通信。 在键盘输入文本的引导下,虚拟形象可以显示相应的手语句子。 失聪或听力障碍的人使用手语做出回应,系统会将答案转换成文本。
从下面的链接阅读更多内容。
Sumber: 微软