微软研究人员正在研究用于精确跟踪手部运动的系统

运动跟踪对微软来说并不是什么新鲜事，我们已经看到了他们在微软 Kinect 等商业产品方面的专业知识。 微软研究院的计算机视觉团队现在正在研究详细手部跟踪的最新进展。 他们创建了一个系统，可以流畅、快速、准确地实时追踪手部，但可以在普通消费类设备上运行。 该系统可与虚拟现实应用程序一起使用。

该系统目前仍是一个研究项目，可以使用或不使用虚拟现实耳机跟踪详细的手部动作，允许用户戳一个柔软的填充兔子，转动旋钮或移动表盘。

更重要的是，该系统可以让你看到你的手在做什么，修复了当人们与虚拟现实交互但看不到自己的手时发生的常见且令人困惑的断开连接。

HoloLens 已经包含 手势支持 它允许用户与全息图进行交互。 希望 MSR 的这个新项目能够进一步改善 HoloLens 中的手势输入体验。

项目摘要：

完全铰接的手部跟踪有望实现与虚拟和增强世界的全新交互，但当前系统的有限准确性和效率阻碍了广泛采用。 今天的主导范式使用机器学习进行初始化和恢复，然后使用迭代模型拟合优化来实现详细的姿态拟合。 我们遵循这种范式，但对模型拟合进行了一些更改，即使用：（1）更具辨别力的目标函数； (2) 为非线性优化提供梯度的光滑表面模型； (3) 对模型位姿和观测数据点与模型表面的对应关系进行联合优化。 虽然这些变化中的每一个实际上都可能增加每次拟合迭代的成本，但我们发现迭代次数的减少是补偿性的。 此外，广泛的收敛范围意味着成功的模型拟合所需的起点更少。 我们的系统仅在 CPU 上实时运行，这为体验设计师释放了通常负担过重的 GPU。 手部跟踪器的效率足以在平板电脑等低功耗设备上运行。 即使使用来自当前一代深度相机的嘈杂数据，我们也可以跟踪距相机几米的距离，以提供较大的交互工作量。 对标准数据集的定量评估表明，新方法的准确性超过了现有技术。 定性结果采用这种新方法实现的一系列互动体验的现场录制形式。

阅读更多相关信息 项目在这里。