AR 和 VR 领域的进展：新款腕部摄像头

增强现实（AR）和虚拟现实（VR）又向前迈出了一步，推出了新的腕戴设备，用于 3D 手势估计。该设备由东京工业大学（Tokyo Tech）的研究人员与卡内基梅隆大学、圣安德鲁斯大学和新南威尔士大学的团队共同开发。

新系统的主要特点是一款可以在手背上拍摄图像的摄像头。它通过使用名为 DorsalNet 的神经网络来实现这一功能。神经网络可以识别动态手势。

AR 和 VR 设备的使用越来越广泛，尤其是在医疗、体育和娱乐等行业。这种新发展将有助于让行业摆脱目前依赖的笨重方法，例如大手套，它们使自然运动变得困难。

3D 手势识别系统

研究团队由东京工业大学的 Hideki Koike 领导。

根据研究人员的说法，“这项工作是第一个使用手背视觉特征的基于视觉的实时 3D 手势估计器。该系统由一款名为 DorsalNet 的神经网络支持的摄像头组成，可以通过检测手背的变化来准确估计 3D 手势。”

该设备具有摄像头，佩戴在腕部，作为 3D 手势识别系统。该设备最重要的方面是，它可以捕捉手部运动，即使环境和设备本身正在移动。

准确性和初步测试

研究表明，新开发的系统比以前的尝试更好。具体来说，它在识别动态手势方面平均准确率提高了 20%。在识别 11 种不同的握持类型时，其准确率为 75%。

初步测试表明，该系统可用于智能设备控制。这些应用包括更改智能手表的时间，只需改变手指角度。另外，研究人员展示了它如何作为虚拟鼠标或键盘，允许手腕旋转控制指针。

根据研究人员的说法，为了使该系统在现实世界中使用，还需要进行更多改进。例如，他们需要使用更先进的摄像头，具有更高的帧率，以捕捉更快的腕部运动，以及处理各种不同的光照条件。

该研究将在 2020 年 10 月 20-23 日举行的第 33 届 ACM 用户界面软件和技术研讨会（UIST）上进行展示。