索尼展示原型VR控制器 可实时追踪用户的手和手指

来源：cnBeta.COM

索尼互动娱乐公司今天官方分享了一段视频，展示了一款可以追踪整个人类手部的原型控制器。这款控制器能够克服目前手势控制系统和传统控制器存在的诸多限制，能够在不破坏虚拟现实体验的情况下，实时追踪用户的手和手指。

这款全新手势追踪器使用机器学习和电容式传感器，突破了以往追踪器无法实现的地方。他们使用计算机视觉、成熟的方式与VR空间中的数字元素进行交互。在视频链接博文中表示：“我们引入了2.5D表示法，将卷积神经网络方法应用在曲面电容式图像上，并利用我们的数据集评估了两种基于计算机视觉领域最新成果的网络架构。”

为了创建这种新的控制器系统，他们使用62个单独的电极创建了一个原型。他们用光学跟踪系统记录了手部在游戏中一般使用光学跟踪系统的多种移动方式的训练数据集。这些系统结合在一起，使得手部跟踪和手部在游戏中的虚拟表示方式随着机器获得更多的信息而变得越来越好。

这篇论文的名称为 "Evaluation of Machine Learning Techniques for Hand Pose Estimation on Handheld Device with Proximity Sensor"，可以通过代码DOI：10.1145/3313831.3376712找到。本文作者为日本索尼互动娱乐公司的有松和之（Kazuyuki Arimatsu）和日本索尼互动娱乐公司的森秀树（Hideki Mori）。