这款索尼proto VR控制器会随着你的使用而变得更智能

索尼互动娱乐公司(SonyInteractive Entertainment)共享的一段视频显示了一个原型控制器，它跟踪整个人的手。 该控制器是克服手势控制系统和传统控制器提出的限制的研究课题。 有了这个新系统，用户就可以利用他们的手和手指，而不会打破他们所有的数字都被实时跟踪的错觉。

这种全手跟踪使用机器学习和电容传感器打破以前的跟踪器失败的点。 这个控制器不会假装用户不会与手持工具交互-控制器是穿越VR宇宙的一个组成部分，在这个宇宙中，一个人仍然被困在家里有限的环境中。

相反，正如研究论文所建议的，他们正在使用计算机视觉和既定的方式和方法与虚拟现实空间中的数字元素交互。 “我们引入了2.5D表示来将卷积神经网络方法应用于曲面的电容图像，并利用我们的数据集对基于计算机视觉领域最近成就的两种类型的网络体系结构进行了评估，”论文说。

为了创建这个新的控制器系统，他们使用62个单独的电极创建了一个原型。 他们记录了训练数据集的许多方式，在游戏中，手通常移动使用光学跟踪系统。 这些系统结合在一起，允许手跟踪和虚拟表示手在游戏中增长更好，因为机器被提供更多的信息。

研究人员在论文中表示：“我们还使用原型实现了实时交互应用，并展示了在虚拟现实应用中使用手指进行直观交互的可能性。 上面你会看到一个演示视频由作者创建的论文，如下所示。