新技术有望实现科幻电影场景:用手势就可隔空操作 虚拟现实交互再进一步

虚拟现实技术日新月异,在人机交互方式上不断探索并突破传统界限,为我们带来了更优的使用体验。

新研究利用神经网络为虚拟现实系统添加了手势识别功能。这在一定程度上实现了科幻电影中人们通过空间的手势直接操作机器的“超能力”场景。用户只需简单地根据需求执行不同的手势,就可以直观地在虚拟环境中访问和操作各种工具,这大大提高了工作效率。

随着虚拟现实技术的蓬勃发展,必将不断丰富人机交互方式,为用户提供更人性化便利的使用体验。

剑桥大学的研究人员开发了一种虚拟现实技术，可以仅用手势就能打开和控制一系列3D建模工具。这项研究的结果发表在《IEEE交互式视觉和计算机图形学》期刊上。

就是我们在科幻片里面经常看到的那种在隔空在空间直接拆解一个机器，划一下手势就能展开所有机器零部件的场景。

研究人员表示，这是第一次将这种“超人”能力变为可能。

这项名为“HotGestures”的技术类似于许多桌面应用中使用的热键。HotGestures允许用户在虚拟现实中构建图形和形状，而无需与菜单交互，帮助他们专注于任务，不会打断他们的思路。

工作原理和技术细节：

研究团队构建了一个神经网络手势识别系统，该系统能够通过对传入的手部关节数据流进行预测来识别手势。

系统被设计为能够识别与构建3D模型相关的十种不同手势：笔、立方体、圆柱体、球体、调色板、喷雾器、剪切、缩放、复制和删除。

例如，执行剪切动作可以打开剪刀工具，喷雾动作可以打开喷漆工具。用户无需打开菜单来寻找他们需要的工具，也不需要记住特定的快捷方式。用户可以通过在任务中执行不同的手势来无缝切换不同的工具，无需暂停工作浏览菜单或按控制器或键盘上的按钮。

研究团队进行了两项小型研究，参与者使用HotGestures、菜单命令或两者的结合。基于手势的技术为工具选择和使用提供了快速有效的快捷方式。

HotGestures具有鲜明性、速度快且易于使用，同时也补充了传统的基于菜单的交互。研究人员设计了系统，以确保没有误激活——基于手势的系统能够正确识别什么是命令，什么是正常的手部移动。总体而言，基于手势的系统比基于菜单的系统更快。

研究人员已经公开了源代码和数据集，以便VR应用程序的设计者可以将其整合到他们的产品中。