7月28日,ChinaJoy最重要的行业峰会之一——中国游戏开发者大会(CGDC)在上海拉开帷幕。作为移动VR行业的领军企业,暴风魔镜致力于打造精品的移动游戏,使用户能够随时随地沉浸到虚拟现实世界中。暴风魔镜产品技术负责人古鉴为此次大会带来了题为“移动VR中手势识别技术的开发和设计”的演讲,并提出移动VR的下一个核心为本能交互。
VR交互是个很大的命题。目前VR存在多种交互技术,包括头部追踪、手部和手臂追踪、眼球追踪、身体躯干追踪、脸部表情追踪与环境追踪等。然而,与硬件性能突出的PC VR相比,由于需要与手机联合使用,移动VR在交互技术上则受到了运算性能、功耗、传感器、成本的诸多限制。
对于消费者来说,当前的交互形式体验主要集中在手柄互动,但暴风魔镜产品技术负责人古鉴认为,手柄互动不能取代手部自然互动体验。手柄不能像人的手部那样自然感应,接受光学、磁力、超声波、机械等追踪反应。手势可以弥补手柄交互不自然,携带不方面等问题。长远来看,符合人体本能习惯的交互方式,例如手势识别,将成为VR控制中的终极形式。
虽然手势识别符合人的本能直觉互动,但是却是应用程度最低的方式之一。究其原因,基于机器视觉的手势识别的技术较为复杂,直到近期才出现技术突破。在手势识别的实现途径中,近两年内的核心技术难点包括如何减少手势算法的运算量降低CPU的占用率,如何选择性价比高的摄像头传感器并保持算法的稳定度,如何降低手势算法在显示上面的延迟,如何实现手势姿态在手部被遮挡情况下的预估,在基于数据驱动的手势算法上如何获得大量数据的支撑以及数据的准确程度,如何解决视觉基点漂移的问题等。由此产生复杂的计算量都需要有优秀算法的支持。
尽管手势识别距离精准快速的识别还有一定的距离,但古鉴认为,手势识别将成为移动VR交互的未来。因此,全球首款支持手势识别的VR眼镜暴风魔镜5Plus采用了领先的手势识别技术,集成了LED及摄像头,可以实时追踪手部22个关键点,26个自由度,并基于移动VR设备进行了优化,背景抗干扰性强,与PC相比功耗更低,支持市面上主流手机型号。暴风魔镜相信,VR的下一重要核心必定是包括手势识别在内的本能交互。