VR又出手部捕捉技术 究竟怎么做到无设备捕捉?(2)



研究人员将这款系统叫做DeepHand,有类似于Leap Motion的深度手势识别基础功能,通过摄像头读写到多种角度和多种方式的手势变换以及深度学习网络开发的特定算法,可以快速的扫描数据库中超过250万的手势,并匹配出最精确的手势动作,将其在VR环境中呈现出来。



为了确保虚拟手势运动能够快速反应,研发项目通过判断数据库中手势动作的数字位置推算出其邻近的数字位置,进而预测手势变化的可能性。通过的定位“邻近区域”,这套算法还能够计算,显示摄像头中无法直接显示的手势运动。


这是深度学习网络中,研究人员首次使用DeepHand识别手势,并将其反馈到数据库中,虽然运行这些数据需要强大的计算处理能力,但是在一台普通电脑上使用这套系统也是可能的。