uSens 凌感发布单目RGB相机上的三维手势骨骼识别( 二 )

总部位于杭州\t的\tuSens凌感科技一直致力于手势识别的研发和迭代 , 其提供的手势识别技术在AR、VR业界已经有一定知名度 。 但前几年凌感的手势识别主要是使用双目红外和深度相机上实现的三维骨骼识别 , 应用在头显和汽车等一些智能硬件上 。

最近凌感公司发布了可以运行在单目彩色摄像头上的三维骨骼手势跟踪识别 , 可识别手部全部22个关节点的26DOF(26自由度)信息 , 关节点包括3D位置信息和3D旋转信息 。

这一技术的亮点在哪里呢?本文将对此一一介绍 。

相机(摄像头模组)的种类很多 , 双目红外相机(uSens Fingo Leap Motion)、双目彩色、TOF相机(厂家很多)、结构光相机、单目红外相机、普通RGB彩色相机等 。 其中 , 普通彩色相机是成本最低、使用最广泛的一种 , 已经内置于所有的手机、绝大部分AR&MR Glass里以及一部分VR HMD中 。

可惜彩色相机的手势算法最难实现 , 因为复杂的背景混淆 , 各种光照条件 , 不同的肤色等等 , 单个彩色RGB相机只获取2D图像 , 提取3D信息非常困难 , 无法直接提供深度信息 , 所以很难做出三维的识别和跟踪 。

推荐阅读