基于预分类处理的实时多手势识别算法

作者：黎明聪; 吴逸畅; 张锡斌; 曾志远; 王嘉辉

来源：液晶与显示, 2017, 32(04): 308-315.

• 计算机视觉
• 手势分割
• 预分类识别
• 傅里叶描述子
• 神经网络

为了改善常见的背景模型在手势分割易受环境因素影响的缺点,以及提高基于傅里叶描述子的神经网络对大量手势分类的识别率,本文提出一种采用预分类的综合手势识别算法。首先,分割部分使用背景差分检测出手部,同时利用手分类器对手部识别手掌位置,获取感兴趣区域,同时对手和背景分别进行掩膜更新,进入下一循环,具有较高的分割效果。接着,利用指尖检测和傅里叶描述子对区域进行特征提取。识别过程先根据指尖数目及实现功能进行预分类,再利用神经网络对傅里叶特征系数进行实时的识别并返回识别结果。最后,进行与直接的傅里叶系数的识别比较及复杂背景下与传统背景差分方法识别率比较,结果表明该算法普通手势比直接分类平均识别率高4.162%,易误检手势识别率提高最高达91.7%;复杂背景下性能也有较大改善。鲁棒性较强,可以容纳大量手势定义,满足人机交互的要求。

• 单位
  光电材料与技术国家重点实验室; 中山大学