使用视觉注意和多特征融合的手势检测与识别

摘要 手势检测和识别在手语识别和人机交互中具有广泛而重要的应用.提出一种新颖的手势检测和手势识别方法．该检测方法是基于视觉注意机制检测手势，其集成了多尺度全局区域颜色、纹理、运动和背景对比度，在此基础上融合了对象性度量先验．其次，使用显著性、轮廓、局部二进制模式和梯度特征表示手势，然后采用基于度量的空间加权相似性方法融合上述4种特征和空间坐标用于确定两张图像间的相似性．最后，使用RankingSupport Vector Machine分类器识别手势．本文设计了两个实验，一个是用于验证基于视觉注意的手势检测，另一个是用于手势识别．前者结果表明提出的手势检测方法能准确地的检测出手，能处理光照的变化和不均匀的光照．后者表明本文提出的手势识别方法优于线性和非线性方法，其识别率为96.84％，比线性和非线性回归方法分别高5.16％和2.53％