使用视觉注意和多特征融合的手势检测与识别

手势检测和识别在手语识别和人机交互中具有广泛而重要的应用.提出一种新颖的手势检测和手势识别方法.该检测方法是基于视觉注意机制检测手势,其集成了多尺度全局区域颜色、纹理、运动和背景对比度,在此基础上融合了对象性度量先验.其次,使用显著性、轮廓、局部二进制模式和梯度特征表示手势,然后采用基于度量的空间加权相似性方法融合上述4种特征和空间坐标用于确定两张图像间的相似性.最后,使用Ranking-Support Vector Machine分类器识别手势.本文设计了两个实验,一个是用于验证基于视觉注意的手势检测,另一个是用于手势识别.前者结果表明提出的手势检测方法能准确地的检测出手,能处理光照的变化和不均匀的光照.后者表明本文提出的手势识别方法优于线性和非线性方法,其识别率为96.84%,比线性和非线性回归方法分别高5.16%和2.53%.