基于多特征融合的静态手势识别方法研究

来源 :浙江理工大学 | 被引量 : 2次 | 上传用户:fanhaoguohuifang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统的手势识别方法依靠人工设计复杂的特征提取算法进行图像的特征提取,该方法对手势图像的采集设备、背景及人的手势动作要求较高。基于卷积神经网络的图像特征提取可以直接将整张图像作为网络的输入,输入图像通过网络内部的卷积层提取深层次特征,提取的特征能够更全面地描述手势图像的信息。但是基于单一卷积神经网络的特征提取方法可能存在手势图像特征遗漏问题,只能提取手势图像的深层次特征,忽略了低层次特征(局部特征)在手势识别中的作用。为了解决以上问题,本文研究了基于双通道卷积神经网络的特征提取方法,然后提出了基于多特征融合的静态手势识别方法。完成的主要研究工作如下:(1)为了解决多肤色手势图像的分割问题,提出了一种综合多要素的手势图像分割方法。采用YCbCr颜色模型对手势图像进行初步分割。利用中值滤波和漫水填充对初分割后的手势图像进行去噪。利用基于最大连通域和质心位置的方法来排除背景中的类肤色区域及除手部区域以外的肤色区域,获得只包含手部区域的二值图像,用于后续手势图像的局部特征提取。(2)对于单一卷积神经网络提取手势图像特征信息不充分的问题,提出了基于双通道卷积神经网络的手势特征提取方法。在用于特征提取的VGG网络中添加了批量归一化(BN)层。为了减少网络模型的计算量,将手势的灰度图像作为双通道卷积神经网络的输入,采用优化VGG网络和AlexNet网络分别对输入的图像进行深层次特征提取。(3)针对人工提取特征的单一性及卷积神经网络提取特征的特征遗漏性问题,提出了一种基于多特征融合的静态手势识别方法。对分割后的图像进行局部特征提取,包括傅里叶描述子特征和Hu矩特征。利用双通道卷积神经网络对手势灰度图像进行深层次特征提取。最后将提取的局部特征和深层次特征进行串联融合,利用Softmax分类器输入的特征进行识别。
其他文献
静止同步补偿器[1](STATCOM)作为一种新兴的柔性装置,具有灵活快速可平滑调控的优点。研究表明,STATCOM可用于抑制电力系统的次同步振荡[2],因此如何合理有效地控制STATCOM快速
大规模多输入多输出(MIMO)技术作为第五代移动通信的关键技术之一,已被证明能在不增加带宽的情况下提升系统的容量和可靠性。预编码技术可以有效抑制用户间干扰、码间干扰、
从单个多图中挖掘频繁模式现已经成为研究热点,如社交网络中,两个人之间可能有诸如Facebook、Twitter和LinkedIn等多个关系,挖掘社交网络多图中的频繁子图对发现社会互动机制
极化码于2009年由Arian教授所提出。凭借基于信道极化现象的特殊编码方式,极化码成为了一种被理论证明可达香浓极限的信道编码方案,吸引了信道编码领域专家的关注。在专家们
在无线网络中,将一个共同的信息同时传递给多个用户,多播技术在其中扮演了一个十分重要的角色。多播波束成形技术能够通过利用基站(BS)端的信道状态信息(CSI)进一步提升系统
乳腺癌是当今女性多发的癌症疾病之一,且发病率逐年上升。尽早发现乳腺癌并配以合理的治疗手段对于提升病发人群存活率具有重要意义。由于高敏感度与特异性,磁共振成像(Magne
教育是民族振兴、社会进步的基石。近些年来,面对稳定增加的生源,高等院校不断加强自身改革,坚持内涵发展,提高自身教学质量和教育水平,由过去粗放式的发展转变为提升教学质
频谱感知作为认知无线电关键技术和研究内容之一,对于缓解静态频谱分配策略与动态频谱需求之间的矛盾具有重要的研究意义。本文针对传统频谱感知性能不足和进一步提高频谱利
为了简化腹腔微创手术的导航系统,产生了基于SLAM的腹腔镜导航系统。将医学图像信息与实时腹腔镜视频融合在一起,可以极大的增加外科医生的视野,使医生能看到位于表面一下的
目前智能移动机器人是很多学者研究的主要方向,而同步定位与地图构建技术是移动机器人能够实现自主移动的关键。视觉SLAM系统是指搭载相机为传感器主体,能够同时进行定位与地