基于卷积神经网络的微表情识别

来源 :大连海事大学 | 被引量 : 1次 | 上传用户:liongliong572
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
微表情是一种自发式的表情,在人们试图隐藏自身真实情感时产生,既无法伪造,也无法抑制,可以用来揣度一个人的真实心理状态,微表情识别在临床医学、刑侦、公共安全等领域具有重要的应用价值。本文对基于卷积神经网络的微表情识别进行研究分析,并给出三种改进的基于卷积神经网络的微表情识别方法。本文的主要工作如下:(1)给出了一种基于2D-3D双流卷积神经网络的微表情识别方法。针对三维卷积不能对时间信息、空间信息分开优化以及提取时间信息尺度单一化的问题,给出了一种双时间尺度三维卷积神经网络,去除空间池化层以提高对于静态特征的提取能力,时间卷积与空间卷积并行连接使两者的参数优化过程分开进行,增加不同维度的时间卷积以增加时间信息的多样性,从而提取微表情的短时特征。为了获取微表情视频中运动信息,利用计算差分信息图的方式将视频的运动信息集中于一张图像,并利用二维残差网络对差分信息图进行综合分析,从而提取微表情的长时特征。为了同时利用长时特征和短时特征,将双时间尺度三维卷积神经网络与基于差分信息图的残差网络的特征图相加融合得到2D-3D双流卷积神经网络,并进行微表情识别。(2)给出了一种基于峰值帧与运动区域的微表情识别方法。针对微表情视频中冗余信息过多的问题,通过当前帧与起始帧之间的余弦相似度来有效定位峰值帧,去除冗余的视频帧;通过抓取视频帧中的运动区域,去除冗余的静态特征。峰值帧中缺少相邻视频帧间的时间信息,而视频中的运动区域缺少完整的空间信息,为了提取完整的时空信息,给出了一种基于峰值帧与运动区域的卷积神经网络,将峰值帧的特征与运动区域的特征进行相加融合,并进行微表情识别。(3)给出了一种基于注意力机制的微表情识别方法。针对微表情图像中有用信息较少且不同区域对分类效果影响不同的问题,给出了一种基于空间注意力与通道注意力机制的卷积神经网络。对不同空间或通道的特征分布不同的权重系数,增强相关性高的区域,抑制相关性低的区域。
其他文献
选用经多年接种鉴定,对水稻稻曲病有较强抗性的水稻地方品种早光头粳(P1)与感病品种粤B(P2)配置了P1、P2、F1、F2、BC1(F1×P1)和Bc2(F1×P2)6个世代。在水稻孕穗期,对这6个世
小麦是中国的主要粮食作物之一,四川盆地麦区在小麦生育后期常遇阴雨多湿天气,锈病等真菌病害蔓延迅速,常导致旗叶和倒二叶为主的冠层叶感病早衰、籽粒灌浆不足而严重减产,因此长
在社会经济的大幅发展、居民生活水平提高的前提下,人们对自身健康水平的关注、对医疗相关知识的了解,直接促进了整个医疗系统的良性发展。就传统的医疗系统来说,由于其过程
高校是广大青年培育和践行社会主义价值观的重要阵地。本文结合目前高校培育和践行社会主义价值观存在的问题,探索有效路径:线上线下,学习和培育社会主义核心价值观;榜样学习,
文章通过调研总结现阶段高校图书馆全民阅读推广主体地位的现状,分析其主体地位存在的问题及其成因,并提出高校图书馆应通过明确主体地位、完善主体机构、发挥主体作用夯实全
目的探讨分析急诊护理对心脏骤停患者心肺复苏后患者康复情况及不良反应的影响。方法方便选取该院急诊科于2017年5月—2018年5月这段期间内接收诊治的心脏骤停接受心肺复苏抢
本文主要利用上下解法证得一类具时滞的反应扩散捕食模型解的存在唯一性。
急性肺栓塞(Acute pulmonary embolism,APE)患者有多种不同远期预后,通过对凝血相关指标、心功能损伤相关指标、基因相关指标及其它预后相关指标的分析,可提高APE患者不良预
提出了VRML(虚拟现实建模语言)技术方案,以解决设备远程监测、诊断中的数据与图像传输问题,并制作了仿真现场的几何、物理模型.