基于时空特征和双流网络的微表情识别

来源 :西南大学 | 被引量 : 0次 | 上传用户:ahhaa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人们的内心情感往往通过面部表情直观地体现出来,面部表情是人类进行情感交互的一种重要方式。在日常生活中,可以通过肉眼轻易观察到的表情称为宏表情,其持续时间在0.5秒到4秒之间。宏表情的发生可以被人类自主控制用以掩饰内心真实情感,在一定程度上具有欺骗性。然而,人们在掩饰真实情感过程中,难以避免地会在瞬间泄露出无意识的面部表情,将这种十分短暂、微弱的面部表情称为微表情。微表情作为一种自发式的情感表达方式,能够反映人类真实情感,在心理疾病治疗,刑侦审讯等领域具有重要的研究意义。由于微表情具有持续时间短、动作强度微弱、发生区域局部的特性,导致难以准确捕捉面部细微肌肉运动信息以提取有效特征,这给微表情识别的研究造成了一定的困难。本文提出一种基于时空特征和双流网络的微表情识别算法。使用基于迁移学习的运动放大网络对顶帧微表情运动状态进行放大,生成放大图像作为空间特征,放大图像有效改善了原始图像中微表情肌肉运动极不明显的问题。通过对起始帧与放大顶帧提取稠密光流,捕捉微表情帧之间肌肉的微弱运动趋势作为时序特征,稠密光流图像在抑制非运动区域噪声的同时也有效保留了微表情的关键运动信息。构建双流网络模型,对输入的时空特征进行进一步学习以提取深度特征,使用双通道输入保证了提取特征之间的独立性,有效增强了微表情的相关特征。在SMIC、CASME II和SAMM数据集以及它们的复合数据集上对算法进行了验证,并与其他先进方法进行对比,实验结果表明,提出的算法分别在SMIC、CASME II、SAMM上取得了71.34%、73.95%、74.26%的准确率,同时F1分数也表现优异,均高于对比算法。
其他文献
随着科学技术和经济不断发展,电力能源的发展也不断加快,在社会发展中占比越来越大。电力企业中存在线损管理问题,如果处理方法不恰当,将会产生不必要的电力损失。随着居民和企业用电量的增加,电力企业的负担越来越重,线损现象愈发严重,严重影响了居民的正常生活和企业的发展。为此,各有关部门应加强对线路损耗的研究,避免不必要的电能损耗。文章从电力计量自动化技术入手,通过研究线损管理现状,分析集中抄表系统在线损管
期刊
初中道德与法治课是进行中学生生命教育的主要阵地,在道德与法治课中开展生命教育有利于研究学生生命发展的内在规律,增强学生生命意识,实现其生命价值;有利于贯彻落实国家“立德树人”的教育理念,推进素质教育改革,培养中国学生健康生活这一核心素养。无论是社会现实需要,还是国家发展要求,又或是道德与法治课程目标,都迫切需要提高对生命教育的重视程度。本文在前人探索的基础上,通过案例研究和文献研究,积极寻找当前我
学位
自党的十八大以来,党和国家高度重视思政课改革,多次召开座谈会和发布文件强调思想政治教育课的重要性,并作出一系列重大部署。中学思政课承载了落实党的教育方针的重任,着眼于立德树人的根本任务,2018年教育部颁布了《普通高中思想政治课程标准(2017年版)》,指出要构建以培育思想政治学科核心素养为主导的活动型学科课程,围绕议题,设计活动型学科课程的教学。课程实施的关键在于教学,教学设计是保障教学科学有序
学位
为了保证无线通信系统中信息传输的可靠性,常采用信道编码技术纠正由信道引起的数据传输错误。作为成熟的信道编码,Turbo码因为纠错性能逼近Shannon极限,广泛应用于多种通信标准。在串行Turbo码译码器的设计中,通常基于两个分量译码器相互交换彼此的软信息进行迭代译码。由于能量受限的局限性和迭代译码算法的依赖性,串行译码算法的译码速率和吞吐量均被限制。在并行Turbo码译码器的设计中,译码算法的依
学位
近年来,双向联想记忆(Bidirectional Associative Memory,BAM)神经网络,因其双向连接结构而受到广泛关注。由于这种结构特征,BAM神经网络在人脸识别、语言理解和序列学习等许多应用中都具有出色的性能。这些应用在很大程度上依赖于BAM神经网络的动态行为,这使得BAM神经网络动力学行为成为研究热点。在生物神经系统中,扩散现象广泛存在,扩散现象会使得神经网络产生更加丰富的动
学位
随着网络技术的不断发展,由智能手机带动的移动媒体逐渐影响人们的生活方式,人类的社交方式也在发生巨大的改变。5G时代的来临,短视频行业异军突起,其用户规模和用户渗透率也在逐年攀升,短视频已日渐成为重要的社交媒介和电商销售渠道,并逐渐占领市场。由于短视频属性复杂,用户对语言的规范程度存在差异,致使平台上出现了大量语言不规范的现象,破坏了汉语的规范性和标准化传播。自短视频开启电商销售模式后,此种现象愈演
学位
混合自由空间光-射频(Free Space Optical-Radio Frequency,FSO-RF)通信能够同时拥有FSO的超高信道容量、无需频谱许可、抗干扰能力强,以及RF的覆盖范围大、广播特性之优势,近年来受到广泛关注,并被认为是面向未来网络最具潜力的技术之一。为了进一步提高频谱效率,支持多用户共享时频资源的非正交多址接入(Non-Orthogonal Multiple Access,N
学位
人工智能在自然语言处理、知识表示、自动推理、机器学习等方向上的长期发展使其具备了知识采集、整理、传输、存储、分析、呈现和应用上的天然优势。人工智能与教育的结合,能够解决教育资源在时间和空间上的分配不均,以其在知识记忆、复述和再现上的优势减少教与学双方的低层次教学投入。此外,人工智能采用机器学习的方法,辅助教与学双方对学习过程信息的理解,这既有利于教育工作者提升教学设计质量,也有利于学习者提高学习效
学位
利用我国33个大中小城市2005—2018年的面板数据,从房地产投资、房地产消费、房地产开发企业规模3个方面选取11个指标,采用熵值法计算得到房地产经济综合指标,并构建静态与动态面板模型,探究人口流动对房地产经济的影响机制。实证结果表明:静态面板模型与动态面板模型回归结果均显示,全国层面人口流动对房地产经济发展具有显著的正向影响;静态面板回归结果显示,人口流入较快地区的房地产经济水平提高显著,而人
期刊
在信号处理领域中,压缩感知(Compressed Sensing,CS)作为一种新的信号处理框架,与传统的奈奎斯特(Nyquist)采样相比,仅需要较低的采样率就能还原出成原始信号。CS的提出不仅解决了传统采样中压缩与采样分开进行的问题,还极大地减少了信息的采样频率、信息存储以及传输代价的需求。CS理论表示对可压缩或者具有稀疏性的信号,可以通过一定条件下的观测矩阵映射到低维空间上,最后通过优化算法
学位