基于深度特征学习的人脸表情识别算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:yu8886882
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸表情是人际交往中信息传递的重要途径,在察觉说话人情绪、领悟言语含义和捕捉情感细节上起到非常重要的作用。随着信息技术和计算机科学的快速发展,人们对机器的“智能”也提出了更高的要求,而人脸表情是机器理解人最快速有效的方式,因此自动面部表情分析技术在机器人、医疗、驾驶等领域的需求越来越广泛。如何提高人脸表情识别准确率、增强模型对各种外部干扰的鲁棒性和面对环境变化的适应性是人脸表情识别急需解决的关键问题。本文结合目前该领域的技术难点和研究热点,在深度表情特征学习领域做出了以下两方面的主要贡献:(1)提出了一种更具可分性的深度表情特征学习方法。在非实验条件下,人脸图像受复杂背景、人脸姿态、光照、遮挡、个体特征差异等的影响非常大,使得深度网络学习出来的特征不能体现类与类之间的区分性,不同类样本在特征空间存在严重混叠的现象。针对这个问题,我们在Fisher可分性判据的启发下提出了一种更具可分性的深度特征学习方法–Fisher loss。最小化该损失能够在欧式空间上最小化类内离散度的同时最大化类间距离,学习出来的特征在特征空间具有更好的可分性。我们的实验在MNIST和FER2013数据集上进行,从实验结果和可视化中我们可以发现,我们的方法对比单纯的交叉熵损失,以及Center loss和Island loss都更具优势,并且在这两个数据集上获得非常具有竞争力的结果。(2)提出局部相关注意力机制学习人脸跨区域相关性特征。在机器复杂多变的拍摄条件下,要想捕捉到人脸表情的关键信息是非常困难的。而CNN采用局部感受野的方式,要想捕获人脸不同区域间的长距离依赖关系需要堆叠更多的卷积模块,这是一种非常低效的方式。本文针对这些问题,提出了局部相关注意力机制,它能够学习到人脸不同区域的相关性信息,并对信息进行跨区域融合,能够精准定位表情的关键区域,对表情识别做出更加精确的判断。实验中我们对比了我们的模型和baseline模型之间的差异,发现局部相关注意力机制能够在FERPlus、SFEW和Affect Net三个数据集带来平均1.7%的准确率提升,对比近两年的方法,据我们所知我们在SFEW数据集做到了State-of-the-art的结果,而在FERPlus和Affect Net上的效果可以与其它方法进行媲美。并且我们采用了Grad-CAM方法进行可视化,对比基准模型,我们发现局部相关注意力机制确实在“学习跨区域相关特征”、“准确定位表情区域”和“屏蔽非表情干扰信息”三个方面具有独特的优势。
其他文献
2021年中央一号文件21日正式发布,文件提出全面推进乡村振兴,加快农业农村现代化。要实现乡村振兴,离不开乡村项目的发展建设,本文针对发展乡村振兴示范村的目标,提出值得开
随州市是湖北省一个经济欠发达的地级市,而城市化建设是推动随州市经济发展与社会进步的重要途径。本文以随州市城南新区为研究范围,分析了随州市城南新区被征地农民参加养老
布料瑕疵检测是纺织业生产中的一个重要环节,能够对布料成品质量进行监控,保证产品品质。利用计算机视觉系统对布料进行实时监测,能够有效地避免人工验布人力成本高、检测精
大学语文课程作为军队院校本科教育通识必修课程之一,在提升学员汉语表达能力、培育学员人文素质方面有着十分重要的作用。要真正实现大学语文的功能,凸显大学语文课程的特色
会议
随着信息网络和数字音乐产业的发展,近年来音乐作品信息网络传播权侵权纠纷数量逐年上升。当前我国著作权相关法制建设虽逐渐完善,但信息网络传播权相关法律法规内容仍有不足
城市基础设施建设是城市发展的必然要求,对城市居民生活日常至关重要。随着城市化进程发展,城市基础设施建设增长速度加快,与此相伴的政府公共资金紧张、专业能力不足、监控
19世纪末浪漫主义发展鼎盛过后,独具个性的二十世纪作曲家们大胆创新,探索新手段、新思想,“新浪漫主义”由此诞生。塞缪尔·巴伯把现代的一些创作手法与传统浪漫主义音乐创作技法相融合,注重个人的情感表达,以独特的音乐风格引领了二十世纪新浪漫主义潮流,影响、推动了新浪漫主义音乐这一流派的发展。钢琴组曲《漫游集》Op.20创作于1944年,是巴伯唯一一次民族主义音乐风格的全新尝试,也是他很具有代表性的一部作
作为高层次创新人才聚集地以及能力创新、技术创新、知识创新的来源,高等院校成为了国家科技创新的关键组成部分,当前阶段,我国科研持续在进步,并为社会经济发展贡献了巨大的
随着2018年4月8日新组建的文化和旅游部的正式挂牌,文化与旅游融合发展大势所趋。旅游产业与文化产业同属国民经济中的第三产业,其中旅游产业是一个文化性很强的经济产业,同
本文为英汉翻译项目实践报告。项目文本选自《好工作——泰勒关于现代就业状况的调研报告》(Good Work:The Taylor Review of Modern Working Practices)(Matthew Taylor,201