基于自适应神经架构搜索的表情识别方法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:hulan2010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
表情是人际交往过程中情感表达的重要方式,也是情感计算中一个流行的研究领域。目前深度卷积神经网络无论是在实验室还是自然环境下的表情数据集中都取得了不错的表现。但这些方法一般基于通用的图像分类网络,因此往往需要大量的参数进行实现;其次表情识别的环境是多变的,但这些网络并没有很好的特征提取的方法;另外面对越来越复杂的表情识别任务,人工设计一个性能良好的表情识别模型越来越需要大量的时间成本和经验指导。因此,本文针对表情识别模型的参数量大,提取特征不易以及设计困难等问题展开研究,主要工作如下:针对表情识别模型设计困难和参数量大的问题,提出了一种自适应可伸缩的表情识别模型设计方法。本方法设计了一种同时编码cell级和cell内连接的可伸缩的搜索空间,通过强化学习指导的IDEA搜索策略提高搜索的效率,并利用L1/2范数正则化损失进行辅助学习,能够得到稀疏并保证良好性能的表情识别模型。本方法在CK+和RAF-DB数据集上进行了实验,通过对比识别准确率和参数量,发现本方法相比于通用的骨干网络,能够以轻量化的结构获得更高的识别准确率,从而证明本方法在设计表情识别模型上的有效性。针对表情特征提取不易的问题,提出了一种自适应注意力机制的表情识别模型设计方法。本方法在自适应可伸缩的表情识别模型设计方法的基础上应用了两种注意力机制,一种为稀疏中心损失,通过注意力权重来控制中心损失,进而更好地提高类别可分性;另一种为多头注意力机制,通过多尺度卷积核更好地建模注意力权重。同时本方法利用神经架构搜索的优势,设计了自适应地添加注意力机制的架构,自适应地在cell上添加注意力。本方法在CK+、RAF-DB以及FERPlus数据集上进行了实验,并与近年来的一些表情识别方法进行比较证明了方法的有效性,其中本方法在CK+和RAF-DB数据集上分别达到了98.38%和86.73%的识别准确率。本方法还将注意力进行了可视化,可以发现本方法在定位人脸表情表达的关键区域上具有很大的优势,能够精准地进行特征提取。综上所述,本文提出的自适应可伸缩的表情识别模型设计方法能够有效地解决表情识别模型的设计问题,同时使得模型轻量化;本文提出的自适应注意力机制的表情识别模型设计方法能够有效地进行表情特征提取从而提高表情识别准确率。
其他文献
压缩感知是一种强大的信号采样技术,能够在对信号采样的同时完成压缩,极大地减轻了编码端的计算和存储负担。由于计算复杂度主要集中在解码端,重构算法的设计是压缩感知最核心的研究内容。传统图像/视频压缩感知重构算法理论可解释性较好,但重构性能不理想;近来提出的基于深度学习的重构算法通过数据驱动的方式直接学习观测值到重构信号之间的非线性映射,重构质量较高,且重构速度较快,但理论可解释性较差。针对现有图像/视
学位
为应对当前资源短缺、生态环境恶化、空间布局无序等问题,缓解生态保护与经济发展的矛盾,引发了关于国土空间重构的新需求。在深入推进“多规合一”与空间治理能力现代化的背景下,针对国土空间优化中面临的前沿技术应用不足等问题,探索出一套较为完善的优化流程和技术方法,有助于引导构建科学合理的功能空间布局。本文以山西省晋中市为研究区,从国土空间安全与发展相协调角度出发,在把握2009-2019年晋中市国土空间变
学位
针对目前黄淮海平原潮土区土质偏砂,土壤呼吸强度大,秸秆碳利用低,土壤有机质提升缓慢等问题,本研究以中国科学院封丘农业生态试验站长期试验地为研究对象,选取秸秆移除、秸秆覆盖还田、秸秆深还以及秸秆深还配施8、16、24%无机有机氮素,共9个处理,于试验开展第10年(2020年)秋玉米收获后,采集各处理0-10、10-20、20-30、30-40cm的土壤样品,测定土壤碳氮组分指标,分析不同秸秆还田及施
学位
随着社交平台的发展,人们每天面临海量的图像数据并习惯用它们表达自己的情感。如何从海量数据中提取人类关注的显著信息,并快速有效地分析图像表达的情感,成为计算机视觉的新挑战。这两个任务分别属于计算机视觉领域的视觉显著性预测和视觉情感分析,在视觉跟踪和情感图像检索等方面具有广阔的应用前景。然而,目前大多数研究对这两个课题进行独立的分析,忽略了图像情感与视觉显著之间的相互作用。心理研究表明,图像的情感区域
学位
人脸表情是在人类交流中传递信息的重要媒介,对人脸表情进行分析与识别能有效理解人类的行为意图,在人机交互、智能监护等领域具有广泛的应用前景。目前,人脸表情识别的研究重点正在从实验室环境转移到非受控的自然环境,面临着表情强度微弱、光照变化、人脸遮挡等难点。在这一背景下,本文利用深度学习建模高度非线性问题的能力,通过搭建与训练深度神经网络模型,提升现实环境下的人脸表情识别的准确率和鲁棒性。本文围绕基于深
学位
改革开放以来,我国工业化、城镇化进程加快,城市化水平稳步提升。大量农村人口进城,经济收入得以增加。但是,“人地分离”、“人走房空”,“空心村”现象也随之出现。农村宅基地闲置同城镇建设用地紧缺之间的矛盾,已经严重阻碍了城乡融合,迫切需要进行盘活,以提高土地利用效率。而土地具有资源、资产、资本的三重属性,因此,本文将从该角度切入,研究农户盘活闲置宅基地的意愿。全文共有七个章节,第一章对闲置宅基地盘活利
学位
在倡导低碳、碳中和理念的新时代发展背景下,加强对生态空间的保护显得尤为重要。随着土地资源开发利用不合理、自然资源利用趋于紧张、生态系统服务功能退化等现象的出现,生态空间逐渐受到侵扰,这既不利于地区社会经济和生态系统的可持续发展,也影响着区域生态系统服务功能的发挥。因此,如何妥善协调城市化快速进程中城市建设和生态安全保护两者之间的冲突、促进生态—经济空间协同发展显得更为关键。构建生态网络既可以促进生
学位
<正>侵华日军"731"细菌部队进行细菌试验人员之来源大部分是由关东宪兵队"特殊输送"的。所谓"特殊输送",就是侵华日军关东宪兵队所属各宪兵队、宪兵分队、宪兵分遣队,将秘密逮捕的反满抗日者直接进行秘密审讯,然后将审讯报告逐级上报关东宪兵队司令部,经司令官批准并下达"特殊输送"的指令后,秘密地将其输送给"731"部队,进行惨无人道的细菌试验,直至残暴地杀害。从1938年至1945年,"特殊输送"人员
期刊
中共中央办公厅、国务院办公厅发布的《关于加强和改进乡村治理的指导意见》指出,农村集体经济组织构成了乡村治理的关键环节,亟需在完善和提升乡村治理的宏观框架内进行整体升级。农村集体经济是乡村的基本经济制度和物质基础,与农民切身利益直接相关。集体经济组织则是借助“一肩挑”的干部任职方式和集体产权制度改革两项举措,嵌入乡村治理场域中,与乡村权力配置和运行方式相互作用,对乡村治理产生深刻影响。本文以ZX村为
学位
新时期,城镇化和工业化的不断推进要求国土空间更高强度开发,进而导致国土空间开发与保护格局显著重构。国土空间冲突加剧、土地资源利用粗放、建设用地扩张无序、优质耕地被占用的现象普遍,各类自然资源耗竭以及生态环境污染等问题愈发突出,发展与保护之间的矛盾日益凸显。在国土空间开发进程中,资源环境承载能力是限制国土空间开发的主要因素,而国土空间开发无序也带来各种各样资源环境问题,如资源约束趋紧、环境质量恶化、
学位