基于特征融合的深度学习人脸情感识别

来源 :上海工程技术大学 | 被引量 : 0次 | 上传用户:ysli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器学习和卷积神经网络的快速发展以及智能设备的普及,人脸情感识别技术也在经历着巨大变革。近年来,作为人类情感信息传递和人际关系交往的重要表现形式,人脸表情识别在医疗卫生,游戏娱乐,疲劳驾驶,消费心理和教学研究等诸多领域都得到了广泛的关注和认可。尽管人脸表情识别在很多领域表现出了巨大的研究意义和商业价值,但是在具体的实际应用中,仍然有很多问题亟需解决。如图像光照变化,面部遮挡,特征信息提取单一等。因此针对性地提出了两种基于特征融合的表情识别方法,首先从面部浅层信息入手,使用机器学习算法融合人脸面部几何特征和局部纹理特征,从而验证特征融合的有效性。然后在特征融合的基础上引入深度学习算法,进一步提升面部表情识别的泛化性和鲁棒性。具体研究内容如下:1、针对面部特征提取单一,传统局部二值模式(LBP)纹理特征提取存在对非一致性光照敏感和随机噪声不稳健等问题,提出一种融合完整局部二值模式(CLBP)与几何显著特征的人脸表情识别算法。该算法利用Dlib库提取面部68个特征点,通过选取显著区域特征点来构建面部几何特征向量,同时采用CLBP算法提取面部细粒度纹理特征,然后通过串联融合其特征直方图的形式来构建输入特征向量,最后利用随机森林分类器进行表情分类。实验结果表明特征融合算法能够显著提升面部特征信息提取的完整性,识别效果优于传统单一特征提取的面部表情识别算法。2、针对人脸表情数据集的数据量不足和深度卷积神经网络的模型复杂,参数冗余等问题,提出一种融合手工特征和深度学习特征的小样本表情识别算法。该算法模型将手工提取的人脸关键区域特征与Dense Net网络提取的深度学习特征相融合,再利用基于熵的特征约简技术对特征维度进行熵减和选择,以使用多分类支持向量机(MSVM)进行识别分类,通过在JAFFE和CK+公开数据集上的实验测试结果表明,该模型在小样本数据集上也能够具有较高的识别准确率和鲁棒性,显著提升了人脸表情的识别性能。
其他文献
在石化行业中,PTA既是上游原油、PX的产成品,又是下游生产PET和聚酯的原材料,并且通过下游化纤行业与棉花价格也有联动关系,其重要地位不言而喻。目前我国PTA生产商市场占比前三的均为民营企业,同时这三个生产企业均经营PTA所处的化工产业链中的相关业务。相对来说,民营企业经营风险更大,较难获得足够的资金。供应链金融能够协助处理中小企业所面临的融资难题,通过将PTA与石化产业链上的其它化工品进行组合
学位
随着工业的发展,在控制领域里,系统被控对象变得越来越多元化,也越来越复杂。而且在实际的控制操作过程中,通常伴随着各种各样的非线性以及不确定性,不确定性因素的存在,往往会影响到系统的性能,同时也大大增加了控制器设计的难度,更加严重的话,可能会导致系统震荡,使系统失去稳定,无法正常运行,给工厂带来不必要的损失。所以,对于不确定非线性系统的控制问题的研究,具有重要的现实需要。现在大多数工程项目在保障系统
学位
随着卫星定位、WIFI和传感器等位置传感技术的广泛应用以及基于位置的服务(Location-based services,LBS)的发展,个人位置数据的收集量不断增加,位置隐私保护受到极大关注。基于位置服务要求用户不断向可能不受信任的服务器报告用户的位置信息,以便根据其位置获取服务,极大可能会导致个人位置信息的泄露,通过这些数据与其他可用信息结合起来,推断出个人敏感信息,导致用户面临隐私泄露的风险
学位
食品药品安全问题关乎每个人的健康,甚至关乎国家经济繁荣和社会发展,因此食品药品的安全必须要得到保障。当有不合格的食品药品流通到市场上时,生产该缺陷产品的企业必须要对其进行召回,履行企业的社会责任,对公众和社会负责。本文基于社会责任理论、利益相关者理论、信息不对称理论、信号传递理论、有效市场假说、价值增长理论等理论,对从颁布第一部食品药品召回相关法律开始到现在的食品药品召回事件进行研究,运用事件研究
学位
在市场出现越来越多异象且无法被传统的经典投资理论所解释的背景下,本文选取市场机构投资者的情绪作为研究对象。本文数据选用沪深300指数作为回归的对象,运用统计方法创建了一套衡量机构投资者情绪的综合指标。在模型建立的基础上,本文作者分析了投资者情绪与股票指数之间的关系以及互相之间的影响,在此基础上利用时间序列模型进行未来几期的预测。本文作者选取2018年6月至2021年6月的沪深300指数、市场成交量
学位
科技的进步引领社会的发展,对智能控制也提出了更高的要求。混杂系统,作为一类由连续性动态子系统和离散性动态子系统相互作用而构成的动态系统,备受国内外专家学者的青睐。而切换系统作为一类特殊的混杂系统,由一系列子系统和控制这些子系统之间的切换行为的切换信号构成,一直以来都是国内外研究混杂系统的热点话题和重要模型。在对切换系统的研究过程中,稳定性分析和控制综合问题是它的重点和难点。最初,人们聚焦于研究切换
学位
5G是最新一代蜂窝移动通信技术,具有高数据、高速率、低延迟、低消耗等优势,将成为继蒸汽机、电力技术、互联网技术之后的新一代的基础通用技术,引领第4次工业革命。Massive MIMO作为5G的关键技术,具备良好的波束赋形能力,有效提升覆盖能力,降低了系统内干扰,提供更高的频谱效率、有效地改善用户体验能力。Massive MIMO波束组合成千上万种,倘若Massive MIMO波束应用不好,将会带来
学位
资本结构是企业选择不同融资方式组合做出融资决策的结果,是非常重要的一个指标,对企业一系列经营、发展问题都具有重要作用。大力发展新能源汽车产业已经成为国家战略。近年来,政府相继出台大量扶持政策,新能源汽车产业链获得了大量的财政补贴资金。从政府补贴这一角度探究其资本结构问题能够帮助企业了解政府补贴在资本结构调整过程中所起到的作用,理解政府补贴的作用机理。本研究对于提高新能源汽车企业政府补贴使用效率,辅
学位
石油作为重要战略资源对国家发展起到至关重要作用,成品油作为主要石油制品在各个领域广泛应用。随着我国炼化产能扩张,成品油供需差日益扩大,成品油市场由卖方市场转变成买方市场,成品油价格也从之前计划经济时期完全由政府定价转向政府限定最高最低价格,我国成品油批发价格呈现市场化趋势,与国际原油市场关联性逐渐增强。成品油批发价格受国际原油价格、供求关系、国内政策定价、居民消费水平和经济发展状况等多方面因素影响
学位
本课题主要研究了利用偏振对比度方法对光源进行调制的表面等离子共振(Surface Plasmon Resonance,SPR)成像传感和膜层结构的设计与优化。同时也分析了对称金属膜包覆介质结构的SPR传感器。通过对衰减全反射的表面等离子波激励条件下的分析,波导结构中的光波与表面等离子波的波矢匹配时会产生双共振峰。为研究对称微纳结构的金纳米圆盘膜层的局域表面等离子共振(Localized Surfa
学位