基于特征点预测的口罩遮挡人脸图像修复技术研究

来源 :四川轻化工大学 | 被引量 : 0次 | 上传用户:winterdxm7124
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在公共场所,佩戴口罩可以防止病毒的传播,然而佩戴口罩会导致人脸识别困难,因此口罩遮挡下的人脸图像修复的研究具有重要的意义与商业价值。一种好的修复方法应该保证修复结果的真实性,包括眉毛、眼睛、鼻子和嘴巴之间的拓扑结构,以及姿势、性别、种族、表情等属性的一致性。通过对人脸修复技术以及面部特征点检测技术的研究,本文构建了一种基于特征点预测的人脸图像修复网络。为了实现口罩遮挡下人脸图像的修复,对图像分割算法Grab Cut算法进行了改进,用于口罩掩模图像的提取。本文的主要内容如下:1、口罩掩模图像的提取过程中,提出一种改进的Grab Cut分割算法。针对Grab Cut迭代次数多分割时间长的缺点,引入外观重叠项对能量函数进行优化,减少分割所需能量,改进后的算法只需一次分割就可以达到好的分割效果;此外,改用基于种子的交互方式,使得算法更适用于复杂背景以及多区域目标的分割。最后对改进前后的算法进行了分割对比实验,并将改进后的算法进行了口罩掩模图像的提取实验。分割实验证明,改进后的算法有更好的分割精度和更少的分割时间。2、本文构建了一种针对遮挡面部图像的特征点预测模型。该模型基于Mobile Net V3-small网络,通过融合各卷积层的特征图,实现对遮挡人脸图像的面部特征点预测。此外,将训练所得预测模型用于遮挡人脸图像的面部特征点预测实验。实验结果表明,本模型能准确的预测出掩模遮挡以及口罩遮挡下人脸的面部特征点。3、由于面部特征点体现了人脸的结构信息(拓扑结构和表情),本文构建了一种基于面部特征点预测的人脸图像修复网络,将预测的面部特征点用于指导人脸图像的修复。此外,对生成器部分进行改进,引入七个带有空洞卷积的残差模块,降低图像计算复杂度减少细微特征的丢失,此外相应的残差模块之间加入跳跃连接,充分利用所提取特征信息的同时提高训练性能。所提出的方法在Celeb A-HQ数据集上取得了有竞争力的结果。结合口罩掩模图像,实现了对口罩遮挡人脸图像的修复,口罩遮挡人脸修复实验结果表明,所构建的网络有更好的修复效果。
其他文献
射频识别(Radio Frequency Identification,RFID)是一种无接触的自动识别技术,它利用射频信号通过空间电磁耦合的方式实现信号的无接触传输。随着RFID技术的不断发展,RFID系统标签数量逐渐增多,RFID系统标签碰撞问题日益加剧。阅读器在一次识别过程中不可能将标签全部识别出来,需要对标签进行分组。当每组的标签数量小于或等于阅读器天线数量时,称为超定或正定状态。针对这一
学位
对1586年以来的西太平洋火山带VEI≥5级火山大喷发与中国大陆东部M≥6强震的相关性进行了分析,结果表明,随着西太平洋火山带大喷发,大陆东部一般滞后半年至5年开始强震丛集,且火山连续性大喷发后大陆东部可能出现强震活动高潮或丛集活动时间增长及频度增加现象;强震平静时段一般在火山间歇期内,且强震最长平静期与火山最长间歇期同步。由此认为,火山的大喷发——间歇性活动,显示了西太平洋火山带相关板块运动及上
期刊
混沌的第一个数学定义是由李天岩和约克提出的,但定义是抽象的数学语言,缺乏直观性,不利于工程应用,无法直观地解释系统中存在的混沌现象。而后,Devaney提出了更为直观的混沌定义,Devaney混沌定义的三个条件形象地诠释了混沌的本质特征,尤其初值敏感依赖性反映了系统的不可预测性。本论文考察了连续自映射在Devaney意义下的相关混沌性质,包括拓扑传递性、混合性、极小性、敏感性与广义周期点(即非游荡
学位
低频振荡是影响电力系统稳定性主要问题之一。发电机的励磁系统在电力系统稳定运行中拥有十分重要的地位,可能由于励磁系统提供阻尼过小,导致系统整体阻尼不足严重威胁到了电网的稳定运行。励磁系统不同、其中参数不同,都可能对系统动态特性产生一定影响。完善励磁系统阻尼分析方法,探究励磁系统阻尼机理,有利于减少电力系统低频振荡事故发生以及对振荡的抑制。本文将在发生低频振荡事故时,对励磁系统阻尼大小进行研究。具体做
学位
针对传统人工值守的视频监控系统存在成本高、效率低和实时性差等问题,无法满足智能制造中对于作业人员的智能化监管,随着智能制造中的人员安全监管向着智能化的方向发展,但是其对算法的性能要求高。本文基于深度学习的目标检测和多目标跟踪技术对作业人员异常行为智能检测技术进行研究。通过对作业人员的异常行为进行智能检测,能够提升作业安全监管的效率,减少监管的成本,对构造一个智能化、有序化、高效化的智能化工厂有重要
学位
近年来,正常光照条件下的人脸识别技术已经达到了相当高的准确率,但是光源不足,光照变化剧烈,侧面光照等复杂光照条件依然会使采集到的人脸图像的特征无法提取,从而大大降低了人脸识别的准确率,目前,解决人脸识别中光照问题的方法有很多,但是都存在着计算复杂度高、不具有自适应性等缺点。为了进一步提高复杂光照条件下人脸识别的准确率,本文主要研究了以下内容。(1)基于伽马变换的人脸图像光照预处理算法的验证及改进:
学位
酒醅作为白酒发酵过程中重要的过程物质,实现对酒醅关键理化指标快速、准确的检测,对于指导白酒生产实践具有重要意义。针对传统酒醅理化指标(包括酒醅中水分、淀粉、酸度等)湿化学分析测量方法存在的费时耗力,严重滞后等缺点,本研究基于近红外光谱分析技术,对酒醅理化指标的近红外光谱建模方法进行研究,通过建立近红外光谱定量分析模型,实现酒醅理化指标的在线快速无损检测,本文主要研究内容如下:通过近红外光谱仪器漫反
学位
目前在硬质合金行业,微型喷嘴表面缺陷检测仍借助光学仪器和液晶屏,采用目测法存在检测工作效率低、人为误判等问题。本课题重点研究基于视觉的检测方法,旨在设计一种基于视觉方法的微型喷嘴表面缺陷自动检测、标记和记录的系统,研究工作主要包括微型喷嘴的图像采集、图像预处理、缺陷特征提取和检测算法研究及软件系统测试等。边缘缺损的端面圆拟合误差大,本文采用半径比较法改进最小二乘法对缺损圆的拟合过程,圆心距精度提高
学位
随着高分辨率卫星技术的发展,高分辨率遥感卫星图像的获取和处理技术有了高速的发展。飞机目标作为遥感卫星图像中一种重要的地物目标,对其快速检测和识别,能准确获取飞机数量、起降情况、位置分布等信息,无论是在国防军事还是国民生产中均有着重要的应用价值。传统飞机目标检测算法主要以模板匹配与机器学习为主。其中模板匹配虽然简单快速且易于实现,但对飞机目标的比例、旋转、视角变换等等都有着严格要求,因此在复杂多变的
学位
欠驱动系统是控制输入少于控制量的系统,由于系统中部分驱动的缺失,系统的运动只能通过剩余驱动及机构之间的耦合带动。欠驱动系统广泛应用于各个领域,如卫星、吊车、三相电压型PWM整流器等,当全驱动系统由于一些原因导致部分驱动无法运作,也会变成欠驱动系统。减少驱动意味着成本的降低以及系统重量与体积的减少,对欠驱动系统的研究有着重大意义。文章中研究的具有旋转激励的二维平移振荡器(2DTORA),由两自由度的
学位