基于深度学习的人脸关键点检测方法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:sikongshan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸关键点检测是计算机视觉领域中的一项经典任务,具有重要的学术研究价值和商业应用前景。近年来,深度学习技术的兴起加速了其研发进程。大量基于深度学习的人脸关键点检测算法被提出,其中基于坐标回归和基于热图回归的两大类方法由于性能优越而备受青睐。坐标回归方法利用图像信息直接对人脸关键点的坐标值进行预测,而热图回归方法则将人脸关键点检测问题转换为热图估计问题进行求解。一般而言,热图回归方法的检测性能较好,但执行算法所需的时间相对较长,坐标回归方法的检测性能偏低,但执行算法所需的时间相对较短且更容易控制。本文对基于热图回归的人脸关键点检测算法进行了深入研究。首先借助于经典的堆叠沙漏网络实现了对人脸关键点的初步检测,其次针对原始沙漏网络存在的编码器特征提取能力相对较弱、解码器没有充分利用不同尺度特征之间的互补性等问题,提出了一种改进的堆叠沙漏网络,通过使用更强、更通用的特征提取器来替换原始的编码器,同时在解码器中嵌入多尺度特征融合模块,显著提高了网络的特征表达能力,取得了较好的人脸关键点检测效果。然而,上述基于热图回归的人脸关键点检测算法由于其不可微的后处理操作导致输出结果是离散数值,存在量化误差,检测出的人脸关键点坐标与实际位置之间仍有一定的偏差。鉴于此,本文进一步提出了一种基于偏差学习的两阶段人脸关键点检测算法。考虑到坐标回归网络具有输出连续数值的特点,本文利用坐标回归网络拟合热图回归网络的预测结果与对应的真实标签之间的偏差,然后将坐标回归网络和热图回归网络进行模型融合,进一步提升了人脸关键点检测的性能。此外,针对实际需求本文还开发了一个视频中的人脸关键点实时检测系统,基于轻量级的坐标回归网络实现了人脸关键点检测算法,能够在计算机CPU上实现实时检测。针对视频中人脸数目是否会发生变化,本文给出了适用于人脸数目变化场景和适用于人脸数目固定场景的两种设计方案,其中前者采用了逐帧检测人脸和人脸关键点的策略,而后者仅对视频起始帧检测人脸,后续各帧的人脸矩形框根据其前一帧的人脸关键点检测结果推算并外扩得到,从而避免了逐帧检测人脸的过程,进一步节省了系统的处理时间。
其他文献
目的: 观察成牙本质细胞突在牙本质小管中的分布. 方法: 取24颗无龋或釉质龋的恒前磨牙,20颗免疫组化染色,4颗扫描电镜观察. 结果: 阳性染色的波形蛋白结构在牙本质小管内呈
目的探讨在产程潜伏期与活跃期下间苯三酚对宫颈扩张效果的影响并与哌替啶比较。方法选择正常足月妊娠宫颈评分4~7分的初产妇243例,分为间苯三酚组、哌替啶组和对照组。间苯三
进入新时代,公共健康作为人民实现对美好生活的这种需要不断得到保障和实现,党中央不仅结合国内公共健康发展水平和现状制定了《“健康中国2030”规划纲要》、《健康中国行动(2019-2030)》、《健康中国行动组织实施和考核方案》等实施战略,从顶层设计一点点深入基层民生,从宏观政治决策细化为微观政策执行,体现“人的价值实现”越发有了坚定的信心。但不能忽视的是在风险社会中潜存的风险时刻威胁社会发展这样一
发达国家和发展中国家的经验都表明,建立经济特区是调动投资积极性的有效形式之一。本文从俄罗斯和白俄罗斯学界对经济特区的定义入手,分析经济全球化进程中白俄罗斯、拉脱维
微课作为教育教学的一种全新方式,正在全国甚至全世界范围内影响着各个层面各个层次的教育,医学教育也不例外,微课已经成为高等医学教育教学改革的热点。基于微课理念,我们在
小学生处于生长发育的起步阶段,也是培养学生身体活动及兴趣爱好的关键时期,关注学生体质健康、了解小学生身体活动变化规律对采取合理有效的干预措施有较大的帮助。而在对我
高血压脑出血是常见、多发病,死残率较高.我院自2001-09~2003-07施行硬通道微创颅内血肿清除术治疗高血压脑出血29例.现将手术时机、技巧要点讨论如下.
随着生物模式的转变,心理护理已成为整个医疗过程的重要部分.我院剖宫产手术病人逐年上升,自1999年1月~2000年12月做剖宫产手术1808例,年龄23岁~43岁.剖宫产手术病人的术前、术
龙门加工中心作为大型数控加工设备,其零部件的设计和性能直接影响机床的加工精度。在加工过程中的振动和受力是造成加工精度下降的主要原因,剧烈振动甚至会导致零部件的损坏