基于图神经网络学习的人脸重建方法研究

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:xjp_djx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸重建在人脸识别,人脸表情分析以及人脸动画等领域有着广阔的应用。现有的人脸分析算法通常使用规则矩形网格进行人脸局部特征提取,提取得到的特征会包含背景等与目标无关的信息。同时人脸图像往往具有较为固定的结构,对于不同的2D人脸图像,相同位置反映的纹理较为相似。考虑到这两点原因,本文针对人脸重建问题提出了一种新的基于图神经网络的回归方法。该方法将输入人脸图像或者3D人脸模型转化为图结构,并为图结构中的每一个结点训练一个浅层的神经网络,将原始的全局人脸重建问题分解为多个较为简单的局部重建问题。图神经网络同时考虑结点之间纹理以及几何相似度,并利用图的深度优先搜索算法,实现了各个子网络之间的参数传递,加快了网络收敛速度的同时,提升了算法精度。本文主要将图神经网络的回归算法应用于两类人脸重建问题:(1)单张图像的人脸超分辨率重建;(2)单张图像的3D人脸重建。在人脸超分辨实验中,本文提出的方法在与最新的人脸超分辨方法的对比中超越了所有其它算法,达到了最好结果。同时在与基于深度网络的自然图像超分辨算法的对比中,图神经网络达到了与深度网络相当的结果,并且在高降采样图像上表现出色,超过所有其它算法。3D人脸重建算法中,本文针对人脸重建过程中的数据生成以及预处理首先提出了一种新的自增强学习2D人脸特征点检测算法。该算法使用一种基于特征数的全局几何约束和基于纹理特征的局部纹理约束,可以在只有少量训练样本的情况下,半监督地扩大训练样本数量,对基于级联回归和深度学习的特征点检测算法精度的提升达到10%左右。其次本文还提出了基于共形映射的3D人脸特征点检测算法,该算法通过共形映射算法将3D人脸特征点检测问题成功简化为2D人脸特征点检测问题,在FRGC v2.0数据集上的比较实验中达到最小平均误差。最后在3D人脸重建实验中,图神经网络算法面对具有不同光照不同姿态以及表情的2D人脸图像,都很好的重建出人脸的全局以及局部几何结构,并在定量实验中超过了最新的Lm2Vertex以及具有50层卷积层的残差网络算法,达到最高的重建精度。
其他文献
<正>随着生物-心理-社会医学模式的落实,心理卫生服务受到广泛关注。各国在心理学研究领域积极投入,且成立心理战部队深化其应用。我国心理学研究也取得长足进步,但非战争军
作为未来通信网络技术发展趋势之一,物联网是复杂、综合的跨学科研究领域,在设计、研究和实现等各个方面均面临着诸多难题和挑战,存在大量的基础科学问题亟待解决,如大规模网
《关于莉莉周的一切》是日本青春影像大师岩井俊二的代表作品之一。影片围绕一群青少年在困境中的挣扎与求索,谱写了一曲特殊情境下的青春残酷物语。带有实验性质的视听体验,
自拟消坚丸(当归、白胶香、细辛、三棱、乳没、山慈菇等)内服,配合外贴红膏药(东丹、雄黄、松香等)治疗瘰疬58例,治愈47例,总有效率96%。提示内外合治,补血活血,消肿软坚为本
美国加入并全力主导TPP,掀开了TPP时代的序幕,之所以称其为一个时代,是因为它标志着美国战略东移的新时期、打开了亚太区域合作的新局面、昭示了美中日博弈关系的微妙转变。T
目的研究等离子低温射频消融术联合术中牵引治疗颈椎间盘突出症的手术效果。方法纳入2015年1月~2018年1月于本院治疗的104例颈椎间盘突出症患者,均采用等离子低温射频消融术
<正> “讯问——是一种侦查和审判活动,是审讯机关或法院根据刑事诉讼法的规定,从受讯问人那里获取他所知道的对正确判决刑事案件有意义的信息。”(H·N·波鲁鲍夫著,冯树梁
光子晶体是一种具有周期性结构的新型光学材料,由于它具有光子局域、光子禁带、抑制自发辐射等特性,使得光子晶体可以自由地控制光子的运动,用来制作全新原理或高性能光电子
目的系统评价复方阿嗪米特治疗胆囊切除术后功能性消化不良(FD)的疗效及安全性,为临床提供依据。方法检索国内外数据库有关复方阿嗪米特治疗胆囊切除术后功能性消化不良的随
社会工作是一门应用性科学,专业实习在社会工作学习中扮演着重要的角色,而督导是促进实习顺利进行的必不可少的要素之一。由于内地社会工作发展起步较晚,社会工作专业教育者