基于深度学习的三维人脸重建算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:qq68813172
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术的飞速发展,三维人脸重建成为计算机视觉领域的热门研究课题。三维人脸比二维人脸包含更多的身份特征信息,可应用于更丰富的实际场景,如人脸识别、影视娱乐、医疗美容等。由于目前三维真实人脸数据采集成本过高,且传统三维人脸重建算法效率低下,本文提出基于二维图像的三维人脸重建算法,将传统三维形变模型(3DMorphable Model,3DMM)与深度学习算法相结合,利用深度神经网络直接从二维人脸图像中预测重建三维人脸所需的3DMM系数,操作简单,成本低廉,具有广泛的应用前景。针对传统人脸对齐算法无法检测大姿态人脸图像中不可见特征点的问题,本文提出了一种三维人脸对齐与三维人脸几何形状重建算法,即对重建后的三维人脸进行顶点采样得到对应人脸图像的特征点。本文对三维密集人脸对齐算法(3D Dense Face Alignment,3DDFA)中存在的几个问题分别进行了改进:其一,选择DenseNet替换3DDFA算法中的级联回归网络,以提升模型的拟合能力;其二,提出了一种半监督学习模型,利用大量无三维标签的二维人脸图像来解决训练数据不足的问题。本方法在公开数据集AFLW和AFLW2000-3D上的对齐精度分别提升了 1.5%和2.9%。此外,为解决传统纹理贴图方法无法提取人脸边缘不可见区域纹理的缺陷,本文提出一种纹理优化算法,改善了三维人脸边缘处的纹理。为进一步解决输入图像中存在大姿态或遮挡等极端情况下的人脸纹理重建问题,本文提出了一种可同时重建三维人脸几何形状与纹理信息的弱监督学习算法。为实现纹理重建,本文利用可微分渲染器SoftRas在重建三维人脸与二维人脸图像间建立起像素级别的弱监督信号;为减少遮挡对纹理重建的影响,本文利用一种人脸分割算法对人脸图像进行预处理以去除遮挡;为提升重建精度,本文设计了一种multi-level损失函数,无需三维标签数据,可直接从二维图像中学习多种不同维度的弱监督信息。通过定性与定量的对比实验证明,本算法在重建质量与精度都实现了一定的提升,能够重建出具有真实感的三维人脸。
其他文献
<正> 我国的民行检察工作开展十余年来已经取得了不菲的成绩,然而由于种种原因,目前的工作中还存在着不少问题,民行检察制度还存在着一些缺陷,有待于进一步完善。下文拟对该
一、职务犯罪侦查谋略的概念职务犯罪侦查谋略是指检察机关的侦查部门为揭露、证实贪污贿赂犯罪和渎职侵权犯罪等职务犯罪,查获犯罪嫌疑人,依照法律规定进行的专门调查工作中
目的分析与比较欣母沛与米索前列醇用于预防剖宫产术高危孕妇产后出血的分析结果。方法在2012年5月-2013年5月期间,抽样选取于我院进行剖宫产手术的96例高危产妇且将其均分为
检察机关这些年来在惩治贪污贿赂、查处侵权渎职等职务犯罪方面的成绩是卓著的。贪污贿赂等职务犯罪在广度和深度上还有扩大和蔓延之势。一手抓打击,一手抓预防,只有两手都抓紧
呼叫中心从建设形式上可以分为企业自建自用型和独立外包型两种。企业自建自用型的呼叫中心作为企业的一个有机组成部分,主要目的是为企业自己的目标客户提供销售,技术支持或售后服务。这样的呼叫中心业务是企业经营活动的一部分,也只能作为企业整体品牌建设的一个工具,它本身并不需要独立的品牌建设。而独立外包型呼叫中心本身就是一个独立的企业,它为其它企业提供呼叫中心外包服务,它的客户是那些需要呼叫中心服务,但又不准
期刊
目的对比相关神经免疫调节因子在特应性皮炎患者以及正常对照者中的表达情况,总结探讨其对患者疾病严重程度的影响,旨在为临床有效治疗提供理论依据。方法选择我院皮肤科特应
如今,中国的电子商务市场又火起来了,外国电子商务巨头纷纷进入中国,同时一些大型的电子商务网站也出现赢利的局面,这无疑给投资者带来了巨大的鼓舞。不过,在激烈的市场竞争中,还有很多电子商务网站仍处于亏本的状态,那就是为数众多的中小型电子商务网站。  跟阿里巴巴这样的大型电子商务网站相比,中小型电子商务网站没有那么雄厚的资金,没有那么优秀的人才,也没有那么强大的技术。但是这些不一定就完全决定了中小电子商
1997年刑诉法修改后,新增设了简易程序,这一程序的增设,使适用该程序的案件在审判组织、审理程序得到简化,使审查起诉和出庭公诉得到简化,使证人、鉴定人出庭作证得到简化,从而提高
虽然距10月31日“禁液令”的解除日期还有一个多月的时间,不少经营化妆品的商家都悄悄备货静候“禁液令”的解除。淘宝、易趣等网站上,不少经营化妆品的网商已经开始陆续准备了。据了解,网购市场每年的交易额化妆品占了1/4,网购化妆品市场的回暖,几乎预示着网购市场将重新热闹起来。  国家统计局网站公布的数据显示,全国城镇居民2007年人均可支配收入金额为14140元,而同年的网购人均金额为1080元,20
简要案情:某区检察院对王某等三人共同盗窃案向某基层法院提起公诉,要求追究其刑事责任。三被告中只有王某一人委托了辩护律师。案件如期开庭,控方亦派员出庭支持公诉。庭审结束