面向多源数据的B样条人脸重建研究

来源 :天津大学 | 被引量 : 1次 | 上传用户:ZXCVB1230ZXCVB
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人脸模型广泛应用于在众多视觉领域,包括安全监控、虚拟现实、电影动画等等。大多数人脸建模方法基于多边形网格,而实际上,由于多边形网格本身拓扑以及精度的限制,在多源的数据条件下,比如多样性的拍摄设备、拍摄环境以及被拍摄人脸的状态,基于网格的重建不能满足更高要求的精确性和易用性。而B样条曲面相比于点云、网格等人工造型,更近于表达作为有机造型的人脸表面,能够对人脸重建在物理上给予尽可能精确的解释和表达。本文旨在面向多源数据提出基于B样条实现人脸重建的系列方法:利用较少的任意拍摄的图片数据构建与目标较为接近的B样条人脸统一模型;利用较少的任意拍摄的图片构建的B样条人脸精确模型;构建能够精确拟合多样性三维人脸数据的B样条渐变模型。本文研究覆盖了从人脸统一建模、人脸精细建模以及人脸形变模型三个层面的工作并逐步展开研究。首先,本论文针对传统点云和网格模型在几何表达上不连续和不易编辑的缺点,为基于2D数据的人脸重建引入B样条人脸统一建模方法,构建二阶连续的3D人脸表面。该B样条人脸重建模型基于用骨架优化B样条曲面,能够构建在物理上带有个性轮廓特征的B样条人脸曲面。首先,低秩用于估计纠偏的二维骨架,结合结构相似度指标(Structural Similarity Index,简写为SSIM)计算深度信息,最后基于B样条通过调整控制点位置生成三维人脸表面。通过理论分析和实验结果证明了构建B样条人脸统一模型的可行性和有效性。接着,本论文针对统一B样条人脸模型中细节表达不明确的缺点,进一步提出基于B样条参数域的精确一致性建模方法,有利于实现比网格模型更精细的人脸重建。一方面,用基于B样条参数域上的低秩纹理结构和局部法向量分别对立体几何的0阶与1阶一致性进行精细的形式化建模,使模型与几何光学规律完全兼容;另一方面,B样条本身能够进一步减少表面形变所带来的走样。此外,本论文提出了结合两个一致性条件的实用性解决方案以及优化算法,能够高效地优化出具有准确细节的B样条人脸。通过理论分析和实验结果证明了基于B样条参数域的精确一致性建模的有效性。最后,本论文针对经典的人脸子空间渐变模型不能精细拟合人脸细节的缺憾,提出一个参数T样条渐变模型(T-spline morphable model,简写为T-splineMM),能够精确拟合未知来源的三维人脸数据。在模型中,用C~2的参数T样条表面描述人脸,在黎曼映射的参数域上构建基于T样条人脸函数拓扑线性子空间的形变模型。此外,提出拟合算法用于优化个性和表情的控制因子,以及在细化阶段优化细节。由于人脸以及表情的多样性,任何预学习的子空间只能是覆盖有限的渐变范围,而T-splineMM模型能够以更大渐变范围拟合人脸形状、肌肉变化以及微小细节。通过理论分析和实验结果证明了T-splieMM模型在精细拟合任务上的优越性。总结,本文从人脸统一建模、人脸精细建模以及人脸形变模型三个层面逐步展开,系统地研究了B样条人脸重建技术,并提出了一系列建模方法来解决人脸重建任务中的关键子问题。通过理论分析和实验证明了B样条建模在人脸精确重建任务中的可行性、高效性以及相对于传统网格方法的优越性。
其他文献
本文以南宁市地铁1号线试验车站广西大学站基坑工程为背景,通过对基坑工程施工动态监测数据进行分析,总结了广西大学站地铁车站深基坑的连续墙变形及周围地表沉降变形特征。
目的:探讨优化急诊护理流程对急性心肌梗死患者救治效果的影响。方法:选取2015年7月—2016年9月在我院接受治疗的74例急性心肌梗死患者,在入院治疗前通过双色球抽签的方法分
<正> 陈业是在80年代迷上钱币收藏的。 陈业开始收藏时只看重金银币,这一点与外国人对中国钱币的追求有点不谋而合。中国的金银币多是由外国人设计的,形制也是仿照外国的,背
<正>背景:全球证券交易所并购浪潮2011年初发生的证券交易所并购案再次掀起国际市场波澜,上演着2006年纽约证券交易所与泛欧证券交易所合并案的续集。2011年2月9日,伦敦证券
《红楼梦》中的秦钟,尽管作品中关于他的内容并不多,但他是作为贾宝玉的为数不多的男性“情友”形象出现在书中的。从曹雪芹对他的描写中,我们不难发现,作者对他的态度并非是
中国刑事诉讼人权保障在实践中存在诸多问题,刑讯逼供、超期羁押、非法取证、冤假错案等都表征了中国刑事诉讼人权保障机制之缺陷。从刑事诉讼人权保障机制之内外关系、实践
目的:探讨采用选择性脑亚低温联合高压氧治疗重型脑外伤颅内血肿患者的临床效果。方法:将90例重型脑外伤颅内血肿患者按随机数字表随机分为A、B、C组,每组各30例。A组患者采
通过构造地质学、矿床学、地球化学研究 ,认为燕山早期环太平洋板块的俯冲碰撞与小江深断裂带、曲靖 昭通隐伏断裂带的左行走滑运动为深源流体的形成和贯入提供了有利的构造
<正>乳腺癌是女性最常见的恶性肿瘤之一,在我国,女性罹患恶性肿瘤中的7%~10%为乳腺癌,发病率居女性恶性肿瘤之首位[1]。乳腺癌的治疗已经由手术后化疗进展为手术前即进行全身
随着我国互联网金融的兴起,和传统金融服务供给的严重不足,使得中国的移动支付规模进一步扩大,尤其在第三方移动支付领域更为明显。而相较于其他支付平台,蚂蚁金服旗下的支付