非刚性图像变形算法研究及其在人脸编辑中的应用

来源 :武汉工程大学 | 被引量 : 0次 | 上传用户:xm1209xm1028
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像变形是图像处理和计算机图形学中的一个重要分支和研究热点。在影视动画、虚拟现实、医疗成像、气象预测等很多领域都具有广泛的应用。现有的图像变形算法对刚性的图像变形已取得很好的效果,本文则主要研究非刚性图像变形问题,以及非刚性图像变形算法在人脸编辑中的应用。针对人脸这类具有特定结构的非刚性对象的变形问题,引入局部邻近结构(local neighborhood structure,简称LNS)约束和非刚性模型,提出了一种基于局部邻近结构约束的非刚性图像变形算法。之后结合提出的非刚性图像变形算法和人脸特征点定位算法实现自动人脸变形,再利用Cycle-GAN模型和剪切替换的方法解决图像变形的方法在嘴部变形存在缺陷的问题。最后利用自动人脸变形算法实现图像驱动的人脸变形动画。本文主要研究成果如下:(1)基于局部邻近结构(LNS)约束的非刚性图像变形算法。针对人脸这类具有特定结构的非刚性对象的变形问题,提出基于局部邻近结构约束的非刚性图像变形算法。该算法将图像变形视为以一个图到图的映射,图像中的每个像素点都一个独特的映射函数,即变形函数。变形函数构一个建于再生核希尔伯特空间内的是非刚性变换函数。变形函数的求解使用移动最小二乘法(moving last square,简称MLS),为了得到更自然的人脸变形结果,变形函数的求解过程中引入了局部邻近结构约束。实验表明,对于人脸变形,该算法比现有最优的图像变形算法具有更好的效果。(2)基于人脸特征点定位算法和LNS约束的自动人脸变形。针对人脸变形时选取合适控制点和目标点困难且不方便的问题,提出基于人脸特征点定位和LNS约束的自动人脸变形方法。该方法能够自动将一张人脸的脸型和表情转移到另一种人脸上。首先利用人脸对齐算法精确定位两张人脸的轮廓特征点,然后用一个全局的相似变换进行整体对齐以消除两组轮廓特征点对应的人脸在方向、大小和位置上的差异。最后,使用本文提出的非刚性图像变形算法,利用两组人脸轮廓特征点拟合出每个像素点的映射函数实现对源人脸图像进行变形。该方法可以全自动地实现人脸变换,也可以是半自动的形式,即在自动变换后允许用户通过便捷的方式对不满意的结果进行调整以获得更好的结果。实验表明该的方法能够生成平滑、自然、无明显瑕疵的人脸表情和脸型变换结果。(3)基于Cycle-GAN和自动人脸变形的人脸变换。针对自动人脸变形的方法在特定情形下存在缺陷的问题,引入了Cycle-GAN,并训练了一个对嘴部进行闭合与张开两种状态转换的模型。对于自动人脸变形在嘴部出现缺陷的情形,先利用训练的Cycle-GAN模型对嘴部进行转换,再将转换得到的人脸的嘴部替换源人脸的嘴部,最后再利用源人脸图像和目标人脸图像进行人脸变换。此外还可以利用Cycle-GAN模型进行发色、肤色等不同类型的转换,丰富变换效果。(4)基于非刚性图像变形的人脸表情动画制作。利用提出的非刚性性图像变形算法和实现的自动人脸变换制作人脸变形动画。
其他文献
<正> 孙悟空的原型是来自道教文化的"修炼猿",不是来自佛教文化的"听经猿"。猪八戒的原型是来自道教文化的"黑猪精",不是来自佛教文化的"金色猪";《西游记》杂剧易《西游记平
论文以分布在云南西南部的中国亚洲象种群为研究对象,于2016年1月-2017年3月,在西双版纳州、普洱市和沧源县等所有中国亚洲象分布区开展问卷调查。采用公里网格化问卷调查、样线调查和保险公司象损数据相结合的方法获得亚洲象分布信息和数据。将总面积为40300km2研究区域划分成1612个5km×5km网格,开展了1248份问卷的实地调查。研究结果表明:2006年有亚洲象分布的网格共138个;2011
目的 一、分析总结肝癌合并门静脉高压症的因素及处理原则。 二、探讨肝癌合并肝炎后肝硬化门静脉高压症联合手术治疗的可行性。 三、探讨肝癌合并肝炎后肝硬化门静
本文将神经元裁剪和近似计算技术相结合,首先提出基于统计排序的神经元容错能力量化方法.然后,为了识别神经元的裁剪度,根据神经元的容错能力提出神经元重要程度排序算法.其
基于麦克风阵列的声源定位技术是阵列信号处理领域的一个重要的研究方向,它在车载免提电话、视频会议系统以及军事领域都有着广泛的应用。近年来,基于统计学习和深度学习的声
阅读下面的材料,根据要求写一篇不少于800字的文章。历经几年试验,小羽在传统工艺的基础上推陈出新,研发出一种新式花茶并获得专利。可是批量生产不久,大量假冒伪劣产品就充
<正>如果用历史的眼光来看,我们的音乐事业从来没有像今天这么红火过。这不只体现在人们丰富的文娱生活,我们的音乐事业还在拉动国民经济方面起着重要作用。有一个现实的例子
随着飞机结构和系统可靠性的发展,飞行事故已经大大降低,但是飞行事故依然存在。通过研究发现,这些飞行事故的主要原因是人为因素引起的。目前因人为因素而导致的飞行事故已
目的:胃癌是消化道最常见的恶性肿瘤,死亡率成为各类癌症的首位。近年来,人们虽然通过多种途径对胃癌进行了研究,但没有任何一种指标能确切解释其发病机制。已知胃癌的发生是多途
以枸杞多糖和三氯化铁为原料,合成枸杞多糖铁配合物,产率为39.75%。应用原子吸收光谱法测定配合物中铁含量,为36.71 mg/g。利用紫外-可见光谱、红外光谱两种表征手段,证实了