基于Residual-WGAN的人脸图像修复研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:liongliong575
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字人脸图像修复指利用计算机手段将有缺损地人脸图像进行恢复的过程。按照一定的规则借助缺损区域的领域像素信息修复图像,目的在于使得观察者无法辨别出是否为缺损图像。图像修复在多个方向上都有应用,如:老旧图像复原、遮挡物移除、视频信息恢复等。传统的图像修复技术修复的图像往往会出现模糊不清、伪影等问题;当缺损区域较大时,也无法很好完成修复工作。当涉及人脸图像修复时,仅利用信息扩散原理预测缺损区域已无法达到修复要求。本文提出了基于Residual-Wasserstein生成对抗网络的人脸图像修复算法。该算法创新点在于能够非监督地从深层次网络中获取背景信息来完成图像修复。在改善了传统修复算法模糊不清等缺陷时,利用深度学习进一步提升了图像的生成与修复效果。本文主要工作如下:(1)研究生成对抗网络的训练方法与模型结构,该网络在无监督学习方面具有优秀的生成效果,却存在很多缺陷,如梯度弥散、训练过程不稳定、收敛难等问题。引入DCGAN能将生成对抗网络用于图像处理,WGAN能够解决梯度弥散、收敛难和训练易崩溃的问题。本文基于以上网络对传统的生成对抗网络进行改进并训练。(2)同时引入残差网络与谱归一化算法,本文提出了 Residual-WGAN算法构建训练网络。引入谱归一化算法在不改变参数矩阵结构的情况下使网络满足Lipschitz连续性,增强训练能力。(3)本文定义了由语境损失、感知损失和Wasserstein损失三位一体的损失函数训练网络。首先在CelebA中随机选取5万个数据输入网络进行训练,再将待修复的图像输入训练好的网络生成出一系列伪造图像。之后结合语境损失和感知损失从中选出最佳伪造图像。从而贴补进缺损图像中实现图像修复的目的。最后通过PSNR和SSIM方法验证修复效果得出,修复后图像的PSNR平均值为22.23dB,SSIM平均值为0.8609,与采用DCGAN网络修复的效果相比,PSNR与SSIM的值分别提高了 2.86dB、0.0528.也能得到更清晰的视觉效果。
其他文献
经济全球化是世界经济发展到一定阶段而出现的一种发展趋势,它对包括国家关系在内的全部人类社会带来巨大的冲击,加深了国际社会的相互依存,促使一国政治经济与世界政治经济
近年来,规划中的学习问题重新受到了关注.如何通过学习机制改善现有规划器,使其能够可靠而令人信服地超越现有非学习的规划器的能力,仍然是一个尚未解决的难题.提出了面向规
粒子群算法在电力系统无功优化中容易出现局部收敛和早熟的现象,对传统粒子群算法进行了改进。改进算法对当前全局最优粒子进行临近搜索(NSGOP-PSO),加快了粒子群的搜索速度和
针对目前选择性催化还原脱硝技术在使用过程中需要对废气进行高温加热、成本高、在应用过程中催化剂极易出现中毒失活、可靠性差的问题,提出了一种新的超低温催化脱硝技术,以
对大规模风电接入末端网架结构薄弱的电网,运行中联络设备跳闸,局部地区解列后出现的含风电在内的末端电网高频问题进行了深入分析并提出了解决措施。以新疆阿勒泰电网为例简