基于深度学习的漫画线稿图像着色方法研究

来源 :西北大学 | 被引量 : 0次 | 上传用户:yzymd_223
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在绘画创作中,着色往往是最花费时间的步骤之一。传统的灰度图像着色方法,通过灰度图像中包含的灰度区域连续性特征,对图像中灰度信息相同的区域进行区域分割进而达到着色的目的。然而,黑白线稿图像只存在图像轮廓线条,不具备灰度区域信息,针对灰度图像的颜色重建方法不能很好地适用于黑白线稿图像。在大数据驱动的深度学习技术越来越成熟的背景下,漫画线稿图像自动着色技术为动漫的快速高质量制作带来了新的机遇。本文针对漫画线稿图像着色过于复杂的问题,设计实现基于条件生成对抗网络的漫画线稿图像自动着色方法和用户引导的线稿图像辅助着色方法,简化漫画线稿图像着色过程。主要工作如下:(1)提出一种基于条件生成对抗网络的漫画线稿图像自动着色方法。为了解决提取线稿图像与真实线稿图像的差异性导致的模型自动着色效果不理想问题,使用结合预训练的局部特征提取网络的条件生成对抗网络,提高模型对真实线稿图像的泛化能力。其次,在生成器和判别器网络中使用Res Ne Xt模块增强模型的学习能力。实验结果表明,该方法相比Paints Chainer的Tanpopo、Satsuki和Canna自动着色方法能够取得更小的Frechet Inception距离得分,达到更好的着色效果。(2)提出一种基于用户色点笔触引导的漫画线稿图像辅助着色方法。针对漫画线稿图像自动着色方法合成结果着色效果单一,不能满足用户多样性要求的问题,更改生成器网络结构,在训练阶段,将模拟色点笔触图像作为生成器的条件输入,引导模型产生不同的着色效果。相比Paints Chainer的Tanpopo、Satsuki和Canna用户引导着色方法,该方法取得了更高的平均主观得分,并且更易于用户进行二次着色。(3)提出一种基于参照彩色图像的线稿图像辅助着色方法。针对已有方法不能有效利用已经存在的彩色图像问题,利用预训练的视觉几何组网络模型提取参照彩色图像的颜色分布特征引导模型进行着色。并且设计使用SE-Res Ne Xt子模块,自动学习不同通道间特征关系,利用颜色分布特征提高线稿图像着色效果。实验结果表明,该方法能够生成与参照彩色图像相同颜色风格的彩色化结果,并且取得良好的着色效果。
其他文献
随着互联网信息规模的急速膨胀,对大规模数据进行快速处理、学习和挖掘的需求也变得越来越多。在许多真实应用比如社交网络中,具有图结构的数据的规模也在不断变大。因此,基于图计算的大规模分布式(并行)机器学习框架受到了越来越多的关注。一方面,许多数据间的依赖关系可以自然地用图来进行建模,而且许多数据本身就具有图或网络的结构,例如社交网络数据;另一方面,许多机器学习和数据挖掘的算法也可以用图或网络来建模。在
常压容器作为化工产品生产、存储及运输的常用设备,具有广泛的应用需求。危化产品常压容器罐底经长期使用后极易出现腐蚀减薄、电化学腐蚀等结构性缺陷,极大增加了化工产业的
随着移动互联网的发展,越来越多的用户通过移动终端,使用数据流量观看视频。用户在观看移动视频的同时,产生了大量的行为数据。从用户的行为数据中分析用户的属性信息,挖掘用
随着人工智能技术的飞速发展,人工智能时代即将到来,要进入这一崭新时代,就要使得机器能够完美地理解人类的动作,因此对人体动作识别方面的研究就必不可少。人体姿态估计作为
创新和创业活动是提升现代经济质量的重要途径。但创业者资源少、存活率低的问题仍未得到有效解决。我国创业活动逐渐兴起,但面临严峻挑战。在分析创业者融资方式的过程中,文
新中国成立以后,妇女解放事业迅速发展,妇女地位不断提高,但形式上的平等不代表事实上的平等,新的历史时期仍然存在着妇女就业、政治、教育等权利不平等。研究陈独秀的妇女解
视频目标分割是场景理解的基础,对计算机视觉中多个领域的研究具有重要意义,包括动作识别、自动驾驶汽车、目标跟踪等。半监督的视频目标分割方法根据给定的第一帧掩码标注,自动地分割后续视频帧中的目标,需要的人工干预少。近年来卷积神经网络的发展和大型数据集的出现使视频目标分割的精度得到了显著提升。然而大部分精度较高的半监督算法依赖于在线微调过程,增加了额外的时间代价。由于视频场景多样化,一方面目标在表观和尺
建筑工程结构随着人们使用的时间和外部环境的作用,会发生相应的老化并出现不同程度、不同形式的结构损伤。结构损伤的识别、检测以及修复维护对于结构安全具有重要的作用。
VO2在68℃附近发生可逆一级金属—绝缘体相变(MIT),在相变区域伴随着光吸收、折射率、电阻率、磁化率和比热等物理性质的改变。前期研究表明,VO2薄膜具有电阻温度变化系数(TCR)高
柔性应变传感器由于其灵活性,延展性和便携性,在人工智能、生物电子、医疗以及人机交互领域具有广泛的应用前景。构想、设计和制备用于人体运动和手势识别的柔性应变传感器最