【摘 要】
:
蒙特卡罗路径追踪渲染算法是渲染照片级真实感图像的主流方法,其通用性与无偏性使得该方法被广泛运用至影视动画制作、虚拟现实、实时游戏、艺术视觉设计等领域。然而,该方法需要采样大量的光线路径才能得到正确的像素值估计,导致计算成本高昂,反之在低采样率下的渲染结果在视觉上表现为大量噪声。为了减少计算与时间成本,设计特定的去噪方法去除低采样率下的图像噪声成为了普遍的解决方案。近年来,深度学习技术的发展为许多领
论文部分内容阅读
蒙特卡罗路径追踪渲染算法是渲染照片级真实感图像的主流方法,其通用性与无偏性使得该方法被广泛运用至影视动画制作、虚拟现实、实时游戏、艺术视觉设计等领域。然而,该方法需要采样大量的光线路径才能得到正确的像素值估计,导致计算成本高昂,反之在低采样率下的渲染结果在视觉上表现为大量噪声。为了减少计算与时间成本,设计特定的去噪方法去除低采样率下的图像噪声成为了普遍的解决方案。近年来,深度学习技术的发展为许多领域带来了新的突破,尤其是基于生成对抗网络的图像去噪,本文以去噪蒙特卡罗渲染图像作为切入点,研究如何使用生成对抗网络去除蒙特卡罗渲染图像的噪声。基于生成对抗网络的去噪蒙特卡罗渲染模型已经被证明可以显著超过传统蒙特卡罗去噪算法,然而,其仍然存在许多问题,比如:(1)辅助缓存图作为渲染过程的副产品没有在去噪过程中较好的利用。(2)去噪结果过度模糊或者过度平滑,模型鲁棒性低。为此,本文提出了一个新颖的模型结构,该模型以离线速率运行,包含了融合多尺度信息的层级辅助特征提取与渐进式调制模块使得辅助缓存特征与噪声特征在像素级别交互,提出了自适应加权的通道注意力模块以避免网络在面对不同程度的噪声时缺乏灵活性,还引入了可变性卷积更好的恢复图像的空间细节和纹理。在后续研究中,本文还探索了如何在交互式帧速率的限制下去噪每像素光线采样数仅为1的噪声动画序列帧以面向交互式应用,为此,本文提出了一种联合直接预测与核预测的网络模型以保证交互式帧速率的同时提升去噪质量。此外,在核预测网络中,本文提出了一种基于双边滤波的核权重生成方法以让深度信息与法线信息指导核权重的生成。为了验证模型的优越性,本文还创建了一套包含若干个动画序列帧的训练数据集。实验结果表明,在精心设计的网络结构与对抗性损失函数的帮助下,本文所提出的两个去噪模型在视觉效果和数值指标方面均超过了先前最先进的方法。
其他文献
就业是民生之本,大学生就业如今已成为我国经济与社会的一个重大问题,特别是百年未遇的新冠疫情爆发以及随之引发的全球经济衰退使这一问题更加凸显和紧迫。目前,社会各界都针对就业问题展开了多学科研究。本文试图在借鉴已有研究成果的基础上,通过梳理马克思、恩格斯、列宁和我们党主要领导人关于就业的理论和论述,并以此为指导,将大学生就业工作与“大思政”教育结合起来,按照多元、多维、协同、系统的就业育人体系要求,对
“治理有效”是乡村振兴的总要求之一,而“三治融合”乡村治理体系是实现“治理有效”要求的重要方式。以社会资本理论为研究视角,结合中国乡村治理实践,提炼政党领导、社会信任、互惠规范和关系网络的分析框架,立足鄂西W村“三治融合”乡村治理体系的地方实践,研究“三治融合”乡村治理体系的生成逻辑与未来路向:发现“三治融合”乡村治理体系的生成逻辑为乡村社会资本再造为“三治融合”乡村治理体系生成提供条件,即基层党
视频时序性是视频帧序列区别于图像的一个重要特征,常视为图像级算法到视频级算法的桥梁,以提高视频算法的性能和效果。当前互联网发展,短视频成为了信息传播的主流途径,为了让用户获得更好的视觉体验,一些基于视频的处理算法越来越收到关注。基于深度神经网络的图像处理算法层出不穷,而视频的处理方式则相对简单,之前的方法没有很好的利用视频中的时序性,简单地将图像处理方法直接拓展到视频域中会带来帧闪烁问题;其次,由
随着互联网的飞速发展和数据的爆炸增长,出于网络服务提供商和用户两方面的需求,推荐系统得到了广泛的应用。一个好地推荐系统不仅可以让用户有效的获取到他所需要的服务,提升用户的满意度,同时也可以让服务提供商吸引用户,为其产生无法忽视的商业价值。对于推荐系统来说,点击率预估问题是至关重要的。随着近些年机器学习的不断发展,现在基于机器学习方法的点击率预估模型被广泛的应用。这些模型也取得了很大的成功,但是其仍
零样本学习的目标是去识别在训练过程中没有出现的类别,对于传统的分类方法很难依靠训练集中的样本来识别没有见过的类别。因此早期的零样本学习方法开始引入其他模态的信息如语义特征来帮助识别不可见类别的视觉特征,通过训练一个嵌入空间,将视觉特征和语义特征投影到这个共同的空间,再通过该空间中的度量学习完成预测,本文把这种方法称为基于嵌入式的方法。然而,这种方法很难避免偏差问题,即不可见类别会更容易被误分类为可
【目的】通过梳理工业革命发展的历史进程和基本逻辑,探寻智能制造时代制造业的特征和本质,在智能化时代下提出促进洛阳制造业高质量发展的对策。【方法】通过访谈等实地调研的方法分析洛阳市制造业智能化改造过程中遇到的主要问题,探索相应的解决方案。【结果】存在中小民营制造业企业智能化投入有限、意愿不强,制造业企业智能化改造进展缓慢,制造业发展营商环境欠佳等问题。【结论】从夯实企业基础创新能力、推进新一代信息技
在数字经济时代,制造业企业质量管理转型迫在眉睫。本文首先基于质量管理的特征梳理了数字技术给制造业企业质量管理转型带来的机遇,接着提炼了数字化情境下质量管理转型的“四阶段”路径,最后从三个方面总结了质量管理数字化转型的注意要点。
视频文本检索任务要求用户输入一段查询文本(视频),检索出语义最相近的视频(文本)。目前的视频文本检索方法大多从图像文本检索领域转化而来,而图像只包含空间信息,不含时序信息,因此迁移而来的大部分方法缺少对视频中时序信息的建模。当前也存在少数方法利用卷积神经网络和循环神经网络对视频进行时序关系推理,但是当视频内容涉及到空间转换、背景转换或动作等信息时,效果就不如人意。因此本文重点关注视频时序信息的建模