【摘 要】
:
随着手机等便携拍摄设备的普及,越来越多的人愿意选择自行拍摄照片并进行图像编辑,这其中就涉及到了一项重要的计算机视觉技术图像修复。本文主要对使用深度学习中的注意力机制方法进行图像修复进行了深入的研究。现有的图像修复方法在一些复杂大型孔洞上仍然存在填充结果不合理颜色模糊差异等问题。除此之外,现在手机的像素也变得越来越高,人们对于现有的图像修复方法达到的效果逐渐不满意。图像修复任务在现实生活中应用最广泛
【基金项目】
:
机器学习研究实验室国家自然科学基金研究项目“多域视觉学习”(批准号:U19A2073)和“多类型视频去模糊的深度模型与非精确监督方法研究”(批准号:62172127);
论文部分内容阅读
随着手机等便携拍摄设备的普及,越来越多的人愿意选择自行拍摄照片并进行图像编辑,这其中就涉及到了一项重要的计算机视觉技术图像修复。本文主要对使用深度学习中的注意力机制方法进行图像修复进行了深入的研究。现有的图像修复方法在一些复杂大型孔洞上仍然存在填充结果不合理颜色模糊差异等问题。除此之外,现在手机的像素也变得越来越高,人们对于现有的图像修复方法达到的效果逐渐不满意。图像修复任务在现实生活中应用最广泛的就是物体移除任务,当图片中存在我们不想要的物体时本文想将其去除并且不影响图片整体效果,但现有的物体移除方案都没有考虑到物体阴影的存在,于是本文针对以上三个问题围绕着注意力机制对现有的图像修复方法进行改进从而提升图像修复的效果和图像修复方法的泛化能力。首先本文通过掩码和边缘注意力机制提升不规则孔洞的图像修复效果,本文提出了多尺度边缘生成模型,该模型可以针对缺失区域生成连续准确度高的边缘。然后编码器端提出了可学习的掩码和边缘前向注意力机制模块,预测的边缘引导掩码根据结构感知更新并且由掩码生成的注意图进行特征重新归一化,解码器端进一步提出了可学习的掩码和边缘反向注意力机制,更加强调填充未知像素。高分辨率图像修复问题也随着拍摄设备的像素提高变得越来越重要,本文接着提出了一种跨层自注意力机制的高分辨率图像修复网络,考虑到高分辨率图像中经常存在纹理结构相似但尺度不同的图像块,所以本文使用跨层自注意力模块构建不同层的特征之间的联系,考虑到对于不同层的注意力特征来说,与缺失区域的某一图像块最为相似的一些图像块理应是相对位置相同的,所以本文引入了一致性损失。为了测试模型的鲁棒性,本文也自行制作了一个小规模的真实场景下的高分辨率图像数据集。本文最后提出了基于示例级阴影移除和阴影生成的图像修复方案,总的来说,本文提出了一种阴影预测模型并将其应用于两个图像修复相关任务示例级阴影移除和示例级阴影生成中。本文提出的方法性能优于最先进的方法,并有效地在图片中移除物体的同时将其阴影移除,在图片中添加物体的同时生成其对应的阴影。
其他文献
在基础教育课程教学领域,学习者视角的思想和方法自20世纪末逐渐在世界范围内兴起,其核心是通过研究师生综合数据信息、关注课堂教学过程,了解学生与教师对课堂意义的解构与重构,探究教与学之间的关系。绘本因其内容和形式的图文并茂、价值观念的儿童本位主义,成为学校课程与教学的独特资源。教育者在运用绘本时,需要尊重学生的天性,激发学生的求知欲和好奇心,保护和发展学生的想象力,以使学生获得成长和进步。学习者视角
数字化时代下自闭症儿童绘本发展现状还不成熟,存在市场空缺大、绘本设计中存在社会刻板印象、设计缺乏时代特征性、绘本缺乏趣味性等问题。如何通过数字化技术的应用使自闭症儿童绘本得到发展,本文将从交互性、时代性、趣味性3个方面寻求数字化转型下的自闭症儿童绘本发展新途径。
文章针对学龄前儿童绘本信息可视化设计展开阐述,并结合当前学龄前儿童的心理特点和绘本使用现状,对学龄前儿童绘本的信息可视化设计现状和重要性进行分析。首先通过文献研究法、历史法探究了信息可视化的特征及发展脉络,其次,通过经验总结出了学龄前儿童绘本的信息可视化设计表现。最后,研究得出信息可视化作为不同于以往单纯的文字传播方式,给儿童的日常生活和教育活动带来了一定的变化,并且也深深地影响着儿童教育的教学方
图像语义分割任务作为其他高层图像处理任务的基石,从始至终都是计算机视觉应用领域的关键和热点研究方向,其对于汽车自动驾驶,人机交互等与人类生活密切相关的应用领域,也产生了巨大作用。随着人工智能与深度学习技术的兴起与发展,采用深卷积神经网络(Deep Convolutional Neural Network,DCNN)技术的一系列图像分割方式和早期方案相比性能有了很大的改善。这种基于深度学习的方式,通
乌尔逊-贝尔凹陷是海拉尔盆地上油气勘探开发的重要区域,由于经历了多期构造变形的叠加,呈现出现今地层断裂极其复杂的局面,其典型斜坡带上的油气成藏现象明显,是小型断陷湖盆油气预探与规模增储的主要突破方向。本论文在前人研究的基础上,以海拉尔盆地乌尔逊-贝尔凹陷为靶区,系统分析典型斜坡带的构造演化过程及油气富集规律研究。基于斜坡断层的平面特征和剖面特征,明确其几何学特征,绘制位移距离曲线和生长指数曲线,判
新时代新征程,建设宜居宜业和美乡村正当其时。文章从西安市高新区宜居宜业和美乡村建设现状出发,详细地分析了西安市高新区建设宜居宜业和美乡村存在思想认识有待提高、建设资金有待落实、村庄方案有待完善、建设标准有待提高的问题,有针对性地提出了深刻理解宜居宜业和美乡村建设内涵;聚焦特色产业,实现乡村村民增收;推进乡村创新改革,强化长效治理;改善高新区人居和人文环境的对策,以期加快西安市高新区宜居宜业和美乡村
数字出版技术场域的变迁与新兴科技的发展紧密关联,当下,AI、VR、云计算、区块链等新技术正不断推动数字出版的创新与发展。持续涌现的数字出版新技术使得儿童绘本的交互形式实现了从线性式、多媒体化向立体式、沉浸式与多模态化的转变。未来,随着数字出版技术的进一步更新与迭代,儿童绘本的交互性将全面升级——在VR、AI、数字孪生、数据挖掘、云存储等数智科技构建的数字出版新技术场域中,儿童绘本或将实现从图文、声
J凹陷二叠系L组非常规油气资源丰富,分布范围广,纵向发育多套有利层,叠加厚度大,凹陷东区目前已经实现开发,西区也具备良好的效益勘探前景。但J凹陷西区L组细粒沉积成因及分布规律不明朗,储层主控因素、分类评价及分布规律不清,这是当下急需解决的关键问题。本文依据岩心、测井、地震及室内实验等资料,以高分辨率层序地层学、储层地质学等理论为指导,将J凹陷西区L组划分为1个长期旋回,4个中期旋回,18个短期旋回