【摘 要】
:
在下雨天气获取图像时往往会在图像中产生雨痕,导致图像中的物体信息被破坏。这可能会导致后续计算机视觉系统的性能下降或者让拍摄者获取不到理想中的照片。要从单一图片中
论文部分内容阅读
在下雨天气获取图像时往往会在图像中产生雨痕,导致图像中的物体信息被破坏。这可能会导致后续计算机视觉系统的性能下降或者让拍摄者获取不到理想中的照片。要从单一图片中去除雨水痕迹是一项非常具有挑战性的任务,因为这是一个高度不适定的问题,可能存在着多组解。虽然目前使用合成数据集训练的深度神经网络在一些场景中取得不错的效果,但模型的泛化性能不足仍然是最大的问题。本文通过调研分析发现了其中一个造成泛化性能不足的原因,并针对这一点设计了一个泛化性能更强的网络。在调研相关工作时,本文发现几乎所有的深度学习方法都通过预测雨痕残差,然后通过与输入图像相减得到干净背景。虽然雨痕残差层大部分值更接近零,根据残差学习理论深度神经网络学习这种更接近零的映射会更容易。但是本文发现在雨痕残差层中高残差值的像素数量非常少,相对残差值接近零的像素数量几乎不存在。这会容易导致深度网络对合成数据集中的高残差值雨痕模式过拟合,并且无法很好地处理真实场景下的高残差值雨痕模式。虽然这些高残差值雨痕数量少,但由于对比度高,对结构的破坏通常更加明显。本文发现如果使用直接预测背景的方式,由于这些高残差值雨痕位置原本的背景像素值更接近零,新映射变得更容易学习,更利于图像结构的修复。而且使用背景标签能够让网络学习到与图像中物体相关的语义信息特征图,能够辅助严重受损区域进行信息重建。对比实验证明了预测背景相比于预测残差的方式对真实雨痕的处理有更强泛化性。虽然预测背景的方式有更强泛化性,但是其不足的地方在于容易造成细节信息丢失或者模糊。受到传统方法中一种使用背景层和雨痕层相互优化的方式启发,本文提出了一个雨痕残差和背景耦合预测的网络。通过雨痕标签提供指导,让网络减少在预测的背景中对于类似雨痕细节的误删除。为了让网络注意那些更需要修复或者有助于修复的区域,本文提出一个可分离元素注意力机制。这是通过一个通道注意力分支和空间注意力分支计算后再合并得到。由于其计算量和参数不多,可以嵌入到网络内的所有模块中。实验结果表明本文提出的网络相比之前专注于图像去雨痕的网络,不管在合成数据集的评测以及真实数据集的视觉效果上都取得更好的效果。
其他文献
当前新疆处在“三期叠加”的复杂时局,南疆地区作为做好新疆工作的“棋眼”,其农村基层组织肩负着加强基层党组织建设,落实自治区党委各项工作任务,维护农村社会稳定,落实党
随着互联网的发展,PC视频平台流量和移动端视频量均出现爆炸性的增长,视频的种类也各种多样。如何高效准确的对用户上传视频素材分类管理,这对视频平台和用户来说有着重要的
《九民纪要》第5条为近年高发的对赌协议纠纷提供了合同效力及履行相区分的处理思路,相较于以往认定“与原股东对赌有效,与目标公司对赌无效”的处理方式有较大的进步。通过梳理学界关于对赌协议的讨论,发现讨论重点已逐渐从合同性质及合法性问题过渡到合同的履行层面上,司法实践中关于对赌协议纠纷的处理方式亦在逐渐改变,《九民纪要》第5条实际上是对近十年来学术观点及司法实践的回应与总结。评价第5条应以能否实际解决纠
随着社会的发展,道路交通环境越来越恶劣,道路交通数据呈现爆炸式增长的趋势。对此,本文基于边缘计算环境下基于窄带物联网技术(Narrow Band Internet of Things,NB-Io T)和
近年来,随着中国一带一路倡议的不断深化,中国与俄罗斯不断拓展合作的深度和广度,随之而来的是跨国犯罪的不断增多。为了联合应对不断变化发展的跨国犯罪新形势,迫切需要翻译承担起语言与文化桥梁的作用。在开展国际警务交流合作与处理跨国案件时,及时、准确、全面地翻译信息与情报,达到互通有无,尽快破案的目的。本文通过笔者参与的俄罗斯远东法律学院汉语学习班的陪同口译工作,选取了校园参观与课程观摩过程的口译实践加以
本文主要研究低秩表示模型及算法应用。近年来,低秩表示的理论及应用得到了许多学者的关注,并在图像处理、数据分析等多个领域获得了成效。如何将在高维数据中隐藏的低秩结构精确地恢复出来是利用低秩表示来解决各个领域中问题的关键,然而对于低秩表示模型的求解是一个NP难的问题,因为在低秩表示模型中通过实现对矩阵的低秩约束来达到矩阵恢复的目的,但是秩函数是离散函数。现行模型通常以核范数去近似秩函数,虽已可到达秩近
香蕉是世界四大水果之一,在世界水果中占有极其重要的位置。目前我国香蕉果园的管理缺少信息化的支撑手段。如何自动获取香蕉的重要生长参数,提高种植园的科学管理水平,是亟
磁谐振耦合无线电能传输技术是当前无线电能传输领域的热点课题。磁场作为能量传输的媒介,直接影响着系统的传输效率,空间磁场分布研究是解决该技术目前面临问题的一个重要途
信息物理系统(Cyber-physical systems,CPSs)的分布式融合估计因计算速度快、可靠性高、容错能力强等特点受到人们越来越多的重视,在工控系统、智能家居等领域得到广泛应用。
非线性和时滞是控制系统中普遍存在且不可避免的物理现象,也是控制理论研究的热点和难点之一。由于Takagi-Sugeno(T-S)模糊模型具有无限逼近封闭有界定义域内的任意连续函数