基于多粒度和深度神经网络的图像补全研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:yexianyang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像补全是依据已有信息填充图像的空白区域,一般借助矩阵的低秩运算理论和总变分(Total Variations,TV)正则项方法,通过图像的局部信息推导出图像的缺失部分,但是随着图像中的缺失信息越多越多时,此类方法在求解图像补全时会有一定的局限性。接着人们开始采用神经网络的方法解决缺失较多信息的图像补全问题,但仍然存在只能补全固定位置、补全固定大小缺失区域和补全效果差的问题。本文从图像多粒度的角度出发,使用云模型提取图像的云模型语义(定性概念)和粒层图像,接着把提取的多粒度信息输入到神经网络中,建立图像的补全模型。本模型分为三部分:一是多粒度的实现,云模型提取图像的各粒层语义和其对应的粒层图像,并使用云模型语义自动地标注对应的粒层图像。二是提取粒层图像的未缺损特征(局部特征),采用神经网络的方法提取各粒层的图像特征。三是把云模型语义和图像的未缺损特征同时作为条件生成对抗网络的附加条件,生成图像缺失的部分。本模型为了完成图像的补全操作,首先把每一粒层的云模型语义和粒层图像的局部特征组合在一起形成组合特征。然后把组合特征和其对应的粒层图像作为条件生成对抗网络的训练集训练本模型。在测试图像补全的过程中,首先提取缺失图像的云模型语义和缺失图像的局部特征。然后把两种特征作为本模型的附加条件,生成一幅与条件相符的图像。最后把生成的图像和缺失的图像进行合成,完成图像的补全操作。实验结果表明,把组合特征和其对应的粒层图像作为条件生成对抗网络的训练集时训练的模型,解决了固定位置和固定大小缺失区域的图像补全问题。本模型在Caltech-UCSD Birds和Oxford-102Flowers数据集中的图像补全以及把云模型语义和局部特征作为模型条件时抽样逼真的图像都取得了较好的效果。
其他文献
夏明翰2009年当选"100位为新中国成立作出突出贡献的英雄模范人物"。"砍头不要紧,只要主义真。杀了夏明翰,还有后来人!"1928年3月20日,共产党员夏明翰挥笔写下这首气壮山河的
随着现代工业的发展,金属离子的排放量不断增加,造成了严重的水污染,威胁着人类的健康和环境。因此,对各种离子的定性和定量分析受到了相当的重视。到目前为止,有很多用于离子检测的方法,但是荧光化学传感由于其具有高选择性、高灵敏度和实时检测等优点,在环境研究与分析领域备受关注。近年来,大量的光致变色化合物被报道用于离子检测。二芳基乙烯由于其突出的热稳定性,优异的抗疲劳性,和快速响应被认为是最有前途的光交换
我国农村农民人口约7亿,占全国总人口的50%,随着国家经济的发展,农民生活水平有了明显提高,但是仍有不少农民处在贫困状态,农村贫困形势依然严峻,国家高度重视,提出了精准扶
随着海面溢油事件的频繁发生,海面油膜的及时和准确监测变得越来越重要。机载探测技术因其探测精度高、及时便捷性等优点,广泛应用于海面目标探测。传统的机载探测技术主要局限于收集目标场景的光强信息,而随着高光谱、多角度和偏振信息等多维度探测技术的发展,为机载探测技术开辟了新途径。本文主要研究海面油膜的偏振探测理论和方法,设计一款适用于机载平台的分孔径型实时偏振成像光学系统。首先,介绍海面油膜的光学特性和偏
便携式移动设备对大功率需求不断发展,模块化和小型化也越来越普遍,对电源管理芯片的要求也越来越严格。在一些需要大功率输出的场合,单个电源输入已经很难满足需求,需要将变换器进行并联工作,对不同的输入进行非对称功率分配。模块并联工作可以在提高功率处理能力的同时提高电路的容错能力,避免单个模块电流应力过大的问题。其中,恒流恒压变换器引起越来越多的重视,不仅可以简便的实现输出功率分配,同时具有带载能力强、输
随着环境的恶化,各地区频繁发生泥石流,导致公路铁路等交通设施严重瘫痪,致使人员大量伤亡,给社会带来重大的损失。为了减少人员伤亡和财产损失,政府部门在大部分地区修筑拦沙坝。当拦沙坝过坝宣泄时,溢流泥流体产生的动力压力明显加大,且泥流体下泄时形体的横向宽度、下泄中与下游的入射角度和形体面积等特征均影响坝体结构、制约泥流体冲击特性和拦沙坝下游沟床掏刷。由于泥流体下泄时环境因素不可控,人为实时测量受到阻碍
本文研究了两类Poisson代数上的有限维单Poisson模.具体地,根据不同的代数T,构造不同的Poisson代数A:=T/(t-1)T,计算出A的Poisson极大理想;得出了对应Poisson代数上的有限维单Poisson模的同构类;最后将Poisson代数上的有限维单Poisson模的相关结果推广到泛包络代数上.
中立型捕食者-食饵模型能充分体现自然界种群变化的规律,具有很强的现实意义,逐步成为学者研究的热点。中立型捕食者-食饵模型表明捕食者或食饵当前时刻的种群变化率与过去时
有机无机杂化钙钛矿材料因其具有高吸收系数、最佳带隙和高缺陷容限等优异的特性而被广泛关注,在短短的几年内,钙钛矿太阳能电池的功率转换效率从3.8%上升到25.2%,是最有发展前景的光伏器件。在钙钛矿太阳能电池中,空穴传输层、钙钛矿吸收层以及电子传输层的材料选择以及彼此界面中的缺陷与电荷分布会影响载流子的产生与复合,还会影响彼此的成膜,进而影响钙钛矿太阳能电池的性能。本文主要研究氧化镍空穴传输层与钙钛