基于深度学习的红外图像超分辨率重建研究

来源 :河北经贸大学 | 被引量 : 0次 | 上传用户:cyydn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
红外图像在军事、民用领域应用十分广泛,但受红外波段和成像机理的限制,成像分辨率较低、图像质量差。针对此问题,本文使用基于深度学习的方法对单帧红外图像和序列红外图像超分辨率重建进行了研究,具体工作如下:(1)针对生成对抗网络超分辨率重建容易出现伪影的问题,本文在ESRGAN模型的结构基础上,提出了一种融入残差模块以及注意力机制模块的超分辨率重建模型ESRGAN+。注意力机制模块通过对全局通道信息的学习,对各通道特征的重要程度进行建模,根据不同任务,调节各通道权重,对不同通道进行参数调整,提升对有用通道信息的关注度,对无用通道信息进行抑制;残差模块对训练过程进行简化,加强梯度传播,有利于训练出更深层次的网络。在公开的热红外数据集FLIR上,本文所提模型ESRGAN+比相关模型的信噪比提高了3.3277分贝以上,结构相似度提高了3.3%以上。在课题组自建的红外数据集上,本文所提模型ESRGAN+比相关模型的信噪比提高了4.4020分贝以上,结构相似度提高了2.17%以上。实验表明,ESRGAN+的信噪比与结构相似度两个客观评价指标均有所提升,且ESRGAN+重建出的图像伪影较少,清晰度更高,视觉效果更好。(2)针对序列图像进行超分辨率重建时图像特征利用率低以及帧间时间信息未能得到充分利用的问题,本文在Basic VSR模型基础上,提出了一种适用于红外序列图像的超分辨率重建算法Ebasic VSR。Ebasic VSR采用金字塔可形变卷积进行红外序列图像的帧间对齐,采用多分支级联融合法进行上采样。金字塔可形变卷积具有不受光线以及场景变换影响的特性,金字塔结构将不同尺度、不同维度的特征进行融合,可形变卷积自适应性强,灵活度高,两者结合进行逐层估计,卷积核能够更加适应所要提取特征对象的形状,实现红外图像的帧间对齐;多分支级联融合上采样,将浅层信息特征与深层信息特征进行融合,使特征得到复用,促进有用信息传播。在真实红外测试集上,本文所提模型Ebasic VSR比相关模型运行时间平均缩减了19s,速度提升了6.8345%,信噪比提升了0.14分贝以上,结构相似度提升了2.9%以上,实验表明,相比于原Basic VSR模型,本文提出的模型取得了更好的重建效果,更适用于红外图像的超分辨率重建。
其他文献
伴随着中国金融市场逐步、广泛的开放,国有商业银行面临的内外部环境发生了巨大的变化,各银行之间竞争的加剧给国有商业银行从业者带来了巨大压力。尤其是从基层员工的角度来说更是如此,他们在国有商业银行中占比最大,工作营销任务最重,工作环境相对恶劣,超负荷的工作压力使基层员工的工作主动性和满意度下降,存在严重的职业倦怠问题,长久以来积攒的压力无从释放,对员工的身心造成恶性的影响。所以,本文对国有商业银行基层
学位
税费服务是公共服务重要组成部分,利于和谐征纳关系,促进纳税遵从。河北省深化税收征管体制改革以来,税收的对象、范围、领域和手段不断变化,税费服务广度和深度水平逐步提升,由此在服务方式、服务能力、服务效果方面产生了一系列问题,税费服务质量已无法满足当前纳税人缴费人的服务要求,因此优化税费服务成为必然选择。纳税人缴费人满意度是税费服务的总体评价,能客观反映现阶段税费服务质量。从纳税人缴费人满意度出发探讨
学位
十三五国家规划中科技创新被上升为民族兴旺和国家强盛的决定力量,科技创新作为经济增长的内在源泉和动力已被广泛认同。在国家经济社会发展中,城市承载着国家大部分科技创新活动,城市的科技创新政策在很大程度上影响城市科技创新水平。目前,学界缺乏相关科技创新政策对城市科技创新水平影响的研究,因此科技创新政策对城市科技创新水平的影响与提升路径研究对提升城市的科技创新水平和丰富科技创新相关研究有重要的理论和实践意
学位
交通是兴国之要,强国之基。交通系统的发展建设对生产要素的流动、城镇体系及空间格局的发展有着决定性的影响。其中公路的发展建设又是重要环节,一方面,公路建设在城镇体系、空间格局发展中具有引导或制约作用;另一方面,公路建设对扩大内需、促进区域经济发展也有着不可忽略的影响。因此,分析我国公路建设水平与城镇化发展的内在关系,辨明公路建设水平与城镇化的发展阶段,理清当前各省份城镇化与公路发展重点,对于加强交通
学位
《中华人民共和国环境保护税法》是中国特色社会主义税收体系在环境领域的又一重大创新,对于推动经济转型升级,实现“十三五”规划目标具有十分重要的意义。然而,不同于其他税种,环保税税目复杂,污染物品类繁多,它的特点是企业主动申报,由税务部门征收税款,其中还伴随着污染物监测以及与环保部门的数据交换等环节,这就给环保税的税收征管带来了前所未有的挑战。本文选择了污染行为易发生,污染情况不易监测,地域差异较小的
学位
相对贫困阶段已经到来,城乡医保统筹对降低农户贫困脆弱性和实现医疗保障巩固脱贫攻坚成果具有重要影响。本文运用中国家庭追踪调查(CFPS)2016年和2018年平衡面板数据,本着家庭是中国社会的基础和根基的原则,选择农户作为研究对象,运用PSM—DID模型和中介效应模型探究了城乡医保统筹对农户贫困脆弱性的影响。本文首先梳理了城乡医保统筹与农户贫困脆弱性的研究背景、文献综述以及相关概念,基于健康风险理论
学位
图像匹配技术是计算视觉领域关键技术之一,在图像拼接、三维重建等方面有广泛应用。但是当视角差异较大、宽基线、设备因素等影响时,图像间会存在多个匹配模型。针对以上问题,本文提出基于数据过滤的图像多匹配模型的估计算法。本文的研究内容如下:(1)基于近邻分布一致性的内点率提升。提升内点率是图像匹配中的重要步骤,比值方法和基于内点局部区域分布的聚集性算法在图像之间视角差异大时存在局限性。因此本文提出了基于近
学位
随着我国城市发展水平差异化拉大,城市发展过程中面临着收缩现象,并带来了人口流失、经济衰退、失业率增加等负面问题,城市健康发展承受着重重考验。因此准确把握城市收缩分布和发展趋势,对促进区域均衡发展和城市高质量发展具有重要意义。本文以2011年至2020年期间我国284个地级以上城市作为研究对象,结合城市收缩相关理论,从人口、经济和社会三个维度选取12个测度指标构建我国城市收缩水平评价体系,通过变异系
学位
近年来,我国人口老龄化问题日趋严重,在农村地区尤为突出。随着经济的高速发展,城镇化水平不断提高,农村青壮年大多选择外出务工,因此农村地区空巢老人数量不断增多,面临着较为严峻的社会性养老问题。目前,我国农村地区经济基础较为薄弱,推广机构养老缺乏现实基础,另外,家庭式养老的功能也在不断弱化,因此,农村养老问题已然成为现阶段亟需探讨的民生问题。农村互助养老模式的出现旨在于缓解农村养老困境,是农村养老模式
学位
党的二十大报告指出,要推进健康中国建设,把保障人民健康放在优先发展的战略位置,完善人民健康促进政策。外来务工人员健康是健康中国的重要组成部分,基本医疗保险是促进外来务工人员健康的重要制度保障。因此,在当今时代背景下,研究基本医疗保险制度对外来务工人员健康水平的影响具有重要的现实意义。鉴于此,本研究以2017年的中国流动人口动态监测调查为数据基础展开研究,首先,采用线性回归模型估计基本医疗保险制度对
学位