基于分量重构和分割约束的红外和可见光图像融合方法研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:mumuww
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
红外和可见光图像融合在民用监控、灾害检测、军事识别等领域具有举足轻重的作用。然而由于红外图像中的热辐射目标尺度变化大,较为模糊,同时可见光图像受天气、低光照等影响,目标成像质量较差,因此红外和可见光图像融合是一项极具挑战的任务。针对红外热辐射目标尺度不一,可见光目标成像质量变化较大的情况,本文提出基于多尺度分解特征选择的无监督红外和可见光图像融合网络,并创新性提出分量重构、分割约束假设,着手解决融合过程中红外目标尺度不一、融合图像难以转移源图像信息和保留各自的互补信息等问题。本文的主要内容和创新如下:(1)在基础模型设计方面,使用特征选择模块来对红外图像和可见光图像进行像素级特征融合,同时使用跨尺度特征选择方式融合深层特征,减少细节信息损失。由于该任务没有监督标签,因此本文探究了不同图像内容损失函数和图像结构损失函数对融合结果的影响。(2)本文提出分量重构假设,使用分量重构模块从已融合图像逆重构红外和可见光源图像分量,在测试阶段不引入多余参数量和计算量,融合效果表明通过此模块融合图像可以获得更多的源图像信息。(3)为解决融合图像的红外目标和背景纹理信息保留问题,提出分割指导融合思想,对已融合图像进行后续分割,使用分割损失来约束融合图像具有更好的边缘细节和高亮目标轮廓。在测试阶段不引入多余参数量和计算量,主观视觉效果和客观评价指标得到大幅提升。(4)本文使用的训练集和测试集为不同数据集,通过实验证明了本文算法的有效性和泛化性。直接使用在红外和可见光图像数据集上训练的模型,不需微调即可应用到多焦点图像融合和多曝光图像融合任务上,并取得良好的主观视觉感受。同时本文在TNO数据集和VIFB数据集上对比目前的先进方法,在主观视觉感受和客观评价指标上都位居前列。
其他文献
车辆走行部机械故障是影响车辆运行安全的重要因素,而轴承是车辆走行部的关键部件,因此需研究轴承智能运维模式以及实施轴承智能运维的技术体系。提出了车辆走行部轴承智能运维模式;介绍了基于该模式的车辆走行部轴承智能运维系统的组成,以及走行部轴承故障诊断、健康评估与预测关键技术。上海轨道交通实际应用案例数据分析结果表明,车辆走行部轴承智能运维系统能够准确诊断轴承故障,并能准确预测轴承剩余运营里程。采用该系统
期刊
<正>自2007年第一家村镇银行成立以来,经过十余年的发展,截至2022年9月末,全国共有村镇银行1648家,基本实现乡乡有机构、村村有服务,成为我国分布最广、离农民最近的金融机构,是支持“三农”和县域经济发展的重要力量。村镇银行的业务高度集中于当地,特别容易受到区域性经济波动的影响,随着经济下行压力的加大,村镇银行的不良贷款风险增多,资产质量不高。
期刊
关键短语生成是自然语言处理领域一个细粒度任务,生成的关键短语可以应用于文本分类、文本聚类与信息检索等众多研究任务和业务场景中。该任务最近几年逐渐受到研究者们的关注,数据集、评价标准和模型结构等多个方面都得到了很大的发展。本文对关键短语生成任务展开研究。我们通过对数据集进行分析,发现关键短语更多由形容词或名词组成,然而现有关键短语生成研究却对词性不够重视;特别是拷贝网络模块从原文本中拷贝词汇时同等对
学位
专业课程思政教学改革重点在于取得课程思政教学改革的实效性。以OBE理念为指导,对产品设计专业课程从教师课程思政意识培养、课程教学体系优化、思政元素挖掘、培养目标设定、教学模式与方法、考核评价等角度开展研究。将OBE理念贯穿到课程思政教学改革的各个阶段,以培养目标作为导向,探讨产品设计专业课程思政建设路径,为建立课程思政教学改革新思路提供理论支撑,为社会培养具备综合素养的复合型、应用型人才提供实践依
期刊
分子电子学是研究用于制造电子元件的分子构件的学科。该学科借助单分子尺度测量手段,实现针对分子结构、分子与电极连接方式以及分子内和分子间的物理化学作用等在内的单分子事件的准确测量和分析。然而微观尺度的分子行为具有高度的随机性,需要设计数学方法对测量轨迹进行统计分析以获取可靠的单分子尺度电学特性。这些方法以各类机器学习算法和特征统计方法为主,通过对数据特征的提取和统计,实现了不同单分子事件的准确分类和
学位
球孢白僵菌(Beauveria bassiana)是害虫生物防治的重要材料,家蚕(Bombyx mori)是研究昆虫免疫反应机制的重要模式昆虫。深入研究昆虫应对孢白僵菌侵染的免疫反应机制,对于从免疫抑制的角度提高球孢白僵菌对害虫的防治效果具有重要意义。本研究首先筛选出对家蚕具有高、中、低毒力的3株球孢白僵菌菌株,进一步研究了该3株不同毒力的菌株在体表侵染和体内注射方式下诱导的家蚕免疫应答基因的表达
学位
本文回顾了中国汽车工业七十年来市场结构的纵向变化,并横向与汽车强国美国、日本等进行比较,发现我国汽车行业存在市场集中度低、规模经济不显著等结构性问题。从欧美、日韩等国的经验来看,汽车产业兼并重组是势在必行的,但另一方面由于汽车产业对国民经济影响巨大,其产业链又非常长,容易在不同的环节产生垄断行为,因此,汽车生产企业的合并一直都是反垄断调查的重点领域。基于以上几点考虑,本文收集了 2017年9月到2
学位
背景 骨关节炎是中老年人常见的慢性病,严重影响中老年人的生活质量。在社区开展骨关节炎的疾病管理有利于资源配置的优化和提高疾病的整体防治水平,但目前骨关节炎的管理存在诸多问题,效果不佳。目的 分析目前国内外社区骨关节炎的管理情况和策略进展,比较其优缺点,为我国社区骨关节炎管理提供更为优化的策略,以改善骨关节炎患者的诊疗效果和预后。方法 于2020年10月至2021年1月,在中国知网、万方数据知识服务
期刊
坚持创新驱动发展战略,增强自主创新能力是提升我国综合国力的关键。作为影响区域创新能力的重要方式,产业集聚对于引领城市创新、实现经济高质量发展具有重要意义,而现阶段我国各个城市的创新能力和产业集聚程度存在较大的差异。本文首先围绕产业集聚与城市创新能力展开,利用我国266个城市2009-2016年的数据计算并分析专业化、多样化集聚和城市创新能力的现状。其次,随着我国城市化的步伐不断迈进,人口、资源在城
学位
在计算机视觉领域,近年来有一类被称为人脸正面化的任务受到了广泛关注。人脸正面化问题定义如下:给出侧脸的图片,通过某种手段获得对应的正脸图片。这项工作在许多领域,例如:提高人脸识别准确率、嫌疑人画像生成等。目前大部分人脸正面化方法都仅能使用包含侧脸-正脸对的有标注图像数据集(通常来自Multi-PIE数据集)进行训练。这样的数据集构成,导致训练出的模型缺乏在不受控环境下的通用性。与此同时,另一类在非
学位