联合卷积神经网络和转换器的红外与可见光图像融合

来源 :激光与光电子学进展 | 被引量 : 0次 | 上传用户:swatsee
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为解决在红外与可见光图像融合领域中,卷积神经网络(ConvolutionalNeural Network,CNN)无法建模源图像内部的全局语义相关性,对于图像上下文信息利用不充分等问题,创新性的提出了一种联合卷积神经网络和转换器(Transformer)的图像融合模型。首先,为了弥补CNN无法建立长程依赖关系的缺陷,提出了联合CNN和Transformer的编码器,加强了对多个局部区域间相关性的特征提取,提高了模型对图像局部细节信息的提取能力。其次,提出了一种基于模态最大差异度的融合策略来强化融合过程中对源图像不同区域信息的自适应表达,提升了融合图像的对比度。最后,在TNO公开数据集上,联合多种对比算法对本文所提的融合模型进行了实验验证。实验结果表明,在主观视觉效果和客观评价指标两方面的评估上,本文模型与现有融合方法相比都具有明显优势。此外,通过消融实验,本文分别对提出的联合编码器以及融合策略进行了有效性分析,实验结果证明了所提出的设计思想在红外可见光图像融合任务上是有效的。
其他文献
目的 探讨ICU连续性肾脏替代治疗(continuous renal replacement therapy, CRRT)患者开展早期活动对安全性的影响。方法 经医院伦理委员会审核通过,CRRT患者或家属自愿签署统一的知情同意书。通过计算机随机数字表法将18例CRRT患者按1∶1随机分为试验组与对照组,每组9例。对照组给予常规治疗和护理,试验组在CRRT上机期间进行主被动关节活动,比较两组的活动前
<正>教学过程:超几何分布和二项分布是离散型随机变量服从的两种重要分布,但是很多同学并不清楚两种分布所对应的随机变量意义,不能准确地判断随机变量所服从的分布类型。通过本节课学习,我们重新认识两种分布,发现两种分布对应的随机变量意义,准确判断随机变量的分布类型。1.复习超几何分布的概念有N件产品,含有M件次品,其他(N-M)件为正品,从N件产品中任意抽取n件产品,设ξ为n件产品中所含次品的个数,
期刊
随着课程改革的不断深入,“思维”的培养开始得到重视。亚里士多德曾经说过:“没有图像,思维是不可能的”。于是,“可视化教学”便应运而生。信息时代的到来,更是使可视化教学成为当前研究的热点,但对“地理可视化教学”的系统研究却较少,高中地理可视化教学实践如何有效开展更是当前亟待需要解决的问题。有效地开展高中地理可视化教学实践有助于丰富地理教学理论、改进地理教学效果、激发学生地理学习兴趣和促进教师专业素养
本研究建立了一种基于磁珠法的肉类DNA快速提取技术。该技术以十六烷基三甲基溴化铵(CTAB)为裂解液,70%乙醇为漂洗液,羟基磁性微球为DNA吸附介质,从裂解液浓度、裂解时间、漂洗次数3方面进行优化。研究发现裂解液为2%CTAB、裂解时间10 min,漂洗次数2次时,基因组DNA提取效果最优。本研究建立的磁珠法肉类DNA提取技术可作为基层实验室自建肉类DNA提取方案,用于肉类DNA的快速提取,为肉
刘震云是一位作家,也是位哲学家,两种身份的叠加,让笔下的作品饱含生活的哲理。《一日三秋》的创作,以文学的笔触阐释哲学上难以论证的道理。人的一生如作品中《花二娘传》的全文——这是本笑书,也是本哭书,归根到底,是部血书。多少人用命堆出的笑话,还不是血书吗?笑书本身令人发笑使人乐观,但本身又包含太多的心酸和苦楚,撕开笑书的表象,探究哭书的内涵,披着哭书的外衣,挖掘血书的意义,最终目的不在于否定笑书本身,
研发人员作为企业的重要资源,掌握着企业的核心技术,拥有企业发展所需的专业知识,是企业技术创新的驱动力,对企业发展至关重要。有效的薪酬激励可以提高研发人员在工作中的主观能动性,缩短产品研发周期,节约企业研发成本,保障部门研发水平和能力,提高企业的市场竞争力。同时,有效的薪酬激励可以增加研发人员对企业的忠诚度,减少人员流失,促进企业持续稳定的发展。因此,依据研发人员的特点和需求,制定出适应研发人员发展
为了进一步提高医疗物联网管理水平,现以医疗物联网技术应用为例,设计一款功能完善、实用性强的智能健康管理模型。本文首先介绍医疗物联网相关概念,然后从硬件设计需求、软件设计需求、网络架构设计需求、安全性设计需求四个方面入手,分析智能健康管理模型设计规范,最后在分析“医院—社区—家庭”三级健康管理体系结构的基础上,从个人健康模型设计、家庭健康模型设计、社区健康服务模型设计、医院健康管理信息化模型设计四个
应收账款因销售业务而产生,由于客户未及时付款而形成。应收账款是制造企业的流动资产,也是一项风险资产。本文从制造企业应收账款管理的重要性入手,归纳总结了应收账款管理中监管不力、信用体系缺失和风险应对不足等普遍存在的问题,并有针对性地提出了建立跨部门协作管理机制、构建信用体系和信用策略和动态应对风险应收账款等具体措施,为企业构建应收账款管理体系提出了系统解决方案。只有运用系统方法,深挖应收账款风险的根
学前教育是终身教育的源头,也是国民教育体系的基础。随着国民对教育教学的重视,学前教育引起了全社会广泛关注,但受到应试教育的影响,学前教育小学化现象突出,且日益严峻,严重影响了幼儿健康发展,幼儿像小学生一样学会写字、拼音和算术,甚至以小学生的标准规范幼儿,不利于幼儿身心成长,学前教育去小学化刻不容缓。文章总结学前教育"小学化"的危害,对这一问题成因进行分析,并从制度、师资建设等方面提出相关解决对策。
免疫检查点(immune checkpoints, ICs)是一类在免疫细胞上表达的免疫抑制性分子,能调节免疫激活程度。免疫检查点抑制剂(immune checkpoint inhibitors, ICIs)可阻断免疫检查点与其配体结合,抑制肿瘤免疫逃逸作用,提高免疫系统对肿瘤细胞的杀伤作用,逐渐成为肿瘤治疗的一种常规策略。然而,响应率低与耐药性的产生严重影响了免疫检查点抑制剂的临床疗效。活性氧(