红外与可见光图像配准与融合算法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:get_to_do
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着成像传感器技术的迅猛发展,多频段图像采集任务获得高新技术助力,使得单一传感器成像弊端日益突出,己难以满足日常应用需求,多传感器成像系统迎来了全新技术应用时代。多传感器成像技术通过综合利用多类型图像中的互补信息,剔除其中冗余信息,使得融合图像具有更为丰富的场景内容。其中红外光与可见光作为图像处理领域最广泛应用的图像,因其固有的成像机理及天然互补性,其图像配准及融合任务能够对场景目标进行清晰准确的描述。为进而提升图像融合性能,本文针对红外与可见光图像融合进行算法研究,结合卷积神经网络在计算机视觉领域的显著优势,设计出高性能的图像配准及融合算法框架,同时针对图像融合任务实时性需求,对图像融合网络实行模型压缩,从而减少融合网络模型尺寸和计算量。本文在此技术需求和背景条件下进行以下图像算法研究。首先,本文对红外与可见光图像配准任务进行细致探究,针对多源图像间变换的多样性,选取透视变换作为实验图像变换模型。考虑到基于互信息及图像特征等传统配准算法对于多源图像配准任务的健壮性及鲁棒性不足的现状,本文提出全新图像配准融合网络框架CADH。其充分利用卷积神经网络中独特的图像特征提取优势,提取红外与可见光图像中高效共有特征等语义信息,采用监督学习算法进行图像变换矩阵训练学习来拟合图像数据集的真实标签,使得网络模型能够学习红外与可见光图像间鲁棒的配准特征,进而提升图像配准模型鲁棒性。通过大量对比实验分析证实本文CADH配准网络具有高效的多源图像配准性能。其次,红外与可见光图像融合作为图像处理以及计算机视觉领域一项重要的现代图像增强技术,旨在将红外图像信息和可见光图像信息有效地结合起来,生成信息量丰富和表达力更强的场景融合图像。本文针对基于多分辨率等传统图像融合算法中人为制定特征融合规则以及特征提取不充分等难点,设计出基于卷积神经网络的新型图像融合框架RDNFuse,通过整合ResNet和DenseNet等网络结构优势,利用非监督算法解决人为制定融合规则问题,提升图像多尺度特征的精细提取和网络框架中的特征复用和流动,进而改善融合图像的最终成像显示性能。结合图像融合算法创新,该研究成果已完成SCI论文撰写并投稿。然后,深度学习技术中卷积神经网络在近期取得了飞速发展,然而对于移动平台或算力有限的硬件平台等特定应用场景仍然存在应用限制。为此本文针对图像融合任务实时性需求设计制定系列模型压缩实验,不仅设计出全新主干网络结构减少网络参数,同时实行网络模型剪枝、量化以及哈夫曼编码等模型压缩策略,在降低融合网络模型尺寸的同时,稳定维持网络模型已有的融合性能。最后,本文通过大量主客观对比实验,证实本文提出的图像配准网络框架能够高效提取健壮鲁棒的图像共有特征,相比于其他传统配准算法具有较大的性能提升。针对图像融合任务,本文设计的图像融合框架通过加强网络图像特征复用的方式提升网络融合性能,通过与主流图像融合算法进行实验对比均表现出较佳的融合性能。最后通过制定系列模型压缩策略,在保证网络模型融合性能的基础上,大幅降低网络模型尺寸和计算量,进而提升网络运行效率,同时设计出红外与可见光彩色图像融合框架及不同分辨率图像融合框架,进一步拓展融合应用场景。
其他文献
中国西南地区是一个少数民族集聚的多山地区,喀斯特地貌广泛发育,特殊的自然地理环境下,少数民族用自己的智慧造就了独特的民族文化,人文景观旅游资源优势突出。但是在多山地
目的:探讨饮食疗法在2型糖尿病患者血糖控制中的效果。方法:60例2型糖尿病患者均在药物治疗基础上给予严格的饮食控制,对患者进行饮食健康教育,针对不同患者制定具体食谱,通过对摄
本文从语言学的角度,分析了消息语篇优化传播效果的两大编码策略:语义场理论的运用和义素分析法的运用.
指出已有对唐山地震成因解释的不足,综合分析了唐山地震前后的地震现象.认为唐山及周围地区1973~1975年ML4地震密集,而同一时空范围内3级和2级地震并不活跃是最为显著的地震活
写作教学作为语文教学的重要组成部分,肩负着培养学生全面发展的重要使命。随着时代的发展和观念的更新,写作教学正以全新的面貌朝着时代迈进。虽然写作教学改革的目的是提升
在当今日趋激烈的市场竞争中,赊销已经成为商品销售过程中的常态,由此导致应收账款在企业资产中所占的比重不断攀升。我国是世界主要贸易大国之一,信用赊销是企业,尤其是中小企业的常用手段。伴随商业的发展进步,我国应收账款体量呈现大幅度增长态势,这一结果直接影响中小企业短期偿债能力和现金流量状况。为盘活应收账款,使其转化为现实资产来维持企业的正常运营及发展,利用应收账款质押向商业银行贷款,便成为中小企业融资
针对广东某复杂难选金矿石进行了工艺矿物学研究。结果表明:该含金矿石中主要有价元素为金和银,还具有含碳、高砷、含泥量大的特性。原矿中金除了与黄铁矿等硫化物密切共生外
基于传统旅游转型与乡村旅游兴起的双重背景,在剖析全域旅游理念及论述全域旅游与乡村旅游间辩证关系的基础上,以全域旅游的视角分析了湖北省大悟县金岭村的旅游现状及发展困
证券市场的高效有序是保证资金高效融通、经济有序运转的重要前提。退市机制的建立为证券市场提供了过滤功能,在保证证券市场为优秀的企业提供资金的同时,也过滤掉那些本应被淘汰但占用有限资源的劣质公司,这对奠定证券市场健康稳定发展的基础具有重要意义。而我国现行警示标准存在着非数量指标难以操作,而数量指标又不够全面的问题。我国现行风险警示标准的不全面不完善给了许多投机者可乘之机,有些公司甚至对财务指标进行“包