基于深度学习的红外与低照度可见光图像融合方法研究

来源 :西南科技大学 | 被引量 : 0次 | 上传用户:sakurzhe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
红外与可见光图像融合是多光谱图像融合中具有代表性的图像融合技术。其中,可见光图像纹理信息丰富,但其成像易受环境影响,低照度环境下的可见光图像对比度降低,信噪比下降,容易造成图像中目标与背景难以区分的问题;而红外图像则不受光照影响,但是其背景信息模糊。据此将二者进行融合,得到兼有显著目标和纹理细节信息的融合图像,能为后续高级视觉任务提供更为丰富的图像语义信息。另外,未经严格配准的红外与低照度可见光源图像,将严重影响融合算法性能。本文围绕红外与低照度可见光图像融合任务开展以下研究:(1)针对现有红外与低照度可见光图像数据集源图数量少的问题,自行采集校园生活场景的红外与低照度可见光图像对,经过本文提出的配准算法匹配后,构建了“红外-低照度可见光图像对”数据集,作为对公共数据集的补充并为后续相关研究提供数据集支撑。(2)针对红外与低照度可见光图像配准过程中,特征点难以寻找的问题,改进了SURF角点检测算法。首先,使用Canny算子生成图像边缘轮廓;其次,通过改进的算法进行特征点检测与匹配;最后,将配准算法应用于本文自采图像,结果显示配准算法可靠实用。(3)针对红外与低照度可见光图像融合任务,本文改进并实现了基于双分支孪生神经网络的融合网络模型。该模型将密集残差块引入孪生神经网络,提升了图像特征提取和特征复用能力,最大可能地保留源图像中的信息;并且根据红外与低照度可见光图像光谱信息差异较大的特点,选择将孪生神经网络模型中的两个分支分别训练,分支间权重不共享。最后,构建了以四种客观指标评价为主,主观视觉评价为辅的融合图像质量综合评价体系。并以此为评价标准,在TNO和Road Scene数据集上与五种典型融合算法进行对比实验,结果表明,本文算法的结构相似度(SSIM)、信息熵(EN)、像素特征互信息(FMI_pixel)、基于噪声评估的融合性能(Nabf)这4个客观指标整体优于对比算法。此外,使用本文自制数据集进行验证实验,结果表明,本文融合算法泛化性良好,具有一定实用价值。
其他文献
近年由于汽车数量的增长,停车场车位紧张,泊车空间狭窄,驾驶员在倒车入库、侧方位停车时,由于汽车左、右后视镜存在视野盲区,给驾驶员造成泊车障碍。本文研究和实现了一个嵌入式3维全景环视驾驶辅助系统,可以展示车身四周环境的3维全景环视图像,给驾驶员提供车身四周的路面信息,辅助驾驶员进行驾驶判断,提高车辆在泊车时和复杂环境中的安全性能。本文对嵌入式全景环视驾驶辅助系统的亮度均衡算法进行研究,提出了一种全景
为探析历经70多年我国义务教育减负政策执行效果差强人意的原因,并能获取有价值的信息,促进其有效执行,切实减轻学生的课业负担问题,引发全民对教育生态的维护与思考。本文基于昆明市义务教育减负政策执行概况采用理论联系实际的思路进行研究。首先,搜集、梳理、总结已有的教育减负文献与政策。为本文提供借鉴的思路。其次,用访谈法了解政策执行概况,并与政策目标比对,找出政策执行偏差的具体问题。然后,结合经典政策执行
目的:探讨猪喘气病的最佳治疗方法。方法:在我省某大型猪场中选取了3批200头病猪作为本次研究的对象。将200头病猪根据随机数字法方式分为5组,分别采取不同治疗方式,总结最佳治疗方法。结果:A组与B组的治疗总有效率显著高于其余3组,数据差异显著,具备统计学意义(P<0.05);A组与B组、C组与D组的组间治疗效果数据差异不显著,不具备统计学意义(P>0.05)。结论:盐酸多西环素长效注射液治疗猪喘气
随着居民财富累积增长及银行定期存款收益的不断下降,我国商业银行理财业务体量呈现持续走高态势,最近十年尤为迅猛。历经一段时期“野蛮式”发展,以往政策监管不到位之处逐渐显现,促使监管机构针对此类业务做出了一系列的政策调整。2018年《关于规范金融机构资产管理业务指导意见》(又称“资管新规”)的落实,对未来整个中国的金融体系、金融市场的运行有较大影响。随着理财业务的迅速发展,监管套利、期限错配、刚性兑付
对《专利法》《专利审查指南》《中国专利法详解》中关于修改超范围进行梳理总结,从两个实际典型案例出发,基于不同的结论观点,阐述出现不同观点的根本原因,并从修改后技术方案范围的变化形式,阐述在面对复杂式修改情况时,如何以技术方案为单元,从整体上准确、合理把握"直接地、毫无疑义的确定"的判断标准。
归纳总结出鸡白痢有效地治疗方法,以此来有效保障养殖业的健康发展。方法:从惠东县某养殖场中随机抽取60只患有鸡白痢的病鸡,按照随机数字排列法均分为三组,并设定为A、B、C三组,分别选择使用庆大霉素、强力霉素和恩诺沙星,对比两组治疗效果。结果:治疗后C组临床治疗总有效率明显优于A、B组,且死亡率更低(P <0.05)。结论:针对鸡白痢而言,恩诺沙星治疗效果明显,可有效改善其临床症状,保证其生命健康,值
随着我国金融市场化改革、和利率市场化举措的深度推进,存贷款息差收窄,银行资产业务增长空间受限。同时,居民金融理财需求旺盛,因此推动银行代销基金、信托等金融机构产品,来满足客户多元化投资需求,也为商业银行开辟了中间业务新赛道。代销业务顺应市场改革,在实体经济发展与客户的投资需求之间发挥了积极的桥梁作用。数据显示,截至2020年末中国已跃居全球投资市场第二位,发展前景广阔。A银行作为业内角逐者之一,通