真实环境下多聚焦图像融合数据集构建及算法测试

来源 :河北大学 | 被引量 : 0次 | 上传用户:zhouheng19850
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像是获取信息的主要方式之一,在图像采集的过程中,由于采集设备及外部条件的影响,导致图像中包含的有效信息较少,并且同一场景很难通过一幅图像收集到该场景的全部信息。因此,将两幅及以上的图像信息融合到一张图,以获得更为全面的场景信息是非常重要的技术,这个信息融合的过程被称为图像融合。其中,多聚焦图像融合技术可以将多幅同一场景不同聚焦区域的图像信息融合得到一幅全聚焦图像,该技术在军事、工业和农业等领域获得了广泛地应用。多聚焦图像融合可分为基于变换域的图像融合算法、基于空域的图像融合算法和基于深度学习的图像融合算法。为了验证各融合算法的融合性能,现有算法最常用的彩色多聚焦图像融合数据集是Lytro数据集,但该数据集是相机拍摄的,数据的质量较好,不能反映真实环境中相机抖动或物体移动等引起的图像配准错误的问题。随着智能手机的快速发展,为了获得一个更贴合真实环境的多聚焦图像测试集,本文利用多种型号手机构建了一个新的彩色多聚焦图像融合数据集:HBU-CVMDSP数据集。除此之外,本文针对现有算法的不足,利用多尺度变换与深度学习网络,提出了一种基于注意力卷积神经网络(Attention Convolutional Neural Networks,ACNN)的非下采样剪切波变换(NonSubsampled Shearlet Transform,NSST)域多聚焦图像融合,取得了很好的融合效果。本文的主要研究内容如下:(1)真实环境下多聚焦图像融合数据集及算法测试当前多聚焦图像数据集大部分是通过专业成像设备采集或者经过高斯模糊处理的模拟数据集,很难反映真实环境下多聚焦图像融合技术的优劣。因此,本文利用常见的智能手机构建了一个真实环境下的多聚焦图像融合数据集,命名为HBU-CVMDSP数据集。该数据集由五部不同型号的手机进行采集,共包含66对多聚焦图像。此外,本文还验证了现有融合算法在该数据集中的融合结果。实验结果表明,大多数融合算法在该数据集上进行测试时,融合性能有待提高,因此,针对真实环境下的多聚焦图像融合数据集开发新的图像融合算法很有必要。(2)基于ACNN的NSST域多聚焦图像融合算法为了提升真实环境下图像融合算法的性能,改善图像融合的效果,本文提出了一种基于ACNN的NSST域多聚焦图像融合算法。该算法首先对源图像进行NSST分解,获得图像的低频与高频分量;其次,对低频分量采用ACNN进行融合,而对高频分量采用改进拉普拉斯能量和(Sum of Modified Laplacian,SML)取大的融合规则进行融合;最后对融合后的高低频分量进行NSST逆变换得到最终的融合图像。实验结果表明,本文算法可以很好地保留源图像的有效信息,得到令人满意的融合图像。
其他文献
在人工智能领域,脑机接口技术(Brain-Computer Interface,BCI)逐渐成为备受关注的课题。BCI可以帮助患有运动神经元疾病的患者与外界交流。现有基于脑电的字符拼写主要有基于目标刺激发生后300ms的正电位(Positive,P300)的字符拼写与基于稳态视觉诱发电位的字符拼写,然而这些范式具有严重的眼动依赖,这种情况限制使得一些患有严重神经肌肉残疾的患者无法使用,现有的无眼动
学位
切换控制系统是一种特殊的混杂动态系统,是由有限个连续(离散)的子系统和特定的切换信号组成的。在网络控制系统、生物工程、航天领域以及汽车工业领域等有着广泛的应用。切换系统的稳定性和镇定一直是学者们关注的热门问题。同时,切换延迟系统的镇定控制结果也较为丰富,但尚未见到预测器在切换延迟系统中的应用。事件触发控制是为减轻网络通讯负担而产生的控制机制,主要是解决网络控制系统中网络拥堵、资源浪费以及带宽资源受
学位
图像拼接技术是指利用特征匹配、几何变换以及图像融合等算法,将在同一场景下拍摄的多张具有重叠部分的图像拼接成一幅无缝的广角图像。图像拼接技术可以突破传统单个相机视野较小的局限性,容易得到更大的视野范围,且不会存在明显的重影或者失真现象。近年来,随着相关算法的不断深入研究,图像拼接已经在很多领域被广泛的应用,比如医学图像处理、遥感图像以及最近比较流行的虚拟与现实技术。APAP(As-Projectiv
学位
离散事件系统(Discrete Event System,DES)是由不规则时间间隔出现的事件序列驱动的一种动态系统。实际中大部分人造系统从逻辑层面都可以抽象为离散事件系统进行研究,如柔性制造系统、轨道交通系统、通信系统等。在实际运行中,离散事件系统的某些状态(通常称为禁止状态)可能会使系统降低运行效率甚至导致故障的发生,因此要避免离散事件系统到达禁止状态。离散事件系统禁止状态控制器设计是指设计一
学位
随着“碳达峰、碳中和”战略目标的提出,我国的新能源产业进入快速发展阶段。风能是我国新能源使用占比较高的一种能源。目前,风电机组的装机容量日益增长,同时受极端天气、工作人员疏于维护、自然老化等因素的影响,风电机组的故障问题逐渐增多。风电机组故障后的维修工作量较大且成本较高,为了节约风电机组故障后维修所需的人力和物力成本,深入研究风电机组故障的可预知性是十分有意义的。将故障后维修转为故障前预防,可以有
学位
孤独症谱系障碍疾病(Autism Spectrum Disorder,ASD)是一种常发病于婴幼儿时期的神经发育障碍性疾病,会造成患者的认知能力、表达能力、社交能力受损。目前ASD发病机制尚不明朗,这给临床诊断带来一定的困难,目前主要方式是通过行为观察及量表的评估,诊断结果存在较大的主观性。因此,寻求一种客观且科学的生物标志物实现更加精准地诊断是非常重要的。随着神经影像学的发展,静息态脑电图(El
学位
随着计算机技术和控制理论的不断融合发展,数据量和信息量成爆炸性增长,为了节约网络资源,事件触发控制便得到了广泛的关注。事件触发控制根据设定的触发条件,只有在系统状态超出预定阈值时才使用网络,可在很大程度上减少网络的通信负担,同时保证系统的闭环性能。同时由于网络传输介质的存在,事件触发控制中往往会存在传输延迟的现象。因此,本文将伪预测技术与事件触发控制相结合,研究网络控制系统的事件触发预测控制。主要
学位
同步定位建图(Simultaneous Localization and Mapping,SLAM)是机器人避障的重要技术。传统激光SLAM技术,是在2D平面成像基础上开展移动机器人避障研究。算法性能好,但是成本高昂;多目视觉SLAM技术利用几何结构估计路标点与相机之间的距离,之后再进行定位与避障设计。这种设计价格低,缺点是算法设计复杂;RGB-D SLAM技术通过红外线传感器直接获得深度距离信息
学位
当前,新一轮产业变革突飞猛进,科学技术正在深刻变革。基于激光光谱法的气体检测技术在这样的大环境下迅速发展。激光光谱法是一种实时、环保、非接触式的气体检测手段。本文使用石英音叉(QTF)探测器搭建了基于光诱导热弹性激光光谱(LITES)的气体检测系统,结合石墨烯从紫外到太赫兹波段的宽带光吸收特性,研究了光吸收改性石英音叉对系统性能的提升效果,为微量气体分析与超宽带光学检测提供了一种很有前途的技术策略
学位
离散事件系统(Discrete Event System,DES)是由不规则时间间隔出现的事件序列驱动状态变化的一种动态系统。DES故障诊断指系统故障发生后,通过有限事件的发生诊断出故障发生。大部分的人造系统从逻辑层次上都可以将其抽象为DES,比如通讯系统、自动生产系统、柔性制造系统、交通控制系统等等。但由于现代科技的发展,系统规模日趋扩大,构造也越来越复杂,而故障的出现也日益频繁。故障的出现导致
学位