多源遥感数据张量建模与深度融合研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:taixiangle
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,各国航天技术取得重大进展,发射了越来越多的军用或民用遥感卫星,其获取的遥感数据在空间分辨率、时间分辨率、光谱分辨率上均得到大幅提升,为资源环境、现代农业、公共安全和军事侦察等多个领域提供便利。于我国而言,已形成了资源、环境、海洋、国防为一体的对地观测遥感卫星体系。尽管如此,受到卫星传感器的成像机理、硬件技术和发射成本等的限制,遥感卫星无法获得同时具有高空间分辨率和高光谱分辨率的影像。于是,对高分辨率遥感影像的获取难度与实际应用需求之间的矛盾,为研究人员将信息融合相关技术应用到遥感影像处理任务提供了动机,也成为了本文的研究基础。多源数据融合技术是指通过信号分析与图像处理技术,综合不同来源的数据,以提升数据的精度、置信度和丰富性。本文面向全色影像与多光谱影像融合以及多光谱影像与高光谱影像的融合任务,针对融合过程中的空间信息损失和光谱失真等问题,充分挖掘待融合数据的高维特性和层次化特征,基于张量表征、深度度量学习、生成对抗网络等模型,建立了多个融合框架。论文主要工作概括如下:1.针对传统基于多分辨分析的多光谱与全色影像融合方法存在的空间细节丢失和光谱扭曲问题,提出了一种基于多尺度几何支持张量滤波的多光谱与全色影像融合方法。首先,推广最小二乘支持向量回归至张量形式,从其结构风险最小化的优化函数中,推导出张量滤波器,并通过引入Ridgelet核函数,赋予该张量滤波器方向性,将其推广至多个尺度,得到具有方向性的多尺度几何支持张量滤波器。其次,利用构造的多方向多尺度的张量滤波器对影像进行特征提取,得到具有几何特性的多尺度特征。最后,将这些特征在不同方向和尺度上进行融合,得到融合后的高空间分辨率多光谱影像。该方法通过多尺度多方向的特征提取以及张量形式的特征融合,极大地减少空间信息的损失和光谱的扭曲。在QuickBird和GeoEye-1卫星数据的融合结果显示,该方法与传统逐波段注入方法相比,能够很好地保持光谱信息,同时尽可能地提高多光谱影像的空间分辨率。2.提出一种张量空谱联合相关正则的多光谱与高光谱影像融合方法。从张量表征出发,通过探索张量在不同维度的低秩特性,构建了一系列维度判别的低秩张量,将融合问题建模为光谱梯度稀疏正则的判别式低秩张量恢复问题,并通过交替方向乘子法对模型进行优化求解。在Pavia数据和Washington数据上的实验结果从视觉效果和定量评价指标上均验证了所提出方法的有效性。3.提出一种基于深度度量学习的多光谱与全色影像融合方法。考虑到遥感影像的几何结构具有多样性,首先利用几何聚类方法将影像块进行粗分类,并以此作为深度度量网络的先验信息,再根据类别数设计相应数量的神经网络并进行训练。在训练时,采用堆栈稀疏自编码器网络结构,先利用输入输出之间的关系进行预训练,再将分类信息作为标签进行网络参数精调,得到训练好的深度网络。在测试时,对待融合遥感影像进行分块,其中的全色影像块作为网络输入,根据相应距离度量算法对其进行分类,分类至正确的子空间中,由于多光谱影像和全色影像描述的是同一个场景空间,因此,可以据此得到多光谱影像块的流形结构。重构时,这一影像块可由同一流形结构中的其他块线性表征,得到融合后的高分辨率多光谱影像块。在QuickBird、GeoEye-1和WorldView-2卫星数据上的融合结果表明,在视觉效果和客观评价指标上,所提出的方法均优于对比方法。4.针对现有深度学习融合方法由错误累积造成的融合误差,提出一种基于渐进补偿生成对抗网络的多光谱与全色影像融合方法。该方法通过对空间信息与光谱信息的渐进补偿,以两步融合的形式得到融合后的多光谱与全色影像。首先利用深度多尺度引导生成对抗网络对多光谱影像进行初步锐化,然后在初步锐化的多光谱影像的基础上,通过一对生成对抗网络对空间和光谱残差进行补偿,最终得到融合后的影像。整个融合模型包含三个生成对抗网络,基于该模型的独特结构,设计了一种联合补偿损失,使三个网络能够同时被训练。在QuickBird和WorldView-4卫星数据上的实验证明了该方法的有效性,且其融合结果优于对比方法。5.针对现有深度卷积网络融合结果产生的细节丢失和光谱失真问题,提出一种基于协作融合框架的多光谱与全色影像融合方法。该方法考虑融合中的双协作关系,即空-谱协作与谱间协作,利用小波变换分离全色影像特征的高低频成分,之后,对全色影像特征的低频成分进行变换,并利用它们引导光谱相关性的调节过程,调节过程采用图卷积网络。最后,将全色影像特征的高频成分与经调节后的多光谱影像各波段特征进行融合,得到高分辨率多光谱影像。在WorldView-4卫星数据融合实验表明,该方法优于传统融合方法和现有的基于深度学习的融合方法。
其他文献
近五年,超过3.5万人次外国人到青岛工作、生活。在青工作的外国专家中,14人荣获中国政府友谊奖,45人荣获山东省政府齐鲁友谊奖,3人荣获国际科学技术合作奖,20人受聘为青岛市政府特聘专家。青岛建立北方首个国家引进国外智力示范区,建成2个国家引才引智示范基地、2个山东省离岸创新创业基地、19个科技部高等学校学科创新引智基地;同时,在纽约、洛杉矶、法兰克福、伦敦等海外高层次人才聚集城市设立36家
期刊
帕金森病是第二大神经退行性疾病,目前患病率呈上升趋势。临床上尚无治愈帕金森病的方法,需要及早诊断患者的临床症状、监测疾病进展并迅速确定最佳的治疗方案。目前临床上对帕金森病的诊断、分级具有一定的主观性,主观的诊断往往会耽误患者病情并加重帕金森病患者家庭和社会的负担。因此,临床上对客观诊断和量化分级帕金森病有迫切的需要。本文从以帕金森病异常步态为研究对象,从特征提取、特征构建等方向出发,充分利用深度学
新中国成立初期,特殊的斗争环境催生出一大批具有时代特色的反特剧,随着2002年《誓言无声》的推出,此类电视剧重新回归大众视野,以反特故事为内核的谍战剧不断尝试兼容其他元素,逐渐走向成熟,在我国影视市场上持续掀起热潮。其愈加精良的制作、缜密的逻辑、跌宕的情节吸引了大批受众,这种将悬疑推理、情报交换、爱恨纠葛等多种叙事元素整合到一起的故事模式,不仅在内容上具有深厚的可挖掘性,能够满足观众日益复杂
期刊
脑卒中是我国成人致死、致残的首位病因,其对患者、家庭与社会带来巨大负担,80%以上卒中幸存者存在运动功能障碍,而上肢运动功能障碍最为普遍和严重。传统康复训练由康复治疗师进行人工指导和辅助训练,存在人力消耗大、训练效率低等问题。交互式康复训练可调动患者积极性,提高患者依从性,减轻医护人员负担,其中康复训练动作识别对于交互式康复训练至关重要,如何有效提取动作特征,提高康复训练动作识别准确率面临挑战。论
目的编制癌症患者输液港自我管理行为评估量表。分析影响癌症患者输液港自我管理行为的相关影响因素,为癌症患者输液港自我管理行为的评估及监测提供有效的测评工具,同时为今后输液港相关健康教育提供参考依据。方法本研究共包括三个阶段:德尔菲专家函询、量表信效度检测、癌症患者输液港自我管理行为相关影响因素分析。第一阶段(德尔菲函询):以自我效能理论为依据,自我管理任务为框架,通过文献回顾及静疗护士的意见,形成初
为了促进皮革制品企业的发展,针对金融扶贫的主要模式和特点进行分析,在此基础上,针对皮革制品企业存在的问题进行研究。通过研究表明,皮革制品企业在发展过程中存在多种问题,为解决皮革制品企业当前存在的财务绩效问题。在金融扶贫政策的基础上提出相应的对策,为皮革制品企业的未来发展营造良好氛围。
为了在保证实时性的前提下,进一步提高深度神经网络的语音增强性能,提出一种用于实时语音增强的卷积准循环网络。该网络采用因果形式的输入,只利用含噪语音当前帧及过去帧的时频域特征,以满足实时语音增强方法的输入要求;基于准循环神经网络对含噪语音时间维度上的相关性进行建模,利用其对含噪语音序列的并行处理能力,提高网络模型的计算效率;同时使用卷积层改进准循环神经网络在隐层对含噪语音频率维度特征的计算方式,使网
目的:接受胰十二指肠切除术(Pancreatoduodenectomy,PD)患者的预后与多种因素有关,然而关于术前骨骼肌指数(Skeletal muscle index,SMI)及营养预后指数(Prognostic nutritional index,PNI)与PD预后的关系仍不清楚。本研究旨在探讨SMI及PNI对PD术后主要并发症及预后的影响,依据SMI、PNI及其他危险因素构建预测PD术后1
沉淀池是运用沉淀作用去除废水中悬浮物的一种构筑物。文中探讨的辐流式沉淀池的池底坡度接近1∶10,对池底二次结构的成型坡度及弧度要求较高。为保证施工质量,施工方不仅要解决池底混凝土温度裂缝问题,同时必须控制锥形池底在方形池体中测量放线定位的精度,还需在池底混凝土浇筑时确保锥面横向的弧度、径向的坡度及平整度。结合福建华佳彩高新科技面板建设一期项目7#废水栋沉淀池的施工过程,探讨了辐流式沉淀池的工作原理
学位