基于多任务学习与上下文信息的遥感图像语义分割

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:endlessing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着遥感技术的飞速发展,目前可获得的遥感数据越来越丰富,针对遥感数据的场景理解也越发引起关注。语义分割任务作为遥感数据场景理解中的重要任务,有着极其广泛的应用。虽然基于深度学习的方法已在遥感图像分割领域取得了优异的效果,但还存在资源消耗大、边缘分割困难、上下文处理方法仍需优化等问题。针对这些问题,本文结合多任务学习、注意力机制及类别上下文增强思想对遥感图像语义分割展开研究。本文主要研究内容如下:1.提出了一种基于图像超分辨与特征增强的多任务遥感图像语义分割方法。目前主流算法通常面临资源消耗较大的问题。本文从输入端考虑,对低分辨率输入下的语义分割效果进行优化,为解决该问题提供另一种思路。该方法结合多任务学习思想,令同一网络框架下同时包含语义分割和超分辨两个任务分支。超分辨任务作为辅助任务,通过学习图像的高分辨表示来获得额外的细节信息。进而通过特征增强模块学习两个任务特征间的相似性关系进行任务间交互,实现对语义分割任务的辅助。经过实验,所提出方法在三个数据集上均优于各基线网络,验证了该方法的有效性。2.提出了一种基于边缘检测与双注意力的多任务遥感图像语义分割方法。语义分割领域长期存在着边缘部分预测困难的问题。考虑到语义分割与边缘检测耦合性较高,且两个任务间可以有效地相互促进。本文结合多任务学习思想,在语义分割网络框架下引入边缘检测任务。该网络针对边缘检测任务要求精细化结果的特性,引入了双注意力模块对低级别特征进行额外处理,同时使用可学习上采样模块实现更精细的图像上采样。并设计了一种边缘优化模块,对分支间的一致性关系进行学习,从而实现任务间交互。经过实验,所提出方法在三个数据集上均优于各基线网络,验证了该方法的有效性。3.提出了一种基于上下文增强与多任务优化的遥感图像语义分割方法。主要针对上下文处理方法及多任务学习框架再优化问题进行设计。为实现更有效的上下文处理,通过监督学习初步得到特征信息的类别区域表示,并使用特征间的关联关系进行特征增强,实现适应目标区域范围的上下文信息处理。为进一步发挥多任务学习的优势,设计了一种更直接的跨任务交互方法,令边缘特征作为掩膜直接对语义分割特征进行增强。针对多任务学习框架训练过程中的权重适应问题,设计了一种自调节多任务权重方法,协调训练过程中不同任务之间的关系。经过实验,所提出方法在三个数据集上均优于各基线网络,验证了该方法的有效性。
其他文献
随着我国经济发展,各行业对电力能源的应用需求进一步增大,保障电力系统运行安全稳定显得比较重要。继电器技术在电力系统保护方面发挥着重要作用,为能有效促进电力系统良好运行,将继电器技术合理应用在电力系统中较为关键。基于此,本文就电力系统保护中继电器技术应用价值以及影响因素进行分析,然后就继电器技术应用发展探究,希望能为电力系统良好运行起到积极作用。
期刊
近几年来,由于无人机技术的不断提高和完善,其制造成本和操作难度大幅降低,使无人机作为一种新兴的消费级产品广泛应用于我们的日常生活中。由于无人机体积小,隐蔽性强的特点,经常被不法分子应用于大量的非法活动中,如无人机扰航、非法拍摄、搭载危险品进行恐怖活动等,严重影响了公民人身安全。自2016年起,我国陆续颁布了多部无人机管理相关的政策文件,来保障人民的低空安全,但因无人机“黑飞”而导致的安全隐患问题仍
学位
随着深度学习技术的发展,基于深度学习的视频目标分割算法已经成为了处理视频目标分割任务的主要方法。但是深度学习模型需要大量的训练数据进行训练,可以预见,靠人工制作视频目标分割数据集将无法满足规模日益扩大的视频目标分割模型的训练需求。基于自监督学习的视频目标分割算法以其不需要人工标注数据集即可对视频目标分割模型进行训练的特点受到了广泛的关注。由于使用的数据集没有经过人工标注,自监督学习方法将直接决定视
学位
随着社会和经济的不断发展,公共交通和物流已经成为生活生产中至关重要的部分。为了维护公共交通和物流的秩序和安全,利用X光安检机来排查行李中的危险物品,成为了安全检查中必不可少的环节。已经有学者利用计算机视觉的方法来代替低效繁琐的人工X光图像危险物品检查。但X光图像复杂混乱,物体之间重叠严重,这给现有的检测方法带来了很大影响。本文针对现有检测算法对重叠严重的X光图像检测效果不佳的问题,利用前后背景分离
学位
随着无线通信技术的发展以及5G技术的成熟与普及,微波多工器作为一种可以分离与合成信号的频率选择器件在卫星通信、雷达系统以及电台调频等领域得到了广泛的应用。由于频谱资源的日渐紧张,对于多工器的性能指标要求也越来越高,其设计难度也逐渐增加。为了适应日渐增加的多工器设计难度,本文将围绕多工器设计开展如下几项工作:1、为了给后续的多工器设计提供理论基础,本文首先对滤波器的设计进行了研究。先是介绍了基于广义
学位
由于每个人的许多生理特征都是独特的,因此利用生物特征进行个体身份识别在本质上更可靠和更卓越。由于人脸识别的非接触性和人脸识别算法的高精度,人脸识别是更可取的生物特征识别解决方案之一。但是,人脸图像数据通常维数很高,会导致“维数灾难”的难题。而且,人脸图像还不可避免地会遭受噪声和遮挡的破坏,导致人脸特征丢失。因此,如何利用降维技术快速地提取特征,从而得到数据的有效低维表示,已经成为了研究界广泛关注的
学位
人脸识别一直是计算机视觉和模式识别领域最关注的问题。近年来人脸识别技术取得了日新月异的发展,但在遮挡人脸识别领域的研究却很少,有待进一步发展与完善。由于COVID-19疫情的爆发,越来越多的人开始在公共场合佩戴口罩。口罩的多样性会产生各种各样的面部遮挡问题,这给人脸识别带来了很大的影响。传统的遮挡人脸识别方法由于缺乏用于训练的大规模遮挡人脸数据集,难以准确识别遮挡人脸图像。此外,现有的上下文注意力
学位
在高中化学教学中开展爱国主义教育,可以从现行化学教材、化学高考题中深度挖掘爱国主义教育的资源,再利用信息技术、任务群、人物传记等多种方式把科学文化知识学习和爱国主义教育融于一体,实现立德树人之教育使命。
期刊
随着互联网和智能手机的普及,信息传播媒介逐渐从以文本为主过渡到以图像视频为主。目前,互联网上每天会产生海量的视频数据,亟需设计高效的智能算法对视频进行自动分析。视频描述技术是一种理解并分析视频内容的方法,旨在将视频转换为一段描述视频内容的文本。目前,基于深度学习的视频描述算法已取得不错的结果,但是在提取视频语义信息方面还存在诸多问题,如利用动态特征中的时序信息、加强关键目标的作用、发挥多层级视觉特
学位
学位