面向显著性目标检测的层次化建模网络

来源 :浙江大学 | 被引量 : 0次 | 上传用户:st841004
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
显著性目标检测,作为计算机视觉领域的基础研究问题之一,旨在对场景中的视觉显著性区域进行准确定位,并输出精细的目标分割图,是一项极具挑战性的研究课题。显著性目标检测能够模仿人类的视觉注意力机制,提升系统在海量数据场景下的图像理解能力,在计算摄影、医学影像、图像编辑、视频监控等领域具有重要的应用价值。深度神经网络的提出大大提升了显著性目标检测任务的性能。但复杂场景下,现有算法容易被嘈杂的背景、相似的纹理所误导,输出残缺的物体轮廓或不精准的目标定位,限制其进一步应用落地。本文提出了三个改进思路,来进一步提升显著性目标检测算法的性能和效率:1)使用层次化建模的手段,丰富多粒度的特征表达。2)赋予神经网络样本自适应的推理能力,适应复杂视觉场景。3)对RGB-D显著性目标检测中的深度图进行显式的修正,削弱噪声样本对算法的负面影响。基于以上三点,本文从层次化建模的角度出发,针对两种任务场景,设计了两个显著性目标检测算法模型:1.针对RGB显著性目标检测任务,本文综合考虑一二两点,设计了一个生成参数式的层次化显著性目标检测网络(SHNet),使用先验知识引导的层次化建模模块,对显著性目标内不同区域进行层次划分,进而建模区域自适应的多粒度特征。此外,SHNet中还包含一个样本自适应的参数生成模块,用于为网络的解码器生成卷积核参数,进而建模不同样本间的多样化差异。最终,SHNet在五个常用数据集的多种实验设置下均达到了State-of-the-art的性能指标,并且在计算量和性能上达到了较高的平衡。2.针对RGB-D显著性目标检测任务,本文综合考虑一三两点,设计了一个深度修正的层次化RGB-D显著性目标检测网络(DHM~2Fv2),根据深度信息对场景区域进行层次化分,进而建模空间分布敏感的显著性特征。此外,DHM~2Fv2中还涉及一个深度图修正模块,来提供可学习的深度信息层次化计算方式,从而缓解低质量深度图带来的噪声干扰。最终,DHM~2Fv2在九个常用数据集上达到了State-of-the-art的效果。本文提出的算法网络为RGB与RGB-D显著性目标检测任务提供了新的解决方案,促进了显著性目标检测领域的研究发展。同时,这两个算法的设计思想也可以为其他计算机视觉任务提供启发,推动了层次化建模手段在图像感知领域的深入应用。
其他文献
推荐系统在缓解信息过载方面发挥着重要作用,并已经广泛应用于各种在线服务,例如电子商务、音乐和电影。特别地,序列推荐是一项具有挑战性的任务,其目的是预测用户在给定历史行为的情况下可能与之交互的潜在项目,旨在基于用户的历史行为来模拟用户偏好的演变。最近,Self-attention模型因为其良好的性能在序列推荐领域得到了广泛的应用,它通过在序列中的所有项目之间建立稠密的连接来捕获全局感受野。然而,盲目
学位
报纸
研究如何从策略约束优化的角度解决安全强化学习问题是一个重要的研究方向。本文从安全强化学习算法应用角度出发,针对当前已有算法性能不稳定,需要求近似解,成本约束收敛震荡等问题,分别从乘子法和罚函数法的角度设计了更加符合安全约束的算法:基于安全投影的CUP算法(Constrained Update Projection Algorithm)和基于增广拉格朗日的APPO算法(Augmented Proxi
学位
随着物联网技术的发展,智能家居、可穿戴设备、车联网等各类智能电子设备的需求日益增长,对智能设备的电源管理也提出了更高的要求。为延长物联网设备电池的使用时间,在宽负载范围内实现高效电压转换,以及在轻载下降低静态功耗是目前电源管理芯片的发展趋势之一。另一方面,物联网复杂多变的应用环境要求电源管理芯片具备快速的动态响应能力以减小负载变化对电源造成的影响。本文提出了一种宽范围高效率的低功耗同步降压转换器,
学位
我国能源资源与负荷需求在地理分布上具有高度逆向的特征,为实现远距离大容量的电力传输,已发展了大规模高压直流输电工程。多回基于电网换相换流器型高压直流输电系统(line commutated converter-based high voltage direct current,LCC-HVDC)落点于同一受端电网,电气距离接近的直流换流站与受端电网构成了直流多馈入系统。与此同时,伴随着受端电网馈入
学位
近年来能源短缺、生态环境恶化、气候危机等一系列严重问题不断出现,统筹协调能源消耗与绿色可持续发展已经成为世界各国的关注焦点,推动碳交易市场发展以及建设多能互补的综合能源系统已成为节能减排的重要途径。然而,源荷两端的不确定性都给系统的可靠运行带来一定的挑战。区间预测可以提供预测目标的不确定性信息,帮助决策者制定更加合理准确的策略。鲁棒优化方法能够基于区间预测的结果,搜寻不确定集合中最坏情况下的最优解
学位
随着风电等新能源大量替代传统同步机,电力系统惯量降低,调频能力弱化,频率失稳风险增加。风电可以通过利用转子动能或预留备用功率的方式来为系统提供频率支撑。然而,由于风电机组通过电力电子接口并网,其调频特性与传统同步机有明显不同,这也将使得电力系统频率动态机理复杂化,难以分析频率响应特性。此外,风电机组释放转子动能为系统提供有功支撑后,若调频控制策略设计不合理,其转速恢复时可能引起频率二次跌落,不利于
学位
储热技术是解决热能利用中供需不匹配问题的重要技术途径,对于提升热能利用的效率和经济性具有重要意义。储热换热器作为实现储热技术的关键技术载体,新型储热换热系统的开发对于提升储热技术的发展和应用具有重要的学术和工程意义。基于固体显热材料宽温区、高体积储热容量和相变材料蓄放热温度和功率较稳定的特点,本文采用自然循环半开式热管换热实现高温显热蓄热单元(SH-unit)和相变过渡蓄热单元(PCM-unit)
学位
【目的】科学评价水网地区湿地生态安全状况,为区域生态安全与高质量发展提供依据。【方法】基于水网地区湿地在城市发展过程中所面临的威胁,以苏州市吴江区为研究对象,运用驱动力-压力-状态-影响-响应-管理(DPSIRM)模型构建评价指标体系,采用组合赋权法赋予指标权重,结合地理信息系统(GIS)格网技术将部分指标进行空间量化,最终通过综合评价法对2012—2020年吴江区的湿地生态安全进行评价。【结果】
期刊
锂离子电池具有环境友好和能量密度高等优点,已经被广泛的应用于新能源汽车领域中。在实际使用过程中,不同的用户对电池电量维护的喜好是不同的,例如有人喜欢满充满放,有人喜欢浅充浅放,因此不同用户的电池会在不同的SOC循环区间内进行使用。根据锂离子电池的基本特性,其老化性能与SOC循环区间相关,但目前对锂离子电池老化性能的研究均是在某一恒定的SOC循环区间内进行的,而在实际生活中使用电池时SOC循环区间一
学位