基于多尺度注意力机制的单幅图像深度估计方法研究

来源 :辽宁大学 | 被引量 : 0次 | 上传用户:yellowyangjie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像的深度估计是从给定的图像中提取深度信息从而重建三维场景,是计算机视觉最基础的研究领域之一,在语义分割、自动驾驶等前沿领域有着极其重要的应用。其中从单幅图像中进行深度估计最为棘手,因为同一张图像可以映射多个三维场景,计算机并不像人类可以根据丰富的先验知识准确地判断单幅图像的深度大小,所以这项任务对于计算机来说是很困难的。近年来,随着神经网络的发展,由于深度学习方法具有良好的特征提取和泛化能力而被深度估计研究广泛采用,解决了传统方法利用手工特征造成的鲁棒性较差的问题,同时基于神经网络的方法可以得到更准确的深度估计,但是目前在复杂场景预测的深度结果与真实深度图仍有较大差距。首先,本文对单幅图像深度估计的国内外研究现状进行分析,针对单幅图像深度估计领域中由复杂环境下存在多种景深导致的物体边缘估计不准确的问题,本文结合深度估计和语义信息的联系,提出了一种基于能够感知场景语义信息的多尺度Transformer残差金字塔网络(Residual Pyramid Network)的单幅图像深度估计方法,该方法通过使用三种形式的Transformer构建具有丰富语义信息的特征金字塔,并将其应用在编码器-解码器结构,得到一种新的神经网络模型,实现图像空间和尺度的双重特征融合,能够获得更加清晰的对象边缘轮廓,从而提升了单幅图像深度估计的准确性。然后,针对深度图中深度梯度较小区域存在细节丢失的问题,从目前基于编码器-解码器结构的单幅图像深度估计方法入手进行深度图优化。当前大部分方法在解码器结构中使用插值方法或者反卷积方法进行上采样,其中插值方法具有低通滤波的作用,会丢失高频分量,导致上采样后的深度图丢失了对象细节信息。而反卷积方法对整个图像用相同的卷积核,限制了对局部深度变化的响应,同时还带来巨大的参数,使得计算非常低效。因此本文提出了一种融合全局注意力机制和内容感知的单幅图像深度估计上采样方法,它具有较大的感受野,可以感知场景中的语义信息,在不引入过多的参数和计算量的同时,利用高层特征指导底层特征恢复出精确的深度图,将此方法应用在多尺度残差金字塔网络的解码器中,使网络表现出对深度梯度的高敏感性,最终实现了深度图的优化。最后,在NYU-Depth V2室内深度数据集上训练本文提出的网络模型,相应地在NYU-Depth V2和SUN RGB-D测试集上取得了相比目前有代表性的单幅图像深度估计方法更优的准确率和误差值,并且获得了更加清晰的物体轮廓和对象细节,从而验证了本文提出的单幅图像深度估计方法的有效性。
其他文献
中国现代漆画脱胎于中国传统漆绘,中国传统漆艺有着八千多年的悠久历史,但作为绘画艺术而存在,中国现代漆画从诞生至今不到百年的时间。不过经过几代人的不懈努力和积极探索,让现代漆画能够屹立于世界艺术的丛林之中。从进入全国美展到被认可为独立画种,再到拥有自己的独立展区,以及每年都会举行大大小小的漆画展,现代漆艺还进入了中国高校教育体系,这些都促使现代漆画的发展迈向了新的征程。然而新的机遇也意味着新的挑战,
学位
采取了表面溴化天然橡胶薄膜的方法,避免了从材料内部改性,采用表面引发的原子转移自由基聚合使甲基丙烯酰乙基磺基甜菜碱单体在天然橡胶表面生成带电聚合物刷,接枝带电聚合物刷的NR表面的物理化学性质产生巨大变化,并具有优异的抗菌性能。
会议
如今社会,是一个飞速发展的社会,技术创新已然走进了人们生活的各个领域,一些新兴产业,如人工智能、大数据、云计算等发展势头十分迅猛,极大地改变了全球的经济形态。在信息技术体系中,软件占据核心地位,是助力科学技术创新与推动经济体系转型的潜在助推力。软件产业是电子信息领域最为重要的组成部分,国家为了鼓励软件产业的健康发展,出台了大量的相关政策,因此软件产业才能稳步向上发展。近年来,软件产业的发展前景尚好
学位
随着社会的进步发展与人口老龄化程度加深,老年人的生活质量以及身心健康需求得到社会关注。在人口老龄化进程中,受特定历史条件下的计划生育政策影响以及家庭结构变化,我国空巢老人这一特殊群体的数量也在迅速增加。与此同时,社会养老压力加大、子女照料精力有限,无法提供稳定的社会支持,加之老人生活观念和健康需求不断升级,空巢老人的养老需求面临着更加复杂的困境。因此,为实现老有所养、老有所乐,建立并完善空巢老人互
学位
学位
“杰利蝾螈”现象伴随美国从殖民地时期发展至今,是美国政治不公正重要体现。政党通过控制立法机构在选区划分时将选民群体刻意分散或集中在特定选区内、将敌对政党竞选人划分致难以胜利的选区等措施实现政党代表稳定地胜利。“杰利蝾螈”产生于美国精英阶层致力于避免直接民主、争取达成联邦政府的初衷,在限制少数族裔、移民者的选举权力的过程中发展,但最终在政党政治和计算机技术的发展下司法体系也对其逐渐失去限制,对美国公
学位
学位
随着社会高速发展,由环境引发的问题渐渐成为人们关注的焦点,一些重金属阳离子的存在会严重影响生存环境甚至危害人类健康,如Fe3+是构成人体最基本的微量元素之一,Fe3+的缺乏或者过量都易导致问题出现,例如消渴症、心血管衰竭等。Cu2+是人体最常见的金属元素之一,参与了人体很多的基本生理过程,Cu2+的过量或者缺乏直接影响人体危害,例如门克斯病。因此开发出能够定量检测环境中的特定金属离子具有重要价值。
学位
习近平总书记强调,应急处突能力是年轻干部们必须要掌握的一项能力,尤其是进入至新的形势环境下,面对紧急突发事件、面对风险挑战,对领导干部的应急处突能力有了新要求,应急处突能力自然也被赋予了新的时代内涵,所以本文选取领导干部应急处突能力建设作为研究课题。本文以黑龙江省绥化市为例,找出当前领导干部应急处突能力建设上存在的问题,分析产生问题的原因。发现对领导干部应急处突能力建设重要性的认识、对应急处突相关
学位
校园欺凌问题是社会和国家长期以来关注的热点问题,国家十分重视校园欺凌的防治工作。当前,学校的关注点更多地集中于预防校园欺凌事件以及欺凌事件发生后对欺凌者的教育方面,对被欺凌者的关注略有缺失不足。据调查结果显示,被欺凌者很容易出现自我效能较低等问题,而儿童及青少年的自我效能对其健康成长有着至关重要的影响。因此,被欺凌小学生自我效能的提升是一个亟待深入探究的问题。G社区为被欺凌小学生开展的小组社会工作
学位