基于边缘引导的稠密深度图生成算法研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:wcn009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于采集设备自身的局限以及采集环境因素的影响,获取场景中稠密并且精确的深度信息依然十分困难,例如使用Kinect拍摄光滑物体表面时深度图中会产生空洞,在室外环境中使用激光雷达所获取的深度信息也非常稀疏。本文将利用卷积神经网络对稀疏深度图进行修补,以产生稠密的深度图。本文所做主要工作如下:(1)提出了边缘距离场的概念,设计了边缘引导卷积层。首先将深度边缘图根据定义规则转换成边缘距离场。之后,借助于边缘距离场,边缘引导卷积层不仅可以考虑深度数据的稀疏性,传递数据置信度,而且可以保持深度图修补过程中深度边缘的清晰,提升修补效果。(2)设计了一种基于边缘引导卷积的稠密深度图生成网络(EGCNN),包括深度边缘提取模块、边缘引导修补模块、多尺度优化模块。深度边缘提取模块接受RGB图像的高频分量和利用现有算法对稀疏深度图进行修补后的稠密深度图作为输入,通过结合二者互补的边缘信息,得到较准确的深度边缘。边缘引导修补模块借助于边缘引导卷积层,通过输入稀疏深度图、图像置信度和边缘距离场,提取不同尺度的深度信息,进行稀疏深度的修补。多尺度优化模块对边缘引导修补模块的输出进行处理,使用基于标准卷积层的三个级联沙漏网络,结合RGB信息进一步优化修补结果。(3)通过与稀疏不变卷积、置信度传播卷积进行对比实验,验证了边缘引导卷积的有效性;通过对比使用不同深度边缘的修补效果,验证了边缘引导卷积的鲁棒性。此外,实验评估了不同边缘距离场定义规则对边缘引导修补模块性能的影响。消融实验也显示了多尺度优化模块对整体网络性能的积极影响。同时,与其他算法的对比实验证明,本文提出的模型具有较强泛化能力,在多个数据集、不同稀疏度下都有着优于其他算法的良好表现。(4)进一步将本文模型应用于行人检测领域。实际应用中,利用RGB图像和原始稀疏深度信息生成边缘距离场,根据边缘距离场和RGB图像引导修补深度图,从而得到稠密深度图,将其与RGB图像相结合得到较好的行人检测结果。实验结果表明,将本文模型应用于行人检测领域能有效提升检测效果。
其他文献
布莱希特对老子的接受,不仅停留在共同的反战意识、对人道主义的呼唤层面,更重要的是通过写作介入纷乱的现状和黑暗的现实。布莱希特创作对老子思想的接受也随着对社会现实的认识而不断地深化。研究布莱希特创作对老子哲学中“贵柔思想”与“不争思想”的接受,对于老子思想的现代化解读,以及中国文化文学在海外传播中所形成的“中国影响”的探究都具有重要的意义。本论文具体从以下四个方面展开:第一章梳理布莱希特创作中老子思
接地网作为电力系统的重要组成部分,其良好的运行工况是保障电力系统正常运行与电力工作人员安全的重要条件。针对目前接地网腐蚀检测方法存在的一些缺点,本文提出了具有可带电测量,抗干扰能力强,测量快速简便等优点的强极化法,通过测量注入电流关断后接地网与土壤之间等效双电层电容放电的时间常数τ来进行接地网的整体腐蚀程度评价。基于校内自建地网、日字形、口字形接地网实验场以及直流加速腐蚀实验平台,本文针对强极化法
随着全球经济的发展和能源形式的转型,化石燃料等传统能源逐渐被可再生能源所代替,以清洁能源为主的新型电力能源结构在世界各国受到关注。由于风电、光伏等新能源的快速发展,特别是大量分布式光伏电源接入配电网,给配电网的运行与控制带来了新的挑战。以低压配电网为例,光伏装机容量逐年上升,但由于用户需求有限,光伏出力无法被完全消纳,电压越限问题尤为严重。光伏的分布式特性和其输出的波动性、不确定性,增加了系统运行
消毒工艺在有效抑制致病微生物的风险的同时,常常伴随着消毒副产物的产生。基于消毒副产物广泛存在及对人体的危害,去除消毒过程中产生的消毒副产物(DBPs)具有现实意义。一氯乙酸常在氯消毒过程中生成,溴酸盐常在臭氧消毒过程中生成,一氯乙酸在常规处理工艺中存在去除率低、毒性增加等问题,溴酸盐基本无法氧化去除。高级还原技术具有极大的优势,通过使用活化技术,在还原剂的帮助下生成e-aq、H·等还原性自由基,高
随着全球化经济的到来,市场需求呈现出日益多变的特征。为了满足客户的个性化需求,快速响应市场需求的变化,迫切要求制造系统能够适应市场变化,迅速可靠的调整自身的制造过程及生产能力,实现高效率生产以应对快速变化的市场需求,这对制造系统的柔性以及企业的快速响应能力提出了更高的要求。因此,对柔性制造系统的研究极为关键。可重构制造是一种新的制造模式,其根据制造单元重构或设备重构,突破传统调度约束,满足快速变化
自2016年9月国务院办公厅印发了《关于大力发展装配式建筑的指导意见》文件以来,我国的装配式建筑发展开始进入了大发展时期。随着我国的建筑业规模不断扩大,人民对于建筑产品的质量和相关节能环保要求的不断提高,以及中国人口老龄化带来的适龄劳动力减少的客观事实,在现阶段大力发展装配式建筑具有重大意义。值得注意的是:伴随着中国建筑行业的发展,建设工地上的临时工地用房的建筑品质也在相应的提升,先后经历了水泥活
随着人工智能技术的兴起,智能机器人的诞生极大地便利了人类的方方面面。而融合了智能语音、SLAM技术、目标检测跟踪算法、强化学习的多模态交互移动抓取机器人必然是拥有广阔的发展前景与实际意义。本文以智能移动抓取机器人为研究对象,对未知环境下目标跟踪问题与轨迹规划问题进行研究,主要内容如下:(1)针对复杂背景环境下的目标跟踪问题,设计了一种新型的自适应分层重采样突变粒子滤波算法,解决了在复杂识别场合下干
掉层框架结构的上、下两侧的接地方式不等高,因此与普通框架结构相比掉层框架结构的受力性能有显著差异,山地掉层框架结构的突出问题是竖向刚度不均匀和楼层承载力突变以及上接地层变形集中,加入摇摆墙可以有效地控制山地掉层框架结构的整体变形能力。山地掉层框架-摇摆墙结构体系与结构的动力反应特性密切相关,研究表明SSI效应明显地改变了结构的动力特性。因此,SSI效应必然对山地掉层框架-摇摆墙结构体系的抗震性能有
近年来,随着电网结构日益复杂和规模日益庞大,由暂态电压安全问题导致的连锁故障,严重威胁着电网的安全运行,亟需采取适当的电压预防控制措施。面对大电网具有电网规模大、耦合紧密、故障集众多、系统结构复杂等特点,导致考虑暂态安全约束的最优潮流(TSCOPF)计算复杂性高。面对大规模复杂电网的TSCOPF问题,现有方法还存在模型精度低、求解速度慢的缺陷,亟需提升当前大电网的在线优化计算的速度和精度。基于此,
图像是人类获取与感知外界信息的主要途径,水下观测系统也以图像作为主要载体。光在水环境传播时会面临严重的吸收和散射效应,导致水下的图像细节模糊、对比度低等问题。尤其是,当成像光路存在热源或目标自身为发热源时,成像光场折射率的非均匀性使得水下图像会进一步发生扭曲失真、离焦模糊,严重降低成像质量。因此,提升热干扰环境水下光学成像质量,复原降质图像,具有重要的现实意义。随着深度学习的发展及应用,利用深度学