基于RGB-D相机的快速旋转式大场景三维地图构建方法研究

来源 :苏州大学 | 被引量 : 0次 | 上传用户:Y2J986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息化产业的不断发展,现代社会对于机器人行业、无人驾驶行业、室内导航行业有着强烈的需求,而三维重建就是其中至关重要的一项技术。机器人行业中,需要在三维场景中进行任务安排从而大大降低人们对机器人操作的门槛。无人驾驶行业中,通过提前构建道路的三维语义信息并融合在导航类软件中,采用AR(Augmented Reality)进行显示,保证使用者在面对如复杂的路况下,都能通过三维重建+AR的提示方式驶向正确的方向。室内导航行业中,场景中光照、场景几乎不变化、人流较大、干扰较多的情况,使用者几乎只能依靠手机等手持设备进行导航定位,对三维重建的算力和效率的具有很高的挑战性。而在众多三维重建的应用场景中,快速旋转式的大场景三维重建始终是一个难点。重建效果好、精度高的三维重建模型需要获取一个精准的位姿,而随着相机移动速度越快位姿跟踪难度也将随之提升。相机的快速平移和快速旋转会导致三维重建模型点云稀疏,模型缺失立体感,产生大量零散的点云。针对大场景三维重建技术有以下几个特点:第一,要求算法具有较高的快速性,从而可以提高场景采集的速度;第二,要求算法具有较好的回环准度;第三,要求算法在采集设备的选择上,尽可能便携。因此,针对快速旋转式大场景的三维重建系统,本文通过RGB-D相机图像采集装置,从位姿跟踪、三维重建算法、回环检测等方面进行探索和研究,得到一套较完善的旋转式大场景三维重建系统。主要内容和成果如下:1)针对当前大场景三维重建采集设备较为沉重、采集过程复杂且不易快速采集的问题,本文采用便携式RGB-D相机作为三维重建系统的采集装置,设计了更加快速的特征提取与特征匹配方法,在不影响精度的前提下采用了移动截止深度算法提高三维重建的效率。因此,本系统分别在图像采集、轨迹跟踪、后端优化以及三维重建部分,均以快速性和准确性为研究目的,最终实现了对大场景的快速旋转式三维重建的构建。通过对公开数据集的位姿估计进行对比实验,参与的对比算法包括ORBSLAM2和Elasticfusion算法,在移动速度0.21m/s,平均角速度为41.6deg/s时,ORBSLAM2和Elasticfusion的平均绝对轨迹误差分别为本文算法的1.19倍2.84倍,证明了所提出的算法具有快速性和位姿准确性。2)针对当前三维重建算法对快速旋转式大场景重建时易发生位姿误差,从而导致了三维重建模型的零散点云过多与空洞等问题,本文提出了利用移动截止深度建图对位姿进行优化的方法。该方法将通过移动截止深度构建的表面点云,与经过滤波处理的深度信息进行对比,对处于零散的点云进行剔除,同时也将该零散点云对应的位姿信息从跟踪模块中剔除。本文通过在公开RGB-D数据集与三种经典算法进行三维重建的对比实验,本文算法能够得到重建范围最广、模型最为完整、细节最为清晰的模型,证明了本文所提出算法在重建模型的整体效果及模型精细度都具有一定的优势。3)针对当前三维重建算法在进行不同连通大场景之间连接处的重建时容易发生错层的问题,本文提出了基于运载小车的地面约束的三维重建算法。通过将RGB-D相机放置在运载小车上,使得相机的运动轨迹始终与地面平行,从而将相机的运动轨迹从三维降到了二维。本文使用搭载在运载小车上的RGB-D相机,采集了大型走廊与大型房间的整体三维重建模型,通过改进的ORBSLAM2稠密建图算法、Kintinuous算法进行实验对比,证明了本文所提出的基于地面约束的三维重建算法,在面对不同大场景连接处的三维重建时,能够有效地消除错层重建。添加了地面约束后,本文算法所得到的三维重建模型的精度提高了接近一倍,平均误差仅为改进的ORBSLAM2稠密算法的三分之一。本文针对快速旋转式大场景三维重建方法进行了深入的研究,通过不同的细分场景与要求,设计了一种手持RGB-D相机的快速旋转式大场景三维重建方法,以及一种基于地面约束的RGB-D相机图像采集小车的快速旋转式大场景三维重建方法。手持RGB-D相机的快速旋转式大场景三维重建方法倾向于大场景的单一环境,能够在手持奔跑的情况下进行三维重建,无需移动缓慢的稳定手持,整体设计趋于轻量化。而基于地面约束的RGB-D相机图像采集小车的快速旋转式大场景三维重建方法,则是面向具有不同场景切换(比如光照不同、房间不同等等),在手持RGB-D相机的快速旋转式大场景三维重建方法的基础上,能够有效地消除重建的错层部分,使得最终的三维重建模型更为完善。
其他文献
本翻译实践报告以生态翻译学为视角,以余光中散文选集《心有猛虎细嗅蔷薇》中的“幽默的境界”、“思台北,念台北”和“没有邻居的城市”三篇散文为翻译实践原文,探讨散文英译的方法。原文遣词造句优美如诗,流露真挚思想感情,具有深刻的社会意义。笔者在翻译过程中力求将优美如画的文字、感人肺腑的情思、内涵深刻的意义呈现给外国读者。本报告中作者采用生态翻译学视角分析散文英译。生态翻译学中,翻译的生态环境指语言、文化
学位
<正>儿童情绪问题成功调节的前提在于教育者能专业地、敏锐地意识到不同儿童具有不同的情绪表达方式,尤其特殊的儿童具有特殊的情绪表达方式,并始终抱以接纳的态度,理解其成长中的痛点和需求,依此制定针对性的心理辅导策略。
期刊
多元智能作为个体差异的一个方面,在当今社会受到了广泛关注。加德纳(1999)提出了九种多元智能,发现音乐智能与语言智能密切相关。而且,关于音乐智能与二语学习者的语言技能(尤其是口语能力)之间关系的研究仍然是热门话题。根据文献回顾,在小学生和成年人研究中,音乐智能与二语口语表现之间存在正相关。高中生正处于口语发展的关键时期,而在中国外语教育背景下,教师鲜有意识到音乐智能对二语口语表现的作用。此外,在
学位
<正>单元整体视角将每个教学单元看作一个整体,对英语教学知识点和教学资源进行整合,引导每个单元的教学,完成每个单元教学目标的同时,实现英语学科的整体教学,推动英语阅读、听力、写作等各方面素养的培养。在英语教学中展开主题拓展阅读,更能利用趣味性主题、文化主题等吸引学生阅读,依托于教材阅读内容选取阅读主题,将阅读教学和课堂教学相整合,提高阅读教学的效率。
期刊
铯钨青铜(Cs0.33WO3)是一类有着优异近红外光(NIR)吸收性能的材料,有效吸收太阳能并转化为热能。石蜡(PW)是一类能够利用相态转变吸收或释放热量的储能材料。将两者结合应用于纺织领域,可有效减少因温度突变而引起的人体不适,同时达到提高能源利用率的目的。本课题利用自制的同轴微流控纺丝装置,制备以TPU溶液为外部溶液,去离子水为内部溶液及凝固浴的TPU中空纤维。通过控制内、外部溶液流速及溶液浓
学位
随着智能制造业的兴起,自动化无人操作技术日渐普及,工业机器人已经可以代替人类去完成很多复杂并且危险度很高的工作。其中减速器作为工业机器人的核心零部件,自从投入市场以来就在工业机器人的关节上被广泛应用。目前,全球工业机器人的需求量正呈现逐年递增的趋势,因此国内外对减速器的需求量也大大增加,有关减速器的研制与理论成为了研究的焦点,但是对减速器测试方面的研究却较为少见,所以研究一种能够快速检测减速器性能
学位
生产调度、设备维护和质量控制策略的合理制定,对提高企业竞争力有着重要作用。为解决实际生产中工件调度、预防性维护和质量控制之间的互相影响和互相制约问题,合理制定最优生产方案,论文从协调交货期指标、成本指标和质量指标出发,对单机系统和流水线系统环境下的生产调度、设备维护和质量控制进行集成优化研究。首先将单机系统作为研究对象,提出了一种两阶段集成优化方法。利用控制图对生产过程进行监控,建立质量和预防性维
学位
操控液滴的微流控技术作为运输液滴的载体已经广泛应用于生物医疗、化学分析等领域,该技术可以减少实验试剂的消耗,缩减分析的步骤,减小分析设备的体积。随着液滴操控技术的发展,不同的液滴转移方法也受到了越来越多的关注。本文基于疏水非平行板结构,进行了液滴转移的理论分析,完成了实验平台系统的搭建,完成了液滴转移的实验研究。首先进行了基于疏水非平行板结构液滴转移的理论分析。主要完成了液滴在疏水平面上的受力分析
学位
随着汽车电子智能化和互联化的发展,以及人们对于汽车主动安全要求的提高,汽车电子产品的可靠性质量性能成为汽车企业之间竞争的重要方面。目前存在的汽车电子产品锡球开裂的失效现象成为困扰电子行业的一个重点不良项目,急需对此问题进行研究和分析,找出改善锡球焊点开裂可靠性问题的方案。本文首先从影响电路板组件可靠性失效的原因展开分析,基于常见的电子可靠性失效模式,从人员、机器、物料、方法和环境方面对产品的影响因
学位
近年来,由于自然灾害、交通事故和自身疾病等原因,我国下肢残疾人口数量持续增长。面对逐年增加的下肢残疾患者的数量,最有效的办法是为下肢残疾患者穿戴假肢。当前应用比较广泛的被动式下肢假肢主要依靠弹性储能元件,在支撑末期释放能量帮助人体运动。但是这种方式提供的动力有限,且不能根据人体运动状态实时调整输出力矩大小。而现有的主动式假肢重量较大,控制复杂,难以大面积推广。为了满足下肢残疾者的使用需求,本课题针
学位