基于空洞补全的动态视觉SLAM研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:zhongqiou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能机器人以及无人驾驶技术的不断发展,视觉SLAM(Simultaneous Localization And Mapping,同步定位与建图)技术已经成为各大主机厂以及供应商研究的关键点。视觉SLAM是指利用视觉传感器获取环境信息的SLAM技术。目前大多数视觉SLAM关注的是静态场景,即周围场景的物体都是静止不动的,它们难以应用于日常较为普遍的动态场景,即周围场景存在的运动物体会对SLAM的位姿估计产生不小的干扰;也有一些视觉SLAM应用于动态场景,它们借助神经网络来剔除动态物体从而减少动态物体的干扰,但剔除后的图像留有的空洞会对位姿估计以及地图构建产生不小的影响。如何在动态环境下获得更高的位姿估计精度以及获取更清楚逼真的场景地图是研究动态SLAM系统的关键所在。因此本文选取经典的ORB-SLAM2作为研究的基础框架,对其视觉前端引入运动分割网络,使其可以剔除场景中的动态物体,随后对剔除后的空洞进行补全,进而获得更精确的视觉里程计精度以及更逼真的场景地图。本文研究的主要工作如下:(1)针对视觉SLAM的多动态场景问题提出了基于ORB-SLAM2框架的系统改进方案。在视觉前端引入语义分割线程,使系统能够有效的剔除场景中的动态特征。语义分割线程采用基于Caffe框架的实时语义分割网络Seg Net进行分割,在获得潜在的动态对象后采用运动检测一致性来剔除真实的动态特征点,从而消除多动态物体对视觉精度的影响。(2)针对语义分割以及运动一致性检测剔除动态特征后,图像上产生的空洞掩码,做了基于光流引导像素传播的空洞补全研究。对于经运动分割后的图像上会产生空洞掩码,我们的目标是用来自不同帧的像素来修补该帧的空洞,这样就可以在不需要动态物体的情况下合成一副真实且逼真的图像。这种包含环境静态结构的合成图像对于虚拟和增强现实等实际应用,以及提高相机位姿估计精度等有比较大的意义。(3)提出了一种基于空洞补全的动态SLAM方法。本文首先结合语义分割网络和运动一致性检测来剔除动态物体,其次将剔除后留有空洞的图像序列输入到补全网络中进行图像补全,最后运用补全后的图像序列进行回环检测以及3D场景重建。在KITTI、TUM数据集上进行实验,结果表明与ORB-SLAM2等当前先进的SLAM方法相比,本文方法位姿估计的精度更高。本文研究的视觉SLAM系统能够有效的处理场景中的动态物体,在室内外高动态环境下都可以获得较好的精度和鲁棒性,并且对剔除动态物体后的空洞进行补全,进行稠密三维场景重建,这对于视觉SLAM在机器人以及无人驾驶应用上具有重大意义。
其他文献
随着我国经济的发展,生产生活中的能源来源日益多样化,电能路由器的概念应运而生。电能路由器是一种能够控制电能多方向流动且提供多种电压等级接口的电力电子设备。传统区域电能路由器为串联型架构,其最主要的缺点是输入能量需要经过多级变换,运行效率低,同时无法实现功率的柔性运行。为了解决上述问题,本文在统一电能质量调节器(UPQC)的基础上构建出一种串并联架构的新型电能路由器,并对路由器的有功功率流和无功功率
学位
目的 分析临床药师参与医院心血管内科病区临床工作的情况,探讨临床药师的工作特点和成效,进一步提高临床药学服务质量。方法 回顾性整理江南大学附属医院心血管内科临床药师参与2020年的工作记录,对医嘱审核中发现的不合理医嘱、不良反应发生情况及医护患咨询情况等进行统计分析。结果 2020年临床药师在院医嘱审核中发现并干预问题82例,医师接受78例,接受率为95.12%;发现不良反应41例,新的、严重的共
期刊
《"健康中国2030"规划纲要》中指出:突出解决好残疾人等重点人群的健康问题,实现全民健康覆盖,促进社会公平。随着北京2022冬残奥会的圆满闭幕,我国残疾人体育事业也迈向了新的历史台阶。残疾人体育作为体育强国建设过程中必不可少的一部分,在当前健康中国背景下迎来了新的发展机遇,同时也迎来了新的挑战。运用文献资料法以及逻辑分析法对当前健康中国背景下残疾人体育事业面临的困境进行分析总结,并提出相应破解路
会议
哲学社会科学知识具有鲜明的地域特征,新时代旅游研究要求融合本土要素,探索具有时代性、中国特色的知识体系。地方性知识是民族学和科学哲学中的一个重要概念,最初由人类学家格尔茨提出,表明了对西方传统科学价值观的反思,该视角的引入有助于理解、解构中国旅游研究的本土知识系统。研究表明,地方性知识观念形成了原初民族学意义、微观权力塑造的政治学意义到劳斯科学哲学意义的概念连续谱,旅游研究与其双向互动,可构成“描
期刊
建立电感耦合等离子体质谱法(ICP-MS)测定金山湖水中可溶性锂、钛、钒、铬、铁、镓、锗、锆、铌、钌、钯、铟、锡、碲、铪、钨、铱、铂、铋19种元素的分析方法。仪器进行自动调谐和质量校正优化参数后,样品经0.45μm滤膜过滤,并在线添加钪、铑、铼内标进行定量分析,并在KED模式下测定钛、钒、铬、铁以消除质谱干扰。质量控制中测定相关系数均大于0.9993,检出限0.01~0.25μg/L,相对标准偏差
期刊
报纸
德保壮族山歌是主要流传于广西德靖土语区的一种多声部民歌,是当地族群集体历史记忆与音乐文化认同的代表性符号象征。近年来,随着国家城乡一体化发展建设和乡村涌向城市的大量人口流动,壮族山歌开始从“边缘”走向“中心”;随着现代电子通讯技术的发展和智能手机运用的大众化,德保壮族山歌开始跨越时空场域进行网络传播和网络对歌,不断打破现实空间场域的山歌表演呈现,形成与传统实体歌圩并行的网络虚拟空间对歌平台。在城市
期刊
目的 通过回顾性分析心血管外科接受华法林抗凝治疗的住院病例,旨在探讨临床药师在华法林抗凝治疗中的作用。方法选取2020年1月~2021年1月于暨南大学附属第一医院心血管外科接受华法林抗凝治疗的患者145例,分为对照组和监护组。其中对照组67例患者由医生实施抗凝治疗方案。监护组78例患者在对照组的基础上接受临床药师抗凝监护。比较两组患者出院国际标准化比值(INR)达标情况、预警值发生率与及时处理率、
期刊
国家新型城镇化背景下,为深入探索城市扩展客观规律以启示合理城市规划方案和空间协调发展政策,城市扩展驱动分析需向区域化、精细化、长时序方向发展,并寻求多源时空大数据的支持。然而,虽然机器/深度学习模型已被广泛应用于城市扩展和土地变化预测,但该类模型的深层机制较难解释。探索机器学习可解释模型在城市扩展驱动分析领域的可用性对响应国家需求、促进城市扩展驱动分析进一步深入、城市扩展模拟预测与驱动分析相融合并
学位
伴随数字移动、“互联网+”等技术的迅猛普及和国人消费方式的不断升级,保险行业也面临着巨大变革,本文基于国内外保险行业移动展业发展背景,研究中国人民保险集团开发应用的“人保e通”移动展业平台的推广策略,旨在更好地推动其在人保公司的应用。其研究成果也可为我国整个保险行业移动展业平台的应用和移动互联网推广模式提供参考。首先,在总结了近年来保险业应用移动互联的发展态势和国内外研究成果的基础上,通过理清平台
学位