基于注意力机制的视觉里程计算法研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:lhk4444
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉里程计(Visual odometry,VO)是一种根据传感器传送而来的视觉信息,获取运动位姿的方法。这种方法应用领域广泛,在很多新兴领域,比如自动驾驶、机器人自定位和增强现实等领域都有很大的前景。视觉里程计所需要的传感器通常指相机,这种设备不像激光雷达那样笨重,因此成本低廉。这些优点都让视觉里程计成为研究热点,其技术也得到了很大发展。尽管如此,VO技术依然有很大的进步空间,比如在复杂的场景下不够稳定。相比于传统的几何方法,基于深度学习的方法可以在不需要显式计算的情况下,能够从数据中自动学习出有效的、健壮的表示,如深度、光流、特征、自我运动等。近年来,深度学习也在图像识别、目标检测等视觉任务上取得了很大进展,这给视觉里程计的研究带来了很大启发。本文的主要工作是针对如何提升视觉里程计方法的性能进行深入研究,结合深度学习技术和注意力机制提出四种视觉里程计神经网络模型,并在不同的数据集上分别进行测试,最后基于四种网络模型开发出一套视觉里程计系统。具体的工作包括以下内容:(1)在原本的基于CNN(Convolutional Neural Network,CNN)+LSTM(Long ShortTerm Memory,LSTM)结构的视觉里程计框架中引入不同的注意力机制。提出三种改进的特征提取模块,分别融合不同的注意力机制,分别是通道域注意力机制、空间域注意力机制以及混合域注意力机制,让网络的CNN部分能够提取到更多有效的特征。在多种数据集上的实验证明,加入注意力机制能够提高视觉里程计网络的精度。(2)通过强化学习的方式对通道域的注意力机制进行改进,引入自适应的注意力机制,这种自适应体现为参数的自适应,注意力机制子网的参数的更新不仅仅只依靠梯度下降。引入自适应的注意力机制的目的是增强网络的泛化能力,让网络面临新环境的时候可以更快地适应,也缩短了网络的训练时间,提高定位精度。(3)根据提出的网络模型开发出一套基于深度学习的视觉里程计系统。该系统结合了图像化技术、封装技术、以及自定义文件配置技术。本系统可以完成数据选择,位姿估计,误差显示等操作。帮助用户更方便地进行仿真实验。
其他文献
随着现代微波技术的迅猛发展,在诸如雷达、通信等应用中对高频高速的数据传输等要求,促使天线研究朝着高增益、大宽带、波束赋形等方向发展。本论文结合课题要求以及实际工程需要,主要研究了以下工作:首先,设计一款实现特定角度波束偏转的卡塞格伦天线,其工作频率为94GHz,波束偏转5.9°。通过理论分析,讨论其设计的可行性;然后仿真优化设计标准卡塞格伦天线;再进行偏转方式的对比研究,最终选定副面偏轴的卡塞格伦
太赫兹波作为新兴的电磁波研究频段,具有很多优异的特性,目前在生物医学、环境监测、安全检测、军事领域以及无线通信等领域展现出良好的前景。我国正在持续推进5G应用技术研发试验、开展6G愿景研究,而太赫兹技术被认为是6G的关键技术,目前国外发达国家都积极开展相关技术研究,因此大力发展太赫兹技术对我国未来在6G领域掌握技术话语权至关重要。光子晶体最突出的特点是具有带隙和实现能量局域化,因而可以实现对太赫兹
学位
野外环境下,沼泽、湿地以及由于暴雨等恶劣天气形成的大规模水障碍对无人地面车辆的威胁很大。这些区域的范围一般较大,且路面附着条件不佳。目前摄像机、毫米波雷达和激光雷达等环境感知设备无法准确识别到此类障碍:沼泽具有隐蔽性,甚至是肉眼也难以辨别;暴雨后的路面不可通行区域包含许多泥沙,导致水面不平整,这也会对检测造成一定的困难。且这些设备无法满足全天候检测的需求,例如雨雪天气、光线阴暗时摄像头识别受限,雾
随着含能材料对起爆、传爆准确性和可靠性的需求日益提高,传统的成型工艺已无法满足含能材料的发展。而3D打印技术柔性好、适应性强的优点使得其彻底摆脱了传统制造工艺中对于产品形态的限制和束缚,为含能材料的发展开辟了新的途径。本文针对自制的桌面级含能材料3D打印机,对其成型平台进行设计和优化,并以成型平台伺服系统为研究对象,对其动态性能进行数学建模及运动学仿真分析。具体内容为:首先,本文对含能材料3D打印
随着区块链底层技术的发展,区块链应用已经进入社会公证、智能化领域,越来越多的轻算力区块链项目正在落地。区块链的去中心化和去信任化等优势多基于区块链的共识机制和智能合约。然而区块链的数据同步性能却限制了区块链的进一步发展。当前制约轻算力区块链P2P网络性能的主要因素是传输速率和传输可靠性。本文针对这两个问题进行了研究,具体工作内容如下:(1)针对传统Bit Torrent协议对时延不敏感以及疏通策略
随着国内适龄劳动力的减少和人力成本的增加,许多行业开始使用机器人替代劳动力,从而进一步刺激和推动着机器人行业的技术革新和应用发展。在本论文,设计了一款适用于酒店、办公室环境的室内移动机器人,从使其具备稳定准确的运动能力、准确可靠的自主定位能力和安全高效的导航避障能力出发,对其运动控制与导航定位方法进行了深入研究。首先,根据机器人功能需求特点对机器人总体方案进行设计,采用主从分布式控制器方案设计了机
激光雷达外场性能检验受场地、时间和天候环境等因素的制约,使得激光雷达的生产难以满足各行各业对其日益增长的需求,因而迫切需要发展激光雷达室内全自动性能检测技术,以提高其检验精度和效率。为此,论文提出了一种能在室内模拟外场环境实现激光雷达性能全自动检验的方法,并进行了全自动检测系统的设计和实验研究。论文在深入资料调研的基础上,引入光纤延时链路技术,并结合激光回波模拟和LabVIEW虚拟仪器控制,给出了
定制木工家具柔性生产线正朝着无人化、智能化的方向发展,生产线的产能得到了大幅提升,同时,生产线复杂的结构也导致了其故障的频发,企业存在难以快速准确地排查故障的问题。因此,本文以定制木工家具柔性生产线为研究对象,结合机器学习的方法,研究设计了针对该生产线的故障诊断系统。首先,梳理了定制木工家具柔性生产线的组成和工艺流程,分析了定制木工家具柔性生产线主要加工设备的故障原因,提出了故障诊断系统的总体方案
脑卒中是目前世界上成年人的首要致残因素,幸存者存在50%~70%的偏瘫概率。脑卒中患者术后穿戴气动康复手套可以进行手功能康复训练,是帮助患者进行手部康复的一种较优的解决方案。不同于目前应用较多的预先编程模式和配合外设的主从控制模式,肌电控制模式具有控制过程动作自然、仿生性好、设备结构简单、应用灵活等优点。本文旨在将气压传动技术与肌电控制技术相结合,最终实现气动康复手套的肌电控制。根据表面肌电信号的