复杂作业环境下基于点线特征的视觉惯导SLAM研究与应用

来源 :东南大学 | 被引量 : 0次 | 上传用户:fat1984yy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
复杂未知作业环境下,视觉 SLAM技术应用在穿戴式系统上往往存在定位不准、易丢失的问题。本文针对复杂多样且存在光线变化、移动物体等干扰的作业环境,研究了基于点线特征的视觉惯导SLAM技术;在此基础上,以巡检作业人员定位为典型应用场景,设计了可穿戴式定位系统,搭建了一套可穿戴式硬件平台,并开发了巡检定位功能和监控功能应用软件。
  首先针对复杂作业环境的特点,提出了基于点和线段特征融合的视觉SLAM方法。在ORB-SLAM2的框架上引入线段特征,将点特征的跟踪匹配的管理方式扩展到线段特征中,分析了线段特征的重投影误差模型,构建了点线特征融合下新的优化目标并详细推导其雅可比矩阵,通过非线性优化的方式,实现了基于点线融合的相机位姿和特征位置的求解。进一步,提出了以基于多状态约束卡尔曼滤波器的视觉特征与IMU融合的定法方法作为点线融合SLAM的前端,综合IMU数据和视觉信息的优势,解决了在剧烈运动、相机曝光异常、光线明暗变化和移动物体干扰时定位不准的问题。
  针对视觉SLAM中的回环检测模块,提出了两种改进的方法。一是基于点和线段单词对的方法,将图像中点线单词的共现信息与空间邻近关系纳入回环检测中,克服了不同场景中相似物体之间的感知混淆问题;二是基于深度学习的回环检测方法,通过语义分割网络将图像中的干扰语义区域剔除,在静态图像区域提取深度特征点Superpoint 完成回环检测,并设计了三角剖分验证和对极几何验证,显著提高了在高相似度且存在干扰的场景下回环检测的准确率和召回率。
  在上述技术研究的基础上,构建了用于巡检作业的可穿戴式定位系统,开发了巡检定位功能和监控功能应用软件。定位功能软件主要包括环境地图构建和实时定位功能等模块,监控功能软件基于 Reactor 模式的服务器模型,提供可视化功能与交互功能。最后在真实/模拟作业环境和公开数据集上进行了模块和整体的实验,结果验证了方法的有效性。
其他文献
近年来,生物特征识别技术已经受到越来越多的研究和关注,它可以为我们提供一种有效且可靠的个人身份识别方法。作为一种相对较新的生物特征,掌纹识别由于具有分辨力强、对用户友好、特征丰富等特点近来受到越来越多的国内外学者的关注。虽然二维掌纹识别具有易于采集、成本低的优点,但是二维掌纹图像容易受光照变化、角度翻转以及表面脏污的影响且可能被伪造的假手掌欺骗。三维掌纹识别技术在一定程度上克服了上述二维掌纹识别技
学位
闸机作为城市轨道交通线网运营管理中重要的交互设备之一,其通行控制的性能直接关系到乘客的出行体验和企业的票务收益。随着城市轨道交通迈入“网络化运营”时期,城市轨道交通承担着越来越繁重的城市客运工作。现有的基于红外传感器的闸机乘客通行行为识别算法已经难以满足复杂场景下的检测需求。如何高效地提取出更为完整的乘客通行时的姿态特征,从中检测并识别出乘客的通行行为,以避免客流量较大时的各种问题和风险,具有重要
学位
随着科学的发展和技术的进步,人工智能成为最热门的科技话题之一,越来越多的人工智能产品从理论研究走向实际应用。家庭生活的各个角落也都出现了人工智能的踪迹,从手机到电视,从音箱到冰箱,从扫地机器人到服务机器人,人们的生活发生了翻天覆地的变化。语音交互作为一种重要的人机交互形式,常被用到智能家居中。为了使智能家居产品实现更加自然、高效的人机交互,让其能够感受和分辨人的情感,家庭环境中语音情感识别的实现具
随着计算机技术的飞速发展,深度学习技术在各领域的应用日益广泛,但是对抗样本的出现,给人工智能安全领域敲响了警钟。研究表明:深度神经网络具有天然的漏洞,非常容易受到对抗样本的攻击。精心设计的对抗扰动可以让图片产生人眼难以辨别的差异,但却会令神经网络面模型做出错误的分类。早期的对抗攻击技术仅局限于数字世界中,近几年,以对抗补丁为代表的对抗攻击技术正向物理世界中发展,攻击的目标也由分类模型向目标检测模型
学位
目标检测是计算机视觉领域一个热门问题,它不仅广泛地应用于工业检测和智能驾驶等实际场景,也对解决人脸检测和实例分割等更复杂的视觉问题有着重要的作用。  近年来,随着深度学习的发展,深度神经网络凭借其强大的特征提取能力和优异的表现性能被广泛地应用于目标检测任务当中,诞生了一些经典算法,并在相关领域展现出了巨大的应用价值。然而,尽管目标检测算法已经取得了巨大的成功,却仍然在尺度变化、采样等方面存在着巨大
学位
实际工程系统中往往存在未知参数、时变时滞等干扰因素,这些因素不可避免地对系统的控制效果产生影响。如何针对此类系统设计输出反馈控制器值得研究。本文基于齐次系统理论、Lyapunov稳定性理论、动态增益技术以及增加幂积分法,研究一类具有未知齐次增长率的非线性系统的输出反馈控制问题。论文主要工作如下:  1、针对一类具有时变时滞的非线性系统,考虑其全局输出反馈控制问题。由于非线性项满足上三角结构的齐次增
分布式传感器网络在环境监测、机器人协同工作、无人机编队飞行等民用和国防领域具有广泛的应用。在分布式传感器网络中,由于不同技术和部件之间的互联,以及传感器等智能体之间的互联,传输的数据容易受到攻击,从而导致传感器网络的运行遭到破坏。为了能够有效地抵御外部恶意数据注入的影响,本文设计了一种带有攻击检测的分布式滤波算法。该攻击算法可以有效识别虚假信息,维持系统安全运行。同时,考虑到攻击检测器的引入会使传
学位
字符识别、人脸识别、生物医学图像识别等图像识别技术在诸多计算机视觉领域有重要的应用价值,准确高效的图像识别是当前模式识别领域的热门研究课题。传统基于Gabor小波的图像识别方法提取的特征向量维度高,识别效果较差;近年来基于深度学习的图像识别方法取得了较好的识别效果,但仍然存在模型复杂度高、训练时间长、对外界环境变化鲁棒性差等问题。本文在对Gabor小波以及卷积神经网络深入分析的基础上,针对基于Ga
学位
视频监控作为计算机视觉领域的典型应用之一,现已广泛应用于道路安全,公共安防、智能交通等民用与军事领域。针对监控视频下的跨摄相机行人重识别技术对城市安全具有重大意义。行人重识别是指对于出现在某个监控视频中的行人,跨设备检索该行人图像,判断其是否出现在其他摄像头中。为实现监控视频中的行人重识别,本文主要完成以下几个方面的工作:  首先,本文对目前流行的基于深度学习的行人检测算法进行比较,并提出改进的S
学位
目标跟踪作为计算机视觉领域的一项重要技术,为行为识别、视觉导航、智能监控等高级应用提供了基础,然而跟踪过程中,复杂的环境变化和目标自身的形态变化都给鲁棒跟踪带来了很大挑战。TLD跟踪框架将跟踪任务分解成帧间跟踪、模型在线学习和帧内检测三个子任务,给长时间目标跟踪问题提供了有效的思路。本文围绕长时间鲁棒跟踪问题,对基于 TLD 框架和核相关滤波的跟踪算法展开了研究,主要的工作包括以下三个方面:  1
学位