基于单元相关匹配的单/多目标跟踪算法

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:ltzmh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机视觉的快速发展,目标跟踪技术在民用和军事等领域得到了广泛地应用,成为当前研究的热门方向。在跟踪任务中,存在着众多的挑战,比如目标遮挡、暂离视场、光照变化、目标形变等,往往造成跟踪任务失败。因此,提升跟踪器应对复杂状况的性能,优化跟踪策略,提高单目标乃至多目标跟踪准确性,具有很高的研究价值。本文针对上述问题开展研究,主要的研究工作分为两个部分:(1)提出基于区域相似性匹配的目标跟踪算法SiamMeta。针对长时间跟踪任务的目标姿态变化问题,将孪生网络算法单一模板升级成多模板,丰富目标特征;针对目标遮挡、暂离视场等挑战,改变互相关计算方式,将整体特征匹配改为“单元”特征匹配,找到未被遮挡部分;针对“单元”匹配框飘忽问题,采用一种新的锚框回归方式,能更准确的回归到目标框;针对快速移动、运动模糊等问题,引入光流辅助系统,通过光流图区分目标与背景,从而修正预测框。经过OTB2013、OTB2015等数据集验证,本算法在多项指标上超越原始算法。(2)基于Deepsort多目标跟踪算法框架,提出KCF-deepsort与SM-deepsort多目标跟踪算法。KCF-deepsort将预测模块由经典卡尔曼滤波算法升级成实时更新跟踪器的KCF跟踪算法,借助KCF提升预测精准度;SM-deepsort采用本文提出的基于深度学习不更新模板的SiamMeta作为预测模块,结合孪生网络优化数据关联模块。分析在多目标跟踪任务中是否应该更新模板,在CityFlow跨摄像头公共数据集与机载数据集上分别对上诉两种算法进行实验。结果表明,采用不更新模板的Siam Meta作为预测模块的SM-deepsort在应对目标遮挡、暂离视场、光照变化等复杂状况时相较于更新模板的KCF-deepsort表现更优。
其他文献
传统汽车行业迅速发展引发的能源危机和环境污染问题已成为制约我国经济发展的巨大压力,为此我国政府及各大汽车厂商开始推广以电动汽车为主的新能源汽车。功能完善、安全稳定的电动汽车充电桩是保证电动汽车广泛推广的必要条件。目前随着功能需求的不断增加和变更,充电桩控制软件变得复杂、不稳定且难以维护;同时大量充电桩厂商由于缺乏测试手段在出厂前并未对其所生产充电桩进行系统完善的测试。这些缺陷致使市场上投入运营的充
当前红外成像多为单波段成像,但是单波段成像获得的场景信息有限,无法满足多种场景需求,为获取更全面的场景信息,多波段红外探测和图像融合技术成为目前红外领域研究的重点。本文基于国产中长波双色红外焦平面探测器进行双色红外图像融合方面的研究,将接收的双色红外图像信息进行融合输出,实现对场景目标信息的多维度获取。本文的主要内容如下:1)针对红外图像对比度低的缺点,本文提出基于分块的直方图均衡算法,对分块后的
红外成像器件可以探测到人眼不可见的红外辐射,并将其转化为与目标温度相关的电信号,具有环境适应性强的特性,因此广泛应用于军事、医学、消防、工业等领域。但受到工艺水平的限制,红外焦平面阵列不同像元间响应曲线不一致,导致其输出红外图像具有严重的非均匀性,不仅降低了成像质量,也会增加后续处理的难度。因此对红外图像的非均匀性进行校正具有重要的意义。基于此,本文从工程实践的角度出发,对非均匀性校正技术开展研究
随着加工制造业柔性化和智能化水平的提高,全自动三维测量技术得到了越来越多的应用,三维测量可实时获取工件毛坯的三维尺寸数据,并将其空间点云坐标信息传输到加工中心,从而实现首次下刀的自动化,并为后续工序的无人化智能作业奠定基础。本文在分析自动化生产线测量需求的基础上,对多线结构光和双目视觉相结合的三维扫描测量技术进行研究。首先,本文针对工件的3D成像及测量需求,对双目立体视觉系统的基本原理进行分析,通
传统的微光夜视仪、红外热像仪成功扩展了人眼的光谱响应范围,可以在黑暗的环境中分辨出目标,但所成图像多为单色图像,由于人眼能分辨的颜色等级是灰度等级的几百倍,长期以来科研工作者们致力于黑白夜视图像的彩色化,以利用人眼视觉特性,更有效地获取目标场景信息。因此,彩色夜视技术的研究有着重要的理论与现实意义,是当前国内外夜视领域的研究热点。为了实现微光条件下真彩色成像,本文基于CMOS传感器研制了真彩色夜视
近年来,随着红外传感器工艺水平的提高,以红外成像技术为核心的红外探测系统不断被应用到安防领域,受到各国的高度关注。红外小目标检测技术是红外探测系统的关键技术,由于红外小目标具有纹理信息少、信噪比低的特点,以及红外小目标周围背景的复杂性和多变性,探索新型的红外小目标检测技术一直是图像处理领域的研究热点。本文以天空场景、海天场景、山地场景和城市场景中的红外小目标作为主体进行分析,主要从以下几个方面进行
红外小目标检测技术是红外预警系统的重要组成部分,但是在复杂背景下该项技术的应用依然面临着不少挑战,主要包括在地面强杂波或云层强杂波下,背景杂波难以抑制的问题,以及小目标运动过程中的交汇、分裂等问题。因此本文对该领域中的上述问题进行了深入研究,具体内容如下:基于红外成像过程推导小目标的像面分布模型,并通过拟合实验,验证模型的有效性。通过对背景杂波进行多尺度差分析,提出了一种基于梯度均值的背景杂波量化
三维人体姿态估计作为人类行为动作识别的关键环节在游戏、体育训练以及人机交互等多个领域都有着广泛的应用前景。目前常见的三维人体姿态估计需要佩戴较为昂贵的辅助设备,运动目标一定程度上会受到这些设备的影响不能够灵活地运动,而且有些运动捕捉设备不能在室外等复杂场景使用。因此本文将成本更低,场景使用更灵活的双目视觉和二维姿态估计相结合来实现三维人体姿态估计。针对基于深度学习的OpenPose算法提取二维关节
随着网络的飞速发展,社会信息化程度的日益提高,轨道交通列车网络需要承载更多的数据,对网络带宽提出了更高的要求。基于以太网的列车实时数据协议(Train Real-time Data Protocol,TRDP),由于其高可靠性及高实时性,而受到了广泛的研究。本文基于Linux系统实现了TRDP协议,并在此基础上完成了基于TRDP的列车门控软件更新系统。首先介绍TRDP和列车门控软件更新系统的背景以
工业焊接中,熔池视觉形态特征对焊接工艺质量的在线控制起着关键的作用,本文对熔池轮廓边缘的提取算法以及成形焊缝宽度的预测方法进行深入的研究,实现了准确的熔池轮廓提取与焊缝宽度预测。主要研究工作如下:(1)建立了基于被动式视觉传感法的熔池图像采集系统,针对TIG焊不锈钢熔池图像的特点,为了在充分挖掘弱边缘信息的同时获得封闭完整的熔池轮廓,对传统图像算法进行改进设计了一种熔池轮廓提取算法(Operato