结合注意力机制和在线样本库的目标跟踪算法

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:Pinger605
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪任务指的是在视频序列第一帧人工标注出目标边界框,在后续的视频帧中跟踪目标的位置。随着深度神经网络的发展,基于孪生网络Siamese的目标跟踪算法近年来发展十分迅速,因为这类跟踪算法能在保证实时性的同时得到高精度的跟踪结果。然而基于孪生网络的跟踪算法仅利用第一帧的目标模板信息,在搜索区域根据相似性度量确定目标位置。跟踪过程中没有对模板进行更新,仅利用目标信息无法区分目标和场景中相似物体、简单的相似性度量泛化性不高,这些问题在一定程度上制约了Siamese系列网络的表现。本文以孪生网络为基准网络,首先结合注意力机制设计一种有效的特征提取网络,然后根据初步跟踪质量建立一个在线正负样本库,采用目标和背景双模板匹配解决跟踪过程中相似物背景干扰。主要贡献如下:(1)提出一种结合补偿注意力机制的实时目标跟踪器。首先在孪生网络模板分支和搜索分支的特征提取模块引入注意力机制提升网络对目标的特征表达能力。但注意力机制无法分辨与目标类似的干扰物,因此搜索分支的注意力机制会同时增强目标和相似背景的特征表达能力。针对这个问题,文中在双分支注意力的基础上提出了一种补偿注意力模型,将模板分支选择的注意力引入搜索分支,融合搜索区域注意后的特征和模板分支选择的注意力,利用模板分支中对目标的特征注意加权提高搜索分支对目标的特征判别能力。(2)提出一种基于跟踪质量评估和在线样本库的跟踪算法。首先本文分别构建了一个在线正负样本库,正样本库由目标在不同帧的跟踪结果组成,负样本库由难例样本帧中干扰物组成,收集不同的目标信息和背景信息增加判别器的可靠性。然后根据Siamese RPN++初步跟踪结果的质量设计了一种难例样本帧判断策略,当分类响应图存在多峰值且峰值相关能量超过阈值,当前帧为难例样本帧,其跟踪结果进行二次判别。最后学习一个判别器,对跟踪质量差的候选特征和模板库中正负样本特征的相似度进行对比,输出正确的正样本。该算法在复杂场景、相似物干扰等情况下也能精确判断目标位置,跟踪器的鲁棒性得到提升。(3)在OTB、VOT、La SOT数据集上将本文算法和目前主流算法进行对比,实验结果证明,本文算法在存在遮挡、相似物干扰、高速运动等情况下精度和鲁棒性都得到了提升,并且处理速度达到了47fps,可以实现实时的目标跟踪。
其他文献
使用纤维对水泥基材料进行增强增韧是现代高性能水泥基材料研究的主要方向之一。作为一种极易获取且绿色经济的可再生资源,植物纤维的掺入不仅能改善水泥基材料的力学性能,还可以改善保温、隔音等物理性能,因此将植物纤维代替人工纤维制作纤维增强水泥基复合材料的研究近年来广受关注。然而,硅酸盐水泥基体高碱性环境对植物纤维的矿化和降解劣化是其应用的最大障碍。本论文立足于植物纤维在不同碱性基体中的劣化问题,首先提出以
学位
随着无人机通信技术和多无人机协同作战的不断发展,无人机自组网得到科研人员的广泛关注。由于无人机节点的高移动性,导致网络拓扑频繁变化,这严重影响了无人机自组网的性能,给无人机自组网路由协议的研究带来挑战。路由协议就是在网络中将数据从源节点正确发送到目标节点的一种策略。一个好的路由协议能建立源节点到目标节点的有效路径,使消息可以有效、快速的传输,从而使网络中无人机节点能更好的进行通信,协同完成任务。针
学位
无人机自组网是一种不完全依赖预先存在的基础设置,在需要时临时构建的无线移动自组织网络,满足机会网络不一定存在完整通信路径的基本假设。由于它具有拓扑时变、节点移动、间歇性连接等特点,给无人机自组网的研究带来挑战。在无人机自组网中进行链路预测具有重大意义,其根据已知网络信息估计节点间产生连接的可能,通过学习网络中节点及连接的演化规律认识网络的潜在特性,为上层路由协议设计提供支撑。本文提出一种基于深度图
学位
人脸表情识别在安全生产、人机交互、智能医疗等领域有着广阔的应用前景。早期的识别算法需要手动建立不同表情的特征模型,模型的建立过程繁琐、适应性差、分类准确率低。随着深度学习尤其是卷积神经网络结构的提出,表情分类准确率有了极大的提升,但是随着网络深度增加、结构复杂化,模型参数数量显著增多,训练难度增加,模型对训练集的图像数量与质量要求更加严格。人脸表情识别算法需要数据集提供清晰、多样的面部表情以及表情
学位
飞机机身重要承力结构大量采用铆接方式进行装配,铆接部位连接质量直接影响飞行安全,因此需及时对飞机金属铆接构件进行无损检测。平面远场涡流检测技术不受趋肤效应影响,利用二次穿透能量进行检测,对飞机金属铆接构件隐藏缺陷检测具有巨大优势。本文基于平面远场涡流检测原理,采用仿真与试验两种方法,优化了探头结构参数,研究了不同线圈夹角的检测信号特征规律,对比了不同检测线圈偏移距离的缺陷检测灵敏度和分布规律,并进
学位
丁玲出生于湖南传统士绅家庭,相关的记忆、认知深刻影响了她的文学创作。从继承转化士绅历史文化的角度看来,丁玲书写农村革命不拘于既定的“斗地主”模式,自有独特性和复杂性。丁玲既是共产革命党人也是“绅士阶级的逆子贰臣”,她言说家事、家史不仅关涉家族记忆、个人传记而且反映传统士绅阶层卷入现代化进程的震荡变化。以丁玲为个案,可以看到革命与士绅之间并非二元对立而具有斩而不断的复杂关联,反映了左翼文学承传统而变
期刊
本文基于2019—2021年三江源国家公园核心地区、有江河源头第一县的长江源园区曲麻莱县乡村学校自然教育的行动与研究,应用“知信行”理论模型,论证如何通过保护地的自然教育,促进环境责任行为。根据对曲麻莱县4所学校414名师生、跨度3年的自然教育实践、跟踪调查与行动研究发现,自然教育可有效促进学生和教师采取行动,可持续利用与保护冬虫夏草等自然资源;可激发学生和教师减少使用垃圾食品,采取更加健康、低碳
期刊
平行因子分析理论因其在宽松条件下分解的唯一性的优势而备受关注,并在故障诊断中获得了成功的应用。本论文是在国家自然科学基金(52075236,51675258)和航空科学基金重点项目(20194603001)的资助下,针对传统平行因子在机械故障诊断中存在复杂程度高、收敛速度慢的不足,将复平行因子理论引入到机械故障诊断中,并进行深入研究,取得了创新性成果。各章内容安排如下:第一章:论述了课题的研究背景
学位
受制于高电位绝缘安全问题,输电线路的状态监测传感器一直难以使用常规低压电源,迫切需要寻求可靠的自取能方法用作传感器的供电方案。文章提出了一种可贴装于母线排上的高电位磁场取能电源,通过感应母排周围的磁场获取电能,不存在绝缘问题,同时不会缩减相间安全距离,更适用于变电站和配电室中排列紧凑的三相母线桥。仿真及带载试验表明,设计的高电位磁场取能电源能够在母排电流为400 A~1 000 A的范围内为负载提
期刊
以山西省乡宁县城区扇子坪–崔家坡段为例,将“木桶效应”理论与地质灾害风险“点面双控”体系相结合,提出了一种基于地质灾害风险评价的国土空间规划优化方法。该方法以1∶1万地质灾害风险评价为基础,结合地质灾害风险“点面双控”体系,将坡度、河流距、地质灾害风险分区以及地质灾害隐患点致灾范围作为“木桶效应”中的短板因子,按照等级从高到低依次为严控开发区、适度开发区和优先开发区的先后顺序进行分级赋值,将同一地
期刊