基于相关滤波和孪生网络的视觉目标跟踪算法研究

来源 :电子科技大学 | 被引量 : 5次 | 上传用户:zhangdeting
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉目标跟踪是计算机视觉中一个基础且重要的研究领域,在智能视频监控、人机交互、虚拟现实、视觉导航和医学诊断等诸多领域有着广泛的应用。在视频第一帧中给定任意感兴趣的目标的初始位置和大小后,视觉目标跟踪旨在估计该目标在后续视频帧中的位置和大小。国内外研究者对视觉目标跟踪问题已经开展了较多的研究,并在简单的场景中取得了较好的跟踪精度,如静态场景下的刚体目标跟踪。然而,在实际应用中,被跟踪目标通常会处于复杂场景中,存在着包括遮挡、变形、旋转、尺度变化、快速运动、运动模糊、光照变化和背景杂乱等一种或多种干扰因素,这增加了目标外观建模的难度,使得如何准确、高效、鲁棒地跟踪目标仍然是一个具有挑战性的问题。近年来,针对复杂场景下的视觉目标跟踪已经开展了一些研究,并提出了相应的跟踪算法。本文在分析已有跟踪算法的基础上,结合相关滤波(Correlation Filter)和深度学习技术对复杂场景中的视觉目标跟踪开展了深入研究。本文的具体工作如下:1、结合分块思想和相关滤波技术,提出了一种基于全局和局部特征的多相关滤波协同跟踪算法KCF-HR。首先,设计了一种衡量图像块置信度的评价指标,并基于此提出了一种局部模型,用于多可信子块的融合,减少了现有基于分块思想的跟踪算法所引入的背景或遮挡物等干扰信息。然后,进一步考虑到仅仅依靠目标的局部信息往往会忽略鉴别力更强的全局信息以及全局和局部信息之间的交互,提出了一种全局模型来估计目标的位置和大小,并适时重置局部不可信子块以确保局部可信子块的数量和可信度。基于提出的局部模型和整体模型,最终构建了KCFHR跟踪算法。实验结果表明,该算法可以有效地提升遮挡、变形和旋转等干扰因素下的跟踪精度。2.提出了一种尺度自适应的相关滤波跟踪算法CFSA。首先,提出一种目标候选框生成方法以生成更适合相关滤波跟踪的候选边界框,降低了现有基于相关滤波的算法因被跟踪目标到达待搜索区域的边界附近或者其部分或全部已经移出了待搜索区域而导致跟踪失败的可能性。然后,提出了一种基于目标检测的尺度估计方法,在保证跟踪精度的基础上显著提升了目标尺度估计方法的时间效率。结合以上两种方法最终提出了CFSA跟踪算法。实验结果表明,该算法在目标发生快速运动和尺度变化时,其跟踪精度优于所对比的多个先进的跟踪算法,并且能够以较高的帧速率运行。3.将相关滤波和卷积神经网络相结合,提出了一种基于自适应加权多层卷积神经网络特征的相关滤波跟踪算法AWMF-CFNet。首先,提出了一种多尺度特征提取网络,可以同时获取较高卷积层的语义特征和较低卷积层的空间特征。然后,提出了一种结合了整体—部分思想、空间注意力机制和通道注意力机制的自适应特征加权网络,克服了现有算法的特征映射中所有通道或区域权重相同的问题,增强了特征映射的外观表征能力。基于上述的特征提取网络和特征加权网络最终提出了AWMF-CFNet跟踪算法。实验结果表明,该算法在目标处于运动模糊、光照变化等场景时的跟踪精度优于所对比的多个先进的跟踪算法。4.针对基于卷积神经网络的跟踪算法因其网络参数在线更新而导致时间效率较低的问题,提出了一种基于区域的孪生网络跟踪算法RSNet,将视觉目标跟踪视为求解目标相似度问题,在离线学习后其网络参数不需要在线更新即可实现目标的准确跟踪。首先,提出了一种多尺度特征融合网络,能够将多尺度的分层卷积神经网络特征在多个并行网络之间不断交换和合并,得到充分融合了深层语义信息和浅层空间信息的特征映射。然后,提出了一种基于分块思想的特征整合网络,该网络能够生成区域敏感的多组特征映射,提升特征映射的外观表征能力。将上述特征融合网络和特征整合网络整合到一个孪生网络中,提出了RSNet跟踪算法。实验结果表明,该算法在多种干扰因素下取得了与基于卷积神经网络的跟踪算法相当的跟踪精度的同时,显著提高了算法的时间效率。
其他文献
随着全球经济飞速的发展,环保已经变成世界共同的话题,而在经济全球化的发展过程中,环境保护和可持续发展的呼声日盛,世界环保市场也出现迅速发展的势头,作为环保经济的重要
目的:纳米羟基磷灰石(N-Hap)具有良好的生物活性及生物相容性,在骨组织工程领域应用广泛,是生物医疗领域的研究热点。但是人工合成的纳米羟基磷灰石对组织细胞的安全性也引起了人们的关注。本文合成了三种不同长径比的纳米羟基磷灰石颗粒(N-Hap),以小鼠骨髓基质细胞(BMSCs)为模型,研究了不同长径比N-Hap对BMSCs的体外安全性及其对BMSCs分化和矿化的影响。方法:1、采用水热法合成三种不同
由于广谱抗生素,免疫抑制剂和深静脉插管的使用,心血管外科手术的开展,及静脉药瘾者的增多,真菌性心内膜炎发病率有上升趋势。该病临床表现没有特异性,但其动脉栓塞发生率较细菌性
本文来源于当前的热点话题房地产业,具有现实的研究价值。近些年来,全国一线城市商品住宅市场升温,也引起二三线城市房价攀升,远超过居民的同期收入增长水平,而政府对房价的
【正】 财政部门是政府的重要职能管理部门。新形势下,通过加强财政部门机关党的建设,促进财政工作上水平,进而推进社会各项事业的发展,是财政部门面临的一项重要任务。 一、
目的检查危重病人的护理记录单,了解和分析其缺陷原因,并针对缺陷问题提出防护对策,提高危重病人护理记录单书写质量。方法抽取2012年6月~2013年5月213份危重病患者的护理记录单,
一、淋巴细胞形成 E 花环的发现简况七十年代初,Coomb 等报告,液态氮保存的淋巴细胞与绵羊红细胞(SRBC)混和后,生活的淋巴细胞能吸附 SRBC 形成玫瑰花样的形态(E 花环)。叠
穿龙薯蓣(Dioscorea nipponica)属薯蓣科(Dioscoreaceae)薯蓣属(Dioscorea),为多年生草质藤本。该种的根状茎具极高的药用价值,由于人类不断采挖,野生资源急剧减少。为了减少
介绍了目前我国轮轴检修现状,结合南京东车辆段轮轴检修线的改造提出了轮轴检修流程合理化的思路。
随着信息技术和量子力学的发展,以量子力学为基本规律的量子信息学逐渐形成。由于量子力学的叠加原理大幅度地提高了计算效率,而且量子力学的非经典相关使得真正的保密通讯成