基于目标似然矩阵和注意力模型的目标追踪方法研究

来源 :江苏大学 | 被引量 : 0次 | 上传用户:flnlucifer
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,视觉目标跟踪作为计算机视觉领域中的一个重要研究方向,已成为目前研究的热点之一。目标跟踪技术虽然随着深度学习的发展和计算机性能的提升已取得较大的进展,但是仍然面临诸多难题,运动目标发生尺度变化、形变,运动目标周边存在复杂背景、相似目标、光照变化等会导致追踪器产生漂移从而跟踪失败,故解决跟踪难题提高追踪器的准确性是研究者一直以来致力的方向。在阅读大量国内文献的基础上,本文首先对视觉目标跟踪的研究背景、意义以及国内外现状进行了介绍;其次,简述了相关滤波器、深度追踪器、注意力机制的相关知识。结合滤波器、深度孪生网络的优势以及注意力机制的优越性,本文在深度孪生网络的基础上提出了基于目标似然矩阵的滤波器的目标跟踪模型、基于通道空间注意力串行模块的目标跟踪模型,并且为证明所提方法的可靠性,设计实现了基于目标似然矩阵和注意力模块的深度视觉目标追踪原型系统。本文的主要研究工作如下:1)提出了基于目标似然矩阵的滤波器的视觉目标跟踪模型。基于深度孪生网络的视觉目标跟踪模型简单且能兼顾精度和速度,但是该模型由于不更新跟踪模板导致不能很好的处理形变、背景杂乱等视觉目标跟踪难题,而滤波器可实现快速计算,通过滤波器学习实时模板可减少系统开销,但是也带来了边界效应问题。因此,提出在深度孪生网络模型中通过目标似然矩阵来辅助滤波器学习滤波模板的方法,目标似然矩阵由权重矩阵和空间矩阵构成,既刻画了目标的统计信息又刻画目标位置信息,能够抑制边界效应。实验结果表明,该方法能够更准确地获取目标的位置和形状,从而可以提高视觉目标追踪器的性能。2)提出了基于通道空间注意力串行模块的目标跟踪模型。滤波模板的学习是基于特征图的,而深度孪生网络的特征提取层采用浅层网络,浅层网络学习的深度特征可鉴别性不够强,模型会等价处理目标和背景区域,当目标发生剧烈变化时容易引发跟踪漂移,同时也会因引入无关背景增加计算工作量,进而影响追踪器的准确性和实时追踪性能。因此,本文提出在深度孪生网络的特征提取层采用通道空间注意力串行模型,该模型从通道空间维度出发有效融合神经网络底层的细节信息和高层的语义信息并突出目标的显著性区域。实验结果表明,该方法能够同时提高孪生网络两个分支目标特征表达的可鉴别性,从而提高视觉追踪器的准确性。3)采用matlab和C++联合混编技术,借助图像化界面语言Qt和计算机视觉库OpenCV等设计开发了基于目标似然矩阵和注意力模型的深度视觉目标追踪原型系统。该系统由模型训练、目标追踪和视频播放三大模块组成,系统界面简洁,具有良好的交互性,验证了所提视觉跟踪算法的可用性。
其他文献
在人类社会形成初期,矿产资源作为劳动对象被人类发现并加以利用,成为人类生产资料和生活资料的基本源泉。当矿产资源埋藏于草地下方时,其开发利用会对草原地区生态环境造成一定影响。我国草原面积占国土总面积的40%,大量矿产资源分布在草原地区。由于缺乏科学指导与法律法规约束,草原矿区生态环境保护意识淡薄,环境问题日益突出。许多矿产资源开发企业只注重眼前利益,忽视生态环境保护和污染治理,对草原环境造成了严重影
目的:三阴性乳腺癌(triple-negative breast cancer,TNBC),是所有乳腺癌类型中恶性程度最高的一种。为了探究更多有效的治疗药物,前期实验中,我们在天然化合物库中进行了 TNBC抑制剂的筛选,并鉴定出了芹菜素是一种潜在的抑制剂。本实验旨在探讨芹菜素对TNBC细胞的抑制作用及其分子作用机制。方法:(1)芹菜素对TNBC细胞增殖影响的检测:本实验中使用的TNBC细胞为MDA
液泡型H+-ATPase(Vacuolar-typeproton ATPase,简称V-ATPase)在昆虫的生长发育过程中起着重要作用。昆虫中的V-ATPase主要存在于马氏管、中肠、唾液腺等的上皮细胞质膜上,通过耦合K+/2H+反向运输载体将K+或Na+转运至细胞外,推动营养物质的吸收并为各种生命活动提供能量。鳞翅目昆虫中肠杯状细胞顶膜上的V-ATPase通过转运H+为中肠肠腔营造碱性环境,使
煤炭是我国重要的基础能源和原料,山西省是我国重要的煤炭生产基地。上世纪八九十年代,由于受到开采工艺、装备以及开采水平的限制,山西省内大部分小煤矿采用巷柱、刀柱式采煤方法,煤炭回收率不足30%,对煤炭资源造成了极大的破坏和浪费,遗留大量的残采资源,对残留的煤炭资源进行复采是我国煤炭资源开发可持续发展的要求。太原理工大学联合山西晋城无烟煤矿业集团有限责任公司共同成功申报了《大型煤炭基地难采资源高回收率
报童模型是随机库存理论最基本的模型之一。经典报童模型研究风险中性的零售商选择一个最优订购量使得期望利润最大化。然而,大量研究表明零售商在制定订购策略时,会考虑企业
陆面过程是气候系统非常重要的组成部分,它通过水文气象、生物物理和生物地球化学过程与大气相互作用。因此区域气候模式的模拟性能很大程度上取决于土地表面边界条件的精确程度。为了提高陆面过程参数化方案的准确性,需要使用具有高精度时空分辨率的植被参数,从而更真实地反映陆-气相互作用,提高区域气候模式的模拟性能。本文将2000-2015年具有年际变化的动态MODIS LAI数据应用到区域气候模式CWRF中,代
目的:确定复方拜颤停片(BCT tablet)的制剂工艺;建立质量标准;考察成型片剂的稳定性;以及通过动物模型探讨其有效性。方法:1.通过单因素变量实验筛选处方组成,考察项目为:压
仅有2个或3个目标且目标之间彼此冲突的优化问题被称为多目标优化问题(Multiobjective Optimization Problems,MOPs),而当这些需要被优化的目标数量大于3个时,MOPs便被定义为
近年来,随着“健康中国”政策的提出,医疗健康问题受到社会广泛关注。由于当前社会存在着医疗资源分配不均,城乡医疗服务水平悬殊的现象,所以疾病辅助诊断领域的研究与应用具
近年来,山西省全面整顿和规范矿产资源开发秩序,对原众多小煤矿进行重组整合,改变了长期形成的落后、粗放的生产方式,建成一批机械化程度高、生产规模大的现代化矿井,但必须指出的是整合后的众多矿井面临着原小煤矿采用低回收率的旧式采煤法开采后形成的旧采残煤区1,旧采区资源回收率不足30%,遗留下大量煤炭资源,其中不乏无烟煤、焦煤等稀缺优质煤种。回收这部分煤炭资源,既可以促进资源的充分开发,实现资源高效开发利