基于孪生网络的目标跟踪算法研究

来源 :北京理工大学 | 被引量 : 0次 | 上传用户:liongliong571
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着物联网和图像传感器的发展,智能视频处理算法的应用和需求越来越多。目标跟踪是智能视频处理算法的重要环节,传统的目标跟踪算法往往致力于通过改进手动设计特征或优化机器学习模型的方法来提高算法性能,但往往很难设计出最合适的特征工程与跟踪框架。深度学习可以自动学习特征工程,在计算机视觉的多个领域都取得了突破。深度学习通常需要大量的计算资源,这使得深度学习目标跟踪算法尽管有很好的精度却难以实现较快的跟踪速度。本文首先深入研究深度学习目标跟踪算法中具有代表性的MDNet算法、Siam FC算法和SINT算法,比较、分析基于前景、背景分类的算法和基于孪生网络进行相似度比较的算法优缺点。根据对比,基于孪生网络的目标跟踪算法可以离线训练特征提取网络,而基于前景、背景分类的算法由于需要在线进行反向传播更新网络参数,理论上难以实现实时性。为了实现更高速的目标跟踪,本文结合上述三种算法设计了全卷积孪生网络目标跟踪算法,将Siam FC算法的孪生结构和MDNet算法的边框回归器结合,采用两支结构、参数完全相同且同步更新的卷积神经网络分别作为目标分支和搜索分支分别接收t时刻目标图像和t+1时刻搜索图像,经过前向传导,将目标分支输出特征图和搜索分支输出特征图连接在一起,输入到用于回归运算的卷积层,在最后一层直接输出t+1时刻目标外接矩形框。本文设计的神经网络不从任何已经训练过的网络模型获取初始化参数,使用Image Net Video 2015标注数据集作为训练集端到端离线训练网络。本文设计的算法在跟踪时不对网络进行任何更新,只进行一次前向传导即可实现跟踪,跟踪速度达到了147fps。最后,在目标跟踪领域最具影响力的公开测试平台VOT上对算法进行性能评价并和其它优秀算法进行对比。不同场景的跟踪精度实验证明本文设计的算法主要提取的是目标外观特征和运动特征;全部测试序列的平均精度、鲁棒性排名证明,本文设计的全卷积孪生网络目标跟踪算法达到了较好的准确性和鲁棒性。
其他文献
随着城市化、工业化和市场化的冲击,乡村地区正在进行社会经济形态和地域空间格局重构。各乡村通过调整地域空间结构和产业结构,谋求新的乡村转型发展模式,揭示乡村地域功能演变特征对于地域空间重构和发展模式优化具有重要意义。目前关于地域功能的研究区域和研究尺度多集中于沿海发达地区省域和县域,但对于新疆兵地乡村聚落微观尺度(团场和乡镇)地域功能研究较少。本研究以新疆典型“兵地”乡村聚落136团和小拐乡为例,依
表面微观几何轮廓的规则化程度和形貌特征会产生多种微观物理学行为,进而在宏观上表现出不同的使用性能。而电化学机械复合光整加工作为一种同时具备机械弱力刮擦作用和电化学溶解作用实现去除基体表面材料和改变表面微观形貌分布,并以工件达到光整表面和提高表面性能为目的的表面改形技术,其表面微观几何轮廓的形成与分布受诸多加工参数的影响。本文通过将有限元分析与试验相结合,研究了阴极复制效应、机械作用以及电解液百分比
随着科学技术的迅速发展,对于人才的需求急剧增加,科技人才已经成为各国竞相追逐的对象。博士生是国家科研人才的后备军,其培养质量关系着国家未来科技水平的发展与竞争。然
本文主要工作是设计并且实现了在多媒体联络系统(即新一代呼叫中心系统)当中的多模式高扩展的录制服务系统。针对的问题与场景是在呼叫中心系统当中用户与坐席通话时的录制需
目前,机器人同时定位与建图问题(SLAM)是移动机器人领域的一个重要研究方向,其目的主要是使机器人能够在未知环境下能够自主定位、记录自身运动轨迹并构建地图。SLAM是一个完
近年来,互联网技术的快速发展给汽车工业带来了革命性的变化。从1886年第一台汽车的发明起到今天,传统汽车产业的发展发生了不小的变革。伴随着汽车产量与保有量的提高,人们
本课题主要研究的是一类各向异性外尔半金属的电学性质。在外尔半金属的材料系统中,其低能准粒子的本征费米速度vF是一个通常远小于光速的材料参数。这些材料中的狄拉克锥可以相对于能量轴倾斜,有两种类型。其中,对于倾斜参数C小于费米速度VF,锥体倾斜不足(Ⅰ型);对于C>vF,为过度倾斜(Ⅱ型)。本文仅讨论Ⅰ型外尔半金属。在线性响应模型中,其带间光吸收部分纵向电导率的实部在2(1-2ξ)μ0处突然变化
目的:评价标准一、二线治疗失败后改良FOLFOXIRI方案对比其他系统化疗方案三线及以上治疗不可切除的转移性结直肠癌患者的疗效及安全性。方法:我们系统地搜索了从2011年01月至2019年06月杭州市第一人民医院和杭州市肿瘤医院的转移性结直肠癌患者。共59例患者纳入研究并接受了随访,其中试验组共20例患者后线应用了改良三药方案(m FOLFOXIRI/m XELOXIRI)(5-氟尿嘧啶/亚叶酸钙
随着信息技术的飞速发展和网络的普及,大量的高维数据在我们日常生活中变得随处可见,成为人们生活的重要组成部分。然而,由于数据维数过高,如何准确且快速的从高维数据中获得
网络技术与图像的快速发展,使得获取数据的途径越来越多样化,数字作品的出现为生活增添了便利,但也随之而来许多版权上的安全隐患。数字作品的非法复制,传播和公开以及数字作