基于多任务对抗学习的行人重识别方法研究

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:zylalazy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智慧城市建设的稳步推进,公共视频监控网络获得了长足发展,监控摄像头在医院、学校、商场等公共场所广泛部署,在提高公共安全和改善交通管理、应急指挥等方面的同时,带来了海量的视频和图像数据分析需求。基于人工处理和提取数据的传统监控方法具有出错率高、速度慢、效率低等缺点,因此基于深度学习的智能视频监控系统应运而生。行人重识别(Re-identification,Re ID)作为智能视频监控处理数据的一项重要技术,其目的是在行人检测的基础上利用计算机视觉技术判断不同摄像头获取的图像或者视频序列中是否存在特定行人的技术,它通常被作为行人检索的一个子问题,因此具有重大的研究意义和广泛的应用前景。在实际的场景应用中,行人重识别技术仍存在以下挑战:第一,由于多摄像设备全天时、全天候的工作采集了大量的视频和图像信息,但会存在一些行人训练样本数量有限的问题;第二,由于行人姿态的变化不仅丢失部分行人信息,而且还会引起大于身份差异的外观变化,导致现有工作难以学到鲁棒的行人特征;第三,现有Re ID技术为了提高识别精度往往采用复杂的网络模型,导致其难以部署到对实时需求度较高的业务场景中。针对上述问题,本文从多样性样本生成、相似行人判别性特征学习和轻量化网络设计这三个角度开展了下述创新性工作。(1)多样性行人图像生成方法。针对大数据环境下特定行人样本多样性差的问题,提出了一个基于变分推理的多姿态样本生成网络模型(CVGAN)。通过采用姿态估计器和设计基于变分推理的自动编码器,CVGAN模型能够在解耦同一个行人姿态和外观信息的同时,可以实现任意姿态的行人图像生成。在三个基准数据集上的实验证明,CVGAN方法比大多数主流的生成方法更具优越性。(2)高分辨行人图像生成方法。针对生成样本纹理信息缺失的问题,提出了一种高分辨图像生成的孪生对抗学习方法(PS~2GAN)。为了生成具有目标姿态的行人图像,设计基于孪生生成对抗网络的图像生成模型,并基于孪生结构设计对比姿态损失。为了生成更加逼真的行人图像,采用最近邻损失缩小生成图像和真实图像之间的差异,使高层信息更接近。本方法在多个公开数据集上都取得了良好的生成效果。此外,将生成样本用于扩充Re ID训练集,识别性能有一定的提升。(3)多任务姿态无关的特征学习方法。针对行人Re ID方法易受相似行人干扰的问题,提出了一种面向相似样本学习的强化变分对抗网络方法(RL-VGAN)。提出行人重识别孪生变分对抗学习方法,实现样本生成和相似性样本对抗一体化学习的目标。将深度学习与强化学习决策的优势结合起来,一方面通过端到端的学习提升生成网络生成样本的能力,另一方面提升行人重识别方法对相似样本干扰的鲁棒性。训练时,采用三阶段训练策略实现图像生成和行人重识别两个任务,可以更好地应对姿态变化和相似行人干扰等因素造成的行人身份特征判别难的问题。该方法在多个行人重识别数据集上取得了良好的识别性能。(4)基于进化算法的滤波器剪枝方法。针对行人重识别网络模型训练参数多、计算量大的问题,提出了一种基于进化算法的滤波器剪枝方法(EAFPruner)。首先将网络剪枝过程建模为组合优化问题,并采用进化算法求解,使用L1范数作为冗余准则来评估滤波器的重要性。此外,采用一种基于自适应批归一化层更新的评价方式快速地评估修剪后网络性能与微调后精度之间强相互关系以减少微调时间消耗。然后选择精度最高的修剪网络进行微调并评估识别效果。在四个Re ID数据集上进行的实验结果验证了EAFPruner方法的有效性。(5)基于上述四个工作,设计了基于多任务对抗学习行人重识别验证系统。本系统由参数设置子模块和多任务对抗学习行人重识别子模块两大部分组成,可视化地显示模型的参数设置和网络的训练过程。该论文共有图64幅,表21个,参考文献189篇。
其他文献
为探查容城西部斜坡带地热田地热资源,揭露容城西部寒武系、蓟县系完整地层,中国地质调查局在雄安新区容城部署了地热勘探井D21井。该井设计井深3000 m,完钻井深3083.74 m。本文介绍了D21井钻遇地层情况、井身结构、钻探施工技术和抽水试验过程。总结了取得的钻探技术及成果。D21井获取了寒武系和蓟县系热储层水文地质参数,为容城西部斜坡带热储构造发育提供地质依据,服务于雄安新区地热开发规划。
通过了解目前光伏市场现状,拟利用厂房屋顶或厂区空地建设分布式光伏发电系统,直流侧装机容量5.42 MWp,交流侧装机容量5 MW光伏发电,并对方案的技术可行性、优势以及市场现状进行分析,充分说明厂房屋顶或厂区空地建设分布式光伏发电项目的可行性。
建党百年之际,为进一步提高陕西关中地区农房设计水平和建设质量,切实提升乡村振兴新阶段农村群众住房安全获得感、幸福感。西安建大土木工程学院组织青年师生选取陕西省19个村镇进行了此次农村住房现状实地调研考察并完成房屋抗震加固改造方案设计,先后覆盖惠及农房2110余户,农户5000余人。西安建大土木工程学院农房抗震加固改造服务团逐户考察测绘,通过召开"板凳会"入户宣讲党的惠民政策,开展农房抗震知识科普,
随着近年来经济的快速发展,中国的社会经济改革进入深水区。房地产行业经历了迅速发展后,也产生了不可忽视的问题,房地产企业的筹资特性决定了其高负债、高风险的特征。此外,国家政策对房地产企业的调控逐渐加强,“三道红线”政策的推出使企业的融资难度进一步加大。本文以中南建设作为房地产企业融资风险的研究对象,通过案例分析法,分析房地产企业的融资风险及其风险控制。论文主要从以下部分进行分析:第一部分为本文选题研
随着线上线下新教学形式探索的不断深入,线上教学从最初的单一直播讲解逐步演化成为协同互动教学。线上和线下教学相结合,规避了线下教学中学习时间和地点受限,忽视学生个性发展等弊端,丰富了线上教学的形式,可高效完成教学。学生在学习古诗时,既了解了古诗本身的内容,也了解诗人的生平,感悟作品中所蕴含的深刻情感。本文从线上线下新教学形式下小学古诗教学的目的入手,分析教学原则和教学流程,具体阐述小学古诗教学策略,
室内定位是室内外连续、高精度定位的难点。近年来,由于室内定位技术能够提供建筑物内位置信息,在大型复杂室内公共场所的安全监控、应急救援和大众位置服务等领域具备广阔的潜在商业应用前景,已经成为国际研究的热点。伪卫星定位、足绑惯性导航(Foot-Mounted Inertial Navigation,FMIN)以及专用终端伪卫星/足绑惯导/地标混合定位是实现室内外连续、高精度定位的有效解决手段。然而这些
通过设计案例和标准编制组复函对GB51348-2019 《民用建筑电气设计标准》第8.1.6条的理解展开探讨,提出:带铜护套的矿物绝缘类不燃性电缆可直接明敷,不宜采用金属槽盒布线,宜采用金属梯架布线。
醇脱氢酶I (Adh1p)是黄酒酵母艾利希途径最后合成β-苯乙醇的一个关键酶。为探究黄酒酵母Adh1p的差异及酶学特性,以工业生产菌株黄酒酵母HJ和模式菌株酿酒酵母S288C的基因组为模板,设计引物PCR扩增醇脱氢酶编码区基因ADH1,构建pET-28a(+)表达质粒,转化至大肠杆菌BL21 (DE3)中,IPTG诱导表达获得Adh1p。通过超声破碎菌体后获取粗酶液,亲和层析纯化后获取纯酶,进而探
丛集性头痛由于其发作时疼痛程度重,易导致失能,且我国目前诊断正确率低、治疗欠规范,因此亟须制订规范化诊治指南。本指南由中国医师协会神经内科医师分会、中国研究型医院学会头痛与感觉障碍专委会组织制订,对近年来国内外丛集性头痛临床实践及高质量文献证据进行评估,针对丛集性头痛的发病机制、临床表现、诊断及鉴别诊断、治疗等方面进行详细阐述,旨在提高我国丛集性头痛的规范化诊疗水平,使更多丛集性头痛病人获益。