视频人体姿态估计的多任务学习算法研究

来源 :沈阳航空航天大学 | 被引量 : 0次 | 上传用户:kongjiahao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频人体姿态估计已经成为分析人的行为的重要方法,现已广泛应用于智能监控和人机交互等领域中。单任务学习方法通过多层网络堆叠,提取关节点特征,完成人体姿态估计。多任务学习方法利用多个相关的任务,在有限的输入中可以获取大量与任务相关的信息,为人体姿态估计提供了一种新的思路。因此,本文以多任务学习为基础,研究了多任务学习上人体姿态估计网络结构设计以及后处理方法,并分析多任务学习对人体姿态估计检测效果的影响,主要完成了以下工作:针对视频中关节点的抖动与丢失问题,本文利用视频中人物运动的连续性,提出了基于动态规划的人体姿态估计方法DP-Pose。利用热图中的关节点作为候选关节点构成候选序列,通过动态规划算法从中求解稳定的关节序列,并通过实验验证了该方法可以有效的恢复未检测到的关节点,且能够有效地修正抖动的关节点。为了解决图像中关节点匹配出现歧义的问题,本文提出了结合目标检测的多任务姿态估计网络FRCNN-PoseNet。结合姿态估计中自上而下和自下而上方法的优势,利用目标检测得到的人体包围盒限制自下而上方法中关节匹配的区域,进而有效提升人体姿态估计的精度。针对视频序列的人体姿态估计问题,本文提出基于增强序列的多任务人体姿态估计方法MTS-PoseNet。采用视频序列作为多任务网络的输入,结合FRCNN-PoseNet网络结构,融合输入数据的时空特征,并对输入数据进行增强以提高模型的泛化性能。实验表明,增强数据提取时空特征对人体姿态具有很好的表达,进一步提高人体姿态估计的性能。论文的研究表明了多任务学习方法在人体姿态估计中的可能性,为后续研究多任务学习在人体姿态估计的研究上提供参考。
其他文献
当前,世界经济结构深刻调整,保护主义倾向抬头。随着经济全球化走势的不确定性日益增加,未来国际经贸合作,越发倾向于区域化。基于中国和新加坡双边经贸合作和人文交往的成功经验,“国际陆海贸易新通道”(以下简称“陆海新通道”)应运而生。陆海新通道起源于中新(重庆)互联互通项目,得到中国西部省份或地区广泛响应。2019年中国政府出台《西部陆海新通道总体规划》,以中国西部广阔腹地为主轴,勾画了通道建设的总体轮
近年来,均相催化剂因其高催化活性而受到广泛的关注以及应用,但是由于均相催化剂存在着几个问题,一是价格昂贵,二是很难从催化体系中分离出来,这就会在一定程度上对环境造成污染。在大自然中,很多的化学反应往往在数个纳米至数十个纳米规模的酶等限域的小范围中进行。受自然界的启发,化学家们尝试构建各种纳米反应器,以期利用纳米反应器内的小尺寸效应、表面效应、限域效应以及协同效应等实现高效的化学转化。将非均相催化剂
近年来,随着洞庭湖流域社会经济的快速发展,湖区的水环境问题日益凸显,具体表现在水资源短缺、水质恶化、富营养化程度加重、季节性水华频发等方面,引起了广泛关注。而其中,季节性的水华问题最为突出,尤其是在东洞庭湖大小西湖区域,水华暴发面积逐年增加,且有向常态化发展的趋势。距离大小西湖最近的城陵矶水文站,其水位波动对大小西湖水环境影响较大,尤其是在水域、陆域面积,水生植物覆盖度,营养盐浓度及水环境容量等方
2018年3月,十三届全国人大一次会议提出机构改革方案,要求合并省级和省级以下国税地税机构。国地税合并体现了顶层设计,是实现国家治理体系和治理能力现代化的重大战略部署,对优化税收营商环境、促进国民经济发展必将起到重要的推动作用。但在机构改革的过程中,如何合理配置机构人员、对接征管数据、健全管理体系以及加强组织保障等都是值得关注的问题。在此背景下,本文从整体政府视角出发,梳理整体政府理论的提出背景,
磷石膏是湿法磷酸生产过程中产生的含有多种有害化学物质的工业副产,主要污染物有磷、氟、硫酸盐等,会带来很多环境问题,其中对于地下水的污染是一个亟待解决的问题。长期堆放的磷石膏渗滤液会经由包气带进入地下水中,而包气带由于其特殊的自净能力对减弱污染效应有着极其重要的作用,因此,研究污染物在地下水中的迁移规律显得尤为重要。本文选择磷石膏渗滤液中的氟化物作为研究对象,采用室内试验、数值模拟和现场应用相结合的
【背景】肺癌(Lung cancer)是全世界发病率和死亡率都很高的癌症,且机制尚不清楚。肿瘤发生的分子机制十分复杂,需要环境和基因因素的共同作用,其中mi RNA是新近发现的可能参与包括肿瘤在内的多种疾病发生发展的主要分子之一,我们实验室一直致力于研究遗传和环境因素对肿瘤发生发展的影响。mi R‐100是微小RNA(micro RNA,mi RNA)的一种,是一类非编码的单链小分子RNA,大小约
伴随工业经济的快速发展,大量工业污染物的产生对我国水环境造成了严重的污染。重金属为其中一类主要污染物,因其具有较大的毒性和生物不可降解性,对水生态环境和人类造成了不可估量的危害。钛酸纳米管(Titanate nanotubes,TNTs)具有均一的结构、较大的比表面积以及特殊的物理化学性质等,在处理水体重金属污染领域具有良好的应用前景。近年来使用贵金属或其他材料对钛酸纳米管进行改性并应用于处理水体
网络功能虚拟化(Network Function Virtualization,NFV)技术通过将传统网络中基于硬件的网络功能以软件的形式部署在通用服务器上,实现了网络功能与专有硬件解耦,提升了网络服务的灵活性、弹性与效率。通过NFV技术,运营商可以高效灵活地满足用户的服务需求。在NFV技术的网络中,一系列的虚拟网络功能(Virtual Network Function,NFV)按照一定的顺序连接
我国是石化产品和衍生品的产出和消费大国,随着石化产品的大量消费需求带动下,石化产业链也随之向纵深发展。加强石化仓储管理,保证仓储货物安全,加快存储周转速度,规避业务经营风险,不仅是提高石化仓储公司利润、增加经济效益的关键手段,也是石化仓储公司建立竞争优势的可靠保证。石化仓储是第三方仓储物流产业与石化行业融合发展而衍生出的新兴仓储物流服务模式,是由专业的第三方仓储物流公司向石化行业主体提供个性化的服
香溪河氮、磷等营养盐超标,富营养化程度严重,常年暴发不同类型的水华。春季水华优势门类主要为甲藻、硅藻、绿藻,夏季为甲藻、硅藻、绿藻、蓝藻,秋季以硅藻、绿藻为主。近些年研究表明,浮游病毒是藻类生长的重要的调节因子,在水生态系统中,浮游病毒每天可造成10%~20%的藻类或细菌死亡。三峡大坝蓄水后造成香溪河流速大大减缓,营养盐进一步浓缩,藻类生长加速。本研究对香溪河密集监测春季水华生消期,探究了其浮游病