基于深度学习的二维人体姿态估计研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:hanjiezm
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年,随着深度学习领域的蓬勃发展,作为计算机视觉任务一大研究热点的人体姿态估计在人机交互、动作识别、虚拟现实和自动驾驶等领域应用广泛,其主要任务是检测出给定的图像或视频中人体的关键部位(如肘部、膝盖等),输出能正确对关节点连接的人体全局信息。对人体姿态估计的研究有助于人们理解图像或视频中的人的行为。完整的姿态估计处理主要包括数据处理、设计合适的网络结构和基于关键点热图的编解码过程。近年来人们的研究工作主要放在设计网络结构上却忽视了对数据处理和关键点编解码的研究。而人体姿态估计任务的评估特性是基于真值标签和预测的关键点位置之间的偏差来确定的。因此相比于分类、目标检测和语义分割等任务人体姿态估计对数据处理的方法更加敏感。所以,人体姿态估计归根到底是一个定位任务,不论是串行多尺度融合网络、转置卷积方法、还是始终维持高分辨率的并行多分辨率融合方法。其目的都是要在姿态估计网络处理过程中得到高分辨率的关键点位置特征表示。本文主要研究内容不在设计具体的网络结构,而是根据通用的数据增强处理时存在翻转误差、对姿态估计网络输出的关键点热图解码成坐标时存在经验设计偏差等问题对HRNet进行了改进。该方法基于模型无关,即插即用,可以用于提升现有方法的关键点定位精度。整体的主干网络结构采用目前表现最好的(state-of-the-art)并行高分辨率融合网络HRNet,在两个基准数据集COCO数据集和MPII数据集上验证了本文方法的有效性,实验表明我们的方法有效的提升了人体姿态估计模型的精度。具体地:(1)用表示相邻两像素间大小的单位长度替换之前用像素方法来测量图像的大小,因为零也会占用一个像素,当对图片水平翻转时最终预测结果和原图像中的关键点没有对齐,会有一像素偏差。而像素偏差对最终关键点检测精度往往影响巨大。(2)图像分辨率的变化会对最终关键点的估计带来量化误差。现有的解决方法是在关键点热图最大响应处向第二大响应处移动1/4的距离以抵消分辨率变化带来的偏差。本文利用在关键点热图最大响应处泰勒展开的解码方法对使用手工设计消除量化误差的方法进行改进。
其他文献
本文通过一次全市公开展示的美术学科双师课堂活动,呈现了两位执教教师在磨课过程中遇到的互动效果不佳、双师定位偏差、协作方式欠佳、示范教学低效、评价方式单一等问题及其应对策略,以期为正在探索双师课堂教学的一线教师提供有价值的参考。
人工智能在教育领域的广泛应用正助推我国教育改革发展,“AI+教师”联袂执教是有别于传统课堂的新型课堂模式,在传统课堂要素基础上,AI智能教师以教师助手的身份进入并构建着双师协同教学课堂。如何构建和谐完善的双师协同教学课堂,是AI教师进入课堂要探索的主要问题。本文以小学数学课堂为例,从AI教师进入课堂的价值诉求,AI教师进入课堂的现实困境以及实施路径展开对AI教师进入课堂的探究。
目的 探讨清肺止咳汤治疗痰热壅肺证咳嗽患儿的临床效果。方法 98例痰热壅肺证咳嗽患儿随机分为两组各49例,对照组予以常规西药治疗,观察组在对照组基础上予以清肺止咳汤治疗,比较两组的临床疗效、中医证候积分及不良反应。结果 治疗后,观察组的总有效率显著高于对照组,咳嗽气粗、痰多稠黄、烦热口干积分均显著低于对照组(P <0.05)。两组治疗期间均未见严重不良反应发生。结论 清肺止咳汤治疗痰热壅肺证咳嗽患
“跨媒介的表演性”是电视舞蹈《唐宫夜宴》制作并产生影响的一个显著特点。该舞蹈在对荷花奖中国古典舞作品《唐俑》的引用中形成自己的影像化存在,即“舞蹈影像”;同时在引用中形成一种特殊形态的舞蹈,即“影像舞蹈”。通过AR技术呈现建筑、绘画、文物等,影像化、历史化、具体化、陌生化的身体存在构成了演员的舞蹈身体,形成一种关乎人存在的“身体网络”,从而在凝视、共鸣、想象中完成审美缝合。现代化进程中身体文化、审
马克思在《资本论》的论述中深刻阐述资本性质、内在矛盾与基本规律,并且总结了资本的特点,诸如逐利、扩张性等。历史环境对理论研究有巨大影响,《资本论》诞生的时代背景为工业资本社会,与当代资本不同,现如今已经形成了不同之前的形态以及逐利方式,利用市场空间的不断扩大来减轻内部矛盾和避免经济危机,基于此,对马克思经济空间的研究,可以进一步研究资本在当今时代存在的新形态,进而从空间理论来解释当代资本主义的新变
在幼儿教育阶段,民俗文化是不可或缺的课程内容。所谓民俗文化,从本质上来讲就是历经千百年演化而来的、最普遍的生活文化,它不仅镌刻着历史的印记,也是中华传统文明的精髓。本文主要分析了民俗文化在学前教育中的渗透价值,并提出了科学有效的引入措施,希望可以为广大幼教工作者提供有力的参考,以期提高幼儿园教学效率,促进幼儿个性品质和健全人格的养成,实现民俗文化弘扬与传承的教学理想。
随着移动信息技术的快速发展和共享经济热潮,网约车逐渐进入人们的生活并在近几年中快速发展。借助于打车软件的实时定位,网约车平台可以精准对接车辆和乘客,人们出行时可以不再像以往一样需在路边翘首以待,而是原地轻轻按动手机,就可以便捷的享受出行服务。网约车的出现既减少了客运服务的空乘率,降低了运营成本,也减少了乘客的等车焦虑,提高了乘客的出行效率。但如同双刃剑的两面,网约车一方面确实方便了人们的生活,另一
基于2001-2020年的LUCC遥感数据对黑龙江省13个市(区)土地利用类型的时空演变特征进行分析,并采用PVAR模型实证分析了黑龙江省主要土地利用类型与经济增长水平之间的互动响应关系。结果表明:近年来黑龙江省土地利用效率有所提高,但土地供给压力增大,土地利用变化动态度较高,在一定程度上生态空间受到挤压;耕地、林地和草地3种土地利用类型间转移呈均衡转换态势,部分生态用地向建设用地转出;耕地面积的
目的:观察毫火针结合独活寄生汤加减治疗膝关节骨性关节炎的疗效观察。方法:56例按随机数字表法分为两组各28例,针药组用毫火针加独活寄生汤加减治疗,中药组只用独活寄生汤加减治疗。结果:两组治疗后VAS评分低于治疗前(P<0.05),且针药组降低更明显(P<0.05)。两组治疗后Lysholm评分均改善(P<0.05)。针药组总有效率高于中药组(P<0.05)。结论:毫火针结合独活寄生汤加减治疗膝关节