【摘 要】
:
人体行为识别是计算机视觉领域的一个重要研究方向,其目的是通过分析人体姿态或动作的特征,实现对人体行为的自动识别和理解。深度学习作为一种强大的机器学习技术,在人体行为识别领域也已经取得了很多的成果。深度学习方法可以自动地学习抽取特征,并能够处理复杂的非线性问题,逐渐成为了人体行为识别领域的主流技术。虽然现有的图卷积神经网络(GCN)方法在建模人体行为识别方面有着不错的表现,但其并未考虑到人在同一动作
论文部分内容阅读
人体行为识别是计算机视觉领域的一个重要研究方向,其目的是通过分析人体姿态或动作的特征,实现对人体行为的自动识别和理解。深度学习作为一种强大的机器学习技术,在人体行为识别领域也已经取得了很多的成果。深度学习方法可以自动地学习抽取特征,并能够处理复杂的非线性问题,逐渐成为了人体行为识别领域的主流技术。虽然现有的图卷积神经网络(GCN)方法在建模人体行为识别方面有着不错的表现,但其并未考虑到人在同一动作执行过程中,每个骨骼部位在每帧运动中有着不同程度的位移,不同的骨骼部位在动作执行过程中参与的重要程度也不同的问题。因此,针对以上问题,本文设计快慢双支路的时空图卷积神经网络(SFST-GCN),使其关注骨骼数据的细节信息和整体信息,并加入随网络训练具有自学习能力的边的权重矩阵,以及选取不同数量的时空图卷积块(ST-GCNs),并设置快慢两支路之间的特征融合对现有的人体行为识别算法进行改进,并在此基础上设计一款人体行为识别软件系统,对视频中人的动作进行行为分类识别的功能。本文主要的研究内容如下:(1)现有的基于骨骼数据的人体行为识别算法并未探究骨骼在同一动作执行过程中,不同骨骼部位的运动位移快慢不同,并且不同的骨骼部位对动作执行中的重要程度也不同。针对这一问题,本文设计快慢双支路时空图卷积神经网络,并加入随网络训练具有自学习能力的边的权重矩阵,用于建模时序上变化快慢不同的骨骼部位,并使网络更加关注执行动作过程中重要程度更高的骨骼部位。同时对于网络中ST-GCN块步长变大后,采用两支路之间特征融合,解决特征丢失严重的情况。经过实验验证,本文提出的快慢双支路时空图卷积神经网络,在NTU-RGB+D 60数据集上跨视角(X-View)的Top-1识别精度可达到89.69%,跨对象(X-Sub)的Top-1识别精度可达到82.63%。(2)本文设计并实现人体行为识别软件系统。一种是调用人体姿态估计算法API获取离线视频图像中人的2D坐标,并按照统一的格式转换数据,使其符合行为识别模型的数据格式,通过行为识别网络对当前人的动作进行分类识别的任务;另一种是采用3D人体姿态估计算法,获取实时图像中人的3D坐标,并将特定帧数的骨骼坐标数据存放在容器中,通过数据格式转换,输入到研究内容(1)训练好的SF ST-GCN行为识别模型中进行动作分类,输出分类结果后,将数据容器置空,继续循环此操作,完成接近实时处理的人体行为识别任务。这一部分内容设计软件及UI界面,实现多种功能,完成从视频到行为识别分类的全部流程。相比其他相关的行为识别算法,本文提出的快慢双支路时空图卷积网络在NTU-RGB+D 60数据集上的识别准确率有着一定程度的提高。
其他文献
目的 分析小儿支气管哮喘患儿采用吸入性糖皮质激素治疗的临床疗效。方法 102例小儿支气管哮喘患儿,按照随机数字表法分为对照组和实验组,每组51例。对照组采用常规对症治疗,实验组采用吸入性糖皮质激素治疗。比较两组治疗效果、临床症状消失时间、治疗前后免疫功能水平及不良反应发生情况。结果 实验组治疗总有效率98.04%明显高于对照组的86.27%,差异有统计学意义(P<0.05)。实验组呼吸困难消失时间
目的 研究蚂蚁咬伤致过敏性反应62例临床分析。方法 选取2019年5月至2021年5月我院接诊的62例蚂蚁咬伤致过敏性反应患者,依据抽样法进行分组,就对照组(31例)实行常规治疗与观察组(31例)在前者基础上配以护理干预取得效果对比。结果 观察组的总有效率高于对照组(96.77%>77.42%),X2=5.167、P<0.05。观察组的BP(91.44±21.23)min/次和CVP(97.49±
目的总结蚂蚁蜇伤的临床表现、辅助检查及预后,探讨蜇伤后正确的处理和治疗措施。方法收集2019年4—11月份因蚂蚁蜇伤前来就诊的166例病例的一般资料、临床表现、实验室检查、治疗及预后情况,进行回顾性分析。结果 166例病例临床症状分别表现为局部或全身变态反应,可出现肝损害、心肌损害、电解质紊乱、伤口感染等并发症。病情发展快,采用中西医结合治疗措施,166例均治愈。结论蚂蚁蜇伤可导致全身炎症反应、微
2020年随着我国体育和教育事业深化改革,体教融合概念正式提出。校园篮球担负了推动体教融合的时代责任,在促进学生体质健康和全面发展中发挥积极作用。体教融合是体育教学发展的大势所趋,是在体教结合基础上进一步优化完善,提升体育课程内涵,将文化学识和体育运动交融,更系统性、有效性、全面性进行调控。体教融合是中央深改组根据我国教育国情与青少年体质的实际情况,对我国教育工作进行全面部署和设计,为我国学校体育
蚂蚁是一种常见的昆虫,隶属于昆虫纲,膜翅目,蚁科。根据蚂蚁种类的不同,毒液成分及含量表现出复杂、多样,但主要含有多肽及蛋白质、生物碱、蚁酸及生物胺等有毒物质。蚂蚁广泛分布于全世界,主要分布于热带及亚热带地区,在我国分布范围也甚广,全国各地都有。目前国内外对蚂蚁致病机制研究的不充分,尚未完全阐明其具体机制,蚂蚁蜇伤后的中毒效应是多种毒素共同作用的结果。蚂蚁蜇伤局部可出现风团和红晕,水疱或脓疱,全身皮
黑色稻谷的开发利用朴京姬,宋立泉,黄亚清(黑龙江省农科院栽培所)根据日本、美国等国家的营养学专家研究,凡含有天然黑色素的动植物,其营养价值与保健功能均超过它的浅色同类。因此近几年国内外掀起了黑色食品的热潮。目前,在我国市场上出现的黑米系列食品,先是黑...
<正>支气管哮喘(简称哮喘)是一种以喘息、咳嗽、胸闷、气促为主要临床表现的慢性气道炎症疾病,因病因、机制、分型等不同而具有明显异质性。全球有超过3亿的哮喘患者,其中中重度难治性哮喘患者约占3.7%。在全球哮喘防治创议(GINA)阶梯治疗方案中,轻中度哮喘患者能够在皮质类激素、β2受体激动剂、白三烯及抗胆碱能等常规药物的辅助治疗下得到缓解和控制。而中重度难治性哮喘因其复杂的病理机制使其在常规治疗中不
当代青少年是祖国的未来、民族的希望,是新时代中国特色社会主义事业的接班人和建设者。但随着世界经济全球化的发展,全球文化融合的趋势日益凸显,再加上信息网络传播的隐蔽性、复杂性,使得青少年易受到西方意识形态的干扰与渗透,因此加强青少年的思想品德教育尤其重要。中国共产党历年来都非常重视青少年的思想品德培养和理想信念的教育。红色精神作为中国共产党革命、建设、改革历史进程中一脉相传的宝贵精神财富,将其有效融
我国在选拔体育人才的时候,对体育高考生要进行身体素质:100米、立定跳远、实心球和专项的统一测试。其中,身体素质测试的项目对学生的爆发力有着非常高的要求。因此,发展高中体育训练队的爆发力有着非常重要的意义,会直接影响到他们在训练或是比赛中的表现。体育教师需要在日常体育教学和体育训练中做好训练队的爆发力训练工作,进而帮助他们在训练和竞赛中取得优异的成绩。本文通过文献资料法、访谈法、实验法等,对重庆市