基于SC-HigherHRNet的人体动作识别

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:xdhjyinghua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体动作识别检测一直是计算机视觉的重要课题之一,它在视频监控,行为记录,动作捕捉,虚拟现实,人机交互和多媒体搜索等诸多领域中有着许多潜在的应用价值。人体动作识别就是利用深度学习的神经网络通过对不同的动作视频进行学习,继而完成对不同动作视频分类的过程。人体动作识别同时也是具有较高挑战性的任务,不仅因为人体动作种类和动作背景具有较高的复杂性,而且视频片段所需要的庞大计算量也增加了动作识别的难度,以上问题导致人体动作识别的方法很难在满足较低的运算量的情况下同时提高动作识别的准确率。针对这些问题,本文提出一种利用人体关节点运动轨迹进行动作识别的方法。第一步将一段完整的动作视频流输入到我们优化后的关节点提取网络SC-Higher HRNet里,SC-Higher HRNet网络可以提取视频中每一帧图像内所有人的关节点位置信息。第二步在提取到整段视频的关节点位置信息后,我们采用关节点时空信息融合降维的办法将所有关节点的位置信息按照一帧对应一个行向量的方式逐行进行拼接,最终得到代表着一种动作类别的运动轨迹信息时空融合二维矩阵,第三步将二维矩阵代入到SCnet分类网络中进行学习和预测,即可实现不同种动作视频的分类。通过实验验证,文章方法在公开数据集KTH、UCF-101和HMDB51数据集上分别取得97.1%、96.1%和76.5%的准确率。区别于在整个视频中搜索光流区域关键点的方法,本方法仅寻找按照人体的眼睛、耳朵、鼻子、手掌、手肘、肩部、喉咙、髋部、膝盖、脚踝等共计18个关节点的位置信息。区别于三维立体时空建模和双流网络进行动作识别的方法,文章分类器通过对关节点轨迹信息进行分类预测,因此,文章所使用的方法在动作识别上不仅大大降低了运算量,准确率也得到了提高。
其他文献
由于具有低功耗和可提升通信质量等优点,智能反射面(Intelligent Reflecting Surface,IRS)被认为是下一代通信的关键技术之一。在大规模多输入多输出(Multiple input Multiple Output,MIMO)通信系统中,使用深度学习的方法对信道状态信息(Channel State Information,CSI)进行压缩和重建是目前学术界研究的热点。然而,相
学位
在当前市场经济快速发展的过程中,国有企业面临着管理模式落后、技术水平不足、内部治理机制不完善等问题,由此导致企业经营效率低下、发展受阻,改革刻不容缓。自十八大以来,混合所有制经济的发展开启了崭新的一页,各项政策接连颁布,我国国有企业的混合所有制改革已进入攻坚深化阶段。尤其近年来“双百行动”的推进与2020-2022年“三年行动方案”的实施,更是加速了混合所有制改革的发展。同时,医药行业在我国国民经
学位
在人工智能和互联网等新兴生产力的驱动下,多种科学技术在不断创新中取得突破,其中智能移动设备的拍摄功能尤为显著,其浅景深处理功能也逐渐受到人们的青睐。而随着该领域研究的不断涌现,浅景深处理技术得到不断的改进与完善,但现有研究工作仍存在一定的不足:一方面在传统景深渲染方法中,对设备硬件要求较高,难以应用于现实生活,而基于卷积神经网络的方法虽然可在部分移动设备上进行浅景深处理,但由于硬件条件不足而难以获
学位
随着遥感成像技术的发展,高光谱遥感图像具有很高的光谱分辨率,能够充分反映地物的细微特征,被广泛应用于农业、军事和科学研究。高光谱图像(Hyperspectral Images,HSI)蕴含大量的空间和光谱信息,由数百个甚至数千个连续的光谱波段组成,且波段之间的相关性很高。根据不同地物光谱特征的差异,高光谱图像的精细分类与识别得到广泛的研究。聚类分析是一种有效的数据分析工具,对高光谱图像进行聚类有助
学位
习近平总书记在党的十九大报告中提出,我国的经济已由高速增长的阶段转化为高质量发展的阶段。我国2021年GDP总量达到114万亿,连续12年成为世界最大的制造业国家。相比较我国金融行业近年发展迅速,并且依靠准入管制和利率管制等政策优势,收益率一直处于增长状态,制造业作为我国经济占比最高的产业,在近年频繁出现主业利润下降、产能过剩、成本上升等问题。因此,大量的制造业企业为了提高自身的利润率,将大量资金
学位
股权质押是指出质人将其持有的企业股权作为标的物设立质押,从金融机构申请借款的一种融资方式。这种获取资金的方式因为具有审批速度快、容易变现等诸多优势,所以深受控股股东的青睐。近些年,股权质押行为尤为盛行,但是经常性且高比例的股权质押会增加控制权与现金流权的分离程度,使控股股东进行利益侵占的成本降低,从而诱发控股股东对上市公司的利益侵占行为。与此同时,企业内部治理和外部监管的漏洞也为控股股东利益侵占提
学位
作为企业财务战略中的重要构成,股利政策指的是公司进行利润分配的具体方式,对于公司的稳定经营和长远发展起着至关重要的作用。适当的股利政策可以为企业塑造起良好形象,增强投资者的投资信心。为更好的规范上市公司的现金分红行为,国家从2000年之后开始颁布一系列政策法规,对现金分红的必要性和具体比例做出了一系列规定。不仅使分红持续性得到了改善,企业的分红积极性也较大程度上得到了提高,“高派现”现象频频涌现,
学位
在中国金融市场,银行业一直以来作为“输血者”的角色,为各行各业提供贷款,为人民群众提供财富保值增值渠道,不同于国外银行业的混业经营,中国实行分业经营,这意味着个人客户是银行的重要参与者,经营好个人客户资源有利于银行在同行竞争获得领先优势。同时,随着金融科技的深入发展以及中国经济结构的转变,银行客户对银行的功能、产品、服务提出新的要求。近年中国银行业开始掀起一场“数字化转型”浪潮,希望通过数字化转型
学位
轮胎作为车辆最为重要的安全部件,其安全技术要求等级很高。如果有问题的轮胎没有及时地被召回,将对社会及消费者安全存在威胁。为了对可能出现的轮胎召回问题进行有效管理,制造和装配厂都记录了DOT(Department of transportation)信息。通过读取轮胎侧面的DOT信息,制造商能够实现对轮胎产品的追溯和分类。该工作目前主要依靠人工识别,速度非常慢,还需要大量人力,并且工人在长时间的工作
学位
近年来,在改革红利不断释放的大环境与促进企业并购重组相关政策的刺激作用下,我国经济结构和产业转型升级的步伐逐步加快。与此同时,随着科学技术的飞速发展,互联网、新能源等一系列新兴产业逐渐活跃,不断对钢铁等传统行业进行冲击。在复杂的经济形势下,如何克服困难,实现进一步发展是许多企业必须面临的问题。近些年来,我国的资本市场发展迅速,许多上市公司进行了跨行业的并购重组,希望通过实现多元化战略来寻找新的利润
学位