融合多模态数据的人体动作识别方法研究

来源 :计算机工程 | 被引量 : 0次 | 上传用户:serena_gy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于多模态融合的人体动作识别技术被广泛研究与应用,其中基于特征级或决策级的融合是在单一级别阶段下进行的,无法将真正的语义信息从数据映射到分类器。提出一种多级多模态融合的人体动作识别方法,使其更适应实际的应用场景。在输入端将深度数据转换为深度运动投影图,并将惯性数据转换成信号图像,通过局部三值模式分别对深度运动图和信号图像进行处理,使每个输入模态进一步转化为多模态。将所有的模态通过卷积神经网络训练进行提取特征,并把提取到的特征通过判别相关分析进行特征级融合。利用判别相关分析最大限度地提高两个特征集中对应特征的相关性,同时消除每个特征集中不同类之间的特征相关性,将融合后的特征作为多类支持向量机的输入进行人体动作识别。在UTD-MHAD和UTD Kinect V2 MHAD两个多模态数据集上的实验结果表明,多级多模态融合框架在两个数据集上的识别精度分别达到99.8%和99.9%,具有较高的识别准确率。
其他文献
报纸
写作技能是初中学生英语学习必备能力之一,也是英语考试中的一个重要考查部分。在初中英语写作教学中,写作教学往往是容易被忽视的一个教学环节。在传统的英语写作教学中,教师更注重词汇、拼写、语法等微观层面的准确性,却忽视了文章的语类结构等宏观层面,导致学生无法准确理解文章的写作意图,在面对不同类型的语篇写作时,学生无法按照要求把控整个语篇结构。近年来兴起的语类教学法,主张以读促学,将整个教学过程分为“解构
学位
提出了一种可用于硅基OLED驱动芯片的温度反馈PWM调节电路。该电路能够根据温度变化自动对OLED阵列上的共阴极电压进行PWM调制,从而实现温度变化时,保持OLED微显示器屏幕亮度和灰阶特性不变。电路采用0.18μm 1P6M混合信号工艺完成了电路设计和流片验证,仿真和测试结果表明,当温度从-25℃变化至70℃时,屏幕亮度与灰阶特征保持不变。研究解决了OLED微显示器屏幕亮度随温度变化,传统共阴极
期刊
<正>我是一名英语教师。每天早晨我都会在教室里陪伴学生朗读、背诵,帮助他们读准单词,链接相关词汇,联想记忆。测试结果却往往不尽人意。池谷裕二的《考试脑科学》让我豁然开朗,原来我们的大脑里藏着记忆的魔法。魔法一,欺骗记忆的拦路虎。保存长期记忆的部位是大脑皮质,它相当于人脑的“硬盘”。但是大脑皮质有一个拦路虎叫海马体,决定着知识是否被记忆。
期刊
<正>苏彦霖,中国少年作家学会会员、中国少年作家班小记者、广东电视台嘉佳卡通频道小主播、潮州市电视台小主持人、学校少先队大队长、校刊编辑、广播站广播员,先后出版了个人作品集《梦幻童年》《七彩世界》和《四季书香》(合集),在省级刊物《广东第二课堂》《小学生作文辅导》上分别发表作品《小小主持人》《爱看书的我》,作文《爱,就在身边》获得第十七届中国少年作家杯征文二等奖,作文《爱,无处不在》获得"中
期刊
<正>书香浸润他的心灵,兴趣引领他向前,他坚守爱的信念。他是谁?他就是2018年榆林市优秀少先队员,神木市第六小学六(3)班的王于熙。书香浸润心灵"读一本好书就是和高尚的人谈话。"王于熙总是把这句话挂在嘴边,行动在实践中。他喜欢阅读,读书的习惯从幼儿园时就养成了。那时,一本本绘本故事书成了他的最爱。每逢周末,他都会抱上一堆书,坐在
期刊
本文通过分析建筑工程安全管理现状,探究了现阶段我国建筑工程安全生产过程中存在的问题,并结合建筑工程实际,提出了建筑工程安全生产管理及生产安全事故预防措施,以期提高建筑企业的安全生产意识,促进建筑企业健康、有序、平稳的发展。
期刊
基于2013—2019年中国30个省市面板数据,利用固定效应模型实证检验数字经济、创新驱动与区域经济增长的关系,并考察创新驱动的中介效应。结果发现:数字经济生产服务、商业模式以及数字普惠金融均对创新驱动产生显著影响;数字经济商业模式、数字普惠金融对区域经济增长产生显著的促进效应,且数字普惠金融对区域经济增长的影响更为显著;创新驱动在数字经济商业模式与区域经济增长关系中存在显著的中介效应;数字经济对
期刊
<正>“任何一种教学活动都必须在一定的环境中进行。”高校公共体育教学活动作为一种典型的教学活动,其开展自然也在一定环境之中,并受到环境的制约与影响。其中,学校大环境对高校公共体育教学环境建设、高校公共体育教学活动开展的影响较为明显、直接,例如学校大的文化环境会影响学生对体育运动的认知及其认同感。廖建媚著写的《高校公共体育教学环境研究》(厦门大学出版社,2019年12月)一书,则结合作者多年的教学实
期刊
在当前高职教育混合式教学环境下,如何在线上、线下教学过程中,将协作学习模式融入日常教学过程中,是紧迫且重要的课题。通过文献调查、对教师、学生群体进行访谈调查,运用活动理论和协作学习五要素理论为理论基础和实践方向,协同学习模型设计等方法,对活动设计、实施环境进行研究,逐步探索出三个方面的结论。
期刊