基于注意力的CNN_RNN人体行为识别算法研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:swxylq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体行为识别是当前计算机视觉领域的热门研究方向之一,在视频监控、人机交互、运动分析等多个领域有着广泛的应用前景与经济价值。此外基于视频的人体行为识别框架还可应用于多种视频理解任务中,因此该领域的研究还有着重要的科研应用价值。随着研究的不断深入,该方向从最初的人工特征方法到现在基于深度学习的方法,各种新颖的网络架构和算法设计不断被提出。本文以深度学习框架为基础,围绕人体行为识别领域所存在的问题,展开了一系列研究,主要工作内容和成果总结如下:(1)提出了一种基于分割注意力的特征融合CNN-BI-LSTM人体行为识别算法。针对视频数据存在的背景复杂、与运动无关的噪声信息影响识别效果的问题,该算法首先采用分割注意力网络提取视频的空间特征,利用分组卷积和通道注意力机制对运动的空间特征进行提取并加强特征表示。之后通过将低层的轮廓位置等细节信息与深层的高级语义信息相融合,促进不同卷积层之间的信息交互,以增强网络性能。最后,为了捕获动作的长时间依赖关系,使用双向长短时记忆网络BI-LSTM从视频的正向和反向对时间信息进行建模,从而获取视频中动作更精确的时间模式。通过在UCF101和HMDB51这两个公开数据集上进行广泛的实验,验证了本文所提出算法的有效性。(2)提出了一种基于时空增强的Res3D-RBLSTM人体行为识别算法。针对2D CNN结合LSTM网络忽略了运动潜在时空相关性的问题,该算法使用更加高效紧凑的3D卷积提取视频的局部短时时空信息。通过引入残差连接增加网络深度,构建了一个具有18个卷积层的三维残差卷积神经网络和一个3层的双向残差LSTM,分别提取动作的短时时空特征和建模长时依赖关系。此外,为了减少冗余帧和背景对动作识别产生的干扰,还提出了一个STA时空注意力模块,通过生成特征注意力调整权重来强化关键帧和重点区域的特征表示。最后在两个公开数据集上进行实验验证,证明了本文所提出的算法有效提高了识别精度。(3)设计并实现了一个基于Web的人体行为识别系统。该系统主要由浏览器端的页面展示和服务器端的算法及逻辑控制组成,使用My SQL数据库存储已注册用户的相关信息。用户在注册登陆该系统后,可以通过前端页面上传待识别视频,之后系统调用后台算法对其分析,从而实现对视频中运动的分类识别,最后将识别结果返回到前端并显示给用户。此外该系统还支持历史记录的查询与导出功能,避免了相同视频的重复识别,具有一定实用性。
其他文献
针对各类工业生产活动中出现的点源粉尘污染问题,亟需灵活且高效的除尘设备对此类工业场所进行粉尘治理。大口径的褶皱式滤筒具有过滤面积大,占地面积小等优点,可满足此类设备的需求,但其复杂的褶皱结构会导致滤筒的脉冲清灰效率降低,有效过滤面积缩减,影响除尘器的稳定运行状态。因此本文以褶皱式滤筒除尘器作为研究对象,通过对不同褶皱比的滤筒进行工业粉尘过滤实验,探究了不同的除尘器入口粉尘浓度和褶皱比变化对除尘器脉
肝门部胆管癌(h CCA)是位于二级肝管与胆囊管开口之间的胆管上皮起源的恶性肿瘤,又称为Klatskin瘤。手术是h CCA唯一潜在的治愈性方法。切缘性质是行切除手术的患者获得长期生存最关键的因素,而作为胆管癌最常见的亚型,h CCA的病理学类型多为低-中分化腺癌,侵袭能力强,恶性程度高,早期症状不明显且无有效的检出手段,所以多数患者在诊断时已处于疾病晚期,丧失手术指征。虽然新辅助放化疗联合原位肝
过氧化氢(H2O2)是一种多用途且环境友好的氧化剂,广泛的应用于漂白,消毒,废水处理,化学合成,半导体清洁和废气处理等方面。目前,H2O2的大规模工业生产依赖于蒽醌法,可以集中产出高浓度的H2O2,进而运输到各个需要的场所。近年来,随着可再生能源技术的发展以及对分散式现场合成过氧化氢(H2O2)新方法的需求,利用太阳能,风能等清洁能源产生的电能进行电化学二电子氧还原(2e-ORR)合成H2O2被认
面对学生学习压力和学习负担不断加重的现状,为了确保未来人才的健康成长,国家颁布实施了《关于进一步减轻义务教育阶段学生作业负担和校外培训负担的意见》,主要从作业布置、课后服务、校外培训和教学质量四个方面为学生减轻负担。而课堂教学正是减负的关键阵地,因此教师须先明确“减”什么和“增”什么这一首要问题,可以从压力、作业和评价等方面做适当的“减法”,从多育融合、思维练习、协同合作和情感交流等方面做“加法”
研究基于巡回指导教师视角,运用德尔菲法与层次分析法建构巡回指导能力指标体系,并分析指标权重。该体系包括3个一级指标、9个二级指标和42个三级指标。一级指标权重由高到低为基本理念(36.9%)、基本技能(32.6%)和基本知识(30.5%)。各一级指标下,二级指标权重最高的是专业发展、心理与教育知识、指导教育筛查与评估。研究结果有助于巡回指导教师规划专业发展方向、优化巡回指导教师队伍结构。
网络信息技术的创新发展与应用,使纪录片的创新发展成为可能。鉴于此,本文在研究网络纪录片发展现状和主要特征的基础上,就当前媒体环境下纪录片在发展中面临的机遇和挑战进行分析,并提出网络纪录片创新发展的策略,以期为网络纪录片的创新、持续发展提供参考。
<正>世界正处在百年变局与新科技革命的深刻变化中,国际政治经济形势趋于长期激烈复杂,全球科技创新格局正在重塑,对于我国抢占发展制高点、培育竞争新优势提出了更高的要求。党的十九届五中全会指出,“深入推进科技体制改革,完善国家科技治理体系,优化国家科技规划体系和运行机制,推动重点领域项目、基地、人才、资金一体化配置。”
期刊
期刊
新型冠状病毒病疫情发生后,我国迅速采取了"禁足"在家的隔离措施,这对居民日常生活和作息产生了多方面的影响.为全面了解疫情对居民日常起居、睡眠和生活习惯的影响程度,该研究于2020年2月17-2月27日,即疫情的平缓增长期对全国发放问卷共1 122份,旨在通过全体居民的疫情关注、情绪、饮食与睡眠等维度对生活方式进行描述性统计分析,揭示疫情期间居民的日常作息规律.结合失眠易感指标,我们特别对睡眠质量下