基于视频分析的行人摔倒行为检测方法及研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:epigeige
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当今医疗技术的进步发展,大多数疾病都有了解决方案,人类平均寿命延长,人口年龄分布已经趋向老龄化。与此同时一种新的群体“空巢老人”也随之诞生,依据全国老龄办公开报道,2020年空巢老人人口总数现已达到了1.18亿。由于这种群体的特殊性,在缺少照顾的情况下,身体不便带来的危险也随之增加,国内65岁以上的老人因伤意外离世的最主要的因素便是摔倒,随着年龄的增长,摔倒后发现不及时从而导致的危险尤其严重。如今,随着监控视频技术的日益成熟,为了解决以上问题,通过将计算机视觉以及深度学习应用于家庭安全监控上成为如今的主流方法,相比传统穿戴设备的检测方法,基于深度学习模型的方法不仅更加智能化,同时也避免了穿戴设备时的不便。这种对策能够经过安置的摄像头得到监测的即时视频,运用深度学习策略来对视频中行人的动作实行推断,从而对摔倒这类的危险进行监测预警。本文设计了两种摔倒检测算法和一个摔倒检测系统,主要工作介绍如下:(1)提出了一种基于时空注意力网络的行人摔倒检测方法。该方法通过以目标行人图像序列作为输入数据,构建时空注意力网络(IBANet)。时空注意力网络分为三个部分,首先通过设计一个简单的卷积神经网络用于提取目标图像的表观特征信息,随后将图像序列中对应的图像外观信息作为下一级网络的输入,利用双向长短期网络(Bi Lstm)来提取序列图像中的时间信息,最后通过在Bi Lstm中引入注意力机制(Attention Mechanism)实现对序列中的图像选择性关注。通过在自建图像序列数据集ISD-2021上对IBANet进行训练验证,证明了该方法可以有效的对监控视频中的目标摔倒的异常行为做出及时的判断。(2)提出了一种基于图像特征融合网络的摔倒检测方法。首先利用目标RGB图像以及骨骼点伪图像作为数据输入,为此构建了图像特征融合网络(IFFNet)。IFFNet由图像特征融合提取处理模块和图像特征融合分析处理模块组成。特征提取模块利用RGB图像特征提取网络(RIENet)以及骨骼点伪图像提取网络(FIENet)作为两个分支分别提取这两种信息。特征融合分类模块通过将特征图在通道上融合的方式组合两组特征信息,利用线性层与Softmax层得出该组图像的对应类别概率。在自建双模态图像数据集BID-2021实验验证该方法的有效性和实时性。(3)搭建了一个实时的摔倒监测系统。利用Lightweight-Openpose作为视频目标检测跟踪模块,该模块用于获取目标位置信息以及目标骨骼点坐标信息,通过所述信息构建目标行为分类模块的数据输入。利用第四章提出的图像特征融合网络IFFNet作为目标行为分类模块。通过pyqt5框架搭建一个摔倒监测系统,该系统不仅可以实现视频输入以及检测输出的可视化,而且可以通过设置摔倒时间作为阈值判定发出警报的时间以及将输出信息保存日志以便查看。通过该系统可以很好的实现智能化监控。
其他文献
基于无人机遥感的水稻病害程度判别是智慧农业中的重要组成部分,对于世界粮食安全和提高水稻品质具有重要作用。本文以水稻窄褐叶斑病和茎腐叶枯病为研究对象,采用专业版航拍无人机平台DJI INSPIRE 2(DJI Innovation Science and Technology Co.,Shenzhen,China)搭载多光谱传感器Sentera’s Multispectral Double 4K s
学位
草图是一种手工绘制的图像,仅由线条组成,具有简洁、明了的特点,可用于表达语言文字难以叙述的信息。近年来,随着触摸屏等设备的出现,草图的绘制变得更加容易,与草图相关的研究方向吸引了许多的关注,草图分类与草图检索是其中两项重要的研究工作。自从深度学习技术提出以来,卷积神经网络被用于草图分类与草图检索的研究,并取得了很大的进展,但仍存在特征提取不全面、先验知识使用不充分等问题。本文利用多特征结合、双阶段
学位
金融是现代经济的核心,绿色金融在推动经济绿色增长的过程中发挥着重要作用。本文基于2003—2019年中国285个地级及以上城市的空间面板数据,构建了三种空间权重矩阵并使用空间计量模型,实证检验绿色金融对城市绿色全要素生产率的空间影响及其作用机制。研究结论如下。(1)绿色金融和城市绿色全要素生产率均表现出显著的空间自相关性。(2)绿色金融不仅能提升本地区城市绿色全要素生产率,还能提升邻近地区城市绿色
期刊
苹果是我国市场最常见的水果之一,富含各种营养物质,能提高人体免疫力。而病害是造成苹果品质不达标的重要因素,常见的苹果病害包括灰霉病,黑根霉病,腐烂病和炭疽病等。苹果在运输加工过程中受到侵染后,随着储存时间的增加,出现不同程度的腐烂,腐烂越严重的苹果越容易对同一批次的正常苹果造成侵染。为避免交叉感染,在储存、销售和加工前准确及时地检测出坏果并剔除是尤为重要的。同时为避免资源浪费,针对不同侵染程度的苹
学位
玉米是重要的粮食农作物,其产量和品质受到玉米叶病害的影响。玉米叶病害的早期诊断和防治是保障玉米产量和品质的重要手段。而早期的玉米叶病害在自然场景下呈现出斑点小、分布不规则和复杂背景的干扰导致了目前的研究难以实现准确识别。同时,玉米叶病害在类内以及类间上可能存在尺度差异,这也会增加对自然场景下玉米叶病害识别的难度。针对上述难点,并鉴于实际应用部署对轻量级模型的需求,本文在深度学习的基础上,针对实际场
学位
光热电(Photo-thermoelectric:PTE)器件作为一种新型的能源器件,能够很好的满足光电探测器和便携式电源的需求,并在红外光及太赫兹探测领域展现出了广阔的应用前景。然而,传统的PTE器件仅对红外光有光响应信号,在能量较高的可见光范围缺少光响应信号,这一缺点极大限制PTE器件对太阳光的利用能力。同时,通过我们研究发现,PTE器件对气流的波动会产生较强的电信号波动,因而在气动传感方面展
学位
自忆阻器成功研制以来,就不断应用于多个领域。随着对忆阻混沌系统的深入探索,发现经过忆阻器串并联构建的电路表现出复杂的动力学行为,但是其忆阻器之间的耦合效应同样也是不容忽视的。同时,由于分数阶理论具有能够精确刻画现实事物本质特征的优势,这使得研究者们考虑将耦合忆阻系统的研究从整数阶转向分数阶。此外,相对于传统的伏安模型而言,韦库模型中初始值可设置为单独的参数,这为研究耦合忆阻混沌系统的初值敏感性提供
学位
由于近些年信息技术的蓬勃发展,使得机器学习在重症医疗领域的研究日趋重视。但是传统的重症数据库仅限于病例管理,并不具有空间地理数据信息和疾病的预诊评估,无法应对重症的紧急性和突发性。新型冠状病毒的到来,更是突出了这一缺陷。近年来随着WebGIS技术的快速发展,本文通过查阅相关文献以及相关开发技术,对目前的主流技术方案进行了介绍,根据现有的数据,通过收集研究区的医疗资源信息以及相关基础地理和医疗资源数
学位
生物医学图像配准(Bio-medical Image Registration,BIR)在医学成像、生物医学基础研究及临床辅助诊疗中发挥重要作用。3D生物医学图像配准旨在建立3D图像对之间体素级别的非线性映射关系。传统基于特征优化的BIR算法取得较大进展且配准精度高,但是其针对特定图像对的迭代优化过程十分耗时无法满足临床实时应用的要求。近年来,深度学习(Deep Learning,DL)技术飞速发
学位
农业在一个国家的经济发展过程中起着战略性作用,对于发展中国家的经济稳步发展至关重要。由于农作物病害而引起的农产品减产减收是农业经济发展的一大障碍,为了解决这一障碍,对于农作物病害的及时防治尤为重要。准确且高效的识别农作物病害是进行病害防护治理的前提条件,对农作物的产量和品质有直接影响,因此如何更加高效并且精准的对农作物病害进行识别对于农业生产具有重要意义。在过去,一般通过农作物病害专家对发病作物进
学位