基于深度学习的视频异常事件检测方法研究

来源 :国防科技大学 | 被引量 : 4次 | 上传用户:mengpiaoyao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会公共安全、智能医疗管理和分析、智能交通管理以及智慧城市管理等领域的迫切需求,视频监控系统已广泛部署于机场、火车站、公路、商场、医院以及学校等场所。同时,由于摄像头、传感器和存储器等设备的迅速发展以及成本的降低,全球每日监控视频数据量以上千PB量级增长。因此,如何从海量监控视频数据中及时检测出与大多数正常事件不一致的少量异常事件,已经成为了计算机视觉和模式识别领域亟待解决的研究热点问题。目前,由于传统方法存在异常的定义模糊、训练样本手工标注工作量大、检测模型泛化能力弱以及实时性差等方面的问题,越来越难以满足视频异常事件检测日益增长的应用需求。自2012年以来,深度学习在计算机视觉、图像识别、语音识别以及自然语言处理等诸多领域都取得了显著成果。通过采用模拟人脑多层结构的方式,深度学习试图学习由多个非线性变换构成的多层神经网络结构,来实现数据从底层到高层的抽象,以挖掘海量数据中的复杂结构。本文将深度学习引入到视频异常事件检测问题中,根据对先验知识的了解程度,围绕视频异常事件检测中常见的特定事件检测、新奇事件检测和异常事件无监督检测三个方面开展研究,取得的研究成果如下:1.针对事先提供正常样本和异常样本的情况,以跌倒事件为例,提出了一种基于深度卷积神经网络(CNN)的特定事件检测方法。该方法将完整的跌倒事件分成站立、下降、倒地和不移动四个动作阶段,并通过观测四个动作阶段的连续发生来判断跌倒事件的发生与否。首先将裁剪好的四个动作阶段视频片段转换成了四类动态图,用以训练一个能进行四分类的CNN;然后,将待测视频转化成一组动态图,并通过训练好的CNN来预测动态图的标签,从而得到待测视频中四个动作阶段发生情况,最后根据观测四个动作阶段依次发生来检测跌倒事件。在四个跌倒数据集上的实验结果证明,该方法能够取得实时、高敏感度和高特异性的检测结果。该方法通过简单的改动后,在两个暴力检测数据集上也取得了高精度检测结果,证明了该方法有较强的泛化能力。2.针对事先仅提供正常样本的情况,提出了一种基于高斯混合全卷积变分自编码网络(GMFC-VAE)的新奇事件检测方法。该方法假设所有的正常样本符合一个高斯混合模型,而新奇样本则无法关联其中的任何一个高斯分量,因此可以通过样本属于各个高斯分量下的条件概率来检测新奇样本。首先,在训练时GMFC-VAE能够学习正常样本的隐层表示,并将其约束成一个高斯混合模型;然后,将待测样本通过GMFC-VAE获得其隐层表示,根据隐层表示计算测试样本属于高斯混合模型的每个分量的条件概率,并采用了一种基于高斯分量的条件概率和先验分布的异常判别准则以检测异常事件。该方法根据RGB图像和动态流图,分别训练了相应的GMFC-VAE,以分别检测外观和运动新奇事件,并将二者融合以确定最终的检测结果。在两个公开数据集的实验结果表明,该方法获得优于传统手工特征方法的检测效果。3.针对没有任何先验信息的情况,即没有额外标注的训练样本,提出了一种基于感知生成对抗网络(Perceptual GAN)的异常事件无监督检测方法。该方法利用生成对抗网络(GAN)中生成器和判别器之间的竞争,生成器不断学习生成异常样本,判别器则学习如何检测异常。首先,假设待测视频样本的初始帧中不含异常事件或者只包含极少的异常事件,取其初始帧训练Perceptual GAN,并引入感知损失(Perceptual Loss)以提升判别器检测性能;然后,直接采用Perceptual GAN的判别器来对待测事件进行检测;最后,将检测出的正常事件对训练好的Perceptual GAN进行微调以更新检测模型。在三个公开数据集的大量实验证明,该方法性能达到了现有无监督检测方法的技术发展水平。
其他文献
<正>进入九十年代以后,在商业化的氛围中,文学期刊的生存状态渐趋严峻。"一九九二年底,赵本夫受命兼任《钟山》主编,他曾做了一个调查,从刊物订数上看,读者减少了95%。"①在
膀胱癌是一类发病率较高的恶性肿瘤,早期缺乏典型的症状和体征。因此,多数患者在就诊时已属晚期,预后较差([1-2])。所以早期和及时的诊断是改善患者预后的关键。透明质酸(hyalur
癌症严重威胁人类的健康,而传统的治疗方法效果较差,不能满足人们对健康的需求,纳米材料的出现将对人类的健康事业带来关键性的变化。卟啉具有独特的结构与光疗性能,其在抗肿
流行性感冒是由流感病毒引起的一种急性呼吸道传染疾病。流感病毒主要通过飞沫、人与人之间的接触或与被污染物品的接触传播,具有传染性强、发病率高等特点,容易在人群中引起
英美文学课程正在被大学生冷落,边缘化。许多学生觉得文学经典枯燥乏味,提不起兴趣。本文从多方面探究其原因,例如,学生自身原因,教学考核方式落伍、单一,教材内容陈旧,有待
随着JIT生产模式在实际车间的推广,生产系统对计划排程的要求越来越高。发动机装配车间具有混流生产、工艺流程长、生产周期长、生产规则复杂等特点,凭借经验和手工编制方式制定的生产计划指导实际生产的作用有限,因此实际车间亟需采用更科学、准确的混流生产计划以充分发挥车间的产能。本文以一汽锡柴发动机生产企业为案例背景,研究装配车间的计划排序问题。首先,通过分析车间的实际生产情况,提出一个按产线上下游划分的两
藏北高寒草原生态系统是我国生态安全的重要屏障,其功能变化具有显著的环境效应。目前,藏北地区严峻恶劣的气候条件、自然鼠害、人类的超载放牧过度开发等对藏北高寒草原造成了严重的破坏,藏北高寒草原出现了大面积的退化及沙化现象,严重制约了当地的生活水平和经济发展。本论文主要研究了申扎示范地土壤的基本性质(酸碱度、粒径分布、化学成分、营养成分),分析其退化现状及原因,考察了一种亲水反应型聚氨酯(WOH)在藏北
煤炭行业是一个对其他产业关联度极高的行业,煤炭资源的消费可以说融入到了我国国民经济中的各个环节。煤炭作为我国的基础性能源,产品的消费融合在我国经济发展的各个环节中
歌剧《开普莱特与蒙太古》是由著名意大利作曲家温琴佐?贝里尼根据威廉?莎士比亚戏剧作品《罗密欧与朱丽叶》改编谱写而成。但这部歌剧在贝里尼众多作品中并不是最为人熟知的,随着近几年国内女高音在声乐作品上的拓展,剧中朱丽叶的咏叹调《啊!多少次为你向上帝祈祷》逐渐进入大部分歌者的视野,在各大声乐比赛和演出中很多歌者都争先演绎这首作品。笔者认为贝里尼此歌剧以及其中的唱段是具备被世人熟悉的价值的,所以本文选择剧
中国物流业的飞速发展,得益于中国政府的大力支持、推动和引导。本文对政府在物流业发展中所起的作用进行了初步的讨论研究。