音视频融合感知的研究与实践

来源 :厦门大学 厦门大学 | 被引量 : 0次 | 上传用户:huahua9
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着监测系统智能化的快速发展,监测数据在交通、环境、安防等领域发挥着越来越重要的作用。音视频融合的研究可以利用视觉与听觉的互补效应来感知环境变化。此外数据量巨大的音视频数据,迫使人们寻找更加有效地分析方法,从而将人从重复的劳动中解脱出来。因此,音视频融合感知技术不仅具有重要的理论研究价值,在应用前景上也是大有可为。  本文研究当前音视频融合感知领域发展的现状,以传统视频监控平台为基础,设计了音视频融合感知的体系结构。立足于音视频内容分析,研究了基于音视频融合感知的暴力场景分析模型。本文主要贡献如下:  1.以音视频融合感知的监控平台为出发点,设计了基于音视频融合感知的现场监测的系统框架、处理流程以及硬件选型,搭建了一套应用于音视频监控系统平台。  2.在听觉数据采集中利用多线程循环队列缓冲池技术对采集过程进行了优化,设计了数据采集阶段声压级特征对视频监控的融合策略以及程序功能的模块化分组。测试结果表明,该系统经过优化后能够较好地应用于实际检测中。  3.结合传统数据融合领域中常用的方法,利用复杂环境下视音频特征对场景感知具有互补的特点,提出了基于分类器和规则的融合方法。将词袋模型、Fisher向量这两种中间级语义表达方式应用于音视频融合感知的暴力场景检测中,并对两者针对不同特征的检测效果进行了对比研究,实验显示Fisher向量的效果比词袋模型要有所提升,而融合检测效果比单一特征也有一定提升。
其他文献
网络技术的不断发展、网络知识的不断普及,使得我们的生活发生了根本性的变革,社会生活的各个方面都受到了极大的影响,网络系统已成为现代生活中不可或缺的组成元素。但与此同时
随着市场经济社会的快速发展,税收征管工作日趋复杂,税源监控信息化建设是完善税收征管工作的重要一环,也是完善税制、提高税收征管效率的发展趋势。基层税务机关的根本任务是纳
预测不仅是决策的基础,而且是辅助决策的工具。预测的方法以及预测的精度是决策支持系统的核心问题。然而要想做出科学的决策,其前提必须是准确的预测。本文的研究工作主要是对
随着软件系统的复杂化和大型化,保证软件可靠性变的越来越重要。运行时验证作为一种轻量级的的验证框架,它同时具备了形式化方法的准确性和测试的方便性,同时也避免了模型检测的
随着计算机应用技术的不断发展,在大多数企业中,几乎各部门都使用和他们业务相关的管理系统。这些系统往往是不同公司开发的,它们通常在不同平台下或者是在不同的后台数据库环境
Web挖掘是将数据挖掘和WWW这两个领域中的多种技术和方法结合起来的热门研究课题。一般来说,它的研究领域包括Web内容挖掘、Web结构挖掘和Web使用挖掘。其中,Web使用挖掘的研究
基于PKI的认证系统的密钥管理模式已趋于成熟,但随着CA间的信任链的加长,出现了信任危机。本文研究的基于椭圆曲线密码系统的组合公钥技术,对目前最新的组合公钥密钥管理模式,即
多任务学习是机器学习和数据挖掘研究领域的前沿课题。多任务学习的目标是通过利用多个相关任务之间的内在相关性,来提高其泛化能力。在许多现实分类问题中,多任务学习已被证明
本文结合了电力系统的实际需求,查阅了国内外大量文献资料,对数据仓库、OLAP、数据挖掘、知识库、机组运行优化与故障诊断的基础理论和关键技术,及Oracle数据仓库解决方案,进
工作流技术是实现业务流程自动化的一种技术,它广泛的应用于各个领域并正处在快速的发展阶段。工作流引擎作为实现工作流技术的核心内容,已经成为研究的热点。当前,在对工作流引