基于情境和效用的视频结构挖掘

来源 :东华大学 | 被引量 : 1次 | 上传用户:chrisliuyaqin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多媒体技术的快速发展产生了大量的视频数据,人们对视频信息的使用已越来越频繁,但由于视频的长度及其非常丰富的内容使得很难对视频进行高效的浏览和查找。因此,我们希望建立一个目录型的视频结构,将整个视频划分为若干层级,对一些关键的信息建立索引,使用户可以像浏览书本的目录结构一样浏览视频,快速选择所需要的内容。多媒体技术的发展也促使各高校逐渐加大使用视频的方式记录校园内发生的诸项事务,本文针对校园内拍摄的原始视频素材,提出一种基于情境和效用的视频结构目录生成方法,经过镜头边界检测、基于情境的镜头处理、关键帧提取、场景聚类、计算各场景的效用值,生成视频基本结构目录,并在此基础上进行视频结构语法的挖掘。本文的创新点如下:(1)提出基于情境的镜头处理。视频作为一种时基媒体,具有很大的不稳定性,摄像机移动和镜头动作并没有统一化的标准和规范,拍摄出的新闻素材不免有些“废镜头”。视频素材通常占很大空间,在处理时也用时较长,通过基于情境的镜头处理,分析镜头时长与关键帧之间的关系,能够有效去除这些“废镜头”,提高后续分析的效率。(2)提出通过构造效用函数,计算各场景的效用值来生成视频基本结构目录。通过镜头分割、基于情境的镜头处理、关键帧提取以及场景聚类得到的各场景,通过构建效用函数,计算各个场景的效用值,并通过设立合理的阈值,可以获取对于表达视频整体内容更有意义的场景来构建视频目录。在视频基本目录结构之上,利用多层次分析和多模式融合的方式来分析视频结构的语法和语义,将镜头场景中提取的多模式特征(图像、声音、文字)作为后续语义提取模型的输入,并将高层语义分解成一系列可识别的低层原型,及各低层原型和高层语义的约束关系,低层基本事物与低层特征可直接产生映射,以此来解决视频低层特征到视频高层语义之间的“语义鸿沟”。综上所述,论文主要工作集中在基于情境和效用的视频结构挖掘,建立了视频结构目录,从视频基本结构、结构语法和结构语义三个层次探讨视频挖掘方法与应用。这些成果具有一定的实践价值,对于校园内的视频数据挖掘产生积极的影响。
其他文献
污水处理的整个过程是一个非常典型的复杂动态生化反应系统,它具有非线性、时变性和不确定性等特点,很难用传统的数学方法建立相对精确的数学模型,而一些仪器仪表的测量过程严重
业务流程管理过程中最主要的步骤是流程定义和流程执行。流程定义一般通过业务流程定义模型来实现,流程执行通过与流程定义模型相适应的流程执行引擎来完成。为了实现将Web服
继电保护装置是保障电网安全运行的重要设备,而由继电保护装置自身问题造成的误动或拒动,将会严重地影响电网安全稳定运行,而继电保护设备测试平台有利于提前检测出继电保护
学位
Internet自诞生以来飞速发展,信息容量呈爆炸性趋势增长。如何从海量的信息中准确且快速地获取对人们有价值的信息,已成为一个非常重要的研究课题。信息检索作为获取信息的一
随着个性化推荐系统应用越来越广泛,推荐技术的研究也得到飞速发展。在广泛的个性化推荐技术中,协同过滤技术的研究和应用最为热门,但是在目前协同过滤推荐系统中用户评分数据非
在嵌入式系统中,常常需要开发一些复杂的应用,同时还要满足性能和功耗的要求。为了达到这些要求,可能需要使用可定制的处理器结构。TTA就是这样一种可定制处理器结构。它类似
如今,工程师、科学家、企业家们都致力于事先预测出未来的发展及需求,针对各个目标制定相应的计划,并提供解决方案,以期改善某一领域。对未来事件的预测,在各个学科中均通过大量方
生物信息中的多序列比对问题,是建立系统发育树,基因和蛋白质的功能预测,探测序列之间的相互作用等的基础。但是,多序列比对问题是一个NP-hard问题,非常具有挑战性,对序列比
随着计算机技术的发展,计算机技术已得到越来越广泛的应用。研究科学的教育理念与合理高效的管理模式,开发职校教学管理系统,对于职校教学管理水平、提高教学质量有很大的现