基于视觉显著性的视频关键帧提取技术研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:woaidai123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网与多媒体技术的进一步发展,以及数字化设备和大容量存储设备的普及,每天都有大量的视频信息产生,如何快速有效地对视频进行处理和分析已经成为一个亟待解决的重要问题。视频关键帧提取技术是一种快速浏览和检索海量视频数据的有效方法,也是视频摘要的基础。常用的视频关键帧提取方法包括基于镜头检测的方法、基于图像特征提取的方法、基于聚类的方法以及基于运动信息分析的方法,这四类方法对视觉显著性的利用都不太充分,导致所提取的关键帧的代表度低、冗余度高,且与用户主观所提取的关键帧的符合度较低。本文的研究目的主要是提取出更符合人类视觉系统,且能够高度概括原始视频内容的关键帧,主要工作内容包括以下两个方面:(1)提出一种基于视觉显著性和二次层次聚类的视频关键帧提取方法。具体工作内容如下:将显著性检测算法应用于原始视频序列,结合图像显著性区域的底层特征和运动信息,构建融合特征向量;然后通过融合特征向量之间的相似性计算,去除冗余信息;其次提出一种基于互信息的二次层次聚类的算法,一次层次聚类自适应确定聚类阈值,具有实时性,二次聚类人工设置聚类阈值,满足不同用户的需求;最后选取每个簇中与其他帧之间的平均互信息最大的帧作为关键帧。通过与当前主流的视频关键帧提取算法的对比实验,验证了所提算法的有效性和适用性,且选取的关键帧更适合人类的视觉系统;(2)提出一种基于PCA和时序k-means聚类的关键帧提取方法,主要研究在图像特征提取效果较理想的基础上,如何用快速收敛的聚类算法来进行相似特征的聚类。具体工作内容如下:利用主成分分析(Principal Component Analysis,PCA)提取融合特征向量的主成分,以累计贡献率为度量准则确定视频在时间维度上的主成分个数,并将主成分个数作为关键帧数目;然后计算视频帧之间的相似性,生成距离时间分布曲线图,根据曲线峰值确定聚类初始边界;其次利用时序k-means聚类算法对初始簇进行优化;最后从每个簇中选择距离簇中心最近的帧作为关键帧。实验结果表明,本文算法所生成的关键帧与用户摘要匹配度更高,代表性高,冗余率较低,同时保持了原始视频的时序性,更适合人类的视觉系统,且根据视频的类型和长度灵活地确定关键帧的数目,为用户提取合适长度的关键帧提供了有效的依据。
其他文献
基于高中化学必修5《有机化学基础》第一单元的学习内容,编写测试卷,包含有机物的命名、同分异构体辨析、定量计算、研究有机物的方法以及综合问题五个维度的题目.对北京市普
<正>本设计是以HT46R24单片机为核心,利用霍尔传感器、红外传感器、时钟系统,结合无线通信等技术制作的一款LED多功能旋转显示屏。该屏使用32支LED通过电机带动旋转、在指定
古道作为一种功能性主导的线性文化景观,是中国发展历史上的见证者和参与者,并且沉淀与积蓄历史人文、景观生态等多方面的丰富内涵。川藏茶马古道是茶马文化主要的承载者。在
建立烧烫伤凝胶的色谱(TLC和HPLC)质量标准.采用薄层色谱法(TLC)对烧烫伤凝胶中黄连、黄柏、大黄、黄芩进行了定性鉴别,并用高效液相色谱法(HPLC)对烧烫伤凝胶中有效成分盐酸小檗碱进
高士奇是清代最具传奇色彩的书画收藏家之一,其收藏的作品多被记录于《江村书画目》与《江村销夏录》中。作为中国传统文人,高士奇只能通过书画寄托情怀。通过分析高士奇藏品
为探讨体质健康信念对青少年体育锻炼的影响,采用修订的体质健康信念量表和体育活动等级量表对1466名13~18岁中学生(男676人,女790人)进行调查。结果表明:青少年体质健康信念
对汾阳市农产品电子商务的发展现状、面临的困难和存在的问题进行了详细论述,并提出推动汾阳市农产品电子商务发展的对策和建议。
<正>骨折往往需要手术切开复位内固定治疗。自1984年芬兰Ro-kkanen首先报道可吸收内固定物用于临床后[1],在松质骨骨折治疗上已有许多病例。我科自2006年6月至2009年6月应用
<正>中华文化博大精深。尽管在中国传统文化中并没有提出西方现代意义上的"治理"概念,但是却包含了丰富的国家治理思想,其代表性思想是"修身、齐家、治国、平天下"。当然,长
<正>石青:你的个展好像没有中文题目,"PROPERTY OF L.W"的中文直译就是"刘韡所有",这里有什么特定的含义吗?刘韡:这个展览总的感觉说还可以,但是可能太追求随意了,所以有时候
期刊