论文部分内容阅读
随着数字视频采集设备的广泛应用和计算机网络技术的飞速发展，网络上的视频数据呈现爆炸性增长，视频复制检测技术能够在众多视频数据中快速高效地检测到具有相同内容的视频信息，因此在数字视频版权保护、视频管理与索引以及媒体跟踪等领域具有巨大的应用需求和重要的应用价值。近年来，基于内容的视频复制检测技术已成为多媒体信息处理领域研究的热点。现有的视频复制检测技术存在运算量大、查全率和准确率低、鲁棒性差、应用范围受限等诸多问题，研究快速高效的视频复制检测方法迫在眉睫。在上述背景下，本文对视频复制检测关键技术进行了深入研究，完成的主要工作与贡献包括：1.提出了基于颜色时序特征曲线的视频复制检测方法（Video CopyDetection Based on Spatial-tempral Color Feature Curves, SCFC-VCD）。针对视频复制检测普遍存在的计算量大的问题，提出了基于时序特征曲线的检测方法。首先，对视频帧进行分割，提取各子区域颜色Y分量和U分量的均值，按照视频帧的先后顺序组成视频的特征曲线；然后，将提取出的特征曲线与待匹配视频的特征曲线进行匹配。为了去除视频亮度和色度整体漂移带来的影响，提出了基于差值曲线的相似性匹配算法；为了去除突变干扰的影响，提出了异常因子（ExceptionFactor）来解决；为了处理不同时间尺度的视频匹配问题，提出了改进的动态时间规划匹配算法。实验结果证明，SCFC-VCD方法运算量非常小、检索速度比一般的方法快，对于广告等画面变化较频繁的视频具有很好的检测效果，且能够抵抗常见的干扰。对于电视剧等画面变化率比较低的视频，SCFC-VCD方法可以快速有效地过滤掉大部分不相关的视频，从而大大减小了后续基于关键帧特征处理的运算量。2.提出了基于三维量化颜色直方图的视频复制检测方法（Three-dimentionalQuantized Color Histogram Method, TQCH）。针对颜色直方图在量化边界处误差大、对颜色变化过度敏感等问题，提出了三维量化颜色直方图方法。首先，对HSV颜色空间的关键帧颜色值进行非均匀量化；然后，统计其颜色直方图。为了降低量化边界处颜色值的误差，对颜色直方图沿H分量方向将相邻的两个值相加，得到三维量化颜色直方图，用来代表关键帧的颜色特征。最后，提出了相应的匹配方法。实验结果表明，TQCH方法有效表示了关键帧的颜色特征，对于常见的彩色图像，其查全率和准确率高于现有的其他颜色特征检索方法，并且对于常见干扰具有鲁棒性。3.提出了基于仿射不变连通区域的视频复制检测方法（ConnectedComponent Based Affine Invariant Region Method，CCB-Affine）。针对现有形状特征提取方法存在的特征数目少、可重复性及鲁棒性差等问题，提出了一种新的仿射不变区域提取和描述方法。在检测子中，首先对关键帧图像预处理；然后，找到关键帧中灰度值相同的点所组成的连通区域，将灰度值差小于阈值的相邻连通区域分别进行合并，取满足条件的最后一次合并结果为仿射不变区域；最后，通过一定的策略将检测结果中不满足条件的区域去除，得到最终的仿射不变区域。在区域描述子部分，基于归一化复数中心矩构造了6个不变矩。实验结果表明，CCB-Affine方法可有效提取图像中的形状特征，并可抵抗包括视角变化在内的各种常见干扰的影响，与其他方法相比具有更好的鲁棒性，且提取的特征数目足够多。4.提出了基于方向可控金字塔二值图像投影的视频复制检测方法（SteerablePyramid Binary Image Projection Method, SP-BIP）。为了提取关键帧图像的多尺度、多方向纹理特征，提出了方向可控金字塔二值图像投影方法。首先，对灰度化后的关键帧图像进行方向归一化，并进行方向可控金字塔分解，对各子带图像通过自适应阈值进行二值化；然后，计算子带图像的归一化行和列投影向量，作为子带图像的纹理特征。在特征匹配上，采用向量相交匹配方法。实验结果表明，SP-BIP方法可有效提取关键帧中的多尺度、多方向的纹理特征，优于小波变换等纹理特征提取方法，并对一些常见干扰具有鲁棒性。5.提出了基于Tri-training的多特征融合视频复制检测方法（Tri-trainingBased Multi-feature Video Copy Detection，TBM-VCD）。为了有效融合视频的多种视觉特征，提出了新的多特征融合方案。通过Tri-training半监督学习方法将视频的颜色、形状和纹理特征进行了有效的融合，弥补了单一特征在应用中的缺点。通过三个分类器的协同训练，提高了视频复制检测的查全率与准确率，扩大了应用范围。实验结果表明，本文提出的视频复制检测方法具有速度快、查全率与准确率高、应用范围广等优点。与使用单一特征的视频复制检测方法相比，TBM-VCD方法的查全率与准确率具有明显优势，很好地满足了视频复制检测的需求。