基于结构特征约束的视频修复方法

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:wang9230c
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像和视频修复技术是近年来发展迅速的数字技术。数字视频修复的目的是,利用视频体中完好的未破损区域信息对视频体中缺失或破损的部分进行修复,使得修复后的视频画面拥有合理的视觉效果。本文根据视频修复技术的基本原理,在分析仿真现有视频修复算法的基础上,从视频的时空相关性和视频内容的结构特征约束等角度,研究数字视频修复技术,以提高修复视频的视觉效果。论文的主要工作和创新如下:1.系统地综述了数字视频修复技术的研究意义以及国内外研究现状,对数字视频修复中的关键技术和主要难点进行了深入分析。2.针对去抖动视频容易出现闪烁、修复的边缘容易出现断裂等现象,本文提出了一种基于Criminisi算法的视频去抖动算法,以更好地保持去抖动视频序列的时空连续性。算法首先在运动估计阶段引入视频序列的平均运动矢量,利用每一帧的运动矢量与平均运动矢量的角度差找出存在异常运动的视频帧;然后利用图像的几何变换(平移、旋转)对这些异常视频帧进行位置纠正,使其符合视频全局运动模式;在此基础上,利用当前帧、相邻帧和运动状态匹配帧中信息的相关性,对Criminisi算法中的优先权以及匹配块的搜索方式进行改进;最后利用改进的Criminisi算法,修复因几何变换后在视频帧引起的边缘空缺。仿真实验表明,去抖动视频序列具有较好时空连续性,无闪烁现象,去抖后视频序列的峰值信噪比(PSNR)平均提高了3~5 d B,结构相似度(SSIM)也有所提高。3.针对一致性视频修复算法仅利用视频的颜色和运动特征来优化目标函数,导致无法准确预测未知区域像素值的不足,本文将视频的结构信息引入到目标函数中,通过增加视频的结构特征来约束全局目标函数的优化,采用平均边缘向量场模型定位边缘,提出了一种结构约束的视频修复方法。本算法首先对破损视频进行时空金字塔变换,形成多层金字塔分解层,利用改进的边缘跟踪算法找出各层金字塔破损部分的初始边界;然后,对从上到下的第一层金字塔,采用加权平均的方式,修复破损部分边界上的像素,当完成对边界上的所有像素修复后更新边界,并对新边界上的像素进行修复,如此反复完成第一层金字塔的修复;接着,用相同的方法依次修复金字塔中的各层,直到所有破损像素都被修复;最后,利用修复的各层视频金字塔重建视频,完成对整个破损视频的修复。实验结果表明,该算法取得了更好的视觉效果,保持较好结构性和边缘的连续性。与类似相关算法相比,峰值信噪比(PSNR)平均提高了2~5d B,结构相似度(SSIM)也有所提高。
其他文献
超连续谱(Supercontinuum,SC)是指输入脉冲在非线性介质中传输时,很多新的频率成分产生,出现了在光纤输出端脉冲频谱比输入脉冲频谱宽的一种物理现象。光子晶体光纤(Photonic
在GNSS导航解算中,通常以对观测方程进行线性化后的模型进行计算,在复杂环境下,会影响导航解的精度。卡尔曼滤波是一种高效的递归滤波器,在导航定位中,卡尔曼滤波能够充分利
由于金融、数学、计算机领域的学科交叉和深度融合,越来越多的学者们热衷于研究量化交易。量化交易是指以先进的数学模型替代人为的主观判断,利用计算机技术从庞大的历史数据
近几十年,目标跟踪技术发展迅猛,其无论是在军用还是民用方面都得了广泛应用。核相关滤波算法由于其速度快、精度高,在目标跟踪算法中占有越来越重要的地位。但由于跟踪环境
学习习惯是一线教师不断研究的主题,也是学习者学习过程的外在表现。拥有良好的学习习惯会激发大学生学习的积极性与主动性,促使大学生形成学习策略,提升学习效率,使人终身受
在现代汽车工业发展过程中,汽车渐渐不再只是人们日常出行的工具,汽车在未来更是一个充满无限遐想的移动互联空间,逐渐满足用户对安全、智能、高效和乐趣等要求。未来汽车智
针对以往只注重井间砂体预测,对不同类型砂体间接触关系认识不足的实际,十三五计划开展单砂体连通关系识别技术研究,目的在于认清对砂体间的接触关系,寻找注采调整的潜力。而
随着我国城镇化进程加速以及工业化的快速推进,工业废水排放和突发性水污染对水生态环境和人类健康等方面影响日益严重。在众多种类的水环境有毒污染物中,重金属类、天然毒素
一维纳米材料由于量子效应而具有一些非比寻常的性质,致使其应用领域非常广泛,例如:光伏、医疗、柔性电子产品、催化等等。一维碲化物纳米材料又是其中重要的一环。近些年来,
随着人工智能时代的到来,机器人及人工智能技术已经成为当前研究的热点,如何使机器更加智能化、自主化已经成为了当前研究的一个重大课题。移动机器人的自主导航和控制一直是