基于运动补偿的帧率提升方法

来源 :山东大学 | 被引量 : 0次 | 上传用户:lazysands
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着超高清电视(Ultrahigh Definition Television, UHDTV)的发展,人们获得了更细腻、更逼真、更流畅的视频观影效果。超高清不仅仅是指空间分辨率上达到4K×2K,更重要的是为了实现更高的帧频、更大的动态范围和更丰富的深度色彩。在实际应用中,拍摄制作高帧率的视频通常需要昂贵的成本,还面临着巨大的传输、存储压力,所以如何从现有的低分辨率视频得到满足用户需求的高帧率、高质量的视频是亟待解决的重大课题。帧率提升技术(Frame Rate Up Conversion, FRUC)作为视频格式转换的有效手段,已经在多媒体信息处理领域中成为了研究热点。运动补偿帧插法(Motion Compensation Frame Interpolation, MCFI)利用运动信息来获取插入帧,是目前最有效的帧率提升方法。但是,MCFI也带来了诸多不可避免的问题,如块效应、空洞、遮挡等,这些都严重影响了视频质量的提升和用户的视觉体验。基于此,本文提出的MCFI皆在解决上述问题,本文的主要研究内容可以总结为以下三点:1.提出了一种基于运动修复的解决空洞问题的帧率提升方法,该方法从两个方面解决空洞问题:一是得到正确的运动向量,二是空洞区域的运动修复。首先,通过基于纹理的自适应性运动估计的方法获取准确的运动向量,并利用多方向增强的运动向量后处理方法来修正不可靠运动向量,这样精确的运动估计的结果可以有效地减少空洞区域的范围;然后,通过空洞区域的周围信息获取空洞区域的运动向量,并利用运动补偿的原理填补空洞。这种低复杂度的方法有效地解决了空洞问题带来的视觉困扰,得到了高质量的插入帧。2.提出了一种基于运动向量角的解决遮挡问题的帧率提升方法,该方法通过分析遮挡问题出现的原因,对不同类型的遮挡问题提出了自适应的处理方法:因为场景切换出现的暴露区域,采取帧重复法得到插入帧;由于物体相对运动出现的遮挡、暴露区域,采用前向、后向运动估计相结合的方法获取正确的补偿结果。同时,该方法引进了运动向量角和前向、后向运动补偿信息对遮挡区域进行了判定,有效减少了运算的复杂度。另外,本文提出了一种基于亮度信息的,增强算法的RGB彩色空间的矢量距离色差公式的非对称十字型多层次六边形格点搜索算法(Unsymmetrical Cross Muti Hexagon grid Search, UMHexagonS),该运动估计得到了高准确度的运动向量,大大降低了处理遮挡问题的运算复杂度。3.在以上两种帧率提升方法研究的基础上,设计完成了两个应用软件系统,将理论研究转化为实际的生产力。最后,本文设计了一个帧率提升方法的比较系统,整合了几种经典的方法,可以供用户对不同的视频序列选取不同需求的帧率提升方法。论文提出的帧率提升方法经过大量的实验测试,无论是在主观视觉效果上,还是在客观数值:峰值信号比(Peak Signal to Noise Ratio, PSNR)和结构相似度(Structural Similarity Index Measurement, SSIM)上都优于经典的帧率提升方法,并最终得到了系统实现。
其他文献
随着网络技术、通信技术的成熟与应用,各类家用消费类电子产品技术进步愈发迅速,一种旨在实现家庭消费类产品网络化、提供远程控制以及交互业务的“家庭网络技术”正逐渐在世
超宽带(Ultra Wideband, UWB)技术起源于脉冲无线电(Impulse Radio, IR)技术,最早在军用雷达领域得以应用。1989年,美国国防部提出了超宽带这一词语,并以IR方式发展了UWB技术
图像置乱是图像信息隐藏技术的一种有效补充,来源于传统的加密技术,它使置乱后的图像看起来不可辨认,从而达到保护信息的目的,算法的优劣直接影响其安全性及其他处理的效果。
GPS车辆导航定位系统是处于蓬勃发展时期的新技术,是ITS(智能交通系统)的一个前沿分支,是应用自动车辆定位技术、地理信息系统与数据库技术、计算机技术、多媒体技术和现代通信技
网关冗余技术作为一种重要的网络容灾技术目前在网络中得到广泛的运用。IETF提出的VRRP(Virtual Router Redundancy Protocol,虚拟路由器冗余协议)和Cisco公司的HSRP(Hot Stan
传统无线电收发系统硬件依赖性强、信号适应能力差,软件无线电技术的出现导致了收发机的革新。其基本思想是对射频进行采样,在高速DSP处理平台上加载不同的软件实现不同的功
随着人们对出行要求的提高,中国铁路运输尤其是高铁运输发展迅速,这也极大的促进了铁路电气化的高速发展,而电气化铁路的核心电源屏也有了长足的进步。铁路智能电源屏是为铁路电气化提供稳定高效的电源供给,因此铁路智能电源屏的正常运行是安全准时正常铁路运输的重要保障。而作为铁路智能电源屏的核心部件电源模块的正常运行则成为关键,它为铁路智能电源屏提供多种匹配的电源输出,并由智能电源屏发送到路网中。铁道部规定备用
在蜂窝网络中,为了实现高速的数据传输以及提高频谱利用率,LTE-A中采用了异构组网的技术,在众多候选的异构场景中,由宏基站和微微基站组成的异构网络引起了广泛的关注,能够消除同
随着移动互联网的迅猛发展,越来越多的移动设备出现在日常生活中,人们对数据流量的需求日渐增加。然而,移动通信的无线频谱资源是有限的,我们当前面临着严重的频谱匮乏问题,
现场可编程门阵列(FPGA)是近年来迅速发展起来的新型可编程器,其灵活的可编程逻辑可以方便的实现高速数字信号处理。它突破了并行处理、流水级数的限制,具有反复的可编程能力,从