序列图像帧间插值方法及应用研究

来源 :山东财经大学 | 被引量 : 0次 | 上传用户:tt77uu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在高速发展的数字化时代,数字图像早已成为视觉信息的主要传输媒介,人们对其质量的要求也逐渐提高。因此,近年来数字图像处理技术,特别是图像增强技术得到迅速发展,在多个领域得到广泛应用。例如,为了使视频更加流畅,需要对视频进行补帧以提高帧率,从而满足人眼视觉暂留特性的需要;为了分析大气和地面状况,需要对遥感卫星图像进行放大去模糊处理;为了侦破案件,需要对监控影像进行高分辨处理;为了更准确地定位病灶,需要对医学影像进行分割、超分辨率重建操作等等。这些提高图像清晰度、分辨率的图像处理过程都需要用到图像插值技术。图像插值是指利用图像已知采样点估计未知采样点像素值的过程,旨在将低分辨率图像变成相应的高分辨率版本以改善图像的视觉效果。按照分辨率增强的方向不同,插值过程可以在图像序列的空间域和时间域中进行。经典的插值算法关注于空间分辨率的增强,将单幅低分辨率图像变成高分辨率版本。在时间域进行的分辨率增强技术又称为帧间插值,旨在将低帧数的图像序列变成高帧数版本以使图像序列变化更加自然流畅,在帧率转换、生物医学成像等领域中被广泛使用。在视频处理领域,为了充分利用有限的带宽,通常以低分辨率视频流进行传输,因此需要在接收端使用插值算法转换成对应的高分辨率视频流以带来更流畅的视频播放体验。在医学影像重建任务中,受制于成像设备固有的物理局限性和长时间扫描带来的潜在危害性,成像数据的层间分辨率明显低于层内分辨率,给后期分析处理及临床诊断带来了挑战。如何充分地利用已知数据采样点生成新的中间图像仍是一个亟待解决的问题。为此,本文对序列图像帧间插值技术进行了研究,针对视频插帧和医学图像层间分辨率提升应用领域,提出了下列两种改进算法:1.提出了基于光流估计的序列图像帧间插值方法。该方法利用相邻两帧的配准信息生成一个新的中间帧,并对插值得到的中间帧进行修复。首先,引入CLG-TV光流估计模型计算连续两幅图像间的像素运动,得到图像间像素级的对应关系。其次,参考目标图像的插值位置缩放速度矢量,通过计算速度场生成插值图像。最后利用序列图像的帧间非局部自相似性,修复光流估计造成的像素缺失现象。在视频和CT图像数据集上的定量和定性实验结果表明,与其他经典方法相比,该方法生成了高质量的中间帧图像,在一定程度上提高了视频帧率和医学图像的层间分辨率。2.提出了基于空间几何多项式拟合的图像间插值方法。鉴于医学图像处理系统对高可靠性和实时性的要求,为提高层间插值运算效率,本文提出了基于空间几何多项式拟合的图像层间插值方法。首先,利用采样公式对已知图像序列上的像素点反向采样,在以待采样点为中心的3×3×3的空间域范围局部地构造三元二次多项式空间几何体。然后,将构造的多项式空间几何体加权平均得到单位空间几何体,将所有的单位空间几何体拼合。最后,对其重采样生成新像素以插值中间图像。该方法避免了光流计算的复杂过程,提高了算法的运行效率,生成的插值结果获得了令人满意的定量和定性指标。此外,该方法可实现在两幅连续图像间插值生成任意数量的中间图像,从而有效提高了医学图像序列的轴向分辨率。
其他文献
影视作品在传统领域内的传播,主要有影院放映、电视台播放和音像制品出版三大途径。由于传播方式相对固定,著作权行使也较为明晰。然而在网络环境下,影视作品的传播途径不断创新,网络在为影视作品提供新的传播途径的同时,也容易导致影视作品在网络传播过程中受到侵权行为的损害。本文通过对国内相关立法与司法实践的研究,对影视作品网络盗播的行为进行了较为系统的研究,全文除了第一章绪论与最后结语外,共分为四个部分。第一
近年来,随着我国经济社会各项事业的飞速发展,与之而来产生了大量的档案资料。如何对这些档案资料进行规范化管理和应用,已经成为亟需研究解决的问题。随着农村农业工作的多元化发展,乡镇街道等基层档案管理受到重视的同时,也面临一定的挑战。本文通过文献研究法、统计分析法、比较分析法,对济南市J区镇街档案管理规范化的现状进行了剖析,通过实地调研访谈、进行档案管理调查问卷等手段,结合具体概念理论,系统分析了济南市
随着“互联网+教育”的发展,大学生利用在线学习平台进行自主学习进入普及化阶段,但当前国内外主流在线学习平台数据显示,平台上的课程完成率不足10%,大学生自主学习的效果受到国内外各界越来越多的关注。为探究大学生自主学习效果较差的原因,本文通过爬取在线学习平台上的评论数据并使用文本分析方法对数据进行分析,得出学习资源是影响大学生自主学习效果的重要因素。通过分析当前主流在线学习平台上的学习资源,发现存在
随着大数据与人工智能时代的到来,算法推荐作为一种全新的新闻传播形式,逐渐在众多新传播技术中占据重要地位,成为现如今网络新闻的主流分发模式。当下,这种依据大数据分析用户画像的新闻推荐技术,能够满足受众对信息的个性化需求,也在技术与观念层面为新闻传播行业带来重大突破。但我国网络发展环境变化复杂,人们的利益诉求多样,随着算法推荐的应用与发展,“信息茧房”效应、“回音室”效应等相继出现,其延伸出来诸多负面
政务微博的产生和发展,促进了政府工作方式由对公众单方面监管转向与公众的相互交流监督。对政府部门来说,利用微博发布政务信息,可以帮助他们提升工作效率,了解公众需求,有针对性的开展工作,提高决策的科学性,提高工作透明度,提升社会形象。而政务微博发布的信息能够传播给广大粉丝用户,是这一切的基础。在微博平台中,信息依靠两种途径进行传播:粉丝关注和粉丝转发。关注的粉丝群是微博信息的第一批接收者,同时还是微博
心血管疾病非常常见,已经成为人类致死率最高的疾病之一。冠心病是主要的心血管疾病之一,其主要由冠状动脉疾病引起的心脏病。冠状动脉CT血管造影(Coronary Computed Tomography Angiography,CCTA)主要在冠心病临床诊断的早期筛查中使用。随着计算机辅助诊断技术的不断发展,诊断技术对CCTA图像的自动化处理及精度提出了更高的要求。本文以CCTA图像数据作为研究对象,从
显著性检测是计算机视觉领域非常重要的基础研究课题之一。在计算机视觉研究中,人类的视觉注意力机制对于理解图像或者视频中显著性物体起到重要的作用。通过人类的视觉注意机制可以在复杂的场景中相对准确且快速地发现和选择我们感兴趣的视觉目标。因此,如何更有效模拟人类视觉注意力机制高效提取显著性目标是当前计算机视觉非常重要的研究方向。随着深度学习在计算机视觉领域的广泛应用,众多不同的显著性检测方法涌现出来。虽然
待检测医学图像爆炸式增长,仅依靠人工识别的方式越来越难以快速、准确的检测图像中是否存在肿瘤。因此,医学图像处理技术迅速发展。在医学图像处理中,利用计算机快速准确地实现医学图像检测定位,能够帮助专家对病情更精确的掌控。其中,目标检测技术是一大重要组成部分。目标检测技术是对目标进行识别、检测目标行为的过程,每当符合检测要求的目标(如肿瘤)出现在图像中时,将其界定一个区域并预测其从属类别,从而快速准确的
随着计算机技术的迅速发展,图像成为了人们感知和认识世界的有效途径。但是由于图像在获取和传递过程中容易受到外界干扰而产生误差,让图像的后续处理变得很困难。因此,对于图像预处理(包括图像平滑、图像去噪、图像去模糊等)的研究尤为重要。其中,图像平滑的主要任务为:在平滑图像微小细节的同时保持图像的显著结构。图像去模糊的主要任务为:将模糊图像复原为清晰图像。目前,图像平滑和图像去模糊方法仍然存在图像边缘无法
随着近年来三维计算机图形学的快速发展,三维面部表情迁移技术得到了众多学者的关注。目前,该技术已广泛应用于计算机动画、影视特效、虚拟交互、远程网络会议等领域。三维面部表情迁移技术可以有效地避免动画师为新模型制作表情动画序列的繁琐工作,提高现有表情动画的复用率和新动画的合成效率,为高真实感表情动画的合成提供了新的途径和方式。一个好的三维面部表情迁移技术必须满足三个主要指标:表情迁移过程不需要人工干预;