基于学习的人脸超分辨率重建技术研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:chenrg210
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着高清影像技术的普及,以往的图像采集设备所输出的低分辨率影像内容越来越难满足当今人们生活的需要,同时一些专业领域也对影像材料的分辨率有着较高的要求,比如人脸识别、刑事侦查和医学诊断等等。而人脸作为影像中经常被关注的敏感区域,对低分辨率影像的人脸超分辨率技术就变得至关重要。面对这一需求,本文从图像超分辨率重建的角度,对人脸图像的超分辨率技术进行了深入研究,对已有算法进行了研究和改进,并且针对该技术在实际环境中的应用进行了初步探索,具体研究内容如下:首先,研究并改进了基于权重稀疏表示的人脸超分辨率重建算法。该方法存在的不足是在不同噪声环境下所对应的最优正则化参数值会不断改变,而对该参数的调试过程耗时且低效。因此通过在重建之前加入一个能够依据最大后验概率准则自动对噪声方差和尺度参数进行估计的预重建过程,从而计算得到适合输入图像环境的正则化参数值,最后通过实验表明了该自动估计正则化参数的算法具备充分的可行性和有效性。第二,提出了基于相似性选择与约束的人脸超分辨率重建算法以应对可能出现的不同强度噪声。由于已有的重建方法在噪声环境下的效果并不理想,所以采用了用相似性代替稀疏性的思路。该算法框架由两部分组成,第一部分是基于全局相似性的人脸选择算法,并使用基于2D-PCA的人脸选择算法进行实验,表明其能够在大幅度缩减人脸库数量的同时充分保证重建效果;第二部分为基于局部相似性约束的人脸超分辨率重建算法,通过对邻居图像块的计算和并行化的算法结构,达到了在一定程度上抵抗噪声的能力。第三,引入了机器学习方法来解决以上所述算法在处理真实场景中的人脸时恢复能力有限的问题。在研究了两步人脸重建算法的基础上,将机器学习理论引入人脸超分辨率重建中,提出了基于极限学习机的重建方法,并在真实监控的环境下进行重建实验,表明了该算法在与其他对比算法相比时得到了更强的细节恢复能力。最后,本文对该技术在实际环境中的应用进行了初步探索。确定了人脸标定和提取标准,研究了泊松图像编辑方法,在此之上提出了一套人脸修复方案,并从真实街道监控录像中随机截取了部分行人进行实验,达到了良好的修复效果。
其他文献
屏幕内容是指由电子设备生成的图像/视频,例如漫画,3-D游戏,捕获的计算机屏幕,有文字覆盖的视频等。随着移动互联网和云计算的兴起,屏幕内容编码受到广泛关注。现有的基于预
近年来,随着计算机技术和网络技术的快速发展,图像处理技术在不同专业领域都有着广泛应用,图像处理软件的开发也是日渐普遍。但是考虑应用环境、专业需求、界面设计和使用维
下一代网络是基于分组的网络,能够提供包括电信业务在内的各种业务和使用多种宽带和保证QoS的传送技术,其业务相关功能与承载的传送技术无关。而视讯业务由于可以为处于多点的
波达方向(DOA)估计是阵列信号处理领域中的重要的研究方向。基于阵列信号处理的波达方向估计方法,可以同时对空间不同方向上的多个信号源实现高分辨率的方向估计。而在实际情
理论研究表明超声波是一种振动高频短波,可以在弹性材料中传播;具有良好的方向性、高能量,在一定区域内可集中定向辐射;且穿透力强,在界面上具有反射特性。井周超声成像测井以超声
近年来,随着技术的发展和网络的演进,下一代移动通信系统已经受到人们的广泛关注。作为时分同步码分多址(TD-SCDMA)技术的演进,LTE-Advanced时分双工系统(TD-LTE-Advanced)已
近年来,随着互联网的迅猛发展,网络规模日渐增长,不同类型的网络多媒体应用也越来越丰富。其中,网络游戏与网络视频由于用户规模较多,其受关注程度也随之提高。如何准确高效
车牌图像是监控视频中重要的信息来源,但通常监控场景中的车牌图像存在着因拍摄设备限制或环境干扰导致的分辨率过低、模糊、噪声等多种降质现象,加大了车牌辨识难度。因此,
叶片作为汽轮机中主要的作功部件,在工业发展中发挥着至关重要的作用。由于振动特性不良而引起的叶片事故是造成汽轮机事故的主要原因,因此研究叶片的振动特性,对确保汽轮机