基于稀疏编码与深度学习的图像超分辨算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:xiaojiaoechou
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像的超分辨率(Super-Resolution,SR)复原是当下的图像处理领域的热点,其主要目标是从低分辨率(Low-Resolution,LR)图像中重建高分辨率(HighResolution,HR)图像,现已广泛应用在医学成像、遥感图像、雷达通信等领域。在硬件上提高分辨率已经变得十分困难,所以如何在硬件条件不变的情况下提高分辨率是SR技术的核心。目前,基于学习的方法在重建图像的质量上和模型时效性上取得重大突破,主要包括:基于稀疏编码的方法、基于深度学习的方法,将SR技术推向了新的高度。然而随着两种方法的发展,SR技术面临新的挑战。基于稀疏编码的图像超分辨技术实时性偏低,重建性能也逐渐被深度学习方法超越。深度学习方法在提高性能的同时,参数量逐渐增加,这增加了对设备的负担。为了克服参数增加的问题,本文期望从稀疏编码技术出发,将其融入到深度学习模型中,以精巧的结构来取消网络层的堆叠,从而节约参数和资源。于是本文研究了基于稀疏编码与深度学习的图像超分辨率复原技术,其目的是使用不同的编码技术设计网络并将模型推广到一般的网络和复杂的场景,从而即能获取优异的SR性能,也能占用少量的参数资源。本文的主要贡献如下:1.提出了一种基于小波稀疏编码的通道分离网络。此网络针对小波包分解的不同分量设计了不同的结构,使得每一个分量都被有效处理,而不需要叠加太多的网络层。对低频分量,模型使用了极轻量化结构。低频分量不包含太多的细节信息,使用少量的参数即可保证效果。对高频分量,模型使用包含可变形卷积的残差结构,使得参数集中在非零元素上,从而节省参数。实验表明,此SR方法使用了相对较少的参数,计算复杂度低,时效性高,达到了一流的SR性能。2.提出了基于PCA字典与稀疏编码的卷积神经网络。通道分离网络是一种特定结构的网络,是由小波分解的特性设计的,所以本文将网络推广为一般的SR网络,旨在针对一般的SR网络不增加参数地提升性能。这部分首先分析稀疏编码作用下的距离变化,并分析了低分辨PCA字典来重建HR图像的性能。根据这两点,构建了新的网络结构,对传统网络进行改造,从而使得传统网络拥有了更好的SR性能同时不增加参数。3.提出了稀疏深度学习与核预测模型。由于稀疏编码需要独立地做字典学习和编码,一定程度上降低了模型的时效性。因此,这一部分将稀疏编码推广到稀疏深度学习模型,并研究了更复杂的去模糊场景和真实场景的SR任务。这一部分改进了模糊核预测模型,冻结判别器训练生成器提出了循环模糊核预测模型。再者,这部分推导了一个包含稀疏噪声的全变分模型,并给出求解算法,最终将算法转化为超分辨网络。全变分的收敛性保证了网络的性能,在不堆叠卷积层的情况下,SR性能得以提升。结合核预测器,模型可以适应各种各样的SR场景。广泛的实验表明,模型使用了少量的参数取得了出色的效果,实时性较高。更多的,模型在图像去模糊和真实场景SR任务中均表现出色。
其他文献
机械设备是现代工业中至关重要的一环,其性能好坏直接关系到生产活动能否安全稳定的进行。由于机械设备长期运行在重载、高温等复杂多变的工况条件下,关键零部件容易出现故障损伤,及时对其进行检测维护具有非常重要的意义。本文将迁移学习与深度学习相结合并应用于机械故障诊断中,针对两种工程应用场景提出了相应的故障诊断方法,解决了变工况下故障特征分布差异而导致诊断模型精度下降的问题。本文的主要工作和贡献如下:(1)
学位
随着无人机技术的发展,无人机的应用范围越来越广泛。使用场景也在向室内发展,无人机室内飞行的关键在于室内的定位以及导航避障。在室内环境中,无人机的位置信息来源十分有限,极大地限制了无人机的使用。同步定位与建图技术(Simultaneous Localization And Mapping,SLAM)可以只使用无人机上搭载的传感器获得位置信息。本文根据无人机的室内飞行所需要的关键技术,对无人机的室内定
学位
近年来,机器人系统被越来越多地应用到如工业制造、航天航空以及军工制造等领域中。为了使机器人能够出色地完成相关任务,实现其高速高精度的轨迹跟踪鲁棒控制是至关重要的,而这也正是机器人控制领域的研究者们一直以来的研究重点。在实际作业环境中,由于非线性机器人系统参数难以精确测量,并且还存在外部随机扰动等不确定因素的影响,使得研究者们难以对其进行精确建模。这些不确定因素都影响着机器人系统的轨迹跟踪控制品质,
学位
随着科学技术的迅速发展,射频电路已经广泛分布于民生、军工、医疗、航天等领域。射频电路的集成度越来越高,射频电路的复杂性随之增加,人们对射频电路可靠性的要求和依赖性也随之增加。对于应用于重要领域的关键射频设备,对射频电路的健康监测指标要求更严格、更全面,对射频电路健康监测精度也提出了更高的要求。而目前射频电路故障诊断及预测的研究尚不充分,针对射频电路的高频特性导致故障参数难以提取问题,以及传统模拟电
学位
时间离散事件系统由离散事件驱动,具有时间概念。如果系统的演化完全受制于同步和延迟现象,则可借助双子代数将其建模为极大-加线性系统。Petri网是一种适合于描述异步并发行为的形式化系统模型,具有严格的数学表达形式与直观的图形表现形式。一种时间Petri网的子类TEG(Timed Event Graph)受制于同步现象,且具有表示延迟行为的参数—驻留时间,因此可使用双子代数工具将TEG建模为极大-加线
学位
近年来,各种军用与民用设备均向信息化发展,同时电磁环境的恶化与强电磁脉冲武器的应用给设备带来更多威胁,信息化在提高效率的同时也对设备的电磁防护提出了更高的要求。瞬态抑制器件可以对电路中的传导耦合起到良好的抑制作用,典型的几种瞬态抑制器件国内外的研究较多,但面对愈加严苛复杂的防护需求,传统瞬态抑制器件防护能力捉襟见肘。电涌抑制晶闸管(TSS)在过往通常应用在雷电防护领域,在强电磁脉冲下的防护与应用仍
学位
随着制造业的不断发展,出现了越来越多需要人与机器人协同工作的任务场景,这对于机器人的智能化提出了更高要求,协作机器人应运而生。协作机器人相较于传统的工业机器人有两大优势,即能够在关节层面实现外力感知以及主动柔顺控制。本文主要对协作机器人一体化关节的外力感知以及柔顺控制两个方面进行了研究。主要研究内容如下:以节约成本为前提,在不使用关节嵌入式力矩传感器的情况下,基于协作机器人一体化关节的谐波传动原理
学位
<正>元和十年自朗州至京,戏赠看花诸君子刘禹锡紫陌红尘拂面来,无人不道看花回。玄都观里桃千树,尽是刘郎去后栽。再游玄都观刘禹锡百亩庭中半是苔,桃花净尽菜花开。种桃道士归何处?前度刘郎今又来。(选自《唐诗鉴赏辞典》,萧涤非等撰,上海辞书出版社1983年版)鉴赏空间在《酬乐天扬州初逢席上见赠》中,刘禹锡曲折地表达了长期被贬谪的深
期刊
<正>我的教龄整整二十年了。刚刚走上工作岗位的时候,备课的时候喜欢看教参,喜欢看相关的解读的书,书上密密麻麻地写着理解分析,每次备完课都特有成就感。现在回想起来,那都是别人的观点,不是我自己的。随着年龄的增长,人生阅历的增加,对一些文章的理解也与以前大不相同,写在书本上的内容也发生了变化。不再是教参以及相关的解读内容,而是深度思考后的个性理解和认识。
期刊
机器博弈领域的研究分为完备信息博弈和非完备信息博弈,二者主要区别在于博弈参与者能否掌握所有局面信息。对手建模是指通过观察对手的一系列行为动作,分析背后的潜在意图,构建对手的个性化行为和策略弱点的表示模型,最终达到利用对手制定出具有针对性决策的目的,是解决非完备信息博弈问题的主要手段之一。二打一扑克中是典型的非完备信息博弈,同样能够使用对手建模解决该领域中的博弈问题。然而,目前在二打一扑克领域中的对
学位