【摘 要】
:
图像超分辨率重建作为图像复原领域的一项重要技术,旨在将低分辨率图像或视频进行超分辨率复原,得到更清晰的高分辨率图像或视频。图像超分辨率重建可分为单帧图像超分辨率重
论文部分内容阅读
图像超分辨率重建作为图像复原领域的一项重要技术,旨在将低分辨率图像或视频进行超分辨率复原,得到更清晰的高分辨率图像或视频。图像超分辨率重建可分为单帧图像超分辨率重建和多帧图像超分辨率重建,本文从重建网络的结构设计和多帧图像的对齐融合机制两个方面,对现有的单帧模型与多帧模型进行改进,并提出一种可变帧数的视频超分辨率重建方法。本文主要工作如下:1.针对目前基于单一尺度特征的单帧图像超分辨率方法,不能很好地恢复出纹理细节的问题,本文引入了多尺度特征学习机制,在深度残差网络的基础上构造了一种特征选择网络,该网络通过具有不同大小感受野的多分支网络进行多尺度特征学习,使用基于注意力机制的多特征融合模块进行特征融合,同时在残差块中引入了瓶颈结构和宽泛激活,降低了重建网络参数量,并提高了模型的建模能力。实验结果表明,本文方法的性能在客观和主观两个方面均优于目前基于单尺度特征的图像超分辨率方法。2.帧对齐是多帧图像超分辨率技术中的关键步骤,现有的基于光流或隐式运动补偿的方法将每个支持帧单独对齐到目标帧,在处理长序列或存在复杂运动的视频序列时,对齐精度较低,影响模型的重建效果。为了克服这种局限性,本文提出了一种渐对齐融合网络,从输入序列的两端按照时间顺序将所有支持帧逐渐对齐到目标帧,并进行逐帧融合。该方法降低了复杂运动和长输入图像序列的对齐融合难度,同时允许模型输入不定长度的图像序列。实验结果表明,渐对齐融合网络可以有效提高帧对齐的精度,与类似方法相比,本文方法在客观和主观两个方面的效果均有所提高。3.基于特征选择网络强大的学习能力,和渐对齐融合网络允许变长输入的特性,提出了一种可变帧数的视频超分辨率重建模型。该模型使用随机长度训练机制对模型进行训练,使得渐对齐融合网络可以学习到不同长度输入的对齐融合映射,赋予了模型可变长输入的能力。同时使用一种新的模型自集成方法,将不同输入帧数的重建结果进行融合。实验结果表明,本文方法可以在保证重建效果的同时,不受输入视频帧数量的限制,具有较高的应用价值。
其他文献
在无线传感器网络中,传感器节点在运行的过程中会不可避免的发生故障。这些故障的来源主要有硬件故障、链路故障和环境影响等,其中,硬件故障的发生往往会造成相对严重的后果,
物联网技术的发展日新月异,新的应用建构在基于受限网络和互联网融合的网络环境中。针对物联网中大量依赖电池供电、处理器能力和通信能力受限的结点和网络,互联网工程任务组
随着互联网技术的发展,网络数据流量不断的增加,全球网络数据流量也随之迅猛增长。这种情况下,越来越多的企业建立起自己的数据中心,把一些关键和重要的信息存储在数据中心。
目的:以益气养阴活血为治法,观察芪归糖痛宁颗粒对2型糖尿病伴周围神经病变患者临床干预及对β-EP、NGF含量的影响,从分子和基因层面探讨芪归糖痛宁颗粒可能具有的修复神经功
饮用水中残余溶解铝超标问题最近引起了人们广泛的关注。铝盐类混凝剂在饮用水净化过程中的残余问题一直是混凝工艺面临的技术难题,受到广泛关注。过量摄入的铝会在人体中积累并产生毒性,产生一些潜在的健康问题。另一方面对供水管网也会产生不利的影响。已有大量的研究发现残余铝升高和铝基混凝剂的大量使用有着密不可分的关系,其机理涉及到了铝基混凝剂的水解与天然水体中的溶解性有机物(DOM)的络合作用。由于缺乏可用于表
四旋翼飞行器具有反应灵活、定点飞行、操作方便以及生产成本低廉等一系列优点,使其在日常生活中的各个领域具有广泛的应用。本文以四旋翼飞行器为研究对象,自主设计了一款基于STM32为主控制器的飞行控制硬件平台,并在此基础上对飞行器的数据融合以及互补滤波飞行控制算法进行了设计与研究。首先,对四旋翼飞行器的飞行控制原理进行了一系列的详细分析,对飞行器的载体坐标系以及导航坐标系之间的导航数据转换进行了详细的推
哈希编码已经广泛应用于图像检索领域。近年来,许多基于深度学习的哈希方法被提出,并且和传统基于特征学习的方法相比有很大的性能提升。给定一个带有语义标注(比如类别标签)的图像集,哈希方法希望学习生成有效且紧致的二值编码。然而,在实际应用中,标注大量数据是非常困难的,且无法满足实时性需求。对于标注数据集中未出现过的类别的图像,现有的哈希方法难以取得很好的检索结果。如何将在已有标注的数据集学到的哈希函数迁
随着移动通信技术的发展和智能终端的普及,人们对无线网络的需求与日俱增,传统网络中室内信号覆盖弱的问题也日益突出。在原网络的基础上部署Femto (家庭基站)就是一个合理的
无线传感器网络(WSN)是一种从简单的星型到多跳无线网状的分布式网络,由几个到几百甚至上千个节点构成。这些传感器节点具有体积小、成本低等优势,被广泛的用于监测系统中。
随着软件定义网络技术首次在计算机网络的提出,近年来已经逐步扩展到光纤网络中,称为软件定义光网络(SDON)技术。SDON实现为各种光层资源统一调度,提供软件编程的方式进行动