【摘 要】
:
随着近年来超高清显示器的迅速发展,高分辨率视频数据的需求日益增长,相比于提高采集设备的硬件性能,设计应用于软件端的视频超分辨率算法在获取不同分辨率视频数据方面具有低成本和适用性强的优势。乘着深度学习发展的东风,基于深度学习的视频超分辨率算法取得了优异的视频重建性能,目前主流的视频超分辨率算法采用循环结构在整个时间轴上传播视频序列之间的时序信息,推理速度和计算效率方面取得了长足进步,然而应用于面向智
论文部分内容阅读
随着近年来超高清显示器的迅速发展,高分辨率视频数据的需求日益增长,相比于提高采集设备的硬件性能,设计应用于软件端的视频超分辨率算法在获取不同分辨率视频数据方面具有低成本和适用性强的优势。乘着深度学习发展的东风,基于深度学习的视频超分辨率算法取得了优异的视频重建性能,目前主流的视频超分辨率算法采用循环结构在整个时间轴上传播视频序列之间的时序信息,推理速度和计算效率方面取得了长足进步,然而应用于面向智能安防的重建场景时,现有的重建网络设计无法有效恢复视频中运动模糊或纹理密集等复杂区域,并且存在视频重建质量与未来帧信息利用的矛盾,本文对视频超分辨率算法进行研究,通过区域关注增强复杂区域的重建质量,并以双向融合的形式充分利用时序信息,提升视频超分辨率重建模型的性能。针对视频中复杂区域重建结果呈现模糊状态的问题,本文采用浅层与深层特征聚合的结构拓展参与重建的特征通道数,并设计了区域关注模块对空间中不同重建难度的区域进行加权,实验结果验证了特征聚合结构与区域关注模块相互促进,不过度增加模型复杂度和降低推理速度的情况下,有效地提升了视频复杂区域的重建质量,在标准测试集上的重建性能优于大部分视频超分辨率方法。在线视频重建任务中,视频帧顺序获取的因果关系阻碍了对未来帧的访问,而离线视频重建任务没有这个限制,为了利用未来帧信息提升视频重建质量,且保证算法能应用于在线和离线视频重建任务中,本文采用了一种无参的加权融合方式,对单向传播的视频超分辨率算法的正/逆序重建结果进行像素级融合,在此基础上,设计了一种由信息交换模块和通道注意力模块组成的轻量自适应融合模块对正/逆序重建结果进行特征级融合,充分挖掘过去帧和未来帧对参考帧重建的增益信息,标准测试集和实际拍摄视频中的实验表明,本文算法有效提升了视频重建的稳定性,获得了更精细的重建结果。
其他文献
交通基础设施是指为保障交通系统安全正常运营而建立的基础性工程设施,由公路、桥梁、轨道、隧道、高架道路、车站等构成。其中,路桥是交通基础设施最重要的构成部分,对促进国民经济、推动社会发展有着巨大作用,是城市正常运转的“大动脉”。随着设施投入使用年限增加,受天气变化及外界荷载长期作用的影响,路桥等基础设施难免出现异常振动及裂纹损伤等隐患,如果没有及时发现并进行修复,轻则影响行车、行人的舒适度,重则影响
目前,随着半导体行业迅猛发展,用于半导体产业的硅材料需求不断增加。同时,对芯片集成度要求也日益增长,这对硅单晶品质提出了更高的要求。Cz法是制备硅单晶过程中最主要的技术方法。为了生长出大尺寸、高品质的电子级硅单晶,研究Cz法硅单晶批次生产过程中直径和热场温度的建模与控制过程具有重要意义。硅单晶生长过程是典型的批次生产过程,存在批量化、品种多样、工艺复杂、技术密集等特征,且该生长过程是处于高温、多场
高分辨率图像为人类提供了丰富的信息,促进了安全监控、医疗诊断、登月探索等领域的快速发展,但由于采集和传输等过程易受成像设备限制和外界环境干扰,导致获取到的图像分辨率低,因此图像超分辨重建技术应运而生。得益于深度学习强大的特征学习能力,基于深度学习的单幅图像超分辨重建方法层出不穷并且获得了较好的结果,但仍旧存在一些问题:现有方法常用的线性退化模型无法准确刻画真实场景图像退化的高度非线性特征,致使深度
空分系统属于一种复杂化工生产系统,由多个具有不同功能的子系统组成,其中最受关注的是用来制备产品氩的精氩子系统。该系统在生产过程中常因冷凝设备热源供给不足,导致冷凝物料含量增加,最终造成空分系统发生“氮塞”故障。“氮塞”故障不仅在空分系统中频繁发生,且会对整个系统造成严重影响,如大量的物料浪费、巨大的人员伤亡损失等,因此需对空分系统中的“氮塞”故障展开早期故障预警研究。对空分系统的故障预警研究通过故
随着互联网和人工智能的不断发展,数据正以指数级姿态爆发。由于种种原因,数据中不可避免地存在大量缺失数据,直接影响进一步的数据分析与挖掘任务,限制数据发挥其最大价值。因此,对于不完全数据填补方法的研究具有重要现实意义。在众多填补方法中,由于基于回归模型的填补方法具有较高精度和良好的可解释性,在高维、非线性的不完全数据的填补任务中展现出强大优势,已经成为主流填补方法。本文主要围绕基于高斯过程回归模型的
微电网是具有集成可再生能源、降低发电成本等优点的小型发配电系统。随着微电网发展规模的不断扩大,对系统性能的要求也逐渐提高。同时,随着应用场景的多样化,不平衡非线性负载日益增多容易影响孤岛微电网中母线电压质量问题,而微电网中各分布式电源逆变器优化控制是解决途径之一,因此研究孤岛微电网逆变器的控制策略具有重要意义。针对孤岛微电网公共交流母线电压对称性和波形质量易受不平衡非线性负载影响的问题,本文采用组
随着人工智能在电力行业的逐步应用,少人、无人监测已成为未来发展的趋势,电力场景设备运行状态的高效、实时监测和异常预警具有重大实际需求和广阔应用场景。通过监测电力场景的异常变化判断电力设备的运行状态和异常位置,快速发现设备安全隐患并及时处理,以有效降低经济损失和保障设备安全生产。本论文采用电力视觉分析技术实现了电力场景状态变化监测,论文的主要内容如下:(1)提出了基于Fast-PCANet的场景变化
微电网的发展解决了化石能源行业资源枯竭、污染大、产能效率低下的缺点,将成为未来炙手可热的研究方向。直流耦合形式和交流耦合形式作为微电网两种主要形式有着各自独有的特点,而微网中的储能装置是电能供给和储存的重要环节。本文主要针对交、直流微网中的并联储能变换器在复杂工况下的惯性控制策略进行讨论分析,主要工作总结如下。依照课题相关的国内外研究成果,先对虚拟直流机控制及蓄电池SOC不对等工况下的控制策略研究
钢轨伤损检测是铁路安全的重要保障,而钢轨伤损分类是钢轨伤损检测系统的重要环节。现有钢轨伤损检测系统大都采用人工判伤的模式进行伤损分类,人工判伤存在着判伤效率低,误报率高的问题。在此背景下,本文基于伤损超声B显数据对钢轨伤损的分类方法进行深入研究,设计基于B显数据的伤损识别系统,主要研究内容如下:(1)根据超声传感器通道和位置的相关性对伤损原始B显数据流进行超声信息组合划分,屏蔽掉不相关通道对超声信
四轮独立驱动(4-Wheels Independent Drive/Steering,4WID/S)全电汽车采用全线控结构,动力由四台轮毂电机提供,各台轮毂电机相互独立可控,车辆自由度增加,对轮毂电机的协调控制能力提出了更高要求。因此,本文以4WID/S全电汽车转速跟踪和转矩协调为着眼点,以车辆操纵稳定性和安全性为目的,对4WID/S全电汽车轮毂电机的协调控制展开研究:(1)以CarSim数据库为