基于深度学习的视频编解码技术研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:snowshine1116131
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
这些年,随着互联网的快速发展,移动互联网设备的普及,人们的生活到处充满着多媒体信息。HEVC技术标准已经能基本满足现在人们对多媒体信息的传输需求,但是随着5G网络的商业普及和人工智能的快速发展,多媒体信息的总量呈现爆炸式增长,所以,探索更加高效的视频编解码技术是当前研究的热点。最近几年,因为GPU性能的高速发展,以深度学习技术为基础的人工智能领域得到了飞速发展,正因为深度学习技术已经成功的应用于计算机视觉,自然语言处理,语音识别等领域,大量的研究正在尝试将深度学习技术引入视频编解码领域,而且取得了一些显著的成果,但是依然有很多问题值得去研究。本文是对视频编解码框架中的三个重要模块进行探索,结合了深度学习技术对现有的编解码框架做性能提升。本文将涉及视频编解码框架中的三个模块,分别为帧内预测,帧间预测和环路滤波模块。经过多种方法的尝试,成功的将深度学习技术应用到环路滤波和视频后处理中,并超过了当前的研究结果,取得了业界领先指标。本文的具体的研究内容分为以下三个部分:第一,介绍了关于深度学习的基础理论知识。第二,介绍自己利用深度学习技术在视频编解码中的帧内预测和帧间预测两个模块的探索。第三,重点介绍了利用端到端的深度卷积神经网络对编码视频进行环路滤波和视频后处理,现有的神经网络都是基于单帧输入进行设计,没有考虑前后帧的信息,但是在编码视频中,当前帧的编码是参考了前后帧的信息的,所以引入当前帧的上下文信息,有助于当前帧的信息重构,达到更好的质量增强效果。为了充分利用视频中前后帧的信息,本文引入了高效的光流网络来做运动补偿,然后结合ConvLSTM网络来融合前后帧信息,并设计了高效的蒸馏网络去进行滤波,同时,引入了对抗生产网络的结构,来对进一步提升视频结果的主观指标,取得了显著的成果。
其他文献
化石能源的不断消耗引起很多的社会和环境等重大问题。因此,寻求和开发可持续的清洁能源以替代传统能源已成为当务之急。氢能由于具有零碳排放和高质能密度的优点,被认为是化
随着现代流程工业过程生产规模扩大化、生产装置大型化、生产控制自动化、工艺流程复杂化等发展趋势,及其过程采样数据往往具有非线性、自回归特点,使得流程工业系统的异常检测和故障诊断问题变得更加困难。然而,某个环节或装置一旦发生故障,会向其他相关部分传播,进而造成严重的财产损失和人员伤亡,严重阻碍工业化进程和社会经济的发展。为尽早发现流程工业生产过程中出现的异常或故障,及时报警与处置,从而消除潜在的隐患,
由于用户易受到技术经营者的影响而客观上配合技术经营者共同实施专利方法,涉及用户方法专利遭受分离式侵权的风险较大。包含用户在内的每一个行为主体均仅完成了专利方法的部分步骤,因而从表面上看,所有主体的行为均无法满足“全面覆盖原则”从而不构成侵权,但客观上专利方法却切实的被实施了,因而造成了专利权人利益的受损。特别是在数据处理、电子通信、软件等领域,由于技术特点以及涉及用户的需要导致相关专利难以采用单侧
学位
多输入多输出(Multiple-Input Multiple-Output,MIMO)技术是无线通信发展的关键技术之一。在频谱资源日益紧张的今天,MIMO系统可以在不增加额外带宽的基础上,通过在收发端部署多组天线成倍地提高系统的容量和频谱利用率,但这也使得系统信道更加复杂,致使其信号检测、信道估计等技术要比单天线系统更具有挑战性。因此MIMO系统信号检测和信道估计算法一直是无线通信界研究的重点。与
电弧稳定性在焊接中有着关键的作用,体现在维持电弧稳定燃烧,不产生断弧和短路等现象。但是,实际生产过程中容易出现信号波动,严重影响焊接质量。在焊接过程中使用控制算法维
随着世界工业化进程的加快和国民经济的日益发展,石油化工行业逐渐成为了国家的重要支柱产业之一。但此类企业在生产过程、运输以及仓储过程中一旦发生泄漏、爆炸,原料和产品
摩擦阻力总是和我们的日常生活息息相关。例如我们生活中经常接触的飞行器、铁路列车、轮船等运载工具,其运行中消耗的能量中的相当一部分用于在湍流边界层中克服摩擦阻力,如
熔融塑化是挤出机的核心功能,很大程度上影响挤出制品质量和设备加工能耗。研究高效熔融塑化技术是聚合物加工成型领域的迫切需求。与传统螺杆挤出机不同,单轴偏心转子挤出机
胶粘接技术是微装配的重要组成部分,广泛应用在微电子器件连接固定、LED封装、微型制造等领域。随着微机电系统(MEMS)的迅猛发展和机械电子产品的微小化,对胶粘结技术提出了
铝酸盐玻璃的红外截止波长可达6μm,优于硅酸盐玻璃的4.5μm,其次铝酸盐玻璃的杨氏模量高达112GPa,远超过石英玻璃的68.9GPa,优异的红外透过性和力学性能使得铝酸盐玻璃作为