基于深度增强学习的360度视频动态自适应请求算法及工程平台实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:chmwingflying
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着视频流媒体技术的快速发展以及5G等低延时网络通信技术的普及,人们对视频流媒体的需求已经从普通二维视频逐渐发展到虚拟现实(Virtual Reality,VR)和增强现实(Augmented Reality,AR)等沉浸式视频领域。沉浸式视频应用的主要格式之一是360度视频,因在观看过程中观看者可以自由转换视角观看视频内容得到身临其境的体验而备受欢迎。但360度视频具有较高的帧率和分辨率,致使其数据量巨大,而现有的带宽资源有限,因此如何有效地进行传输是限制360视频进一步发展的瓶颈。为了提高视频流媒体用户的体验质量(Quality of Experience,QoE),本文基于深度增强学习算法,结合视频流媒体动态自适应请求标准(MPEG-DASH),针对360度视频,实现了基于深度增强学习的360度视频动态自适应请求直播和点播应用平台。整个应用平台由视频拼接平台、视频直播平台、视频点播平台和基于深度增强学习的360度视频请求算法四部分组成。首先,实现了基于FFmpeg的视频拼接平台,360度视频的直播和点播都采用划分Tile的传输方式,视频播放之前都需要进行拼接;其次,实现了基于Nginx-RTMP的加密视频直播平台,本文因硬件设备等原因仅实现了二维视频的直播平台,并采用3DES加密算法对视频直播裸流进行加密;然后,实现了基于DASH(Dynamic Adaptive Streaming over HTTP)的播放器点播平台,基于二维视频的DASH传输框架,开发了基于Tile的360度视频传输平台,平台可调用C++或Python开发的视频自适应请求算法,并在平台中加入本地二维视频和360度视频播放、本地视频加解密、网页版DASH自适应请求播放和嵌入平台的DASH自适应请求播放功能;最后,将二维视频中基于深度增强学习的码率自适应请求算法和码率分配算法相结合,实现360度视频的码率自适应请求,并应用于基于DASH的360度视频点播平台。
其他文献
微表情是一种持续时间短、动作幅度小且无意识做出的面部表情,它暴露了人们试图隐藏的真实情绪,微表情识别在谎言识别、心理诊断、商业谈判、国家安全等领域都发挥了重要的作用。现有的大多数微表情识别方法直接从微表情图像序列进行特征提取,主要包括基于光流的方法、基于纹理描述的方法和基于深度学习的方法,但是这些方法忽略了脸部动作单元(Action Unit,AU)中蕴含的情感信息,导致提取的特征可能包含与表情无
随着“十四五”规划出台,在后疫情时代构建城市智能交通系统成为中国建设交通强国的核心内容。出行即服务(MaaS)作为国外实现智能交通系统的新兴概念,具有为交通运输与出行带来颠覆性变革的潜力。分析后疫情时代的出行现状与趋势,重点阐释MaaS的革新价值与创新点。基于可持续系统设计方法(MSDS)和流程,针对广州市交通运输体系搭建MaaS产品服务系统(MaaS-PSS),以解决广州市民在防疫常态化中遭遇的
2012年以来,互联网企业在我国并购市场上活跃度极高,引起各界关注。本文选取了具有代表性的互联网企业——阿里巴巴,研究其战略并购的动因、效应及存在的问题,期望可以为我国互联网企业的战略并购提供理论和实践上的借鉴。本文在案例介绍部分介绍了阿里巴巴的集团概况和经营现状,主要为了说明阿里巴巴的基本情况。接着介绍了阿里巴巴的并购过程以及通过并购所形成的主营业务,同时介绍了主营业务的特点。在接下来的案例分析
一个建设工程往往有众多的参与单位承担不同的建设任务,各单位由于利益冲突,会形成各式各样的矛盾。本文通过分析项目在建设过程中业主方存在几个常见问题,提出解决措施,与大家一起探讨。
无线移动技术历经几十年的发展历程,现已正式进入第五代移动通信系统(5G)时代。不同于以往1G到4G的历代通信系统,5G不仅要解决人与人之间的通信问题,还要实现人与物、物与物之间的信息交互,通信场景的扩大、以及AR、VR等更多样差异化的服务需求,要求着5G数据传输速率的进一步提升。正交频分复用(Orthogonal Frequency Division Multiplexing,OFDM)技术基于其
本文以“从地方看历史”的视角,将明清蓬莱民间信仰作为线索,多维度探究明清蓬莱民间信仰与蓬莱地方社会的关系,并进一步了解蓬莱地方士庶的日常生活与心理状态。首先,本文通过梳理蓬莱的历史沿革,从地理环境和民众心理两个角度分析蓬莱民间信仰存在与发展的社会土壤,并在此基础上对明清蓬莱民间信仰的类型及其发展进程进行了论述,明清蓬莱民间信仰可以分为自然物信仰、动植物信仰、祖先与鬼信仰、乡贤名宦信仰、儒释道信仰。
表征真空玻璃热性能的最重要参数-传热系数很难在线测量,因为它会随着时间的推移而增加,从而降低隔热性能。确定真空的热传递需要详细了解它们不同元素的热特性,这一领域存在一系列标准和指南。总体的热性能既可以通过详细的二维数值方法确定,也可以通过符合欧洲或国际标准的测量来确定。首先,我们研究基于真空玻璃传热机理的软测量智能建模方法,以获取真空玻璃性能数据。该方法保证了智能建模的可行性,为基于软测量的智能建
随着城市化和人口老龄化进程的加快,人们愈发注重自身健康,脑部作为人体最核心的器官之一,一旦出现问题,将严重危及人体健康。其中,脑卒中和脑胶质瘤作为两种具有代表性的脑疾病,其致残率、死亡率都非常高。脑卒中是一种急性脑血管疾病,需要在症状出现之后尽快诊治,计算机断层扫描(Computed Tomography,CT)以其速度快、可用性强等特点,通常成为诊断脑卒中患者的首选。脑胶质瘤结构复杂、形状多样,