全景视频的渲染技术研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:ny341
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着虚拟现实技术在近些年来的快速发展,全景视频得益于其题材丰富、沉浸感强的特点,成为了虚拟现实技术中最为成熟的一种业务形态,在体育赛事、旅游探险、游戏娱乐等领域得到了越来越广泛的应用。在线流媒体技术的发展也使得人们对于在线观看全景视频的需求越来越强烈。然而,由于全景视频分辨率高、数据量大,故通过网络传输全景视频需要较高的带宽资源,渲染显示等过程也对全景视频播放客户端的处理能力提出了较高要求。因此,全景视频的传输和渲染是影响全景视频观看体验的两个关键因素。本文对这两个环节展开研究。在全景视频的处理过程中,投影映射是十分关键的步骤,投影映射格式的选择会影响到全景视频编解码的性能、传输方式及渲染方式等,因此本文首先从投影映射格式出发,对OMAF标准中确定的两种标准映射格式ERP和CMP的映射过程进行分析,进而提出了渲染这两种投影映射格式的全景视频的方法。然而,ERP格式全景视频在两极地区存在的大量冗余像素容易成为渲染性能瓶颈,CMP格式全景视频在立方体面的交界处存在不连续现象会破坏观看的沉浸感。为了避免以上问题,本文提出一种基于CPP格式特点的网格构造方法,并在此基础上实现一种基于CPP格式的全景视频渲染方法。实验结果表明该方法相较于基于ERP和CMP的渲染方法,在渲染性能和渲染质量上存在一定优势。其次,本文对全景视频的传输技术展开研究。受限于目前的网络带宽条件及客户端解码渲染能力,传输完整的整幅全景视频不仅浪费带宽资源,也会给客户端的处理带来挑战。因而基于用户视域范围的传输是主流的全景视频传输方案。本文中提出了两种基于用户视域范围的传输方案,分别是基于Tile和基于TSP的全景视频传输方案。之后,本文以这两种传输方案为基础,实现了两个在线全景视频渲染系统。在搭建系统过程中,本文研究并实现了码率自适应、带宽预测、视点预测、播放帧率控制、基于TSP格式的全景视频渲染等算法。本文提出用户视域范围内每像素比特率这一指标来衡量用户视域范围内视频的清晰程度,进而分析了所搭建的两个系统及基于ERP的全视角在线全景视频渲染系统中,用户视域范围内的每像素比特率与视角预测准确率之间的关系。本文通过设计主观实验,对不同预测准确率下用户使用三种不同的在线全景视频渲染系统观看全景视频时的主观体验进行了研究。结果表明本文中实现的两个在线全景视频渲染系统在带宽有限条件下能够为用户带来良好体验。
其他文献
高分子共混技术可以综合多种高分子材料优势于一体,实现功能互补。热塑性聚氨酯(TPU)具有高弹性,同时具有热塑性塑料易加工、耐磨、耐油、耐老化等特性。甲基乙烯基硅橡胶(VMQ)是
在现实世界中很多问题都是多目标优化问题,不同于单目标优化,在多目标优化中,各目标之间是互相冲突的,其最优解往往有无穷多个,如何使得到的Pareto最优曲面距离真正的Pareto
党的十九大提出了新时代社会主要矛盾已经转化为人民日益增长的美好生活需要和不平衡不充分的发展之间的矛盾。这一重大判断,是我们开展思政工作的重要遵循。主要矛盾的变化
十月的色彩醒来并汇聚,繁复而热烈,随手铺叠一帧大美的画卷,也随处烘托一阙充盛的诗意。无垠的黄色纷纷纭纭,流淌过来。先是漫过浩荡田畴:那些垂首凝思的黄、弓腰默想的黄、
期刊
武警森林部队组建于1948年,是一支以预防和扑救森林火灾为中心任务的武装集团。在长期的灭火实践中,部队官兵总结出火场应急通信工作主要存在两点不足:(1)火场区域有限的通信
中国农业科技改革历经恢复期、市场化改革探索期、改革深化期和创新体系建立期四个阶段,改革的成效斐然,科技创新体系初具规模,农业科技资金来源渠道多样化,农业科技资源投入
现代教学中,很多学生缺乏学习的主动性,尤其是进入高中以后,学生处于青春发展时期,对各种事物都比较好奇,很难将全部心思放在学习中。而地理是一门较为抽象的学科,在理解上学
论多酚物质对啤酒质量的影响及控制衣艳萍范亚君(黑龙江省双鸭山市啤酒厂)刘庆杰(黑龙江省鹤岗啤酒厂)一、多酚物质的来源1.大麦大麦中含有较多的酚类物质,在大麦干物质中约占0.1%-0.3%,主要存
本文以枪口烟的检测为目标,设计了一种基于光电转换原理的便携式小口径枪械膛口烟雾检测系统(以下简称枪口烟检测系统)。通过研究国内外烟雾检测领域研究成果,确定以比尔—郎
化学是一门以实验为基础的自然科学,实验在化学教学中的作用是不容忽视的.可以把化学实验教学作为一个培养学生积极心理品质,营造积极心理场的有效途径.充分利用课堂演示实验