面向3D直播的2D到3D视频转换技术研究

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:conansmh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着3D技术的发展以及直播行业的火热,越来越多的人开始尝试3D直播,3D直播不仅在娱乐方面运用广泛,而且还能很好地应用于异地会议、教育、医疗等方面。目前,3D直播实现方式主要分为硬件与软件两种。硬件方式需要专业人员使用专门的3D摄像机进行拍摄,门槛较高,限制了3D直播的发展;软件方式主要通过2D到3D视频转换技术将2D视频转换为3D视频,无需添加额外的器件即可实现3D直播,有利于3D直播的普及与商业化。但2D到3D视频转换技术依旧存在一些不足之处如转换质量不高,转换效率无法满足实时性要求等,因此本文将研究重点放在2D到3D视频转换技术上。本文以提升2D到3D视频转换质量与转换效率为研究目标,利用深度学习、计算机视觉等方法进行了如下的研究:1、本文利用空间变换器网络建立了一个端到端的全自动2D到3D视频转换模型,解决了传统非端到端的2D到3D视频转换模型训练数据获取困难的问题。实验结果证明端到端的转换方式比起非端到端的转换方式拥有更好的转换质量以及更高的转换效率。2、针对目前端到端2D到3D视频转换模型转换精度低的问题,本文结合视频空间和时间两个维度的信息建立了基于时空特征的全自动2D到3D视频转换模型。实验结果表明本文提出的模型在精度与转换效率上都要优于已有的模型。3、针对3D直播对2D到3D视频转换技术提出的实时性要求,本文建立了基于注意力迁移机制的全自动2D到3D视频转换模型,使用轻量化网络以及注意力迁移对模型进行压缩。实验证明该模型无论在转换质量还是转换效率上都要优于现有的2D到3D视频转换模型,能够满足3D直播对转换效率提出的实时性要求。本文通过对2D到3D视频转换技术的研究,建立了一个全自动的3D直播系统,转换精度要优于现有的工作,转换效率可达每秒100帧以上,满足3D直播的实时性要求,为3D直播的普及与商业化做出了贡献。
其他文献
思想政治教育是一种有目的、有计划、有组织的综合教育活动,为中国特色社会主义伟大事业提供强有力的精神支撑。国有商业银行是由国家直接管控和负责的大型商业银行,承担着金融服务、金融供给和经济支持与调控的重要任务,对于促进国民经济发展和社会稳定具有重要作用。近年来,我国国有商业银行对其从业人员的队伍建设工作给予了高度重视,致力于将其内部员工队伍建设成为能够满足经济社会发展需要和促进金融服务业发展与维护社会
学位
随着经济全球化的发展,国家间贸易活动逐渐增加,蕴藏在国家间商品和服务贸易过程中的CO2排放及转移问题日益突出,成为学术研究的热门领域。文章基于世界投入产出模型,测算出
在古代,中国乡村皆有自成一体的总体性和艺术性,但随着城市化进程的不断推进,大量乡村人口涌入城市,乡村在走向衰败的同时逐渐散失其完整性与独特性。为了扭转乡村发展困局,国家陆续提出新农村建设、美丽乡村和乡村振兴等政策,乡村建设问题又一次回归人们的视野。随着乡村建设的发展,建设主体由前期的硬件“美丽化”逐步转向更深层的乡村产业提振,而美育的加入也为乡村的艺术建设助力。从乡建参与者角度,规划师、建筑师、艺
学位
随着生产力水平的迅速提升和用户日益多样化的需求,为了满足灵活多变的多品种小批量的混合生产模式,传统的流水作业车间被柔性作业车间和机器人制造单元所替代。双机器人装配
在这种情况下,使用互联网广告平台,特别是通过诸如Facebook或Yo uTube之类的社交媒体来为其产品或服务做广告的趋势,现在正成为柬埔寨市场的主要因素。据观察,许多打算使用产
20世纪中期以来,学界开始普遍意识到国家形象的重要性,并从多个方面对国家形象展开探讨研究。但这些研究多是从政治经济文化社会等宏观的角度介入,基于微观叙事分析的国家形象研究较少。本文基于近两年来参与多个国家项目设计实践经历,试图将研究视角聚焦到日常之物的细微之处,通过历史谱系梳理以及个案研究的方法,以小见大的折射日常生活之物蕴含的国家形象并对其视觉语言进行分析。本文的第二章节通过以小见大的视角就日常
学位
广西是我国最大的产糖省份之一,但我区当前糖业信息沟通方式较为落后,糖业信息沟通难、沟通成本高的问题在蔗糖开榨季节显得尤为突出。具体表现为榨季蔗农盲目砍伐,与糖厂压
脑肿瘤分割对于脑肿瘤放射治疗计划的制定和疗效评估具有重要的价值。由于脑部肿瘤具有形状多样、位置不固定、结构复杂、不同患者病理症状差异似大等特点,传统的手工分割不
在人工智能飞速发展的时代,人们对智能机器人、自动驾驶、室内导航等服务的需求越来越多,研究者们对这些领域进行了深入研究。这些领域都有一个共同的基本问题——如何较为精
随着文化产品生产和贸易全球化的不断深入,文化产品的跨国生产和交流日益密切,但目前我国文化产品在文化产品价值链中仍处于相对较低的位置。近年来我国重视构建区域价值链以