时空自适应的视觉信号传输、评价与增强

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:Puzzling600
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着生活水平的提高,人们对图像和视频的质量要求越来越高,并对全景图像和视频等新兴媒体格式的需求日益增加。在现有的视觉信号传输系统中,这些视觉信号需要经过采集、压缩和传输等过程才能到达人们手中。而在这些过程中,部分视觉信号会由于不可避免的失真出现明显的主观质量下降。因此,优化视觉信号的传输策略、评估视觉信号的主观质量以及增强低质量的视觉信号对于视觉信号传输系统非常重要。然而,视觉信号的传输、评价与增强充满挑战。对于视觉信号传输,由于用户偏好的多样性,固定的传输策略难以满足不同用户的偏好。对于视觉信号评价,由于视觉信号的内容多样性,启发式的评价方法难以挖掘视觉信号中的局部质量相关性。对于视觉信号增强,由于失真类型的多样性,启发式手动设计增强网络难以适配不同失真。因此,本文针对视觉信号传输的用户偏好多样性、视觉信号评价的视觉内容多样性和视觉信号增强的失真类型多样性问题开展了视点自适应、视场交互自适应和神经网络结构自适应等时空自适应技术研究。本文的主要研究内容如下:首先,研究了视点自适应的全景视频传输。针对全景视频传输中用户视点偏好种类多、全景分区码率控制难度大等问题,本文提出了基于跨用户信息的视点预测模块和基于串行强化学习的码率决策模块,实现了根据不同用户的视点偏好自适应地调整全景视频不同区域的传输质量,并通过真实数据驱动的仿真实验进行验证。其次,研究了视场交互自适应的全景图像质量评价。针对全景图像质量评价中视场图像特征提取层次单一、视场间交互关系捕捉困难等问题,本文提出了多层次特征提取模块和交互自适应的超图卷积网络,实现了根据不同全景图像内容自适应地捕捉视场间复杂的交互关系,并在两个全景图像质量评价数据集上进行了验证。最后,研究了神经网络结构自适应的图像和视频增强。针对图像和视频增强中自动设计增强网络空间复杂度高、帧级别的参考帧结构搜索难度大等问题,本文提出了一种内存友好的可微神经网络结构搜索方法和一种一次性神经网络结构搜索方法,实现了根据不同失真的时空信息自适应地设计图像和视频增强网络,并在图像去雨、图像去噪和视频去压缩失真任务上进行了验证。
其他文献
分类和聚类方法是机器学习的核心研究领域。针对向量型数据(每个数据点为一向量)的研究已经较为成熟。因此,在处理矩阵型数据(每个数据点为一矩阵)时,一种简单做法是先将矩阵型数据拉直为向量,再利用向量型分类和聚类方法进行处理。然而,拉直操作会破坏数据本身自然的矩阵结构。而且,拉直后的数据往往维数非常高,容易陷入“维数灾难”问题。因此,近年来,学者们提出不采用拉直,直接对矩阵型数据进行分类和聚类的矩阵型方
龙泉窑青瓷以其厚如凝脂,质如碧玉的釉质闻名遐迩,厚釉是其典型的特征,龙泉青瓷工艺的发展始终围绕着厚釉工艺技术的探索与实践。可以说,龙泉青瓷工艺发展的历史实质上是厚釉工艺技术发展的历史,而多层釉工艺技术是厚釉工艺技术的核心,是龙泉青瓷从厚胎厚釉向薄胎厚釉特征转变,使龙泉青瓷步入高峰,在材料美学上最大限度接近于“玉质”理想的关键技术。本文以多层釉结构的南宋龙泉青瓷为研究对象,在前辈学者研究成果的基础上
第三方资助在国际投资仲裁领域发展迅速,不仅为处于经济困境或意图分担风险的申请人提供了接近正义的机会,也降低了被申请人承担的仲裁风险。但由于第三方资助者是仲裁协议的非签署方,其参与可能对投资仲裁程序造成负面影响,国际仲裁界应对第三方资助进行相应规制。本文除引论与结论外,主要内容分为六章。第一章阐释第三方资助国际仲裁的基本内涵。本文中的第三方资助是指与纠纷当事方无直接利害关系的自然人或法人,通过为有资
纵向数据是由每个个体变量在时间或者空间上多次测量的数据构成,纵向数据既有时间序列数据的特点,又有截面数据的特点。增长曲线模型(Growth curve model,GCM)是进行纵向数据分析的一类重要模型,现有文献关于增长曲线模型的研究通常有两个重要假定:(1)随机误差矩阵服从多元正态分布;(2)组别矩阵已知。然而,实际中这两个假定不一定能满足,本文放松以上两个假定条件,在误差矩阵服从多元权指数分
材料环境腐蚀野外站数据涵盖了地理数据、气候数据、气象数据、污染物数据和材料失效数据等,具有全数据要素的特点。腐蚀野外站数据管理系统的建设与材料失效数据积累、数据挖掘及数据应用对于材料研究与开发、装备制造与应用、工程设计与运维等均具有重要的基础支撑与实践指导作用。但是目前,各腐蚀野外站通过技术服务、课题研究及企业合作生产的部分“孤岛式”数据仍然没有得到广泛的社会服务与深度的数据挖掘。本文针对这一现状
金融是美国对外政策的三大支柱之一,此外分别为军事与政治。自布雷顿森林会议之后,美元成为世界金融体系的核心货币。在美国主导的金融霸权系统之下,各国对美元为中心的结算体系产生严重依赖。为扩张其国家利益,美国构建以域外管辖权为法理基础,集域外立法管辖权、域外执法管辖权、域外司法管辖权为一体的金融次级制裁域外管辖权。在此基础上,美国域外管辖的范围由“美国关联因素”扩张至“非美国关联因素”,通过规制与目标方
从1921年中共成立到1927年大革命失败,是中国共产党发展的重要阶段。在这短短的七年间,中共从一个名不见经传的政党,发展成为影响中国政治格局的革命政党,中共的党员人数、组织规模、影响力在不断增加。中国共产党是如何做到这一切的?其中很重要的原因在于早期的中国共产党人通过宣传工作,动员和发动群众是重要手段之一。在中共成立早期,坚强有力的宣传工作发挥出凝聚革命力量、巩固理论阵地、扩大革命影响的重要作用
钱塘江流域地区历史悠久、文化资源丰富、自然环境优越。随着历史的变迁和社会的发展,钱塘江流域生成和发展了众多类型多样、特色鲜明、价值典型的传统村落,这些村落具有相对完整的环境形态和突出的人文特质,具有一定的代表性和影响力,不仅是人类社会变迁的最佳见证,也是区域城乡发展的重要载体。本文以钱塘江流域为地理范围,以流域内列入中国传统村落和浙江省历史文化保护利用重点村名录的“双录”村落为研究对象,选取其中具
背景脑膜癌病(Meningeal carcinomatosis,MC)是指各种恶性肿瘤转移至硬脑膜、软脑膜、脑脊液及蛛网膜下腔,一般脑和脊髓内并无瘤块,它是一种特殊类型的中枢神经系统(Central nervous system,CNS)转移癌,属于癌症患者晚期阶段严重的中枢神经系统并发症。在实体肿瘤患者中,大概有10%~30%的患者会发生中枢神经系统的转移,其中4%~15%表现为脑膜癌病。脑膜癌
本研究调查了18(18)个西非国家(贝宁、布基纳法索、科特迪瓦、喀麦隆、乍得、赤道几内亚、冈比亚、加纳、几内亚、几内亚比绍、利比里亚、马里、毛里塔尼亚、尼日尔、尼日利亚、塞内加尔、塞拉利昂、多哥)1985年至2020年的通货膨胀率和利率与经济增长之间的关系。利率和通货膨胀率的影响,在宏观经济表现的主题考试,许多研究者试图证明不同的推理基于实证和理论观点;从纯粹的假设检验的频率到广泛的实证研究各国。
学位