【摘 要】
:
随着视频会议、远程教学及网络短视频应用日益广泛,在线视频流量大幅增加。同时高分辨率、3D视频的普及和沉浸式全场景体验需求的出现,进一步加大了视频数据存储和网络传输的压力。为了应对这些挑战,国内外研究人员不断提升视频编码技术,以获得更高更好的视频压缩性能。高效视频编码(High Efficiency Video Coding,HEVC)标准相对于上一代高级视频编码(Advanced Video Co
论文部分内容阅读
随着视频会议、远程教学及网络短视频应用日益广泛,在线视频流量大幅增加。同时高分辨率、3D视频的普及和沉浸式全场景体验需求的出现,进一步加大了视频数据存储和网络传输的压力。为了应对这些挑战,国内外研究人员不断提升视频编码技术,以获得更高更好的视频压缩性能。高效视频编码(High Efficiency Video Coding,HEVC)标准相对于上一代高级视频编码(Advanced Video Coding,AVC)标准压缩性能提升了两倍,但视频压缩性能的提升同时也带来计算复杂度的成倍增长。在视频信息中帧间冗余远远大于帧内空间上的冗余,视频编码技术中采用了帧间预测来消除大量的冗余信息。编码复杂度的主要来源是运动估计(Motion Estimation,ME),该过程消耗了总编码时间的57%-68%,同时大量参考帧数据的传输和存储过程消耗的能量占总能耗的80%-90%。国内外研究人员提出了众多视频编码性能和能耗优化方案。针对编码性能的优化主要从算法或硬件架构上提升编码过程的并行化。采用的加速方案主要有多(众)核平台、GPU、FPGA和专用芯片ASIC等,它们以多核运算或定制化硬件电路来提升并行计算能力。针对编码能耗的优化主要通过算法改进数据重用效率,构建动态扩展的搜索窗口减少对存储器的访问以减少访问的动态能耗以及通过改进存储架构,采用基于自旋转移矩存储器(Spin Torque Transfer Random Access Memory,STT-RAM)、相变存储器(Phase Change Ran-dom Access Memory,PCRAM)和阻变存储器(Resistive Random Access Memory,ReRAM)等新兴非易失存储器的混合存储架构减少存储视频参考帧所消耗的静态能耗。这些新的架构方案实现了性能或能耗上的优化,但无法将并行计算与低功耗的优势结合起来。基于ReRAM的存内计算技术已经在神经网络推理和训练、图计算等领域发挥出高效的计算和能耗优势,但是现有的PIM计算架构无法直接完成视频编码运算。本文提出基于阻变随机存储器ReRAM的存内计算(Processing-In-Memory,PIM)架构,实现视频编码的低功耗高性能运算。本文根据HEVC帧间编码各模块复杂性分布,选取帧间编码中最为复杂的运动估计过程进行优化。我们对运动估计算法进行分析,提出一个基于ReRAM的加速引擎ReME。针对运动估计过程中主要计算模块设计了加速方案,采用本文提出的1位双极性数模转换模块(Digital to Analog Converter,DAC)对编码时间最长的绝对差值之和(Sum of Absolute Differences,SAD)、插值和残差变换绝对值和(Sum of Absolute Transformed Difference,SATD)模块进行计算,实现了运动估计主要模块的加速和能耗节省。最后采用NVSIM模拟器评估了本文提出的优化架构,分析了性能与能耗优势。我们提出的ReME加速引擎相对于CPU和GPU的性能提升分别为101倍和5倍,ReME的平均节能分别为25.2倍和3.8倍。
其他文献
留置权制度作为民法的重要内容之一,其起源于罗马法上“恶意抗辩”,并逐步演化成现在所谓的留置权。早前,我国对留置权的立法主要源于之前的《担保法》、《物权法》,随着我国《民法典》的问世,留置权被置于物权编担保物权有关章节中,根据对比可以看到《民法典》中有关留置权规定并未做出改变,留置权适用范围可以适用于所有债权。我国当前留置权制度在保护债权人利益上发挥了一定的效用,但是由于留置权盲目扩大其适用范围,在
过度医疗是一种在医疗领域普遍存在的现象,属于全球性的治理难题。其共性在于从结果上看,患者接受了超过必要限度的治疗。对于过度医疗的规制之所以复杂,原因既在于其类型多样,成因复杂,又在于部分过度医疗有其合理性,较难界定。《民法典》第1227条系不完全法条,请求权基础不明,且在司法实践中裁判思路不一,同案异判问题突出等问题,亟待厘清。首先,梳理了我国对过度医疗现象概念、成因的相关学说,并以医方主观方面为
游戏与互联网已经成为居民生活中不可或缺的组成部分,同时也成为新的法律问题孵化的温床。在网络游戏行业快速发展之时,游戏直播行业展现出了其巨大的商业价值,而以游戏画面为内容的直播行为是否侵权这一问题仍未确定。可以明确的是,21年即将生效的《著作权法》中,网络游戏画面(以下称网游画面)仍未纳入其保护范围,通过对游戏画面的属性以及其包含的各种元素进行分析,其特征基本符合视听作品的要求,将其视为视听作品进行
基因编辑技术使得人类通过改变基因性状控制人类的发展成为可能,尤其是基因编辑工具的发展给社会物种群体尤其是地球上最大数量的人类带来革命性的、历史性的变革。基于基因编辑技术的不断发展,基因编辑技术操控的准确性及有效性不断得到提升。基因编辑技术在人类基因疾病预防和基因疾病治疗方面有不可或缺的积极作用,当基因编辑技术应用于治疗个体的遗传性疾病时,将可能永久消除威胁个体生命的某些基因,使得这种遗传性疾病从人
获益于移动互联网时代的迅猛发展,人们在网络上获取信息和知识的方式也愈加便捷,同时,盗版侵权和学术造假等现象也日益严重。又因现行的学术评价制度存在先天不足,以量化的考评方法和形式作为主要指标的评估体系将科研人员的职称和地位与他们的学术成果密切地联系在一起,使得科研人员更加急功近利,导致了唯“论文数量”和“影响因子”等论调。此外,出版社为了谋求自身的利益,赚取高额的版面费,使学术共享严重受限。学术发展
近年来,移动设备迅速发展更迭,随着技术的不断提高,动画效果融入移动设备不仅是一种视觉奢华,更是用户期望实现的需求。将动画效果融入手机品牌系统或应用程序的开发中变得越来越普遍:动画效果可以用在开启界面作为欢迎界面体现品牌特色,可以用在使用过程中可视化用户操作的结果,展示操作成功或等待,还可以用在对用户的解释说明,使表达内容更加清晰。动画效果解决了界面中许多问题,使用户与手机的交互生动起来,真正的响应
随着我国土地和水利资源利用规模的持续扩大,国家对于水库及周边土地的规划管理力度也在逐步加大。为了精确高效地获取自然资源和地理空间信息数据,目前大多采取无人机航拍的方式,通过对航拍影像数据进行图像处理实现三维建模。在水库场景的无人机航拍图像三维建模过程中,由于航拍图像中包含大量水域画面,会对建模的实现产生干扰,并影响三维建模的最终效果。因此水域图像和水陆交叉图像水面区域的检测去除工作十分重要。本课题
21世纪是信息技术的时代,随着计算机的普及与软硬件的快速发展,各种新奇的功能和计算机技术得以实现。在这个数字化的信息时代,图像处理领域与人们的生活之间的关系也越来越紧密,从日常生活中的影音娱乐,再到健康医疗、城市交通、科学教育、信息检索甚至军事领域,都图像处理息息相关。如何在原有的图像基础上获得更多的特征信息是图形图像处理领域一直致力解决的问题。传统的图像特征增强技术[1]可以分成空域滤波技术和频
法官解释是法律适用与司法裁判的前提和基础,任何一个案件,只要被诉诸法院,就必然会伴随着法官解释。由于法官在案件审理过程中对法律与事实作出解释是在履行其所负有的司法职权的表现,所以该权力从实际上来讲应当被归属于司法权。尽管我国现行法律并没有对法官解释权进行明确规定,但法官却在客观上普遍行使着该权力。从法律层面上对法官解释权予以认可并授予法官更加规范和标准的解释权不仅有利于规范法官解释权的行使,使所作
随着车联网技术的发展和支持GPS设备的普及,大量的轨迹数据变得可用,使用这些数据进行路线推荐也越来越重要。百度地图、高德地图等常用的路线导航服务通常都是优先考虑行驶时间或距离为用户提供最快或最短路线建议,很大程度上满足了用户的出行需求,为用户出行带来了极大的便利。然而,某些驾驶员更关注的是燃油经济性,他们期望得到有效的省油路线建议,而现有的路线推荐服务却很少能够满足他们的这种出行需求。实际上,高质