区域化混合存储结构与优化技术研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:snowy99
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
混合存储技术可以满足大数据存储系统对高存取性能和大存储容量的需求,同时大幅降低存储系统的总体拥有成本。新型瓦记录磁盘采用区域化内部数据管理方式缓解叠瓦式磁记录技术固有的写放大问题,但在非顺序写请求干扰下仍会出现严重的写性能抖动。新型闪存技术的发展导致闪存芯片可擦除次数大幅下降和并行资源难以充分利用,闪存固态盘出现可靠性下降和单盘性能增长受限等问题。叠瓦式磁记录技术和闪存技术的发展为大数据存储提供了更强的容量和性能保障,也对现有混合存储架构及其内部数据管理方法提出了新的挑战。
  本文提出了基于闪存固态盘和主机感知型瓦记录磁盘的混合存储架构,并从性能优化和可靠性提升两个方面展开深入研究,主要工作和创新总结如下。
  (1)全路径区域化的混合存储架构。提出ZoneTier,一种全路径区域化的混合存储架构。ZoneTier以区域为基本单位对混合存储系统内部数据进行管理,并协同设计存储分层技术和存储缓存技术、借助瓦记录磁盘的主机感知特性实现对非顺序写请求的全路径控制。ZoneTier相比现有混合存储设计,可以获得最大32.31%的系统性能提升,将数据迁移开销平均降低29.41%、介质缓存清除时间平均降低22.74%,为利用瓦记录磁盘构建大规模存储系统提供方法指导。
  (2)瓦记录磁盘感知的高可靠存储缓存技术。针对ZoneTier中利用固态盘主动为瓦记录磁盘缓存非顺序写请求的应用场景,提出SMRC,一种瓦记录磁盘感知的高可靠存储缓存技术。SMRC在缓存准入阶段准确识别并过滤对固态盘的无效写入操作。SMRC相比现有存储缓存技术,可以获得最大35.53%的系统性能提升、将固态盘的数据写入量最多减少177.51倍,在不引入额外系统性能开销的前提下提升固态盘性能,从混合存储系统级为ZoneTier提供高可靠性保障。
  (3)物理地址感知的固态盘请求调度方法。针对ZoneTier中固态盘可在设备级请求队列中获取大量可并行执行闪存请求的情形,提出PIOS,一种物理地址感知的闪存固态盘请求调度方法。PIOS将I/O请求调度策略与闪存固态盘内的闪存转换层协同设计,准确识别并调度I/O请求队列中可并行执行的闪存请求。PIOS相比操作系统级I/O调度方法,可以将固态盘的整体性能平均提升49.63%、将I/O请求在设备级请求队列中的等待时间平均减少63.39%,实现了对闪存芯片内部并行性的高效利用,从闪存固态盘设备级为ZoneTier提供高性能保障。
  (4)基于热数据轮转放置的静态磨损均衡技术。针对ZoneTier中闪存固态盘很难得到充足的空闲时间完成静态磨损均衡的问题,提出Roble,一种基于热数据轮转放置的闪存固态盘静态磨损均衡技术。Roble利用热数据集中写入的方法减少静态磨损均衡过程中的数据迁移量,并利用闪存芯片内部的并行性提升数据迁移效率。Roble相比已有静态磨损均衡策略,可以将固态盘使用寿命平均延长25.07%,将数据迁移量平均减少2.25倍,平均将13.29%的数据迁移操作以完全并行的方式执行,从闪存固态盘设备级为ZoneTier提供高可靠性保障。
其他文献
无线能量传输技术具有灵活方便、电气隔离、免维护、环境适应性强等优点,有望应用于航空航天、电动汽车、植入式医疗、消费电子、智能家居等领域,已成为学术界和工业界的研究热点。但是,无线能量传输技术仍存在补偿元件多、抗偏移性能差、能量传输效率低、系统成本高等问题,阻碍了无线能量传输技术的实用化进程。  本文从磁耦合结构的角度出发,基于Maxwell仿真给出的磁场强度分布情况,得到了十字螺线管型抗偏移磁耦合
现代电子技术的飞速发展,手机、平板、电脑、智能手环等各类移动电子产品已成为信息传播的重要载体。在消费电子市场尤其是低压应用领域,Buck型DC-DC变换器作为不可或缺的稳压电源得到广泛应用。基于COT控制的Buck变换器因其电路结构简单、瞬态响应速度好和良好的电磁兼容性能而倍受青睐。但其劣势在于依赖于输出电压的的纹波参与系统控制,易受噪声干扰、破坏系统稳定性。  基于现有的COT控制架构,本文采用
学位
面对5G海量连接、高容量、低时延和高频谱效率的需求,非正交多址接入(NOMA) 是满足这些需求的关键技术之一。为了进一步提高非正交多址接入系统的性能,本文从系统的可达吞吐量、波束成形和能量效率等问题展开研究工作。  针对基于FDD单小区NOMA系统中存在的簇间干扰和用户间干扰问题,本文从用户分簇、预编码和功率分配三方面进行优化设计。提出了一种改进的k-means分簇算法,利用空间相关性将小区内的用
图象分割就是把图象空间划分成若干个具有某些一致性属性的不重叠区域.它是图象分析与理解的基础,是计算机视觉领域中最基本最困难的问题之一.这是因为至今没有一种方法适合所有分割问题,不同的问题必需寻找不同的方法.该文对三类不同的问题:一般图象分割理论、脑白质病变核磁图象、细胞显微图象的分割进行了深入的研究,并对于这三类不同的问题分别提出不同的解决方法.
学位
随着各个行业数据量的增加,数据外包存储得到了飞速发展。但是目前数据外包存储仍然存在较大的安全问题,云存储作为一种新型数据外包方式,自然存在较多的安全性问题。与传统的托管在服务器端的外包存储不一样,云存储相对更加开放、数据更易被攻击者轻易获取,这样数据外包存储在云端更容易遭受各种攻击和威胁。目前,数据外包存储面临的主要问题即是安全性问题。在另一方面,当前云环境下的隐私数据保护方法大都采用传统的加密技
学位
随着信息技术的快速发展,万物互连正在加快实现。物理域组件和信息域组件正在加快融合,形成信息物理系统(Cyber-Physical System,CPS)。  许多大规模的信息物理系统如智能电网、智能交通和智能工厂等的广泛应用为人民群众提供高效的服务,然而,其高度的开放性也使得系统面临严峻的网络攻击威胁。特别地,数据注入攻击能够简单地实施和引起物理子系统性能严重降级或组件破坏。数据注入攻击是指攻击者
台风的准确预报可以减少由于台风破坏和人员疏散造成的损失,对于沿海城市的防灾减灾具有重要意义。海表风矢量是台风模拟和预报的不可或缺的参数,而卫星遥感得到的海表风观测的有效同化对于改善台风路径预报和强度预报具有重要作用。然而受限于目前资料同化的处理流程,大量风场观测在台风强对流天气条件下并没有被很好地利用起来。此外,不精确的背景场,缺乏流依赖信息的背景误差协方差,高风速风场观测误差的不准确描述都会影响
社区问答平台成为了一种流行的社交媒介,在这种社交网络中,用户可以提出问题来获取信息,其他用户也可以提供专业答案来分享知识。与搜索引擎相比,社区问答能以一种更直接的方式满足用户的信息需求。面对海量的以问答对形式组织而成的知识库,用户容易面临信息过载。一个研究任务是,给定一个问题,系统自动地从其答案集合中选择一部分符合该问题的答案,以此来提高平台的智能化水平,节省用户的时间成本。另一个研究任务是,根据
计算机视觉是一门让计算机拥有理解周围复杂环境能力的学科,具有重要的理论研究意义和应用价值。但是目前计算机视觉系统大多采用二维信息处理方式,如智能交通系统,视频监控系统中仅仅采用单摄像头进行智能处理,缺乏对环境深度的感知,这在一定程度上给系统的可靠性和鲁棒性带来了隐患。随着越来越多计算机视觉应用技术逐渐走进人们的生活,提升着人们的生活质量,改善着人们的生活方式,对计算机视觉系统可靠性与鲁棒性的要求也
感知是以实践的方式理解世界的第一步,为分析物理现象、探索事件成因提供事实基础。在各产业、各城市推进信息化建设的过程中,高效的信息获取始终是相关服务及应用中的一个至关重要的环节,有效的数据感知是沟通现实与蕴含诸多规律的大数据之间的桥梁、纽带。与此同时,物联网的出现和发展不断加深对透彻以及大规模感知的需求,而传统无线传感器网络的高安装维护成本、能源消耗问题和感知覆盖能力的不足却与之相掣肘。另一方面,随
学位