基于固态硬盘的内存扩展架构研究与实现

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:chuengwang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于物联网、云计算等技术的飞速发展,大数据时代已经到来,这又催生了许多数据密集型应用的出现。这些应用每天产生大规模、多形态和对实时性要求高的数据。因此,为兼顾大规模数据存储和计算处理能力的需求,大数据时代提出了内存计算的概念,即采用高性能的内存对海量数据进行实时计算和处理。然而,现有的内存技术DRAM面临了多方面的局限性,一是随着工艺特征尺寸的不断缩减,DRAM自身的存储密度和容量很难提升;二是DRAM的存储原理使得主存系统的能耗在计算机系统中所占的比例不断攀升;三是随着DRAM容量的增加,其成本也将大幅度地增加。  随着非易失性存储介质NVM的不断发展,如PCM、STT-RAM等,NVM的性能已逐步逼近DRAM,这为优化现有的主存系统提供了机会。然而,基于新型NVM的存储设备还没有成熟的产品面世,现有的研究通常采用模拟器来仿真NVM的特性。目前较为成熟的NVM技术仍然是基于闪存的固态硬盘技术,它已经被广泛应用于消费类电子终端和企业级存储系统中。虽然闪存存在写延迟长和寿命有限等不足,使得它不能直接替代DRAM作内存。但闪存具有低功耗、低价格和大容量等优势,比DRAM更经济实用,并且闪存拥有较好的随机读取能力,使得它非常适合于在大数据应用中作为主存系统DRAM的扩展。本文的创新性工作包括:  1.为给大数据处理提供高性能、高吞吐量和经济有效的体系结构支撑,本方案提出一种内存扩展架构SSDRAM,以大容量的SSD作内存的扩展、DRAM作SSD的缓存。为减少对操作系统和应用程序的影响,SSDRAM在用户空间以运行时库的形式实现,并为用户提供一组内存分配器的功能接口,替代系统中的标准库函数malloc/free等,使用户可以透明地分配和访问该大容量的扩展内存。测试结果表明,本方案能有效减少系统运行时间,可获得更好的系统性能,相比于直接用SSD作交换分区的SSD-swap方案,本方案可获得最高3.3倍的性能提升。  2.由于现有操作系统以4KB页为粒度进行内存数据的换入换出管理,不仅浪费带宽、增加延迟,还不能充分利用SSD的性能。本文SSDRAM针对原有4KB页粒度交换机制的限制,提出了基于数据对象object粒度的物理内存管理方法。SSDRAM设计了灵活的物理内存划分机制和虚实多重映射机制,通过实现内核模块来读取和修改PTE的内容,以细粒度的微页(micro-page)来管理物理内存空间,提高了物理内存的利用率。SSDRAM还提供了相应的物理内存淘汰与数据预取算法,实现以数据对象object在DRAM和SSD之间的交换管理,提高了系统中的I/O带宽利用率。  3.本方案把SSD的管理纳入了该内存扩展架构的内存管理范畴,针对SSD的多个特性,SSDRAM提出了相应的管理方法。在逻辑上,将SSD划分为固定大小的逻辑块(block)、页、区(sector)进行分级管理。为在数据对象object的虚拟地址与SSD逻辑地址之间建立映射,SSDRAM实现了一个类似系统页表的映射表SectorTable。针对SSD的写放大和寿命有限等问题,需要考虑SSD的损耗均衡,因此SSDRAM设计了一个写缓冲区及其管理方法,利用刷写子线程将脏数据按块以Log-structure和直接I/O的方式写到SSD。另外,针对SSD不支持数据的原地写回,每次回写数据都导致SSD旧位置上的原有数据成为垃圾数据,因此SSDRAM实现了一个后台线程来执行垃圾回收等工作。  4.由于SSD已经广泛应用于消费类电子产品和企业级存储系统中,但传统存储系统中的各种算法都是基于磁盘设计的,而SSD的读写特性与HDD不同,因此有必要针对闪存设计其缓冲区替换算法。本方案提出基于生命值敏感的闪存缓冲区替换算法LAB-LRU。LAB-LRU设计了双阈值控制的淘汰替换方法,可根据所淘汰干净页与脏页的比值情况触发遣散机制或复活机制,来动态调整各区大小。并结合不同的访问频度、新近性以及闪存的读写代价权重,给每个数据页定义停留在缓冲区的生命值,使活跃数据页停留地更久,从而提高缓存命中率、减少对闪存的读写操作次数和运行时间。  综上所述,本文构建了基于SSD与DRAM的内存扩展架构SSDRAM,并提出了针对物理内存和SSD的细粒度管理方法。测试结果表明,相比于SSD-swap方案和文献对比方案SSDAlloc,本方案能获得更好的性能。并且在相同性能下,SSDRAM只需要更少的DRAM使用量和更少的I/O次数,从而降低了系统的成本和功耗。因此,本方案提出的内存扩展系统具有重要的学术意义和应用价值,同时为未来新型NVM存储介质在计算机存储系统中的应用提供了重要的参考价值。
其他文献
夜晚的树叶声声细语:rn“你从何处来?”rn夜风细语声声:rn“我从冬天的地平线前方来,rn从尚未黎明的土地来.”
本文通过对荣华二采区10
期刊
随着互联网的普及和信息技术的发展,电子商务让各行各业都无法回避,而电子商务人才成为了行业竞争的有力武器。如何把学生培养成社会需要的具有竞争力的电子商务应用型人才,
随着医疗电子、可穿戴设备和物联网等低功耗应用的快速发展,功耗取代性能逐步成为芯片设计中最受关注的指标。其中,静态随机存储器(Static Random AccessMemory,SRAM)对芯片面积
有一位丧失了记忆的男子。 迄今为止已求治了所有的医生,但一点儿好转的迹象也没有。 “看来普通的治疗已经毫无指望了,到了这种地步,只有用最后一种治疗手段了。” 有人向
合成孔径激光雷达(SAL)作为合成孔径雷达(SAR)在光波波段的类推,具有成像速度快、分辨率高的优点,有可能以较小的收发口径实现远距离目标的高分辨成像,具有一定的军用和民用潜力
当前全球金融危机使得大部分国际知名财富管理机构受到波及,追求佣金而不是客户利益最大化的做法使其品牌和声誉受到质疑,前段时间国内居民就感觉把钱放到外资机构不太安全,
落叶栎是壳斗科(Fagaceae)栎属(Quercus L.)中的落叶种类,是栎属中较为进化的一个类群,中国有20个种和9个变种。中国落叶栎林天然分布区南起海南岛,北至黑龙江,东跨台湾,西达
今年十一月,持续着往年未曾有的小阳春天气。我们将枯叶拢在一起点燃,感受了腾烟的气息。尽管在美国,来到乡间,有时也能看到焚烧落叶的烟火。但由于污染空气而不大受欢迎。
虾青素(Astaxanthin,3,3-二羟基-β-β-胡萝卜素-4,4-二酮)是类胡萝卜素的一种,有着色功能和强抗氧化活性,被广泛应用于水产、家禽养殖,食品添加剂,化妆品,医药等行业。雨生红球藻是