负载感知的基于对象存储的分布式混合存储系统

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:RichieHDD
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在云环境中,虚拟化技术被广泛应用,服务于虚拟机的块存储系统成为了整个云存储的重要组成部分,但传统的机械硬盘和存储区域网络(SAN)、存储附加网络(NAS)等存储架构已经越来越不能适应新的需求。新型存储设备—固态硬盘的出现,以它的高速读写特性快速在存储领域引发了一场变革。人们都希望通过它来提升存储系统的整体性能。但伴随高性能而来的是高价格,在面对PB级规模的数据中心时,全部采用固态硬盘而完全抛弃机械硬盘在经济上还难以承受,所以混合存储成为了一种兼具高性能和高性价比的可行方案。本文设计并实现了一种基于Ceph系统的负载感知的对象存储的分布式混合存储系统—BOBBS系统,它能够向云环境中的虚拟机提供高效的块存储服务,同时具备高可扩展性。它的底层是一个混合了固态硬盘和机械硬盘的对象混合存储系统,可以向上层提供适用于虚拟机的块存储服务。系统中存在两个层次的调度体系,在底层存储架构中,系统创建了两个分别由固态硬盘和机械硬盘构成的存储池,将由虚拟机磁盘镜像分割成的固定大小的对象放置在两个池上,并且能够动态地根据对象的冷热情况进行迁移,将热的数据尽量多地集中在固态硬盘上。在完成迁移的过程中,需要上层的监控节点进行信息收集、分析计算和制定调度策略,当系统规模扩大,这个节点很容易成为系统的性能瓶颈和单一故障节点,所以我们又对它进行了分布式化改造:首先是设计了表征监控器热度的模型,结合历史数据和当前监测数据,提出具有前瞻性的计算公式,建立热值模型。对于一台分析器接收到的多种表征其系统性能的数据,通过热值模型进行定量分析,量化区域的热度。其次是设计了监控器环状分布式拓扑结构,在监控器之间建立通讯,数据传输等渠道,为后面的调度算法和动态迁移机制提供了结构基础。最后是设计了热辐射调度机制和算法,在获取各个监控器的热度值后,通过基于热度值的调度迁移算法,把系统中高热值监控器的负载迁移到其周围低热度值的节点上去,以达到热辐射效果,平衡系统中各个监控器的热度。在完成上述工作后,我们对BOBBS系统和WHOBBS系统进行了对比试验。通过模拟块的工作流和文件工作流,我们对两个系统的性能进行了比较,也对BOBBS系统的动态负载迁移机制进行了验证。实验结果表明,BOBBS系统的总体性能要优于WHOBBS系统,而且系统内的热辐射机制能够通过动态的迁移,有效地将各个监控器的热度进行动态负载均衡,使其保持在一个较为合理的均衡水平。
其他文献
随着人工智能应用的推广,智能视频监控成为计算机领域的一个新的关注点,通过应用图像处理的相关方法分析监控器材拍摄到的视频,可以实现对目标的识别、定位、跟踪直至理解目标的特定行为,其核心是目标跟踪技术。本文以人体目标跟踪为研究重点,以TLD(tracking-learning-detection)人体目标跟踪算法为框架,深入研究和分析单目标的长时间跟踪算法。TLD算法只需要目标初始位置等较少的先验信息
阿格尼斯·芭尔莎是二十世纪颇具盛名的女中音歌唱家,指挥大师赫伯特·冯·卡拉扬曾评价:“芭尔莎是我们这个时代最杰出的女中音。”她自成一格的演唱理念,成为当代美声演唱革新的先驱。所塑造的一个个精典角色确立了其歌剧界的耀眼地位,同时她也是世人心中卡门形象的完美诠释者,至今难以被逾越。故本文尝试从三个方面系统的分析阿格尼斯·芭尔莎的演唱艺术。第一章集合芭尔莎的音视频作品,利用多种可视化手段梳理出其高频颤音
翁牛特右翼旗(翁牛特郡王旗)是清代内札萨克蒙古昭乌达盟十一个札萨克旗之一,也是清朝实行的备指额驸制的十三个蒙旗之一。有清一代,该旗在内札萨克蒙旗中,农业经济较为发达,蒙汉文化交融较为典型。尤其是在清朝对蒙古实行的“因俗而治”的统治政策背景下产生的极力扶植藏传佛教的政教环境当中,翁牛特右翼旗境内大小寺庙林立,喇嘛成群,藏传佛教寺庙和喇嘛对该旗社会政治、经济、文化产生了极其重要的影响。档案是历史研究中
离散正交变换(Discrete Orthogonal Transformation,DOT)在数字图像处理、视频压缩等领域被广泛应用,由于其原算法的计算效率比较低,这使得其快速算法被越来越多的人关注,研究其快速算法以及通用架构对媒体领域具有重要的实际应用价值。近年来,各种视频压缩标准不断被提出,对图像和视频的各方面指标要求越来越高,只靠一种类型以及具体点数的DOT快速算法已经不能满足图像和视频领域
目的:探讨西玛津对小鼠精母细胞(GC-2 spd)增殖的影响及可能的作用机制。方法:以小鼠睾丸组织cDNA为模板PCR扩增SPAG6蛋白编码区域,构建SPAG6/pEGFP-N2重组质粒,并通过酶切鉴定
背景1-甲基芘(1-MP)是烷基化多环芳烃的一个代表性化合物,具有肝脏致癌性。它的致癌作用依赖于代谢活化,即甲基的羟化和羟基的磺基结合这二步反应依次发生,以形成亲电子性终
随着时代的变化,艺术的形式也在不断发生改变,特别是在当代,这样一个消费文化占主导的社会;传统的架上绘画也受到了越来越多新媒介的冲击,那么如何在这个新时期创作出好的艺
目的观察牡荆素对链脲佐菌素(STZ)诱导的糖尿病小鼠睾丸功能障碍的保护作用以及探讨其作用机制。方法1观察牡荆素对糖尿病小鼠睾丸功能障碍的保护作用采用腹腔注射STZ 45mg/kg连续给药5天构建Ⅰ型糖尿病小鼠模型并随机分为正常组、DM组、西地那非组(5mg/kg)、牡荆素(10,20,40mg/kg)组,灌胃给药62天,观察牡荆素对糖尿病小鼠睾丸功能障碍的影响:(1)采用葡萄糖氧化酶法检测各组小鼠
双目立体视觉在定位、导航、无人驾驶、三维重建等领域得到了广泛应用。双目立体匹配技术作为双目立体视觉的关键环节,一直都是研究热点,它利用双目相机在不同视点对同一场景
虫草素(Cordycepin),也称蛹虫草菌素,化学名3′-脱氧腺苷,是第一个从真菌中分离得到的核苷类抗生素,作为蛹虫草菌的主要活性成分,具有抑菌、抗肿瘤、抗病毒、抗炎等多种生物