【摘 要】
:
随着大数据云计算等技术的兴起,以数据中心为代表的集群化分布式存储系统日渐成为存储的主流方式。保证分布式存储系统的可靠性及优化系统故障恢复功能,对构建高可用数据中心
论文部分内容阅读
随着大数据云计算等技术的兴起,以数据中心为代表的集群化分布式存储系统日渐成为存储的主流方式。保证分布式存储系统的可靠性及优化系统故障恢复功能,对构建高可用数据中心具有极其重要的现实意义。当前主流分布式存储系统副本场景下的故障恢复过程,恢复粒度大,恢复期间拷贝大量无用数据,造成恢复进程和系统正常服务间的严重带宽资源竞争。在大规模分布式存储系统中,故障节点的系统资源不足以同时满足恢复与正常服务,导致恢复耗时过长、客户端服务质量陡降。同时受到恢复过程影响,恢复期客户端服务可能发生不必要的阻塞,进一步降低客户端服务质量。基于日志的快速故障恢复方案包括两部分优化策略。针对现存故障恢复方案中恢复粒度大、恢复耗时长的问题,提出了细粒度恢复策略,通过设计细化日志,详细记录故障期间客户端的访问历史,分析合并原始日志、总结故障期间真正被修改的数据区间,结合日志完全消除无用数据的拷贝,有效缓解恢复过程与正常服务对带宽资源的竞争矛盾,从而有效缩短恢复总耗时。针对客户端服务受恢复进程阻塞、服务质量陡降问题,结合日志提出了一种精确的I/O阻塞策略,保证仅当客户端I/O命中故障期被修改数据区间时,才发生阻塞、触发恢复流程。该策略有效消除以往大粒度恢复过程中,客户端发生非必须阻塞的问题,进一步提升恢复期客户端服务质量。最后,结合分布式存储系统Ceph进行了方案实现,并结合不同负载进行性能测试。实验结果表明:基于日志的细粒度故障恢复策略,有效消除恢复期间无用数据的拷贝问题,极大缓解了恢复期带宽压力及系统资源竞争,对于不同块大小的随机写和顺序写类型负载,恢复总耗时缩短平均高达80%和20%。基于日志的客户端精确阻塞优化策略,有效消除恢复期无用的客户端I/O阻塞,对于不同块大小的随机写和顺序写类型负载,恢复期客户端带宽提升平均高达5倍和11%。
其他文献
构建 cDNA 文库时,为了提高获得全长 cDNA 的可能性,在进行连接和包装反应之前,应当采用Sepharose CL-4B 柱层析对 cDNA 首先进行筛分。一般的方法是在提取 mRNA 之后,利用逆
AIM: To evaluate the techniques, results, and complications related to computed tomography(CT)-guided percutaneous core needle biopsies of solid pancreatic lesi
Asymmetric-dimethylarginine (ADMA) competes withL-arginine for each of the three isoforms of nitric oxidesynthase: endothelial; neuronal; inducible. ADMA issynthes
以自制的壳聚糖为亲和层析载体,鸡蛋粘蛋白作配基,通过戊二醛交联构建成亲和吸附剂,对胰蛋白酶的亲和层析提纯进行了研究。结果表明,胰蛋白酶活性回收率达70%,纯度经聚丙烯酰
结核性脑膜炎(简称结核)是常见的中枢神经系统感染性疾病,本文报告成人结核性脑膜炎临床表现,部分病例颅脑CT扫描结果,提示对早期结脑要有高度警惕性,CTC对结脑有诊断价值,结脑治疗要早期
<正> 在真核生物中,CuZn-SOD(铜锌超氧化物歧化酶)分布于细胞的可溶部分(胞浆及线粒体内膜间隙),Mn-SOD(锰超氧化物歧化酶)则局限于线粒体基质。两种 SOD 均可催化超氧阴离子
吉林省西部中药种植与研发工程中心依托白城师范学院生物系,于2006年3月成立。该中心是白城师范学院批准成立的直属科研机构,中心下设栽培研究室、成分分析研究室、育种研究室
<正>各式花样的骚扰电话成为人们日常生活的一大困扰,让人不堪其扰。2018年11月初,工信部下发《关于推进综合整治骚扰电话专项行动的工作方案》,向骚扰电话"开刀"。陌生来电,
本文从创新能力培养的角度,论述了在物理教学中应把继承教育与创新教育结舍起来,正确处理好继承与创新的关系,进一步加强对学员创新能力的培养。
大学学术管理组织是大学组织管理体系的重要组成部分,为克服目前我国大学政治权力、行政权力过于强大而学术权力过于弱小的状况,需要采取措施充分调动学术性组织参与学校管理