Hadoop备份数据存放策略的改进

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:long1024
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对于默认的Hadoop备份数据存放策略来说,一旦本地的数据副本发生失效,那么就需通过远端机架上存放的备份数据来实现恢复,而对于默认的备份数据存放策略,备份数据存放节点的选择具有随机性,那么可能带来的问题是不同节点间备份数据存放不均衡,数据恢复时由于距离的因素造成内部带宽的巨大消耗。针对上述问题,提出一种改进的备份数据存放策略。该策略将节点之间的距离,节点的负载以及备份数据恢复次数纳入节点选择的考虑范围,由此计算出每个节点的匹配度,随之选出匹配度最高的节点作为远端机架间的备份数据存放的最优节点。该策略不但实
其他文献
这次新冠肺炎疫情,是新中国成立以来在我国发生的传播速度最快、感染范围最广、防控难度最大的一次重大突发公共卫生事件。党中央审时度势,综合研判,及时提出坚定信心、同舟
蛋白质交互关系(PPI)是生物医学领域的重要研究内容之一,目前通过生物医学实验得到的PPI信息主要以文本的形式存储在相关文献中。随着生物医学文献数量的飞速增长,人工识别PP
矿山企业高利润时代渐进尾声,但矿业持续增长的总态势难以改变.12月12日,在中国国土资源经济研究院举办的2013年矿产资源形势分析座谈会上,来自相关行业协会及机构的专家对矿
期刊
本文从阿拉善盟未利用地开发利用现状入手,总结未利用地开发利用的主要类型和存在的主要问题,提出今后未利用地开发利用实施差别化政策,为未利用地开发提供参考。
为了找出可能与丝羽乌骨鸡独特性状形成相关的基因,本研究运用差异显示PCR技术等对丝羽乌骨鸡与快大型肉鸡肝脏组织中差异表达的基因进行筛选,并通过生物信息学方法对所筛选
近期,素有国内煤炭市场风向标之称的秦皇岛港煤炭库存一度突破了强制疏港警戒线,同期煤炭进口再次刷新历史纪录。多方因素使原本就低迷的煤炭市场更加沉闷。
对引起中国2006年山西、宁夏2省(区)H5N1亚型禽流感疫情的代表毒株——A/chicken/Shanxi/2/2006(H5N1)(CK/SX/06)进行了全面研究。结果表明该病毒具有高致病性禽流感病毒(HPAIV)特征,基因组
北美是一个矿藏丰富的大陆,不仅种类多,而且藏量也很丰富.因为各种地质构造不同,所以矿藏分布也有一定的规律.在加拿大地盾区,由于前寒武纪岩层广泛出露,矿藏组成的基本特点
期刊
甘肃:被征地农民养老分类参保近日,记者从甘肃省被征地农民社保政策落实情况汇报会获悉,该省对被征地农民区分不同情况解决养老问题,其中征收土地面积80%以上的被征地农民,剩余土地
信息物理融合系统(CPS)是物联网进一步发展的产物,CPS将物理过程与信息计算过程紧密联系,是一种复杂的混合系统,Modelica与AADL是适用于信息物理融合系统(CPS)的嵌入式系统体