一种改进的HDFS副本放置策略

来源 :长春师范大学学报 | 被引量 : 0次 | 上传用户:fy9112003
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在HDFS默认放置策略中,放置副本时未考虑节点实时负载,易导致集群系统负载不均衡。由于放置副本采用随机方式,易造成存放副本节点网络距离过大,影响系统的数据传输性能。针对以上问题,本文提出一种改进的副本放置策略,该策略综合考虑节点CPU使用率、内存使用率、带宽使用率等负载指标,结合节点网络距离,对节点进行综合性能评价,最终寻找最佳副本存放节点。实验表明,与默认副本放置策略相比,该策略可提高集群数据传输效率,在负载均衡方面也有一定的改善。
其他文献
为解决轿车车身冲压线端拾器Tooling的空间结构设计和标准件选型主要依赖工程师经验的问题,以及由标准件长度系列的不连续性所导致的手工调整的效率瓶颈问题,分析了Tooling装
目的:研究介入热化疗栓塞治疗对肝癌患者癌细胞恶性生物学行为的影响。方法:将94例原发性肝癌患者随机分为A组和B组,每组47例,A组患者接受介入热化疗栓塞术治疗、B组患者接受
目的:观察关节镜下单纯盂唇修复与肌腱切断及固定两种手术方法治疗单纯ⅡC型上盂唇前后(superior labrum from anterior to posterior,SLAP)损伤早期疗效。方法:回顾性分析关节镜