基于支持向量机的HDFS副本放置改进策略

来源 :计算机工程 | 被引量 : 0次 | 上传用户:javapages
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为实现超大规模数据的存储并提高容错性,Hadoop分布式文件系统(HDFS)采用一种机架感知的多副本放置策略。但在放置过程中没有综合考虑各节点服务器的差异性,导致集群出现负载失衡。由于放置时采用随机方式,造成节点之间的网络距离过长,使得传输数据会消耗大量时间。针对以上问题,提出一种基于SVM的副本放置策略。通过综合考虑节点负载情况、节点硬件性能、节点网络距离为副本找到最佳的放置节点。实验结果表明,与HDFS原有的副本放置策略相比,该策略能更有效地实现负载均衡。
其他文献
大学生对马克思主义理论的效用、价值是否认同,是高校马克思主义大众化目标能否实现的关键。在微媒体时代,大学生通过微信、微博等媒介会迅速、广泛地接触到非马克思主义的观
随着福州市经济总量持续增长、综合实力持续提升、人民群众获得感持续增强,以及福州新区、自贸区福州片区、福建建设21世纪海上丝绸之路核心区和生态文明先行示范区等一系列
区域化党建是新形势下推进党建创新的一项重要探索,是一项为民之举、务实之举。上海市浦东新区惠南镇惠民医盟着眼共同需求、共同利益、共同目标,以区域化党建为载体,积极探
大学生职业能力培训涉及多方面以及多因素,从观念和体制两个方面进行了探讨。在观念方面,大学当局对于职业技能培训缺乏应有的重视,没有找到实施职业技能培训的正确规律,社会
实施发展性教师评价是一项复杂的教育系统工程,从实践的角度分析,发展性教师评价有四个实施要点:以促进教师发展为核心;强调评价过程的互动与反思;以日常教育教学行为为切入点
目的改进和完善维胺酯胶囊含量和有关物质的测定方法,并与法定紫外吸收系数法(UV)进行比较,考察不同方法对含量测定的影响。方法建立高效液相法(HPLC)同时测定含量和有关物质
在电子政务建设过程中,每一个政府部门要做到在该类系统要素的标准规范和统一规划引导下,大量的资源逐渐被方便地共享,同时也极大地提高应用领域的工作效率。做到这一点,必须推进
长沙走马楼三国吴简提供了大量的社会生活信息.通过对孙吴初期长沙郡临湘侯国疾病人口所做的一些统计与分析,可在具体史实上印证司马迁<史记&#183;货殖列传>记载的江南地区存
现代教学论指出:教学是教师的教与学生的学的统一。这种统一的实质就是师生间的互动,交流与沟通,以及共同发展。课堂评价正是促进师生、生生的共同交流与共同进步的重要手段
提出了一种基于Android系统的光谱传感物联网移动终端软件设计,可以实现用户与光谱传感物联网的数据交互及数据处理功能;移动终端包括用户信息,节点信息,数据信息三个模块,使