Hadoop平台公平调度算法研究与优化

来源 :计算机时代 | 被引量 : 0次 | 上传用户:zy15400444
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop MapReduce框架的公平调度算法以统一的固定配置文件管理计算节点上计算槽的数量,这不能保障集群负载均衡,亦不能满足不同用户的资源需求.针对公平调度算法配置方式的不足,提出一种动态反馈的调度算法.该算法结合公平调度算法预先分配的特性,能够对计算节点上的计算槽进行动态调整.实验结果表明,基于动态反馈的改进算法有效地提高了集群的执行效率.
其他文献
会计信息化的发展使企业内部控制的内容、手段等发生了变化。为了有效保护资产的安全与完整,保证会计信息的真实、可靠,企业迫切需要针对信息技术所带来的会计信息系统风险,加强
目前很多大型企业应用系统大多通过F5负载均衡设备来进行流量压力处理和业务访问速度优化工作,但随着业务应用部署规模的扩大,业务数量的不断增多,配套进行负载均衡的F5设备也越
网络社团发现的研究在生物学、计算机科学和社会学等多个领域具有重要意义。近年来,随着科学技术的进步,人们提出了很多社团划分的算法。本文综述了该领域比较有代表性的一些算
探讨力竭运动对大鼠心肌自由基生成的影响,将16只大鼠随机分为安静组和运动组,运动组采用跑台力竭运动模型,运动后即刻取样,测定血清中一氧化氮(NO)浓度、心肌中丙二醛(MDA)、超
随着国家节能减排政策的深入人心,利用自动化控制技术实现设备低消耗、低排放成为研究方向。对莱钢制氧机组压缩机自动化控制系统的设计组态及技术特点进行阐述。控制系统利用
利用DNA体外重组技术,将质粒载体pUM3上的抗砷基因片段亚克隆到含有强启动子(tac启动子)并具有广泛寄主范围特性的IncQ族质粒pMMB24上,成功构建了含有强启动子的抗砷质粒pSDR