【摘 要】
:
为了提高Hadoop调度器的调度性能,缩短Hadoop集群的任务整体响应时间,提出了一种基于CPU占用率的动态调度改进算法。首先对Hadoop传统的性能优化方法进行了对比,指出其存在问
【机 构】
:
重庆邮电大学计算机学院,重庆邮电大学高性能计算与应用研究所
【基金项目】
:
国家自然科学基金项目(21073242)
论文部分内容阅读
为了提高Hadoop调度器的调度性能,缩短Hadoop集群的任务整体响应时间,提出了一种基于CPU占用率的动态调度改进算法。首先对Hadoop传统的性能优化方法进行了对比,指出其存在问题的关键是缺乏动态性和灵活性。在此基础上,深入分析Hadoop默认任务调度模型,提出了一种以CPU占用率作为负载指标,在循环分配任务时根据反馈的负载指标判断节点负载情况的算法,动态适应负载变化。实验结果表明,该算法在Hadoop集群中,能有效提高集群性能。
其他文献
城市书房和农家书屋两个名词近年来频频见诸报端,引起了人们的注意。作为一种方式也好,作为一个项目也罢,它们在推动文化信息服务方面都起到了一定的积极作用。通过总结和比
文章运用模型实验的方法,研究无纺布对可吸入颗粒物的过滤效率。结果表明:无纺布对粒径小于10μm颗粒物的计重效率较小;无纺布对粒径小于10μm颗粒物的过滤效率,在小于0.8m/s
设计了一种输出功率约50W的LED恒流源驱动模块,其负载为由多只LED管(每只功率为1W)采用混联方式组成的LED阵列。通过对其电流型反激式变换及恒流控制电路的设计与试制,并在不
随着城市广大居民居住环境和住宅配套设施的不断改善,同时为了让住户明明白白消费,消除目前住宅以每个单元水表或以楼表为单位计量收费所出现的总分表差额与各住户再分摊的矛
<正>在高考的电学实验中,《测电源电动势和内阻》的实验无疑是一个重点实验,在练习和考试中出现的频率也较高,为了更好地理解和掌握此实验,在复习中,我们可以采用"基本模型"
在简介各种焊球阵列(BGA)封装形式的基础上,归纳出BGA封装的技术优势,包括引脚结构、封装尺寸和封装密度等,并分析了BGA封装的返修工艺技术。分析结果表明,BGA封装进一步缩小
心律失常是心血管科常见疾病,严重心律失常者可危及生命。历代古籍上记载针灸对心悸、怔忡等病症具有良好的疗效。针灸治疗心律失常在实验研究及临床研究方面均取得了一定进
目的比较分析在宫颈刮片检查中改用宫颈细胞刷取材与木刮板取材在宫颈癌筛查中的实用性。方法将2468例女职工随机分成试验组1228例、对照组1240例,试验组用宫颈细胞刷取材,对照
保险是通过分散风险提供保障的一种特殊的金融服务消费品,是现代社会经济系统非常必要的安全性服务需求。现有理论普遍接受"经济决定保险,保险促进经济增长"的观点,实证对前
目的探讨临床医学与公共卫生结合的管理模式对儿童喘息的效果。方法以248例5岁以下儿童喘息作为研究对象,分为观察组和对照组。对照组以最新儿童喘息诊治方案治疗,并配合以普