【摘 要】
:
在Hadoop MapReduce环境中,如果能预知作业的执行时间,就可在资源分配、任务调度以及负载均衡过程中作出更合理的决策,改善系统性能.在分析Hadoop MapReduce作业执行模式后,
【机 构】
:
河南理工大学计算机科学与技术学院,中国科学院深圳先进技术研究院
【基金项目】
:
国家自然科学基金面上项目(51274088).
论文部分内容阅读
在Hadoop MapReduce环境中,如果能预知作业的执行时间,就可在资源分配、任务调度以及负载均衡过程中作出更合理的决策,改善系统性能.在分析Hadoop MapReduce作业执行模式后,提出了一种作业执行时间在线预测方法.该方法在结合历史信息的基础上,可根据作业在不同阶段的执行进度在线预测执行时间.该方法已在Hadoop-0.20.2中实现,并在一个包含19个节点的Linux集群中进行了验证.实验结果表明,在最好情况下,根据该方法预测的执行时间和真实执行时间的误差约2%.
其他文献
2010年11月,迎着初冬的寒气,我们慕名采访了山东省莱西市经济开发区北马庄村的一家肉兔养殖场。只见偌大的场院清洁安静,5幢50多米长的兔合整齐地排列着,每排兔台都有两行上下三
针对山不拉煤矿近浅埋煤层地质条件,首次尝试实施切顶卸压沿空留巷技术,采取超前预裂爆破切顶卸压、超前支护与留巷加强支护技术,分析近浅埋薄煤层实施沿空留巷在矿压控制方
分析了目前一些高校中实验室队伍建设方面的几个问题及其产生原因,提出了相应的解决办法。
采用“鸡-草-肥-林(果)”的“林果鸡”生态循环新模式,通过种草养鸡、鸡粪还林等生态技术,实现种植养殖的良性循环,既减少了农村环境污染,又助农增收。近年来,在四川省丹棱县,这样的
基于多年来显微镜规范化管理的经验以及管理心理学中的相关理论,分析了当前显微镜管理中存在的一些重要问题,探讨了显微镜管理改革的内容和方向。
随着一年四季气候的周期性变化,蜜粉源植物的花期和蜂群内部状况也呈周期性变化,蜂群的四季管理也要相应变化以适应蜜蜂繁殖、生长、生产的特点。春季饲养管理技术春季管理的主
电流跟踪控制环节性能的优异对于有源滤波器的滤波能力有着重要影响.传统滞环电流控制响应速度快、结构简单,但因为环宽固定导致器件开关频率高,开关损耗大.为了克服传统滞环
实验室是高校教学、科研的重要基地。建设一支高水平实验队伍,作为实验室建设和教学研究工作的核心,是高等学校十分迫切的任务。根据该校的改革经验,打破实验室旧的管理体制,进入
分析了多校区高校技术物资采购工作的特殊性,介绍了如何针对多校区的特点建设支撑体系的情况。