基于AHP的Reduce Task预设配比在Hadoop调度中的应用

来源 :数据通信 | 被引量 : 0次 | 上传用户:jiajiawangwang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对Hadoop在进行具体MapReduce任务调度时,所存在的Reduce Task无法在一个合适的MapTask完成比例启动的问题,提出了一种基于AHP的Reduce Task预设配比启动方案.该方案基于层次分析法(AHP),选取在资源调度时影响性能息息相关的三个参考指标:文件上传时间、Reduce完成度(Map完成100%)以及系统的响应时间,经过实验得到三个参考值,最后经归一化后进行多属性决策分析得到最佳的Reduce Task启动方案.在本文实验环境下的最佳Reduce Task最佳启动配比为4
其他文献
<正> 调拨运输是物资流通过程必不可少的重要环节,要求以最短的运输路线,选择最合理、最经济的运输工具,在一定时间内实现一定数量的物资从空间上的转移,从而达到最低的运输
历元是一种重要的时间标志,以简化流程、提高效费比为目的,用数字存储示波器和计算机相结合,提出并试验了一种操作简单,精度和实时性较好的远程获取时间历元的方法。
目的:探讨乳腺原发高分化神经内分泌肿瘤的临床病理学、免疫组化特征和预后。方法:对一例手术切病例进行常规切片、免疫组织化观察,结合术前细针穿刺细胞涂片并复习相关文献。结
目的:分析胎膜早破与难产的关系,探讨处理方法。方法:选择医院2013年7月至2014年12月接收的胎膜旱破患者87例作为实验组,随机抽取同期无胎膜旱破患者88例作为对照组,对比两组患者
党的十八大提出了2020年实现全面建成小康社会的宏伟目标,但我国部分地区尤其是西北少数民族地区还深受贫困问题的困扰,因此帮助这些地区解决贫困问题就成为全国人民一道进入
目的:探讨对胃出血患者进行优质护理的临床效果。方法:对我院于2013年1月1日至2014年12月31日期间收治的126例胃出血患者进行研究,按照护理方法的不同将上述126例患者分为对照组
通过对昏迷病人的病情从意识状态、生命体征、脉搏、呼吸、血压几个方面加以观察。找出对昏迷病人的最佳护理方法,昏迷病人的护理要维持良好的治疗环境,保持呼吸道畅通,营养和液
<正>我印象特别深,2012年年底,在一个咖啡馆里,爱奇艺创始人龚宇邀请我到爱奇艺入职。他说,咱们给你起个title吧,你叫"首席内容官"。那是我第一次听到我所从事的行业,原来叫"
市场经济的新形势,给煤炭企业的发展提出了更新更高的要求,迫切需要以人为本,改进方法,选准切入点,大力加强和改进思想政治工作,以适应煤炭企业在不断发展中出现的新情况、新问题和
丢包问题是ATM络维护中的常见问题,但因其形成原因复杂,故障点隐蔽,成为维护工作中的难点。本文结合大量实际案例,针对ATM网络上业务丢包问题的形成原因、解决方案进行了全面深入