【摘 要】
：
本文针对Hadoop自带的Map-Reduce调度器和LATE调度器的不足，提出了自适应的Map-Reduce调度方式。通过历史信息动态调整Map和Reduce任务各阶段的时间比例，以找出真正需要启动备
【基金项目】
：
基金项目：自然科学基金资助项目（60403034）
论文部分内容阅读
本文针对Hadoop自带的Map-Reduce调度器和LATE调度器的不足，提出了自适应的Map-Reduce调度方式。通过历史信息动态调整Map和Reduce任务各阶段的时间比例，以找出真正需要启动备份任务的任务。并将节点进一步分类，在快速节点上启动落后任务的备份任务，从而减小响应时间，并尽量避免节点空载，以免浪费系统资源。最后通过具体实验验证了自适应的Map-Reduce调度的有效性，从历史信息中学习的方式在实验中能减少15％左右的响应时间，综合各种技术，能够减少25％左右的响应时间。
其他文献
党的十九大提出的"八个明确"和"十四个坚持"的重大理论命题,是对新时代中国必须走全面、跨越发展道路的系统诠释,它对于社会主义现代化理论与实践发挥着举旗定向的关键作用.
丹江口是我国南水北调工程的水源地,设施农业生产过程中的生态保护非常重要。经调研,湖北十堰和陕西安康水源涵养区设施蔬菜害虫主要包括刺吸类害虫、食叶类害虫和叶果类害虫
<正> 笔者经常患泡疹性咽炎,疼痛难忍,甚至需急诊输液治疗,经试用耳穴贴压法每每获效。为此,自1985年9月,在我科推广此法,共收治20例(泡疹性咽炎2例,外感咽痛18例),以王不留
工厂化低温育苗、室外池塘生态育苗、天然野生蟹苗的成活率比工厂化高温育苗分别高出15%、32%和57%,V期幼蟹养至1龄扣蟹成活率分别高出23%、32%和83%,1龄扣蟹养至2龄成蟹成活
在电视产业的发展中,电视编导需要对其内容与形式做出更多的把控与创新,这在电视节目的创作中起着重要的作用。在新时代背景下,电视编导应该提高自身素质,不断提高创作技巧,
马克思恩格斯生态思想以实践为基础审视人与自然以及人与人的关系.作为主体的人,既要充分发挥主体能动性,又要尊重客观自然规律,从而实现与自然的和谐统一.当前,我国环境治理
药用白菊是我国的重要经济作物之一,但药用白菊枯萎病的发生给生产造成了重大损失。为有效防治该病,阐述了药用白菊枯萎病的致病机理以及防治现状,并结合其他作物生物防治的
综述了海上风电发展现状及趋势。海上风电场海域的水文气象条件、地质与岩土条件与陆地差异大,调查及勘测方法亦随之差异大。阐述了若干种调查及勘探方式并提出了5点建议。