【摘 要】
：
Spark是一种新型分布式海量数据处理平台,在应用执行过程中,Spark以任务作为最小执行单元。因此,任务执行时间预测是指导Spark进行性能分析、优化资源调度以及故障监控的基础
论文部分内容阅读
Spark是一种新型分布式海量数据处理平台,在应用执行过程中,Spark以任务作为最小执行单元。因此,任务执行时间预测是指导Spark进行性能分析、优化资源调度以及故障监控的基础。在Spark平台中,由于计算数据分布不均及网络资源的共享,导致同样计算逻辑的任务在不同计算节点上执行的时间可能产生很大差异,需根据实时运行环境进行动态预测。通过结合任务在不同节点所需数据量以及集群网络状况,对任务在不同节点的执行时间进行预测。实验表明,该方法对任务进行预估,误差可保证在19%以内,任务执行时间预估算法对Spark
其他文献
在“名牌战略”思想的指导下,海尔集团15年间由一个亏空147万元的集体小厂发展成为1998年销售收入达160亿的国家特大型企业。在“国际化战略”的指引下,海尔全球营业额突破60
内蒙古地处祖国北部边疆,横跨东北、华北、西北,是我国北方面积最大、种类最全的生态功能区,是'三北'地区重要的生态防线。党的十八大以来,在习近平生态文明思想指引
变压器是电力系统中广泛应用的电力设备。由于变压器范围分布广、应用频繁,其有功损耗占到整个电网总损耗的30%之多,故变压器的经济运行对整个电网的节能降耗有着重大的意义
本文设计了一套警车调度解决方案,该方案针对公安系统内部特殊的业务流程、勤务流程和管理流程、原有通讯系统的特点建立起的一种综合运用地理信息系统、全球定位系统、全球
著名学者梁启超在其《中国史绪论》中,根据中国在不同时期与外界关系的特点,将中国史划分为不同于以往的三个阶段,他将个三个时期的中国分别定义为“中国之中国”、“亚洲之
缓蚀剂的应用在当今工业生产中非常广泛，随着工业生产条件要求越来越高，缓蚀剂也从之前的单一缓蚀剂的使用发展到了复配使用缓蚀剂，如何使两种缓蚀剂的复配后起到协同缓蚀的效果
目的探讨微信平台在临床护理培训考试中的应用效果。方法选取本院入职1～25年的380名临床护士作为研究对象，随机分为对照组及观察组各190名，观察组护士运用微信轻发布平台对培训
目的通过对湖南省新型农村合作医疗(新农合)制度现有运行情况进行全面调查,掌握相关资料,深入分析湖南省新型农村合作医疗现状、存在问题、居民健康状况、住院费用及相关影响
在文言文教学中，创设情境，拉近文言文与现代生活的距离，培养学生学习文言文的兴趣，提高文言文教学效率，从而达到培养文言阅读能力、传承民族文化的目的。
本文介绍了数学应用题的解题中，利用数学建模思想来建立几种数学模型：“函数”模型、“概率与统计”模型、“方程（组）”模型、“排列组合”模型等。并对这些数学模型进行了解题策