不平衡数据负载下基于萤火虫算法的Strom调度优化

来源 :中国新通信 | 被引量 : 0次 | 上传用户:stslayer
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Storm作为实时性的数据处理系统在处理流式数据时性能优势显著,但其调度器在任务调度时无法感知节点资源造成节点资源闲置、topology延时过高、集群吞吐量低等问题.引入萤火虫算法通过感知集群资源,本文模拟萤火虫在晚上的群聚活动的自然现象,将节点的资源动态变化表示为萤火从的荧光素,任务调度则是寻找集群的最优解,该算法的引入保证了Storm任务调度的有效性.实验验证结果表明,与默认调度相比,引入萤火虫算法后Storm具有更优的任务调度效率、更少的平均处理时延和更高的集群吞吐量,有利于平衡集群各节点负载,提升性能.
其他文献
该文从挂篮荷载计算、施工流程、支座及临时固结施工、挂篮安装及试验、合拢段施工、模板制作安装、钢筋安装、混凝土的浇筑及养生、测量监控等方面人手,介绍了S226海滨大桥
期刊
该文从挂篮荷载计算、施工流程、支座及临时固结施工、挂篮安装及试验、合拢段施工、模板制作安装、钢筋安装、混凝土的浇筑及养生、测量监控等方面人手,介绍了S226海滨大桥
期刊
本文对刚体转动惯量测量过程中对结果造成影响的因素进行误差分析,认为对测量结果造成影响的因素主要有:砝码下落过程摆动,测量仪器没有在水平位置上,绕线塔轮轨道和滑轮上轨
该文从挂篮荷载计算、施工流程、支座及临时固结施工、挂篮安装及试验、合拢段施工、模板制作安装、钢筋安装、混凝土的浇筑及养生、测量监控等方面人手,介绍了S226海滨大桥
期刊
期刊
无论你是翻开杂志还是打开移动设备,随时都可以关注到最新的各类装备设备消息、最权威的专家学者视角,《中国设备工程》杂志打造出的五位一体新旧媒体融合宣传平台,为广大读者开
该文从挂篮荷载计算、施工流程、支座及临时固结施工、挂篮安装及试验、合拢段施工、模板制作安装、钢筋安装、混凝土的浇筑及养生、测量监控等方面人手,介绍了S226海滨大桥
期刊
一种单结晶晶片及太阳电池单元,单结晶晶片的主表面是相对于单结晶的[100]轴,于[011]方向具有α(0°
在全球产业链中利润过低、频繁遭遇贸易摩擦和来自其他发展中国家的竞争,这是近年来一直困扰中国制造业的难题,工程机械行业也不例外。目前,中国制造业核心竞争力还停留在低
目的:探讨曲美他嗪对急性心肌梗死溶栓再通患者的心肌保护作用.方法:68例因急性心肌梗死而行早期静脉溶栓的患者随机分为曲美他嗪组(T组)和对照组(C组),T组在常规治疗的基础
期刊