实时流处理系统Storm的调度优化综述

来源 :计算机应用研究 | 被引量 : 0次 | 上传用户:yilishabai123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据技术的发展,相对于Hadoop等传统的批处理系统,流式处理系统具有更好的实时性特点。在已有的流式处理系统中,Storm系统具有良好的稳定性、高可扩展性以及高容错性等优点,使它在流式数据处理系统中脱颖而出。但是在任务调度方面,Storm系统并没有做过多的考虑,默认采用相对简单的轮询调度法,导致系统在性能上存在瓶颈。近年来针对Storm系统的调度问题,研究提出了各种优化方案。从实时流处理系统Storm的调度优化出发,将这些优化方法分为四类,并详细阐述各类中具有一定代表性的方法,分析其优缺点以及适用的
其他文献
本文立足海南国际旅游岛建设这一时代背景,针对海口旅游地产业的发展现状及其投融资问题进行探讨,特别是对构建海口旅游地产业投融资平台的因素进行分析,力图从海南国际旅游
目的构建基于磁性分离和催化发夹组装(CHA)信号放大策略的外泌体双膜蛋白共表达检测平台。方法细胞培养与细胞上清液中外泌体的分离纯化和表征。超分辨成像技术与免疫印迹实
专家证人制度是各国证据法的重要内容之一。我国进行证据立法和构建这一制度时,应整合现行法中原有的制度资源,并根据实际情况适当吸收与借鉴其他法域的经验和做法。具体说,主要
超高性能混凝土(UHPC)因其优异的力学性能、施工性能和耐久性能而成为近几十年来世界各国混凝土材料的研究热点,但普通UHPC因灰色和粗犷的外观限制了它在装饰性建筑中的应用。近年来我国开始关注利用UHPC方法制备无机人造石材、建筑装饰板材和清水混凝土,并出现了一批工程应用实例。本文利用白色硅酸盐水泥和江西特色固废资源(锂渣、超细白矿粉)制备UHPC,研究了各组分材料对UHPC物理力学性能的影响,采用
在石油开采过程中,钻井设备是必不可少的重要工具,钻井设备状态、性能的好坏直接影响到石油开采的效率、质量和成本,为此,做好钻井设备的维修和保养工作,已经成为提升油田生
从具有高效纤维素降解能力的菌群中筛选出一株鞘氨醇单胞菌,命名为Sphingomonas sp. CX7,并对该菌株进行了性质表征。以添加0.1%微晶纤维素的葡萄糖培养基培养CX7,测定CX7产
专家证人制度是各国证据法的重要内容之一。我国进行证据立法和构建这一制度时,应整合现行法中原有的制度资源,并根据实际情况适当吸收与借鉴其他法域的经验和做法。具体说,主要
素描课程作为高职教育艺术设计专业中的重要基础课程之一,在培养学生艺术审美、设计思维、创新思维方面的具有非常关键的作用。随着时代的发展,绘画的形式和内容也产生了巨大
基于对实践教学内涵及范式变迁的重新审视和对教师教育实践教学长期存在弊端的反思,为了充分发挥实践教学在教师教育中的重要作用,培养适应基础教育改革发展需求的新型合格教
近年来全球经济持续放缓,建筑业市场竞争加剧,建筑公司纷纷进行战略转型升级,"一带一路"倡议的提出以及中国新型城镇化发展,则为建筑公司带来了新的市场与机会。面对机遇与挑