日志综合管理平台基于Storm框架的实现

来源 :中国新通信 | 被引量 : 0次 | 上传用户:alicial
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
日志对于每个系统来说都是不可或缺的一部分,而现阶段对日志的处理效率却不尽如人意。实时性日志考验的是大数据处理框架的实时计算能力,基于Storm并借助开源框架Kafka,设计了一个实时数据收集与处理的系统,将数据转为流的形式,对收集来的数据直接在内存以流的形式进行计算,输出有价值的信息保存到Redis。最后对系统进行性能测试以及计算能力的测试。实验结果表明,该系统可扩展性良好,且并行计算能力稳定,适合大量实时数据处理。
其他文献
【摘要】 推进广播电视的全面、健康、不断发展的重要程序就是为观众供应清晰、优质、完善的电视节目,作为衡量电视受众的关键指标——电视信号传输效果影响着广播电视行业的发展进程。所以,需要对广播电视传输设备实施必要的日常维护,为传输体系营造最好的服务环境,在保证设备可以正常运行的前提下,提高节目播出的质量,加强电视台的服务。  【关键词】 广播电视信号 传输系统 维护管理  一、广播电视传输系统维护的主
赤小豆,又名红小豆、朱红豆。本品为豆科植物赤小豆或赤豆的干燥成熟种子。中医学认为,赤小豆性味甘、酸,平,无毒。归心、小肠二经。具有利水除湿、活血排脓、消肿解毒的功效。