航空企业基于大数据技术进行数据分析的研究

来源 :第六届中国航空学会青年科技论坛 | 被引量 : 0次 | 上传用户:ice588
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文首先介绍了大数据的相关技术以及航空企业进行数据分析应用的现状;进丽详细阐述了现有数据分析系统或平台的弊端和传统航空企业对于大数据技术的认识误区;最后,在充分理解企业业务数据内涵和大数据相关技术的核心原理基础上,提出了航空企业基于大数据技术进行数据分析的基本架构,具体分析了数据源及存储、中间件的选择、可伸缩系统架构的搭建、并对未来进一步的发展提出了建议和展望.目前已经搭建了一个拥有4个节点的Ha-doop集群,并且部署了MySQL、HDFS、HBase、Hive等。并在此基础上实现了日志文件自动处理,FDR、QAR原始数据的并行译码与数据挖掘,ACARS报文数据的处理,图形化展示,监控报警等功能。未来,随着数据量的进一步增大,将逐步增加集群节点的数量,并且进一步研究航空相关的数据挖掘算法到MapReduce模型的转换,进一步优化非结构化数据的高效存储与查询。
其他文献
学位
水电站水库调度图是实现水库合理运行的重要手段,常规调度图绘制方法更注重可靠性的要求,对效益指标的兼顾比较有限。本文首先针对水电站中长期发电调度图常规绘制方法中存在
【研究目的】原发性高血压是人类的常见多发病,其并发的心力衰竭和脑卒中等心血管疾病严重威胁着人类的身心健康。除了血压升高外,交感神经活动亢进是高血压的另一个主要特征
  大气数据系统是飞机最重要的系统和数据源之一,一方面给飞行员提供准确的飞行参数,另一方面给自动飞行控制系统提供准确的输入参数。同时其显示的参数对按照中国民用航空规