基于Hadoop的数据分析系统设计

来源 :数字技术与应用 | 被引量 : 0次 | 上传用户:flyfish11111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop是一个分布式开源计算平台,它以分布式文件系统HDFS和MapReduce为核心,为用户提供系统底层细节透明的分布式基础架构。HDFS为分布式文件系统提供存储环境,而MapReduce为分布式数据提供运算环境。其特点是高可靠性、高扩展性、高效性、高容错性。
其他文献
分析焦炭品质对高炉炉况的影响,通过应用预测模型,提出进一步提高焦炭品质的途径。
采用薄层扫描法测定银杏叶浸膏中白果内酯的含量,并进行了方法学研究。方法:色谱条件为:Kieselgel60GF254;乙酸乙酯-甲苯-丙酮-正己烷;检测波长为270nm。结果:平均回收率99.83%,RSD=1.78%。结论此方法简便、灵敏、准确、重复
目前白首乌的加工产品局限于食品(精制首乌淀粉),而其活性成分甾体酯苷、磷脂和多糖在加工的过程中流失于废渣和废水中。提出了综合利用制作白首乌淀粉后的废渣废水中的活性物
根据近年来的研究进展,综合评述和介绍了N-酰基氨基酸型表面活性剂的合成方法、性质及应用等情况。重点介绍了化学合成法和酶合成法的研究进展,并对这2种方法进行了对比分析
中小学学生课业负担过重,已经引起了社会广泛的关注.提高课堂效率则是“减负增质”的根本保证.笔者就自己在初中数学教学中如何提高课堂效率谈几点体会,仅供参考.1 明确数学
分析了数据通信模块在传统测井系统软件中的重要性,以及在面对新的应用中存在的问题。在总结了原有模块设计的基础上提出了基于插件技术的设计方案并且对其进行了实现。使测
三七药材为植物三七Panax notoginseng (Burk.)F.H.Chen的块根,是五加科人参属名贵中药材,主要用于治疗冠心病、心绞痛等心脑血管系统疾病[1~3].三七的主要有效成分之一是三七
环境监测是一项十分系统并且相对复杂的科学技术工作,其作用就是收集具有代表性、完整性、准确性以及可比性的综合环境信息,为科学的环境管理工作提供基本的服务和保障。良好
小麦是我国第二大粮食作物,也是北方粮食生产和许多种业公司种子经营的主要作物.小麦种子的生产规程虽不比杂交制种严格,但由于繁种面积大,承担生产任务的基地农户繁多,给种
如何提高课堂效率,向45分钟要质量是我们所有教师每天都在研究的问题.这些年,我站过几年讲台,听过一些课,参加过一些教研活动、一些听评课活动、一些课赛,对怎样提高课堂效率