【摘 要】
:
开发海量数据处理系统时存在技术框架选择不确定问题。从理论及应用角度对两种主流的海量数据处理架构MPP和Hadoop进行对比,分析各自技术特点,阐述其与传统数据处理的优势。
【机 构】
:
国电南瑞科技股份有限公司技术发展中心,南京上古网络科技有限公司
论文部分内容阅读
开发海量数据处理系统时存在技术框架选择不确定问题。从理论及应用角度对两种主流的海量数据处理架构MPP和Hadoop进行对比,分析各自技术特点,阐述其与传统数据处理的优势。分析结果表明,Ha⁃doop在存储数据规模上可轻松支持PB级别,而MPP架构大多只支持TB级别;Hadoop对海量半结构化、非结构化数据存储和处理有一定优势,但在处理速度和易用性上不及MPP;在结构化数据处理、响应性能和衍生工具等方面MPP则占优,适用于查询业务场景较多项目。通过分析两大框架底层核心技术以及归纳优缺点,为企业相关应用的技术
其他文献
在教育信息化2.0时代,微课是组成“互联网+教育”的一种数字化资源。虚拟演播室技术是一种电视节目制作技术,将虚拟演播室技术与微课制作相结合,探讨利用FREELANCE虚拟演播室
为有效促进研究生在学习过程中深入探究,展开批判性思考,实现对知识的深度学习,将数课平台引入学习者在线学习中,以期提供具有指引性的学习支持。通过文献分析并结合研究生深
根据安全策略的组成结构和性质,可采用多参与者协同制定策略的方式以降低工作成本,区块链可为协同制定提供支持。设计一种区块链方案,通过制定适用于安全策略协同制定的收益
将三块相同的纯铜片浸润在不同浓度的CuSO4溶液中,经过一定时间(12小时),每个铜片的表面生成一层Cu2O薄膜。通过样品的反射光谱和光致发光(PL)图谱研究了Cu2O薄膜的光学特性,并分
造纸行业是全国最重要的基础原料工业之一,与整个国民经济和人民日常生活的联系极其密切。但造纸行业面临的产能过剩和替代危机的问题也日益突出。本文选取山东XX纸业股份有
苹果蠹蛾主要为害苹果果实,寄主有苹果、梨、杏、桃、沙果、山楂等多种果树,在甘肃省张掖市临泽县一年发生2代和一个不完整的第3代,为害果实后,造成大量果实被害脱落。因此,