【摘 要】
：
针对传统联机分析处理(OLAP)处理大数据时实时响应能力差的问题,研究基于分布式内存计算框架Spark加速的数据立方体计算方法,设计基于Spark内存集群的自底向上构造(BUC)算法
【基金项目】
：
河北省自然科学基金资助项目(F2014502069)~~
论文部分内容阅读
针对传统联机分析处理(OLAP)处理大数据时实时响应能力差的问题,研究基于分布式内存计算框架Spark加速的数据立方体计算方法,设计基于Spark内存集群的自底向上构造(BUC)算法——BUCPark,来提高BUC的并行度和大数据适应能力。在此基础上,为避免内存中迭代的立方体单元膨胀,基于内存重复利用和共享的思想设计改进的BUCPark算法——LBUCPark。实验结果表明:LBUCPark算法性能优于BUC算法和BUCPark算法,能够胜任大数据背景下的快速数据立方体计算任务。
其他文献
在中学数学中复合函数是一种很常见的函数 .各种资料、杂志上对它的研究很多 ,但其中由ｆ[ｇ(ｘ) ]求ｆ(ｘ)的定义域和求ｆ(ｘ)的问题在各种资料中常常写法不一 ,存在着疑问 ,给教学带来了
我国是典型的“富煤、少油、缺气”的能源大国,煤炭资源为我国的经济社会发展提供了坚实的保障。一直以来,我国煤炭的产量一直居于世界的前列,是典型的产煤大国,但是随着资源
随着中国经济社会的不断发展与软实力的不断增强,国际社会,尤其是西方传统和现代媒体行业,对中国问题及中国形象的报道都呈现出上升的态势。作为西方媒体行业里程碑式的标志
目的研究黄丝郁金氮、磷、钾吸收与积累特性,为黄丝郁金高产栽培、合理施肥提供依据。方法定期定点采集黄丝郁金样品,采用凯氏定氮法、钒钼酸比色法、火焰光度法分别测定各器
建立了植物性肽粉中42种有机磷农药的固相萃取-气相色谱-火焰光度检测器(SPE-GC-FPD)方法。样品用乙腈作为提取溶剂,提取液过石墨化炭黑-氨基复合柱净化,用乙腈-甲苯(体积分
为建立牛肉和牛奶样品中布氏杆菌的免疫磁珠富集方法,采用布氏杆菌特异性抗体包被磁珠并优化包被条件,制备成免疫磁珠。对不同稀释梯度的布氏杆菌菌液用免疫磁珠富集,联合布
石评梅是一位富有传奇色彩的女作家。她的散文就象一把利刃，直指人类灵魂最深处，向我们逼问人生的意义、价值，逼我们思索命运与人类的关系。坚强与脆弱、勇敢与消极，尤其是对死亡
<正>一、流动儿童面临的教育公平问题1.教育起点不公平。就教育起点公平而言,主要包括以下两个方面:首先是就学权利平等,其次是就学机会平等。从宏观来看,据2003年国务院妇女
按照国家土管局土地利用现状分类标准，利用叠合的海宁市长安镇１∶１万同时期土地详查电子地图的全域地面实况数据，在遥感图像处理常规分类方法的范畴内，采取最大程度利于提高分类精
<正>数字工厂结构帮助制药厂以更少的投入获得更多回报,实现整体设备效率提高4%Cambrex Profarmaco是一家领先的制药公司,生产的70多种活性成分主要用于仿制药的生产。对产品