MapReduce技术相关论文
随着计算机辅助设计与地质勘探技术的发展。在石油、天然气等矿物能源勘探中,大量运用了曲面重建技术。曲面重建技术是逆向工程的......
天文望远镜技术的发展实现了天体观测数据的全波段覆盖。交叉证认用来确立不同波段数据间天体的对应关系,是多波段数据融合的关键......
伴随着互联网、物联网和移动互联网的快速发展,每天会产生海量数据,数据处于爆炸式的增长状态,这预示着大数据时代的到来。大数据......
随着信息化技术在钻井行业的应用,钻井工程数据呈现指数级增长方式,海量的钻井工程数据的存储、分析及利用成为当前钻井工程行业的......
Internet问世以来,作为其主流应用的电子邮件也得到了飞速的发展。但随之而来的垃圾邮件,不仅严重占用网络资源,威胁网络安全,更对......
学位
OLAP(On-LineAnalyticalProcessing,联机分析处理)是随着数据仓库技术出现的一种数据分析处理技术,它允许用户快速地从不同的角度和层......
光线跟踪是一种真实的显示虚拟场景的算法,该算法所渲染出的图像具有非常逼真的效果,清晰度可以达到照片的级别,而且算法的原理简......
结合我国统一坚强的智能电网建设需求,为应对电力信息化建设可能出现的海量数据,寻找行之有效的并行且弹性的数据处理技术是解决该......
近年来,随着移动通信、移动互联网、智能终端等技术的高速发展,移动上网用户日益普及,加之社会竞争压力的增大,人们渴望能够随时、......
学位
随着资源爆炸式增长,搜索引擎已成为互联网用户获取信息的重要工具,传统搜索引擎多采用集中式架构,将搜索系统部署在一台服务器上,......
近年来,随着基于位置的服务(LBS)和移动互联网的快速发展,地理空间数据的数据量正在迅猛的增长。这些迅速增加的空间数据给传统的......
我们每天都在创造、传递和接收信息,信息在当代正处于空前膨胀的状态。面对处理如此海量的数据所带来的问题,专家学者和业界都在进......
随着互联网的发展,数据呈现几何式的增长,如何能够从巨大的数据中快速寻找出对自己有用的数据,将会是大家面临的一个问题。搜索技......
学位
网络蜘蛛为搜索引擎提供了需要检索数据的来源,其性能直接影响着搜索引擎的服务质量。进入Web2.0时代后,互联网数据呈现出海量增长的......
MapReduce 是 Google 开发的一种并行分布式计算模型,已在搜索和处理海量数据领域得到了广泛的应用。但是MapReduce框架中的“一对......
封闭立方体是联机分析处理中一种有效的数据立方体压缩技术,但封闭立方体的并行算法目前很少有相关文献研究。提出了一种简单而实用......
云计算的核心技术之一是MapReduce技术,目前国内外云计算研究机构都对MapReduce技术高度关注,并在不同的体系结构上都进行了实现......
多路数组聚集技术主要用于以高维数组为基础数据结构的数据立方体的完全立方体计算。随着大数据时代的到来,对数据高效的分析利用显......
封闭立方体是一种非常有效而重要的数据立方体压缩技术,目前还缺乏对其并行算法的研究.为此,文中提出一种采用C—Cubing方法并通过Map......
针对Haloop模型不能实现各个计算节点的通信和Twister模型出现大量的数据重叠,提出了以下的改进:在Hadoop模型中增加各个节点的通信......
云计算技术的应用领域之一就是信息安全,采用kNN分类算法,在基于云计算的环境下,采用HBase数据存储方式存储比对库短信、待测短信......
大数据处理流程包括:数据获取、数据集成、数据分析和解释3个阶段。大数据应用的技术和系统包括:云计算及其编程模型MapReduce、大......
期刊
根据我国石油企业目前的生产经营形势,在以效益为中心的理念背景下,如何通过优化提高生产经营效益是一个备受关注的重要课题。本文......
随着当今时代信息技术的快速发展,大数据概念一经提出便被广泛应用到了多个行业领域当中,将之应用于电网系统当中表现出了十分明显......
在当今大数据时代,计算机处理数据的要求也随之增加。当待处理数据的容量大于计算机内存容量之时,常常需要内存与外存进行数据之间......
云计算是由并行计算、分布式计算和网格计算发展而来,MapReduce是云计算的核心技术之一,它为并行系统的数据处理提供了一个简单、......
期刊
结合大数据系统的一般结构,介绍和对比了当前大数据领域在文件存储、数据处理和数据库领域的关键技术。通过各种技术的对比,得到了......