大规模数据处理相关论文
随着以传感数据为基础的物联网应用的发展,如何在大规模历史数据基础上实现针对高速数据流的实时计算成为云计算领域的新挑战。提......
在当今大数据时代，大规模数据处理主要是基于分布式的并行处理计算，调度在提高大数据并行处理框架的性能方面起着重要作用。Spark作......
随着智能时代对大规模数据处理的要求越来越高，摩尔定律下的处理器集成器件数量越发接近极限，当下急需通过架构的变化以应对大数据的......
在海量数据时代,如何有效处理大规模数据是目前科学和工程领域亟待解决的问题。非负矩阵分解(Nonnegative Matrix Factorization,N......
近年来,大规模图数据处理的需求日益强烈,一些图计算模型被提出,例如Pregel[1]模型,GAS[2,3,26]模型。它们可以分为离线和流式两类......
可视化技术是近年来发展起来的一种计算机实用技术。由于其对大规模数据处理时体现出来的高效性和直观性,故在多种领域得到广泛应......
基于物料需求计划(MRP)中的大规模数据处理问题,讨论了基于网格计算的制造服务实现模型,给出了解决MRP问题的两种并行算法.比较了......
Web的永久保存具有重要意义，国际范围内许多组织和政府机构相继建立了大型的历史网页存档系统来永久保存网页，如Internet Archive和W......
该文从挂篮荷载计算、施工流程、支座及临时固结施工、挂篮安装及试验、合拢段施工、模板制作安装、钢筋安装、混凝土的浇筑及养生......
近期笔者参加了国家统计局举办的“基于云计算技术的统计大规模数据处理高级信息技术”研修班,借此机会较系统、全面地了解了云计......
目的 凸能量泛函正则化模型(EFRM)的综述论文在国内外还少有报道,为使即将进入该领域的研究者全面了解发展现状,结合图像恢复,对该......
当前的网络数据存储系统在处理大规模数据时需要较长时间,增加了网络数据存储周期,存储性能较差。因此设计并实现一种大规模网络数......
交叉证认是实现多波段数据融合的关键技术,天文数据的海量性使这一问题必须要依靠计算机技术加以解决。按照PCAM并行设计模型设计......
在核应急响应期间，利用可视化手段直观展示大规模核素扩散数据的空间分布，有助于应急指挥人员快速有效地进行科学决策与指挥。本文基......
针对面向大规模历史数据的高并发数据流处理需求，为改进MapReduce的实时处理能力，提出了一种内存HashB树、外存SSTable文件的key／valu......
云计算作为当前最受关注的计算机技术之一,其自出现以来就展现出了强大的生命力,并从多个方面渗透到人们的工作、生活之中.也正因......
传统的Linux内核协议栈已不能满足大规模数据处理系统对网络传输越来越高的性能要求。现有很多研究是将原来在内核态实现的协议和......
本文对国内外知名大学和研究机构开设的云计算/大规模数据处理课程进行比较研究，从授课内容、授课形式等方面深入分析了Google 101......
对铁路行业的计算资源、数据处理进行了特征分析.探讨了云计算模型中的虚拟化技术在铁路计算资源整合及MapReduce编程模型在大规模......
在当今大数据时代,计算机处理数据的要求也随之增加。当待处理数据的容量大于计算机内存容量之时,常常需要内存与外存进行数据之间......
以实时传感数据和历史感知数据为基础的各类计算需求逐渐成为当前物联网应用建设中的关键,如何实现基于高速数据流和大规模历史数......
随着网络信息处理市场的快速扩张和信息处理数据量的急剧增长,针对大规模和超大规模数据的分布式计算处理技术成为倍受关注的工程......
近年来,随着信息时代的飞速发展,海量的数据被产生和存储。特别是在大数据时代的背景下,人们对于海量数据的挖掘和运用正在成为重......
针对水利普查数据海量、多维的特点,研究近年来在"大数据"概念下发展迅速的Hadoop与Hive,结合传统数据仓库在多维数据分析方面的成......
无线传感网络近年来的持续发展为桥梁健康监控提供了可靠和高效的平台。采用最新的CC2530解决方案使得无线传感网络能以更小的体积......
MapReduce框架和其开源实现Hadoop自从问世以来,受到了学术界和工业界的广泛关注和使用。但是开发一个高效的MapReduce应用通常需......
随着互联网时代发展到物联网时代,传统的网络变为了“物”与“物”之间互联的网络。这样改变不只是带来了网络规模、数据规模方面......
为了在大规模历史感知数据基础上实现针对高速传感数据流的实时计算,提出一种面向大规模历史数据的数据流处理方法RTMR,通过中间结......
随着移动互联网的发展，移动设备尤其是智能手机得到了广泛的应用和普及。同时，因为这些移动设备具有各式各样的传感器、可以收集各种......
针对大规模能源数据系统的存储与快速检索需求,提出了一种基于HDFS/Hadoop开源平台的云存储架构及多级索引目录体系,以及此架构下......
