Hbase相关论文
针对分布式列存储数据库的性能测试标准尚不成熟、测试数据量大、产品选型困难的问题,提出了一种列存储数据库的性能测试方法,详细介......
随着大数据时代的到来,海量数据存储成为很多业务急需解决的问题,为此,提出构建HBase分布式数据库集群系统。首先,简要阐述了HBase数据......
本文针对如何快速进行处理HBase表中数据的问题,提出了使用MapReduce并行处理HBase表中数据的关键技术,可利用集群资源,达到快速批......
国家级国土空间基础信息平台采用“1个主中心+N个分中心”的分布式架构。为实现多数据中心数据深度融合计算,本文开展了国家级国土......
面对传统医疗健康管理系统在存储和管理海量数据方面表现欠佳的问题,提出基于Hadoop对医疗健康数据进行高效管理和快速处理的方法。......
地理信息公共服务平台具有强大的扩展能力以及丰富的应用接口,是为政府以及公众提供地理信息服务的有效工具。在搭建平台的过程中,......
为了有效提高非结构化数据处理的效率,本研究围绕MapReduce框架、Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)、Hado......
随着电磁侦察数据的积累,使用传统关系型数据库存储海量历史数据逐渐表现出不易扩展、查询缓慢、查询方式不贴近业务需求等问题,需要......
针对企业数据管理系统,提出一种高可用数据管理系统设计和实现方法,该方法使用Redis集群用于数据的缓存以及实时可视化监测,使用Mysql......
针对海量瓦片数据具有单个文件小、文件数量多、整体占用空间大、不易管理维护等问题,通过对地图瓦片生成原理、地图瓦片NoSQL数据......
期刊
研究了HBase存储机制,针对现有存储查询方法效率低等缺陷,设计了HBase矢量空间数据存储表模式,如行键、过滤列族、几何列族及非几何列......
使用云计算技术实现电力对多比例尺海量矢量数据的存储与管理,从而为持久在线的空间信息服务提供有力的数据支撑,具有重要的现实意......
随着互联网技术的飞速发展,互联网应用所暴露出来的服务不再集成于某一物理机器上。它们通常位于不同服务器,并通过RPC(远程过程调......
随着物联网技术的兴起,工业企业中机器和传感器等设备每时每刻都在产生海量的设备日志数据。这些数据具有实时性强且没有止境的特......
海量卫星监测数据不断增大,为提高HBase数据库的入库效率,本文以张衡一号卫星空间电场探测仪ULF频段数据为例,进行基于HBase数据库......
随着信息技术的迅速发展,数据量激增,数据类型日益复杂,数据来源越来越广泛。大规模数据对数据库提出更高要求,大规模的数据交叉及......
随着大数据时代的来临,对于海量数据的管理和检索,提出了更高的技术要求。HBase作为Hadoop框架下的分布式No SQL数据库,以其强拓展......
hbase与hive是Hadoop生态系统中最为常用的两大框架,hbase主要用于存储PB级数据,hive主要用于复杂的条件查询,两者各有侧重点,本文......
随着公司的不断发展,资产也在不断地增长,常规的线下资产管理和流程申请耗费大量人力,并且线下资产管理中存在处理不及时、各种统计查......
随着互联网、PC技术、传感器技术的不断发展与普及,越来越多的高水平技术和多领域的应用都会涉及地理信息数据,例如数字城市,智慧......
随着电商平台的快速发展,物流行业增长迅猛,其中物流服务平台的访问日志能够反映用户的行为规律,从而挖掘潜藏信息助力物流服务平......
越来越多的应用基于大数据平台中的HBase表对海量数据进行高并发快速查询,但大数据集群中HBase表的存储设计和高效查询仍面临较多......
在云计算环境下,用户能够方便地按需获得满足其要求的软件资源或网络应用。然而,随着用户数量和被部署的服务数量的不断增加,云中......
洪灾数据类型多样、结构复杂、数据量巨大,随着时间累积给传统平台带来巨大压力.针对这个问题,通过结合大数据处理技术,将洪灾数据......
HBase可以实现海量数据的查询,但是在数据定位方面具有先天劣势。引入Hive对HBase进行优化,搭建了一个基于“HBase存储+Hive查询”......
自动站观测数据在气象业务和科研工作中具有重要的价值,经过多年的发展,气象部门积累了大量的自动站观测数据,现有的传统关系型数......
摘 要:当前导航监测站(简称监测站)的监测任务日益繁重,接收和存储的各类数据随之增多,如何有效地管理这些监测数据,为提高系统的定位精......
HBase是当今主流NoSQL数据库之一。但在使用HBase的过程中常常遇到一些框架不能自动处理的问题,需要人工介入。比如RIT,CallQueue......
伴随着物联网时代的到来,越来越多的传感器设备将接入到互联网中,庞大规模的传感器每时每刻产生着大量的数据。为了解决传感器数据高......
目前应用较多的大数据动态自动化平台均存在数据查询性能、数据迁移性能方面的问题,因此设计一种基于GIS数据交互的大数据动态自动......
随着校园网中教学资源数据量不断增加,为教学资源存储、查询带来了难度。为了优化教学资源存储管理,提高资源利用率,使用基于Hadoo......
HBase(分布式存储数据库)是大数据存储领域的热点技术,为信息化快速发展带来的存储问题提供了有效的解决方案。针对HBase检索低效......
针对如何处理车联网数据的峰值问题,提出了一种基于Hbase的车联网海量数据存储的中间件控制方案。首先报文通过Kafka传递到中间件,......
随着互联网时代的到来,异质信息的规模正在飞速增长。具有广泛应用的图数据不仅在数量上急剧增长,其包含的信息也更加多样化,因此......
我们正处于大数据时代,数据的增长速率已经远远超出了单机计算能力的提升速率。怎样有效提高分类算法分析处理海量数据的能力是目......
随着大数据技术和语义本体技术的飞速发展,领域RDF数据的规模也不断扩大。如今,领域知识图谱普遍由超过百亿数量级规模的RDF数据构......
随着航天技术、传感器技术的飞快发展,我国相继发射了多种型号的高分辨率卫星,这些遥感卫星在资源勘探、灾害防控、军事观察等方面......
随着网络技术的快速发展,许多多媒体项目都需要大量的计算机数据存储和读取,而如此大量的数据若只是在单一计算机上,并且在一个规......
当前人们进入了信息化时代,移动通信和互联网在人们的生产和生活中越来越重要。信息化时代需要海量数据的支持,传统的关系型数据库......
随着云计算的快速发展,分布式集群系统也被广泛应用,发展云计算技术已经成为我国重要的经济和科技发展战略之一,研究和发展云计算......
随着气象数据规模和种类的不断增长,气象数据已经逐渐进入海量服务阶段,而基于大数据背景提供更敏捷的数据服务已经成为业务发展的......
随着信息获取手段的增多和数据量的增长,我国预警领域的数据管理建设受到了广泛关注。当前面临的主要问题包括:传统的数据存储方式......
学位
随着海洋监测和预报技术的不断发展,海洋数据资料快速累积,数据呈现出类型多样化、维度丰富化、数据量爆炸式增长等特征,推动了海......
与城镇居民用水相关的各类数据的实时、智能化存储及管理是目前城镇用水管理系统迫切需要解决的问题之一。本论文设计了一种借助云......
大数据背景下,以互联网为信息交换媒介的各行业每天都在产生大量的数据。语义网的蓬勃发展使得Web服务的数量呈几何级增长,Web服务......
随着后勤信息化管理的变革,运输车辆监控、安防人员定位以及仓储温湿监控等流数据管理分析已全部纳入后勤综合管理系统,流数据的激......
随着我国广电信息技术与产业的快速发展,广电节目内容与视频服务日益丰富。为了避免大屏电视交互中用户发现和匹配个性化内容效率......