【摘 要】
：
交通流数据具有多来源、高速率、体量大等特征,传统数据存储方法和系统暴露出扩展性弱和存储实时性低等问题。针对上述问题,设计并实现了一套基于HBase交通流数据实时存储系
【基金项目】
：
北京市自然科学基金重点项目(4131001);北京市属高等学校创新团队建设与教师职业发展规划项目(IDHT20130502);北大方正集团有限公司数字出版技术国家重点实验室开放课题;北方工业大学科研启动基金资助项目
论文部分内容阅读
交通流数据具有多来源、高速率、体量大等特征,传统数据存储方法和系统暴露出扩展性弱和存储实时性低等问题。针对上述问题,设计并实现了一套基于HBase交通流数据实时存储系统。该系统采用分布式存储架构,通过前端的预处理操作对数据进行规范化整理,利用多源缓冲区结构对不同类型的流数据进行队列划分,并结合一致性哈希算法、多线程技术、行键优化设计等策略将数据并行存储到HBase集群服务器中。实验结果表明:该系统与基于Oracle的实时存储系统相比,其存储性能提升了3~5倍;与原生的HBase方法相比,其存储性能提升了2~3倍,并且具有良好的扩展性能。
其他文献
为了更好地将芒硝、玄明粉、朴硝作以区别,作者从药物名称、来源、性状成分、性味、归经、功效、主治、用量、用法上作了详细的鉴别,供临证者参考用之。
<正>会议主题:中国重点产品境外登记分析,印度产品登记政策分析和登记项目开展方法,越南新政策解析,墨西哥新政策解析,国外登记与国内登记统筹协调关系等时间:2015年9月16日
概述民族乐团各乐器组的拾音,探讨民族乐团整体拾音方案的确定,分析民族乐团与西洋乐团整体音响结构,探讨不同排位方法、曲目形式、配器与拾音方案之间的联系。
本实验是以可食新鲜玫瑰花、火腿、糖粉、面粉等作为主要原料,通过单因素实验和正交实验来研制玫瑰火腿月饼馅料的最佳配比,结果显示:当鲜花与火腿的比值在10∶1,糖粉为5 g,
简要介绍一种新的成本精算方法,并运用持有成本精算方法,对企业持有成本进行货币化成本细分,对仓储质量管理指标实施数据化建立,确立仓储质量控制的量化数据基础,对质量管理
本文从ESI高被引作者库中的华人科学家入手,通过网络搜集到其中233名科学家的履历信息,对其进行深度加工,利用Kaplan-Meier法研究了不同因素下各阶段生存风险率的差异,并用Co
水闸是低水头的挡水、泄水建筑物,水闸往往与堤防、电排站、船闸、水电站等水工建筑物结合在一起组成水利枢纽。所以水闸能否安全运行关系到防洪安全和当地的经济发展。因此,
对一类含参变量的非线性Riemann-Liouville分数阶微分方程进行了研究,主要利用的工具是锥拉伸与锥压缩不动点理论,通过对问题中参数取值范围的讨论,得到了该问题正解存在与不
光辉灿烂的中原古代文明对中医药文化有着深远影响。河南地处中原腹地,南宋以前,在华夏文明发展的每个阶段,一直是核心区域;中原是中华民族的发祥地;中原人杰地灵,圣人辈出;
在汉越互译过程中,掌握词汇在不同语境的准确含义、恰当选择应用,对于能否将原语的语言所表达的思维内容准确完整地重新表达出来,至关重要。对同近义词﹑缩略词和外来语进行分