【摘 要】
:
随着近年来移动互联网和计算机行业的迅猛发展,产生的数据量呈现爆发式的增长。数据量的爆发式增长引发了许多的新的技术和名词,大数据就是其中之一。传统的关系型数据库无法
论文部分内容阅读
随着近年来移动互联网和计算机行业的迅猛发展,产生的数据量呈现爆发式的增长。数据量的爆发式增长引发了许多的新的技术和名词,大数据就是其中之一。传统的关系型数据库无法面对大数据的巨大数据、高扩展性、分布式计算等特性。新兴的NoSQL技术种类非常多,其中有很多在大数据领域表现良好。HBase是Apache软件基金会的一个开源的分布式存储系统,它是NoSQL的一种。HBase能和在大数据领域非常流行的大数据计算框架Hadoop很好的整合,为大数据提供高扩展,高可靠的数据存储方案。大数据存储技术和传统的RDBMS是完全不同技术。对大多数企业而言,之前的系统都是使用的传统的关系型数据库,这和新兴的并在大数据领域举足轻重的NoSQL具有很大的差别。随着系统的逐渐庞大,传统的关系型数据库将无法很好地支持。本文通过对HBase及大数据相关技术研究,设计了基于HBase的应用平台,根据精品课程和大型开放式网络课程(MOOC)系统的具体需求,实现了系统在平台上的运行。首先,对HBase技术和大数据技术进行了研究,着重介绍了大数据特点、HBase数据存储原理及特性、Hadoop技术、ZooKeeper、Solr。其次,提出并设计了基于HBase和大数据技术的解决方案和架构,包括整体架构设计、数据存储和访问设计、数据迁移设计、实时搜索架构设计。然后,分析了MOOC系统与实验室精品课程中讨论答疑模块的数据需求,主要分析了数据存储、数据迁移、数据访问与数据搜索。接着,根据设计方案和架构实现了具体的功能。最后,对设计与实现进行了性能测试和稳定性测试,分析测试结果和提出了改进措施,验证了系统的可行性。
其他文献
随着老龄化社会的到来,空巢老人在养老过程中面临着经济、精神以及养老服务的缺失。本文从宏观背景、客观因素和独特因素等三方面对城市空巢老人的需求缺失的原因进行了分析,
随着经济不断发展,合同内容多样化的要求,违约金的功能及作用日渐受到重视。我国目前的违约金制度中将违约金按照功能划分为赔偿性违约金和惩罚性违约金,我国现行法律赔偿性违约
随着科技的日新月异,信息技术也悄然走进农村校园,使教学手段得到不断更新,越来越多的老师在日常教学中采用多媒体作为辅助教学工具。多媒体设备和技术广泛在农村初中的普及
环境污染和破坏问题在我国日益严重,已成为一大公害。在我国传统的诉讼制度框架下,无论公民或组织等任何主体在与环境污染及破坏无直接利害关系的情况下均难以寻求司法保护。
环境司法工作日益受到重视,但由于举证难、赔偿低等因素限制,当事人往往不愿意通过司法程序维护自身权益。同时,由于环境案件专业性强,证据采信和事实认定难度大,且难以执行,
<正>目前,美国、德国、荷兰、瑞士等国家比较流行会员制共享租车"Car Sharing",即顺风车。国内顺风车发生在熟人之间,陌生人通过上网加入顺风车俱乐部、在小区张贴搭车信息等
<正> 近年来,我国商业银行的不良资产呈逐步上升之势,如何采取有效措施加强信贷管理,构建全方位的信用风险防范体系,已成为包括国有独资商业银行在内的各家商业银行的重大课
随着经济和技术的发展,工程建设项目的管理模式日趋多元化、多样化。EPC总承包模式已成为大型石油工程建设项目的选择。S试采工程EPC项目地理位置特殊,QHSE作为工程建设的重
从上个世纪九十年代初开始,我国城市信息化、政务信息化的建设已经开始启动,信息化的建设规模也从单机-局域网-城域网、互联网从小到大地变化,应用系统也经历从单一的OA、网
<正>作为犯罪法律后果的刑罚因涉及对公民最基本人权的剥夺,从而使得对其判定应当具有较其他法律责任更为严格的裁判标准。定罪与量刑作为刑事审判的两大环节,共同决定着刑事