基于NoSQL的多维Web数据仓库框架设计与应用

被引量 : 5次 | 上传用户:woaiyueyue1314
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络技术和信息技术的发展,企业所面对的市场竞争日益加剧,用户的需求也越来越个性化,对市场变化做出快速反应就成为了企业赢得竞争的关键。数据仓库就是为了满足和支持企业管理决策而生的,随着互联网和Web技术的发展普及,以及云计算概念的出现,在以B/S应用架构为主的Web领域也开始大量的使用数据仓库。然后,随着Web2.0网站的兴起,对数据库的需求已经发生了转变,其中对数据高并发读写的需求、海量数据高效率存储和访问的需求、数据库高可扩展性和高可用性的需求越来越高,但是如事务一致性、写实时性、读实时性以及复杂的SQL查询等却并不多,因此就诞生出了一种能够适应上述需求的新型数据库,就是非关系型数据库,也就是NoSQL。由于关系型数据库依然是数据存储的主要媒介因此在构建数据仓库时也主要依赖于关系型数据库系统但是在数据仓库中查询分析要远远多于修改和删除操作,因而关系型数据库的功能应用很少,这是一种非常适用NoSQL的应用场景。本论文就是以基于非关系型数据库(NoSQL)的Web数据仓库系统为研究对象,使用非关系松散数据存储类型作为基础完成一个轻便、高效的Web数据仓库框架的设计为目标。论文完成的主要工作有以下几点。(1)首先通过对国内外学者的一些经典的和最新的研究进展进行整理和归纳,对本文中所使用的数据仓库和非关系数据仓库的概念和技术进行简要概述,并对国内外发展现状和主要应用进行分析。(2)对Web数据仓库的体系结构和构建方法进行深入研究。Web数据是由文本、图片、声音、图像内容等组成的,这些数据多存在于企业服务器和网站的HTML文件中,它们没有严格的结构及类型定义,属于半结构和非结构化的数据。由于Web数据与传统的结构化数据有着巨大差异,这就使传统的数据集成技术难以应用到Web数据仓库的构建过程当中,需要针对Web数据的特点设计由数据层、中间件层、数据仓库层组成的三层数据集成框架。以及由表示层、应用层和数据层组成的Web数据仓库体系结构。(3)基于MySQL的数据仓库构建流程。目前众多的Web2.0网站均是基于开源软件进行开发,开源软件的主流开发框架是有Linux操作系统、Apache或Nginx服务器软件以及MySQL数据库所组成。由于MySQL作为数据库管理系统在Web2.0网站中的应用及其普遍,因此,基于MySQL的数据仓库对Web2.0网站来说是一种降低安装、维护以及学习成本的解决方案。本文会结合Web数据集成技术以及Web数据仓库体系结构设计基于MySQL的数据仓库解决方案(4)设计NoSQL数据仓库多维模型和框架。由于MySQL是一种轻便、开源的关系型数据库管理系统,其在功能和性能方面存在着很多缺陷和限制,单纯的使用MySQL进行数据仓库的构建存在着诸多的问题,比如大数据量的存储和查询、高速读写、分布式等方面的弱势。而NoSQL的出现从一定程度上弥补了这些问题。因此使用开源的NoSQL来结合MySQL构建Web数据仓库,尤其是多维Web数据仓库,可以在无需进行大量投资的情况下,进一步提升数据仓库的统计、分析能力。通过上述几个方面的工作本文提出一种使用开源软件(NoSQL和MySQL)来构建多维数据仓库的解决方案,帮助众多的中小型互联网企业,在无需更多成本提升的情况下,也能完成数据仓库的建设,为企业的决策提供数据支持。
其他文献
目的:探讨慢性乙型肝炎患者长期拉米夫定治疗与全程管理的临床转归。方法:本研究为回顾-前瞻性队列研究。非随机分为两组:1)治疗组:建立慢性乙型病毒性肝炎(CHB)和肝硬化(LC)的LA
新疆为全国5大牧区之一,草原畜牧业一直是新疆经济发展社会的重要组成部分和最具特色的基础产业。自古以来,靠天养畜、四季游牧是牧民传统的、主要的生产方式和生活方式,始自
信托凭借其独特的结构设计,具有风险控制及金融创新之功能,也因此信托在全球蓬勃发展起来,我国也引入了信托制度。信托形式层出不穷,但信托相关税制却停滞不前,主要存在着重复征税
为了提高早实核桃的产量和品质,以河北绿岭果业有限公司示范园生产基地盛果期的绿岭、辽宁1号、鲁果1号、上宋6号、中林1号和绿早6个早实核桃品种为试材,采用形态观察、显微镜
绿色植物作为城市生态的基础设施,不令可以改善城市的环境,提高绿化的覆盖率,而且可以愉悦身心,给人美的享受。园林植物群落是城市植物景观的基本单位,是城市绿地系统的生态
运动控制技术作为一项传统产业的重要分支,在工控业领域起到了举足轻重的作用。运动控制器的出现推动和促进了运动控制技术的发展,迎合了数控技术发展的要求。本课题旨在研究制
目前,我国公路总里程已突破400万公里,二级以上公路46万公里,其中高速公路8万公里,居世界第二。到“十二五”末,随着公路网规模进一步扩大,公路总里程将达到450万公里,国家高
目的:本课题是通过临床观察的研究方式,运用全国著名老中医药专家郭文勤教授的经典验方黄金青白汤治疗频发室性早搏,中医诊断为心悸,辩证为痰瘀交阻型,观察黄金青白汤对室性早搏
随着知识经济时代的来临,终身学习已经成为当下人们面对竞争的关键法宝。而过去那种获取信息、知识的方法已经无法难以实现他们的愿望。因此,作为为人们提供再学习机会的教育
在国家推进教育信息化的背景下,关注作为教育信息化基础设备的交互式电子白板在学校的实际应用情况,是具有现实意义的。在研究过程中采用了文献分析法、对比研究法、观察法与调