基于数据仓库的数据追加技术的研究与应用

来源 :南昌大学 | 被引量 : 0次 | 上传用户:wp840716
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于计算机应用的飞速发展,数据仓库技术成为IT业界的热门研究方向之一。随着市场不断提出新需求,数据仓库急需高性能的、可靠的数据追加方案,以对各数据库中数据进行有效的管理,为数据仓库提供准确的数据,提高数据仓库应用于数据分析和决策支持的正确性和有效性。 针对上述问题,本文在分析数据仓库及数据追加技术的相关理论基础上,综合当前主要的数据追加方案的优缺点,提出了一种结合物化视图、日志、工作流等技术的数据追加方案TVL(Time-View-Log),并将该方案应用于“江西省政府决策支持综合服务系统”项目中,取得了较好的效果。论文研究的主要内容及成果包括以下几个方面: 第一,在分析数据仓库及数据追加技术的现状及难点、阐述数据追加方案特点的基础上,提出了一种新的数据追加方案TVL(Time-View-Log),并将其应用于数据仓库体系架构中; 第二,结合物化视图、日志、时间戳等技术,完成了在ETL过程中数据迁移和数据清洗,提高了数据质量和ETL速度,降低了对业务数据库和数据仓库性能的影响,并应用工作流技术分离了数据追加周期和数据仓库抽取周期; 第三,基于数据仓库的基本架构,根据实际应用的要求,给出了数据追加方案TVL的具体应用,实现了基于数据仓库技术的“江西省政府决策支持综合服务系统”项目中的数据追加,包括项目系统总体架构及各层次设计和实现等。
其他文献
自组织网是一种自治的无线网,整个网络不需固定的基础设施,可以在不能利用或不便利用现有网络基础设施的情况下,提供一种便捷的通信支撑环境,拓宽了移动网络的应用场合。目前
根据计世资讯对于开发企业信息化解决方案的需求调研结果表明,基于业务流程管理的应用软件市场正呈现指数级、井喷式增长趋势。工作流产品作为开发业务流程管理软件的解决方案
随着网络技术的飞速发展,Internet技术已经渗透到日常生活和工业生产的各个领域,这使得远程实时监控工业自动化生产成为可能。技术人员无须亲临现场(尤其在恶劣环境下)就可以对
无线通信及相关技术的发展促进了新的网络组织方式的形成,MANET就是其中最重要的方式之一。MANET具有无固定基础设施支持,无中心和自组织,支持移动无线传输,易于安装部署等特
随着中国加入WTO,媒体产业逐步开放,媒体之间的竞争加剧,电视媒体广告业正面临着前所未有的挑战。如何将日益堆积的广告业务数据进行有效管理,挖掘其中埋藏的信息,如何吸引客户和
随着教学改革的深入和计算机技术与应用的发展,多媒体网络教学成为传统教学模式的发展方向。近几年,国内外涌现了大量的多媒体教学软件,大多数都具有比较类似的特征,如音/视
本文研究方言口音普通话语音自动切分算法,主要服务于方言口音普通话语音库建设。近年来,随着语音学研究转向口音化、口语化的自然语音,方言普通话语音库已经成为国内语音库
形式概念分析(FCA)是一种概念化知识处理的强有力的工具,目前广泛应用于信息检索、数据挖掘、软件工程、知识发现等领域。随着信息化以及数据库规模的迅速增大,数据库中不仅包含
随着网络及计算机在人们生活中的日益普及,图像、音频等多种形式的多媒体文件极大地丰富了人们的生活。同时人们对于图像的画质要求也在不断提高,于是图像处理就提到了研究的
随着互联网、物联网及云计算相关技术的迅速发展,相关科学领域的数据呈现快速增长的趋势,如何快速准确的分析日益增长的数据成为一大难题。当前许多领域的成熟软件仍然是单机