实时数据仓库中基于QoS的更新与查询调茺策略研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:chenjung00
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着企业和组织的信息化建设的不断发展,企业或组织已收集了大量的数据,利用数据仓库技术(Data Warehousing)和联机分析处理技术以及数据挖掘技术为决策者提供了定量化的决策依据。数据仓库系统已经成为企业和组织生产经营决策不可或缺的辅助工具。然而,传统的数据仓库一般是周期性更新的,并且更新的周期是一天或一周。所以,决策所用的数据并没有包括最新的信息。从而,基于传统数据仓库的战略决策在时间的实时性上不能满足要求。因此,出现了实时数据仓库系统(Real-Time Data Warehousing,RTDWH)。   实时数据仓库系统中数据源的数据变换需要及时地捕获以便能够及时地更新到数据仓库中,而数据仓库上的查询分析又是在线的,因此会引起数据更新和用户的查询分析之间的冲突。本文的主要工作也致力于解决以上两个问题上。   针对变化数据的捕获问题,本文采用了Oracle提供的CDC工具来实现变化数据捕获。本文中给出了一种基于CDC工具的变化数据捕获方案并给出了相应的流程设计,同时通过实验证明了该方案的可行性。在解决数据更新与查询冲突的问题上,采用由用户内部机制与外部机制结合的策略,并通过服务质量(QoS)指标监测反馈来保证数据的新鲜度与查询的响应速度。外部机制是由用户指定查询速度需求与数据新鲜度的需求情况下,来完成数据的更新与查询的调度算法;而内部机制是在外部机制不能保证系统正常更新的情况下,来强行执行数据更新的一种算法。实验结果表明本文提出的QoS指标和调度策略,能够很好地协调数据更新和用户查询之间的冲突。
其他文献
随着网络应用的扩展,网络安全受到的威胁日益严重,尤其是恶意代码的泛滥对网络和应用造成了很大的破坏。在恶意代码中,计算机蠕虫由于无需人的干预,能够自动传播,因此造成的
随着信息技术在社会中渗透的不断加深,信息安全已成为当今社会重要的研究课题之一,基于人体生物特征的身份鉴定技术越来显示其重要价值。虹膜由于具有唯一性、稳定性、识别率高
随着数字视频服务在图像精度与质量上的要求越来越高,能够适应更大屏幕、更高分辨率的超高清电视技术现已问世以满足这一需求。由于超高清图像中具有很多像素,利用原有的H.26
Web日志数据挖掘技术是一种广泛运用于互联网的技术。其目的是从互联网海量日志数据中挖掘有意义、有价值的数据和信息,从而指导搜索引擎更好的满足人们的查询需求。当前web
随着计算机网络的应用日益深入、广泛,分布式数据系统逐步成为企业级信息系统的应用模式。越来越多的部门、企业的内部信息呈现出异地存储的特点。例如银行、股票交易所和政
随着微电子技术和计算机技术的发展,嵌入式系统已成为计算机领域的一个重要组成部分,并成为近几年来的研究热点。基于单片机、ARM、DSP为核心的嵌入式计算机系统以其高性能、
本文针对水电站运行特点,结合水电厂实际运行要求和在电网中的作用,根据新一代可编程控制器、现场总线技术、网络技术和先进的软件工程设计方法在水电站计算机自动化控制中的实
随着无线传感器的广泛应用,无线人体区域网络(简称体域网)将极大地推动医院智能监护体系的发展。为了让高龄、独居老人的健康状态得到很好地监测和保护,体域网健康估计方法的
随着工程网络建设规模的不断增大,各行各业对其网络可靠性的要求也在不断的提高。网络可靠性作为工程网络建设的一项重要指标,时刻影响着其布局与规划。如何快速、精确地计算
随着网络存储技术的发展,网络存储系统的安全性要求越来越高。在基于对象的网络储存系统实施安全访问控制的过程中,存在用户与权限直接关联所带来的权责不明晰和管理复杂等问题