数据一致性的测量与评估

来源 :湖南大学 | 被引量 : 0次 | 上传用户:beiwei72
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全球计算机系统处理的信息数量不断增长,数据质量成为业界十分关注的问题。数据质量是一个多维概念,它既依赖于消费者的需求,又需要符合公司或组织设定的标准。正是因为如此,对数据质量评估是一件困难的工作。一致性问题是本文研究数据质量问题的一个切入点。在系统和软件质量需求和评估过程中,对一致性进行量化是十分复杂的,一方面需要量化一致性测量指标,另一方面,还需要选择合适的测量函数来计算指标值。现在越来越多的分布式系统被开发,它们之间通过通信网络为用户提供方便的数据访问。在网络出现故障的情况下,一个重要的问题是如何保证主库数据的可靠性,同时保证多个副本的相互一致性。因此,对主库和副本进行不一致检测就是一个不容忽视的问题。传统的方法可以通过一些简单的方法来判断不一致,比如主库和副本数据完全比较的方法。为了有效评估数据的一致性和提高数据质量的测量效率,本文基于MySQL数据库系统,构建了数据一致性的测量与评估框架,从目标实体、测量方法、测度元素和测量函数四个方面,描述了一致性评估框架的内涵。本文还提出了两种不一致数据检测方法,并实现了一个数据一致性检测工具。为解决上述问题,本文研究了数据一致性的测量和评估,具体工作如下:(1)提出了数据一致性测量与评估框架,并设计了质量测量函数。(2)提出了一种副本不一致数据检测方法。该方法通过数据分块、计算数据块摘要值和不一致数据检测等步骤,实现对副本数据的一致性检测。其中使用了 CRC算法计算数据块的摘要值,大大提升了检测速度。(3)设计了一种基于条件函数依赖的单表检测方法,基于CFDs进行单表一致性检测研究,通过生成检测查询SQL的方式实现对单表违例数据的检测。(4)基于FCE-AHP模型和六西格玛分级标准,提出了一种一致性分级方法,并通过实验验证了模型的有效性。本文的研究成果有助于数据质量的提升,既适用于备份系统的一致性评估,也适用于单文件数据一致性的研究,可为分布式系统的一致性测量和评估提供理论基础。
其他文献
目的:探索新医改后江苏省卫生资源配置现状与发展趋势,为促进江苏省卫生事业建设提供参考。方法:从人口和地理两个维度出发,以卫生资源中财力、物力、人力3种主要资源为落脚
<正>美国糖尿病学会(ADA)从1998年开始发布糖尿病医学诊治指南,并从2002年起依据最新研究证据每年年初发布新版内容。最新的2014年版指南亦已发布,与2013版指南类似,分为10大
下官河大桥是连接千垛菜花景区至李中水上森林公园的一座景观桥梁,主桥采用4跨中承式飘带系杆拱桥。文章简要介绍了主桥的总体布置及各主要结构的设计分析,以期为国内同类桥
目的:探讨浙江省某医院重症监护病房(Intensive Care Unit,ICU)患者疾病应对方式与非理性信念的关系。方法:以浙江省某医院ICU住院的88例患者为研究对象,随机抽取普通病房住
"微课"教学是对传统教学方法的一种改革,它更好地利用多方面资源,使学生及教师获得以往常规课堂所无法给予的新体验,促进学生的知识面逐步走向"精"与"专",老师也拓展了知识面
1病例资料林某,女性,58岁,主因“右侧脸颊部剧烈疼痛间作15d加重3d”,于2012年6月12日入院。患者于半月前无明显诱因右侧面颊部剧烈疼痛,疼痛持续数秒或数分钟不等可自行缓解,尤以
<正> 克莱德曼的音乐是美的,但更是流行化的、通俗的商业产品,他的音乐是典型的消闲音乐,背景音乐。这些音乐的艺术价值远远不能与古典音乐大师们的作品相提并论。最重要的是
古文字学中的货币文字,是指在货币上铸成的关于面值、地名等方面内容的文字。本文对战国文字中,铸在货币上的数字文字的特点做了探讨,包括以下三个方面的内容:战国货币文字的
目的研究孕妇生殖道B族链球菌感染对母婴预后的影响,提高临床对孕妇生殖道B族链球菌感染的认识。方法选取2011年1月-2013年1月入院待产的孕妇350例,所有孕妇于孕36~38周,取阴
目的:研究金樱子Rosa laevigataMichx.果实的化学成分。方法:运用正反相硅胶,凝胶(Sephadex LH-20)等多种柱色谱进行分离纯化,根据理化性质和波谱数据进行结构鉴定。结果:分