基于Markov预测模型的MongoDB分片集群负载均衡策略研究和验证

被引量 : 0次 | 上传用户:ws715203sw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着web2.0技术的飞速发展,大规模分布式数据存储技术对传统的关系型数据库带来了前所未有的挑战。关系型数据库在面对海量数据下的高速访问、大规模并发查询、非结构化数据存储以及数据库集群的横向扩展时,日益显得捉襟见肘。因此,一种全新的数据库——非关系型数据库应运而生了。在众多非关系型数据库中,MongoDB越来越受到web应用的青睐。本文在阐述了MongoDB面向文档的特点后,重点研究了在分片集群下,MongoDB默认的根据片键切分数据的机制和基于Chunk迁移的负载均衡策略。作者发现,这种基于Chunk迁移的负载均衡策略只能保证集群所存储的数据均匀地分布到各个分片节点,并没有考虑各个分片节点上的数据访问热度是否均衡。本文针对这一问题,引入Markov随机过程,提出了一种基于Markov预测模型的负载均衡策略。首先,对分片集群中每个Chunk的CRUD操作状态进行分类统计,用这些统计数据构成对应的齐次Markov链,再根据齐次Markov链的一系列特性建立分片集群负载均衡的预测模型,接下来预测模型将给出下一个时间阶段负载信息的预测值,最终根据预测值进行更合理的数据迁移工作,促使分片集群达到数据访问热度层面上的均衡。最后,使用云南大学URP系统所提供的测试数据,搭建了MongoDB分片集群的生产环境,将本文提出的基于Markov的负载均衡策略和MongoDB默认的基于Chunk迁移的均衡策略的实验结果进行对比,并对结果进行了分析。
其他文献
针对王庄煤矿多次动压下沿空掘巷,分析了高强预应力锚杆及注浆加固机理.增大锚杆的预紧力,能提高围岩的承载能力,实现破碎锚固围岩高阻让压.但由于围岩破碎,需通过注浆改变破
高校校园交通安全是一个重要但管理相对薄弱的环节,传统的校园交通安全管理往往是从法律和人防的角度进行研究,随着技术的进步和形势的变化,管理问题日渐突出,如何加强技防,
东汉末士林风气的裂变主要表现在隐逸不仕之风渐盛、忠君观念渐衰、士人独立意识觉醒、世务交游和百家兼修。诸葛亮隐与仕的选择,既有东汉末士林风气之共性,又有其自身特色,
潘德列茨基《第八交响曲》首演于2008年第十届北京国际音乐节。本文通过分析《第八交响曲》中树的题材、树的动机和树的精神,反映出潘德列茨基创作中的树的创作观念,探索潘德
本文将民间文学艺术与非物质文化遗产作以对比,确认二者为同一种社会关系。但针对该同种社会关系的法律保护模式却大相径庭,民间文学艺术主要采取著作权保护模式,而非物质文
当今世界,语言研究人员和安全研究人员正从两个不同的学术方向把语言问题"安全化"。在当代国家安全体系中,作为国家安全构成要素之一的文化安全包含了语言文字安全。此外,语
现代农村改革的主要任务是深化农村综合体制改革,而农村综合体制改革涉及面较广,各级基层政府必须深刻认识、正确对待。本文从农村现行体制和管理模式已不适应当前和今后农村
2012年3月新刑诉法颁布后在立法层面明确了非法证据排除制度,并首次将非法证据审查权赋予了检察机关,此举有效的规范了司法机关的侦查程序,限制公权力的过度扩张,保障了当事
军官职务编制军衔,简单地说,就是哪一级军官该授什么衔,这是各国军衔制度的基本内容之一。军衔等级和职务等级,是近代以来各国军官制度的两大等级体系。编制军衔,就是协调这
“师本”培养范式就是以教师为本位,一味强调教师在教育培养过程中的地位和重要性,一切依靠教师而忽视学生的主体需求和生命创造的培养范式。新时代的人才培养规格要求新型的