基于干扰对齐的高效云存储修复方法研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:yushilv
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着“信息大爆炸”时代的到来,应对海量数据的存储和处理问题的云存储技术作为云计算的重要延伸被提出。由于云存储中的存储节点众多,必然会出现存储节点不可得的情况。为确保数据的高可靠性,云存储系统引入了信息冗余机制和节点修复机制。如何保证在修复失效节点时系统资源消耗尽可能少、数据可靠性尽可能高已成为本业界关注的重要问题。在之前的研究中,大部分是针对单节点失效情形,但在实际云存储环境中多节点失效的情况较为常见。本文研究基于干扰对齐的高效云存储多节点修复方法,主要研究内容和成果如下:首先,基于网络编码特点和多节点修复模型,利用网络信息流图中的最大流最小割定理分析,推导了云存储中节点的存储容量和修复带宽的理论下界,并证明了可达性。即当且仅当云存储中的节点修复问题所对应的信息流图中的最小割值足够大,则必定存在一个能解决其节点失效问题的网络编码方案。其次,利用存储容量和修复带宽的理论下界绘制出了存储容量与修复带宽之间的最优折衷曲线,并得出两个满足存储容量-修复带宽最优折衷曲线的极值点:以存储容量最优化为基础的最小存储再生码和以修复带宽最优化为基础的最小修复带宽再生码。进一步,对精确的极大距离可分(Maximum Distance Separable,MDS)码进行扩展,给出了一种满足最小修复带宽下界的,针对多个系统节点或冗余节点同时失效的多节点精确修复(Multi-node Exact Repair,MER)码。在同时修复多个失效节点时,不同失效节点的修复过程之间会相互干扰。因此,本文针对2k n,2k1d n1的情况,给出了一种基于干扰对齐的多节点精确修复方法——多节点最小存储精确再生(Multi-node Exact Minimum StorageRegenerating,MMSR)码。首先,利用基于干扰对齐的一般性节点修复模型,说明了干扰对齐技术在节点修复问题中的必要性。其次,给出了多节点最小存储精确再生码的一般性构造方案,并证明了多节点最小存储精确再生码满足MDS特性。进一步,给出了两种多节点修复过程:同步修复过程和异步修复过程。最后,为了验证多节点最小存储精确再生码的MDS特性和可行性,给出了一个参数集为n, k, d, r7,3,5,2的多节点最小存储精确再生码的数据重建方案。仿真分析结果表明多节点最小存储精确再生码在保证修复带宽和存储容量尽可能小的情况下,增加了数据可靠性。
其他文献
Web Services是基于Internet进行分布式计算的基本元素,面向Service的计算将成为未来计算技术发展的趋势。一些传统的服务,例如购物,银行交易,商品贸易等都可在Internet上由W
本文对网格环境下多数据源并发控制与协同查询的实现进行了研究。文章首先在分析网格技术、协同技术和数据库技术的基础上,确定了系统的设计目标,给出了系统总体架构。其次,将数
  目前国内外特别是国内,对工作流技术的研究重点主要集中在对工作流系统的体系结构、过程模型、系统互连等方面,而对工作流引擎的讨论所见不多。工作流引擎作为工作流技术的
信息技术改变了企业传统的运作方式,在过去的十年间,大量的工作流管理技术被应用于企业实际运作。如Staffware、IBM MQSeries和COSA等工作流管理系统为企业流程管理提供了强有
缓冲区溢出攻击是相当普遍并对系统具有致命威胁的一种攻击手段。它危害性大,隐蔽性强,堆溢出是缓冲区溢出最常用的手段之一。应用程序本身代码的不完善是缓冲区溢出的根源,而编
随着网络应用的迅猛发展,网络的安全问题也显得越来越突出。传统的网络入侵检测技术的局限性越来越明显,已经不能适应网络新攻击层出不穷和数据量日益增大的趋势。数据挖掘能
两条曲线间的重合检测是求交算法中的一个重要环节,同时也是提高求交算法稳定性的关键步骤之一。低次(如3,4,5次)Bézier曲线在计算机辅助几何设计(CAGD)中有着的广泛应用。在实
本文主要研究了中文命名实体识别及其关系抽取,设计和实现了一个能识别和抽取人名、地名和机构名的系统CNEE,并通过SRV算法实现了个人主页中的人名和E-mail 的抽取。CNEE 先
随着企业需求的不断扩展以及网络技术的迅猛发展,企业应用开发变得越来越慎重,越来越复杂。为了能够在竞争中处于有利的地位,采用合理的企业应用架构和新技术就成为企业能否有效
二十世纪后期,生物电子学快速兴起,极大地改变了传统医学仪器的研制模式。集成毛细管电泳芯片(ICEC),是生物学、医学、化学、电子学、计算机以及自动化等学科交叉的产物,其在医学