云存储系统高效数据传输机制的研究

被引量 : 0次 | 上传用户:linco87
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了适应数据迅速增长的趋势和用户随处存取的需求,越来越多的企业开始部署云存储系统。网络服务存储系统将网络中大量存在的开放存储服务聚合起来,提供了较为可观的空间和带宽总量,并具有强服务能力、高透明性、高可扩展性等特点。但是在网络服务存储系统中,有限的边缘存储服务运营商与庞大的用户存储数据量之间相互牵制。当某种存储服务同一时刻接受大量任务请求时,极有可能导致用户数据丢失,从而降低了系统可用性。高效数据传输机制有效解决了上述问题。该机制根据网络服务存储系统中文件特点,改进了Kademlia算法,在用户节点组建底层的peer-to-peer(P2P)网络结构,实现了用户节点之间数据共享。通过分析了系统用户在线时间和行为特征,提出并实现了超级节点选择算法。同时根据系统中文件备份数和数据下载成功率,结合超级节点信息,实现了基于协同传输节点群的高效备份策略。高效数据传输机制设计了一套完善的数据传输算法,针对用户不同的操作如上传,下载和协同传输而实现了不同的透明传输策略。最后该机制为系统引进了缓存服务器,它保存了一份完整的冗余文件,并承担系统复制策略的主要数据分发工作。系统测试日志表明,高效数据传输机制引入系统后,将上传文件时间缩短了约1/3,下载文件时间缩短了约1/2。同时,在系统文件备份数目达到一定阈值后,用户从邮箱服务器下载文件的成功率也提高到95%以上,基本接近邮箱存储的理想状态。基于改进后的系统被动复制策略,可以看出协同群组传输数据的成功率明显提高,达到了97%以上。
其他文献
对外贸易作为世界各国或地区之间货物和服务交换的活动,是国际经济交往的主要渠道和内容,也是参与国际分工与合作的共同纽带,在国际经济交往中占有重要地位。目前,世界经济逐
网络技术的广泛运用和日益普及,改变着社会意识形态主体的生活交往方式和实践思维方式,互联网作为意识形态的信息载体和全新的信息传播工具,因其具有独特的开放性和交互性,对
采用野外田间实验和室内分析相结合的方法,研究了水分、氮肥和磷肥添加对内蒙古典型草原土壤碳、氮、磷含量及pH的影响。结果表明:土壤有机碳和全氮含量对水、肥添加无显著响
利用我国1998年第2次青藏高原气象科学试验(TIPEX)昌都的湍流观测资料,初步分析了三维风速、温度和湿度湍流谱、归一化方差与稳定度的关系、湍流通量和整体输送系数.结果表明,
本文以河北省涞源县柏叶铁选厂建设工程为例,对建设过程中的主要环境影响因素进行了科学的分析,提出了保护区域环境的一些建议。研究主要得出以下结果:(1)河北省涞源县柏叶矿
闽台行业协会作为非营利组织,两者之间若能密切地交流与合作势必在促进闽台经贸交流、产业对接、文化交流、农业合作、平台建设等方面发挥着巨大的引擎作用。本文试从行业协
目的:观察前交叉韧带(ACL)重建术后半年腘绳肌腱移植物磁共振成像(MRI)信噪比特点,分析股骨骨道位置对其影响。方法:2015年10月至2018年6月,154名患者接受关节镜下ACL重建手
"档多人少"、"库房分散"是当前人民法院档案工作普遍存在的难题,本文基于科技提升效率的工作理念,阐述了大数据时代人民法院智慧档案室的建设。以方便公众办事、提高工作效率
离岸服务外包,尤其是面向欧美市场的离岸服务外包,是目前全球信息技术领域炙手可热的课题之一。服务外包使信息技术从产品时代过渡到应用服务时代,带动了新一轮的全球资源整
为推进落实“新跨越战略”,实现打造“一个中国移动”(One CM)、强化执行力、实现信息对称共享、核算规范统一、提升财务管理水平的宏伟目标,中国移动通信集团在各省、自治区