基于FastDFS架构的数字档案馆存储系统设计与分析

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:harite
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字档案随着互联网快速的普及与发展,信息总量呈现出爆炸式增长,数字档案中音、视频档案甚至高清视频档案越来越多,在方便用户调阅档案的同时,面对日积月累的海量档案文件,如果缺乏完善的档案存储设施,数字档案工作必将受到严重的制约和发展。分布式文件系统为海量档案文件存储带来了曙光,但如何有效管理分布式文件系统中的海量文件,往往是许多分布式文件系统所要面对的议题。目前市面上已有的分布式文件系统大多建立成本太高,对于存取效率方面,有许多分布式文件系统可能会因为几台数据服务器负载太高,进而影响整体文件存取效率。针对以上问题,本文提出了一种基于FastDFS架构的数字档案馆存储系统设计方案,具有高度的延展性,可以很容易的扩充容量,以满足不断增加的储存容量的需求。实验结果也证明了本文所设计的档案存储系统,有不错的存取效率,而通过检测存取效率模块,能够让本档案存储系统大幅降低某些文件服务器负载太高时对整体存取效率所带来的影响。具体包括:1、针对FastDFS面对大文件存取操作时所需延时急剧上升,Storage Server负载过高,整体系统存取文件的效率变低的问题。通过将大文件分块,采取多份备份的存储方式将文件完整分散存储在多台的Storage Server上,读取文件时本系统会由各个拥有这个文件的Storage Server同时取得不同的文件区块。当收集到全部的文件区块之后,再进行文件重组的操作,进而提高整体文件读取的效率。2、设计了效率检测模块,因为本系统同时由多台Storage Server取得文件区块,所读取的文件必须等待所有文件区块传输完成后,才能进行文件合并与文件存取的操作。这些Storage Server因异地备份的需求,可能会分散到不同的区域网络中,如果某些Storage Server因为网络环境不稳定或者系统负载太高导致传输文件速度较慢,整个文件合并还原的操作会因为这些Storage Server效率太差而降低整体系统效率,所以效率检测模块会在文件存取过程中主动检测判定Storage Server的负载情况,越过负载过高的Storage Server,从效率较高的Storage Server内完成存取操作,达到当某些Storage Server负载较高时系统仍能维持整体文件存取的效率的目的。
其他文献
目的探讨头颅CT检查对脑出血患者的临床诊断及治疗的指导意义。方法分析2010年8月—2013年8月在我院行头颅CT检查确诊脑出血患者的CT结果和临床特点。结果 288例患者中,基底
<正>iPhone5s和5c正式上市了,前者的"土豪金"和后者的五彩塑料虽备受争议,却轻轻松松地在首个周末就创造了900万台的iPhone最快销售记录。乔布斯走后,苹果的自我救赎能成功吗
针对环境工程专业实习过程中存在的问题,结合本校环境工程专业实习经验,提出了构建"认知实习—仿真实习—生产实习"的实习体系,以加强环境工程专业实习质量。
随着我国经济的快速发展,广大群众的物质需求基本满足,对文化的渴求却越来越强烈,但面向民众的公共文化服务的建设却有些滞后。为解决这一问题,国家号召社会力量参与社会公共
用1,4-二氧-2-喹喔啉甲醛、水杨醛、甲醛、乙醛、丙酮、丁烯醛、环戊酮和环己酮与水合肼反应制备了8种中间体单腙,再用这些单腙与1,4-二氧-2-喹喔啉甲醛反应合成了8种双腙新
背景与目的:口咽鳞癌的发病率明显上升,主要是人乳头瘤病毒(humanpapillomavirus,HPV)感染导致的。HPV E6蛋白可结合并降解p53,从而导致了口咽癌。与HPV阴性口咽癌相比,HPV阳
采用溶胶-凝胶技术制备硅胶基液相色谱填料.以3-氨丙基三乙氧基硅烷(1.5g)和正硅酸乙酯(4g)为反应单体,以十二烷基苯磺酸钠(SDBS)为致孔剂(0.5~1.5g),恒温80℃恒温反应,得白色
简要介绍了施工用电中的低压配电系统。
为研究小区与周边道路结构对小区开放的影响,文章首先依据小区结构为方格网形和环形,周边道路为T形和十字形构建了4种不同类型的小区,在此基础上选取不同时间段的车流量的大
针对GJ-5型轨检车数据目前难以分析统计的问题,对轨检车动态检测数据分析的软件平台进行了设计,研发了GJ-5型轨检车数据分析系统。本文介绍了该系统的设计原理、主要功能及构