对HCFS集群文件系统的分析与改进

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wzmhua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术、网络技术和通讯技术的高速发展,近年来集群系统已经得到广泛应用,并成为高性能计算的主要体系结构。本论文基于对HCFS集群文件系统的深入分析,阐述了HCFS集群文件系统的设计思想和实现原理,并针对实践当中遇到的一些问题,对HCFS集群文件系统作了相应的改进,使之更适用于实际应用环境。 首先,本论文介绍了集群文件系统的产生背景,并调研了当前国内外典型的文件系统的技术特点和不足之处。然后,概要地说明了HCFS文件系统的体系架构及其软件模型。接着,对HCFS文件系统的设计原理和实现细节,以及HCFS的核心技术,包括网络抽象机制、对象存储机制和分布式锁机制等进行了深入分析,并且利用Linux的flock系统调用设计了一个实验,用于测试HCFS的锁模式兼容性。 根据对HCFS集群文件系统部署实施的经验,以实验说明HCFS集群文件系统条带调度算法的不足之处和繁琐安装过程带来的限制。针对HCFS集群文件系统条带调度算法的不足,提出了基于存储节点已用存储百分比的加权Rotlnd-Robin改进调度算法,采用了Iozone工具进行条带性能的测试,实验结果来看,采用了改进的加权Round-Robin算法其写速率和再写速率均是未改进的2倍左右。而针对繁琐的安装过程,则设计开发了一个客户端代理,通过截获库函数调用,从而实现客户端在用户空间层直接访问HCFS集群文件系统,并利用ncurse图形库,实现了Linux界面让操作更简单直观。通过客户端代理,无需传统的安装配置过程,即可配置相关参数,然后直接通过界面实现对HCFS文件系统的文件创建和删除操作。 本课题来源于教育部重大项目ChinaGrid子项目“华南理工大学校园网格建设”。
其他文献
导引头电子舱是导弹探测、跟踪目标物体的关键部件,它为导弹系统的精确制导提供了重要保证。因此,电子舱产品使用前的调试和检测至关重要,它们是保证电子舱的安全性和可靠性
近年来工作流管理(WFM)技术日益成熟,企业无纸化办公的进程也随之加快。企业在构建信息系统时希望把传统办公中低效、费时、高成本的业务如:单据、报表、文件的审批结合工作流
网络测量是获取网络运行参数的技术手段,为网络管理和安全防护提供了重要的数据支持。传统的网络测量方法以网络数据包或网络流为测量对象,通过对它们的识别和分类达到测量的
互联网中海量的资源和庞大用户群激发着层出不穷的业务创新,而这些创新必须与“尽力而为”传输的IP网相适配,从而限制了它们的部署规模和应用效率。网络虚拟化技术为解决这一矛
窃听者在一定范围内通过天线接收到的计算机视频信号,可以对计算机显示的明文信息进行还原,从而对涉密信息进行窃密。这种信息窃取方式更及时、准确、广泛、连续,使涉密信息的安
学位
随着三维软件技术的发展以及硬件运算能力的提高,群组动画作为一个新兴的技术领域,已经越来越多地受到人们的关注。现如今,群组动画在数字娱乐、心理学、军事演习、动物行为学、
数据挖掘是当今计算机应用技术和理论研究中最热门的领域之一。数据挖掘技术经过十多年的发展,已经逐渐建立起系统的挖掘理论和成熟的挖掘技术。形成了以关联规则挖掘、分类规
由于目前主流厂商提供的服务集成的J2EE平台昂贵的成本,很多企业级应用软件的开发需要更轻量级的容器,更少的代码侵入性,更高的组件重用性,更短的开发周期,更快的升级速度和更易于
随着企业信息系统的建立和企业业务的不断拓展,越来越多的独立系统被用到一个企业当中,同时随着信息化的不断发展,势必要求这些独立的系统能有机的集成到一起,实现业务的无缝连接
学位