基于共享内存多通道网络通信的集群通讯技术研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:kangyh123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在过去几十年里,大规模和超大规模并行性集群处理取得长足进展,同时由于各种原因,这些机器多采用分布主存或分布式共享主存结构,各厂商开发了针对特定硬件平台的消息传递包或库,如Intel的NX、IBM的EUI、Parasoft的Express和橡树岭的PVM等,表现出优越的性能,但移植性很差。为了开发一个通信性能好、具有可移植性消息库,各厂商如硬件提供商IBM、Intel、软件开发商Parasoft、KAI研究中心,联合起来共同研究开发出一种通用的在不同硬件平台和异质网络中都能获得高性能的分布式开发包MPI,但这只是一种标准,具体的硬件和驱动程序构成了底层的高性能的通讯层。通讯是影响集群系统实际并行处理效率的关键,因此高性能通信系统的研究在整个集群系统中占有非常重要的地位。本文在研究了Myrinet公司提供的运行在Myrinet网络上的高性能通信协议GM及扩展协议MNC基础上,设计并实现了基于用户态共享内存的SMP/Scheme协议。本协议具有本地通信进程间、节点间不同进程的数据快速传输特性。  本文的主要工作如下:  (1)分析了现阶段集群通信的发展状况,介绍了几种流行的集群通信协议和技术实现方式,并提出了集群通信面临的问题。  (2)有针对性地分析了Myrinet网络的特性和GM通信协议以及基于Myrinet多链路网络通信的高性能MPI实现方案。MNC协议作为GM协议的扩展,具有在硬件层进行多通道传输的特性。本文在详细分析MNC协议的基础上,设计了一种以跨平台为目标的分层开发架构,使用户在不关注细节的情况下,可以调用规范的并行开发接口,来实现基于MNC协议的多通道数据传输程序。  (3)在分析了现有的几种多链路通道网络通信的基础上,结合各方面的特性,设计并实现了一种开放的、可定制的、基于共享内存并由Scheme托管的多通道网络传输协议SMP/Scheme。SMP/Scheme在内存管理使用方面具有一次分配,重复使用的特点,可充分利用网络多链路通道高性能地进行数据传输。  
其他文献
传感器技术、微机电系统、现代网络和无线通信等技术的进步,推动了具有现代意义的无线传感器网络的产生和发展。无线传感器网络(wireless sensor network)是由部署在监测区域
目前,Ad hoc网络越来越受到关注。在这个领域内,广播、路由等等问题都是研究的热点。本文就Ad hoc网络中的广播技术进行了深入的探讨。现有的广播协议大多基于概率、区域位置
随着互联网的迅猛发展,尤其是社会网络流行和被人们普遍使用,信息已经出现爆炸式的增长。网络中存在的海量信息,为用户提供了非常多的选择,但是这么多的选择,却让用户更加的
研究表明人工神经网络由于其大规模并行处理、容错性、自组织和自适应能力和联想功能强等特点,成为解决很多问题的有力工具,并且已经广泛应用在函数逼近、系统识别和控制、信
当前,随着信息技术和网络技术的飞速发展,为了适应企业需要,有越来越多的应用系统被开发和应用,我们周围可获取的信息越来越多,人们也越来越认识到这些数据的价值,但是这些资源有时
二进制翻译技术是解决软件代码移植问题的重要手段,也是帮助新处理器架构推广的有效手段。用户级二进制翻译器翻译执行用户态的应用程序;而系统级二进制翻译器翻译执行整个操
随着计算机技术的发展,处理器和存储器作为计算机组成的主要部件,相关技术指标得到了极大的提高与改善。由于器件自身特点的局限性,目前所广泛使用的主存储器在访问速度上严
随着单点登录协议的飞速发展和广泛应用,登录协议实施过程中的安全问题也越来越受到重视。近年来,BrowserID认证协议作为其中的佼佼者,在越来越多的网站上使用,但同样造成的
经过几十年来的实践证明,IPv4协议无论是在技术上还是发展速度上都是一个非常成功的协议,为现代科技做出了不可抹灭的贡献。但是,随着现代科技和生产需求的不断发展与增加,最初的
软件复用可在软件开发过程中避免重复劳动,被视为解决软件危机,提高软件生产率和质量的现实可行途径。它作为软件工程的主要研究课题之一,被认为是使软件开发真正走上工程化