基于集群环境的作业管理中间件的研究与实现

被引量 : 0次 | 上传用户:yd126523
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机集群技术的飞速发展,集群作业管理系统已成为高性能计算领域的研究热点之一。然而,作业管理系统一般通过命令行方式进行配置和管理,对用户的知识结构和实际操作技能水平要求比较高,存在配置使用复杂、入门较难、容易出错等不足。如何更加方便有效地使用高性能计算资源成为用户和资源提供者共同关心的问题。本文结合“天河一号”超算平台建设中的实际应用课题,着力于研究基于集群环境的作业管理中间件的设计和实现问题,目标是降低用户使用高性能计算资源的门槛,提高资源利用率。本文主要工作有:(1)本文首先研究了集群技术的定义、体系结构和分类,重点分析了“天河一号”超级计算机的硬件和软件系统结构,然后对集群作业管理系统进行了研究,重点研究了SLURM作业调度器的体系结构、优先级计算策略和工作原理。(2)围绕超算平台的运营需求,本文提出了一种基于用户价值的作业优先级调度策略。本文首先介绍了该策略的提出背景,并对用于多准则决策的层次分析方法(AHP)进行了研究,然后设计了相应的用户价值评价指标体系,并运用AHP方法对指标体系中的各因素对应的权重进行分析和求解,最后基于中间件系统对该策略进行实现和实验。实验结果表明,该作业调度策略能在保证系统整体性能情况下,有效减少高价值用户的作业平均等待时间和作业平均周转时间。(3)本文设计和实现了一个基于集群环境的作业管理中间件系统。本文首先分析了中间件系统的功能需求,并对实现过程中所使用的关键技术进行了深入的研究,然后对系统的设计理念和与作业管理相关的数据表结构进行了介绍,最后进行了代码实现。同时本文设计和实现了一种基于模板的CAE软件封装方法—CAE-APT(CAE Application Packaging Template)。该方法基于XML实现,具有平台无关性,易维护和扩展等优点。作业管理中间件系统已完成原型系统开发,在整个超算集成平台中实现了与门户子系统、集群端子系统的无缝集成,并进行了多次联合测试,运行状况良好。实践结果表明,本文针对集群作业管理系统所作的研究和优化工作,有效地提高了集群系统的作业调度效率和资源利用率,能满足不同价值的用户的资源需求,同时通过集成门户子系统可为用户提供友好的用户操作界面,可有效提高用户工作效率,具有较大的应用价值。
其他文献
目的探讨氧气驱动硫酸沙丁胺醇吸入溶液与异丙托溴铵溶液治疗小儿哮喘的临床疗效。方法选取医院2015年5月至2016年7月收治的小儿哮喘患儿128例,随机分为两组,各64例。对照组
千百年来.唐蓄古道作为祖国内地通往西南边陲的大道,像是一条情意缠绵的纽带,联结着藏汉人民友好团结的感情。这段历史可以追溯到汉朝时期,因为早在那时,中原通往青海、西藏的大道
高速动车组诞生近50年来,以其安全、快捷和舒适等特点在世界上多个国家得到了广泛的应用和发展。高速动车组是高速铁路发展的核心,高速动车组运行时受到空气动力学作用对动车
本文选择以新北川巴拿恰商业步行街区为例,探析研究羌族传统建筑与商业步行街间联系、结合、表达等相关问题。试图通过实际案例综合分析,对羌风商业步行街的特征,设计方式,发
学校体育课的首要任务,就是通过体育课和课外体育活动增强学生体质,不断提高学生身心健康水平和社会适应能力。高校体育课是一门以学习体育与健康知识、技能和方法为主要内容
现代药理研究表明当归具有补血活血、调节机体免疫、抗癌护肤美容、抑菌、抗动脉硬化等作用。本文分别从当归对细胞免疫、体液免疫功能、单核巨噬细胞系统、细胞因子的诱生作
日常山区高速公路施工经常遇到许多困扰,因为现实生活中,山区环境一般是比较复杂的,也就造成了高速公路施工的困难,该文就山区高速公路施工的特点,进行浅析,以找到其中的不足
子宫肌瘤,又称子宫平滑肌瘤,是女性生殖器最常见的一种良性肿瘤.临床表现为阴道出血,月经过多、经期延长、下腹部包块以及尿频等压迫症状.子宫肌瘤好发于卵巢功能较旺盛的30
客观结构化临床考试(OSCE)是医学教育和资格考试中评价临床能力的一种新型考试模式,它主要通过模拟临床场景来测试护生的临床能力,同时也是一种知识、技能和态度并重的临床能力
信号增强与噪声压制是现代信号处理的重要研究课题。在油气勘探领域中,研究人员常常根据实际采集的地震资料,对其中有用信号记录进行分析,从而确定油气勘探的布井以及打钻位置。