【摘 要】
:
当前,超级计算机已广泛应用于石油勘探、航空航天、生物医药、气候气象、海洋模拟、新能源新材料和基础科学等众多应用领域,成为科技创新的重要工具。超级计算机的资源使用有免费模式和付费用使用两种模式,在免费模式中,用户可在资源申请通过审核后,免费模式计算机资源;在付费模式中,用户需要签订商务合同,付费模式。在付费模式下,用户的作业提交行为、作业运行特征和服务公平性要求等均与
论文部分内容阅读
当前,超级计算机已广泛应用于石油勘探、航空航天、生物医药、气候气象、海洋模拟、新能源新材料和基础科学等众多应用领域,成为科技创新的重要工具。超级计算机的资源使用有免费模式和付费用使用两种模式,在免费模式中,用户可在资源申请通过审核后,免费模式计算机资源;在付费模式中,用户需要签订商务合同,付费模式。在付费模式下,用户的作业提交行为、作业运行特征和服务公平性要求等均与免费模式有显著的不同,无法直接采用针对免费模式的已有资源调度研究成果,这大幅降低了付费模式下超级计算机资源的使用效率,已成为亟待解决的挑战性问题。超级计算机资源调度策略的实际效果严重依赖于对用户行为和负载特征的精确分析。由于当前缺乏对付费模式下超级计算机资源管理相关问题的研究,针对该问题,本文首先收集了两台典型付费模式的超级计算机“天河一号”七年和曙光5000A近两年的作业数据,利用统计和聚类分析等分析手段,研究了用户行为的周期性规律,与作业相关变量、服务类型的关系,首次提出了配额约束等待时间的概念,研究了其与作业运行时间、计算规模、响应时间的相互关系。通过深入分析,本文揭示了付费模式下超级计算机的典型用户行为与负载特征,发现了一系列与之前相关研究不同的结论,具体包括:(1)用户行为并不受作业运行时间、等待时间影响;(2)用户思考时间与作业的核数、消耗的机时正相关;(3)用户行为与服务类型相关;(4)在作业等待时间中,配额约束等待时间占主要成分;(5)传统的资源调度策略无法有效降低作业等待时间,等。以上研究成果可为付费模式下研究超级计算机资源调度策略优化提供依据。在付费模式下,超级计算机为保证服务公平性广泛采用了配额约束机制,该机制限制单一用户过多使用计算资源,但是,这也导致空闲资源无法及时分配给排队的配额约束作业,影响资源利用率。针对该问题,本文提出了一种兼顾公平性和效率的资源调度优化策略,通过所提出的条件触发机制,确保了配额内作业的资源使用优先性,同时利用灵活的自适应空闲资源上限策略和长周期公平性策略,在保证服务公平性的基础上,有效地提升了整体资源利用率。基于天河一号真实作业数据的模拟分析显示,资源利用率由85%提升至96%,接近没有配额约束限制条件下的理想值97%,同时公平因子仅从原来的0.57降低至0.51,远高于没有配约束机制的0.26。为进一步提升资源使用率,超级计算机广泛采用了回填调度策略。该策略基于作业的预期运行时间,在长作业等待资源时调度短作业优先运行。然而,在付费模式下,超级计算机的应用领域多样化,运行程序种类繁多,并且安全性和隐私性的要求导致无法获取作业运行的具体参数,因而对作业运行时间的预测难度更大,导致回填调度的效果不佳。针对该问题,本文提出了一种基于运行时监控的作业运行时间分类预测方法,通过结合作业的历史运行日志与当前运行时的监控信息,利用梯度提升决策树算法和深度神经网络进行分类和回归预测,在新作业开始运行5分钟内,即可以预测其运行总时间分类,预测准确率达84.4%。特别是针对8小时以上的作业,F1Score均超过了72%,高于相似性作业Last2预测的48%。
其他文献
光催化氧化技术是一种新型的废水处理技术,具有处理效率高、工艺设备简单、操作条件易控制、无选择性地降解有机污染物等优点,光催化氧化技术的诞生,开创了染料废水降解的新局面。本文利用溶胶-凝胶-浸渍法制得负载型TiO2/AC和Ag-TiO2/AC光催化剂,选择具有代表性的甲基橙和刚果红两种偶氮染料作为对象,以TiO2/AC和Ag-TiO2/AC作为光催化剂,进行了光催化氧化甲基橙和刚果红的试验研究及机理
超临界流体(Supercritical Fluid,SCF)是指温度和压力处于其临界温度和临界压力以上的流体。超临界状态既不属于液态也不属于气态,它同时兼有液态和气态的优点:既能象气体一样容易扩散,又能象液体一样有很强的溶解能力。超临界流体具有许多特殊的性质,例如特殊的溶解度、易改变的密度、较低的粘度、较低的表面张力和较高的扩散性等。 二氧化碳(CO2)是超临界流体技术中最常用的对象,其临界温度为
实时地图构建是移动机械臂装置对周围环境感知的在线可视化呈现,也是机械臂自主移动完成导航任务的重要基础。地图的设计架构影响机械臂在导航任务中完成操作指令的效率。随着传感器设备的发展和计算机处理性能的提升,如今移动机械臂导航已从单一传感器阶段逐渐进入到多传感器融合阶段。基于多传感器融合的地图构建方法能够发挥不同传感器的优势,提高地图构建精度与速度,因此具备重要的研究意义
硕士专业学位论文轨道式智能巡检机器人的研究与设计ResearchandDesignofOrbitalIntelligentInspectionRobot作者:郑然予导师:郭盛北京交通大学2021年6月学位论文版权?
体育教学的质量与水平,不仅关系到青少年身体健康和心理健康,同时还关系到学生个人道德品质的培养。随着国民经济实力的增长,学生生活节奏的不断加快,学习方面的压力越来越大以及各行业竞争激烈等问题不断突出,使得体育教学的改革与发展成为了国家关注的焦点。目前,初中学校体育工作的建设对于增强青少年的身体素质、向国家和社会输送符合需要的优质体育人才来讲至关重要。初中体育教育的目的
本文基于哈佛分析框架对贵州百灵进行财务分析以及业绩评价,深入挖掘公司的优势和劣势,判断该企业的盈利水平及发展前景,同时判断其价值。从而促使投资者做出正确决策。同时为其他潜在投资者提供系统的分析方法,提高潜在投资者的投资效率。
Thisnoteinvestigatestheglobalregularityof3Dliquidcrystalequationsintermsoftheverticalderivativeofu_h.Moreprecisely,weprovethatiftheverticalderivativeofthehorizontalvelocitycomponentuhs
管道运输作为海运、公路、铁路、民用航空和长输管道五大运输行业之一,为国民经济的建设发挥了重要作用。油气输送管线大多数处于环境较恶劣的山地地区,复杂的地形环境和焊接残余应力是导致输送管线焊接接头断裂失效的主要原因。为满足输送管线在恶劣的环境下良好工作,输送管线必须达到较为严格的技术性能要求。所以要选择合适的焊接工艺以控制焊接接头应力,提高接头的焊接质量,从而保证管道安全有效的运行。本文以L485管线
本文根据北京市自然环境、污染气象特征、大气环境过程及区域污染源分布等现有信息,建立了用于大气环境质量预测的多维多箱与高斯复合模型,对北京市采暖季(2002年1月)和非采暖季(2002年8月)特征污染物SO2和PM10的质量浓度进行了预测。在对现状大气污染物浓度进行预测的基础之上,结合大气环境质量标准研究计算了北京市大气环境容量,得出不同达标率情况下的大气SO2和PM10环境容量值。同时将多维多箱与
介绍河北省西大洋大型土石坝水库的概况,对病险坝体存在的问题进行了分析,找出了坝体的问题原因,经对加固设计进行多方案比选,对推荐加固方案进行深入研究,通过除险加固施工处理达到了除险加固的目的。