面向大规模集群的并行I/O用户层配置优化策略

来源 :国防科技大学学报 | 被引量 : 0次 | 上传用户：liujunqiang6455314

【摘要】

：

影响应用I/O性能的关键因素主要有三个层次:包括应用的I/O接口实现、体系结构和文件系统组件的性能以及应用的I/O参数配置。从应用I/O配置优化的视角,分析了大规模集群并行I/

【作者】

：

田鸿运武林平董勇景翠萍罗红兵莫则尧

【机构】

：

北京应用物理与计算数学研究所,国防科技大学计算机学院

【出处】

：

国防科技大学学报

【发表日期】

：

2020年2期

【关键词】

：

并行I/O优化策略 LUSTRE文件系统大规模集群传输数据量条带数 parallel I/O optimize strategyLustre file s

【基金项目】

：

国家重点研发计划资助项目(2018YFB0204003)

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

影响应用I/O性能的关键因素主要有三个层次:包括应用的I/O接口实现、体系结构和文件系统组件的性能以及应用的I/O参数配置。从应用I/O配置优化的视角,分析了大规模集群并行I/O的配置调优空间,在此基础上,给出了一套大规模集群并行I/O性能特征测试分析方法。基于该方法,在某国产超级计算集群上开展了一系列I/O测试分析来刻画系统的I/O性能特征,进而指导并行应用程序的I/O配置优化。基于优化后的配置参数,在两类典型的并行I/O场景中,针对某类生产应用程序,8192进程下的重启动数据写操作时间下降了15%,4

其他文献

面向图计算应用的处理器访存通路优化设计与实现

针对图计算应用的访存特点,提出并实现一种支持高并发、乱序和异步访存的高并发访存模块(High Concurrency and high Performance Fetcher,HCPF)。通过软-硬件协同的设计方法

期刊

内存级并行访存通路图计算应用memory-level parallelismmemory access pathgraph computing

高速铁路开行17辆编组动车组信号系统方案研究

根据开行17辆编组动车组信号系统的需求,通过分析部分高铁设计方案,并对3种优化设计方案进行对比,希望提出的建议能对高速铁路设计工作提供帮助.

期刊

高速铁路17辆编组动车组信号系统方案High-speed railway17 cars EMUSignal systemScheme

特高压变电站远动通信室应用精密空调的建议

超高压变电站远动通信室设计上一直采用普通空调,这几年普通空调经常出现问题,造成设备因过热保护而停运。新建或改造后的地调及以上等级的远动、通信、信息中心机房已普遍采

期刊