国产高性能计算系统的输出瓶颈量化分析

摘要

超级计算机的快速发展推动了应用规模的迅速攀升.应用在大规模并行文件系统获得的实际带宽通常远小于其峰值带宽,I/O输出性能逐渐成为限制大规模并行应用计算效率和可扩展性的关键.本文在国产超级计算机——天河-1A和探索100上,采用基于统计的实验方法,准确测量了多种数据输出模式的I/O性能,藉此挖掘计算节点、存储节点、存储配置等因素对实际I/O带宽的影响,量化大规模输出的拥塞和竞争问题,对比分析不同计算系统的I/O特征.本文工作的结论可能会对大规模应用、I/O中间件以及并行文件系统的设计和有效使用提供依据.