基于层树网络的大规模并行程序性能数据快速收集方法

摘要

本发明公开一种基于层树网络的大规模并行程序性能数据快速收集方法，包括以下步骤：S1、依据计算节点启动的进程最多能使用的端口号数目限制M，确定子收集节点所需负责的子节点数目m；S2、根据S1中获得m值，将所需采集性能数据的总进程数N划分为一个各个树层并行度相当的拓扑网络；S3、分析各个树层的数据传输效率比1:η1,η2,...,ηh‑1，其中h为树的深度；S4、根据S3中各个树层的数据传输效率比，实现对拓扑网络的优化；S5、通过socket建立层树收集网络，实现对性能数据的收集。本发明针对异构众核结构特征，结合异构众核处理器的特点，将部分收集进程下沉至计算节点上，并且结合各树层的数据传输效率对树型收集网络进行拓扑优化，能够实现大规模并行程序性能数据的快速收集。