HiE-RDP2:高性能栅格数据并行处理引擎

摘要

高性能地学计算已成为计算机科学和地理科学交叉领域的研究热点.然而繁琐的并行编程问题常常妨碍地学专家快速而高效地研发地学算法.本文面向栅格数据处理的并行算法研发问题,构建了并行算法设计框架,从数据I/O、数据通信和任务调度三个方面提出了一系列并行优化方法,并最终开发了一个高性能栅格数据并行处理引擎(HiE-RDP2)。HiE-RDP2屏蔽了并行编程细节,可以显著降低地学专家研发并行算法程序的代价.实验证明,基于HiE-RDP2开发的算法程序可以通过合理配置性能调优插件,达到很高的并行性能.