基于任务的并行数据集成建模

摘要

一种系统、方法和计算机程序产品，用于执行基于任务的并行数据集成建模操作，方式为：针对数据流确定一组处理单元，所述一组处理单元中的每个处理单元定义用于处理所述数据流的一个或多个数据处理操作；生成用于表示所述一组处理单元的一组任务，所述一组任务中的每个任务包括所述一组处理单元的一个或多个所述数据处理操作；基于所述数据流的一组特征优化所述一组任务；以及基于优化后的一组任务生成复合执行计划以在分布式计算环境中处理所述数据流。