一种分组查询中聚合函数的数据处理方法及系统

摘要

本申请公开了一种分组查询中聚合函数的数据处理方法及系统，包括主CPU将待查询数据文件划分成数据块，并将所述数据块分配到多个计算节点；各计算节点CPU分别将所述数据块传输给FPGA，所述FPGA与所述计算节点CPU通过PCIe接口对应连接；所述FPGA获取所述数据块，按照分组查询中聚合函数的计算算法对所述数据块进行SQL分组查询聚合函数的计算，并通过所述计算节点CPU向所述主CPU返回计算结果；计算算法采用Opencl语言并行优化实现，并移植在所述FPGA上；主CPU合并所述计算结果，得到最终的查询结果。本申请通过FPGA并行加速提高了计算节点的处理能力，进而提高了分组查询聚合函数的计算速度。