面向大数据的软硬件协同加速方法研究

摘要

大数据具有数据规模大、产生速度快、数据种类多的特点.随着存储硬件的发展,大数据的存储问题得到缓解,但大数据处理却面临诸多挑战.大数据中存在诸多访存密集任务,诸如数据清洗、过滤等,这类任务并不适合以计算见长的GPU或CPU.针对大数据处理的特点,提出直接在SSD上加入FPGA计算单元来加速大数据应用处理的方案.模拟平台验证表明,相比CPU采用FPGA实现数据分桶获得8.2倍的加速比,数据直方图获得2.9倍加速比,图像直方图性能跟CPU接近,只有字符串匹配程序比CPU慢0.6倍,仍待进一步优化.