面向新硬件的数据处理软件技术

摘要

近年来,计算机硬件技术飞速发展,取得了显著的进步,一些高性能、低时延的新型硬件技术不断涌现,如:异构的处理器、可编程的高速网卡/交换机、易失/非易失的存储器等,给传统的计算机体系结构和系统带来新的机遇和挑战.然而,在大数据处理中,直接将传统的软件技术应用到新型硬件上很难发挥出硬件技术突破所带来的全部潜在性能.因此,这就促使我们重新思考传统的软件技术,以便可以释放硬件进步带来的全部红利.本文从计算、传输、存储三个方面讨论了面向新型硬件的数据处理软件技术,梳理和分析了该领域中的相关工作,总结概述已取得的进展,分析存在的新问题和挑战,从而为未来探索数据处理性能"天花板"的研究提供有价值的参考.