United-FS 的数据放置策略研究

摘要

存储服务器是机群系统中的重要组成部分。随着硬件的发展，集中式的存储服务器可以提供更大的容量和带宽，可以同时为更多的高性能计算应用提供存储服务。然而，每个应用具有不同的负载特征，不同的存储部件以及本地文件系统也具有不同的特征，单一的存储模式难以为多样的I/O负载提供高效的存储。因此如何根据负载特征及存储部件的特征，将数据放置在合适的存储部件上成为一个关键问题。本文提出了并且在United-FS文件系统中实现了一种面向负载特征及存储特征的灵活的放置策略。该策略将不同特征的负载相分离，将数据放置在最适合于该负载特征的底层存储上，同时能够充分利用存储的并发性。实验结果表明，这种灵活的数据放置策略对不同的负载类型均能表现出很好的性能。