支持KB级别小文件并发IO的数据持久化方法及系统

摘要

本发明提供了一种支持KB级别小文件并发IO的数据持久化方法及系统。所述方法包括：将需要持久化的小文件以追加的方式写入至日志盘；读取日志盘中新追加的小文件至数据盘；将新追加的小文件，以固定字节数为单元，异步的写入至存储集群中；将已经写入至存储集群中的小文件在日志盘中标记为失效。本发明提供的支持KB级别小文件并发IO的数据持久化方法及系统能够明显提升分布式系统中并发IO的性能。