一种基于Ceph的海量小文件存取优化方法

摘要

本发明公开一种基于Ceph的海量小文件存取优化方法，当用户存储文件时，先利用K‑means聚类算法获得小文件的关联分组，再对每组内的文件按从大到小的顺序进行排序，然后将关联分组内的关联文件进行合并后再存储至Ceph中。当用户发起访问请求时，系统先检查请求文件是否在缓存中，若存在直接读取并返回请求文件；否则将请求信息发送到Ceph集群，实现小文件的读取并根据文件块间的利用率及相关率进行小文件的预取及缓存，返回请求文件及预取小文件。该发明通过减少用户与集群的交互，减少用户访问时间，提高海量小文件的访问效率，提高系统的整体性能。