一种分布式数据库中海量小文件的多级优化存储方法及系统

摘要

本发明公开一种分布式数据库中海量小文件的多级优化存储方法及系统，方法包括：分布式数据库的管理节点响应于包括至少一个小文件的小文件输入事件，将所述小文件放入合并队列，将每个合并队列所包括的小文件分别合并后得到合并文件并保存在分布式数据库的工作节点中，所述小文件的文件长度小于预设小文件长度阈值；分布式数据库的管理节点为每个所述合并文件所包括的每个小文件构建索引并保存在分布式数据库的管理节点中；客户端根据所述索引，从所述合并文件中获取所述小文件。本发明从HDFS的文件存取流程出发，使用合并队列算法将小文件合并为大文件，减少小文件数量，同时，构建索引提高文件检索性能。