基于Ceph的十亿级节点规模知识图谱的对象存储管理方法及系统

摘要

本发明公开了基于Ceph的十亿级节点规模知识图谱的对象存储管理方法及系统，方法包括：图存储架构的构建设计，获取与目标业务对应的多个实体的实体数据，并根据实体数据生成所述目标业务对应的知识图谱并进行存储，并以Ceph作为分布式资源存储器，同时新增外部索引后台机制，利用分布式计算引擎将大任务分解成多个子任务，分发给不同机器去执行，完成后汇总，以提供大规模数据处理能力来支撑OLAP需求，供用户基于知识图谱进行数据分析。本发明还提供了基于Ceph的十亿级节点规模知识图谱的对象存储管理系统。本方案引用了分布式资源管理器，具有可扩展和高可用特征，同时能存储和表达海量知识，支持数十亿节点数据量，有着可靠、易用、高效的特性。