一种多源异构数据源导入Janusgraph图数据库的方法和装置

摘要

本发明涉及图数据库图存储技术领域，提供一种多源异构数据源导入Janusgraph图数据库的方法和装置，本发明的方法，包括：获取待导入数据的数据源类型，通过匹配获取所述数据源的Datax的读插件；根据待导入数据的数据量，计算Datax的读插件的并行读通道数量，将数据分批次读入读通道内；扩展Datax的写插件，初始化写通道并将初始化的写通道与读通道匹配，将读通道中的数据持续获取至对应的写通道；对写插件的写通道中的数据进行数据去重校验，将通过去重校验的数据写入图数据库。根据本发明示例性实施例的多源异构数据源导入Janusgraph图数据库的方法和装置，可以适配多种异构数据源的数据，实现数据的快速导入。