一种对象存储跨集群海量数据迁移方法及系统

摘要

本发明公开一种对象存储跨集群海量数据迁移方法及系统，方法包括：步S1，接收用户发出的迁移任务请求和建立的子任务；步S2，根据建立子任务的相关信息，生成迁移任务的对应配置文件，并将建立的子任务和迁移任务的对应配置文件相关信息以OSS对象存储至后端数据库的任务队列中；步S3，按预定时长扫描后端数据库中已存储的任务队列，将处于正在等待状态和暂停状态的迁移任务调度起并执行；步S4，被调起的迁移任务以Docker容器、K8S的job、进程中的任一种方式运行；步S5，根据迁移任务的类型启动对应类型的迁移插件进行迁移操作；步S6，所调用的对应迁移插件采用多级任务的方式完成数据迁移。该方法能实现弹性的跨集群的海量数据的迁移。