基于大数据的集群数据同步方法、装置、设备及存储介质

摘要

本申请实施例公开了一种基于大数据的集群数据同步方法、装置、设备及存储介质，涉及数据处理技术领域。该方法包括：接收数据导入指令；响应于数据导入指令，获取第一集群中的待同步数据，对待同步数据执行数据转换，以将待同步数据转换为匹配第二集群中存储结构的待同步数据；建立多条并行通信线程和任务监控表，将转换后的待同步数据同步至第二集群中，并实时记录数据的同步状态。所述方法可以对于不在同一系统架构下的集群之间的数据实现数据同步，通过数据转换、设置并行线程以及任务监控表的方式提升了同步的效率和稳定性，并能对任务状态、数据丢失和同步异常等数据进行实时跟踪，获取同步时反馈的数据状态。