一种基于大数据平台存储适配方法，系统，设备及可读存储介质

摘要

本发明提供一种基于大数据平台存储适配方法，系统，设备及可读存储介质，配置接口组件，并将接口组件配置到所有数据源；通过接口组件将数据批量存入大数据平台；通过接口组件将应用程序存放至大数据平台的预设目录。结合impala+kudu方式进行数据同步，整合了datax源代码，集成了kuduAPI接口，实现了传输速度快，支持大数量数据同步。支持多种数据源，oracle、mysql、DB2等。大数据平台的数据同步至kudu技术链路清晰，不需要额外数据处理。使用json文件配置数据表同步，便于对数据库的数据进行维护。