基于分布式并行计算的大数据挖掘系统

摘要

本发明公开了一种基于分布式并行计算的大数据挖掘系统，该系统包括：客户端模块、任务调度控制模块、算法模块以及数据集模块；其中，所述客户端模块负责为用户提供系统交互界面以及访问接口；所述任务调度控制模块是整个系统任务调度的核心，负责管理调用各功能部件并协调各部件的运行；所述算法模块主要负责管理并行算法库；所述数据集模块负责对原始数据进行预处理，并提供高效的数据存取接口，将处理后的数据高效地提交给所述任务调度控制模块以及所述算法模块使用。