基于分布式数据流的大数据分类系统及其算法

摘要

本发明涉及基于分布式数据流的大数据分类系统及其算法，包括外部设备，外部设备的输出端与数据采集模块的输入端相连接，数据采集模块的输出端与数据库的输入端相连接，数据库的输出端与数据分类模块的输入端相连接，数据分类模块的输出端与数据建模模块的输入端相连接，数据建模模块的输出端与数据分析模块的输入端相连接，数据分析模块的输出端与数据发送模块的输入端相连接，数据发送模块的输出端与监控服务器的输入端相连接。本发明可以分别对不同类型的互联网网站进行处理，便于后期的同类型网站进行扩展，能够对互联网上的用户舆论数据做到全面、高效、多样化的提取，为大数据分析提供最基础的数据依据。