一种基于云计算分布式网络视频数据挖掘采集系统

摘要

本发明提供一种基于云计算分布式网络视频数据挖掘采集系统，包括互联网大平台，互联网大平台连接有数据采集模块，数据采集模块连接有数据预处理模块，数据预处理模块连接有管理调度模块，管理调度模块连接有终端设备，本发明：通过设有的数据采集模块，爬虫或开放API采集数据将爬取的信息传至接收数据并通过发送请求发送到资源解析处，资源解析将信息中的时间、音频、视屏和位置信息进行分类别收集，解析后的信息发送到统计站进行统计，敏感信息剔除后保留在存储箱内部，设有的数据预处理模块，将获取的数据进行解码处理，管理调度模块将处理后的数据进行分类统计，最终分布存储。