基于经济领域数据的分布式提取及可视化分析方法和系统

摘要

本申请提供了一种基于经济领域数据的分布式提取及可视化分析方法和系统。其中基于经济领域数据的分布式提取及可视化分析方法，包括：分布式数据提取步骤：后端服务器接收用户提取大数据的指令并发送给主节点，主节点根据接收到的指令按照任务的某个或多个字段维度将提取数据的大任务切分成小任务，并将小任务分配给不同的处理节点，处理节点根据分配的小任务向全文检索系统发起请求，主节点将生成的小任务存储到数据库中，并在运行过程中同步任务的状态；分布式存储步骤；分布式计算和分析步骤;数据加载和缓存步骤；结果可视化展示步骤。本申请通过上述手段，提高了大数据提取的效率，同时降低了用户大数据分析的门槛。