日志分析系统的任务调度体系结构研究

摘要

任务调度作为日志分析系统的核心模块决定着整个系统性能,本文总结了现有调度模块的问题,并提出采用任务收集器、中央调度器和计算节点所构成的Collector-Master-Slave三层结构来接收、处理、监控任务,从根本上优化了计算节点间负载均衡,提高了日志分析系统效率.最后通过实验证明了设计方案的可行性与有效性.