基于Flume、Kafka、Storm、HDFS的航空维修大数据系统

摘要

提出了基于Flume、Kafka、Storm、HDFS等技术的航空维修大数据系统,系统通过对维修大数据的处理,提供故障诊断、故障预测、优化维修方案等功能.该系统采用Flume采集历史数据和接收实时数据,采用Kafka对数据进行分发,采用实时流处理引擎Storm对维修相关数据进行处理,在HDFS上进行数据存储.系统具有分布式、高吞吐量、实时、可扩展等特点.