一种轨道交通指挥中心线网大数据的数据建模和存储方法

摘要

本发明公开了一种轨道交通指挥中心线网大数据的数据建模和存储方法，采用的数据建模和存储组织方法。在结构化数据建模过程中，将线网大数据中的结构化数据，结合Hadoop平台以及组件特点和轨道交通行业的数据应用情况，选择合理的数据模型，进行数据建模和存储数据，特别是针对逻辑建模的方法作了详细阐述：临时数据文件存入Hbase中，对历史数据统一建模后存入Hbase中，中间数据层和数据集市层，以降范式的方法建表存入Hive中；对非结构化数据，采用Hadoop平台按应用和时间分类存储小文件，实现非结构化数据的全文检索和分析。因此对线网大数据实现了规范和高效的数据存储。