大数据分布式管理在公安交通管理综合平台中的应厍

摘要

本文介绍针对公安交通管理综合应用平台（简称综合应用平台）面临的海量数据管理、数据深度应用的迫切需求，以面向大数据的分布式平台Hadoop为基础，组合应用分布式存储系统Hbase、并行计算框架Spark、资源管理平台Yarn、数据转递工具Sqoop等成熟技术，搭建的适应公安交通管理行业的分布式大数据管理平台；并分别针对结构化、非结构化的交通管理业务数据在该平台上的写入、读取操作进行了模拟测试。