基于Kudu+Impala的交通大数据存储和分析平台

摘要

随着城市化进程的不断加快,城市汽车保有量逐年增加,在面对日益复杂和庞大的交通信息数据,使用传统的关系型数据库已经越来越力不从心,一些性能瓶颈逐渐显露出来,比如跨分区读取数据,大数据量的分析计算等.提出了一种基于Kudu+Impala的分布式存储和计算分析解决方案,Kudu作为底层存储,Impala负责解析和执行SQL,能够同时支持OLTP和OLAP,并且都拥有良好的性能,为交通大数据的存储和分析计算提供了高效、可靠的平台.