基于IndexR的海量数据快速实时检索技术的研究与实现

摘要

由于强调“实时”、“快速”,传统的海量数据检索问题已经变成了一个新的RTOLAP问题.为解决这个传统数据库无能为力的问题,分析比较现有技术后,介绍了基于HDFS的分布式关系型列式数据库IndexR,并提出了一个以IndexR为核心的海量数据快速实时检索解决方案,为复杂信息系统处理海量数据提供了框架性的服务.之后分别与以Hive、MySQL为核心的框架从多个维度进行了对比,说明了该框架在处理RTOLAP场景时相对于传统的OLAP和OLTP框架的优越性,验证了该框架的可行性.