基于HBase的高效结构化数据查询方法研究

摘要

随着数据时代的到来,大数据量的即时查询技术成为研究的焦点和热点之一。虽然HBase凭借其分布式、列存储等诸多优点,目前在业界广泛使用,但由于其键值对存储的特性,不支持二级索引以及Join、Group by等数据操作,使得其在大数据量的结构化数据即时查询上存在局限性。而Hive作为分布式的关系型数据仓库,支持结构化数据的SQL查询,但它依赖底层的Map Reduce计算框架,数据存取时的磁盘I/O时间消耗很大,数据量在GB级别时查询速度受限。针对以上问题,提出一个基于关系型数据库的HBase解决方案,以增加与提高HBase上结构化查询的能力。