面向Cassandra数据库的高效动态数据管理机制

摘要

Cassandra数据库是当前通用的数据库之一,同时也被Apache列为重点发展的顶级项目.针对Cassandra分布式数据库系统而言,大量的写请求会造成过多分散的SStable结构以及过高的数据冗余度,进而造成用户读取请求响应速度下降.该问题可以通过系统自动触发的局部数据合并机制或人为干预的整体数据合并机制来解决.然而,不合时机的系统自动局部合并过程会严重降低用户正在执行的读取操作的性能,而过长时间的人为整体数据合并过程又会长时间地占用系统资源,严重制约系统的整体性能.针对此问题,提出了一种面向Cassandra数据库的动态数据管理机制.首先,实时监测系统环境,将数据按照写入时间和大小进行分层分级管理,对合并的时机、参与合并的文件及合并过程分别制定相应的执行策略;其次,通过特定优化手段减少数据的合并时间,以降低合并过程对系统性能的影响.测试结果表明,该管理机制优化了Cassandra数据库的合并过程,提升了系统整体的读取响应速度.