基于多级Time-slice的海量数据统计预处理

摘要

很多气象业务信息系统都需要在很大时间尺度上作数据查询和数据统计,而通常大时间尺度意味着涉及海量的数据,查询统计效率往往不甚理想.解决这个问题的方案有很多,比如引入内存数据库、建立数据库索引、将大表拆分成小数据表、提升DB服务器的性能、预处理技术等等。给出一种关系型数据库中海量数据情况下时间维度数据统计预处理技术,提出了基于多级时间片的预处理算法,具成本低、实现简单、收效显著等优点。