一种海量遥感影像元数据分布式存储方法及并行查询方法

摘要

本发明公开了一种海量遥感影像元数据分布式存储方法及并行查询方法。涉及基于HDFS存储、Spark分布式并行计算、Redis内存缓存的海量遥感影像元数据并行空间索引构建和查询。该方法在KD‑Tree算法基础上发明了DKD‑Tree算法。在Spark框架下利用DKD‑Tree算法构建分区，将构建的分区数据保存在HDFS中，利用Spark先在构建的DKD‑Tree中进行分区查询，再在查询到的分区中进行具体的查询，基于DKD‑Tree的查询大大缩减查询范围，提高查询效率。本发明可以在大数据环境下对遥感影像元数据做到实时查询，在数据量增加时，可以增加Spark节点保证查询的实时性，具有很好的可扩展性。