基于预分区策略的装备数据分布式存储方法

摘要

随着传感器技术和计算机技术的发展,装备在研制生产过程中会产生大量的数据,这些数据是海量的、多源的和异构的,企业需要考虑如何将数据进行快速处理和存储管理,进而利用加工后的数据提升装备生产制造能力.对卫星、飞机等典型装备数据进行了研究,提出了一种基于预分区策略的分布式数据存储方法.该方法研究HBase的预分区机制和装备数据模型特点,研究装备数据快速存储的影响因子,并给出了数据快速存储算法,使海量装备数据可以负载均衡地、快速地存储在HBase数据库里.最后,对模型的数据存储性能、负载均衡性、各类装备的适用性进行了评估试验.试验结果表明,该方法可以覆盖多种类型的装备数据,并在数据存储效率上有良好的表现.