一种基于Hbase的海量图片存储方法及装置

摘要

本发明公开了一种基于Hbase的海量图片存储方法及装置，包括：读取预设大小的结构化文本信息，并创建一个Mapfile文件；其中，结构化文本信息为图片的属性信息与图片的原始索引信息；确定读取的预设大小的结构化文本信息所对应的各个图片，将确定的各个图片以字节流的形式写入到已建立的Mapfile文件中；将读取的预设大小的结构化文本信息中的各个图片的属性信息以及各个图片所在的Mapfile文件的索引信息存储至HBase表中。本发明技术方案实现了将几十K的小图片合并成一个大文件，避免了因将海量几十K小图片直接存放到HDFS上产生大量元数据从而导致占用大量内存，避免了将海量图片存放到HBase的过程中导致的频繁的Hfile文件的Compaction及Region split，极大地提高了写入速度。