实现HDFS远端存储挂载的方法及系统

摘要

本发明公开了一种实现HDFS远端存储挂载的方法及系统，该方法包括：接收从客户端发送的数据远端存储挂载的请求，向远端存储拉取待挂载的元数据并建立形成远端存储与HDFS间的映射关系信息；将所述映射关系信息转发并持久化至数据库，并根据客户端发送的读远端存储元数据的请求，通过读取数据库中的映射关系信息，获取其中的待读取的块信息，并返回给客户端。本发明的方法实现了远端存储在HDFS层的动态挂载，有效提升远端存储读取的灵活性；利用挂载管理模块的架构，自动构建远端存储的元数据信息，降低运维难度；采用元数据转发形式与数据缓存机制，增加远端存储的同时减轻NameNode访问压力，并提升HDFS的读性能。