首页> 中国专利> 面向HDFS的split层索引方法和装置

面向HDFS的split层索引方法和装置

摘要

本发明涉及数据检索领域,公开了一种面向HDFS的split层索引方法和装置。该方法包括:接收查询请求;根据所述查询请求在预先建立的统计信息表中进行查询以确定相应的分块split;以及加载所确定的split以获取与所述查询请求对应的数据。本发明通过在预先建立的统计信息表中查询以确定相应的split,从而可以仅加载所确定的split以获取相应的数据,由此启动的Map数量就可以因仅加载所确定的split数量而大大减少,从而降低了I/O的时间开销,大大提高了查询速度。

著录项

  • 公开/公告号CN110019084B

    专利类型发明专利

  • 公开/公告日2022-01-14

    原文格式PDF

  • 申请/专利权人 航天信息股份有限公司;

    申请/专利号CN201710946601.5

  • 发明设计人 唐凌;林文辉;

    申请日2017-10-12

  • 分类号G06F16/182(20190101);G06F16/22(20190101);G06F16/2458(20190101);

  • 代理机构11283 北京润平知识产权代理有限公司;

  • 代理人金旭鹏;肖冰滨

  • 地址 100195 北京市海淀区杏石口路甲18号

  • 入库时间 2022-08-23 13:00:58

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号