首页> 中国专利> 基于ETL任务的增量数据抽取方法、装置、设备及介质

基于ETL任务的增量数据抽取方法、装置、设备及介质

摘要

本发明涉及数据处理领域,提供了一种基于ETL任务的增量数据抽取方法、装置、设备及介质,所述基于ETL任务的增量数据抽取方法包括:获取ETL任务;从ETL任务包含的基础字段中筛选出包含预设字段的目标任务;对目标任务进行解析处理,确定目标任务对应的数据类型;判断目标任务是否属于首次运行;若目标任务属于首次运行,则根据数据类型确定目标任务对应的目标增量界限值;若目标任务不属于首次运行,则获取预设字段对应的目标值,作为目标任务对应的目标增量界限值;根据目标增量界限值,对ETL任务进行增量数据抽取。本发明还涉及区块链技术,所述ETL任务可存储于区块链中。本发明的技术方案实现提高针对ETL任务进行增量数据抽取的准确性。

著录项

  • 公开/公告号CN111813845A

    专利类型发明专利

  • 公开/公告日2020-10-23

    原文格式PDF

  • 申请/专利号CN202010610186.8

  • 发明设计人 熊汉;

    申请日2020-06-29

  • 分类号G06F16/25(20190101);

  • 代理机构44385 深圳市世联合知识产权代理有限公司;

  • 代理人汪琳琳

  • 地址 518000 广东省深圳市前海深港合作区妈湾兴海大道3048号前海自贸大厦1-34层

  • 入库时间 2023-06-19 08:38:01

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号