首页> 外国专利> HADOOP-BASED BULK DATA COLLECTION MANAGEMENT METHOD AND SYSTEM THEREOF

HADOOP-BASED BULK DATA COLLECTION MANAGEMENT METHOD AND SYSTEM THEREOF

机译:基于HADOOP的批量数据收集管理方法及其系统

摘要

A Hadoop-based bulk data collection management system according to an embodiment of the present invention includes: a control module for collecting and managing data; a task arrangement module for processing a reservation task; a management module for managing an agent; and an agent collection module for enabling the agent to perform a collection operation. The management module includes: a data collection modeler for performing the setting of the agent for data collection; an agent distribution module for distributing the agent to a collection server; and an agent monitoring module for monitoring the task contents and performance information of the distributed agent. Accordingly, the present invention can improve the setting time and process of the data collection by easily and quickly distributing the agent.;COPYRIGHT KIPO 2018
机译:根据本发明实施例的基于Hadoop的海量数据收集管理系统,包括:控制模块,用于收集和管理数据;以及任务安排模块,用于处理预约任务;用于管理代理的管理模块;代理收集模块,用于使代理能够执行收集操作。管理模块包括:数据收集建模器,用于执行用于数据收集的代理的设置;以及代理分发模块,用于将代理分发给收集服务器;代理监视模块,用于监视分布式代理的任务内容和性能信息。因此,本发明可以通过容易且快速地分配代理来改善数据收集的设置时间和过程。COPYRIGHTKIPO 2018

著录项

  • 公开/公告号KR20180024367A

    专利类型

  • 公开/公告日2018-03-08

    原文格式PDF

  • 申请/专利权人 DFOCUS CO. LTD.;

    申请/专利号KR20160110420

  • 发明设计人 HAN JE YONGKR;LIM DONG ILKR;KIM GUN TAEKR;

    申请日2016-08-30

  • 分类号G06F11/34;G06F15/16;

  • 国家 KR

  • 入库时间 2022-08-21 12:40:36

相似文献

  • 专利
  • 外文文献
  • 中文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号