首页> 中国专利> 一种基于速度预测的深度学习任务的调度方法

一种基于速度预测的深度学习任务的调度方法

摘要

本发明公开了一种基于速度预测的深度学习任务的调度方法,包括速度模型构建和任务调度两部分。速度模型构建部分是构建一个神经网络模型来预测每一个任务在集群中运行时处理图片的速度,包括训练阶段和预测阶段:训练阶段首先对每个任务进行profiling,即收集每个任务在集群中不同分布式配置下的训练速度,构造数据集;采集每个任务在集群中训练的特征,构建速度模型并使用前一步构造的数据集训练这个速度模型。预测阶段集成到任务调度部分。任务调度部分利用速度模型预测任务在不同配置下的训练速度,使用定制化的模拟退火算法来决定集群的资源分配,从而达到有效利用集群资源的目的。

著录项

  • 公开/公告号CN111274036A

    专利类型发明专利

  • 公开/公告日2020-06-12

    原文格式PDF

  • 申请/专利权人 南京大学;

    申请/专利号CN202010068852.X

  • 发明设计人 曹春;马晓星;徐经纬;李青坪;

    申请日2020-01-21

  • 分类号

  • 代理机构南京乐羽知行专利代理事务所(普通合伙);

  • 代理人李玉平

  • 地址 210046 江苏省南京市栖霞区仙林大道163号

  • 入库时间 2023-12-17 09:16:50

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2020-07-07

    实质审查的生效 IPC(主分类):G06F9/50 申请日:20200121

    实质审查的生效

  • 2020-06-12

    公开

    公开

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号