首页> 中国专利> 一种基于多节点存储装置算力再利用算法

一种基于多节点存储装置算力再利用算法

摘要

本发明公开了一种基于多节点存储装置算力再利用算法,包括算力再利用算法包括:步骤1:计算在多节点存储装置中部署空闲资源检测程序;步骤2:在某个节点中部署任务调度中心;步骤3:资源监测程序定时获取CPU及内存;步骤4:空闲资源实时传递到任务调度中心;步骤5:等待用户提供任务处理;步骤6:任务调度中心根据用户提交的任务检测是否需要任务再分解;步骤7:返回处理结果;步骤8:回收资源,并返还任务调度中心。该基于多节点存储装置算力再利用算法,将存储节点中浪费的CPU以及内存资源利用起来,在闲时运转算力,一机多用,不仅能解决存储问题,还可以用于算力,创造收益,减少前期投资。

著录项

  • 公开/公告号CN113238870A

    专利类型发明专利

  • 公开/公告日2021-08-10

    原文格式PDF

  • 申请/专利权人 山东中科好靓科技有限公司;

    申请/专利号CN202110598397.9

  • 发明设计人 吴雪梅;

    申请日2021-05-31

  • 分类号G06F9/50(20060101);G06F9/48(20060101);

  • 代理机构

  • 代理人

  • 地址 276000 山东省临沂市临沂经济技术开发区合肥路与沃尔沃路交汇西200米沂蒙云谷孵化器3层

  • 入库时间 2023-06-19 12:10:19

说明书

技术领域

本发明涉及存储装置相关技术领域,具体为一种基于多节点存储装置算力再利用算法。

背景技术

随着5G和流媒体越来越多的利用,存储装置是网络领域中常用的设备和系统,另外,随着计算机系统变得更加复杂,计算机设计也日益模块化,通常使用多个模块化的节点来实现计算机系统,每个节点都包含一个或多个计算机处理器、一定数量的存储器,或同时包含处理器和存储器;复杂的计算机系统可以包括许多节点和用于在节点之间传输数据的复杂总线结构;存储系统由原来集中式向分布式发展,多节点存储装置为分布式存储的硬件支撑,每个存储节点的CPU,内存等缓存资源存在着极大的浪费。

现有的存储装置算法不能够将存储节点中浪费的CPU以及内存资源利用起来,不能够解决存储问题,并且容易造成投资的浪费,因此,我们提出一种基于多节点存储装置算力再利用算法,以便于解决上述中提出的问题。

发明内容

本发明的目的在于提供一种基于多节点存储装置算力再利用算法,以解决上述背景技术中提出的大多数基于多节点存储装置算力再利用算法,不能够将存储节点中浪费的CPU以及内存资源利用起来,不能够解决存储问题,并且容易造成投资的浪费的问题。

为实现上述目的,本发明提供如下技术方案:一种基于多节点存储装置算力再利用算法,算力再利用算法包括:

步骤1:计算在多节点存储装置中部署空闲资源检测程序;

步骤2:在某个节点中部署任务调度中心;

步骤3:资源监测程序定时获取CPU及内存;

步骤4:空闲资源实时传递到任务调度中心;

步骤5:等待用户提供任务处理;

步骤6:任务调度中心根据用户提交的任务检测是否需要任务再分解;

步骤7:返回处理结果;

步骤8:回收资源,并返还任务调度中心;

步骤9:继续等待其它任务。

优选的,所述步骤6中检测是否需要任务再分解时:

如果需要任务再分解,根据最小粒度进行再分解,然后分配给任务接口;

如果不需要任务再分解,直接通过任务接口处理。

优选的,所述步骤2中在部署任务调度中心时,通过设置的资源调度接口进行资源的调度,经过多节点CPU进行虚拟,然后经过多节点内存处理进行多节点缓存,最后,资源再次返回资源调度接口。

优选的,还包括存储器,用于步骤1-步骤9中存储计算机系统;以及处理器,用于执行计算机程序时实现多节点存储系统的节点内存算法。

优选的,所述步骤6用户将任务提交至任务调度中心后,任务调度中心将对任务信息进行分类和整合,再进行任务的检测。

优选的,所述进行任务再分解时,通过任务调度中心控制的分支系统进行再分解任务的控制。

优选的,所述步骤4中,任务调度中心包含的资源包括部署空闲资源和任务结束后回收的资源。

与现有技术相比,本发明的有益效果是:该基于多节点存储装置算力再利用算法,将存储节点中浪费的CPU以及内存资源利用起来,在闲时运转算力,一机多用,不仅能解决存储问题,还可以用于算力,创造收益,减少前期投资。

附图说明

图1为本发明实现逻辑示意图;

图2为本发明流程示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例,基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

请参阅图1-2,本发明提供一种技术方案:一种基于多节点存储装置算力再利用算法,算力再利用算法包括:

步骤1:计算在多节点存储装置中部署空闲资源检测程序;

步骤2:在某个节点中部署任务调度中心;

步骤3:通过资源峰值、谷值、平均值计算算法可用CPU及内存;

步骤4:空闲资源实时传递到任务调度中心;

步骤5:等待用户提供任务处理;

步骤6:任务调度中心根据用户提交的任务检测是否需要任务再分解;

步骤7:返回处理结果;

步骤8:回收资源,并返还任务调度中心;

步骤9:继续等待其它任务。

本发明更进一步的,所述步骤6中检测是否需要任务再分解时:

如果需要任务再分解,根据最小粒度进行再分解,然后分配给任务接口;

如果不需要任务再分解,直接通过任务接口处理。

本发明更进一步的,所述步骤2中在部署任务调度中心时,通过设置的资源调度接口进行资源的调度,经过多节点CPU进行虚拟,然后经过多节点内存处理进行多节点缓存,最后,资源再次返回资源调度接口,实现资源的循环利用和完整储存。

本发明更进一步的,还包括存储器,用于步骤1-步骤9中存储计算机系统;以及处理器,用于执行计算机程序时实现多节点存储系统的节点内存算法,辅助完成算力再利用算法的实现。

本发明更进一步的,所述步骤6用户将任务提交至任务调度中心后,任务调度中心将对任务信息进行分类和整合,再进行任务的检测。

本发明更进一步的,所述进行任务再分解时,通过任务调度中心控制的分支系统进行再分解任务的控制。

本发明更进一步的,所述步骤4中,任务调度中心包含的资源包括部署空闲资源和任务结束后回收的资源,将部署空闲资源和任务结束后回收的资源整合在任务调度中心中,能够实现资源的完成性。

本申请所提供的实施例中,应该理解到,所揭露的装置以及方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图以及框图显示了根据本申请的多个实施例的装置、方法以及计算机程序产品的可能实现的体系架构、功能以及操作。在这点上,流程图或者框图中的每个方框可以代表一个模块、程序段或者代码的一部分,模块、程序段或者代码的一部分包含一个或者多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图以及/或者流程图中的每个方框、以及框图以及/或者流程图中的方框的组合,可以用执行规定的功能或者动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

另外,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或者两个以上模块集成形成一个独立的部分。

功能如果以软件功能模块的形式实现并作为独立的产品销售或者使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备可以是个人计算机,服务器,或者网络设备等执行本申请各个实施例方法的全部或者部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器ROM,Read-OnlyMemory、随机存取存储器RAM,RandomAccessMemory、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一以及第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或者操作区分开来,而不一定要求或者暗示这些实体或者操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改以及变化。凡在本申请的精神以及原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。应注意到:相似的标号以及字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义以及解释。

以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或者替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号