CN115080254B - 一种用于调整计算集群中计算任务资源的方法和系统 - Google Patents

一种用于调整计算集群中计算任务资源的方法和系统 Download PDF

Info

Publication number
CN115080254B
CN115080254B CN202211015992.6A CN202211015992A CN115080254B CN 115080254 B CN115080254 B CN 115080254B CN 202211015992 A CN202211015992 A CN 202211015992A CN 115080254 B CN115080254 B CN 115080254B
Authority
CN
China
Prior art keywords
state
workload
trigger
suspended
notebook
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211015992.6A
Other languages
English (en)
Other versions
CN115080254A (zh
Inventor
王明亮
徐达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Vector Stack Technology Co ltd
Original Assignee
Beijing Vector Stack Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Vector Stack Technology Co ltd filed Critical Beijing Vector Stack Technology Co ltd
Priority to CN202211015992.6A priority Critical patent/CN115080254B/zh
Publication of CN115080254A publication Critical patent/CN115080254A/zh
Application granted granted Critical
Publication of CN115080254B publication Critical patent/CN115080254B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5072Grid computing

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开一种用于调整计算集群中计算任务资源的方法和系统,属于集群计算、分布式计算、自动化资源管理、资源使用效率技术领域,特别涉及一种用于调整计算集群中计算任务资源的方法,包括:状态转换触发器读取触发策略;状态转换触发器监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源。本发明方案中,工作负载和状态转换触发器两个模块,分别承担的不同的角色,独立运行,使得整个系统能够更加灵活的处理各种场景,并更加鲁棒。本方案可以自由地配置触发策略,以及动态地修改和加载各种触发策略,可维护性高,便于对计算集群进行系统化的统一管理。

Description

一种用于调整计算集群中计算任务资源的方法和系统
技术领域
本发明属于集群计算、分布式计算、自动化资源管理、资源使用效率技术领域,特别涉及一种用于调整计算集群中计算任务资源的方法和系统。
背景技术
在分布式计算集群(例如Kubernetes,Kubernetes是一个流行的主要由 Google贡献的分布式集群计算管理系统)中,一些工作负载和计算任务,例如 Jupyter Notebook、Dask、MPI、Ray 等,长时间地占用分布式集群中的 CPU、内存、GPU 等计算资源,但是并没有在真正地使用这些资源,从而造成资源的闲置和浪费。
现有技术中,通常采用以下几种方式进行资源调配,以避免资源浪费,包括:
纵向扩展,例如 Kubernetes Autoscaler 是指手动或自动地将计算任务声明的所要使用的计算资源增大或减小。这种方案假设计算任务的运行规模可以通过简单的改变RAM/CPU 需求实现。
横向扩展,例如 Horizontal Pod Autoscaler,这种方法是指手动或自动地将计算任务底层的计算节点(在 Kubernetes 中称为 Pod)的个数增加或减小。这种方案假设计算任务的运行规模可以简单的增减运行的副本数目来实现。
自发弹性伸缩,例如 Elastic Jupyter Operator 中,其将一个特定计算任务切割为一个常驻的网页应用和后台计算的模块,并根据需要开启/终止后台的计算模块。这个方式要求每个特定计算任务本身实现触发策略,并仅对当前计算任务适用,缺乏灵活性。
本发明人经研究发现,现有技术方案中,需要针对特定的计算任务进行相应的适配,甚至要求计算任务底层的运算方式进行较大的变动,现有技术方案灵活性差,不具有通用性。
发明内容
为了至少解决上述技术问题,本发明提供了一种用于调整计算集群中计算任务资源的方法和系统。
根据本发明第一方面,提供了一种用于调整计算集群中计算任务资源的方法,包括:
状态转换触发器读取触发策略;
状态转换触发器监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源。
进一步的,
所述触发策略与工作负载适配设置。
进一步的,
所述工作负载的运行状态包括:“已暂停”状态和“繁忙”状态;
当所述工作负载的运行状态被设置为“已暂停”时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入“繁忙”状态的时间。
进一步的,
所述“已暂停”状态包括:“正常”、“节省”、“暂停”,
其中,“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈。
进一步的,所述触发策略包括:当预设时间内未检测到网络流量时,将工作负载暂停,并将工作负载的状态调整为“已暂停”。
进一步的,
所述触发策略包括:在未接收到任何人机交互指令时,将工作负载暂停,并将工作负载的状态调整为“已暂停”。
进一步的,
状态转换触发器读取触发策略;
状态转换触发器监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源;
所述触发策略为在未接收到任何人机交互指令时,将工作负载暂停,并将工作负载的状态调整为“已暂停”;
所述“已暂停”状态包括:“正常”、“节省”、“暂停”,
其中,“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈;
当所述工作负载的运行状态被设置为“已暂停”时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入“繁忙”状态的时间。
根据本发明第二方面,一种用于调整计算集群中计算任务资源的系统,包括:
工作负载和状态转换触发器;
其中,工作负载用于及时报告运行状态;
状态转换触发器,用于读取触发策略;
用于监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源。
根据本发明第三方面,一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现本发明第一方面中任一项所述方法的步骤。
根据本发明第四方面,一种计算机可读存储介质,所述计算机可读存储介质存储有程序,所述程序被执行时,能够实现本发明第一方面中任一项所述的方法。
本发明的有益效果:本发明方案中的工作负载和状态转换触发器两个模块是互相独立的运算过程;状态触发器负责观测工作负载的状态,并评估触发策略。 这两个模块分别承担的不同的角色,独立运行,但遵循预设的协议,使得整个系统能够更加灵活的处理各种场景,并更加鲁棒。另外本方案提供了一个通用的接口和工作模式,可以对多种工作负载提供支持,而不是限制在某一类特定的工作负载。进一步地,本方案可以自由地配置针对哪些种类的工作负载执行触发策略,以及动态地修改和加载各种触发策略,具有高度的可维护性,便于管理员对计算集群进行系统化的统一管理。
附图说明
本发明上述的和 / 或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中,
图1为本发明提供的一种用于调整计算集群中计算任务资源的方法流程图;
图2为本发明提供的一种用于调整计算集群中计算任务资源的系统结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
为了更清楚地说明本发明,下面结合优选实施例和附图对本发明做进一步的说明。附图中相似的部件以相同的附图标记进行表示。本领域技术人员应当理解,下面所具体描述的内容是说明性的而非限制性的,不应以此限制本发明的保护范围。
在本发明的第一方面,提供一种用于调整计算集群中计算任务资源的方法,如图1所示,包括:
步骤101:状态转换触发器读取触发策略;
本发明中,系统管理员可以针对不同的工作负载创建对应的触发策略,状态转换触发器读取触发策略。
步骤102:状态转换触发器监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源。
本发明中,当用户创建工作负载后,状态转换触发器负责监测工作负载的运行并评估其运行状态。工作负载的状态也就是运行状态,包括:已暂停状态和繁忙状态。
工作负载即工作负载接口,设置有一个名为“已暂停”的状态,能够支持进入“已暂停”状态以及从“已暂停”状态恢复。通过工作负载接口实现工作负载运行状态的标记以及状态转换时的各种操作,使得工作负载接口实例中工作负载相关的计算由对应的工作负载负责。
本发明中,当工作负载被设置为“已暂停”状态时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入繁忙状态的时间。
在 Kubernetes 中,工作负载接口可以通过定制资源实现。
进一步地,“已暂停”状态扩展为若干个运行状态,运行状态也可以称之为run-mode,包括:“正常(normal)”、“节省(saving)”,“暂停(Suspended)” 三个递进的状态,其中:
“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈。
更进一步的,“正常”、“节省”、“暂停”三个状态按照使用资源由多至少递减,从每个状态到恢复工作所消耗的时间由短至长,并且可以根据场景的需要进行针对性的选择。
当与工作负载相应的触发策略满足条件时,状态转换触发器根据触发策略设置工作负载的状态,以便其控制器释放所占用的资源,提高资源使用效率。
本发明技术方案可以处理一类工作负载,而不是局限于一个特定的工作负载。
在本发明第一方面的另一个实施例中,下面展示一个工作负载的示例,是在Kubernetes 中通过定制资源机制来运行 Jupyter Notebook 服务,其实现了本方案中所定义的工作负载接口。
apiVersion: tensorstack.dev/v1beta1 kind: Notebook metadata:name:notebook-sample spec:runMode: runningtemplate:spec:containers:- image:tensorflowname: exampleresources:requests:cpu: "8"memory: 16.0Gi status:conditions: - type: Idlestatus: "True"reason: "Nobody is using the Notebook."startTime: "2-03-21T07:08:28Z"
在上面的示例中,是一个类型为 Notebook 的 Kubernetes 定制资源,用于运行一个需要占用 8 个 CPU 和 16Gi 内存的容器。其中 spec.runMode 字段表示该Notebook 的实时状态,值可以是 paused(已暂停)、running(运行中)等。
状态转换触发器将会持续监测该 Notebook 的运行状况,可以通过以下方式:
Notebook 自身主动报告的一些指标,例如在 status.conditions 字段中报告,由于没有人正在使用该 Notebook,正处于 Idle(空闲)状态,并报告了 Idle 状态开始的时间。
状态转换触发器自身主动通过监控系统获取到的有关 Notebook 的一些指标,例如访问 Notebook 容器的网络请求数量、Notebook 容器实际使用的 CPU 个数和内存大小。
结合上述两点,管理员可以综合制定触发策略,例如:
Notebook 报告自身处于 Idle(空闲)状态已经超过 5 分钟。
状态转换触发器观测到访问 Notebook 容器的网络请求数量少于 5 个每分钟,或者 Notebook 容器实际使用的 CPU 小于 0.1 个、内存小于 0.1Gi。
当状态转换触发器通过监测发现该 Notebook 满足上述触发策略时,就会修改其spec.runMode 字段的值为 paused(已暂停),如下所示:
apiVersion: tensorstack.dev/v1beta1 kind: Notebook metadata:name:notebook-sample spec:runMode: pausedtemplate:spec:containers:- image:tensorflowname: exampleresources:requests:cpu: "8"memory: 16.0Gi
status:conditions:- type: Idlestatus: "True"reason: Nobody is usingthe Notebook.startTime: "2-03-21T07:08:28Z"
在本发明中,Notebook 控制器会根据该 Notebook 的 spec 变化,执行预先定义好的暂定动作,例如将占用 CPU 和内存的容器直接删除,以释放计算资源。
当状态转换触发器通过监测发现该 Notebook 已经不满足触发策略时,就会修改其 spec.runMode 字段为 running(运行中)。
Notebook 控制器会根据该 Notebook 的 spec 变化,执行预先定义好的恢复动作,例如重新创建一个占用 8 个 CPU 和 16Gi 内存的 Pod。
在本发明的第二方面,提供一种用于调整计算集群中计算任务资源的系统,如图2所示,包括:
工作负载和状态转换触发器;
其中,工作负载用于及时报告运行状态;
进一步地,运行状态,包括:暂停状态和繁忙状态。
工作负载设置有一个名为“已暂停”的状态,能够支持进入“已暂停”状态以及从“已暂停”状态恢复。
本发明中,当工作负载进入“已暂停”状态时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入繁忙状态的时间。
在 Kubernetes 中,工作负载可以通过定制资源实现。
进一步地,“已暂停”状态扩展为若干个运行状态,运行状态也可以称之为run-mode,包括:“正常(normal)”、“节省(saving)”,“暂停(Suspended)” 三个递进的状态,其中:
“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈。
更进一步的,“正常”、“节省”、“暂停”三个状态按照使用资源由多至少递减,从每个状态到恢复工作所消耗的时间由短至长,并且可以根据场景的需要进行针对性的选择。
在本发明中,上述各状态的命名和个数仅为示意,采取不同的名字不影响本方案的有效性的。
状态转换触发器,用于读取触发策略;
还用于监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源。
进一步地,状态转换触发器具体用于负责监测工作负载实例的运行状态,通过预置的触发策略进行评估,并在触发策略满足时,设置工作负载的工作状态(例如设置为已暂停)。
在本发明的另一个实施例中,状态转换触发器可以通过定时任务来规律性地扫描所有的工作负载实例;还可以在 Kubernetes 中,可以通过一个长期运行的控制器来追踪工作负载的变化情况。
另外,状态转换触发器还用于为特定的工作负载创建适配的触发策略。
在本发明另一实施例中,创建一个典型的触发策略,该典型的触发策略包括:当预设时间内未检测到网络流量时,将工作负载暂停,并将工作负载的状态调整为“已暂停”。
该典型的触发策略还可以为,在未接收到任何人机交互指令时,将工作负载暂停,并将工作负载的状态调整为“已暂停”。
状态转换触发器还用于接受新的触发策略;还用于对已有策略进行修改。
在本发明中,状态转换触发器用于向用户提供接口,以获取工作负载的一些统计指标,获取工作负载的整体运行状态。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、 “一个”、 “所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和 / 或组件,但是并不排除存在或添加 一个或多个其他特征、整数、步骤、操作、元件、组件和 / 或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时, 它可以直接连接或耦接到其他元件,或者也可以存在 中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用 的措辞“和 / 或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语 ( 包括技术 术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应 该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中 的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
应当理解,以上借助优选实施例对本发明的技术方案进行的详细说明是示意性的而非限制性的。本领域的普通技术人员在阅读本发明说明书的基础上可以对各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (4)

1.一种用于调整计算集群中计算任务资源的方法,其特征在于,包括:
状态转换触发器读取触发策略;
状态转换触发器监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源;
所述触发策略与工作负载适配设置;
所述工作负载的运行状态包括:“已暂停”状态和“繁忙”状态;
当所述工作负载的运行状态被设置为“已暂停”时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入“繁忙”状态的时间;
所述“已暂停”状态包括:“正常”、“节省”、“暂停”,
其中,“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈;
所述触发策略包括:当预设时间内未检测到网络流量时,将工作负载暂停,并将工作负载的状态调整为“已暂停”;
所述触发策略包括:在未接收到任何人机交互指令时,将工作负载暂停,并将工作负载的状态调整为“已暂停”;
类型为 Notebook 的 Kubernetes 定制资源,用于运行一个需要占用 8 个 CPU 和16Gi 内存的容器;状态转换触发器将会持续监测该 Notebook 的运行状况;
没有人正在使用该 Notebook,正处于空闲状态,并报告了 Idle 状态开始的时间;
状态转换触发器自身主动通过监控系统获取到的有关 Notebook 的指标,包括:访问Notebook 容器的网络请求数量、Notebook 容器实际使用的 CPU 个数和内存大小;
制定触发策略:状态转换触发器观测到访问 Notebook 容器的网络请求数量少于 5个每分钟,或者 Notebook 容器实际使用的 CPU 小于 0.1 个、内存小于 0.1Gi;
当状态转换触发器通过监测发现该 Notebook 满足触发策略时,修改为“已暂停”,
当状态转换触发器通过监测发现该 Notebook 已经不满足触发策略时,就会修改为:“运行中”。
2.一种用于调整计算集群中计算任务资源的系统,其特征在于,包括:
工作负载和状态转换触发器;
其中,工作负载用于及时报告运行状态;
状态转换触发器,用于读取触发策略;
用于监测工作负载,并根据触发策略评估、设置工作负载的运行状态,使得工作负载的运行状态被设置为“已暂停”时,控制器释放工作负载占用的资源;
所述触发策略与工作负载适配设置;
所述工作负载的运行状态包括:“已暂停”状态和“繁忙”状态;
当所述工作负载的运行状态被设置为“已暂停”时,保存当前数据,记录进入“已暂停”状态的时间,停止占用资源的底层Pod;当工作负载从“已暂停”状态恢复,即进入“繁忙”状态时,启动 Pod,并恢复数据,记录进入“繁忙”状态的时间;
所述“已暂停”状态包括:“正常”、“节省”、“暂停”,
其中,“正常”状态用于表示工作负载处于全功能,正常运转状态,使用所有申请的资源;
“节省”状态用于表示工作负载处于低资源使用模式,仅申请能够维持其基本功能的计算资源;
“暂停”状态用于表示工作负载处于暂时终止状态,其还能对外部提供一些基本的反馈;
所述触发策略包括:当预设时间内未检测到网络流量时,将工作负载暂停,并将工作负载的状态调整为“已暂停”;
所述触发策略包括:在未接收到任何人机交互指令时,将工作负载暂停,并将工作负载的状态调整为“已暂停”;
类型为 Notebook 的 Kubernetes 定制资源,用于运行一个需要占用 8 个 CPU 和16Gi 内存的容器;状态转换触发器将会持续监测该 Notebook 的运行状况;
没有人正在使用该 Notebook,正处于空闲状态,并报告了 Idle 状态开始的时间;
状态转换触发器自身主动通过监控系统获取到的有关 Notebook 的指标,包括:访问Notebook 容器的网络请求数量、Notebook 容器实际使用的 CPU 个数和内存大小;
制定触发策略:状态转换触发器观测到访问 Notebook 容器的网络请求数量少于 5个每分钟,或者 Notebook 容器实际使用的 CPU 小于 0.1 个、内存小于 0.1Gi;
当状态转换触发器通过监测发现该 Notebook 满足触发策略时,修改为“已暂停”,
当状态转换触发器通过监测发现该 Notebook 已经不满足触发策略时,就会修改为:“运行中”。
3.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,
所述处理器执行所述程序时实现权利要求1所述方法的步骤。
4.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有程序,所述程序被执行时,能够实现如权利要求1所述的方法。
CN202211015992.6A 2022-08-24 2022-08-24 一种用于调整计算集群中计算任务资源的方法和系统 Active CN115080254B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211015992.6A CN115080254B (zh) 2022-08-24 2022-08-24 一种用于调整计算集群中计算任务资源的方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211015992.6A CN115080254B (zh) 2022-08-24 2022-08-24 一种用于调整计算集群中计算任务资源的方法和系统

Publications (2)

Publication Number Publication Date
CN115080254A CN115080254A (zh) 2022-09-20
CN115080254B true CN115080254B (zh) 2023-09-22

Family

ID=83244203

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211015992.6A Active CN115080254B (zh) 2022-08-24 2022-08-24 一种用于调整计算集群中计算任务资源的方法和系统

Country Status (1)

Country Link
CN (1) CN115080254B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683720A (zh) * 2018-04-28 2018-10-19 金蝶软件(中国)有限公司 一种容器集群服务配置方法及装置
CN111338784A (zh) * 2020-05-25 2020-06-26 南栖仙策(南京)科技有限公司 一种实现代码仓库与计算服务整合的方法及系统
CN111858060A (zh) * 2020-07-25 2020-10-30 苏州浪潮智能科技有限公司 一种高性能计算集群的资源动态调整方法和装置
WO2021212967A1 (en) * 2020-04-24 2021-10-28 Huawei Technologies Co., Ltd. Task scheduling for distributed data processing
EP3917180A1 (en) * 2020-05-28 2021-12-01 Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. Resource scheduling method and apparatus, electronic device, and storage medium

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683720A (zh) * 2018-04-28 2018-10-19 金蝶软件(中国)有限公司 一种容器集群服务配置方法及装置
WO2021212967A1 (en) * 2020-04-24 2021-10-28 Huawei Technologies Co., Ltd. Task scheduling for distributed data processing
CN111338784A (zh) * 2020-05-25 2020-06-26 南栖仙策(南京)科技有限公司 一种实现代码仓库与计算服务整合的方法及系统
WO2021237829A1 (zh) * 2020-05-25 2021-12-02 南栖仙策(南京)科技有限公司 一种实现代码仓库与计算服务整合的方法及系统
EP3917180A1 (en) * 2020-05-28 2021-12-01 Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. Resource scheduling method and apparatus, electronic device, and storage medium
CN111858060A (zh) * 2020-07-25 2020-10-30 苏州浪潮智能科技有限公司 一种高性能计算集群的资源动态调整方法和装置

Also Published As

Publication number Publication date
CN115080254A (zh) 2022-09-20

Similar Documents

Publication Publication Date Title
KR100864964B1 (ko) 연산처리시스템 및 연산처리 제어방법, 업무관리시스템 및업무관리방법과 기억매체
Do et al. ptop: A process-level power profiling tool
US8370472B2 (en) System and method for efficient machine selection for job provisioning
US9391922B2 (en) Computer workload redistribution schedule
KR101624765B1 (ko) 에너지-인식 서버 관리
US7441240B2 (en) Process scheduling apparatus, process scheduling method, program for process scheduling, and storage medium recording a program for process scheduling
US8547840B1 (en) Bandwidth allocation of bursty signals
US20120096287A1 (en) Coordinated approach between middleware application and sub-systems
TW201338537A (zh) 動態派工錄影系統與方法
US8583952B2 (en) Power management of computers based on user inactivity and power state requirements for active processes
KR20100073157A (ko) 클러스터 시스템에 대한 원격 전원 관리 시스템 및 그 방법
CN107111349B (zh) 用于片上多核系统的驱动基于访问的资源的低功耗控制和管理
CN105511593A (zh) 一种用于Linux系统的CPU子系统频率调节方法和装置
CN103645795A (zh) 一种基于人工神经网络的云计算数据中心节能方法
US8176498B2 (en) Power setting adjustments by mission operating system in response to requests from platform manager
CN111625080A (zh) 一种服务器节能方法、装置及电子设备和存储介质
JP6263995B2 (ja) 情報処理システム、管理装置、情報処理システムの制御方法及び管理装置の制御プログラム
CN101201689A (zh) 一种多任务系统中自动管理cpu功耗的方法
Yang et al. Dynamic cluster reconfiguration for energy conservation in computation intensive service
CN107132903B (zh) 一种节能管理实现方法、装置及网络设备
US9195514B2 (en) System and method for managing P-states and C-states of a system
CN115080254B (zh) 一种用于调整计算集群中计算任务资源的方法和系统
US20210373639A1 (en) Throughput-Optimized, Quality-Of-Service Aware Power Capping System
CN106843890B (zh) 基于智能决策的传感器网络、节点及其运行方法
US20230229216A1 (en) System and methods for server power management

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant