CN113568737B - 硬件资源分配方法及装置 - Google Patents
硬件资源分配方法及装置 Download PDFInfo
- Publication number
- CN113568737B CN113568737B CN202110747256.9A CN202110747256A CN113568737B CN 113568737 B CN113568737 B CN 113568737B CN 202110747256 A CN202110747256 A CN 202110747256A CN 113568737 B CN113568737 B CN 113568737B
- Authority
- CN
- China
- Prior art keywords
- type
- task
- hardware resources
- upper limit
- type task
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000013468 resource allocation Methods 0.000 title claims description 21
- 238000012545 processing Methods 0.000 claims abstract description 147
- 238000004364 calculation method Methods 0.000 claims abstract description 41
- 230000015654 memory Effects 0.000 claims description 172
- 238000001514 detection method Methods 0.000 claims description 6
- 239000002699 waste material Substances 0.000 abstract description 6
- 238000004891 communication Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 238000002955 isolation Methods 0.000 description 4
- 230000005291 magnetic effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 229910021421 monocrystalline silicon Inorganic materials 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Image Processing (AREA)
- Multi Processors (AREA)
Abstract
本申请提供了一种硬件资源分配方法及装置,包括:获取待处理任务和计算服务器的可分配硬件资源量;在待处理任务为第一类型任务的情况下,按照针对第一类型任务预设的资源上限值,为第一类型任务分配第一硬件资源进行计算处理;在待处理任务为第二类型任务的情况下,按照可分配硬件资源量,为第二类型任务分配第二硬件资源进行计算处理;本申请可以在对第一类型任务进行资源分配时,所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,保证了第二类型任务具有充分的硬件资源进行使用,并且,不会存在因硬件资源爆满而无法运行第二类型任务的情况,也就无需人工介入来清理多余的第一类型任务,降低了人工资源的浪费。
Description
技术领域
本申请实施例涉及计算机技术领域,尤其涉及一种硬件资源分配方法、装置、预测模型的训练方法、装置、电子设备、计算机存储介质及计算机程序产品。
背景技术
随着机器学习、人工智能的发展,图形处理器(GPU,graphics processing unit)的应用场景越来越多,目前的计算服务器可以同时包括GPU和中央处理器(CPU,centralprocessing unit),以提供GPU运算服务和CPU运算服务。
由于GPU运算服务也需要利用一部分CPU硬件资源,相关技术中,硬件资源的分配方式包括:为了保证GPU资源的使用,可以针对由多台计算服务器构成的计算集群,设定一个CPU运算服务的占比上限,在资源分配过程中,尽量保持计算集群中CPU运算服务的占比不超过所设定的上限。在出现CPU运算服务的占比超过上限后,可以由运营人员手动清理多余的CPU运算服务。
但是,目前方案中,仅对整个计算集群的CPU运算服务的占比进行限定,无法满足对单台计算服务器的CPU、GPU资源的合理利用,而人工清理的成本较高,时效性较差。
如,虽然保证了整个计算集群的CPU运算服务的占比,但可能会出现某台计算服务器的CPU资源爆满,无法上线新的GPU运算服务,而另一计算服务器的CPU资源空闲,导致资源浪费。
发明内容
本申请实施例提供一种硬件资源分配方法、装置、电子设备、计算机存储介质及计算机程序产品,以解决相关技术中无法满足对单台计算服务器的CPU、GPU资源的合理利用,而人工清理的成本较高,时效性较差的问题。
第一方面,本申请实施例提供了一种硬件资源分配方法,应用于计算服务器,该方法包括:
获取待处理任务和所述计算服务器的可分配硬件资源量;
在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理;
在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理;
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量。
在一种可选实施方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第一类型任务包括:基于所述中央处理器和内存进行计算处理的任务;所述资源上限值包括:用于分配给所述第一类型任务的中央处理器的内核上限值以及内存大小上限值。
在一种可选实施方式中,所述按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,包括:
确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小;
在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
在一种可选实施方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第二任务类型包括:基于所述中央处理器、图形处理器和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器的总数量、所述中央处理器的内核总数量以及内存大小总量。
在一种可选实施方式中,所述按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理,包括:
确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小;
在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
在一种可选实施方式中,所述方法还包括:
在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限;
在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
第二方面,本申请实施例还提供了一种硬件资源分配装置,应用于计算服务器,所述装置包括:
获取模块,被配置为获取待处理任务和所述计算服务器的可分配硬件资源量;
第一分配模块,被配置为在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理;
第二分配模块,被配置为在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理;
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量。
在一种可选实施方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第一类型任务包括:基于所述中央处理器和内存进行计算处理的任务;所述资源上限值包括:用于分配给所述第一类型任务的中央处理器的内核上限值以及内存大小上限值。
在一种可选实施方式中,所述第一分配模块,包括:
第一确定子模块,被配置为确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小;
第一分配子模块,被配置为在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
在一种可选实施方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第二任务类型包括:基于所述中央处理器、图形处理器和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器的总数量、所述中央处理器的内核总数量以及内存大小总量。
在一种可选实施方式中,所述第二分配模块,包括:
第二确定子模块,被配置为确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小;
第二分配子模块,被配置为在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
在一种可选实施方式中,所述装置还包括:
第一检测模块,被配置为在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限;
第二检测模块,被配置为在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
第三方面,本申请实施例还提供了一种电子设备,包括用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现所述的硬件资源分配方法。
第四方面,本申请实施例还提供了一种存储介质,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行所述的硬件资源分配方法。
第五方面,本申请实施例还提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现所述的硬件资源分配方法。
在本申请实施例中,本申请可以针对第一类型任务预设一个资源上限值,使得在对第一类型任务进行资源分配时,所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,这样就保证了第二类型任务具有充分的硬件资源进行使用,使得计算服务器也可以为第二类型任务预留一定的硬件资源,从而确保第二类型任务可以正常稳定的获得剩余硬件资源,并且,由于所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,则不会存在因硬件资源爆满而无法运行第二类型任务的情况,也就无需人工介入来清理多余的第一类型任务,降低了人工资源的浪费。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1是本申请实施例提供的一种硬件资源分配方法的步骤流程图;
图2是本申请实施例提供的一种硬件资源分配方法的具体步骤流程图;
图3是本申请实施例提供的一种硬件资源分配示意图;
图4是本申请实施例提供的一种硬件资源分配装置的框图;
图5是本申请一个实施例的电子设备的逻辑框图;
图6是本申请另一个实施例的电子设备的逻辑框图。
具体实施方式
下面将参照附图更详细地描述本申请的示例性实施例。虽然附图中显示了本申请的示例性实施例,然而应当理解,可以以各种形式实现本申请而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本申请,并且能够将本申请的范围完整的传达给本领域的技术人员。
图1是本申请实施例提供的一种硬件资源分配方法的步骤流程图,应用于计算服务器,如图1所示,该方法可以包括:
步骤101,获取待处理任务和所述计算服务器的可分配硬件资源量。
在本申请实施例中,计算服务器可以是一台独立的计算设备,也可以是计算集群中的一台计算设备,计算服务器可以提供硬件资源,待处理任务是需要利用计算服务器的硬件资源进行逻辑计算,以得到计算结果的任务。具体的,计算服务器的硬件资源可以包括:内存、中央处理器(CPU)、图形处理器(GPU)等。
内存是设备中用于暂时存放处理器所需的运算数据的片区,可以与硬盘等外部存储器交换数据。本申请实施例中,内存可以存储获取的待处理任务、待处理任务在计算过程中得到的中间数据和结果数据,以及计算过程所需的算法模型等。
中央处理器(CPU)作为运算和控制的核心,是信息处理、程序运行的最终执行单元,中央处理器(CPU)有强大的算术运算单元,可以在很少的时钟周期内完成算术计算,同时,中央处理器(CPU)也有很大的缓存可以保存很多数据在里面,此外,中央处理器(CPU)还有复杂的逻辑控制单元,因此它非常擅长逻辑控制、串行的运算。
图形处理器(GPU)是一种进行与图像和图形相关运算工作的微处理器,具有大量的算术运算单元,因此可以同时执行大量的计算工作,它所擅长的是大规模的并发计算。
计算服务器的可分配硬件资源量,可以为计算服务器能够用于进行待处理任务计算的硬件资源量,如,一台计算服务器的硬件配置包括:具有104个内核的中央处理器(CPU)、536G大小的内存片区、2个图形处理器(GPU),若该计算服务器的所有硬件资源可以被用于进行任务处理,则该计算服务器的可分配硬件资源量即包括具有104个内核的中央处理器(CPU)、536G大小的内存片区、2个图形处理器(GPU)。
步骤102,在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理。
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值。
在本申请实施例中,由于中央处理器(CPU)口可以用来做复杂的逻辑运算,用图形处理器(GPU)可以用来做简单但是量大的算术运算。因此,可以将待处理任务划分为两种类型,第一类型任务可以是需要利用中央处理器(CPU)的资源进行复杂的逻辑运算的任务,如,进行算法预测、利用复杂公式求解答案的任务等。第二类型任务是需要利用图形处理器(GPU)做简单、量大的算术运算,且同时需要利用中央处理器(CPU)的资源进行一部分的复杂逻辑运算的任务,如,涉及与图像和图形相关运算的任务。并且,这两种任务的运算,都需要使用内存硬件资源来进行相关数据的存储。
在该步骤中,由于存在需要使用中央处理器(CPU)的硬件资源的第一类型任务,且第二类型任务也需要使用中央处理器(CPU)的硬件资源,则本申请实施例的需求是即使在极端情况下,计算服务器也可以为第二类型任务预留一定的中央处理器(CPU)和内存硬件资源,从而确保第二类型任务可以正常获得硬件资源。
因此,为了实现上述需求,本申请实施例可以针对第一类型任务对中央处理器(CPU)和内存硬件资源的需求,设定一个计算服务器的资源上限值,使得为所有第一类型任务分配的第一硬件资源总量,不超过该资源上限值,这样在保证第一类型任务可以正常使用计算服务器的一定比例的中央处理器(CPU)、内存硬件资源的基础上,满足为第二类型任务预留剩余的中央处理器(CPU)和内存硬件资源,保证第二类型任务的正常执行。
例如,假设一台计算服务器的硬件配置包括:具有104个内核的中央处理器(CPU)、536G大小的内存片区、2个图形处理器(GPU)。则可以针对第一类型任务定义资源上限值为:中央处理器(CPU)的60个内核、300G内存,这代表为所有第一类型任务分配的中央处理器(CPU)的内核总数不超过60,为所有第一类型任务分配的内存总和不超过300。
进一步的,在待处理任务为第一类型任务的情况下,计算服务器可以按照资源上限值,为第一类型任务分配第一硬件资源进行计算处理,并使得为所有第一类型任务分配的第一硬件资源总量,不超过资源上限值;这样可以保证即使第一类型任务将资源上限值内的所有硬件资源全部用完,第二类型任务仍然能保证可以使用剩余的44个中央处理器(CPU)内核和236G内存。
在一个实际示例中,假设1个第一类型任务需求4个内核和10G内存,则计算服务器在确定资源上限值内的硬件资源够用的情况下,可以为该第一类型任务分配4个内核和10G内存,并基于4个内核和10G内存建立应用容器,通过应用容器来进行第一类型任务的计算,得到计算结果。应用容器指的是一种轻量级的操作系统级虚拟化技术,可以基于硬件资源进行建立,并可以在一个资源隔离的进程中运行应用任务及其依赖项。但是,运行应用任务所必需的组件都将打包成一个镜像并可以复用。在执行镜像时,应用容器可以运行在一个隔离环境中,利用操作系统内核的命名空间隔离以及资源隔离的特性,可以使得不同的进程拥有隔离的运行环境和资源,并且不会共享宿主机的内存、中央处理器(CPU)以及磁盘。
步骤103、在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理。
其中,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量。
在本申请实施例中,由于第二类型任务需要使用中央处理器(CPU)、内存和图形处理器(GPU)的硬件资源,且本申请实施例的需求是即使在极端情况下,计算服务器也可以为第二类型任务预留一定的中央处理器(CPU)和内存硬件资源,从而确保第二类型任务可以正常获得硬件资源。
因此,在待处理任务为第二类型任务的情况下,计算服务器可以按照可分配硬件资源量,以使得为第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量;这样可以保证即使第一类型任务将资源上限值内的所有硬件资源全部用完,第二类型任务仍然能保证可以使用剩余的44个中央处理器(CPU)内核和236G内存。且由于第二类型任务具有优先性,则即使第二类型任务将可分配硬件资源量内的所有硬件资源全部用完,也是被计算服务器所允许的。
综上所述,本申请实施例提供的一种硬件资源分配方法,本申请可以针对第一类型任务预设一个资源上限值,使得在对第一类型任务进行资源分配时,所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,这样就保证了第二类型任务具有充分的硬件资源进行使用,使得计算服务器也可以为第二类型任务预留一定的硬件资源,从而确保第二类型任务可以正常稳定的获得剩余硬件资源,并且,由于所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,则不会存在因硬件资源爆满而无法运行第二类型任务的情况,也就无需人工介入来清理多余的第一类型任务,降低了人工资源的浪费。
图2是本申请实施例提供的另一种硬件资源分配方法的具体步骤流程图,应用于计算服务器,如图2所示,该方法可以包括:
步骤201、获取待处理任务和所述计算服务器的可分配硬件资源量。
该步骤具体可以参照上述步骤101,此处不再赘述。
可选的,计算服务器的硬件资源包括:中央处理器(CPU)、内存和图形处理器(GPU),所述第一类型任务包括:基于所述中央处理器(CPU)和内存进行计算处理的任务;所述资源上限值包括:用于分配给所述第一类型任务的中央处理器(CPU)的内核上限值以及内存大小上限值。所述方法还包括:
步骤202、确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小。
在本申请实施例中,计算服务器的硬件资源可以包括:内存、中央处理器(CPU)、图形处理器(GPU)等。中央处理器(CPU)可以具有多个内核,内核是中央处理器(CPU)中的核心芯片,由单晶硅制成,用来完成所有的计算、接受/存储命令、处理数据等,是数字处理核心。图形处理器(GPU)可以包括多种类型,如GPU芯片、现场可编程逻辑门阵列(FPGA,FieldProgrammable Gate Array)芯片、专用集成电路(ASIC,Application SpecificIntegrated Circuit)芯片等。通过内存、中央处理器(CPU)、图形处理器(GPU)等硬件资源,可以使得计算服务器能够处理具有对各种硬件资源的需求的计算任务,提升计算服务器的适用性。
进一步的,参照图3,图3是本申请实施例提供的一种硬件资源分配示意图,假设计算服务器的可分配硬件资源量包括具有104个内核的中央处理器(CPU)、536G大小的内存片区、2个图形处理器(GPU)。可以针对第一类型任务,预设第一类型任务可使用的资源上限值包括:中央处理器(CPU)的60个内核以及300G的内存。其反映了为所有第一类型任务分配的中央处理器(CPU)的内核总数不超过60,为所有第一类型任务分配的内存总和不超过300,以及第二类型任务可以优先使用计算服务器的所有可分配硬件资源量。
在该步骤中,第一类型任务可以是需要利用中央处理器(CPU)的资源进行复杂的逻辑运算的任务,每个第一类型任务都具有所需求的内核数量和内存大小。如,一个第一类型任务所需求的内核数量为10,所需求的内存大小为10G,即该第一类型任务需要基于10个中央处理器(CPU)内核以及10G大小的内存进行计算处理。
步骤203、在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
在待处理任务为第一类型任务的情况下,计算服务器可以计算第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和,以及第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和。并在当前待处理的第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过内存大小上限值的情况下,确定具有空闲硬件资源可以分配给第一类型任务,并按照第一类型任务需求的内核数量和需求的内存大小,为第一类型任务分配包括中央处理器(CPU)的内核和内存的第一硬件资源;
在对第一类型任务设定了资源上限值的情况下,可以保证所有第一类型任务所使用的资源之和不超过资源上限值,使得第二类型任务具有充分的硬件资源进行使用,从而确保第二类型任务可以正常稳定的获得除资源上限值之外剩余的所有硬件资源,降低了因硬件资源爆满而无法运行第二类型任务的几率。
例如,假设1个第一类型任务需求4个内核和10G内存,则计算服务器在确定资源上限值内的硬件资源够用的情况下,可以为该第一类型任务分配4个内核和10G内存。
可选的,所述计算服务器的硬件资源包括:中央处理器(CPU)、内存和图形处理器(GPU),所述第二任务类型包括:基于所述中央处理器(CPU)、图形处理器(GPU)和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器(GPU)的总数量、所述中央处理器(CPU)的内核总数量以及内存大小总量。所述方法还包括:
步骤204、确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小。
在本申请实施例中,第二类型任务是需要利用图形处理器(GPU)做简单、量大的算术运算,且同时需要利用中央处理器(CPU)的资源进行一部分的复杂逻辑运算的任务,且本申请实施例的需求是即使在极端情况下,计算服务器也可以为第二类型任务预留一定的中央处理器(CPU)和内存硬件资源,从而确保第二类型任务可以正常获得硬件资源。
在该步骤中,第二类型任务需要利用中央处理器(CPU)、图形处理器(GPU)、内存的资源的任务,每个第二类型任务都具有所需求的图形处理器(GPU)个数、内核数量和内存大小。如,一个第二类型任务所需求的图形处理器(GPU)个数为2、内核数量为20,所需求的内存大小为20G,即该第二类型任务需要基于2个图形处理器(GPU)、20个中央处理器(CPU)内核以及20G大小的内存进行计算处理。
步骤205、在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
在待处理任务为第二类型任务的情况下,计算服务器可以计算第二类型任务需求的图形处理器(GPU)数量,与其他的第二类型任务所占用的图形处理器(GPU)数量的第一加和结果,以及第二类型任务需求的内核数量,与其他任务(包括第一类型任务和第二类型任务)所占用的内核数量的第二加和结果,以及第二类型任务需求的内存大小,与其他任务所占用的内存大小的第三加和结果。并在第一加和结果不超过图形处理器(GPU)的总数量,第二加和结果不超过内核总数量,第三加和结果不超过内存大小总量的情况下,确定具有空闲硬件资源可以分配给第二类型任务,并按照第二类型任务需求的图形处理器(GPU)的数量、内核数量和需求的内存大小,为第二类型任务分配包括图形处理器(GPU)、中央处理器(CPU)的内核和内存的第二硬件资源,确保第二类型任务可以正常稳定的获得除资源上限值之外剩余的所有硬件资源,降低了因硬件资源爆满而无法运行第二类型任务的几率。
例如,假设1个第二类型任务需求2个图形处理器(GPU)、4个内核和10G内存,则计算服务器在确定可分配资源量内的硬件资源够用的情况下,可以为该第二类型任务分配2个图形处理器(GPU)、4个内核和10G内存。
可选的,所述方法还可以包括:
步骤206、在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限。
在本申请实施例中,可以在计算服务器的配置文件中设置annotation(标注)类型的分配上限标签,并在该分配上限标签中声明处理第一类型任务的硬件资源的资源上限,从而使得该计算服务器在针对第一类型任务进行硬件资源分配时,可以按照分配上限标签中声明的资源上限值,以使得在分配过程中,保证为所有第一类型任务分配的第一硬件资源总量,不超过资源上限值。
例如,一个分配上限标签的内容可以如下:
annotations:
"XX/XXX-cpu":"60"//可分配给第一类型任务的中央处理器(CPU)的核数上限值;
"XX/XXX-memory":"300Gi"//可分配给第一类型任务的内存上限值。
步骤207、在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
在本申请实施例中,若计算服务器未配置分配上限标签,则可以认为计算服务器不需要执行为所有第一类型任务分配的第一硬件资源总量不超过资源上限值的逻辑,则计算服务器可以按照可分配硬件资源量,为第一类型任务分配第一硬件资源进行计算处理,以使得为第一类型任务分配的第一硬件资源总量,不超过可分配硬件资源量,即第一类型任务可以使用计算服务器的所有硬件资源,通过为计算服务器配置或不配置分配上限标签,可以灵活采用两种资源分配方式中的任意一种,提高了计算服务器的适用范围。
综上所述,本申请实施例提供的一种硬件资源分配方法,本申请可以针对第一类型任务预设一个资源上限值,使得在对第一类型任务进行资源分配时,所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,这样就保证了第二类型任务具有充分的硬件资源进行使用,使得计算服务器也可以为第二类型任务预留一定的硬件资源,从而确保第二类型任务可以正常稳定的获得剩余硬件资源,并且,由于所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,则不会存在因硬件资源爆满而无法运行第二类型任务的情况,也就无需人工介入来清理多余的第一类型任务,降低了人工资源的浪费。
图4是本申请实施例提供的一种硬件资源分配装置的框图,如图4所示,包括:获取模块301、第一分配模块302、第二分配模块303。
获取模块301,被配置为获取待处理任务和所述计算服务器的可分配硬件资源量;
第一分配模块302,被配置为在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理;
第二分配模块303,被配置为在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理;
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量。
在一种可选实现方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第一类型任务包括:基于所述中央处理器和内存进行计算处理的任务;所述资源上限值包括:用于分配给所述第一类型任务的中央处理器的内核上限值以及内存大小上限值。
在一种可选实现方式中,所述第一分配模块,包括:
第一确定子模块,被配置为确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小;
第一分配子模块,被配置为在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
在一种可选实现方式中,所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第二任务类型包括:基于所述中央处理器、图形处理器和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器的总数量、所述中央处理器的内核总数量以及内存大小总量。
在一种可选实现方式中,所述第二分配模块,包括:
第二确定子模块,被配置为确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小;
第二分配子模块,被配置为在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
在一种可选实现方式中,所述装置还包括:
第一检测模块,被配置为在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限;
第二检测模块,被配置为在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
综上所述,本申请实施例提供的一种硬件资源分配装置,本申请可以针对第一类型任务预设一个资源上限值,使得在对第一类型任务进行资源分配时,所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,这样就保证了第二类型任务具有充分的硬件资源进行使用,使得计算服务器也可以为第二类型任务预留一定的硬件资源,从而确保第二类型任务可以正常稳定的获得剩余硬件资源,并且,由于所有第一类型任务分配得到的第一硬件资源总量不超过该资源上限值,则不会存在因硬件资源爆满而无法运行第二类型任务的情况,也就无需人工介入来清理多余的第一类型任务,降低了人工资源的浪费。
图5是根据一示例性实施例示出的一种电子设备600的框图。例如,电子设备600可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图5,电子设备600可以包括以下一个或多个组件:处理组件602,存储器604,电力组件606,多媒体组件608,音频组件610,输入/输出(I/O)的接口612,传感器组件614,以及通信组件616。
处理组件602通常控制电子设备600的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件602可以包括一个或多个模块,便于处理组件602和其他组件之间的交互。例如,处理组件602可以包括多媒体模块,以方便多媒体组件608和处理组件602之间的交互。
存储器604用于存储各种类型的数据以支持在电子设备600的操作。这些数据的示例包括用于在电子设备600上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,多媒体等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件606为电子设备600的各种组件提供电力。电源组件606可以包括电源管理系统,一个或多个电源,及其他与为电子设备600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述电子设备600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的分界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件608包括一个前置摄像头和/或后置摄像头。当电子设备600处于操作模式,如拍摄模式或多媒体模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610用于输出和/或输入音频信号。例如,音频组件610包括一个麦克风(MIC),当电子设备600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中,音频组件610还包括一个扬声器,用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器,用于为电子设备600提供各个方面的状态评估。例如,传感器组件614可以检测到电子设备600的打开/关闭状态,组件的相对定位,例如所述组件为电子设备600的显示器和小键盘,传感器组件614还可以检测电子设备600或电子设备600一个组件的位置改变,用户与电子设备600接触的存在或不存在,电子设备600方位或加速/减速和电子设备600的温度变化。传感器组件614可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件614还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件616用于便于电子设备600和其他设备之间有线或无线方式的通信。电子设备600可以接入基于通信标准的无线网络,如WiFi,运营商网络(如2G、3G、4G或5G),或它们的组合。在一个示例性实施例中,通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件616还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于实现本申请实施例提供的一种硬件资源分配方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机存储介质,例如包括指令的存储器604,上述指令可由电子设备600的处理器620执行以完成上述方法。例如,所述非临时性存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
图6是根据一示例性实施例示出的一种电子设备700的框图。例如,电子设备700可以被提供为一服务器。参照图6,电子设备700包括处理组件722,其进一步包括一个或多个处理器,以及由存储器732所代表的存储器资源,用于存储可由处理组件722的执行的指令,例如应用程序。存储器732中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件722被配置为执行指令,以执行本申请实施例提供的一种硬件资源分配方法。
电子设备700还可以包括一个电源组件726被配置为执行电子设备700的电源管理,一个有线或无线网络接口750被配置为将电子设备700连接到网络,和一个输入输出(I/O)接口758。电子设备700可以操作基于存储在存储器732的操作系统,例如WindowsServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
本申请实施例还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现所述的硬件资源分配方法。
本领域技术人员在考虑说明书及实践这里公开的申请后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
Claims (10)
1.一种硬件资源分配方法,应用于计算服务器,其特征在于,所述方法包括:
获取待处理任务和所述计算服务器的可分配硬件资源量;
在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理;所述资源上限值包括:用于分配给所有的所述第一类型任务的中央处理器的内核总数的上限值以及内存大小的总和的上限值;
在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理;
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量;所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第二类型任务包括:基于所述中央处理器、图形处理器和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器的总数量、所述中央处理器的内核总数量以及内存大小总量;
所述按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理,包括:
确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小;
在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
2.根据权利要求1所述的方法,其特征在于,所述第一类型任务包括:基于所述中央处理器和内存进行计算处理的任务。
3.根据权利要求2所述的方法,其特征在于,所述按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,包括:
确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小;
在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限;
在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
5.一种硬件资源分配装置,应用于计算服务器,其特征在于,所述装置包括:
获取模块,被配置为获取待处理任务和所述计算服务器的可分配硬件资源量;
第一分配模块,被配置为在所述待处理任务为第一类型任务的情况下,按照针对所述第一类型任务预设的资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理;所述资源上限值包括:用于分配给所有的所述第一类型任务的中央处理器的内核总数的上限值以及内存大小的总和的上限值;
第二分配模块,被配置为在所述待处理任务为第二类型任务的情况下,按照所述可分配硬件资源量,为所述第二类型任务分配第二硬件资源进行计算处理;
其中,为所有所述第一类型任务分配的第一硬件资源总量,不超过所述资源上限值,为所述第二类型任务分配的第二硬件资源总量,不超过所述可分配硬件资源量;所述计算服务器的硬件资源包括:中央处理器、内存和图形处理器,所述第二类型任务包括:基于所述中央处理器、图形处理器和内存进行计算处理的任务,所述可分配硬件资源量包括:所述图形处理器的总数量、所述中央处理器的内核总数量以及内存大小总量;
所述第二分配模块,包括:
第二确定子模块,被配置为确定当前待处理的所述第二类型任务所需求的图形处理器的数量、需求的内核数量和需求的内存大小;
第二分配子模块,被配置为在当前待处理的所述第二类型任务需求的图形处理器的数量、与其他的第二类型任务所占用的图形处理器的数量之和不超过所述图形处理器的总数量,且所述第二类型任务需求的内核数量,与其他任务所占用的内核数量之和不超过所述内核总数量,且所述第二类型任务需求的内存大小,与其他任务所占用的内存大小之和不超过所述内存大小总量的情况下,按照所述第二类型任务需求的图形处理器的数量、需求的内核数量和需求的内存大小,为所述第二类型任务分配包括图形处理器、中央处理器的内核和内存的第二硬件资源。
6.根据权利要求5所述的装置,其特征在于,所述第一类型任务包括:基于所述中央处理器和内存进行计算处理的任务。
7.根据权利要求6所述的装置,其特征在于,所述第一分配模块,包括:
第一确定子模块,被配置为确定当前待处理的所述第一类型任务所需求的内核数量和需求的内存大小;
第一分配子模块,被配置为在当前待处理的所述第一类型任务需求的内核数量,与其他的第一类型任务所占用的内核数量之和不超过所述内核上限值,且所述第一类型任务需求的内存大小,与其他的第一类型任务所占用的内存大小之和不超过所述内存大小上限值的情况下,按照所述第一类型任务需求的内核数量和需求的内存大小,为所述第一类型任务分配包括中央处理器的内核和内存的第一硬件资源。
8.根据权利要求5所述的装置,其特征在于,所述装置还包括:
第一检测模块,被配置为在检测到针对所述计算服务器配置有分配上限标签的情况下,按照所述资源上限值,为所述第一类型任务分配第一硬件资源进行计算处理,所述分配上限标签用于声明处理第一类型任务的硬件资源的资源上限;
第二检测模块,被配置为在检测到未针对所述计算服务器配置所述分配上限标签的情况下,按照所述可分配硬件资源量,为所述第一类型任务分配第一硬件资源进行计算处理,以使得为所述第一类型任务分配的第一硬件资源总量,不超过所述可分配硬件资源量。
9.一种电子设备,其特征在于,包括:处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至4中任一项所述的方法。
10.一种计算机存储介质,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1至4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110747256.9A CN113568737B (zh) | 2021-06-30 | 2021-06-30 | 硬件资源分配方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110747256.9A CN113568737B (zh) | 2021-06-30 | 2021-06-30 | 硬件资源分配方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113568737A CN113568737A (zh) | 2021-10-29 |
CN113568737B true CN113568737B (zh) | 2024-03-26 |
Family
ID=78163419
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110747256.9A Active CN113568737B (zh) | 2021-06-30 | 2021-06-30 | 硬件资源分配方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113568737B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107832126A (zh) * | 2017-10-20 | 2018-03-23 | 平安科技(深圳)有限公司 | 一种线程的调整方法及其终端 |
CN109471727A (zh) * | 2018-10-29 | 2019-03-15 | 北京金山云网络技术有限公司 | 一种任务处理方法、装置及系统 |
CN109783230A (zh) * | 2018-12-17 | 2019-05-21 | 平安普惠企业管理有限公司 | 基于信号量的流量控制方法、装置、计算机设备和存储介质 |
CN112395075A (zh) * | 2019-08-15 | 2021-02-23 | 阿里巴巴集团控股有限公司 | 资源的处理方法、装置以及资源调度系统 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11226848B2 (en) * | 2017-05-04 | 2022-01-18 | Salesforce.Com, Inc. | Systems, methods, and apparatuses for implementing a scheduler and workload manager with snapshot and resume functionality |
US11243818B2 (en) * | 2017-05-04 | 2022-02-08 | Salesforce.Com, Inc. | Systems, methods, and apparatuses for implementing a scheduler and workload manager that identifies and optimizes horizontally scalable workloads |
-
2021
- 2021-06-30 CN CN202110747256.9A patent/CN113568737B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107832126A (zh) * | 2017-10-20 | 2018-03-23 | 平安科技(深圳)有限公司 | 一种线程的调整方法及其终端 |
CN109471727A (zh) * | 2018-10-29 | 2019-03-15 | 北京金山云网络技术有限公司 | 一种任务处理方法、装置及系统 |
CN109783230A (zh) * | 2018-12-17 | 2019-05-21 | 平安普惠企业管理有限公司 | 基于信号量的流量控制方法、装置、计算机设备和存储介质 |
CN112395075A (zh) * | 2019-08-15 | 2021-02-23 | 阿里巴巴集团控股有限公司 | 资源的处理方法、装置以及资源调度系统 |
Also Published As
Publication number | Publication date |
---|---|
CN113568737A (zh) | 2021-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108304265B (zh) | 内存管理方法、装置及存储介质 | |
US20190228217A1 (en) | Method, apparatus and device for waking up voice interaction function based on gesture, and computer readable medium | |
CN107291626B (zh) | 数据存储方法和装置 | |
CN112749362B (zh) | 控件创建方法、装置、设备及存储介质 | |
CN111968640A (zh) | 语音控制方法、装置、电子设备及存储介质 | |
CN114138439A (zh) | 任务调度方法及装置、电子设备和存储介质 | |
CN110968815B (zh) | 页面刷新方法、装置、终端及存储介质 | |
CN113687816B (zh) | 算子的可执行代码的生成方法及装置 | |
CN111666076B (zh) | 图层添加方法、装置、终端及存储介质 | |
CN113157439B (zh) | 一种资源统计方法、装置及终端 | |
CN112734661A (zh) | 图像处理方法及装置 | |
CN113568737B (zh) | 硬件资源分配方法及装置 | |
CN116360979A (zh) | 内存分配方法、装置、电子设备及可读存储介质 | |
CN110751592A (zh) | 图形资源转换方法、装置、电子设备及存储介质 | |
CN116048757A (zh) | 任务处理方法、装置、电子设备和存储介质 | |
CN110648272B (zh) | 图形资源转换方法、装置、电子设备及存储介质 | |
CN109871848B (zh) | 一种移动终端的文字识别方法及装置 | |
CN111914985B (zh) | 深度学习网络模型的配置方法、装置及存储介质 | |
CN111880702A (zh) | 界面切换方法、装置及电子设备 | |
CN114116590B (zh) | 数据获取方法、装置、车辆、存储介质和电子设备 | |
CN112068761B (zh) | 触屏数据处理方法、触屏数据处理装置及存储介质 | |
CN111506439B (zh) | 数据的获取方法、装置、存储介质及移动终端 | |
CN111382152B (zh) | 数据表处理方法、装置及存储介质 | |
EP3042292B1 (en) | Electronic device and method of processing user input by electronic device | |
CN113590669B (zh) | 成本报表的生成方法、装置及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |