CN111736957A - 多类型业务的混合部署方法、装置、设备及存储介质 - Google Patents
多类型业务的混合部署方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN111736957A CN111736957A CN202010605791.6A CN202010605791A CN111736957A CN 111736957 A CN111736957 A CN 111736957A CN 202010605791 A CN202010605791 A CN 202010605791A CN 111736957 A CN111736957 A CN 111736957A
- Authority
- CN
- China
- Prior art keywords
- virtual machine
- resource
- target virtual
- service
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45533—Hypervisors; Virtual machine monitors
- G06F9/45558—Hypervisor-specific management and integration aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
- G06F9/4451—User profiles; Roaming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45533—Hypervisors; Virtual machine monitors
- G06F9/45558—Hypervisor-specific management and integration aspects
- G06F2009/45562—Creating, deleting, cloning virtual machine instances
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Stored Programmes (AREA)
Abstract
本申请提供一种多类型业务的混合部署方法、装置、设备及存储介质,涉及云部署技术领域,能够提高多种类型业务混合部署时资源量的分配精度和内核隔离精度。该方法包括:响应于任务部署指令;在统一资源调度层确定运行各所述预设类型业务所需部署的第二资源量;分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
Description
技术领域
本申请涉及云部署技术领域,尤其涉及一种多类型业务的混合部署方法、装置、设备及存储介质。
背景技术
混合部署技术主要是指在两份资源上运行同一类型业务,以提升资源利用率的技术。随着各企业业务的不断扩展,现有的仅针对同一类型业务进行混合部署的技术已无法满足企业的需求,而目前,在针对多种类型业务的混合部署过程中,存在资源量分配精度以及内核隔离精度不高的问题。
发明内容
本申请实施例提供了一种多类型业务的混合部署方法、装置、设备及存储介质,能够通过统一资源调度层准确地确定运行各所述预设类型业务所需部署的资源量,提高了多种类型业务混合部署时资源量的分配精度,并根据各目标虚拟机的资源阈值,限制各目标虚拟机仅运行各自对应的所述预设类型业务,以提高混合部署过程中内核隔离的精度。
第一方面,本申请提供一种多类型业务的混合部署方法,包括:
响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量;
在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量;
分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;
将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;
在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述响应于任务部署指令,包括:
响应于针对预先确定的虚拟机集群中各个虚拟机的所述任务部署指令。
在一可选的实现方式中,在根据各所述第二资源量,分别确定各所述预设类型业务的目标虚拟机之前,还包括:
确定所述虚拟机集群中各个虚拟机的配置等级;
分别为各个配置等级的所述虚拟机分配对应的资源量。
在一可选的实现方式中,分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机,包括:
分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较;
若所述虚拟机集群中有特定配置等级的虚拟机的可用资源量大于任一所述第二资源量,则确定该特定配置等级的虚拟机为该任一第二资源量对应的所述预设类型业务的目标虚拟机。
在一可选的实现方式中,在所述分别为各个配置等级的所述虚拟机分配对应的资源量之前,包括:
将所述虚拟机集群中各个配置等级的所述虚拟机对应的硬件资源划分为不同类别的硬件资源;
为每一类别的所述硬件资源分别创建一个资源池;
在创建所述虚拟机集群时,从所述硬件资源池中划分出各个类别的所述硬件资源对应的资源量;
对应地,所述分别为各个配置等级的所述虚拟机分配对应的资源量,包括:
以各个类别的所述硬件资源对应的资源量分别为各个配置等级的所述虚拟机对应的资源量。
在一可选的实现方式中,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务之前,还包括:
针对每个所述目标虚拟机建立该目标虚拟机的父进程对象,以所述父进程对象为所述内核隔离层;
对应地,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,包括:
在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,包括:
针对每个所述目标虚拟机,在该目标虚拟机的所述父进程对象中,创建所述父进程对象对应的子进程对象;
根据该目标虚拟机的资源阈值为每个所述子进程对象分配对应的资源阈值,以使每个所述子进程仅运行该目标虚拟机对应的所述预设类型的业务。
第二方面,本申请提供一种多类型业务的混合部署装置,包括:
响应模块,响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量;
第一确定模块,用于在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量;
第二确定模块,用于分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;
部署模块,用于将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;
限制模块,用于在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述响应模块具体用于:
响应于针对预先确定的虚拟机集群中各个虚拟机的所述任务部署指令。
在一可选的实现方式中,还包括:
第三确定模块,用于确定所述虚拟机集群中各个虚拟机的配置等级;
分配模块,用于分别为各个配置等级的所述虚拟机分配对应的资源量。
在一可选的实现方式中,第二确定模块,包括:
比较单元,用于分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较;
确定单元,用于在若所述虚拟机集群中有特定配置等级的虚拟机的可用资源量大于任一所述第二资源量,则确定该特定配置等级的虚拟机为该任一第二资源量对应的所述预设类型业务的目标虚拟机。
在一可选的实现方式中,还包括:
第一划分模块,用于将所述虚拟机集群中各个配置等级的所述虚拟机对应的硬件资源划分为不同类别的硬件资源;
创建模块,用于为每一类别的所述硬件资源分别创建一个资源池;
第二划分模块,用于在创建所述虚拟机集群时,从所述硬件资源池中划分出各个类别的所述硬件资源对应的资源量;
对应地,所述分配模块具体用于:
以各个类别的所述硬件资源对应的资源量分别为各个配置等级的所述虚拟机对应的资源量。
在一可选的实现方式中,还包括:
建立模块,用于针对每个所述目标虚拟机建立该目标虚拟机的父进程对象,以所述父进程对象为所述内核隔离层;
对应地,所述限制模块具体用于:
在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述限制模块,包括:
创建单元,用于针对每个所述目标虚拟机,在该目标虚拟机的所述父进程对象中,创建所述父进程对象对应的子进程对象;
分配单元,用于根据该目标虚拟机的资源阈值为每个所述子进程对象分配对应的资源阈值,以使每个所述子进程仅运行该目标虚拟机对应的所述预设类型的业务。
第三方面,本申请提供一种多类型业务的混合部署设备,包括:处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上第一方面任一可选实现方式所述的方法。
第四单元,本申请提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面任一可选实现方式所述的方法。
第五方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在视频处理设备上运行时,使得多类型业务的混合部署设备执行上述第一方面任一可选实现方式所述的方法。
本申请提供的多类型业务的混合部署方法,通过在统一资源调度层确定各所述预设类型业务所需部署的第二资源量,并分别根据各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量,确定各所述预设类型业务的目标虚拟机,实现了提高多种类型业务混合部署时资源量的分配精度,进一步通过在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,实现了提高混合部署过程中内核隔离的精度。
可以理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请第一实施例提供的多类型混合部署方法的应用场景示意图;
图2是本申请第二实施例提供的多类型业务的混合部署方法的示意流程图;
图3是本申请第三实施例提供的多类型业务的混合部署方法的示意流程图;
图4是本申请实施例提供的多类型业务的混合部署装置的示意图;
图5是本申请第五实施例提供的多类型业务混合部署设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
还应当理解,在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
在说明本申请提供的多类型业务的混合部署方法之前,首先结合图1对本申请所采用的混合部署原理以及混合部署过程中的相关概念进行示例性的说明。
如图1所示,图1是本申请第一实施例提供的多类型混合部署方法的应用场景示意图。由图1可知,本申请实施例提供的多类型混合部署方法通过服务器100将待处理的预设类型业务部署至虚拟机集群101中各个目标虚拟机102上,以实现多类型业务的混合部署,示例性地,所述预设类型业务可以是在线业务或者离线业务,所述服务器100可以为在线服务器或者离线服务器,还可以是各种应用场景下的云服务器等。
本申请实施例提供的混合部署过程就是将不同类型的业务部署至虚拟机集群101中各个目标虚拟机102的过程,用虚拟机集群101中的特定资源同时提供处理不同类型业务的资源的技术。
也就是说,通过借助于虚拟机集群101来作为混合部署过程中的混部,由虚拟机集群101与服务器100组成混合部署系统,提高多类型业务的处理效率。
下面通过具体实施例,对本申请提供的多类型业务的混合部署方法进行示例性的说明。
请参见图2,图2是本申请第二实施例提供的多类型业务的混合部署方法的示意流程图。本实施例中多类型业务的混合部署方法的执行主体为多类型业务的混合部署设备,包括但不限于各种应用场景下的服务器。如图2所示的多类型业务的混合部署方法可包括:
S201,响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量。
在一个示例中,所述任务部署指令为混合部署场景中,向虚拟机集群发送的任务部署指令,所述虚拟机集群可以是在线服务器集群或者离线服务器集群,也可以是高性能服务器集群或者低性能服务器集群,还可以是公有云或私有云中的服务器集群。
所述至少两种预设类型业务包括不同的业务指标,例如运行时间、任务重要程度、资源需求量等,各业务指标对应有不同预设运行权重。
S202,在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量。
在本申请实施例中,在进行混合部署服务时,为了确定将不同的预设类型业务部署至对应的目标虚拟机,需要首先计算各预设类型业务各自所需的虚拟机的第二资源量。
其中,可以理解地,运行各所述预设类型业务所需的第一资源量为所述预设类型业务对应的实际资源需求量,当运行所述预设类型业务的服务器(也可以是服务器集群)提供的可用资源无法满足运行各所述预设类型业务时,需要虚拟机集群提供额外的资源,在本申请实施例中,需要所述虚拟机提供的资源量为所述预设类型业务所需虚拟机的第二资源量。
示例性地,所述预设类型业务可以包括在线业务和离线业务;假设由服务器提供运行所述在线业务所需的资源,若所述服务器可提供的资源量小于所述第一资源量,则需要虚拟机集群中的虚拟机提供额外的资源量来辅助运行所述在线业务,对应地,所述虚拟机提供的用于运行所述在线业务的资源量为所述第二资源量。
在一个示例中,首先根据需要划分若干种虚拟机资源级别;例如,按照CPU、内存、I/O设备的顺序确定虚拟机的资源级别,并对对应级别的虚拟机分配固定的资源量;示例性地,利用linux操作系统中的Cgroup功能将虚拟机的硬件资源划分为若干类别,并为每一类别的硬件资源创建一个资源池;在创建虚拟机集群时,从上述资源池中划分出相应的资源量作为所述虚拟机集群中对应虚拟机的资源量,具体地,将虚拟机集群中的各虚拟机与所述资源池中划分出的对应资源量进行绑定。在需要虚拟机集群中的虚拟机提供额外的资源量来辅助运行所述在线业务时,从所述各虚拟机对应的资源量中划分出用于运行所述在线业务的资源量作为所述第二资源量。
例如,在线业务和离线业务混合部署过程中,首先根据在线业务和离线业务的业务权重值,确定由在线业务或离线业务做混部;具体地,若在线业务的权重值大于离线业务的权重值,则由在线集群提供资源做混部,在线集群对应为离线业务的虚拟机集群,用在线的资源提供额外的离线计算力,供离线业务运行;其中,在线集群提供的资源量为对应的第二资源量。或者若在线业务的权重值小于离线业务的权重值,则由离线集群提供资源做混部,离线集群对应为在线集群的虚拟机集群,用离线的资源创造在线业务交易能力;其中,离线集群提供的资源量为对应的第二资源量。
S203,分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机。
在本实例中,预先为各虚拟机分配不同的配置等级,每个配置等级的虚拟机具有的资源配置例如CPU核数、内存大小等资源配置为特定的,可以理解地,配置等级越高的虚拟机,对应拆合的资源成本例如每CPU核、每M内存等资源成本越低。
示例性地,当虚拟机集群中有虚拟机的资源配置满足处理所述预设类型业务的资源配置,且该虚拟机的可用资源量大于所述第二资源量,则确定该虚拟机为所述目标虚拟机。
在一个示例中,获取虚拟机集群中虚拟机的配置等级,是为了确定该虚拟机是否可以提供服务预设类型业务的第二资源量;进一步地,还可以通过虚拟机的配置等级,确定该虚拟机是否可以升级更高配置等级,以及在该虚拟机可以升级更高配置等级时,确定该虚拟机应当升级至哪一种配置等级才可以提供服务预设类型业务的第二资源量。
需要说明的是,在本实施例中,每个配置等级的虚拟机对应的资源配置不同,在实际利用中,根据虚拟机处理业务的需求,可以选择升级虚拟机的配置等级,具体升级过程根据虚拟机具体处理业务的需求进行选择。
示例性地,分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机,包括:
分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较;
若所述虚拟机集群中有特定配置等级的虚拟机的可用资源量大于任一所述第二资源量,则确定该特定配置等级的虚拟机为该任一第二资源量对应的所述预设类型业务的目标虚拟机。
S204,将各所述预设类型业务分别部署至各自对应的所述目标虚拟机。
S205,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
首先,需要说明的是,内核隔离技术是指在单台服务器内,在内核隔离层对每台服务器上运行的资源进行限制的技术,可以从CPU、内存、IO等多个维度进行限制。
在本申请实施例中,所述内核隔离层为预先设置的父进程对象,所述父进程对象可以为目标虚拟机的操作系统预先创建好的进程,例如守护进程。可以理解地,在确定了父进程对象以后,父进程对象可以进一步调用预设API接口创建一个或多个子进程对象进行业务对象的处理,并为创建的子进程对象配置预设类型资源对应的阈值,例如最大I/O带宽阈值,CPU阈值、内存阈值等。示例性地,以最大I/O带宽阈值为例进行解释,其中,最大I/O带宽阈值是指,最大输出带宽阈值;或者,最大输入带宽阈值;或者包括最大输出带宽阈值,也包括最大输入带宽阈值。
通常,将预设类型业务分配至虚拟机时,该虚拟机将所述预设类型业务分配至N个父进程对象中,所述N个父进程对象进一步创建m个子进程对象来运行业务的具体计算逻辑,其中,创建的所有子进程对象都具有对应的子进程标识;在本实施例中,子进程标识可以用SubPID表示。由于子进程中执行的计算逻辑对系统来说是透明的,父进程在创建每个子进程对象时为其分配预设类型资源对应的阈值,即每个子进程的资源使用不能超过分配的资源阈值,以此来限制子进程对象处理除父进程分配的业务之外的业务。实现在每个目标虚拟机中仅运行对应的预设类型业务。在一可选的实现方式中,通过使用cgroup中放入cpuset子系统(cpuset.mems)为各个目标虚拟机指定cpu位置,并使用cgroup中放入cpuset子系统为各个目标虚拟机指定内存节点;使用cgroup中的memory子系统为各目标虚拟机设置内存调用的上限并产生内存资源报告,当虚拟机的内存调用超过memory子系统设置的限额,该目标子系统将被终结;利用SR-IOV技术调度I/O设备,按照目标虚拟机资源配置级别,将相应数量的VF分配给虚拟机,并通过I/O设备资源分配算法给虚拟机有限分配未被占用的流量端口的VF,用以实现I/O硬件设备的有效利用。
示例性地,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,包括:
在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
针对每个所述目标虚拟机,在该目标虚拟机的所述父进程对象中,创建所述父进程对象对应的子进程对象。
根据该目标虚拟机的资源阈值为每个所述子进程对象分配对应的资源阈值,以使每个所述子进程仅运行该目标虚拟机对应的所述预设类型的业务。
由上述分析可知,本申请提供的多类型业务的混合部署方法,通过在统一资源调度层确定各所述预设类型业务所需部署的第二资源量,并分别根据各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量,确定各所述预设类型业务的目标虚拟机,实现了提高多种类型业务混合部署时资源量的分配精度,进一步通过在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,实现了提高混合部署过程中内核隔离的精度。
如图3所示,是本申请第三实施例提供的多类型业务的混合部署方法的示意流程图,由图3可知,本实施例与图2所示实施例相比,S301至S302与S101至S102以及S304至S306与S103至S105的具体实现过程相同,不同之处在于,在S304之前还包括S303,需要说明的是,S303与S302为并列执行关系。
详述如下:
S301,响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量。
S302,在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量。
S303,确定所述虚拟机集群中各个虚拟机的配置等级,分别为各个配置等级的所述虚拟机分配对应的资源量。
在一个示例中,首先根据需要划分若干种虚拟机资源级别;按照CPU、内存、I/O设备的顺序确定虚拟机的资源级别,并对对应级别的虚拟机分配固定的资源量;示例性地,可以利用linux操作系统中的Cgroup功能将所述硬件资源划分为若干类,并为每一类别的所述硬件资源分别创建一个资源池;在创建虚拟机集群时,从所述硬件资源池中划分出各个类别的所述硬件资源对应的资源量,并且该虚拟机集群中的各虚拟机与所述相应的资源量进行绑定。将所述虚拟机集群中各个配置等级的所述虚拟机对应的硬件资源划分为不同类别的硬件资源,以各个类别的所述硬件资源对应的资源量分别为各个配置等级的所述虚拟机对应的资源量。
例如,在线业务和离线业务混合部署过程中,首先根据在线业务和离线业务的业务权重值,确定由在线业务或离线业务做混部,所述混部为对应的虚拟机,若在线业务的权重值大于离线业务的权重值,则由在线集群提供资源做混部,在线集群对应为离线业务的虚拟机集群,用在线的资源提供额外的离线计算力,供离线业务运行。或者若在线业务的权重值小于离线业务的权重值,则由离线集群提供资源做混部,离线集群对应为在线集群的虚拟机集群,用离线的资源创造在线业务交易能力。
S304,分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机。
S305,将各所述预设类型业务分别部署至各自对应的所述目标虚拟机。
S306,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
基于上述两个实施例可知,采用本申请提供的多类型业务的混合部署方法通过在统一资源调度层确定各所述预设类型业务所需部署的第二资源量,并分别根据各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量,确定各所述预设类型业务的目标虚拟机,实现了提高多种类型业务混合部署时资源量的分配精度,进一步通过在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,实现了提高混合部署过程中内核隔离的精度。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
基于上述实施例所提供的多类型业务的混合部署方法,本发明实施例进一步给出实现上述方法实施例的装置实施例。
请参见图4,图4是本申请第四实施例提供的多类型业务的混合部署装置的示意图。包括的各模块用于执行图2或图3对应的实施例中的各步骤。具体请参阅图2或图3对应的实施例中的相关描述。为了便于说明,仅示出了与本实施例相关的部分。参见图4,多类型业务的混合部署装置4包括:
响应模块401,响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量;
第一确定模块402,用于在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量;
第二确定模块403,用于分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;
部署模块404,用于将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;
限制模块405,用于在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述响应模块401具体用于:
响应于针对预先确定的虚拟机集群中各个虚拟机的所述任务部署指令。
在一可选的实现方式中,还包括:
第三确定模块,用于确定所述虚拟机集群中各个虚拟机的配置等级;
分配模块,用于分别为各个配置等级的所述虚拟机分配对应的资源量。
在一可选的实现方式中,第二确定模块403,包括:
比较单元,用于分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较;
确定单元,用于在若所述虚拟机集群中有特定配置等级的虚拟机的可用资源量大于任一所述第二资源量,则确定该特定配置等级的虚拟机为该任一第二资源量对应的所述预设类型业务的目标虚拟机。
在一可选的实现方式中,还包括:
第一划分模块,用于将所述虚拟机集群中各个配置等级的所述虚拟机对应的硬件资源划分为不同类别的硬件资源;
创建模块,用于为每一类别的所述硬件资源分别创建一个资源池;
第二划分模块,用于在创建所述虚拟机集群时,从所述硬件资源池中划分出各个类别的所述硬件资源对应的资源量;
对应地,所述分配模块具体用于:
以各个类别的所述硬件资源对应的资源量分别为各个配置等级的所述虚拟机对应的资源量。
在一可选的实现方式中,还包括:
建立模块,用于针对每个所述目标虚拟机建立该目标虚拟机的父进程对象,以所述父进程对象为所述内核隔离层;
对应地,所述限制模块405具体用于:
在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
在一可选的实现方式中,所述限制模块405,包括:
创建单元,用于针对每个所述目标虚拟机,在该目标虚拟机的所述父进程对象中,创建所述父进程对象对应的子进程对象;
分配单元,用于根据该目标虚拟机的资源阈值为每个所述子进程对象分配对应的资源阈值,以使每个所述子进程仅运行该目标虚拟机对应的所述预设类型的业务。
需要说明的是,上述模块之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
图5是本申请第五实施例提供的多类型业务混合部署设备的示意图。如图5所示,该实施例的多类型业务混合部署设备5包括:处理器500、存储器501以及存储在所述存储器501中并可在所述处理器500上运行的计算机程序502,例如多类型业务混合部署程序。处理器500执行所述计算机程序502时实现上述各个多类型业务混合部署方法实施例中的步骤,例如图2所示的步骤201-205。或者,所述处理器500执行所述计算机程序502时实现上述各装置实施例中各模块/单元的功能,例如图4所示模块401-405的功能。
示例性的,所述计算机程序502可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器501中,并由处理器500执行,以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序502在所述多类型业务混合部署设备5中的执行过程。例如,所述计算机程序502可以被分割成响应模块、第一确定模块、第二确定模块、部署模块及限制模块,各模块具体功能请参阅图4对应地实施例中地相关描述,此处不赘述。
所述多类型业务混合部署设备可包括,但不仅限于,处理器500、存储器501。本领域技术人员可以理解,图5仅仅是多类型业务混合部署设备5的示例,并不构成对多类型业务混合部署设备5的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述视频处理设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器500可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器501可以是所述多类型业务混合部署设备5的内部存储单元,例如多类型业务混合部署设备5的硬盘或内存。所述存储器501也可以是所述多类型业务混合部署设备5的外部存储设备,例如所述多类型业务混合部署设备5上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器501还可以既包括所述多类型业务混合部署设备5的内部存储单元也包括外部存储设备。所述存储器501用于存储所述计算机程序以及所述多类型业务混合部署设备所需的其他程序和数据。所述存储器501还可以用于暂时地存储已经输出或者将要输出的数据。
本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时可实现上述多类型业务混合部署方法。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在多类型业务混合部署设备上运行时,使得多类型业务混合部署设备执行时实现可实现上述多类型业务混合部署方法。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种多类型业务的混合部署方法,其特征在于,包括:
响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量;
在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量;
分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;
将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;
在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
2.根据权利要求1所述的方法,其特征在于,所述响应于任务部署指令,包括:
响应于针对预先确定的虚拟机集群中各个虚拟机的所述任务部署指令。
3.根据权利要求2所述的方法,其特征在于,在根据各所述第二资源量,分别确定各所述预设类型业务的目标虚拟机之前,还包括:
确定所述虚拟机集群中各个虚拟机的配置等级;
分别为各个配置等级的所述虚拟机分配对应的资源量。
4.根据权利要求3所述的方法,其特征在于,分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机,包括:
分别将各所述第二资源量与各个配置等级的虚拟机对应的资源量进行比较;
若所述虚拟机集群中有特定配置等级的虚拟机的可用资源量大于任一所述第二资源量,则确定该特定配置等级的虚拟机为该任一第二资源量对应的所述预设类型业务的目标虚拟机。
5.根据权利要求3或4所述的方法,其特征在于,在所述分别为各个配置等级的所述虚拟机分配对应的资源量之前,包括:
将所述虚拟机集群中各个配置等级的所述虚拟机对应的硬件资源划分为不同类别的硬件资源;
为每一类别的所述硬件资源分别创建一个资源池;
在创建所述虚拟机集群时,从所述硬件资源池中划分出各个类别的所述硬件资源对应的资源量;
对应地,所述分别为各个配置等级的所述虚拟机分配对应的资源量,包括:
以各个类别的所述硬件资源对应的资源量分别为各个配置等级的所述虚拟机对应的资源量。
6.根据权利要求5所述的方法,其特征在于,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务之前,还包括:
针对每个所述目标虚拟机建立该目标虚拟机的父进程对象,以所述父进程对象为所述内核隔离层;
对应地,在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,包括:
在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
7.如权利要求6所述的方法,其特征在于,所述在每个所述目标虚拟机的所述父进程对象中根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务,包括:
针对每个所述目标虚拟机,在该目标虚拟机的所述父进程对象中,创建所述父进程对象对应的子进程对象;
根据该目标虚拟机的资源阈值为每个所述子进程对象分配对应的资源阈值,以使每个所述子进程仅运行该目标虚拟机对应的所述预设类型的业务。
8.一种多类型业务的混合部署装置,其特征在于,包括:
响应模块,响应于任务部署指令,所述任务部署指令携带有至少两种预设类型业务对应的资源需求量;
第一确定模块,用于在统一资源调度层根据各所述预设类型业务对应的资源需求量和实际可运行各所述预设类型业务的第一资源量,确定运行各所述预设类型业务所需部署的第二资源量;
第二确定模块,用于分别将各所述第二资源量与预先确定的各个配置等级的虚拟机对应的资源量进行比较,确定各所述预设类型业务的目标虚拟机;
部署模块,用于将各所述预设类型业务分别部署至各自对应的所述目标虚拟机;
限制模块,用于在每个所述目标虚拟机的内核隔离层根据预设的各目标虚拟机的资源阈值,限制各所述目标虚拟机仅运行各自对应的所述预设类型业务。
9.一种多类型业务的混合部署设备,包括:处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010605791.6A CN111736957A (zh) | 2020-06-29 | 2020-06-29 | 多类型业务的混合部署方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010605791.6A CN111736957A (zh) | 2020-06-29 | 2020-06-29 | 多类型业务的混合部署方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111736957A true CN111736957A (zh) | 2020-10-02 |
Family
ID=72652200
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010605791.6A Pending CN111736957A (zh) | 2020-06-29 | 2020-06-29 | 多类型业务的混合部署方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111736957A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112269641A (zh) * | 2020-11-18 | 2021-01-26 | 网易(杭州)网络有限公司 | 一种调度方法、装置、电子设备及存储介质 |
CN112529711A (zh) * | 2021-02-07 | 2021-03-19 | 腾讯科技(深圳)有限公司 | 基于区块链虚拟机复用的交易处理方法及装置 |
CN113672382A (zh) * | 2021-07-20 | 2021-11-19 | 北京达佳互联信息技术有限公司 | 一种业务资源分配方法、装置、电子设备和存储介质 |
CN114500540A (zh) * | 2022-04-14 | 2022-05-13 | 阿里巴巴(中国)有限公司 | 一种云数据中心的数据传输方法和装置 |
-
2020
- 2020-06-29 CN CN202010605791.6A patent/CN111736957A/zh active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112269641A (zh) * | 2020-11-18 | 2021-01-26 | 网易(杭州)网络有限公司 | 一种调度方法、装置、电子设备及存储介质 |
CN112269641B (zh) * | 2020-11-18 | 2023-09-15 | 网易(杭州)网络有限公司 | 一种调度方法、装置、电子设备及存储介质 |
CN112529711A (zh) * | 2021-02-07 | 2021-03-19 | 腾讯科技(深圳)有限公司 | 基于区块链虚拟机复用的交易处理方法及装置 |
CN113672382A (zh) * | 2021-07-20 | 2021-11-19 | 北京达佳互联信息技术有限公司 | 一种业务资源分配方法、装置、电子设备和存储介质 |
CN113672382B (zh) * | 2021-07-20 | 2024-03-26 | 北京达佳互联信息技术有限公司 | 一种业务资源分配方法、装置、电子设备和存储介质 |
CN114500540A (zh) * | 2022-04-14 | 2022-05-13 | 阿里巴巴(中国)有限公司 | 一种云数据中心的数据传输方法和装置 |
CN114500540B (zh) * | 2022-04-14 | 2022-08-02 | 阿里巴巴(中国)有限公司 | 一种云数据中心的数据传输方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111736957A (zh) | 多类型业务的混合部署方法、装置、设备及存储介质 | |
CN110647394B (zh) | 一种资源分配方法、装置及设备 | |
US10572290B2 (en) | Method and apparatus for allocating a physical resource to a virtual machine | |
EP3761170A1 (en) | Virtual machine creation method and apparatus | |
KR100834340B1 (ko) | 서버 최적화 방법과 시스템 및 컴퓨터 판독 가능한 저장매체 | |
CN109417488B (zh) | 虚拟网络功能资源管理的方法和设备 | |
CN110389843B (zh) | 一种业务调度方法、装置、设备及可读存储介质 | |
CN112905342B (zh) | 资源调度方法、装置、设备及计算机可读存储介质 | |
CN100416527C (zh) | 分区分配方法和计算机系统 | |
WO2019024994A1 (en) | SYSTEM, METHOD AND COMPUTER PROGRAM FOR VIRTUAL MACHINE RESOURCE ALLOCATION | |
CN114625500A (zh) | 云环境下拓扑感知的微服务应用调度的方法及应用 | |
CN113626173A (zh) | 调度方法、装置及存储介质 | |
CN112231053A (zh) | 一种负载均衡服务分配方法及装置 | |
CN103795621A (zh) | 一种虚拟机的数据交换方法、装置及物理主机 | |
CN111046102A (zh) | 基于以太坊的高性能区块链服务系统 | |
CN107562510B (zh) | 一种应用实例的管理方法及管理设备 | |
CN115658332A (zh) | 一种gpu共享方法及装置、电子设备和存储介质 | |
CN108536394A (zh) | 命令分配方法、装置、设备及介质 | |
CN112631766B (zh) | 项目环境资源的动态调整方法及装置 | |
CN114281516A (zh) | 一种基于numa属性的资源分配方法及装置 | |
EP3811210B1 (en) | Method and supporting node for supporting process scheduling in a cloud system | |
CN109639447B (zh) | 环形组网下的网络功能虚拟化业务链映射的方法及装置 | |
CN112825047A (zh) | 一种it设备管理方法、装置、设备、系统及存储介质 | |
CN111625358B (zh) | 一种资源分配方法、装置、电子设备及存储介质 | |
CN113835862B (zh) | 任务处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |