CN108572869B - 一种物理主机选择方法、装置、设备及可读存储介质 - Google Patents

一种物理主机选择方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN108572869B
CN108572869B CN201710876006.9A CN201710876006A CN108572869B CN 108572869 B CN108572869 B CN 108572869B CN 201710876006 A CN201710876006 A CN 201710876006A CN 108572869 B CN108572869 B CN 108572869B
Authority
CN
China
Prior art keywords
physical host
storage resource
utilization rate
physical
resource utilization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710876006.9A
Other languages
English (en)
Other versions
CN108572869A (zh
Inventor
宁书奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Cloud Network Technology Co Ltd
Beijing Kingsoft Cloud Technology Co Ltd
Original Assignee
Beijing Kingsoft Cloud Network Technology Co Ltd
Beijing Kingsoft Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Cloud Network Technology Co Ltd, Beijing Kingsoft Cloud Technology Co Ltd filed Critical Beijing Kingsoft Cloud Network Technology Co Ltd
Priority to CN201710876006.9A priority Critical patent/CN108572869B/zh
Publication of CN108572869A publication Critical patent/CN108572869A/zh
Application granted granted Critical
Publication of CN108572869B publication Critical patent/CN108572869B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals

Abstract

本发明实施例提供了一种物理主机选择方法、装置、设备及可读存储介质,其中,所述方法包括:接收容器创建请求,所述容器创建请求中包括容器规格;选择剩余存储资源大于所述容器规格的物理主机,并将所述物理主机的标识存储到资源池中;获取预先配置的一存储资源利用率上限;在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机。本发明实施例最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。

Description

一种物理主机选择方法、装置、设备及可读存储介质
技术领域
本发明涉及计算机应用技术领域,特别是涉及一种物理主机选择方法、装置、设备及可读存储介质。
背景技术
RDS(Relational Database Service)即关系型数据库服务,是建立在关系模型基础上,借助集合代数等数学概念和方法来处理数据库中的数据,是一种即开即用、稳定可靠、可弹性伸缩的在线数据库服务。RDS是通过容器技术(容器技术是通过虚拟化操作系统的方式来管理代码和应用程序),在物理主机上创建指定规格(规格是指用户指定的容器内存和磁盘的大小)的容器,然后在创建的容器内启动数据库实现的。然而,现有技术在选择物理主机进行创建容器时是随机选择的,即容器可能被创建到任意一台剩余存储资源足够的物理主机上。比如,常见的OpenStack(一个开源的云计算管理平台项目)就是通过随机选择来选择物理主机创建容器的。
随机选择管理简单,只要物理主机上剩余存储资源足够即可被选择创建容器,但是长时间的随机选择会导致不同物理主机存储资源利用率(存储资源利用率是指单台物理主机上已利用存储资源与总存储资源的比值)不均衡,可能造成某些物理主机过早的处于饱和状态的情况发生,而如果物理主机长时间处于饱和状态则会影响该物理主机的工作性能,降低用户体验。
发明内容
本发明实施例的目的在于提供一种物理主机选择方法、装置、设备及可读存储介质,以实现均衡每台物理主机存储资源利用率,将高性能的物理主机优先分配给用户,提高用户体验。
本发明实施的一方面提供了一种物理主机选择方法,包括:
接收容器创建请求,所述容器创建请求中包括容器规格;
选择剩余存储资源大于上述容器规格的物理主机,并将上述物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在上述资源池中的标识所对应的物理主机中选择存储资源利用率小于上述存储资源利用率上限的物理主机。
可选的,在上述资源池中的标识所对应的物理主机中选择存储资源利用率小于上述存储资源利用率上限的物理主机的步骤之前,上述方法还包括:
根据每个物理主机的性能参数为上述每个物理主机分配一权值;
上述在资源池中的标识所对应的物理主机中选择存储资源利用率小于上述存储资源利用率上限的物理主机的步骤,包括:
在上述资源池中的标识所对应的物理主机中选择存储资源利用率小于上述存储资源利用率上限,且上述权值最大的物理主机。
可选的,上述物理主机的性能参数包括:物理主机运算速度、物理主机存储资源容量和网卡通讯速率。
可选的,上述根据每个物理主机的性能参数为上述每个物理主机分配一权值的步骤,包括:
比较每个物理主机的每个性能参数的重要程度;
按照上述每个性能参数的重要程度,确定每个物理主机的重要程度;
利用上述每个物理主机的重要程度,为上述每个物理主机分配一权值。
可选的,上述根据每个物理主机的性能参数为上述每个物理主机分配一权值的步骤,还包括:
在确定上述性能参数中的第一性能参数的重要程度高于上述性能参数中的除上述第一性能参数以外的其他性能参数的重要程度时,则根据所述第一性能参数的参数值为每个物理主机分配一权值。
本发明实施的又一方面提供了一种物理主机选择装置,包括:
接收模块,用于接收容器创建请求,所述容器创建请求中包括容器规格;
第一选择模块,用于选择剩余存储资源大于上述容器规格的物理主机,并将上述物理主机的标识存储到资源池中;
获取模块,用于获取预先配置的一存储资源利用率上限;
第二选择模块,用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机。
可选的,上述装置还包括:
权值分配模块,用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机之前,根据每个物理主机的性能参数为上述每个物理主机分配一权值;
第二选择模块,具体用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限,且所述权值最大的物理主机。
可选的,上述物理主机的性能参数包括:物理主机运算速度、物理主机存储资源容量和网卡通讯速率。
可选的,上述权值分配模块用于,
比较每个物理主机的每个性能参数的重要程度;
按照上述每个性能参数的重要程度,确定每个物理主机的重要程度;
利用上述每个物理主机的重要程度,为上述每个物理主机分配一权值。
可选的,上述权值分配模块还用于,
在确定上述性能参数中的第一性能参数的重要程度高于上述性能参数中的除上述第一性能参数以外的其他性能参数的重要程度时,则根据所述第一性能参数的参数值为每个物理主机分配一权值。
第三方面,本发明实施例提供了一种电子设备,包括处理器和机器可读存储介质,上述机器可读存储介质存储有能够被上述处理器执行的机器可执行指令,上述处理器被上述机器可执行指令促使:实现上述任一物理主机选择方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,上述计算机可读存储介质内存储有计算机程序,上述计算机程序被处理器执行时,实现上述任一物理主机选择方法。
第五方面,本发明实施例提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一物理主机选择方法。
第六方面,本发明实施例提供了一种计算机程序,当其在计算机上运行时,使得计算机执行上述任一物理主机选择方法。
本发明实施例提供的一种物理主机选择方法、装置、设备及可读存储介质,通过剩余存储资源满足请求创建的容器规格的物理主机中,选取小于预先配置存储资源利用率上限的物理主机,并且,在实际选择符合条件的物理主机的过程中,预先配置的存储资源上限可以根据需要进行动态调节,基于上述方案可以保证最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中一种物理主机选择方法的流程图;
图2为本发明实施例中另一种物理主机选择方法的流程图;
图3为本发明实施例为每个物理主机分配权值的步骤流程图;
图4为本发明实施例中一种物理主机选择装置的结构示意图;
图5为本发明实施例中另一种物理主机选择装置的结构示意图;
图6为本发明实施例中一种电子设备的结构示意图。
具体实施方式
首先,对本发明实施例所提供的一种物理主机选择方法进行说明,该方法可以包括以下步骤:
接收容器创建请求,容器创建请求中包括容器规格;
选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限的物理主机。
云数据库越来越被人们所熟知,常见的有金山云等,人们可以通过云管理控制台创建自己的云数据库服务,在创建云数据库时通常先需要用户指定用于启动云数据库的容器的规格,例如可以指定容器内存大小为1G,磁盘大小为10G。然后在设置云数据库信息即云数据库账号、密码等信息后,可以通过确定按钮将设置好的信息发送至服务器。
服务器在接收到用户发送的信息之后,首先会根据用户指定的容器规格选择一物理主机,然后在物理主机上创建容器,最后在容器中启动云数据库来实现云数据库服务。然而现有的云数据库服务中,在根据用户指定的容器规格选择物理主机时是随机选择的,即在剩余存储资源能够存储容器的物理主机中随机选择一台,随机选择管理简单,没有额外的代码开发量,但是长时间的随机选择会导致每台物理主机存储资源利用率相差很大,可能导致某些物理主机过早的处于饱和状态的情况发生,而如果物理主机长时间处于饱和状态会影响该物理主机的工作性能,降低用户体验。
本发明实施例针对上述问题,在选择物理主机创建用户指定规格的容器时,首先选择出剩余存储资源足够的物理主机,并将该物理主机的标识存储到资源池中,然后为资源池中的物理主机设置一存储资源利用率上限,选择存储资源利用率小于存储资源利用率上限的物理主机。能够理解的是预先配置的存储资源利用率上限是可以在选择过程中动态调节的,在具体应用中可以首先将配置的存储资源利用率上限设置为10%,查找是否存在存储资源利用率小于10%物理主机,如果存在则表明查找到的物理主机存储资源利用率相比资源池中的其他物理主机的存储资源利用率低,如果不存在则可以增大配置的存储资源利用率上限为15%继续进行查找,以此类推直至查找到符合条件的物理主机。
本发明实施例通过剩余存储资源满足请求创建的容器规格的物理主机中,选取小于预先配置存储资源利用率上限的物理主机,并且,在实际选择符合条件的物理主机的过程中,预先配置的存储资源上限可以根据需要进行动态调节,基于上述方案可以保证最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1,示出了本发明实施例提供的一种物理主机选择方法的流程图,该方法具体包括以下步骤:
S100,接收容器创建请求,容器创建请求中包括容器规格。
容器技术是一种被大家广泛认可的服务器资源共享方式,容器技术可以在按需构建容器技术操作系统实例的过程当中为系统管理员提供极大的灵活性,同时能够在同一台服务器上创建相比于之前两倍的虚拟机实例数量,因此容器技术将会降低系统总投入。
用户通过客户端云管理控制台创建云数据库时,通常需要先指定用于启动云数据库的容器的规格,即指定容器的内存和磁盘的大小,具体的容器的内存大小可以有512M、1G、2G、4G等供用户选择,磁盘大小可以有10G、30G、50G、100G等供用户选择,对此本发明并不做限定。容器规格是可以在用户使用过程中增加的,这样当某一用户在使用过程中开始指定的容器规格不够用时,可以根据自身需求进行增容。
在具体应用中用户可以根据自己的需求来指定容器的规格,比如用户希望通过云数据库存储主要用来存储视频、图片等资料,那么其可以指定一个磁盘大的容器,如内存512M,磁盘100G;而用户希望通过云数据库来运行一些程序代码、软件时,则可以指定一个内存大的容器,如内存2G,磁盘10G。对此本发明并不做限制。
本发明实施例还可以针对不同的用户提供不同的容器规格,比如高等级的用户比低等级的用户能够选择的容器规格大,活跃度高的用户比活跃度低的用户能够选择的容器规格大,对此本发明并不做限制。
本发明实施例通过为用户提供不同规格的容器在满足不同用户需求的同时能够更加合理的利用存储资源,减少某一用户指定了一个大规格的容器后却经常不使用而造成存储资源浪费的情况。
S110,选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中。
当服务器接收到用户指定的容器规格后,根据容器规格首先选择出剩余存储资源大于容器规格的物理主机即剩余存储资源能够创建容器的物理主机,然后将该物理主机的标识存储到资源池中,资源池在记录剩余存储资源大于容器规格的物理主机的标识的同时,还可以记录各个物理主机存储资源使用情况用以进一步选择符合条件的物理主机。
一种实施方式中,服务器可以为各个物理主机分配不同的标识,资源池是剩余存储资源大于所要创建的容器规格的物理主机标识的集合,可以以列表的形式存储在服务器中,还可以记录各个物理主机存储资源利用情况,可以包括各个物理主机的总存储资源大小和已用存储资源的大小。例如,其中某一台物理主机存储资源利用情况可以记录为:物理主机标识为001,总存储资源1000G,已用存储资源150G,存储资源利用率为15%。
基于此能够使得服务器在后续的选择物理主机的过程中能够快速了解资源池中标识多对应的各个物理主机的存储资源利用率的情况,加快物理主机的选择过程。
S120,获取预先配置的一存储资源利用率上限。
当接收到用户指定的容器规格后,根据用户指定的容器的规格选出剩余存储资源能够创建容器的物理主机之后配置一存储资源利用率上限,。
存储资源利用率上限是预先定义的已用存储资源占物理主机总存储资源的比例,为后续选择的依据。比如某台物理主机的总存储资源为200G,已用存储资源为15G,存储资源利用率为7.5%。当配置的存储资源利用率上限为10%时,那么在后续的选择过程中该物理主机存储资源利用率为7.5%小于10%,则表明该物理主机符合配置的条件。
不难理解的是资源池中各个物理主机的总存储资源是不同的,资源池中的标识所对应的每个物理主机的总存储资源不同,但是每个物理主机的存储资源利用率都是从0%-100%之间变化的,本发明实施例通过为物理主机配置相同的存储资源利用率上限来进行选择,避免了仅仅通过已用存储资源的大小来进行选择时,存在选择出的物理主机已用存储资源相比其他物理主机少的情况下,而该物理主机存储资源利用率相比其他物理主机高的问题,即选择出的物理主机相比于其他物理主机更加接近饱和状态即存储资源利用率更加接近100%。
为方便理解现进行举例说明,资源池中的标识对应有两台物理主机,其中一号物理主机已用存储资源为30G,总存储资源为100G;二号物理主机已用存储资源为50G,总存储资源为500G,如果选择已用存储资源少的物理主机则会选择一号物理主机,但是该物理主机存储资源利用率为30%,而二号物理主机虽然已用存储资源为50G相比30G多,但是二号物理主机存储资源利用率仅为10%,显而易见的一号物理主机相比于二号物理主机更加接近饱和状态,那么如果选择一号物理主机则会将容器创建到存储资源利用率高的物理主机上,并不能达到均衡各个物理主机之间的存储资源利用率的目的。
S130,在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限的物理主机。
一种实施方式中,资源池中记录有各个物理主机存储资源使用情况,可以先根据记录的信息查找存储资源利用率小于存储资源利用率上限的物理主机的标识,然后在根据物理主机的标识来确定实际为哪个物理主机。
一种实施方式中,存储资源利用率上限可以在选择符合条件的物理主机的过程中进行动态调节,例如,首先可以配置存储资源上限为5%,查找是否存在存储资源利用率小于5%的物理主机,如果存在则结束查找过程,如果没有符合条件的物理主机则增大存储资源利用率上限的值,即可以调整为10%,继续进行查找,如果存在符合条件的物理主机则结束选择过程,否则继续增大存储资源利用率上限的值,以此类推直至选择出符合条件的物理主机。
在上述查找过程中,存储资源利用率小于存储资源利用率上限的物理主机可能只有一台,那么最终选择出的物理主机的存储资源利用率则低于其他物理主机存储资源利用率。
一种实现方式中,还可以在选择出存储资源利用率小于存储资源利用率上限的物理主机之后,继续在符合条件的物理主机中选择存储资源利用率最低的物理主机。
一种实现方式中,还可以在查找过程中,在没有符合条件的物理主机的情况下,减少增大存储资源利用率上限的增长幅度,例如,每次只增加1%,以此来使得最终选择出的物理主机的存储资源利用率则低于其他物理主机的存储资源利用率。
基于上述方案可以保证最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
参照图2,示出了本发明实施例提供的另一种物理主机选择方法的流程图,该方法具体包括以下步骤:
S200,接收容器创建请求,容器创建请求中包括容器规格。
S210,选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中。
S220,获取预先配置的一存储资源利用率上限。
需要说明的是,以上S200-S220的具体过程与上述图1提供的实施例中相关步骤相同,在此不再赘述。
S230,根据每个物理主机的性能参数为每个物理主机分配一权值。
权值是一个相对的概念,针对某一性能参数而言,某一性能参数的权值是指该性能参数在整体评价中的相对重要程度,在实际应用中对于不同用途的计算机,其对不同部件的性能指标要求有所不同。例如:对于用作科学计算为主的计算机,其对主机的运算速度要求很高;对于用作大型数据库处理为主的计算机,其对主机的内存容量、存取速度和外存储器的读写速度要求较高;对于用作网络传输的计算机,则要求有很高的I/O速度,因此应当有高速的I/O总限和相应的I/O接口。权值是要从若干性能参数中分出轻重来,可以针对每个物理主机性能的性能参数的高低来为每个物理主机分配权值。物理主机性能的性能参数越高所分配的权值越高。
一种实现方式中,在本发明中可以通过统计使用云数据库服务的所有用户中的使用行为来确定某一性能参数的权值。例如,当统计出所有用户中通过云数据库运行程序代码、应用软件的用户较利用其他功能的用户多时,则表明用户对物理主机的运算速度需求相对于其他性能参数高,则确定物理主机运算速度性能参数的权值高于其他的性能参数的权值;而当统计出的所有用户中的使用云数据库进行存储的用户较利用其他功能的用户多时,则表明用户对物理主机存储资源需求相对于其他性能参数高,则确定物理主机存储资源容量性能参数的权值高于其他的性能参数的权值。
其中,物理主机性能的性能参数可以包括:物理主机运算速度、物理主机存储资源容量、网卡通讯速率。
物理主机运算速度是指物理主机每秒钟能执行的指令数,一般以每秒能执行的百万条指令数来衡量,单位为每秒百万条指令。影响物理主机运算速度的主要因素是中央处理器的主频和存储器的存取周期。
物理主机的存储资源容量是指物理主机硬盘容量的大小。硬盘的容量以兆字节(MB)或千兆字节(GB)为单位,1GB=1024MB,1TB=1024GB。硬盘的容量指标还包括硬盘的单碟容量。所谓单碟容量是指硬盘单片盘片的容量,单碟容量越大,单位成本越低,平均访问时间也越短。
网卡通讯速率是指网卡每秒钟接收或发送数据的能力,单位是Mbps(兆位/秒)。网卡通讯速率越高每秒钟接收或发送数据的能力越强。
S240,在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限,且权值最大的物理主机。
根据物理主机各个性能参数确定的物理主机的权值越大则表明该物理主机的综合性能越好,在存储资源利用率符合条件的物理主机之中选择权值最大的物理主机,从而能够将高性能的物理主机优先分配给用户,提高用户体验。
在具体应用中本发明还可以根据用户指定的容器规格的不同来为各个用户分配物理主机,例如,当某个用户指定一个最小规格的容器时则说明该用户对云数据库服务需求不高,则可以将权值最小的物理主机分配给该用户;相应的当某个用户指定了一个最大规格的容器时则可以将权值最大的物理主机分配给该用户。基于此,本发明能够针对用户的需求的不同来为用户分配不同权值的物理主机,能够将高权值的物理主机优先分配给需求大的用户。
本发明实施例物理主机选择装置通过在存储资源利用率符合条件的物理主机中选择权值最大的物理主机,从而能够在将容器更加均衡的分配到每台物理主机上的同时将高性能的物理优先分配给用户,提高用户体验。
参照图3,示出了本发明实施例中为每个物理主机分配权值的步骤,具体可以包括:
S21,比较每个物理主机的每个性能参数的重要程度。
重要程度可以理解为在实际应用中用户对某一性能的依赖程度,可以通过获取所有用户历史数据确定出来的,具体的可以看用户常用哪个参数,哪个就是重要的。例如所有用户中在云数据库中应用运算程序较利用其他功能的用户多,则说明物理主机性能的性能参数中的物理主机运算速度这一项参数的重要程度要高于其他性能参数的重要程度。所有用户中利用云数据库进行存储视频、图片等资源的行为较利用其他功能的用户多时,则说明物理主机性能参数中的物理主机存储资源容量这一项参数的重要程度高于其他性能参数的重要程度。
S22,按照每个性能参数的重要程度,确定每个物理主机的重要程度。
一种实施方式中,首先,可以根据每个物理主机各个性能参数的大小为每个物理主机各个性能参数来分配重要程度的值。物理主机中性能参数的值最大的重要程度设为最大,然后按照其他物理主机该性能参数与最大性能参数的值的比例来确定每个性能参数的重要程度。比如物理主机中存储资源容量最大的为1000G,可以确定该物理主机存储资源容量的重要程度为10,那么存储资源容量500G的物理主机存储资源容量的重要程度为5,储资源容量100G的物理主机存储资源容量的重要程度为1。
然后,可以按照用户使用物理主机性能的实际使用情况来为物理主机的性能的性能参数来分配一个系数,所有用户中实际使用某个性能参数的用户越多则为该性能参数分配的系数越大,比如使用云数据库服务的用户总数为1000人,统计出利用云数据库进行运行程序代码的人数为500人,利用云数据库存储视频、图片等资源的人数为300人,利用云数据库进行网络数据传输的人数为200人,根据统计结果则可以认定物理主机运算速度的利用率>物理主机存储资源的利用率>网卡通讯速率的利用率,可以设定物理主机运算速度的系数为0.5;物理主机存储资源的系数为0.3;网卡通讯速率的系数为0.2。
最后每个物理主机的重要程度的计算公式可以表示为物理主机运算速度的重要程度*0.5+物理主机存储资源的重要程度*0.3+网卡通讯速率的的重要程度*0.2。
上述方案避免了物理主机某一项性能参数的值高于其他物理主机的性能参数的值,但是这一项性能参数却不是用户经常使用的那一项参数,导致为用户分配的物理主机并不符合用户实际使用情况的问题。
S23,利用每个物理主机的重要程度,为每个物理主机分配一权值。
物理主机的重要程度越高所分配的权值越大。一种实施方式中,本发明为方便计算可以将每个物理主机的重要程度的值来作为每个物理主机的权值,对此本发明并不做限定。
本发明实施例确定每个物理主机权值的步骤,综合考虑每个物理主机的各个性能参数和各个性能参数用户的实际利用情况,来确定物理主机不同性能参数的重要程度进而为每个物理主机分配权值,使得确定出的每个物理主机的权值更加符合用户的使用习惯。
本发明实施例中根据每个物理主机的性能参数为每个物理主机分配一权值的步骤具体还可以包括:
在确定性能参数中的第一性能参数的重要程度高于性能参数中的除第一性能参数以外的其他性能参数的重要程度时,则根据第一性能参数的参数值为每个物理主机分配一权值。
一种实现方式中为了简化运算,可以只考虑一个物理主机的性能的性能参数来确定每个物理主机的重要程度。一种实现方式中,当统计出所有用户中在云数据库中应用运算的程序的用户较利用其他功能的用户多,则确定物理主机性能的性能参数中的物理主机运算速度这一项参数的重要程度要高于其他性能参数的重要程度,基于此可以将物理主机的运算速度作为第一性能参数,然后只根据物理主机的运算速度来确定每个物理主机的重要程度,最后根据每个物理主机的重要程度为每个物理主机分配一权值。
一种实现方式中,还可以在用户指定不同规格的容器时,提供云数据库功能选择项,即让用户选择将云数据库主要应用于存储资源还是主要用于运行程序代码等功能,基于此服务器可以根据用户自身的选择来为用户分配物理主机。即当用户选择主要用于存储资源时,那么对于该用户来说物理主机性能参数中物理主机的存储资源容量的重要程度要高于其他性能参数,那么服务器可以只根据物理主机的存储资源容量来确定每个物理主机的重要程度,然后再根据每个物理主机的重要程度为每个物理主机分配一权值。
而当用户选择主要用于运行程序代码时,那么对于该用户来说物理主机性能参数中物理主机的运算速度的重要程度要高于其他性能参数,那么服务器可以只根据物理主机的运算速度来确定每个物理主机的重要程度,然后再根据每个物理主机的重要程度为每个物理主机分配一权值。基于此本发明能够根据用户自身需求的不同来为每个用户分配物理主机的同时简化物理主机选择步骤。
本发明实施例物理主机选择方法通过选取小于预先配置的存储资源利用率上限的物理主机,选择符合条件的物理主机的过程中配置的存储资源上限可以根据需要由低到高来动态调节,基于此可以保证最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率,以均衡各个物理主机存储资源利用率。还能够在选择出低于存储资源利用率上限的物理主机之后,选择权值最大的物理主机,从而能够优先将高性能的物理主机分配给用户,提高用户体验。
相应于上面的方法实施例,本发明实施例还提供了一种物理主机选择装置,如图4所示,为本发明实施例中一种物理主机选择装置的结构示意图,包括:
接收模块300,用于接收容器创建请求,容器创建请求中包括容器规格;
第一选择模块320,用于选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取模块340,用于获取预先配置的一存储资源利用率上限;
第二选择模块360,用于在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限的物理主机。
本发明实施例物理主机选择装置最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
本发明实施例一种实现方式,如图5所示,本发明物理主机选择装置还包括:
权值分配模块350,用于在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限的物理主机之前,根据每个物理主机的性能参数为每个物理主机分配一权值;
其中,物理主机性能的性能参数包括:物理主机运算速度、物理主机存储资源容量和网卡通讯速率。
第二选择模块360,具体用于在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源上限,且权值最大的物理主机。
本发明实施例中的一种实施方式中,本发明物理主机选择装置中权值分配模块350,具体可以用于,
比较每个物理主机的每个性能参数的重要程度;
按照每个性能参数的重要程度,确定每个物理主机的重要程度;
利用每个物理主机的重要程度,为每个物理主机分配一权值。
本发明实施例中的一种实施方式中,本发明物理主机选择装置中权值分配模块350,具体还用于,
在确定性能参数中的第一性能参数的重要程度高于性能参数中的除第一性能参数以外的其他性能参数的重要程度时,则根据第一性能参数的参数值为每个物理主机分配一权值。
本发明实施例物理主机选择装置通过在存储资源利用率符合条件的物理主机中选择权值最大的物理主机,从而能够在将容器更加均衡的分配到每台物理主机上的同时将高性能的物理优先分配给用户,提高用户体验。
本发明实施例还提供了一种电子设备,如图6所示,包括处理器001、机器可读存储介质002;
机器可读存储介质002,用于存储能够被处理器执行的机器可执行指令;
处理器001,用于执行机器可读存储介质002上所存放的指令时,实现本发明实施例所述的物理主机选择方法。
具体的,上述物理主机选择方法,包括:
接收容器创建请求,容器创建请求中包括容器规格;
选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机。
需要说明的是,上述通过执行机器可读存储介质002上所存放的程序而实现的物理主机选择方法的其他实施例与前述方法实施例部分所述的物理主机选择方法的各个实施例相同,在此不再赘述。
本发明实施例提供的电子设备最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
上述电子设备通过通讯总线连接,通信总线可以是外设部件互连标准(Peripheral Component Interconnect,PCI)总线或扩展工业标准结构(ExtendedIndustry Standard Architecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。
机器可读存储介质可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时,实现本发明实施例所述的物理主机选择方法。
具体的,上述物理主机选择方法,包括:
接收容器创建请求,容器创建请求中包括容器规格;
选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机。
需要说明的是,上述通过执行计算机可读存储介质所存放的程序而实现的物理主机选择方法的其他实施例与前述方法实施例部分所述的物理主机选择方法的各个实施例相同,在此不再赘述。
本发明实施例提供的计算机可读存储介质最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
在本发明提供的又一实施例中,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机实现本发明实施例所述的物理主机选择方法。
具体的,上述物理主机选择方法,包括:
接收容器创建请求,容器创建请求中包括容器规格;
选择剩余存储资源大于容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在资源池中的标识所对应的物理主机中选择存储资源利用率小于存储资源利用率上限的物理主机。
需要说明的是,上述通过执行计算机程序产品所存放的指令而实现的物理主机选择方法的其他实施例与前述方法实施例部分所述的物理主机选择方法的各个实施例相同,在此不再赘述。
本发明实施例提供的计算机程序产品最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
本发明又一实施例中,提供了一种计算机程序,当其在计算机上运行时,使得计算机实现本发明实施例所述的物理主机选择方法。
具体的,上述物理主机选择方法,包括:
接收容器创建请求,容器创建请求中包括容器规格;
选择剩余存储资源大于所述容器规格的物理主机,并将物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;
在资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机。
需要说明的是,通过执行上述计算机程序而实现的物理主机选择方法的其他实施例与前述方法实施例部分所述的物理主机选择方法的各个实施例相同,在此不再赘述。
本发明实施例提供的计算机程序最终选择出的物理主机的存储资源利用率是处在资源池中所有物理主机存储资源利用率的一个较低水平的,甚至在一些情况下,较低的存储资源利用率上限可以保证最终选择出的物理主机的存储资源利用率低于其他物理主机存储资源利用率。这样优先选择存储资源利用率低的物理主机的方式,可以有效均衡各个物理主机存储资源利用率。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、电子设备、计算机可读存储介质、计算机程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种物理主机选择方法,其特征在于,包括:
接收容器创建请求,所述容器创建请求中包括容器规格;
选择剩余存储资源大于所述容器规格的物理主机,并将所述物理主机的标识存储到资源池中;
获取预先配置的一存储资源利用率上限;所述存储资源利用率上限能够进行动态调节;
根据每个物理主机的性能参数为所述每个物理主机分配一权值;所述权值越大,所述物理主机的综合性能越好;
在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机;
所述在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机的步骤,包括:
在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限,且所述权值最大的物理主机。
2.根据权利要求1所述的方法,其特征在于,所述物理主机的性能参数包括:物理主机运算速度、物理主机存储资源容量和网卡通讯速率。
3.根据权利要求2所述的方法,其特征在于,所述根据每个物理主机的性能参数为所述每个物理主机分配一权值的步骤,包括:
比较每个物理主机的每个性能参数的重要程度;
按照所述每个性能参数的重要程度,确定每个物理主机的重要程度;
利用所述每个物理主机的重要程度,为所述每个物理主机分配一权值。
4.根据权利要求2所述的方法,其特征在于,所述根据每个物理主机的性能参数为所述每个物理主机分配一权值的步骤,还包括:
在确定所述性能参数中的第一性能参数的重要程度高于所述性能参数中的除所述第一性能参数以外的其他性能参数的重要程度时,则根据所述第一性能参数的参数值为每个物理主机分配一权值。
5.一种物理主机选择装置,其特征在于,包括:
接收模块,用于接收容器创建请求,所述容器创建请求中包括容器规格;
第一选择模块,用于选择剩余存储资源大于所述容器规格的物理主机,并将所述物理主机的标识存储到资源池中;
获取模块,用于获取预先配置的一存储资源利用率上限;所述存储资源利用率上限能够进行动态调节;
权值分配模块,用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机之前,根据每个物理主机的性能参数为所述每个物理主机分配一权值;所述权值越大,所述物理主机的综合性能越好;
第二选择模块,用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限的物理主机;
第二选择模块,具体用于在所述资源池中的标识所对应的物理主机中选择存储资源利用率小于所述存储资源利用率上限,且所述权值最大的物理主机。
6.根据权利要求5所述的装置,其特征在于,所述物理主机的性能参数包括:物理主机运算速度、物理主机存储资源容量和网卡通讯速率。
7.根据权利要求6所述的装置,其特征在于,所述权值分配模块用于,
比较每个物理主机的每个性能参数的重要程度;
按照所述每个性能参数的重要程度,确定每个物理主机的重要程度;
利用所述每个物理主机的重要程度,为所述每个物理主机分配一权值。
8.根据权利要求6所述的装置,其特征在于,所述权值分配模块还用于,
在确定所述性能参数中的第一性能参数的重要程度高于所述性能参数中的除所述第一性能参数以外的其他性能参数的重要程度时,则根据所述第一性能参数的参数值为每个物理主机分配一权值。
9.一种电子设备,其特征在于,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,所述处理器被所述机器可执行指令促使:实现权利要求1~4任一所述的方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时,实现权利要求1~4任一项所述的方法步骤。
CN201710876006.9A 2017-09-25 2017-09-25 一种物理主机选择方法、装置、设备及可读存储介质 Active CN108572869B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710876006.9A CN108572869B (zh) 2017-09-25 2017-09-25 一种物理主机选择方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710876006.9A CN108572869B (zh) 2017-09-25 2017-09-25 一种物理主机选择方法、装置、设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN108572869A CN108572869A (zh) 2018-09-25
CN108572869B true CN108572869B (zh) 2021-05-25

Family

ID=63576517

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710876006.9A Active CN108572869B (zh) 2017-09-25 2017-09-25 一种物理主机选择方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN108572869B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113741793B (zh) * 2020-05-29 2024-04-09 华为技术有限公司 一种上报存储资源的方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102185779A (zh) * 2011-05-11 2011-09-14 田文洪 与综合配置能力成比例的数据中心资源负载均衡的方法及装置
CN103092697A (zh) * 2010-12-17 2013-05-08 微软公司 用于主存有状态和无状态中间软件组件的多承租人高密度容器服务
CN105893010A (zh) * 2015-11-17 2016-08-24 乐视云计算有限公司 用于容器部署的主机调度方法及系统
CN105975295A (zh) * 2016-04-25 2016-09-28 乐视控股(北京)有限公司 用于主机集群的应用程序更新方法、装置及服务器设备
CN106776029A (zh) * 2016-12-21 2017-05-31 上海爱数信息技术股份有限公司 一种优化服务器内存资源利用率的方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103092697A (zh) * 2010-12-17 2013-05-08 微软公司 用于主存有状态和无状态中间软件组件的多承租人高密度容器服务
CN102185779A (zh) * 2011-05-11 2011-09-14 田文洪 与综合配置能力成比例的数据中心资源负载均衡的方法及装置
CN105893010A (zh) * 2015-11-17 2016-08-24 乐视云计算有限公司 用于容器部署的主机调度方法及系统
CN105975295A (zh) * 2016-04-25 2016-09-28 乐视控股(北京)有限公司 用于主机集群的应用程序更新方法、装置及服务器设备
CN106776029A (zh) * 2016-12-21 2017-05-31 上海爱数信息技术股份有限公司 一种优化服务器内存资源利用率的方法及系统

Also Published As

Publication number Publication date
CN108572869A (zh) 2018-09-25

Similar Documents

Publication Publication Date Title
US10659318B2 (en) Methods and apparatus related to management of unit-based virtual resources within a data center environment
US10430332B2 (en) System and method for performance tuning of garbage collection algorithms
US8046764B2 (en) Redistribution of unused resources assigned to a first virtual computer having usage below a predetermined threshold to a second virtual computer
JP5510556B2 (ja) 仮想マシンのストレージスペースおよび物理ホストを管理するための方法およびシステム
US20140040895A1 (en) Electronic device and method for allocating resources for virtual machines
US8918474B2 (en) Determining priorities for cached objects to order the transfer of modifications of cached objects based on measured network bandwidth
US9900264B1 (en) Adaptive balancing of application programming interface calls of cloud tenants
US9069623B2 (en) Management apparatus, method, and privileged and confidential medium storing program to migrate a virtual machine when a resource shortage or booting occurs
US20160266916A1 (en) Systems and Methods for Contextually Allocating Emulation Resources
JP2018517201A (ja) 仮想マシンのためのネイティブなストレージサービス品質
US20210365295A1 (en) Method, storage medium storing instructions, and apparatus for implementing hardware resource allocation according to user-requested resource quantity
CN109981702B (zh) 一种文件存储方法及系统
CN110545450B (zh) 一种节点分配方法、系统及电子设备和存储介质
CN103885820A (zh) 信息处理装置和信息处理方法
CN105592110A (zh) 一种资源调度方法及装置
GB2584980A (en) Workload management with data access awareness in a computing cluster
CN108241535B (zh) 资源管理的方法、装置及服务器设备
CN108572869B (zh) 一种物理主机选择方法、装置、设备及可读存储介质
WO2022110796A1 (zh) 云服务请求响应方法及装置、电子设备和存储介质
CN114153549A (zh) 一种虚拟机创建方法及相关设备
CN109725844B (zh) 一种磁盘分配方法、装置和存储系统
US20180018129A1 (en) Storage monitoring system and monitoring method therefor
US11782898B2 (en) Content data holding system, storage medium, content data holding server, and data management method
CN103259817B (zh) 资源释放方法及装置
JP2019528521A (ja) 統計を集約するための方法および分散ストレージシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant