CN115379000A - 服务平台的扩容方法、装置、电子设备以及存储介质 - Google Patents
服务平台的扩容方法、装置、电子设备以及存储介质 Download PDFInfo
- Publication number
- CN115379000A CN115379000A CN202211317189.8A CN202211317189A CN115379000A CN 115379000 A CN115379000 A CN 115379000A CN 202211317189 A CN202211317189 A CN 202211317189A CN 115379000 A CN115379000 A CN 115379000A
- Authority
- CN
- China
- Prior art keywords
- service
- instances
- priority
- target
- service instances
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000009467 reduction Effects 0.000 claims description 15
- 238000004891 communication Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000593 degrading effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5041—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the time relationship between creation and deployment of a service
- H04L41/5051—Service on demand, e.g. definition and deployment of services in real time
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本公开公开了一种服务平台的扩容方法、装置、电子设备以及存储介质,涉及云计算技术领域,具体实现方案为:获取目标服务的请求流量;根据请求流量,确定目标服务是否需要扩容;若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。采用本公开,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。
Description
技术领域
本公开涉及云计算技术领域,尤其涉及一种服务平台的扩容方法、装置、电子设备以及存储介质。
背景技术
随着云技术的不断发展,云服务平台得到了广泛应用。其中,自动驾驶云服务平台通过为不同业务服务(例如,道路信息服务)动态分配服务实例,以满足自动驾驶车辆对不同业务服务的业务请求流量。
相关技术中,当某个业务服务的业务请求流量升高,且该业务服务当前的服务实例不能满足业务请求流量时,自动驾驶云服务平台会为该业务服务进行资源扩容,即为该业务服务提供更多的服务实例,以满足对应的业务请求流量。
但是,相关技术中,自动驾驶云服务平台为业务服务进行资源扩容时,需要先根据业务服务的算法模型启动服务实例,并在服务实例启动完成后才能够为该业务服务提供服务。而业务服务的算法模型较复杂,使得服务实例的启动时间较长,基于此需要较长时间才能满足业务请求流量,从而降低了业务服务的服务质量。
发明内容
本公开提供了一种服务平台的扩容方法、装置、电子设备以及存储介质,以至少解决相关技术中扩容时服务实例的启动时间长、服务质量低的技术问题。
根据本公开的一方面,提供了一种服务平台的扩容方法,应用于服务平台,所述服务平台内配置多个不同优先级的服务实例,所述服务实例包括高优先级服务实例和低优先级服务实例,所述低优先级服务实例为可抢占的服务实例,所述高优先级服务实例为不可抢占的服务实例,包括:
获取目标服务的请求流量;
根据所述请求流量,确定所述目标服务是否需要扩容;
若确定所述目标服务需要扩容,基于所述服务平台的服务实例对所述目标服务进行扩容。
可选的,若确定所述目标服务需要扩容,所述基于所述服务平台的服务实例对所述目标服务进行扩容,包括:
确定所述目标服务需要扩容的服务实例个数为第一数量;
确定所述服务平台中低优先级服务实例的个数为第二数量;
若所述第一数量不大于所述第二数量,则基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例;
若所述第一数量大于所述第二数量,则基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例。
可选的,所述基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例,包括:
将所述服务平台中所述第一数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第一数量个高优先级服务实例。
可选的,所述基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例,包括:
将所述服务平台中所述第二数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例,所述第三数量为所述第一数量与所述第二数量之差。
可选的,所述根据所述请求流量,确定所述目标服务是否需要扩容,包括:
根据所述请求流量,确定所述目标服务的预期服务实例个数;
确定所述目标服务在所述服务平台中的当前服务实例个数;
若所述预期服务实例个数大于所述当前服务实例个数,则确定所述目标服务需要扩容。
可选的,所述方法还包括:
若所述预期服务实例个数小于所述当前服务实例个数,基于所述服务平
台的服务实例对所述目标服务进行缩容。
可选的,所述基于所述服务平台的服务实例对所述目标服务进行缩容,包括:
确定所述目标服务需要缩容的服务实例个数为第四数量;
将所述目标服务对应第四数量个高优先级服务实例调整为所述低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
根据本公开的另一方面,提供了一种服务平台的扩容装置,其特征在于,应用于服务平台,所述服务平台内配置多个不同优先级的服务实例,所述服务实例包括高优先级服务实例和低优先级服务实例,所述低优先级服务实例为可抢占的服务实例,所述高优先级服务实例为不可抢占的服务实例,包括:
获取模块,用于获取目标服务的请求流量;
确定模块,用于根据所述请求流量,确定所述目标服务是否需要扩容;
扩容模块,用于若确定所述目标服务需要扩容,基于所述服务平台的服务实例对所述目标服务进行扩容。
可选的,所述扩容模块,具体用于:
确定所述目标服务需要扩容的服务实例个数为第一数量;
确定所述服务平台中低优先级服务实例的个数为第二数量;
若所述第一数量不大于所述第二数量,则基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例;
若所述第一数量大于所述第二数量,则基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例。
可选的,所述扩容模块,进一步具体用于:
将所述服务平台中所述第一数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第一数量个高优先级服务实例。
可选的,所述扩容模块,进一步具体用于:
将所述服务平台中所述第二数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例,所述第三数量为所述第一数量与所述第二数量之差。
可选的,所述确定模块,具体用于:
根据所述请求流量,确定所述目标服务的预期服务实例个数;
确定所述目标服务在所述服务平台中的当前服务实例个数;
若所述预期服务实例个数大于所述当前服务实例个数,则确定所述目标服务需要扩容。
可选的,所述确定模块,还用于:
若所述预期服务实例个数小于所述当前服务实例个数,基于所述服务平台的服务实例对所述目标服务进行缩容。
可选的,所述确定模块,进一步还用于:
确定所述目标服务需要缩容的服务实例个数为第四数量;
将所述目标服务对应第四数量个高优先级服务实例调整为所述低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
根据本公开的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述一方面中任一项所述的方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行前述一方面中任一项所述的方法。
根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现前述一方面中任一项所述的方法。
在本公开一个或多个实施例中,通过获取目标服务的请求流量,根据请求流量,确定目标服务是否需要扩容,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。其中,服务平台包括高优先级服务实例和低优先级服务实例,当确定目标服务需要扩容,可以直接基于服务平台中不需要启动的低优先级服务实例对目标服务进行扩容,由此,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其他特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1示出本公开一个实施例提供的服务平台的扩容方法的流程示意图;
图2示出本公开另一个实施例提供的服务平台的扩容方法的流程示意图;
图3示出本公开一个实施例提供的服务平台的扩容方法的流程示意图;
图4示出本公开另一个实施例提供的服务平台的扩容方法的流程示意图;
图5示出本公开一个实施例提供的服务平台的扩容装置的结构示意图;
图6是用来实现本公开实施例的服务平台的扩容方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是本公开的一个实施例提出的服务平台的扩容方法的流程示意图,
如图1所述,该服务平台的扩容方法,包括:
S101,获取目标服务的请求流量。
其中,一些实施例中,上述服务平台可以为自动驾驶云服务平台。以及,上述目标服务可以是为自动驾驶车辆提供的道路信息服务,或者路径
服务,或者实时交通服务。
以及,一些实施例中,可以通过获取目标服务的QPS(Queries Per Second,每秒请求数)获取目标服务的请求流量。
一些实施例中,目标服务的请求流量时动态变化的,基于此服务平台会根据目标服务的请求流量为目标服务动态分配服务实例,以满足该目标服务的请求流量。
S102,根据请求流量,确定目标服务是否需要扩容。
一些实施例中,可以通过当前请求流量得到当前请求流量对应需要的预期服务实例个数,将预期服务实例个数与当前在服务平台为目标服务分配的服务实例个数进行比较,根据比较结果确定目标服务是否需要扩容。
其中,一些实施例中,服务平台中的每个服务实例可以承载的QPS是相同的。基于此,可以通过请求流量对应的QPS除以每个服务实例承载的QPS得到请求流量对应需要的预期服务实例个数。关于确定目标服务是否需要扩容的方法,这部分内容会在后续实施例中进行详细介绍,本公开实施例在此不做赘述。
S103,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。
一些实施例中,服务平台内配置多个不同优先级的服务实例。其中,服务实例可以包括高优先级服务实例和低优先级服务实例。
一些实施例中,服务平台会预先为目标服务配置高优先级服务实例,用于目标服务提供服务。同时,服务平台中未被分配的服务实例可以包括高优先级服务实例和低优先级服务实例。
具体的,一些实施例中,上述未被分配的高优先级服务实例为不可抢占的服务实例,不可抢占的服务实例为需要启动的服务实例,其中,高优先级服务实例的启动过程具体可以包括读取目标服务的配置文件,根据配置文件进行资源的加载,然后进行预热。基于此,目标服务利用高优先级服务实例提供服务时,需要等高优先级服务实例完成上述启动过程后,才可以利用该高优先级服务实例提供服务。
以及,一些实施例中,上述未被分配的低优先级服务实例为可抢占的服务实例,可抢占的服务实例为已经完成资源(如处理器、磁盘)的加载和预热的服务实例,即低优先级服务实例不需要进行上述启动过程,目标服务可以直接利用低优先级服务实例提供服务。
一些实施例中,当确定目标服务需要扩容,则可以基于服务平台中未被分配的低优先级服务实例,或者,高优先级服务实例和低优先级服务实例对目标服务进行扩容。关于这部分内容会在后续实施例中进行详细介绍,本公开实施例在此不做赘述。
在本公开一个或多个实施例中,通过获取目标服务的请求流量,根据请求流量,确定目标服务是否需要扩容,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。其中,服务平台包括高优先级服务实例和低优先级服务实例,当确定目标服务需要扩容,可以直接基于服务平台中不需要启动的低优先级服务实例对目标服务进行扩容,由此,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。由此使得自动驾驶云服务平台能够快速满足业务服务的业务请求流量,进而使得自动驾驶云服务平台能够为自动驾驶车辆提供更好的服务。
图2是本公开的一个实施例提出的服务平台的扩容方法的流程示意图,如图2所示,该服务平台的扩容方法,可以包括:
S201,获取目标服务的请求流量。
S202,根据请求流量,确定目标服务的预期服务实例个数。
S201-S202的描述说明可以具体参见上述实施例,在此不再赘述。
S203,确定目标服务在服务平台中的当前服务实例个数。
一些实施例中,可以根据当前服务平台为目标服务分配的高优先级服务实例的个数,确定目标服务在服务平台中的当前服务实例个数。
S204,若预期服务实例个数大于当前服务实例个数,确定目标服务需要扩容的服务实例个数为第一数量。
一些实施例中,若预期服务实例个数大于当前服务实例个数,说明当前服务实例个数不能满足目标服务当前的请求流量,则确定目标服务需要扩容。基于此,服务平台根据当前流量确定目标服务需要扩容时,才会为该目标服务进行扩容,以使得服务平台可以根据当前流量动态调整目标服务的服务实例,从而使得服务平台的服务实例的利用效率较高,避免服务实例的浪费。
以及,一些实施例中,服务平台可以根据预期服务实例个数与当前服务实例个数之差,确定目标服务需要扩容的服务实例个数为第一数量。
S205,确定服务平台中低优先级服务实例个数为第二数量。
一些实施例中,服务平台可以根据服务实例中优先级为低优先级的服务实例的个数,确定服务平台中低优先级服务实例个数为第二数量。
S206,若第一数量不大于第二数量,则基于服务平台的低优先级服务实例为目标服务扩容第一数量个服务实例。
一些实施例中,若第一数量不大于第二数量,说明服务平台中包括的低优先级服务实例能满足目标服务扩容的服务实例个数,则可以直接基于服务平台的低优先级服务实例为目标服务扩容第一数量个服务实例。
具体的,一些实施例中,基于服务平台的低优先级服务实例为目标服务扩容第一数量个服务实例的方法可以包括:将服务平台中第一数量个低优先级服务实例调整为高优先级服务实例,为目标服务扩容调整后的第一数量个高优先级服务实例。
一些实施例中,可以通过将服务平台中第一数量个低优先级服务实例对应的优先级调整为高优先级,以将服务平台中第一数量个低优先级服务实例调整为高优先级服务实例。基于此,服务平台可以根据优先级确定未分配的服务实例中的低优先级服务实例的个数和高优先级服务的个数,以便后续基于服务平台中的服务实例为目标服务分配服务实例。
一些实施例中,服务平台基于低优先级服务实例为目标服务扩容第一数量个服务实例时,无需启动低优先级服务实例,仅需将服务平台中第一数量个低优先级服务实例调整为高优先级服务实例,目标服务就可以直接利用调整后的高优先级服务实例提供服务,从而降低了扩容时服务实例启动的时间,进而可以很快满足目标服务的当前请求流量,提高了服务质量。
在本公开一个或多个实施例中,通过获取目标服务的请求流量,根据请求流量,确定目标服务是否需要扩容,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。其中,服务平台包括高优先级服务实例和低优先级服务实例,当确定目标服务需要扩容,可以直接基于服务平台中不需要启动的低优先级服务实例对目标服务进行扩容,由此,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。由此,使得自动驾驶云服务平台能够快速满足业务服务的业务请求流量,进而使得自动驾驶云服务平台能够为自动驾驶车辆提供更好的服务。
图3是本公开的一个实施例提出的服务平台的扩容方法的流程示意图,
如图3所示,该服务平台的扩容方法,可以包括:
S301,获取目标服务的请求流量。
S302,根据请求流量,确定目标服务的预期服务实例个数。
S303,确定目标服务在服务平台中的当前服务实例个数。
S304,若预期服务实例个数大于当前服务实例个数,确定目标服务需要扩容的服务实例个数为第一数量。
S305,确定服务平台中低优先级服务实例的个数为第二数量。
S301-S305的描述说明可以具体参见上述实施例,在此不再赘述。
S306,若第一数量大于第二数量,则基于服务平台的低优先级服务实例和高优先级服务实例为目标服务扩容第一数量个服务实例。
一些实施例中,若第一数量大于第二数量,说明服务平台中包括的低优先级服务实例不能满足目标服务扩容的服务实例个数,此时需要基于服务平台的低优先级服务实例和高优先级服务实例为目标服务扩容第一数量个服务实例。
具体的,一些实施例中,基于服务平台的低优先级服务实例和高优先级服务实例为目标服务扩容第一数量个服务实例的方法可以包括:将服务平台中第二数量个低优先级服务实例调整为高优先级服务实例,为目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例。其中,上述第三数量为第一数量与第二数量之差。
一些实施例中,可以通过将服务平台中第二数量个低优先级服务实例对应的优先级调整为高优先级,以将服务平台中第二数量个低优先级服务实例调整为高优先级服务实例。此时,服务平台可以根据优先级确定未分配的服务实例中的低优先级服务实例的个数和高优先级服务的个数,以便后续服务平台为目标服务分配服务实例。
需要说明的是,一些实施例中,虽然服务平台为目标服务扩容第三数量个高优先级服务实例时,目标服务需要等高优先级服务实例完成启动的过程后,才可以利用该高优先级服务实例进行服务,但是服务平台还同时为目标服务扩容第二数量个调整后的高优先级服务实例,调整后的高优先级服务实例不需要启动的过程,由此目标服务可以直接利用调整后的高优先级服务实例提供服务,从而一定程度上降低了扩容时服务实例启动的时间。
在本公开一个或多个实施例中,通过获取目标服务的请求流量,根据请求流量,确定目标服务是否需要扩容,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。其中,服务平台包括高优先级服务实例和低优先级服务实例,当确定目标服务需要扩容,可以直接基于服务平台中不需要启动的低优先级服务实例对目标服务进行扩容,由此,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。由此,使得自动驾驶云服务平台能够快速满足业务服务的业务请求流量,进而使得自动驾驶云服务平台能够为自动驾驶车辆提供更好的服务。
图4是本公开的一个实施例提出的服务平台的扩容方法的流程示意图,
如图4所示,该服务平台的扩容方法,可以包括:
S401,获取目标服务的请求流量。
S402,根据请求流量,确定目标服务的预期服务实例个数。
S403,确定目标服务在服务平台中的当前服务实例个数。
S401-S403的描述说明可以具体参见上述实施例,在此不再赘述。
S404,若预期服务实例个数小于当前服务实例个数,基于服务平台的服务实例对目标服务进行缩容。
一些实施例中,当预期服务实例个数小于当前服务实例个数,说明目标服务不需要当前服务实例个数,则确定对目标服务进行缩容。由此,服务平台确定目标服务需要缩容时,会为该目标服务进行缩容,以使得服务平台可以根据当前流量动态调整目标服务的服务实例,从而提高了服务平台的服务实例的利用效率,避免了资源的浪费。
一些实施例例中,预期服务实例个数等于当前服务实例个数时,说明说明当前服务实例个数能够满足目标服务当前的请求流量,则确定目标服务不需要扩容,或者,缩容。
一些实施例中,基于服务平台的服务实例对目标服务进行缩容的方法可以包括以下步骤:
步骤a、确定目标服务需要缩容的服务实例个数为第四数量。
一些实施例中,可以根据预期服务实例个数与当前服务实例个数之差,确定目标服务需要缩容的服务实例个数为第四数量
一些实施例中,可以根据目标服务提供服务所需服务实例个数的阈值确定目标服务需要缩容的服务实例个数为第四数量。其中,第四数量为当前服务实例个数减去阈值。
步骤b、将目标服务对应第四数量个高优先级服务实例降级为低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
一些实施例中,可以通过将服务平台中第四数量个高优先级服务实例对应的优先级调整为低优先级,以将服务平台中第四数量个高优先级服务实例调整为低优先级服务实例。
以及,一些实施例中,将目标服务对应第四数量个高优先级服务实例调整为低优先级服务实例,使得后续当目标服务需要扩容时,服务平台可以直接基于低优先级服务实例为目标服务进行扩容,从而降低了扩容时服务实例的启动时间。
在本公开一个或多个实施例中,通过获取目标服务的请求流量,根据请求流量,确定目标服务是否需要扩容,若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。其中,服务平台包括高优先级服务实例和低优先级服务实例,当确定目标服务需要扩容,可以直接基于服务平台中不需要启动的低优先级服务实例对目标服务进行扩容,由此,目标服务可以直接利用扩容的服务实例进行服务,从而减少了扩容时服务实例的启动时间,提高了服务平台的服务质量。由此,使得自动驾驶云服务平台能够快速满足业务服务的业务请求流量,进而使得自动驾驶云服务平台能够为自动驾驶车辆提供更好的服务。
下述为本公开装置实施例,可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节,请参照本公开方法实施例。
请参见图5,其示出了本公开一个实施例提供的一种服务平台的扩容装置的结构示意图。该充电控制装置可以应用于服务平台,服务平台内配置多个不同优先级的服务实例,服务实例包括高优先级服务实例和低优先级服务实例,低优先级服务实例为完成预热的服务实例,高优先级服务实例为需要启动的服务实例。该服务平台的扩容装置500包括获取模块501、确定模块502、扩容模块503,其中:
获取模块501,用于获取目标服务的请求流量;
确定模块502,用于根据请求流量,确定目标服务是否需要扩容;
扩容模块503,用于若确定目标服务需要扩容,基于服务平台的服务实例对目标服务进行扩容。
可选的,上述确定模块502,具体用于:
根据请求流量,确定目标服务的预期服务实例个数;
确定目标服务在服务平台中的当前服务实例个数;
若预期服务实例个数大于当前服务实例个数,则确定目标服务需要扩容。
可选的,上述扩容模块503,具体用于:
确定目标服务需要扩容的服务实例个数为第一数量;
确定服务平台中低优先级服务实例的个数为第二数量;
若第一数量不大于第二数量,则基于服务平台的低优先级服务实例为目标服务扩容第一数量个服务实例;
若第一数量大于第二数量,则基于服务平台的低优先级服务实例和高优先级服务实例为目标服务扩容第一数量个服务实例。
可选的,上述扩容模块503,进一步具体用于:
将服务平台中第一数量个低优先级服务实例调整为高优先级服务实例,为目标服务扩容调整后的第一数量个高优先级服务实例。
可选的,上述扩容模块,进一步具体用于:
将服务平台中第二数量个低优先级服务实例调整为高优先级服务实例,为目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例,第三数量为第一数量与第二数量之差。
可选的,上述确定模块502,还用于:
若预期服务实例个数小于当前服务实例个数,基于服务平台的服务实例对目标服务进行缩容。
可选的,上述确定模块502,进一步还用于:
确定目标服务需要缩容的服务实例个数为第四数量;
将目标服务对应第四数量个高优先级服务实例调整为低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
本公开的技术方案中,所涉及的用户个人信息的获取、存储和应用等,均符合相关法律法规的规定,且不违背公序良俗。
根据本公开的实施例,本公开还提供了一种电子设备、一种可读存储介质。
图6示出了可以用来实施本公开的实施例的示例电子设备600的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴电子设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图6所示,电子设备600包括计算单元601,其可以根据存储在只读存储器(ROM)602中的计算机程序或者从存储单元608加载到随机访问存储器(RAM)603中的计算机程序,来执行各种适当的动作和处理。在RAM 603中,还可存储电子设备600操作所需的各种程序和数据。计算单元601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
电子设备600中的多个部件连接至I/O接口605,包括:输入单元606,例如键盘、鼠标等;输出单元607,例如各种类型的显示器、扬声器等;存储单元608,例如磁盘、光盘等;以及通信单元609,例如网卡、调制解调器、无线通信收发机等。通信单元609允许电子设备600通过诸如因特网的计算机网络和/或各种电信网络与其他电子设备交换信息/数据。
计算单元601可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元601的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元601执行上文所描述的各个方法和处理,例如服务平台的扩容方法。例如,在一些实施例中,服务平台的扩容方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元608。在一些实施例中,计算机程序的部分或者全部可以经由ROM 602和/或通信单元609而被载入和/或安装到电子设备600上。当计算机程序加载到RAM 603并由计算单元601执行时,可以执行上文描述的服务平台的扩容方法的一个或多个步骤。备选地,在其他实施例中,计算单元601可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行服务平台的扩容方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑电子设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或电子设备使用或与指令执行系统、装置或电子设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或电子设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存电子设备、磁储存电子设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、互联网和区块链网络。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务("Virtual Private Server",或简称 "VPS")中,存在的管理难度大,业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器,或者是结合了区块链的服务器。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。
Claims (16)
1.一种服务平台的扩容方法,其特征在于,应用于服务平台,所述服务平台内配置多个不同优先级的服务实例,所述服务实例包括高优先级服务实例和低优先级服务实例,所述低优先级服务实例为可抢占的服务实例,所述高优先级服务实例为不可抢占的服务实例,包括:
获取目标服务的请求流量;
根据所述请求流量,确定所述目标服务是否需要扩容;
若确定所述目标服务需要扩容,基于所述服务平台的服务实例对所述目标服务进行扩容。
2.如权利要求1所述的方法,其特征在于,若确定所述目标服务需要扩容,所述基于所述服务平台的服务实例对所述目标服务进行扩容,包括:
确定所述目标服务需要扩容的服务实例个数为第一数量;
确定所述服务平台中低优先级服务实例的个数为第二数量;
若所述第一数量不大于所述第二数量,则基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例;
若所述第一数量大于所述第二数量,则基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例。
3.如权利要求2所述的方法,其特征在于,所述基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例,包括:
将所述服务平台中所述第一数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第一数量个高优先级服务实例。
4.如权利要求2所述的方法,其特征在于,所述基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例,包括:
将所述服务平台中所述第二数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例,所述第三数量为所述第一数量与所述第二数量之差。
5.如权利要求1所述的方法,其特征在于,所述根据所述请求流量,确定所述目标服务是否需要扩容,包括:
根据所述请求流量,确定所述目标服务的预期服务实例个数;
确定所述目标服务在所述服务平台中的当前服务实例个数;
若所述预期服务实例个数大于所述当前服务实例个数,则确定所述目标服务需要扩容。
6.如权利要求5所述的方法,其特征在于,所述方法还包括:
若所述预期服务实例个数小于所述当前服务实例个数,基于所述服务平台的服务实例对所述目标服务进行缩容。
7.如权利要求6所述的方法,其特征在于,所述基于所述服务平台的服务实例对所述目标服务进行缩容,包括:
确定所述目标服务需要缩容的服务实例个数为第四数量;
将所述目标服务对应第四数量个高优先级服务实例调整为所述低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
8.一种服务平台的扩容装置,其特征在于,应用于服务平台,所述服务平台内配置多个不同优先级的服务实例,所述服务实例包括高优先级服务实例和低优先级服务实例,所述低优先级服务实例为可抢占的服务实例,所述高优先级服务实例为不可抢占的服务实例,包括:
获取模块,用于获取目标服务的请求流量;
确定模块,用于根据所述请求流量,确定所述目标服务是否需要扩容;
扩容模块,用于响应于所述目标服务需要扩容,基于所述服务平台的服务实例对所述目标服务进行扩容。
9.如权利要求8所述的装置,其特征在于,所述扩容模块,具体用于:
确定所述目标服务需要扩容的服务实例个数为第一数量;
确定所述服务平台中低优先级服务实例的个数为第二数量;
若所述第一数量不大于所述第二数量,则基于所述服务平台的低优先级服务实例为所述目标服务扩容所述第一数量个服务实例;
若所述第一数量大于所述第二数量,则基于所述服务平台的低优先级服务实例和高优先级服务实例为所述目标服务扩容所述第一数量个服务实例。
10.如权利要求9所述的装置,其特征在于,所述扩容模块,进一步具体用于:
将所述服务平台中所述第一数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第一数量个高优先级服务实例。
11.如权利要求9所述的装置,其特征在于,所述扩容模块,进一步具体用于:
将所述服务平台中所述第二数量个低优先级服务实例调整为高优先级服务实例,为所述目标服务扩容调整后的第二数量个高优先级服务实例和第三数量个高优先级服务实例,所述第三数量为所述第一数量与所述第二数量之差。
12.如权利要求8所述的装置,其特征在于,所述确定模块,具体用于:
根据所述请求流量,确定所述目标服务的预期服务实例个数;
确定所述目标服务在所述服务平台中的当前服务实例个数;
若所述预期服务实例个数大于所述当前服务实例个数,则确定所述目标服务需要扩容。
13.如权利要求12所述的装置,其特征在于,所述确定模块,还用于:
若所述预期服务实例个数小于所述当前服务实例个数,基于所述服务平台的服务实例对所述目标服务进行缩容。
14.如权利要求13所述的装置,其特征在于,所述确定模块,进一步还用于:
确定所述目标服务需要缩容的服务实例个数为第四数量;
将所述目标服务对应第四数量个高优先级服务实例调整为所述低优先级服务实例,并将调整后的第四数量个低优先级服务实例进行释放。
15.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器的通信连接的存储器,其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一项所述的方法。
16.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机可执行指令;所述计算机可执行指令被处理器执行后,能够实现权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211317189.8A CN115379000B (zh) | 2022-10-26 | 2022-10-26 | 服务平台的扩容方法、装置、电子设备以及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211317189.8A CN115379000B (zh) | 2022-10-26 | 2022-10-26 | 服务平台的扩容方法、装置、电子设备以及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115379000A true CN115379000A (zh) | 2022-11-22 |
CN115379000B CN115379000B (zh) | 2023-03-24 |
Family
ID=84072791
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211317189.8A Active CN115379000B (zh) | 2022-10-26 | 2022-10-26 | 服务平台的扩容方法、装置、电子设备以及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115379000B (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107104820A (zh) * | 2017-03-23 | 2017-08-29 | 国网江苏省电力公司信息通信分公司 | 基于f5服务器节点的动态扩容日常运维策略 |
US20180032399A1 (en) * | 2016-07-26 | 2018-02-01 | Microsoft Technology Licensing, Llc | Fault recovery management in a cloud computing environment |
CN109086135A (zh) * | 2018-07-26 | 2018-12-25 | 北京百度网讯科技有限公司 | 资源伸缩方法、装置、计算机设备及存储介质 |
CN109150603A (zh) * | 2018-08-17 | 2019-01-04 | 中软信息系统工程有限公司 | 云服务端自动扩容方法及装置 |
US20190319885A1 (en) * | 2018-04-16 | 2019-10-17 | Citrix Systems, Inc. | Policy based service routing |
CN113032134A (zh) * | 2019-12-24 | 2021-06-25 | 阿里巴巴集团控股有限公司 | 一种实现云计算资源分配的方法及装置和云管理服务器 |
WO2022007466A1 (zh) * | 2020-07-07 | 2022-01-13 | 华为技术有限公司 | 容量调整的方法和装置、系统以及计算设备 |
CN114138486A (zh) * | 2021-12-02 | 2022-03-04 | 中国人民解放军国防科技大学 | 面向云边异构环境的容器化微服务编排方法、系统及介质 |
CN114615340A (zh) * | 2022-03-08 | 2022-06-10 | 北京字节跳动网络技术有限公司 | 一种请求处理方法、装置、计算机设备和存储装置 |
CN115022311A (zh) * | 2022-03-23 | 2022-09-06 | 北京邮电大学 | 微服务容器实例的选择方法及装置 |
-
2022
- 2022-10-26 CN CN202211317189.8A patent/CN115379000B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180032399A1 (en) * | 2016-07-26 | 2018-02-01 | Microsoft Technology Licensing, Llc | Fault recovery management in a cloud computing environment |
CN107104820A (zh) * | 2017-03-23 | 2017-08-29 | 国网江苏省电力公司信息通信分公司 | 基于f5服务器节点的动态扩容日常运维策略 |
US20190319885A1 (en) * | 2018-04-16 | 2019-10-17 | Citrix Systems, Inc. | Policy based service routing |
CN109086135A (zh) * | 2018-07-26 | 2018-12-25 | 北京百度网讯科技有限公司 | 资源伸缩方法、装置、计算机设备及存储介质 |
CN109150603A (zh) * | 2018-08-17 | 2019-01-04 | 中软信息系统工程有限公司 | 云服务端自动扩容方法及装置 |
CN113032134A (zh) * | 2019-12-24 | 2021-06-25 | 阿里巴巴集团控股有限公司 | 一种实现云计算资源分配的方法及装置和云管理服务器 |
WO2022007466A1 (zh) * | 2020-07-07 | 2022-01-13 | 华为技术有限公司 | 容量调整的方法和装置、系统以及计算设备 |
CN114138486A (zh) * | 2021-12-02 | 2022-03-04 | 中国人民解放军国防科技大学 | 面向云边异构环境的容器化微服务编排方法、系统及介质 |
CN114615340A (zh) * | 2022-03-08 | 2022-06-10 | 北京字节跳动网络技术有限公司 | 一种请求处理方法、装置、计算机设备和存储装置 |
CN115022311A (zh) * | 2022-03-23 | 2022-09-06 | 北京邮电大学 | 微服务容器实例的选择方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN115379000B (zh) | 2023-03-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20190114202A1 (en) | Task scheduling method and apparatus of artificial intelligence heterogeneous hardware, device and readable medium | |
CN112559182B (zh) | 资源分配方法、装置、设备及存储介质 | |
CN112527509B (zh) | 一种资源分配方法、装置、电子设备及存储介质 | |
CN112905314A (zh) | 异步处理方法、装置、电子设备、存储介质、及路侧设备 | |
CN114356547A (zh) | 基于处理器虚拟化环境的低优阻塞方法及装置 | |
CN114217977B (zh) | 资源分配方法、装置、设备以及存储介质 | |
CN114416357A (zh) | 容器组的创建方法、装置、电子设备和介质 | |
CN113986497B (zh) | 基于多租户技术的队列调度方法、装置及系统 | |
CN114924745A (zh) | 深度学习编译器的运行方法、装置及电子设备 | |
CN113742075A (zh) | 基于云端分布式系统的任务处理方法、装置及系统 | |
CN113220452A (zh) | 资源分配方法、模型训练方法、装置和电子设备 | |
CN115379000B (zh) | 服务平台的扩容方法、装置、电子设备以及存储介质 | |
CN117112222A (zh) | 一种请求处理方法、装置、电子设备及存储介质 | |
CN113032092B (zh) | 分布式计算方法、装置及平台 | |
CN114964295A (zh) | 导航方法、装置、系统及电子设备 | |
CN114579305A (zh) | 用于函数计算的资源控制方法、装置、设备和介质 | |
CN114051057A (zh) | 云设备排队时长的确定方法、装置、电子设备和介质 | |
CN115600687B (zh) | 模型训练方法、装置、设备以及存储介质 | |
CN113946414A (zh) | 一种任务处理方法、装置及电子设备 | |
CN115988082A (zh) | 一种交互方法、终端、服务端、装置、设备以及存储介质 | |
CN116614379B (zh) | 迁移服务的带宽调整方法、装置及相关设备 | |
CN115145725A (zh) | 一种云设备分配方法、装置、电子设备和存储介质 | |
CN117873731A (zh) | 计算任务的执行方法、装置、芯片、设备和存储介质 | |
CN113220233A (zh) | 数据读取方法、装置及系统 | |
CN115914200A (zh) | 数据的上传方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |