CN111435320A - 一种数据处理方法及其装置 - Google Patents

一种数据处理方法及其装置 Download PDF

Info

Publication number
CN111435320A
CN111435320A CN201910031697.1A CN201910031697A CN111435320A CN 111435320 A CN111435320 A CN 111435320A CN 201910031697 A CN201910031697 A CN 201910031697A CN 111435320 A CN111435320 A CN 111435320A
Authority
CN
China
Prior art keywords
service
capacity expansion
called
node
address information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910031697.1A
Other languages
English (en)
Other versions
CN111435320B (zh
Inventor
王小瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201910031697.1A priority Critical patent/CN111435320B/zh
Publication of CN111435320A publication Critical patent/CN111435320A/zh
Application granted granted Critical
Publication of CN111435320B publication Critical patent/CN111435320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/547Remote procedure calls [RPC]; Web services
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本申请公开了一种数据处理方法,所述方法包括:响应于接收到调用待调用服务的服务请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;将扩容节点的地址信息发送到调用服务。采用本申请,既可实现按需分配又可实现服务的连续性。

Description

一种数据处理方法及其装置
技术领域
本申请涉及计算机技术领域,尤其涉及一种数据处理方法及其装置。
背景技术
无服务器(Serverless)架构是最近新兴的一种架构风格,Serverless架构能够让开发者在构建应用程序的过程中由平台按需分配计算资源并保证应用的执行,无需关心应用程序在本地或云端的服务器运行状态。
在此架构下,按需分配是指在应用程序消耗计算资源并提供业务服务期间可根据业务访问流量动态确定应用程序的副本数量,在业务访问流量低时提供少量的应用程序的副本数量(即扩容操作),而在业务访问流量高时可提供大量的应用副本(即缩容操作),也就是说,可根据业务访问流量对应用程序执行弹性操作。
如何在最短的时间内有效实现按需分配,特别是在需要扩容操作的场景下,一直是本领域技术人员研究的重点。在已有的技术方案中,通常利用服务发现机制来实现按需分配,简单来说,服务发现组件(例如,服务发现服务器)中存储有服务登记表,该表中记录可用服务及其地址,当某一节点在运行进程期间需要某一服务时,服务发现组件可从该服务登记表中查询所需服务的地址,并将地址发送到该节点,最后,该节点可利用地址调用所需服务。但是在实际应用中,所需服务可能需要执行扩容,如果在完成扩容后再经由服务列表通知到节点,则需要花费数秒甚至数十秒,最后会由于调用时间过长会导致服务失败。因此,需要一种能够在按需分配的情况下确保服务连续性的技术方案。
上述信息仅作为背景信息被呈现以帮助理解本公开。至于任何上述信息是否可应用为针对本公开的现有技术,尚未做出决定,也未做出声明。
发明内容
本申请的主要目的之一在于提供一种数据处理方法及其装置,旨在解决以上提到的调用时间过长导致服务失败的技术问题。
本申请的示例性实施例提供一种数据处理方法,所述方法包括:响应于接收到调用待调用服务的服务请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;将扩容节点的地址信息发送到调用服务。
本申请的另一示例性实施例提供一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述指令被执行时实现上述方法。
本申请的另一示例性实施例提供一种数据处理装置,所述装置包括处理器;以及被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:响应于接收到调用待调用服务的数据请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;将扩容节点的地址信息发送到调用服务。
本申请的另一示例性实施例提供一种数据处理方法,所述方法包括:在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;利用所述地址信息,与扩容节点建立通信通路;经由所述通信通路,将存储的与待调用服务对应的运行时信息发送到扩容节点。
本申请的另一示例性实施例提供一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述指令被执行时实现上述方法。
本申请的另一示例性实施例提供一种数据处理装置,所述装置包括处理器;以及被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;利用所述地址信息,与扩容节点建立通信通路;经由所述通信通路,将存储的与待调用服务对应的运行时信息发送到扩容节点。
根据本申请的另一示例性实施例,提供一种数据处理方法,所述方法包括:在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;将所述地址信息发送到调用服务以供调用服务调用。
本申请示例性实施例采用的上述至少一个技术方案能够达到以下有益效果:
根据本申请的示例性实施例的数据处理方法在不影响弹性操作系统的服务发现机制的情况下,确定扩容节点,这样调用服务可直接调用扩容节点上的服务副本,此外,在对待调用服务执行扩容的情况下,可将与待调用服务相关的信息采用异步传输的方式进行传输,从而保证服务副本可快速运行。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请的示例性实施例的数据处理方法的流程图;
图2是根据本申请的示例性实施例的服务调度系统中的扩容操作的示意图;
图3是根据本申请的示例性实施例的服务调度系统的场景图;
图4是本申请的示例性实施例的数据处理装置的框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在介绍本申请的示例性实施例前,为了方便本领域技术人员更好的理解本申请,首先对本申请中涉及的术语进行解释。
节点是指具有唯一网络地址的设备,节点可以是工作站、客户、网络用户或个人计算机,还可以是服务器、打印机和其他网络连接的设备。将多个节点按照通信线路连接起来形成网络。
应用程序可被称作一个或一组进程(线程),代表了一种业务逻辑的实现,例如,用于实现支付操作的代码可被看作应用程序。应用程序可被部署在不同的操作系统中,例如,Linux、Windows、Mac OS X等。
容器是指应用程序的运行单元,例如Docker、Pouch、gvisor、Sandbox、VM、Unikernel等容器。容量是容器的重要指标之一,若容器的容量不足则无法在该容器上运行应用程序。
服务是在线系统提供服务的最小单元,一个服务可对应于一个具体的功能,因此,一个进程可包括一个或多个服务,例如,当应用程序是支付类应用时,扫码、转账以及提现等功能可以是该应用下的服务。
弹性是指在对应用程序执行扩容或缩容处理,举例来说,应用程序从一个应用程序副本变成两个应用程序副本称作扩容,而将两个应用程序副本变为一个应用程序副本叫做缩容。弹性可分为垂直弹性和水平弹性,垂直弹性指扩缩容行为发生在同一个节点上,水平弹性指跨节点的扩缩容行为。根据本申请的示例性实施例的数据处理方法更适用于水平弹性。
在本申请中,根据本申请的示例性实施例在不影响弹性操作系统的服务发现机制的情况下,在接收到服务请求后确定扩容节点并将节点的地址信息发送到调用服务,这样调用服务可直接调用扩容节点上的服务副本,也就是说,只要接收到服务请求则需要返回服务所在的节点,使得调用服务无需中止,实现无缝连接。而弹性操作系统为了实现这一技术效果,关键的技术难题在于待调用服务能够在扩容节点上快速生成服务副本,也就是说,调用服务在利用扩容节点的地址信息调用服务副本时服务副本已经可以运行。基于此,在本申请中,扩容节点可与待调用服务所在节点之间建立通信通路,从而可在两者之间传输数据,更进一步地,在传输数据期间,将待调用服务所在节点上与待调用服务相关的数据分批次进行传输,从而提高生成服务副本的速度,特别是先传输非内存数据的运行时信息,使得服务副本可尽快运行,解决用户的燃眉之急。
下文中将参考附图并结合实施例来详细说明本申请。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
在描述本申请的各实施例的进一步细节之前,将参考图1来描述可用于实现本申请的原理的一个合适的计算体系结构。在以下描述中,除非另外指明,否则将参考由一个或多个计算机执行的动作和操作的符号表示来描述本申请的各实施例。由此,可以理解,有时被称为计算机执行的这类动作和操作包括计算机的处理单元对以结构化形式表示数据的电信号的操纵。这一操纵转换了数据或在计算机的存储器系统中的位置上维护它,这以本领域的技术人员都理解的方式重配置或改变了计算机的操作。维护数据的数据结构是具有数据的格式所定义的特定属性的存储器的物理位置。然而,尽管在上述上下文中描述本申请,但它并不意味着限制性的,如本领域的技术人员所理解的,后文所描述的动作和操作的各方面也可用硬件来实现。
转向附图,其中相同的参考标号指代相同的元素,本申请的原理被示为在一个合适的计算环境中实现。以下描述基于所述的本申请的实施例,并且不应认为是关于此处未明确描述的替换实施例而限制本申请。
以下将结合图1对本申请的示例性实施例的数据处理方法进行描述。
图1示出了根据本申请的示例性实施例的数据处理方法的流程图。为了便于描述,所述数据处理方法可在调度服务器上运行。
如图1所示,在步骤S110中,响应于接收到调用待调用服务的服务请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务。
可选地,所述方法可判断待调用服务是否需要执行扩容,具体来说,可通过判断待调用服务的容量是否充足判断待调用服务是否执行扩容,所述容量是如上所述的服务所在的容器的容量。可选地,可利用中央处理器(CPU)的使用率、服务所在节点的负载等确定容量是否充足,但这样可能会存在一种情况:用户可在节点上配置的运行服务的数量比较少,当这些服务全部运行时,某服务已无法提供新服务,但此时节点的CPU使用率却很低,这样无法触发扩容。
此外,根据本申请的示例性实施例,可对服务B设置与容量相关的参数,当服务A调用服务B时,服务A可根据参数确定服务B是否已容量不足,例如,流量,当服务A作为调用服务调用作为带调用服务的服务B时,服务B返回服务结果,同时也会发送服务的负载程度,让服务A提前感知服务B的负载。这样,服务A在确定服务B需要执行扩容后立刻向调度服务器发送服务请求。
也就是说,调度服务器可在通过持续监测待调用服务的容量来确定是否需要对所述服务执行扩容,也可以在调用待调用服务发现异常后确定对所述服务执行扩容,应注意,由于发现异常后立刻执行扩容服务是在瞬间发生(例如,微秒级别),所以不影响服务的流畅性。
此外,服务A可在调用失败后向调度服务器发送服务请求,例如,当流量增速较快时,服务B可能被瞬间占用,这时服务A调用服务B时会出现超时、拒绝、失败等异常,而这些异常也可以作为服务A判断服务B容量不足的方式。
如果待调用服务不需要执行扩容,则调用服务可直接调用待调用服务,而如果待调用服务需要执行扩容,则可执行步骤S110,确定对待调用服务执行扩容的扩容节点,其中,扩容节点是用于对待调用服务执行扩容并运行待调用服务的服务副本的节点。
举例来说,可根据在弹性操作系统中的各个节点的负载状况或资源利用率等信息对各个节点进行排序,将负载状况最低或者资源利用率最低的节点确定为扩容节点。
最后,在步骤S120,将扩容节点的地址信息发送到调用服务,其中,地址信息是指用于标识扩容节点的位置的信息,并且用户可利用地址信息查找到对应的节点,地址信息包括但不限于IP地址。
应注意,虽然在文字描述上步骤S110与步骤S120存在先后顺序,但存在这样的情况,在确定出扩容节点的同时将所述扩容节点的地址信息发送到调用服务,或者两者之间的间隔微小到可以忽略不计。也就是说,一旦确定了扩容节点即可将扩容节点的地址信息发送到调用服务,以便调用服务可迅速向扩容节点发起调动。可以看出,这需要扩容节点执行扩容操作(也就是说生成与待调用服务对应的服务副本)的速度极快。以下将参照图2对其进行详细描述,在此将不再进行赘述。
在将扩容节点的地址信息发送到调用服务后,调用服务可利用所述地址信息调用与待调用服务对应的服务副本,从而实现自身功能。此外,还可将扩容节点的地址信息发送到服务发现服务器,这样,服务发现服务器可利用扩容节点的地址信息对所述扩容节点进行登记,这样当下次调用服务调用被调用服务时,扩容节点可作为候选节点被调用。
综上可述,根据本申请的示例性实施例的数据处理方法可在不影响服务调度系统的服务发现机制的情况下,接收到服务请求后确定扩容节点,这样调用服务可直接调用扩容节点上的服务副本,使得调用服务无需中止,实现无缝连接。更进一步地,可将扩容节点注册到服务发现机制下的服务登记表,方便后续处理。
以上已经详细描述了根据本申请的示例性实施例的数据处理方法,以下将结合图2对其中涉及的扩容操作进行详细描述。
图2是根据本申请的示例性实施例的弹性处理系统执行扩容操作的示意图,通过以上描述可知,所述扩容操作在运行待调用服务的节点与扩容节点之间进行,为了便于描述,运行待调用服务的节点可被称为源节点。
如图2所示,在Serverless系统中,待调用服务在源节点上运行,并且待调用服务根据以上所述的方法被确定执行扩容操作并获取到执行扩容操作的节点的地址信息。
随后,源节点可根据接收到的地址信息建立与扩容节点的通信通道。举例来说,源节点可根据接收到的扩容节点的IP地址与扩容节点建立连接。这样,源节点可通过所述通信通道将与待调用服务相关的运行时信息发送到扩容节点,其中,所述运行时信息可包括待调用服务的进程树信息以及进程状态信息。
扩容节点在接收到运行时信息后,可根据运行时信息中的进程树信息建立服务副本的进程树,举例来说,在Linux系统中,可通过Fork或者Clone生成服务副本的进程树,并根据进程状态信息模拟所述服务副本正运行的状态,应注意,运行时信息不涉及待调用服务存储在内存中的数据,也就是说,运行时信息不包括与所述服务相关的任何数据。
由上可知,在本申请中,扩容节点创建的服务副本具有与待调用服务等同的运行时状态,但不具有待调用服务存储在内存中的数据。也就是说,服务副本可自运行但无法执行读取操作,为了使服务副本能够实现读取操作,接下来将对服务副本获取数据的方式进行详细描述。
扩容节点可在服务副本接收到数据请求时,特别是涉及访问内存数据的数据请求时,向源节点转发数据请求,并在源节点确定所述数据请求中的内存数据后,将所述内存数据发送到扩容节点,通过这种方式,扩容节点可在不影响服务副本运行的情况下逐渐获取源节点中的内存数据。
此外,可为扩容节点的服务副本设置错误触发机制,其中,错误触发机制是指当服务副本执行访存操作时会触发错误并根据所述错误从待调用服务的内存获取对应数据的机制。具体来说,当服务副本执行访存操作时,将会触发错误机制,该机制可根据访存操作生成相应的错误信息,该错误信息中包括将要访存的内存数据的地址信息,随后,服务副本根据地址信息从待调用服务中获取内存数据,最后,通过以上提到的通信通道发送到服务副本。
可选地,当服务副本执行对特定数据的写入操作时,若所述特定涉及整页,则可直接将整页写入服务副本的内存中,而无需错误触发机制。经过若干次的访存操作,服务副本可存储大量的内存数据,这样,当再次对服务副本执行访存操作时,可直接从服务副本的内存中获取数据。
此外,在源节点发送运行时信息后,可将待调用服务中的数据存储方式标记为写时复制(COW)方式,也就是说,当待调用服务的内存数据发生更改时,则复制对应的内存数据,并将该内存数据发送到扩容节点。这样,可保证扩容节点中待调用服务的状态与服务副本的状态是同步的。
根据本申请的示例性实施例,可将待调用服务中的数据存储方式标记为写时复制(COW)方式后,将待调用服务进行“解冻”,也就是说,使待调用服务继续运行。
以上已经描述了针对弹性操作中的扩容操作,在业务访问流量低于预定阈值时,可对系统执行缩容操作,也就是说,减少服务副本的副本数量。这可根据用户设置的优先级对所有服务执行缩容,例如,可根据运行服务副本的节点的地理位置或者性能,对地址位置过于分散或者性能较差的某些节点的服务副本进行注销。
综上所述,本申请的示例性实施例的数据处理方法在对待调用服务执行扩容操作的过程中,在源节点与扩容节点之间建立通信通路,从而可在两者之间传输与待调用服务相关的进程信息,更进一步地,在传输进程信息期间,可将进程信息进行区分并进行异步传输,特别是先传输非内存数据的运行时信息,使得服务副本可尽快运行,从而为实现利用调度系统执行服务调度创造条件。
为了进一步地描述本申请,以下将参照图3,从整体的角度上描述根据本申请的服务调度系统。如图3所述,所述服务调度系统可包括用于运行服务A的节点100、用于运行被服务A调用的服务B的节点200、用于执行如图1所示的数据处理方法的节点300以及运行服务B的服务副本B’的节点400。
节点300可对服务B的状态进行监控以确定服务B是否需要扩容,例如,节点300可对节点200的CPU使用率进行监控,确定服务B是否扩容,或者节点300可接收到节点200发生异常的异常信息以确定服务B是否需要扩容,例如,服务A在调用服务B时在预定时间内未接收到服务B的反馈,则可向节点300发送异常信息,节点300在接收到异常信息后确定服务B需要扩容。
随后,节点300可确定对服务B进行“克隆”的节点400,并将节点400的地址信息(IP地址)分别发送到节点100和节点200。
节点100上的服务A在接收到所述地址信息后,可调用在节点400上运行的服务B,而节点200在接收到所述地址信息后,可与节点400建立通信通路,并利用所述通信通路在节点400上生成与服务B对应的服务B’。
为了更清楚地明白本申请的示例性实施例的发明构思,以下将参照图4描述本申请的示例性实施例的数据处理装置的框图。本领域普通技术人员将理解:图4中的装置仅示出了与本示例性实施例相关的组件,所述装置中还包括除了图4中示出的组件之外的通用组件。
图4示出本申请的示例性实施例的数据处理装置的框图。应注意,所述数据处理装置可以是执行图1中示出的数据处理方法的节点也可以是执行图2中示出的数据处理方法的节点。总而言之,这些节点在结构上的区别均集中在处理器所执行的方法上。
参考图4,在硬件层面,该装置包括处理器、内部总线和计算机可读存储介质,其中,所述计算机可读存储介质包括易失性存储器和非易失性存储器。处理器从非易失性存储器中读取对应的计算机程序然后运行。当然,除了软件实现方式之外,本申请并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
具体来说,所述处理器执行以下操作:判断待调用服务是否需要执行扩容,其中,待调用服务是指等待调用服务调用的服务;响应于接收到调用待调用服务的服务请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;将扩容节点的地址信息发送到调用服务。
可选地,所述处理器在实现步骤在确定对待调用服务执行扩容的扩容节点前还包括:判断待调用服务是否需要执行扩容。
可选地,所述处理器在实现步骤判断待调用服务是否需要执行扩容包括:通过检测待调用服务的容量是否充足,判断待调用服务是否执行扩容。
可选地,所述处理器实现在扩容节点的地址信息发送到调用服务后还包括:将扩容节点的地址信息发送到待调用服务所在的待调用节点。
可选地,所述处理器还可将将扩容节点的地址信息发送到用于服务查询的服务查询服务器。
综上可述,根据本申请的示例性实施例的数据处理装置可在不影响服务调度系统的服务发现机制的情况下,在接收到服务请求后确定扩容节点,这样调用服务可直接调用扩容节点上的服务副本,使得调用服务无需中止,实现无缝连接。更进一步地,可将扩容节点注册到服务发现机制下的服务登记表,方便后续处理。
此外,根据本申请的示例性实施例提供一种数据处理装置,其特征在于,包括:处理器;以及被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;利用所述地址信息,与扩容节点建立通信通路;经由所述通信通路,将存储的与待调用服务对应的运行时信息发送到扩容节点。
可选地,所述处理器在实现步骤在经由所述通信通路将存储的与待调用服务对应的运行时信息发送到扩容节点后还包括:将存储在内存中的与待调用服务对应的内存数据设置为写时复制。
可选地,所述处理器在实现步骤在经由所述通信通路将存储的与待调用服务对应的运行时信息发送到扩容节点后还包括:经由所述通信通道,将存储在内存中的与待调用服务对应的内存数据发送到扩容节点。
可选地,所述处理器在实现步骤经由所述通信通道将存储在内存中的与待调用服务对应的内存数据发送到扩容节点包括:接收包括地址信息的数据请求;确定与地址信息对应的内存数据;将所述内存数据利用所述通信通道发送到扩容节点。
综上所述,本申请的示例性实施例的数据处理装置在对待调用服务执行扩容操作的过程中,在源节点与扩容节点之间建立通信通路,从而可在两者之间传输与待调用服务相关的进程信息,更进一步地,在传输进程信息期间,可将进程信息进行区分并进行异步传输,特别是先传输非内存数据的运行时信息,使得服务副本可尽快运行,从而为实现利用调度系统执行服务调度创造条件。
需要说明的是,实施例1所提供方法的各步骤的执行主体均可以是同一设备,或者,该方法也由不同设备作为执行主体。比如,步骤21和步骤22的执行主体可以为设备1,步骤23的执行主体可以为设备2;又比如,步骤21的执行主体可以为设备1,步骤22和步骤23的执行主体可以为设备2;等等。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (14)

1.一种数据处理方法,其特征在于,包括:
响应于接收到调用待调用服务的服务请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;
将扩容节点的地址信息发送到调用服务。
2.如权利要求1所述的方法,其特征在于,在确定对待调用服务执行扩容的扩容节点前还包括:
判断待调用服务是否需要执行扩容。
3.如权利要求2所述的方法,其特征在于,判断待调用服务是否需要执行扩容包括:
通过检测待调用服务的容量是否充足,判断待调用服务是否执行扩容。
4.如权利要求1所述的方法,其特征在于,在扩容节点的地址信息发送到调用服务后还包括:
将扩容节点的地址信息发送到待调用服务所在的待调用节点。
5.如权利要求1所述的方法,其特征在于,还包括:
将扩容节点的地址信息发送到用于服务查询的服务查询服务器。
6.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述指令被执行时实现权利要求1至5中的任一权利要求所述的方法。
7.一种数据处理装置,其特征在于,包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下操作:
响应于接收到调用待调用服务的数据请求,确定对待调用服务执行扩容的扩容节点,其中,待调用服务是用于等待调用服务调用的服务;
将扩容节点的地址信息发送到调用服务。
8.一种数据处理方法,其特征在于,包括:
在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;
利用所述地址信息,与扩容节点建立通信通路;
经由所述通信通路,将存储的与待调用服务对应的运行时信息发送到扩容节点。
9.如权利要求8所述的方法,其特征在于,在经由所述通信通路将存储的与待调用服务对应的运行时信息发送到扩容节点后还包括:
将存储在内存中的与待调用服务对应的内存数据设置为写时复制。
10.如权利要求8所述的方法,其特征在于,在经由所述通信通路将存储的与待调用服务对应的运行时信息发送到扩容节点后还包括:
经由所述通信通道,将存储在内存中的与待调用服务对应的内存数据发送到扩容节点。
11.如权利要求10所述的方法,其特征在于,经由所述通信通道将存储在内存中的与待调用服务对应的内存数据发送到扩容节点包括:
接收包括地址信息的数据请求;
确定与地址信息对应的内存数据;
将所述内存数据利用所述通信通道发送到扩容节点。
12.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述指令被执行时实现权利要求8至11中的任一权利要求所述的方法。
13.一种数据处理装置,其特征在于,包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行以下步骤:
在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;
利用所述地址信息,与扩容节点建立通信通路;
经由所述通信通路,将存储的与待调用服务对应的运行时信息发送到扩容节点。
14.一种数据处理方法,其特征在于,包括:
在确定对待调用服务执行扩容的情况下,获取执行扩容的扩容节点的地址信息;
将所述地址信息发送到调用服务以供调用服务调用。
CN201910031697.1A 2019-01-14 2019-01-14 一种数据处理方法及其装置 Active CN111435320B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910031697.1A CN111435320B (zh) 2019-01-14 2019-01-14 一种数据处理方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910031697.1A CN111435320B (zh) 2019-01-14 2019-01-14 一种数据处理方法及其装置

Publications (2)

Publication Number Publication Date
CN111435320A true CN111435320A (zh) 2020-07-21
CN111435320B CN111435320B (zh) 2023-04-11

Family

ID=71580506

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910031697.1A Active CN111435320B (zh) 2019-01-14 2019-01-14 一种数据处理方法及其装置

Country Status (1)

Country Link
CN (1) CN111435320B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115016952A (zh) * 2022-08-10 2022-09-06 中邮消费金融有限公司 一种基于服务调用端的动态扩缩容方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577817A (zh) * 2009-06-10 2009-11-11 中兴通讯股份有限公司 分布式视频监控系统及其保持数据一致性的方法
US20120047107A1 (en) * 2010-08-19 2012-02-23 Infosys Technologies Limited System and method for implementing on demand cloud database
CN103023969A (zh) * 2012-11-15 2013-04-03 北京搜狐新媒体信息技术有限公司 一种云平台调度方法及系统
CN103473117A (zh) * 2013-09-18 2013-12-25 北京思特奇信息技术股份有限公司 云模式下的虚拟化方法
CN103581177A (zh) * 2013-10-24 2014-02-12 华为技术有限公司 虚拟机管理方法及装置
CN104836850A (zh) * 2015-04-16 2015-08-12 华为技术有限公司 一种实例节点管理的方法及管理设备
CN105933391A (zh) * 2016-04-11 2016-09-07 青岛海信传媒网络技术有限公司 一种节点扩容方法、装置及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577817A (zh) * 2009-06-10 2009-11-11 中兴通讯股份有限公司 分布式视频监控系统及其保持数据一致性的方法
US20120047107A1 (en) * 2010-08-19 2012-02-23 Infosys Technologies Limited System and method for implementing on demand cloud database
CN103023969A (zh) * 2012-11-15 2013-04-03 北京搜狐新媒体信息技术有限公司 一种云平台调度方法及系统
CN103473117A (zh) * 2013-09-18 2013-12-25 北京思特奇信息技术股份有限公司 云模式下的虚拟化方法
CN103581177A (zh) * 2013-10-24 2014-02-12 华为技术有限公司 虚拟机管理方法及装置
CN104836850A (zh) * 2015-04-16 2015-08-12 华为技术有限公司 一种实例节点管理的方法及管理设备
CN105933391A (zh) * 2016-04-11 2016-09-07 青岛海信传媒网络技术有限公司 一种节点扩容方法、装置及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
JU-WON PARK等: "Elastic Resource Provisioning to Expand the Capacity of Cluster in Hybrid Computing Infrastructure" *
严丽云;杨新章;何震苇;张凌;侯韶新;: "运营商业务平台微服务化方案" *
李志成: "基于一致性哈希的高可用负载均衡方案的设计与实现" *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115016952A (zh) * 2022-08-10 2022-09-06 中邮消费金融有限公司 一种基于服务调用端的动态扩缩容方法及系统
CN115016952B (zh) * 2022-08-10 2022-10-28 中邮消费金融有限公司 一种基于服务调用端的动态扩缩容方法及系统

Also Published As

Publication number Publication date
CN111435320B (zh) 2023-04-11

Similar Documents

Publication Publication Date Title
JP6571161B2 (ja) アプリケーショントポロジ関係を探索するための方法、装置、およびシステム
US20200344322A1 (en) Resource scheduling method, apparatus, device and system
CN115328663B (zh) 基于PaaS平台进行资源调度的方法、装置、设备和存储介质
CN109688191B (zh) 流量调度方法及通信装置
CN110442610A (zh) 负载均衡的方法、装置、计算设备以及介质
CN110764963A (zh) 一种服务异常处理方法、装置及设备
CN107172214B (zh) 一种具有负载均衡的服务节点发现方法及装置
JP2019523501A (ja) リスク識別方法、リスク識別装置、クラウドリスク識別装置及びシステム
CN114281263B (zh) 容器集群管理系统的存储资源处理方法、系统和设备
CN112860450B (zh) 一种请求处理方法及装置
US20220329651A1 (en) Apparatus for container orchestration in geographically distributed multi-cloud environment and method using the same
CN113467970A (zh) 云计算系统中的跨安全区域的资源访问方法及电子设备
CN115086166B (zh) 计算系统、容器网络配置方法及存储介质
CN112882792A (zh) 信息加载方法、计算机设备及存储介质
CN111694639A (zh) 进程容器地址的更新方法、装置和电子设备
EP3813335A1 (en) Service processing method and system based on alliance chain network
EP4006725A1 (en) Virtual machine migration processing and strategy generation method, apparatus and device, and storage medium
CN111435320B (zh) 一种数据处理方法及其装置
CN106571935B (zh) 一种资源调度的方法与设备
CN113157392A (zh) 镜像仓库高可用方法及设备
US8549537B2 (en) Middleware bridge system and method
CN114691309A (zh) 一种批量业务处理系统、方法及装置
CN112532670B (zh) 一种数据处理方法及其装置
CN110933120A (zh) 一种基于混合云的计算方法、装置以及系统
CN113873052B (zh) Kubernetes集群的域名解析方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40033297

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant