CN110120961A - 一种分布式服务集群及其路由同步的方法 - Google Patents

Abstract

本发明公开了一种分布式服务集群及其路由同步的方法，涉及计算机技术领域。本发明的分布式服务集群包括不少于一个服务器节点，每个服务器节点部署一个注册中心和不少于一个远程过程调用服务系统，所有服务器节点的注册中心构成注册中心集群，注册中心集群用于维护远程过程调用服务的全局路由表，远程过程调用服务系统用于维护远程过程调用服务的本地路由表，服务器节点根据全局路由表和本地路由表提供服务。该分布式服务集群能够降低路由同步的复杂度，节约运维成本以及硬件投入。

Description

一种分布式服务集群及其路由同步的方法

技术领域

本发明涉及计算机技术领域，尤其涉及一种分布式服务集群及其路由同步的方法。

背景技术

对一些大型的互联网企业来说，数据并发量非常高，早已超出了单机服务能力的极限。目前广泛采用的是分布式计算技术，如分布式的存储、缓存、消息、调度、服务等。其中，分布式服务是一种非常重要的分布式计算技术，也是各大互联网企业必备的基础性技术。目前使用较多的分布式服务框架例如：开源的高性能优秀的服务框架Dubbo和HSF(High-Speed Service Framework的简称)、分布式服务框架JSF(Java Service Framework的简称，Java构建框架)、开源分布式开发框架Pebble等。这些分布式服务系统间的通信一般基于RPC(Remote Procedure Call，远程过程调用)服务协议来进行。目前业界常用的分布式服务技术普遍采用的是部署独立的注册中心，RPC服务通过接收注册中心推送的消息或者主动从注册中心拉取消息的方式来获取路由变化情况以更新本地路由表。如图1所示，是现有的分布式服务集群的部署原理图。现有的分布式服务集群一般包括一个独立的注册中心和多个RPC服务器节点，每个RPC服务器节点对应部署一个RPC服务系统。注册中心负责对所有的RPC服务系统进行路由监控并根据路由监控结果更新全局路由表，RPC服务系统通过对注册中心进行路由监听来更新本地路由表，最终实现全局路由信息的同步。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

1、目前业界常用的分布式服务系统都强依赖于一个注册中心，同时为了注册中心的高可用性，注册中心至少需要3个节点，故而，为了维护一个高可用的注册中心既增加了运维的负担，也增加了不少的硬件投入；

2、注册中心通常会以集群方式(很多基于zookeeper实现)部署以解决负载均衡的问题，故而需要在RPC服务端维护注册中心的地址，注册中心与RPC服务的这种强依赖关系导致分布式系统的复杂度大幅提高。

发明内容

有鉴于此，本发明实施例提供一种分布式服务集群及其路由同步的方法，能够降低分布式服务集群的路由同步的复杂度，节约运维成本以及硬件投入。

为实现上述目的，根据本发明实施例的一个方面，提供了一种分布式服务集群。

一种分布式服务集群，所述分布式服务集群包括不少于一个服务器节点，每个服务器节点部署一个注册中心和不少于一个远程过程调用服务系统，所有服务器节点的注册中心构成注册中心集群，所述注册中心集群用于维护远程过程调用服务的全局路由表，所述远程过程调用服务系统用于维护远程过程调用服务的本地路由表，所述服务器节点根据所述全局路由表和所述本地路由表提供服务。

可选地，注册中心、远程过程调用服务系统、全局路由表和本地路由表的变更以事件形式进行发布；所述全局路由表和所述本地路由表通过以下方法进行更新：若注册中心发生变更，则对于所述注册中心集群的每个其他注册中心：所述其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给所述其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；若远程过程调用服务系统发生变更，则所述远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给所述服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将所述服务系统变更事件发送给所述注册中心集群的其他注册中心以使所述其他注册中心更新全局路由表，和使所述其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

可选地，若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由所述启动或正常停止的注册中心发送给注册中心集群的其他注册中心；若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到所述注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

可选地，若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由所述远程过程调用服务系统发送给所述远程过程调用服务系统所在的服务器节点的注册中心；若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由所述远程过程调用服务系统所在的服务器节点的注册中心生成，其中，所述注册中心通过心跳检测来确定所述远程过程调用服务系统已异常停止。

可选地，所有服务器节点的注册中心通过SWIM协议构成注册中心集群。

可选地，不同注册中心之间采用Gossip协议通过广播的方式进行全局路由表同步。

可选地，同一个服务器节点上部署的注册中心和远程过程调用服务系统之间通过进程间通信调用的方式进行本地路由表同步。

根据本发明实施例的另一方面，提供了一种分布式服务集群的路由同步的方法。

一种分布式服务集群的路由同步的方法，所述分布式服务集群包括不少于一个服务器节点，每个服务器节点部署一个注册中心和不少于一个远程过程调用服务系统，所有服务器节点的注册中心构成注册中心集群，所述注册中心集群用于维护远程过程调用服务的全局路由表，所述远程过程调用服务系统用于维护远程过程调用服务的本地路由表，注册中心、远程过程调用服务系统、全局路由表和本地路由表的变更以事件形式进行发布；所述方法包括：若注册中心发生变更，则对于所述注册中心集群的每个其他注册中心：所述其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给所述其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；若远程过程调用服务系统发生变更，则所述远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给所述服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将所述服务系统变更事件发送给所述注册中心集群的其他注册中心以使所述其他注册中心更新全局路由表，和使所述其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

可选地，若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由所述启动或正常停止的注册中心发送给注册中心集群的其他注册中心；若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到所述注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

可选地，若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由所述远程过程调用服务系统发送给所述远程过程调用服务系统所在的服务器节点的注册中心；若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由所述远程过程调用服务系统所在的服务器节点的注册中心生成，其中，所述注册中心通过心跳检测来确定所述远程过程调用服务系统已异常停止。

可选地，所有服务器节点的注册中心通过SWIM协议构成注册中心集群。

可选地，不同注册中心之间采用Gossip协议通过广播的方式进行全局路由表同步。

可选地，同一个服务器节点上部署的注册中心和远程过程调用服务系统之间通过进程间通信调用的方式进行本地路由表同步。

根据本发明实施例的又一方面，提供了一种分布式服务集群的路由同步的电子设备。

一种分布式服务集群的路由同步的电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明实施例所提供的分布式服务集群的路由同步的方法。

根据本发明实施例的再一方面，提供了一种计算机可读介质。

一种计算机可读介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明实施例所提供的分布式服务集群的路由同步的方法。

上述发明中的一个实施例具有如下优点或有益效果：通过将远程过程调用服务系统和注册中心部署在分布式服务集群的同一个服务器节点上，可以无需考虑注册中心与RPC服务系统的寻址问题，降低了分布式服务集群的路由同步的复杂度；通过由所有服务器节点上部署的注册中心构成注册中心集群来实现路由同步，可以无需部署独立的注册中心，从而节约了运维成本以及硬件投入；通过基于Gossip协议进行路由信息的同步，可以减少硬件开销，减少网络带宽的占用，方便构建去中心化的分布式服务集群；通过本地调用方式来实现注册中心与RPC服务系统的寻址，可以避免产生网络请求，寻址速度也更快。本发明的技术方案构建简单，运维简单，可以大大节约研发成本、运维成本以及硬件投入。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是现有的分布式服务集群的部署原理图；

图2是本发明实施例的分布式服务集群的部署原理图；

图3是本发明实施例的服务器节点进行路由同步的原理架构图；

图4是根据本发明实施例的分布式服务集群的路由同步的方法的主要流程的示意图；

图5是本发明实施例可以应用于其中的示例性系统架构图；

图6是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

为了解决现有技术中存在的问题，本发明提出了一种去中心化的分布式服务集群及其路由同步的方法。本发明的分布式服务集群无需部署独立的注册中心，将远程过程调用(RPC)服务系统和注册中心捆绑部署在分布式服务集群的同一个服务器节点上，同时注册中心对RPC服务系统透明，通过本地调用方式来实现注册中心与RPC服务系统的寻址，可以避免产生网络请求，寻址速度也更快。由于RPC服务系统无需考虑注册中心地址变更等问题，从而可以大大降低注册中心及RPC服务系统的实现难度和运维难度。

图2是本发明实施例的分布式服务集群的部署原理图。如图2所示，在本发明的实施例中，RPC服务系统和注册中心部署在同一台服务器上。同一台服务器上可以部署多个RPC服务系统(图2中以部署一个RPC服务系统为例)，但是仅需部署一个注册中心(作为服务器节点的系统服务)。分布式服务集群的所有服务器节点上部署的注册中心通过SWIM协议构成一个注册中心集群(即：分布式服务集群的所有服务器节点上部署的注册中心之间通过SWIM协议进行数据交互，从而构成了一个注册中心集群)。注册中心集群用于维护远程过程调用服务的全局路由表，远程过程调用服务系统用于维护远程过程调用服务的本地路由表，服务器节点根据全局路由表和本地路由表提供服务。具体地，每个注册中心均维护一份RPC服务的全局路由表，且各个注册中心之间的全局路由表的数据同步采用Gossip协议来实现。每个RPC服务系统均维护一份RPC服务的本地路由表，且同一个服务器节点的RPC服务系统维护的本地路由表与注册中心维护的全局路由表的数据同步采用本地调用(例如：IPC，Inter-Process Communication，进程间通信)的方式。在本发明的实施例中，全局路由表和本地路由表记录的信息例如：服务名X：X服务提供者的IP和端口号；服务名Y：Y服务提供者的IP和端口号；等等。并且，对于同一个服务器节点，其维护的本地路由表仅与本服务器节点的全局路由表进行数据同步，且本地路由表中的数据是全局路由表中数据的子集。

其中，Gossip协议是一种被用在分布式的非强一致性系统中用来同步各节点状态的方法。它是一个最终一致性算法。Gossip具有低CPU开销和低网络带宽占用的优点，因此非常适合大型的对等网络。Gossip协议的特点：在一个有界网络中，每个节点都随机地与其他节点通信，经过一番杂乱无章的通信，最终所有节点的状态都会达成一致。每个节点可能知道所有其他节点，也可能仅知道几个邻居节点，只要这些节点可以通过网络连通，最终他们的状态都是一致的。即使有的节点因宕机而重启，有新节点加入，但经过一段时间后，这些节点的状态也会与其他节点达成一致，也就是说，Gossip天然具有分布式容错的优点。

SWIM协议是一种可伸缩可传导的弱一致性集群管理协议。一些分布式的对等网络的应用在整个过程中需要知道进程组成员的弱一致性信息。SWIM是一个通用的软件模型，能够为大规模的进程组提供服务。不像传统的心跳协议，SWIM将成员协议的故障检测和成员更新信息传递功能分离开来。进程之间的监控是通过一个有效的对等网络的周期随机探测协议。每个进程失败被检测到的预期时间和每个成员的预期消息负载都和成员的规模无关。成员变化信息，比如进程加入，退出和故障都是通过ping消息和确认消息捎带进行传递。是一个非常健壮和快速传染风格的传递。其中，ping(Packet Internet Groper)，因特网包探索器，用于测试网络连接量的程序。ping是Windows、Unix和Linux系统下的一个命令。ping也属于一个通信协议，是TCP/IP协议的一部分。利用“ping”命令可以检查网络是否连通，可以很好地帮助我们分析和判定网络故障。

IPC(Inter-Process Communication，进程间通信)指的是至少两个进程或线程间传送数据或信号的一些技术或方法，其中，进程是计算机系统分配资源的最小单位。每个进程都有自己的一部分独立的系统资源，彼此是隔离的。为了能使不同的进程互相访问资源并进行协调工作，才有了进程间通信。进程间通信技术包括消息传递、同步、共享内存和远程过程调用。

图3是本发明实施例的服务器节点进行路由同步的原理架构图。如图3所示，以服务器节点上部署一个注册中心和一个RPC服务系统为例，RPC服务系统通过本地路由管理组件来维护本地路由表的有效性，注册中心通过全局路由管理组件来维护全局路由表的有效性，所谓有效，即所有的路由信息都是可达的，同时路由表信息是完整的，不存在疏漏的情况。

注册中心是服务器节点的系统服务，故当注册中心启动(包括正常启动和异常重启)时，即该服务器节点上线，当注册中心正常停止时，即该服务器节点正常下线，当注册中心异常停止时，即该服务器节点异常宕机。注册中心的启动或停止等信息以注册中心变更事件的方式发布出来。同样地，RPC服务系统的启动或停止等信息以服务系统变更事件的方式发布出来，本地路由表和全局路由表的变更也以路由表变更事件的方式发布出来。即：注册中心、远程过程调用服务系统、全局路由表和本地路由表的变更以事件形式进行发布。

根据本发明的实施例，分布式服务集群的全局路由表和本地路由表可以通过以下方法进行更新：

若注册中心发生变更，则对于注册中心集群的每个其他注册中心：其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；

若远程过程调用服务系统发生变更，则远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将服务系统变更事件发送给注册中心集群的其他注册中心以使其他注册中心更新全局路由表，和使其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

具体地，若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由该启动或正常停止的注册中心发送给注册中心集群的其他注册中心；若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到该注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由该远程过程调用服务系统发送给该远程过程调用服务系统所在的服务器节点的注册中心；若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由该远程过程调用服务系统所在的服务器节点的注册中心生成，其中，所述注册中心通过心跳检测来确定该远程过程调用服务系统已异常停止。

在如图3所示的实施例中，由于分布式服务集群的所有服务器节点上部署的注册中心通过SWIM协议构成一个注册中心集群，因此，注册中心通过集群管理组件与注册中心集群的其他注册中心的集群管理组件进行数据交互以确认是否有注册中心变更，并在有注册中心变更时生成注册中心变更事件，并通过消息广播组件按照Gossip协议将注册中心变更事件广播给注册中心集群的所有注册中心的集群管理组件，以便各个注册中心的集群管理组件将注册中心变更事件发送给全局路由表以更新全局路由表；以及，当RPC服务系统有变更时，注册中心的全局路由管理组件根据服务系统变更事件更新全局路由表，并通过消息广播组件按照Gossip协议将路由表变更事件广播给注册中心集群的所有注册中心以通过全局路由管理组件更新全局路由表，并且，全局路由管理组件通过IPC调用的方式将路由表变更事件发送给本地路由管理组件以更新本地路由表。其中，若RPC服务系统的变更指的是RPC服务系统启动(包括正常启动和异常重启)或正常停止，则由本地路由管理组件将服务系统变更事件通过IPC调用的方式发送给注册中心；若RPC服务系统的变更指的是RPC服务系统异常停止，则注册中心会通过检测RPC服务系统的心跳信息来确定RPC服务系统已异常停止，此时，注册中心会自动生成服务系统变更事件。

为了维护分布式服务集群的路由信息的有效性，需要综合考虑注册中心启动或正常停止、注册中心异常停止、RPC服务系统启动或正常停止以及RPC服务系统异常停止等情况下的路由表信息同步。下面将介绍上述几种情况下分布式服务集群的路由信息进行同步的具体实现过程。

图4是根据本发明实施例的分布式服务集群的路由同步的方法的主要流程的示意图。如图4所示，本发明实施例的分布式服务集群的路由同步的方法主要包括如下的步骤S401和步骤S402。

步骤S401：若注册中心发生变更，则对于注册中心集群的每个其他注册中心：其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给该其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；

步骤S402：若远程过程调用服务系统发生变更，则远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给该服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将服务系统变更事件发送给注册中心集群的其他注册中心以使其他注册中心更新全局路由表，和使其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

具体地，步骤S401可以包括两种情况：

若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由该启动或正常停止的注册中心发送给注册中心集群的其他注册中心；

若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

当注册中心启动或正常停止时，由该启动或正常停止的注册中心将注册中心变更事件发布出来，并将该事件发送给其他注册中心，以使所有注册中心进行全局路由表的更新。在具体实现时，可以是由该启动或正常停止的注册中心通过Gossip协议将该事件广播到注册中心集群的所有注册中心，以使所有注册中心进行全局路由表的更新，从而保证路由信息的最终一致。当注册中心异常停止后重启时，即该注册中心所在的服务器节点异常宕机后重启，此时，注册中心将在注册中心集群中广播注册中心变更事件，以使所有的注册中心更新全局路由表，并自动从注册中心集群的其他注册中心处拉取全局路由表信息以更新全局路由表。

当注册中心异常停止时，该异常停止的注册中心将无法发布注册中心变更事件，此时，注册中心集群中的其他注册中心会通过SWIM协议检测到有注册中心异常停止，然后，该检测到注册中心异常停止的注册中心会将注册中心变更事件发送给注册中心集群的其他注册中心，以使当前所有注册中心进行全局路由表的更新。在具体实现时，可以是由该检测到注册中心异常停止的注册中心通过Gossip协议将该事件广播到注册中心集群的所有注册中心，以使所有注册中心进行全局路由表的更新，从而保证路由信息的最终一致。例如：若注册中心A(部署于服务器节点A)异常停止，其他的注册中心B(部署于服务器节点B)的集群管理组件会通过SWIM协议检测到，此时，注册中心B的集群管理组件会将该注册中心变更事件通知给注册中心B的全局路由管理组件，以删除部署在注册中心A上的路由信息，然后，将路由表变更事件发送给服务器节点B上部署的所有RPC服务系统以更新本地路由表。同时，注册中心B的集群管理组件还将该注册中心变更事件通知给注册中心集群的其他注册中心，以使其他注册中心所在的服务器节点更新全局路由表和本地路由表。

同样地，步骤S402也可以包括两种情况：

若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由该远程过程调用服务系统发送给该远程过程调用服务系统所在的服务器节点的注册中心；

若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由该远程过程调用服务系统所在的服务器节点的注册中心生成，其中，注册中心通过心跳检测来确定远程过程调用服务系统已异常停止。

当RPC服务系统启动或正常停止时，服务系统变更事件由该RPC服务系统发送给其所在的服务器节点的注册中心，然后，注册中心根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给该服务器节点上部署的其他RPC服务系统以更新本地路由表。同时，注册中心还将服务系统变更事件发送给注册中心集群的其他注册中心以使其他注册中心更新全局路由表，和使其他注册中心所在的服务器节点上部署的所有RPC服务系统更新本地路由表。举一个实施例，如：服务器节点A上的RPC服务系统启动或正常停止时，该RPC服务系统通过本地路由管理组件将服务系统变更事件通过IPC调用的方式发送到注册中心A的全局路由管理组件，全局路由管理组件更新全局路由表，并将路由表变更事件发送给服务器节点A上部署的其他RPC服务系统以更新本地路由表；同时，注册中心A通过消息广播组件基于Gossip协议将服务系统变更事件广播到注册中心集群的其他注册中心(如：注册中心B)，注册中心B接收到该事件后，根据该事件更新全局路由表，并生成路由表变更事件发送给注册中心B所在的服务器节点B上部署的所有RPC服务系统，以使RPC服务系统的本地路由管理组件同步本地路由表。最终实现分布式服务集群中所有的路由信息的一致性。

当RPC服务系统异常停止时，该RPC服务系统所在的服务器节点的注册中心由于一段时间没有接收到该RPC服务系统的心跳信息，故断定该RPC服务系统已经异常停止，则注册中心生成服务系统变更事件，并根据步骤S402更新分布式服务集群的全局路由表和本地路由表。最终实现分布式服务集群中所有的路由信息的一致性。

根据前面介绍的内容，即可构建一种去中心化的分布式服务集群，并实现对集群内的路由信息的同步。

根据本发明实施例的技术方案，通过将远程过程调用服务系统和注册中心部署在分布式服务集群的同一个服务器节点上，可以无需考虑注册中心与RPC服务系统的寻址问题，降低了分布式服务集群的路由同步的复杂度；通过由所有服务器节点上部署的注册中心构成注册中心集群来实现路由同步，可以无需部署独立的注册中心，从而节约了运维成本以及硬件投入；通过基于Gossip协议进行路由信息的同步，可以减少硬件开销，减少网络带宽的占用，方便构建去中心化的分布式服务集群；通过本地调用方式来实现注册中心与RPC服务系统的寻址，可以避免产生网络请求，寻址速度也更快。本发明的技术方案构建简单，运维简单，可以大大节约研发成本、运维成本以及硬件投入。

图5示出了可以应用本发明实施例的分布式服务集群的路由同步的方法或分布式服务集群的路由同步的装置的示例性系统架构500。

如图5所示，系统架构500可以包括终端设备501、502、503，网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备501、502、503通过网络504与服务器505交互，以接收或发送消息等。终端设备501、502、503上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器505可以是提供各种服务的服务器，例如对用户利用终端设备501、502、503所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理，并将处理结果(例如目标推送信息、产品信息--仅为示例)反馈给终端设备。

需要说明的是，本发明实施例所提供的分布式服务集群的路由同步的方法一般由服务器505执行，相应地，分布式服务集群的路由同步的装置一般设置于服务器505中。

应该理解，图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

下面参考图6，其示出了适于用来实现本发明实施例的终端设备或服务器的计算机系统600的结构示意图。图6示出的终端设备或服务器仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示，计算机系统600包括中央处理单元(CPU)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。

以下部件连接至I/O接口605：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装入存储部分608。

特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分609从网络上被下载和安装，和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时，执行本发明的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的单元或模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中。其中，这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备包括：若注册中心发生变更，则对于所述注册中心集群的每个其他注册中心：所述其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给所述其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；若远程过程调用服务系统发生变更，则所述远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给所述服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将所述服务系统变更事件发送给所述注册中心集群的其他注册中心以使所述其他注册中心更新全局路由表，和使所述其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

根据本发明实施例的技术方案，通过将远程过程调用服务系统和注册中心部署在分布式服务集群的同一个服务器节点上，可以无需考虑注册中心与RPC服务系统的寻址问题，降低了分布式服务集群的路由同步的复杂度；通过由所有服务器节点上部署的注册中心构成注册中心集群来实现路由同步，可以无需部署独立的注册中心，从而节约了运维成本以及硬件投入；通过基于Gossip协议进行路由信息的同步，可以减少硬件开销，减少网络带宽的占用，方便构建去中心化的分布式服务集群；通过本地调用方式来实现注册中心与RPC服务系统的寻址，可以避免产生网络请求，寻址速度也更快。本发明的技术方案构建简单，运维简单，可以大大节约研发成本、运维成本以及硬件投入。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (15)

1.一种分布式服务集群，其特征在于，所述分布式服务集群包括不少于一个服务器节点，每个服务器节点部署一个注册中心和不少于一个远程过程调用服务系统，所有服务器节点的注册中心构成注册中心集群，所述注册中心集群用于维护远程过程调用服务的全局路由表，所述远程过程调用服务系统用于维护远程过程调用服务的本地路由表，所述服务器节点根据所述全局路由表和所述本地路由表提供服务。

2.根据权利要求1所述的分布式服务集群，其特征在于，注册中心、远程过程调用服务系统、全局路由表和本地路由表的变更以事件形式进行发布；

所述全局路由表和所述本地路由表通过以下方法进行更新：

若注册中心发生变更，则对于所述注册中心集群的每个其他注册中心：所述其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给所述其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；

若远程过程调用服务系统发生变更，则所述远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给所述服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将所述服务系统变更事件发送给所述注册中心集群的其他注册中心以使所述其他注册中心更新全局路由表，和使所述其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

3.根据权利要求2所述的分布式服务集群，其特征在于，

若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由所述启动或正常停止的注册中心发送给注册中心集群的其他注册中心；

若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到所述注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

4.根据权利要求2所述的分布式服务集群，其特征在于，

若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由所述远程过程调用服务系统发送给所述远程过程调用服务系统所在的服务器节点的注册中心；

若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由所述远程过程调用服务系统所在的服务器节点的注册中心生成，其中，所述注册中心通过心跳检测来确定所述远程过程调用服务系统已异常停止。

5.根据权利要求1所述的分布式服务集群，其特征在于，所有服务器节点的注册中心通过SWIM协议构成注册中心集群。

6.根据权利要求1所述的分布式服务集群，其特征在于，不同注册中心之间采用Gossip协议通过广播的方式进行全局路由表同步。

7.根据权利要求1所述的分布式服务集群，其特征在于，同一个服务器节点上部署的注册中心和远程过程调用服务系统之间通过进程间通信调用的方式进行本地路由表同步。

8.一种分布式服务集群的路由同步的方法，其特征在于，所述分布式服务集群包括不少于一个服务器节点，每个服务器节点部署一个注册中心和不少于一个远程过程调用服务系统，所有服务器节点的注册中心构成注册中心集群，所述注册中心集群用于维护远程过程调用服务的全局路由表，所述远程过程调用服务系统用于维护远程过程调用服务的本地路由表，注册中心、远程过程调用服务系统、全局路由表和本地路由表的变更以事件形式进行发布；所述方法包括：

若注册中心发生变更，则对于所述注册中心集群的每个其他注册中心：所述其他注册中心根据注册中心变更事件更新全局路由表，然后将路由表变更事件发送给所述其他注册中心所在的服务器节点部署的远程过程调用服务系统以更新本地路由表；

若远程过程调用服务系统发生变更，则所述远程过程调用服务系统所在的服务器节点的注册中心，根据服务系统变更事件更新全局路由表，然后将路由表变更事件发送给所述服务器节点上部署的其他远程过程调用服务系统以更新本地路由表；以及，将所述服务系统变更事件发送给所述注册中心集群的其他注册中心以使所述其他注册中心更新全局路由表，和使所述其他注册中心所在的服务器节点上部署的所有远程过程调用服务系统更新本地路由表。

9.根据权利要求8所述的方法，其特征在于，

若注册中心发生变更为注册中心启动或正常停止，则注册中心变更事件由所述启动或正常停止的注册中心发送给注册中心集群的其他注册中心；

若注册中心发生变更为注册中心异常停止，则注册中心变更事件由检测到所述注册中心异常停止的注册中心发送给注册中心集群的其他注册中心。

10.根据权利要求8所述的方法，其特征在于，

若远程过程调用服务系统发生变更为远程过程调用服务系统启动或正常停止，则服务系统变更事件由所述远程过程调用服务系统发送给所述远程过程调用服务系统所在的服务器节点的注册中心；

若远程过程调用服务系统发生变更为远程过程调用服务系统异常停止，则服务系统变更事件由所述远程过程调用服务系统所在的服务器节点的注册中心生成，其中，所述注册中心通过心跳检测来确定所述远程过程调用服务系统已异常停止。

11.根据权利要求8所述的方法，其特征在于，所有服务器节点的注册中心通过SWIM协议构成注册中心集群。

12.根据权利要求8所述的方法，其特征在于，不同注册中心之间采用Gossip协议通过广播的方式进行全局路由表同步。

13.根据权利要求8所述的方法，其特征在于，同一个服务器节点上部署的注册中心和远程过程调用服务系统之间通过进程间通信调用的方式进行本地路由表同步。

14.一种分布式服务集群的路由同步的电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求8-13中任一所述的方法。

15.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求8-13中任一所述的方法。