CN106210049B - 一种基于消息队列的集群通信方法及系统 - Google Patents

Abstract

本发明公开了一种基于消息列队的集群通信方法及系统，应用服务器通过订阅消息列队的频道与该消息列队建立连接，其中，所述消息列队包括公共频道、分类频道和私有频道；获取与该消息列队连接的所有应用服务器的属性信息，并存储于服务器列表，应用服务器通过消息列队与服务器列表内的其他应用服务器通信问题。本发明通过消息列队将不同平台的应用服务器的进行集群通信，能够整合不同实现方式的应用服务器，从而能够实现数据的流畅传输。

Description

一种基于消息队列的集群通信方法及系统

技术领域

本发明涉及集群通信技术领域，特别涉及一种基于消息队列的集群通信方法及系统。

背景技术

随着移动设备以及智能家居等互联网产品的爆发式增长，连接到云端系统的应用服务器的种类也在不断增多。因而，云端系统通常包含多种类型的多个应用服务器，并且各应用服务器的实现方式及部署方式也不尽相同。例如智能电视云端推荐系统，其可以包括分发服务器、接入服务器、推送服务器、数据分析服务器、监控服务器等等，各服务器的实现方式也不完全一致。如，接入服务器使用Erlang语言，但推送服务器使用Java语言实现。那么，这些应用服务器之间要进行集群通信，通信过程繁琐并且事件消息处理效率低下。

因而现有技术还有待改进和提高。

发明内容

本发明要解决的技术问题在于，针对现有技术的不足，提供一种基于消息队列的集群通信方法及系统，其解决现在有的不同平台的应用服务器的集群通信过程繁琐并且事件消息处理效率低下的问题。

为了解决上述技术问题，本发明所采用的技术方案如下：

一种基于消息队列的集群通信方法，其包括：

集群中各应用服务器与消息队列建立连接，并订阅消息队列的频道，其中，所述消息队列包括公共频道、分类频道和私有频道；

应用服务器根据消息类型将消息发送到消息队列的相应的消息频道，其中，消息类型包括公共消息、分类消息和私有消息；

集群中订阅相应频道的应用服务器接收所述消息。

所述基于消息队列的集群通信方法，其中，应用服务器根据消息类型将消息发送到消息队列的相应的消息频道为：

当所述消息类型为公共消息时，应用服务器将消息发送到消息队列的公共频道；

当所述消息类型为分类消息时，应用服务器将消息发送到消息队列的分类频道；

当所述消息类型为私有消息时，应用服务器将消息发送到消息队列的私有频道。

所述基于消息队列的集群通信方法，其中，当应用服务器接入该集群时，所述方法还包括：

应用服务器与消息队列建立连接，并订阅消息队列的频道；

向订阅的消息队列的公共频道发送包含该应用服务器属性信息的加入事件消息；

该集群内其它应用服务器接收该加入事件消息，并将该加入事件消息中包括的应用服务器的属性信息加入服务器列表；

该集群内的其它应用服务器向该应用服务器的私有频道发送包含其属性信息的响应事件消息；

该应用服务器接收其它应用服务器发送的响应事件消息，并将该响应事件信息携带的属性信息加入服务器列表。

所述基于消息队列的集群通信方法，其中，当应用服务器退出该集群时，所述方法包括：

应用服务器向消息队列的公共频道发送包含该应用服务器属性信息的退出事件消息；

该集群内其它应用服务器接收该退出事件消息，并将该退出事件消息中包括的应用服务器的属性信息移除服务器列表；

该应用服务器断开与消息队列的连接，并清空服务器列表。

所述基于消息队列的集群通信方法，其中，所述应用服务器的属性信息至少包括：应用服务器名称、类型以及IP地址。

一种基于消息队列的集群通信系统，其包括：

消息中间件，其设立消息频道，用于接收与其连接的应用服务器发送的事件信息，其中，消息频道至少包括：公共频道、分类频道和私有频道；

应用服务器，用于订阅消息中间件的频道，根据消息类型将消息发送到消息队列的相应的消息频道，以及接收其订阅频道内的消息，其中，消息类型包括公共消息、分类消息和私有消息。

所述基于消息队列的集群通信系统，其中，所述应用服务器包括：

订阅模块，用于订阅消息中间件的频道；

发送模块，用于根据消息类型将消息发送到消息队列的相应的消息频道；

接收模块，用于接收其订阅频道内的消息。

所述基于消息队列的集群通信系统，其中，所述发送模块包括；

第一发送单元，用于当所述消息类型为公共消息时，将消息发送到消息队列的公共频道；

第二发送单元，用于当所述消息类型为分类消息时，将消息发送到消息队列的分类频道；

第三发送单元，用于当所述消息类型为私有消息时，将消息发送到消息队列的私有频道。

所述基于消息队列的集群通信系统，其中，所述应用服务器还包括：

第四发送单元，用于当应用服务器接入该集群时，向订阅的消息队列的公共频道发送包含应用服务器属性信息的加入事件消息；

加入单元，用于接收该加入事件消息并将该加入事件消息中包括的应用服务器的属性信息加入服务器列表；

反馈单元，用于当接收到包含应用服务器属性信息的加入事件消息时，向所述加入事件信息对应的应用服务器的私有频道发送包含属性信息的响应事件消息。

所述基于消息队列的集群通信系统，其中，所述应用服务器还包括：

第五发送单元，用于当应用服务器退出该集群时向消息队列的公共频道发送包含该应用服务器属性信息的退出事件消息；

删除单元，用于当接收到包含该应用服务器属性信息的退出事件消息时，将该退出事件消息中包括的应用服务器的属性信息移除服务器列表；

清空单元，用于当应用服务器断开与消息队列的连接时，清空服务器列表。

有益效果：与现有技术相比，本发明提供的一种基于消息队列的集群通信及系统，应用服务器通过订阅消息队列的频道与该消息队列建立连接，其中，所述消息队列包括公共频道、分类频道和私有频道；获取与该消息队列连接的所有应用服务器的属性信息，并存储于服务器列表，应用服务器通过消息队列与服务器列表内的其它应用服务器通信问题。本发明通过消息队列将不同平台的应用服务器的进行集群通信，能够整合不同实现方式的应用服务器，从而能够实现数据的流畅传输。

附图说明

图1为本发明提供的基于消息队列的集群通信方法较佳实施例的流程图。

图2为本发明提供的基于消息队列的集群通信方法中应用服务器接入集群流程图。

图3为本发明提供的基于消息队列的集群通信方法中应用服务器退出集群流程图。

图4为本发明提供的基于消息队列的集群通信方法中应用服务器与集群中其它应用服务器通信的流程图。

图5为本发明提供的基于消息队列的集群通信系统的结构原理图。

具体实施方式

本发明提供一种基于消息队列的集群通信及系统，为使本发明的目的、技术方案及效果更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。

下面结合附图，通过对实施例的描述，对发明内容作进一步说明。

请参见图1，图1为本发明提供的基于消息队列的集群通信方法较佳实施例的流程图。所述基于消息队列的集群通信方法，其包括：

S100、集群中各应用服务器与消息队列建立连接，并订阅消息队列的频道，其中，所述消息队列包括公共频道、分类频道和私有频道。

具体地，应用服务器须与消息队列建立连接，其通过订阅消息队列的频道与消息队列建立连接。其中，应用服务器可以是不同平台的服务器，如，分发服务器、接入服务器、推送服务器、数据分析服务器、监控服务器等。其也可以是采用不同语言实现的服务器，如，java语言、Erlang语言等。当然，每个应用服务器至少包括如下属性：应用服务器名，如“as1”；应用服务器类型，如“as”；应用服务器ip，如“192.168.1.101”。值得说明的，与消息队列建立的连接的所有应用服务器都必须订阅该消息队列的所有频道，即每个应用服务器都订阅公共频道，与其类型相对应的分类频道以及与其名称对应的私有频道或私有队列。当然，每个应用服务器的名称都是该应用服务器的唯一标识，所以应用服务器的名称可以是应用服务器的MAC地址，也可以是该应用服务器接入消息队列时，消息队列为其分别的用于标识的名称，例如，采用标号，应用服务器的名称为该应用服务器连接该消息队列的顺序等。

进一步，所述应用服务器与消息队列采用json(Java Script Object Notation)格式的通信协议进行通信，其中，json是基于JavaScript编程语言的一种轻量级的数据交换格式，主要用于跟服务器进行交换数据。由于应用服务器包括的属性为应用服务器名，如“as1”；应用服务器类型，如“as”；应用服务器ip，如“192.168.1.101”，那么json通信协议的格式可以为：

{

“name”:“as1”,

“type”:“as”,

“ip”:“192.168.1.101”

}。

在本发明的实施例中，所述消息队列MQ(Message Queue)包括公共频道、分类频道和私有频道。公共频道(public)内的消息可以被连接到该消息队列的所有应用服务器获取。分类频道其实以应用服务器的类型为名称的频道，如“as”，该频道内的消息只可以被该类型的服务器所获取。私有频道也可以叫私有队列，其是以应用服务器名为名称的频道(即为队列)，如“as1”，该频道内的消息只能被该应用服务器所获取。

进一步，当应用服务器与消息队列建立连接还可以包括：确定集群内应用服务器属性信息的过程，其具体可以为：向消息队列的公共频道发送包含属性信息的事件消息，并获取集群中所有应用服务器的属性信息，将其存储于服务器列表，其中，应用服务器的属性信息为该应用服务器的唯一标识。也就是说，应用服务器与消息队列建立连接后，向订阅的消息队列的公共频道发送接入事件消息，该事件消息内包含该应用服务器的属性消息。连接到该消息队列的其它应用服务器接收消息队列公共频道内的该接入事件消息，并根据该事件消息中包含的应用服务器的属性消息向其对应的私有频道发送反馈消息，反馈消息中包含应用服务器属性，发送接入事件消息的应用服务器将该反馈消息中包括的属性信息更新服务器列表。值得说明的，该服务器列表为应用服务器预先设定的，其初始可以是空的服务器列表，当获取反馈消息时，将反馈信息内的属性信息加入到服务器列表。该服务器列表也可以具有默认设置信息，其可以是接入消息队列时，从消息队列获取的已经连接该消息队列的应用服务器属性信息。那么，当接收到反馈消息时，可以将反馈消息包含的属性信息与默认信息进行对比，如果服务器列表内包含该属性信息，则服务器列表内容不变，如果服务器列表内不包含该属性信息，则服务器列表内容更新。当然，当服务器列表内不包含该属性信息时，可以向该属性信息对应的私有频道发送验证信息，以确定该应用服务器是否是非法接入，提高集群通信的安全性。

进一步，所述应用服务器的属性信息为该应用服务器的唯一标识，其至少包括应用服务器名，如“as1”；应用服务器类型，如“as”；应用服务器ip，如“192.168.1.101”。当然，其还可以包括应用服务器的用途、实现方式(如，java语音、Erlang语言等)。

S200、应用服务器根据消息类型将消息发送到消息队列的相应的消息频道，其中，消息类型包括公共消息、分类消息和私有消息。

具体地，应用服务器向消息队列对应的频道发送消息，与该消息队列连接的其它应用服务器通过结束消息队列的消息获取应用服务器发送的消息，实现了应用服务器与连接消息队列的其它应用服务器通信。在本实施例中，应用服务器需要向与消息列表连接的所有服务器发送消息时，向订阅的消息队列公共频道发送消息。当向某一类与消息队列连接的应用服务器发送消息时，向消息队列的分类频道发送消息。当向某一特定应用服务器发送消息时，向消息队列与该应用服务器对应的私有频道发送消息。

S300、集群中订阅相应频道的应用服务器接收所述消息。

具体地，应用服务器向消息队列的响应频道发送信息时，集群中其它订阅了该频道的应用服务器，接收所述频道内的消息，实现了通过消息队列相互通信。

本发明提供了一种基于消息队列的集群通信方法，各应用服务器均与消息队列MQ建立连接保持通讯，利用MQ的频道订阅功能，与MQ连接并且已订阅的应用服务器能收到任一台同样连接MQ且往订阅频道发送的消息。本发明通过制定一套消息发送规则及发送协议实现了通用的应用服务器集群通信方法。

为了进一步说明本发明提供的基于消息队列的集群通信方法，下面从应用服务器接入消息队列、与消息队列内其它应用服务器通信以及退出消息队列几个方面对该方法做详细说明。

本发明提供的基于消息队列的集群通信方法，当应用服务器接入消息队列时，如图2所示，其包括如下步骤：

S101、应用服务器与消息队列建立连接并订阅消息队列的频道。

具体地，当应用服务器启动时，应用服务器与消息队列MQ建立连接，并订阅消息队列的频道。指的说明的，应用服务器与消息队列建立连接之后，订阅消息队列的广播频道，并且至少订阅消息队列的公共广播频道，分类广播频道以及私有广播频道。

S102、向订阅的消息队列的公共频道发送包含该应用服务器属性信息的事件消息。

具体地，当应用服务器与消息队列建立连接后，向其订阅的公共广播频道发送事件消息，并且该事件消息中包含该应用服务器的属性信息。并且该事件信息中还包括事件类型，如接入事件或者退出事件等。在实际应用中，应用服务器可以向消息队列的公共频道“public”发送该应用服务器属性信息，其采用json格式的消息，可以为：

{

“event”:“join”,

“name”:“as1”,

“type”:“as”,

“ip”:“192.168.1.101”

}

其中，event表示事件的类型，当event为join代表接入集群。

S103、该集群内其它应用服务器接收该事件消息，并将该事件消息中包括的应用服务器的属性信息加入服务器列表。

具体地，集群内的其它应用服务器通过消息队列公共频道的广播接收该事件消息，并将事件消息中包含的接入消息队列的应用服务器的属性信息加入服务器列表。

S104、该集群内的其它应用服务器向该应用服务器的私有频道发送包含属性信息的事件消息。

具体地，当其它应用服务器将该应用服务器的属性信息加入服务器列表后，给该服务器的私有频道发送本服务器的属性，格式如下：

{

“name”:“ps1”,

“type”:“ps”,

“ip”:“192.168.1.105”

}。

S105、应用服务器接收到其它应用服务器发送的事件消息，并将其它应用服务器的属性信息加入其服务器列表。

本发明提供的基于消息队列的集群通信方法，当应用服务器退出该集群时，如图3所示，其包括：

S201、应用服务器向消息队列的公共频道发送包含该应用服务器属性信息的事件消息。

具体地，应用服务器发送的事件信息包含应用服务器的属性信息以及事件类型，其可以采用如下格式：

{

“event”:“exit”,

“name”:“as1”,

“type”:“as”,

“ip”:“192.168.1.101”

}

其中，event为exit代表退出集群。

S202、该集群内其它应用服务器接收该事件消息，并将该事件消息中包括的应用服务器的属性信息移除服务器列表。

具体地，该集群内其它应用服务器接收到该事件消息后，根据事件类型，将该事件信息中包含的应用服务器的属性信息移除服务器列表。

S203、该应用服务器断开与消息队列的连接。

具体地，应用服务器发送退出事件消息后，与该消息队列的连接断开。当然，该应用服务器可以清空服务器列表，也可以保留服务器列表。在实际应用中，为了保证所有服务器都接收到退出事件消息，该应用服务器向公共频道发的退出事件消息中还可以包括需要反馈信息的请求。也就是说，当集群中其它应用服务器接收到该退出事件消息时，需要向该应用服务器的私有频道发送包含其属于的反馈消息，当应用服务器接收到该反馈消息时，将该应用服务器的属性信息从服务器列表内删除，直到服务器列表内的所有服务器属性信息都删除时，应用服务器断开与消息列表的连接。这样可以保证集群内其它服务器全部接受到该退出事件消息，避免消息丢失造成集群内应用服务器的服务器列表信息无法更新，而造成的通信错误的问题。

本发明提供的基于消息队列的集群通信方法，当应用服务器与集群内其它服务器通信时，如图4所示，其还包括：

S301、应用服务器向消息队列的频道发送消息，其中，消息包括服务器名称及消息内容；

S302、集群内其它服务器通过消息队列对应的频道接收该消息。

具体地，当消息发送给集群内所有服务器时，应用服务器向消息队列的公共频道发送消息；当消息发送给集群内指定类型服务器时，应用服务器向消息队列的分类频道发送消息；当消息发送给集群内指定服务器时，应用服务器向消息队列的指定频道发送消息。

本发明还提供了一种基于消息队列的集群通信系统，如图5所示，其包括：

应用服务器100，用于订阅消息中间件的频道，根据消息类型将消息发送到消息队列的相应的消息频道，以及接收其订阅频道内的消息，其中，消息类型包括公共消息、分类消息和私有消息；

消息中间件200，其设立消息频道，用于接收与其连接的应用服务器发送的事件信息，其中，消息频道至少包括：公共频道、分类频道和私有频道。

所述基于消息队列的集群通信系统，其中，所述应用服务器包括：

订阅模块，用于订阅消息中间件的频道；

发送模块，用于根据消息类型将消息发送到消息队列的相应的消息频道；

接收模块，用于接收其订阅频道内的消息。

所述基于消息队列的集群通信系统，其中，所述发送模块包括：

第一发送单元，用于当所述消息类型为公共消息时，将消息发送到消息队列的公共频道；

第二发送单元，用于当所述消息类型为分类消息时，将消息发送到消息队列的分类频道；

第三发送单元，用于当所述消息类型为私有消息时，将消息发送到消息队列的私有频道。

所述基于消息队列的集群通信方法，其中，所述应用服务器还包括：

第四发送单元，用于当应用服务器接入该集群时，向订阅的消息队列的公共频道发送包含应用服务器属性信息的加入事件消息；

加入单元，用于接收该加入事件消息并将该加入事件消息中包括的应用服务器的属性信息加入服务器列表；

反馈单元，用于当接收到包含应用服务器属性信息的加入事件消息时，向所述加入事件信息对应的应用服务器的私有频道发送包含属性信息的响应事件消息。

所述基于消息队列的集群通信方法，其中，所述应用服务器还包括：

第五发送单元，用于当应用服务器退出该集群时向消息队列的公共频道发送包含该应用服务器属性信息的退出事件消息；

删除单元，用于当接收到包含该应用服务器属性信息的退出事件消息时，将该退出事件消息中包括的应用服务器的属性信息移除服务器列表；

清空单元，用于当应用服务器断开与消息队列的连接时，清空服务器列表。

上述基于消息队列的集群通信系统的各个模块在上述基于消息队列的集群通信方法中都已做详细说明，这里不做一一陈述。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种基于消息队列的集群通信方法，其特征在于，其包括：

集群中各应用服务器与消息队列建立连接，并订阅消息队列的频道，其中，所述消息队列包括公共频道、分类频道和私有频道；

应用服务器根据消息类型将消息发送到消息队列的相应的消息频道，其中，消息类型包括公共消息、分类消息和私有消息；

集群中订阅相应频道的应用服务器接收所述消息；

其中，所述订阅消息队列的频道具体为：订阅消息队列中的公共频道、与该应用服务器类型对应的分类频道以及对应的私有频道。

2.根据权利要求1所述基于消息队列的集群通信方法，其特征在于，应用服务器根据消息类型将消息发送到消息队列的相应的消息频道为：

当所述消息类型为公共消息时，应用服务器将消息发送到消息队列的公共频道；

当所述消息类型为分类消息时，应用服务器将消息发送到消息队列的分类频道；

当所述消息类型为私有消息时，应用服务器将消息发送到消息队列的私有频道。

3.根据权利要求1所述基于消息队列的集群通信方法，其特征在于，当应用服务器接入该集群时，所述方法还包括：

应用服务器与消息队列建立连接，并订阅消息队列的频道；

向订阅的消息队列的公共频道发送包含该应用服务器属性信息的加入事件消息；

该集群内其它应用服务器接收该加入事件消息，并将该加入事件消息中包括的应用服务器的属性信息加入服务器列表；

该集群内的其它应用服务器向该应用服务器的私有频道发送包含其属性信息的响应事件消息；

该应用服务器接收其它应用服务器发送的响应事件消息，并将该响应事件消息携带的属性信息加入服务器列表。

4.根据权利要求1所述基于消息队列的集群通信方法，其特征在于，当应用服务器退出该集群时，所述方法包括：

应用服务器向消息队列的公共频道发送包含该应用服务器属性信息的退出事件消息；

该集群内其它应用服务器接收该退出事件消息，并将该退出事件消息中包括的应用服务器的属性信息移除服务器列表；

该应用服务器断开与消息队列的连接，并清空服务器列表。

5.根据权利要求3或4所述基于消息队列的集群通信方法，其特征在于，所述应用服务器的属性信息至少包括：应用服务器名称、类型以及IP地址。

6.一种基于消息队列的集群通信系统，其特征在于，其包括：

消息中间件，其设立消息频道，用于接收与其连接的应用服务器发送的事件信息，其中，消息频道至少包括：公共频道、分类频道和私有频道；

应用服务器，用于订阅消息中间件的频道，根据消息类型将消息发送到消息队列的相应的消息频道，以及接收其订阅频道内的消息，其中，消息类型包括公共消息、分类消息和私有消息；

其中，订阅消息队列的频道具体为：订阅消息队列中的公共频道、与该服务器类型对应的分类频道以及对应的私有频道。

7.根据权利要求6所述基于消息队列的集群通信系统，其特征在于，所述应用服务器包括：

订阅模块，用于订阅消息中间件的频道；

发送模块，用于根据消息类型将消息发送到消息队列的相应的消息频道；

接收模块，用于接收其订阅频道内的消息。

8.根据权利要求7所述基于消息队列的集群通信系统，其特征在于，所述发送模块包括：

第一发送单元，用于当所述消息类型为公共消息时，将消息发送到消息队列的公共频道；

第二发送单元，用于当所述消息类型为分类消息时，将消息发送到消息队列的分类频道；

第三发送单元，用于当所述消息类型为私有消息时，将消息发送到消息队列的私有频道。

9.根据权利要求6所述基于消息队列的集群通信系统，其特征在于，所述应用服务器还包括：

第四发送单元，用于当应用服务器接入该集群时，向订阅的消息队列的公共频道发送包含应用服务器属性信息的加入事件消息；

加入单元，用于接收该加入事件消息并将该加入事件消息中包括的应用服务器的属性信息加入服务器列表；

反馈单元，用于当接收到包含应用服务器属性信息的加入事件消息时，向所述加入事件消息对应的应用服务器的私有频道发送包含属性信息的响应事件消息。

10.根据权利要求6所述基于消息队列的集群通信系统，其特征在于，所述应用服务器还包括：

第五发送单元，用于当应用服务器退出该集群时向消息队列的公共频道发送包含该应用服务器属性信息的退出事件消息；

删除单元，用于当接收到包含该应用服务器属性信息的退出事件消息时，将该退出事件消息中包括的应用服务器的属性信息移除服务器列表；

清空单元，用于当应用服务器断开与消息队列的连接时，清空服务器列表。

Images