CN109151033B - 基于分布式系统的通信方法、装置、电子设备及存储介质 - Google Patents

基于分布式系统的通信方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN109151033B
CN109151033B CN201811006370.0A CN201811006370A CN109151033B CN 109151033 B CN109151033 B CN 109151033B CN 201811006370 A CN201811006370 A CN 201811006370A CN 109151033 B CN109151033 B CN 109151033B
Authority
CN
China
Prior art keywords
node
message
target node
service
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811006370.0A
Other languages
English (en)
Other versions
CN109151033A (zh
Inventor
李科磊
陈卓
党跃东
何玮
鲍万宇
倪忠俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baidu Online Network Technology Beijing Co Ltd
Original Assignee
Baidu Online Network Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Baidu Online Network Technology Beijing Co Ltd filed Critical Baidu Online Network Technology Beijing Co Ltd
Priority to CN201811006370.0A priority Critical patent/CN109151033B/zh
Publication of CN109151033A publication Critical patent/CN109151033A/zh
Application granted granted Critical
Publication of CN109151033B publication Critical patent/CN109151033B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies

Abstract

本发明实施例公开了一种基于分布式系统的通信方法、装置、电子设备及存储介质。分布式系统包括至少两个主机，每个主机具有多个节点，该方法包括：分布式系统中的任一当前节点接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；当前节点根据拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同；当前节点基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。可以降低通信成本，避免通信风险。

Description

基于分布式系统的通信方法、装置、电子设备及存储介质
技术领域
本发明实施例涉及通信技术领域，尤其涉及一种基于分布式系统的通信方法、装置、电子设备及存储介质。
背景技术
分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。
在现有的基于分布式系统的通信方法中，如果一端节点向另一端节点发起连接，那么发起连接的节点需要知道被连接的节点的IP地址和端口号。一般情况下，各个节点的IP地址和端口号被存储在本地的配置文件中，或者被存储在中心化的服务器中。具体地，如果一端节点向另一端节点发起连接，那么发起连接的节点可以在本地的配置文件中或者中心化的服务器中查找被连接的节点的IP地址和端口号；若发起连接的节点查找到被连接的节点的IP地址和端口号，则发起连接的节点使用该IP地址和端口号向被连接的节点发起连接。
在实现本发明的过程中，发明人发现现有技术中至少存在如下问题：
在现有的基于分布式系统的通信方法中，各个节点的IP地址和端口号被存储在本地的配置文件中，或者被存储在中心化的服务器中。如果各个节点的IP地址和端口号被存储在本地的配置文件中，那么配置文件的维护成本就比较高，而且同步较困难；如果各个节点的IP地址和端口号被存储在中心化的服务器，这样存在单点故障的问题，风险较大。
发明内容
有鉴于此，本发明实施例提供一种基于分布式系统的通信方法、装置、电子设备及存储介质，不仅可以降低通信成本，而且还可以避免通信风险。
第一方面，本发明实施例提供了一种基于分布式系统的通信方法，所述分布式系统包括至少两个主机，每个主机具有多个节点，所述方法包括：
分布式系统中的任一当前节点接收其他各节点广播的拓扑消息；其中，所述拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；
所述当前节点根据所述拓扑消息，从其他各节点中确定至少一个目标节点；其中，所述目标节点待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同，和/或所述目标节点订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同；
所述当前节点基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在上述实施例中，所述拓扑消息中还包括节点标识、节点所属进程和节点所属主机；
相应的，所述当前节点基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息，包括：
所述当前节点根据所述拓扑消息确定与各目标节点的关系；其中，所述关系包括：同进程、跨进程和跨主机；
所述当前节点根据所述关系确定与各目标节点的通信方式；其中，所述通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式；
所述当前节点基于所述消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在上述实施例中，所述当前节点根据所述拓扑消息确定与各目标节点的关系，包括：
如果各目标节点与所述当前节点属于同一个进程，则所述当前节点确定所述关系为同进程；
如果各目标节点与所述当前节点属于相同主机下的不同进程，则所述当前节点确定所述关系为跨进程；
如果各目标节点与所述当前节点属于不同的主机，则所述当前节点确定所述关系为跨主机。
在上述实施例中，所述当前节点根据所述关系确定与各目标节点的通信方式，包括：
对于所述关系为同进程的目标节点，则所述当前节点确定与该目标节点的通信方式为进程内通信方式；
对于所述关系为跨进程的目标节点，则所述当前节点确定与该目标节点的通信方式为共享内存通信方式；
对于所述关系为跨主机的目标节点，则所述当前节点确定与该目标节点的通信方式为Socket通信方式。
在上述实施例中，所述方法还包括：
所述当前节点接收来自所述至少一个目标节点的退出消息；
如果所述至少一个目标节点中，订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，所述当前节点则停止向所述第一目标节点集合中的各目标节点发送业务消息；
如果所述至少一个目标节点中，待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，所述当前节点则停止从所述第二目标节点集合中的各目标节点接收业务消息。
第二方面，本发明实施例提供了一种基于分布式系统的通信装置，所述分布式系统包括至少两个主机，每个主机具有多个节点，所述装置包括：通信模块和确定模块；其中，
所述通信模块，用于接收其他各节点广播的拓扑消息；其中，所述拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；
所述确定模块，用于根据所述拓扑消息，从其他各节点中确定至少一个目标节点；其中，所述目标节点待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同，和/或所述目标节点订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同；
所述通信模块，还用于基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在上述实施例中，所述拓扑消息中还包括节点标识、节点所属进程和节点所属主机；
所述通信模块包括：确定子模块和通信子模块；其中，
所述确定子模块，用于根据所述拓扑消息确定与各目标节点的关系；其中，所述关系包括：同进程、跨进程和跨主机；根据所述关系确定与各目标节点的通信方式；其中，所述通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式；
所述通信子模块，用于基于所述消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在上述实施例中，所述确定子模块，具体用于如果各目标节点与所述当前节点属于同一个进程，则确定所述关系为同进程；如果各目标节点与所述当前节点属于相同主机下的不同进程，则确定所述关系为跨进程；如果各目标节点与所述当前节点属于不同的主机，则确定所述关系为跨主机。
在上述实施例中，所述确定子模块，具体用于对于所述关系为同进程的目标节点，则确定与该目标节点的通信方式为进程内通信方式；对于所述关系为跨进程的目标节点，则确定与该目标节点的通信方式为共享内存通信方式；对于所述关系为跨主机的目标节点，则确定与该目标节点的通信方式为Socket通信方式。
在上述实施例中，所述通信模块，还用于接收来自所述至少一个目标节点的退出消息；如果所述至少一个目标节点中，订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，则停止向所述第一目标节点集合中的各目标节点发送业务消息；如果所述至少一个目标节点中，待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，则停止从所述第二目标节点集合中的各目标节点接收业务消息。
第三方面，本发明实施例提供了一种电子设备，包括：
一个或多个处理器；
存储器，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明任意实施例所述的基于分布式系统的通信方法。
第四方面，本发明实施例提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例所述的基于分布式系统的通信方法。
本发明实施例提出了一种基于分布式系统的通信方法、装置、电子设备及存储介质，分布式系统包括至少两个主机，每个主机具有多个节点；分布式系统中的任一当前节点先接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；然后当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同；当前节点可以基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。也就是说，在本发明的技术方案中，当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；然后基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。而在现有的基于分布式系统的通信方法，如果一端节点向另一端节点发起连接，那么发起连接的节点需要知道被连接的节点的IP地址和端口号。而各个节点的IP地址和端口号被存储在本地的配置文件中，或者被存储在中心化的服务器中。因此，和现有技术相比，本发明实施例提出的基于分布式系统的通信方法、装置、电子设备及存储介质，不仅可以降低通信成本，而且还可以避免通信风险；并且，本发明实施例的技术方案实现简单方便、便于普及，适用范围更广。
附图说明
图1为本发明实施例一提供的基于分布式系统的通信方法的流程示意图；
图2为本发明实施例二提供的基于分布式系统的通信方法的流程示意图；
图3为本发明实施例三提供的基于分布式系统的通信装置的第一结构示意图；
图4为本发明实施例三提供的基于分布式系统的通信装置的第二结构示意图；
图5为本发明实施例四提供的电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。
实施例一
图1为本发明实施例一提供的基于分布式系统的通信方法的流程示意图，该方法可以由基于分布式系统的通信装置或者电子设备来执行，该装置或者电子设备可以由软件和/或硬件的方式实现，该装置或者电子设备可以集成在任何具有网络通信功能的智能设备中。如图1所示，基于分布式系统的通信方法可以包括以下步骤：
S101、分布式系统中的任一当前节点接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题。
在本发明的具体实施例中，分布式系统中的任一当前节点可以接收其他各节点广播的拓扑消息，同时，分布式系统中的任一当前节点向其他各节点广播拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息；其中，节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题和节点2订阅的业务消息的消息主题；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题和节点3订阅的业务消息的消息主题；…；节点1接收到节点N广播的拓扑消息中至少包括节点N待发送的业务消息的消息主题和节点N订阅的业务消息的消息主题。同时，节点1可以向节点2、节点3、…、节点N广播拓扑消息；其中，该拓扑消息中至少包括节点1待发送的业务消息的消息主题和节点1订阅的业务消息的消息主题。
S102、当前节点根据拓扑消息，从其他各节点中确定至少一个目标节点。
在本发明的具体实施例中，当前节点可以根据接收到的其他各节点广播的拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息。假设节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题A和节点2订阅的业务消息的消息主题B；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题A和节点3订阅的业务消息的消息主题B。假设节点1待发送的业务消息的消息主题为B；节点1订阅的业务消息的消息主题为A；那么节点1可以根据节点2广播的拓扑消息和节点3广播的拓扑消息，从其他各节点中确定节点2和节点3为目标节点。
S103、当前节点基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在本发明的具体实施例中，由于目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同，因此，当前节点可以基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息。假设节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题A和节点2订阅的业务消息的消息主题B；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题A和节点3订阅的业务消息的消息主题B。假设节点1待发送的业务消息的消息主题为B；节点1订阅的业务消息的消息主题为A；那么节点1可以根据节点2广播的拓扑消息和节点3广播的拓扑消息，从其他各节点中确定节点2和节点3为目标节点。在本步骤中，节点1可以基于节点1待发送的业务消息的消息主题B和节点1订阅的业务消息的消息主题A，向节点2发送消息主题为B的业务消息和/或从节点2接收消息主题为A的业务消息；同时，节点1还可以基于节点1待发送的业务消息的消息主题B和节点1订阅的业务消息的消息主题A，向节点3发送消息主题为B的业务消息和/或从节点3接收消息主题为A的业务消息。
较佳地，在本发明的具体实施例中，当前节点还可以接收来自至少一个目标节点的退出消息；如果至少一个目标节点中，订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，当前节点则停止向第一目标节点集合中的各目标节点发送业务消息；如果至少一个目标节点中，待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，当前节点则停止从第二目标节点集合中的各目标节点接收业务消息。
本发明实施例提出的基于分布式系统的通信方法，分布式系统包括至少两个主机，每个主机具有多个节点；分布式系统中的任一当前节点先接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；然后当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同；当前节点可以基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。也就是说，在本发明的技术方案中，当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；然后基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。而在现有的基于分布式系统的通信方法，如果一端节点向另一端节点发起连接，那么发起连接的节点需要知道被连接的节点的IP地址和端口号。而各个节点的IP地址和端口号被存储在本地的配置文件中，或者被存储在中心化的服务器中。因此，和现有技术相比，本发明实施例提出的基于分布式系统的通信方法，不仅可以降低通信成本，而且还可以避免通信风险；并且，本发明实施例的技术方案实现简单方便、便于普及，适用范围更广。
实施例二
图2为本发明实施例二提供的基于分布式系统的通信方法的流程示意图。如图2所示，基于分布式系统的通信方法可以包括以下步骤：
S201、分布式系统中的任一当前节点接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题。
在本发明的具体实施例中，分布式系统中的任一当前节点可以接收其他各节点广播的拓扑消息，同时，分布式系统中的任一当前节点向其他各节点广播拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息；其中，节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题和节点2订阅的业务消息的消息主题；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题和节点3订阅的业务消息的消息主题；…；节点1接收到节点N广播的拓扑消息中至少包括节点N待发送的业务消息的消息主题和节点N订阅的业务消息的消息主题。同时，节点1可以向节点2、节点3、…、节点N广播拓扑消息；其中，该拓扑消息中至少包括节点1待发送的业务消息的消息主题和节点1订阅的业务消息的消息主题。
S202、当前节点根据拓扑消息，从其他各节点中确定至少一个目标节点。
在本发明的具体实施例中，当前节点可以根据接收到的其他各节点广播的拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息。假设节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题A和节点2订阅的业务消息的消息主题B；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题A和节点3订阅的业务消息的消息主题B。假设节点1待发送的业务消息的消息主题为B；节点1订阅的业务消息的消息主题为A；那么节点1可以根据节点2广播的拓扑消息和节点3广播的拓扑消息，从其他各节点中确定节点2和节点3为目标节点。
S203、当前节点根据拓扑消息确定与各目标节点的关系；其中，关系包括：同进程、跨进程和跨主机。
在本发明的具体实施例中，拓扑消息中还可以包括节点标识、节点所属进程和节点所属主机。当前节点可以根据接收到各目标节点的拓扑消息确定与各目标节点的关系；其中，该关系包括：同进程、跨进程和跨主机。具体地，如果各目标节点与当前节点属于同一个进程，则当前节点确定关系为同进程；如果各目标节点与当前节点属于相同主机下的不同进程，则当前节点确定关系为跨进程；如果各目标节点与当前节点属于不同的主机，则当前节点确定关系为跨主机。
例如，节点1接收到节点2广播的拓扑消息中还可以包括节点标识2、节点2所属进程和节点2所属主机；此外，节点1接收到节点3广播的拓扑消息中还可以包括节点标识3、节点3所属进程和节点3所属主机。因此，节点1可以根据节点2广播的拓扑消息确定与节点2的关系；此外，节点1还可以根据节点3广播的拓扑消息确定与节点3的关系。
S204、当前节点根据关系确定与各目标节点的通信方式；其中，通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式。
在本发明的具体实施例中，当前节点可以根据与各目标节点的关系确定与各目标节点的通信方式；其中，通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式。具体地，对于关系为同进程的目标节点，则当前节点确定与该目标节点的通信方式为进程内通信方式；对于关系为跨进程的目标节点，则当前节点确定与该目标节点的通信方式为共享内存通信方式；对于关系为跨主机的目标节点，则当前节点确定与该目标节点的通信方式为Socket通信方式。
S205、当前节点基于消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
在本发明的具体实施例中，由于目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同，因此，当前节点可以基于消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。具体地，假设分布式系统中包括：节点1、节点2、节点3、…、节点N；其中，N为大于1的自然数。假设当前节点为节点1，节点1可以接收节点2、节点3、…、节点N广播的拓扑消息。假设节点1接收到节点2广播的拓扑消息中至少包括节点2待发送的业务消息的消息主题A和节点2订阅的业务消息的消息主题B；节点1接收到节点3广播的拓扑消息中至少包括节点3待发送的业务消息的消息主题A和节点3订阅的业务消息的消息主题B。假设节点1待发送的业务消息的消息主题为B；节点1订阅的业务消息的消息主题为A；那么节点1可以根据节点2广播的拓扑消息和节点3广播的拓扑消息，从其他各节点中确定节点2和节点3为目标节点。在本步骤中，节点1可以基于节点1待发送的业务消息的消息主题B和节点1订阅的业务消息的消息主题A，按照确定的通信方式向节点2发送消息主题为B的业务消息和/或从节点2接收消息主题为A的业务消息；同时，节点1还可以基于节点1待发送的业务消息的消息主题B和节点1订阅的业务消息的消息主题A，按照确定的通信方式向节点3发送消息主题为B的业务消息和/或从节点3接收消息主题为A的业务消息。
较佳地，在本发明的具体实施例中，当前节点还可以接收来自至少一个目标节点的退出消息；如果至少一个目标节点中，订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，当前节点则停止向第一目标节点集合中的各目标节点发送业务消息；如果至少一个目标节点中，待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，当前节点则停止从第二目标节点集合中的各目标节点接收业务消息。
本发明实施例提出的基于分布式系统的通信方法，分布式系统包括至少两个主机，每个主机具有多个节点；分布式系统中的任一当前节点先接收其他各节点广播的拓扑消息；其中，拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；然后当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；其中，目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或目标节点订阅的业务消息的消息主题与当前节点待发送的业务消息的消息主题相同；当前节点可以基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。也就是说，在本发明的技术方案中，当前节点可以根据拓扑消息，从其他各节点中确定至少一个目标节点；然后基于消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。而在现有的基于分布式系统的通信方法，如果一端节点向另一端节点发起连接，那么发起连接的节点需要知道被连接的节点的IP地址和端口号。而各个节点的IP地址和端口号被存储在本地的配置文件中，或者被存储在中心化的服务器中。因此，和现有技术相比，本发明实施例提出的基于分布式系统的通信方法，不仅可以降低通信成本，而且还可以避免通信风险；并且，本发明实施例的技术方案实现简单方便、便于普及，适用范围更广。
实施例三
图3为本发明实施例三提供的基于分布式系统的第一通信装置的结构示意图。所述分布式系统包括至少两个主机，每个主机具有多个节点，如图3所示，本发明实施例所述的基于分布式系统的通信装置可以包括：通信模块301和确定模块302；其中，
所述通信模块301，用于接收其他各节点广播的拓扑消息；其中，所述拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；
所述确定模块302，用于根据所述拓扑消息，从其他各节点中确定至少一个目标节点；其中，所述目标节点待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同，和/或所述目标节点订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同；
所述通信模块301，还用于基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
图4为本发明实施例三提供的基于分布式系统的第二通信装置的结构示意图。所述拓扑消息中还包括节点标识、节点所属进程和节点所属主机；，如图4所示，所述通信模块301包括：确定子模块3011和通信子模块3012；其中，
所述确定子模块3011，用于根据所述拓扑消息确定与各目标节点的关系；其中，所述关系包括：同进程、跨进程和跨主机；根据所述关系确定与各目标节点的通信方式；其中，所述通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式；
所述通信子模块3012，用于基于所述消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
进一步的，所述确定子模块3011，具体用于如果各目标节点与所述当前节点属于同一个进程，则确定所述关系为同进程；如果各目标节点与所述当前节点属于相同主机下的不同进程，则确定所述关系为跨进程；如果各目标节点与所述当前节点属于不同的主机，则确定所述关系为跨主机。
进一步的，所述确定子模块3011，具体用于对于所述关系为同进程的目标节点，则确定与该目标节点的通信方式为进程内通信方式；对于所述关系为跨进程的目标节点，则确定与该目标节点的通信方式为共享内存通信方式；对于所述关系为跨主机的目标节点，则确定与该目标节点的通信方式为Socket通信方式。
进一步的，所述通信模块301，还用于接收来自所述至少一个目标节点的退出消息；如果所述至少一个目标节点中，订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，则停止向所述第一目标节点集合中的各目标节点发送业务消息；如果所述至少一个目标节点中，待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，则停止从所述第二目标节点集合中的各目标节点接收业务消息。
上述基于分布式系统的通信装置可执行本发明任意实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明任意实施例提供的基于分布式系统的通信方法。
实施例四
图5为本发明实施例四提供的电子设备的结构示意图。图5示出了适于用来实现本发明实施方式的示例性电子设备的框图。图5显示的电子设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示，电子设备12以通用计算设备的形式表现。电子设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
电子设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。电子设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图5未显示，通常称为“硬盘驱动器”)。尽管图5中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM，DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
电子设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该电子设备12交互的设备通信，和/或与使得该电子设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，电子设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与电子设备12的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的基于分布式系统的通信方法。
实施例五
本发明实施例五提供了一种计算机存储介质。
本发明实施例的计算机可读存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或电子设备上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (12)

1.基于分布式系统的通信方法，其特征在于，所述分布式系统包括至少两个主机，每个主机具有多个节点，所述方法包括：
分布式系统中的任一当前节点接收其他各节点广播的拓扑消息；其中，所述拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；
所述当前节点根据所述拓扑消息，从其他各节点中确定至少一个目标节点；其中，所述目标节点待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同，和/或所述目标节点订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同；
所述当前节点基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
2.根据权利要求1所述的方法，其特征在于，所述拓扑消息中还包括节点标识、节点所属进程和节点所属主机；
相应的，所述当前节点基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息，包括：
所述当前节点根据所述拓扑消息确定与各目标节点的关系；其中，所述关系包括：同进程、跨进程和跨主机；
所述当前节点根据所述关系确定与各目标节点的通信方式；其中，所述通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式；
所述当前节点基于所述消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
3.根据权利要求2所述的方法，其特征在于，所述当前节点根据所述拓扑消息确定与各目标节点的关系，包括：
如果各目标节点与所述当前节点属于同一个进程，则所述当前节点确定所述关系为同进程；
如果各目标节点与所述当前节点属于相同主机下的不同进程，则所述当前节点确定所述关系为跨进程；
如果各目标节点与所述当前节点属于不同的主机，则所述当前节点确定所述关系为跨主机。
4.根据权利要求2所述的方法，其特征在于，所述当前节点根据所述关系确定与各目标节点的通信方式，包括：
对于所述关系为同进程的目标节点，则所述当前节点确定与该目标节点的通信方式为进程内通信方式；
对于所述关系为跨进程的目标节点，则所述当前节点确定与该目标节点的通信方式为共享内存通信方式；
对于所述关系为跨主机的目标节点，则所述当前节点确定与该目标节点的通信方式为Socket通信方式。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述当前节点接收来自所述至少一个目标节点的退出消息；
如果所述至少一个目标节点中，订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，所述当前节点则停止向所述第一目标节点集合中的各目标节点发送业务消息；
如果所述至少一个目标节点中，待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，所述当前节点则停止从所述第二目标节点集合中的各目标节点接收业务消息。
6.一种基于分布式系统的通信装置，所述分布式系统包括至少两个主机，每个主机具有多个节点，所述装置包括：通信模块和确定模块；其中，
所述通信模块，用于接收其他各节点广播的拓扑消息；其中，所述拓扑消息中至少包括待发送的业务消息的消息主题和订阅的业务消息的消息主题；
所述确定模块，用于根据所述拓扑消息，从其他各节点中确定至少一个目标节点；其中，所述目标节点待发送的业务消息的消息主题与当前节点订阅的业务消息的消息主题相同，和/或所述目标节点订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同；
所述通信模块，还用于基于所述消息主题，向各目标节点发送业务消息和/或从各目标节点接收业务消息。
7.根据权利要求6所述的装置，其特征在于，所述拓扑消息中还包括节点标识、节点所属进程和节点所属主机；
所述通信模块包括：确定子模块和通信子模块；其中，
所述确定子模块，用于根据所述拓扑消息确定与各目标节点的关系；其中，所述关系包括：同进程、跨进程和跨主机；根据所述关系确定与各目标节点的通信方式；其中，所述通信方式包括：进程内通信方式、共享内存通信方式和Socket通信方式；
所述通信子模块，用于基于所述消息主题，按照确定的通信方式向各目标节点发送业务消息和/或从各目标节点接收业务消息。
8.根据权利要求7所述的装置，其特征在于：
所述确定子模块，具体用于如果各目标节点与所述当前节点属于同一个进程，则确定所述关系为同进程；如果各目标节点与所述当前节点属于相同主机下的不同进程，则确定所述关系为跨进程；如果各目标节点与所述当前节点属于不同的主机，则确定所述关系为跨主机。
9.根据权利要求7所述的装置，其特征在于：
所述确定子模块，具体用于对于所述关系为同进程的目标节点，则确定与该目标节点的通信方式为进程内通信方式；对于所述关系为跨进程的目标节点，则确定与该目标节点的通信方式为共享内存通信方式；对于所述关系为跨主机的目标节点，则确定与该目标节点的通信方式为Socket通信方式。
10.根据权利要求6所述的装置，其特征在于，所述通信模块，还用于接收来自所述至少一个目标节点的退出消息；如果所述至少一个目标节点中，订阅的业务消息的消息主题与所述当前节点待发送的业务消息的消息主题相同的第一目标节点集合全部退出，则停止向所述第一目标节点集合中的各目标节点发送业务消息；如果所述至少一个目标节点中，待发送的业务消息的消息主题与所述当前节点订阅的业务消息的消息主题相同的第二目标节点集合全部退出，则停止从所述第二目标节点集合中的各目标节点接收业务消息。
11.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储器，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1至5中任一项所述的基于分布式系统的通信方法。
12.一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1至5中任一项所述的基于分布式系统的通信方法。
CN201811006370.0A 2018-08-30 2018-08-30 基于分布式系统的通信方法、装置、电子设备及存储介质 Active CN109151033B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811006370.0A CN109151033B (zh) 2018-08-30 2018-08-30 基于分布式系统的通信方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811006370.0A CN109151033B (zh) 2018-08-30 2018-08-30 基于分布式系统的通信方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN109151033A CN109151033A (zh) 2019-01-04
CN109151033B true CN109151033B (zh) 2022-02-22

Family

ID=64825712

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811006370.0A Active CN109151033B (zh) 2018-08-30 2018-08-30 基于分布式系统的通信方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN109151033B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110311753B (zh) * 2019-06-21 2022-04-15 杭州飞步科技有限公司 通信方法、装置、节点、存储介质及系统
CN112995095B (zh) * 2019-12-13 2023-05-30 北京京东乾石科技有限公司 数据处理方法、装置及计算机可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103259701A (zh) * 2012-12-04 2013-08-21 中国科学院沈阳自动化研究所 面向复杂生产过程管理系统的消息总线实现方法
CN106657264A (zh) * 2016-11-11 2017-05-10 北京百卓网络技术有限公司 分布式系统及其数据同步方法
CN107040403A (zh) * 2016-12-30 2017-08-11 中国舰船研究设计中心 基于dds技术提高分布式系统可靠性的方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8250213B2 (en) * 2009-11-16 2012-08-21 At&T Intellectual Property I, L.P. Methods and apparatus to allocate resources associated with a distributive computing network
CN102664947B (zh) * 2012-04-18 2015-11-04 迈普通信技术股份有限公司 分布式系统中的通知分发方法
CN104754618B (zh) * 2013-12-31 2019-12-06 索尼公司 无线数据传输方法和装置
CN107026878A (zh) * 2016-01-29 2017-08-08 中兴通讯股份有限公司 订阅消息的发布方法及装置
CN107733839B (zh) * 2016-08-11 2021-06-01 北京百度网讯科技有限公司 数据传输方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103259701A (zh) * 2012-12-04 2013-08-21 中国科学院沈阳自动化研究所 面向复杂生产过程管理系统的消息总线实现方法
CN106657264A (zh) * 2016-11-11 2017-05-10 北京百卓网络技术有限公司 分布式系统及其数据同步方法
CN107040403A (zh) * 2016-12-30 2017-08-11 中国舰船研究设计中心 基于dds技术提高分布式系统可靠性的方法

Also Published As

Publication number Publication date
CN109151033A (zh) 2019-01-04

Similar Documents

Publication Publication Date Title
CN108537543B (zh) 区块链数据的并行处理方法、装置、设备和存储介质
CN110708393B (zh) 用于传输数据的方法、装置和系统
CN109194736B (zh) 消息去重方法、装置、电子设备、介质和无人车
CN110134702A (zh) 数据流拼接方法、装置、设备和存储介质
CN113766042A (zh) 一种容器地址的配置方法、系统、装置、设备及介质
CN109669787B (zh) 数据传输方法及装置、存储介质、电子设备
US20090213754A1 (en) Device, System, and Method of Group Communication
CN109151033B (zh) 基于分布式系统的通信方法、装置、电子设备及存储介质
CN109634764A (zh) 工作流控制方法、装置、设备、存储介质和系统
CN110633046A (zh) 一种分布式系统的存储方法、装置、存储设备及存储介质
CN108551481B (zh) 一种文件上传方法、装置、服务器及存储介质
CN107817962B (zh) 一种远程控制方法、装置、控制服务器及存储介质
CN112995261A (zh) 业务表的配置方法、装置、网络设备和存储介质
CN113194162A (zh) 一种数据传输方法、装置、电子设备及介质
CN113037529B (zh) 一种预留带宽分配方法、装置、设备及存储介质
CN107342929B (zh) 一种新消息通知的发送方法、装置及系统
CN109086097B (zh) 一种小程序的启动方法、装置、服务器及存储介质
CN111510499B (zh) 一种通讯方法、装置、设备及存储介质
CN112243045A (zh) 服务数据处理方法、装置、节点结构及电子设备
CN112769876A (zh) 一种设备通道信息获取方法、装置、设备和介质
CN114356925A (zh) 标识生成方法、装置、电子设备及存储介质
CN112364268A (zh) 资源获取方法、装置、电子设备及存储介质
CN109150612B (zh) 一种用于无人车的基于分布式系统的检测方法及电子设备
CN113014409B (zh) 一种组网设备配置的方法、装置、设备及存储介质
CN111008074B (zh) 一种文件处理方法、装置、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant