CN103457748A - 数据传输方法、系统和设备 - Google Patents

Abstract

本发明实施例公开了一种数据传输方法、系统和设备，涉及网络通信领域，用于自动实现数据的汇聚和负载均衡。本发明实施例中，接收端设备将配置信息发送给协调系统，配置信息包括接收端设备需要的数据类型信息和数据广播方式信息；协调系统将各接收端设备对应的配置信息发送给发送端设备；发送端设备在生成一类型的数据后，确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，将该数据推送给数据广播方式为全量广播的各接收端设备；使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备；采用本发明自动实现了数据的汇聚和负载均衡。

Description

数据传输方法、系统和设备

技术领域

本发明涉及信息技术领域，尤其涉及一种数据传输方法、系统和设备。

背景技术

目前局域网内部进行数据传输时，系统开发人员根据实际的需求修改客户端上的配置文件，在配置文件中指定数据传输的目的地，客户端向指定的各目的地(即服务器端)传输数据，其主要的不足在于不能自动实现数据的汇聚和负载均衡，需要系统开发人员修改配置文件来满足实际的业务需求。

数据的汇聚是指对于一个服务器端的应用来说，所有能够产生该应用所需类型的数据的客户端都需要将产生的该类型数据发送给该服务器端；为了达到该数据汇聚的目的，系统开发人员需要在每个能够产生该应用所需类型的数据的客户端上的配置文件中指定该服务器端作为数据传输的目的地，加大了系统开发人员的工作量。

数据的负载均衡是指多个客户端产生的相同类型的数据均衡存储到部署有需要该类型数据的应用的服务器端上，以避免某一个或某几个服务器端由于数据过多而出现异常情况；为了达到该负载均衡的目的，同样需要系统开发人员根据实际情况在每个客户端上的配置文件中指定服务器端作为数据传输的目的地，并且为能够产生相同类型数据的不同客户端指定的服务器端不相同，以达到负载均衡的目的，这也加大了系统开发人员的工作量。

综上，现有技术中不能自动实现数据的汇聚和负载均衡，加大了系统开发人员的工作量。

发明内容

本发明实施例提供一种数据传输方法、系统和设备，用于自动实现数据的汇聚和负载均衡。

一种数据传输方法，该方法包括：

发送端设备从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；

发送端设备在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

一种数据传输方法，该方法包括：

协调系统接收各接收端设备发送的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

协调系统将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

一种发送端设备，该发送端设备包括：

获取单元，用于从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

确定单元，用于在生成一类型的数据后，根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；

发送单元，用于在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

一种协调系统，该协调系统包括多个互相连接的节点设备；

每个节点设备用于：接收来自接收端设备的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；以及，

将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

一种数据传输的系统，该系统包括：

接收端设备，用于将自身的配置信息发送给协调系统，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

协调系统，用于接收各接收端设备发送的配置信息，将各接收端设备对应的配置信息发送给发送端设备；

发送端设备，用于接收协调系统发来的各接收端设备对应的配置信息；在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

本发明实施例提供的方案中，由接收端设备将自身的配置信息发送给协调系统，该配置信息包括接收端设备需要的数据类型信息和数据广播方式信息；协调系统将各接收端设备对应的配置信息发送给发送端设备；发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，并在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备，从而自动实现了数据的汇聚；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备，从而自动实现了负载均衡。

附图说明

图1为本发明实施例提供的数据传输方法流程示意图；

图2为本发明实施例提供的另一数据传输方法流程示意图；

图3为本发明实施例提供的数据传输系统结构示意图；

图4为本发明实施例提供的发送端设备结构示意图；

图5为本发明实施例提供的协调系统结构示意图。

具体实施方式

为了自动实现数据的汇聚和负载均衡，本发明实施例分别针对数据发送侧和网络侧提供一种数据传输方法。本方法中，由接收端设备将自身的配置信息发送给协调系统，该配置信息包括接收端设备需要的数据类型信息和数据广播方式信息；协调系统将各接收端设备对应的配置信息发送给发送端设备；发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，并在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

参见图1，本发明实施例针对数据发送侧提供的数据传输方法，包括以下步骤：

步骤10：发送端设备从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；当然，配置信息还可以包括其他信息，比如对应接收端设备的地址信息等。

步骤11：发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式；

步骤12：发送端设备在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

具体的，步骤10中发送端设备从协调系统获取到的每个接收端设备对应的配置信息，具体实现可以如下：

发送端设备从协调系统获取图(MAP)映射信息，该MAP映射信息中包含多个映射关系，每个映射关系包含第一字段和第二字段，第一字段存储数据类型，第二字段包括第一部分和第二部分，第一部分存储需要该数据类型的数据且数据广播方式为全量广播的接收端设备的地址信息，第二部分存储需要该数据类型的数据且数据广播方式为均衡广播的接收端设备的地址信息；这里，MAP映射信息中包含的映射关系的数据与系统中各接收端设备需要的数据类型的总数目相同，也即，针对每种接收端设备需要的数据类型，MAP映射信息中都包含一个映射关系，该映射关系中的第一字段存储该数据类型。

相应的，步骤11中发送端设备根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，具体实现可以如下：

在获取到的MAP映射信息中查找第一字段存储的数据类型为生成的数据类型的映射关系；将查找到的映射关系中第二字段的第一部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为全量广播的接收端设备；将查找到的映射关系中第二字段的第二部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为均衡广播的接收端设备。

这里，发送端设备可以通过查找映射关系直接找到需要生成的类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，从而有效提高了发送端设备的处理效率。

具体的，步骤12中，发送端设备使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，具体实现可以如下：

获得生成的数据的关键字，该关键字与发送端设备的标识信息相关；根据获得的关键字和数据广播方式为均衡广播的接收端设备的数目生成一个数值c，选取数据广播方式为均衡广播的第c个接收端设备。

这里，发送端设备生成的数据的关键字与发送端设备的标识信息相关，由于各个发送端设备的标识信息不同，那么各发送端设备根据关键字生成的数值c不相同的概率也较大，从而可以使得各发送端设备生成的数据均衡的发送给需要该类型数据的接收端设备，而不是各发送端设备生成的数据集中发送给一个接收端设备，较好的达到了负载均衡的目的。

举例说明，上述根据获得的关键字和数据广播方式为均衡广播的接收端设备的数目生成一个数值c，其具体实现可以如下：

获得的关键字为8个比特的长整型数，b[0]、b[1]、...、b[7]分别代表8个比特位的二进制值，用b[5]、b[3]、b[2]、b[7]组成一个整型数a，然后对b[0]、b[6]取反，用b[0]反b[4]、b[6]反b[1]的结果组成另一个整型数b，按照如下公式计算数值c：c＝(a的平方+b％33)％d，其中d为数据广播方式为均衡广播的接收端设备的数目。

较佳的，由于协调系统中存储的接收端设备的配置信息会发生更新，为了使得发送端设备能够根据较新的配置信息进行数据发送，以提高数据传输的准确率，步骤10中发送端设备每隔设定时间，从协调系统获取每个接收端设备对应的配置信息，并使用最新获取的配置信息覆盖旧的配置信息。

参见图2，本发明实施例针对网络侧提供的数据传输方法，包括以下步骤：

步骤20：协调系统接收各接收端设备发送的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

步骤21：协调系统将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

具体的，该协调系统包括多个节点设备，其中一个节点设备为主节点设备，其他节点设备为从节点设备；

相应的，步骤20中，协调系统接收各接收端设备发送的配置信息，具体实现可以如下：

在各接收端设备与协调系统中的一个节点设备建立连接，并将自身的配置信息发送给连接的节点设备后，协调系统中的主节点设备将接收到的接收端设备的配置信息发送给各从节点设备；协调系统中的各从节点设备将接收到的接收端设备的配置信息发送给主节点设备，主节点设备将从节点设备发来的接收端设备的配置信息转发给其他从节点设备；这样，协调系统中的每个节点设备都获得了各接收端设备对应的配置信息；

相应的，步骤21中协调系统将各接收端设备对应的配置信息发送给该发送端设备，具体实现可以如下：

在该发送端设备与协调系统中的一个节点设备建立连接后，与该发送端设备建立连接的节点设备将自身存储的各接收端设备对应的配置信息发送给该发送端设备。

进一步的，为了提高系统的可用性，协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新；和/或，

协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新。

具体的，协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新，具体包括以下方法中的一个或任意组合：

方法1：协调系统中的从节点设备在监测到与自身连接的接收端设备异常(比如宕机)后，将存储的该接收端设备的配置信息删除，并通知协调系统中的主节点设备删除该接收端设备的配置信息，主节点设备在本地删除该接收端设备的配置信息后，通知协调系统中的其他从节点设备删除该接收端设备的配置信息，其他从节点设备根据通知在本地删除该接收端设备的配置信息；

方法2：协调系统中的从节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

方法3：协调系统中的从节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息，并将该修改后的配置信息发送给协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息。

本方案在从节点设备上更新配置信息后，将更新上报到主节点设备，在主节点设备上进行事物的控制，保证数据更新的原子性，提高了系统的可用性。

具体的，协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新，具体包括以下方法中的一个或任意组合：

方法1：协调系统中的主节点设备在监测到与自身连接的接收端设备异常(比如宕机)后，将存储的该接收端设备的配置信息删除，并通知协调系统中的各从节点设备删除该接收端设备的配置信息，各从节点设备根据通知在本地删除该接收端设备的配置信息；

方法2：协调系统中的主节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

方法3：协调系统中的主节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的该修改后的配置信息。

具体的，协调系统中的主节点设备可以是按照如下方法确定的：

协调系统启动后，该协调系统中的各节点设备根据本设备的资源使用情况计算自身的机器空闲值，并将计算出的机器空闲值广播给协调系统中的其他节点设备；各节点设备将机器空闲值最大的节点设备确定为主节点设备。比如，在计算机器空闲值时，可以根据本设备的CPU使用率、文件系统使用量、机器内存大小及其各自权重来计算机器空闲值，具体计算方法有多种，可以根据预先设定的公式进行计算。

在主节点设备故障比如宕机后，按照同样的方法重新选取主节点设备，从而保证系统的高可用性。

较佳的，协调系统通过心跳机制维护整个系统的可用性，具体的，协调系统中的从节点设备每隔一段时间向主节点设备发送心跳包，主节点设备通过是否按时检测到从节点设备的心跳包来判断从节点设备是否出现异常，若出现异常，则及时释放相关资源。

参见图3，本发明实施例提供一种数据传输的系统，该系统包括：

接收端设备30，用于将自身的配置信息发送给协调系统，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

协调系统31，用于接收各接收端设备发送的配置信息，将各接收端设备对应的配置信息发送给发送端设备；

发送端设备32，用于接收协调系统发来的各接收端设备对应的配置信息；在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

协调系统中的各节点设备之间、发送端设备与协调系统之间、接收端设备与协调系统之间可以采用SOCKET方式连接。

下面结合具体实施例和附图3对本发明进行说明：

步骤S1：启动协调系统；

步骤S2：对于每个接收端设备，该接收端设备在与协调系统中的一个节点设备建立连接后，将自身的配置信息发送给连接的节点设备；若该节点设备为协调系统中的主节点设备，则主节点设备将接收到的接收端设备的配置信息发送给各从节点设备；若该节点设备为协调系统中的从节点设备，该从节点设备将接收到的接收端设备的配置信息发送给主节点设备，主节点设备将从节点设备发来的接收端设备的配置信息转发给其他从节点设备；

在接收端设备与协调系统中的节点设备建立连接之前，使用数据的应用实现对外的接口，并将数据处理的方法注册在接收端设备中。

步骤S3：对于每个发送端设备，该发送端设备在与协调系统中的一个节点设备建立连接后，从建立连接的节点设备获得每个接收端设备对应的配置信息；

发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式；在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

在发送端设备与协调系统中的节点设备建立连接之前，生成数据的应用实现对外的接口，由该接口将生成的数据通过接口推送给发送端设备的数据总线，数据总线进行数据的发送。

步骤S4：接收端设备在接收到发送端设备的数据后，该接收端设备根据接收到的数据的类型调用相应的数据处理方法，对接收到的数据进行处理。

本实施例中使用的数据传输协议可以是自定义的TLB协议，根据该协议传输的数据包包括两个字节的包标志、14字节的包头标志(短整形的数据类型、长整形的Key、整形的包长)和数据字节。

本实施例通过低消耗的协调系统来记录数据的消费方即接收端设备需要的数据类型及其数据广播方式；协调系统内部通过心跳机制保证系统的高可靠性。

本实施例通过对底层传输的数据封装，大大减小了其他开发者的开发周期，使其更加专注在其自身逻辑的实现上，而不用担心数据的传输问题。

本实施例在进行大数据的汇聚及均衡存储时，能够达到最理想的状态，同时通过协调系统保证了系统的高可用、高可靠性。

参见图4，本发明实施例提供一种数据传输的发送端设备，可以应用于图3所示的数据传输的系统中，该发送端设备包括：

获取单元40，用于从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

确定单元41，用于在生成一类型的数据后，根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；

发送单元42，用于在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

进一步的，所述获取单元40具体用于：

从协调系统获取图MAP映射信息，该MAP映射信息中包含多个映射关系，每个映射关系包含第一字段和第二字段，第一字段存储数据类型，第二字段包括第一部分和第二部分，第一部分存储需要该数据类型的数据且数据广播方式为全量广播的接收端设备的地址信息，第二部分存储需要该数据类型的数据且数据广播方式为均衡广播的接收端设备的地址信息；

所述确定单元41具体用于：

在生成一类型的数据后，在获取到的所述MAP映射信息中查找第一字段存储的数据类型为生成的数据类型的映射关系；将查找到的映射关系中第二字段的第一部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为全量广播的接收端设备；将查找到的映射关系中第二字段的第二部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为均衡广播的接收端设备。

进一步的，所述发送单元42具体用于：按照如下方法使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备：

获得生成的数据的关键字，该关键字与发送端设备的标识信息相关；

根据所述关键字和数据广播方式为均衡广播的接收端设备的数目生成一个数值c，选取数据广播方式为均衡广播的第c个接收端设备。

进一步的，所述获取单元40具体用于：

每隔设定时间，从协调系统获取每个接收端设备对应的配置信息，并使用最新获取的配置信息覆盖旧的配置信息。

参见图5，本发明实施例提供一种数据传输的协调系统，可以应用于图3所示的数据传输的系统中，该协调系统包括多个互相连接的节点设备50；

每个节点设备50用于：接收来自接收端设备的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；以及，

将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

进一步的，所述协调系统中的一个节点设备为主节点设备，其他节点设备50为从节点设备；

在各接收端设备与所述协调系统中的一个节点设备建立连接，并将自身的配置信息发送给连接的节点设备后，所述协调系统中的主节点设备将接收到的接收端设备的配置信息发送给各从节点设备；所述协调系统中的各从节点设备将接收到的接收端设备的配置信息发送给主节点设备，主节点设备将从节点设备发来的接收端设备的配置信息转发给其他从节点设备；

每个节点设备在发送端设备与该节点设备建立连接后，将自身存储的各接收端设备对应的配置信息发送给该发送端设备。

进一步的，所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新；和/或，

所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新。

进一步的，所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新，具体包括以下情况中的一个或任意组合：

情况1：所述协调系统中的从节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的主节点设备删除该接收端设备的配置信息，主节点设备在本地删除该接收端设备的配置信息后，通知所述协调系统中的其他从节点设备删除该接收端设备的配置信息，其他从节点设备根据通知在本地删除该接收端设备的配置信息；

情况2：所述协调系统中的从节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

情况3：所述协调系统中的从节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息，并将该修改后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息。

进一步的，所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新，具体包括以下情况中的一个或任意组合：

情况1：所述协调系统中的主节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的各从节点设备删除该接收端设备的配置信息，各从节点设备根据通知在本地删除该接收端设备的配置信息；

情况2：所述协调系统中的主节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

情况3：所述协调系统中的主节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的该修改后的配置信息。

进一步的，所述协调系统启动后，该协调系统中的各节点设备根据本设备的资源使用情况计算自身的机器空闲值，并将计算出的机器空闲值广播给所述协调系统中的其他节点设备；

各节点设备将机器空闲值最大的节点设备确定为主节点设备。

本发明可以应用在电信信令监测领域，发送端设备可以为信令接入解码服务器，相应的接收端设备可以为信令监测系统数据处理服务器。

综上，本发明的有益效果包括：

本发明实施例提供的方案中，由接收端设备将自身的配置信息发送给协调系统，该配置信息包括接收端设备需要的数据类型信息和数据广播方式信息；协调系统将各接收端设备对应的配置信息发送给发送端设备；发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要该类型的数据的接收端设备以及每个需要该类型的数据的接收端设备的数据广播方式，并在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备，从而自动实现了数据的汇聚；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备，从而自动实现了负载均衡。

本发明实施例还可以实现热插拔，即新增一个接收端设备或者发送端设备，不必重启整个系统。

本发明实施例还可以实现高可靠性，即当接收端设备、发送端设备宕机或者进程僵死，系统会自动断开与此设备的传输连接，提高了系统的可靠性。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (21)

1.一种数据传输方法，其特征在于，该方法包括：

发送端设备从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

发送端设备在生成一类型的数据后，根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；

发送端设备在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

2.如权利要求1所述的方法，其特征在于，所述发送端设备从协调系统获取到的每个接收端设备对应的配置信息，具体包括：

发送端设备从协调系统获取图MAP映射信息，该MAP映射信息中包含多个映射关系，每个映射关系包含第一字段和第二字段，第一字段存储数据类型，第二字段包括第一部分和第二部分，第一部分存储需要该数据类型的数据且数据广播方式为全量广播的接收端设备的地址信息，第二部分存储需要该数据类型的数据且数据广播方式为均衡广播的接收端设备的地址信息；

所述根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，具体包括：

在获取到的所述MAP映射信息中查找第一字段存储的数据类型为生成的数据类型的映射关系；将查找到的映射关系中第二字段的第一部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为全量广播的接收端设备；将查找到的映射关系中第二字段的第二部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为均衡广播的接收端设备。

3.如权利要求1所述的方法，其特征在于，所述使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，具体包括：

获得生成的数据的关键字，该关键字与发送端设备的标识信息相关；

根据所述关键字和数据广播方式为均衡广播的接收端设备的数目生成一个数值c，选取数据广播方式为均衡广播的第c个接收端设备。

4.如权利要求1-3中任一所述的方法，其特征在于，所述发送端设备从协调系统获取每个接收端设备对应的配置信息，具体包括：

发送端设备每隔设定时间，从协调系统获取每个接收端设备对应的配置信息，并使用最新获取的配置信息覆盖旧的配置信息。

5.一种数据传输方法，其特征在于，该方法包括：

协调系统接收各接收端设备发送的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

协调系统将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

6.如权利要求5所述的方法，其特征在于，所述协调系统包括多个节点设备，其中一个节点设备为主节点设备，其他节点设备为从节点设备；

所述协调系统接收各接收端设备发送的配置信息，具体包括：

在各接收端设备与所述协调系统中的一个节点设备建立连接，并将自身的配置信息发送给连接的节点设备后，所述协调系统中的主节点设备将接收到的接收端设备的配置信息发送给各从节点设备；所述协调系统中的各从节点设备将接收到的接收端设备的配置信息发送给主节点设备，主节点设备将从节点设备发来的接收端设备的配置信息转发给其他从节点设备；

所述协调系统将各接收端设备对应的配置信息发送给该发送端设备，具体包括：

在该发送端设备与所述协调系统中的一个节点设备建立连接后，与该发送端设备建立连接的节点设备将自身存储的各接收端设备对应的配置信息发送给该发送端设备。

7.如权利要求6所述的方法，其特征在于，该方法进一步包括：

所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新；和/或，

所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新。

8.如权利要求7所述的方法，其特征在于，所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新，具体包括以下方法中的一个或任意组合：

方法1：所述协调系统中的从节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的主节点设备删除该接收端设备的配置信息，主节点设备在本地删除该接收端设备的配置信息后，通知所述协调系统中的其他从节点设备删除该接收端设备的配置信息，其他从节点设备根据通知在本地删除该接收端设备的配置信息；

方法2：所述协调系统中的从节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

方法3：所述协调系统中的从节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息，并将该修改后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息。

9.如权利要求7所述的方法，其特征在于，所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新，具体包括以下方法中的一个或任意组合：

方法1：所述协调系统中的主节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的各从节点设备删除该接收端设备的配置信息，各从节点设备根据通知在本地删除该接收端设备的配置信息；

方法2：所述协调系统中的主节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

方法3：所述协调系统中的主节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的该修改后的配置信息。

10.如权利要求6-9中任一所述的方法，其特征在于，所述协调系统中的主节点设备是按照如下方法确定的：

所述协调系统启动后，该协调系统中的各节点设备根据本设备的资源使用情况计算自身的机器空闲值，并将计算出的机器空闲值广播给所述协调系统中的其他节点设备；

各节点设备将机器空闲值最大的节点设备确定为主节点设备。

11.一种发送端设备，其特征在于，该发送端设备包括：

获取单元，用于从协调系统获取每个接收端设备对应的配置信息，每个接收端设备对应的配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

确定单元，用于在生成一类型的数据后，根据获取到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；

发送单元，用于在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

12.如权利要求11所述的发送端设备，其特征在于，所述获取单元具体用于：

从协调系统获取图MAP映射信息，该MAP映射信息中包含多个映射关系，每个映射关系包含第一字段和第二字段，第一字段存储数据类型，第二字段包括第一部分和第二部分，第一部分存储需要该数据类型的数据且数据广播方式为全量广播的接收端设备的地址信息，第二部分存储需要该数据类型的数据且数据广播方式为均衡广播的接收端设备的地址信息；

所述确定单元具体用于：

在生成一类型的数据后，在获取到的所述MAP映射信息中查找第一字段存储的数据类型为生成的数据类型的映射关系；将查找到的映射关系中第二字段的第一部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为全量广播的接收端设备；将查找到的映射关系中第二字段的第二部分存储的地址信息对应的接收端设备确定为需要生成的类型的数据且数据广播方式为均衡广播的接收端设备。

13.如权利要求11所述的发送端设备，其特征在于，所述发送单元具体用于：按照如下方法使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备：

获得生成的数据的关键字，该关键字与发送端设备的标识信息相关；

根据所述关键字和数据广播方式为均衡广播的接收端设备的数目生成一个数值c，选取数据广播方式为均衡广播的第c个接收端设备。

14.如权利要求11-13中任一所述的发送端设备，其特征在于，所述获取单元具体用于：

每隔设定时间，从协调系统获取每个接收端设备对应的配置信息，并使用最新获取的配置信息覆盖旧的配置信息。

15.一种协调系统，其特征在于，该协调系统包括多个互相连接的节点设备；

每个节点设备用于：接收来自接收端设备的配置信息，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；以及，

将各接收端设备对应的配置信息发送给发送端设备，以使该发送端设备在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式，在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，并将该数据推送给选取的接收端设备。

16.如权利要求15所述的协调系统，其特征在于，所述协调系统中的一个节点设备为主节点设备，其他节点设备为从节点设备；

在各接收端设备与所述协调系统中的一个节点设备建立连接，并将自身的配置信息发送给连接的节点设备后，所述协调系统中的主节点设备将接收到的接收端设备的配置信息发送给各从节点设备；所述协调系统中的各从节点设备将接收到的接收端设备的配置信息发送给主节点设备，主节点设备将从节点设备发来的接收端设备的配置信息转发给其他从节点设备；

每个节点设备在发送端设备与该节点设备建立连接后，将自身存储的各接收端设备对应的配置信息发送给该发送端设备。

17.如权利要求16所述的协调系统，其特征在于，所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新；和/或，

所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新。

18.如权利要求17所述的协调系统，其特征在于，所述协调系统中的从节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的主节点设备进行相应更新，主节点设备在进行相应更新后通知所述协调系统中的其他从节点设备进行相应更新，其他从节点设备根据通知进行相应更新，具体包括以下情况中的一个或任意组合：

情况1：所述协调系统中的从节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的主节点设备删除该接收端设备的配置信息，主节点设备在本地删除该接收端设备的配置信息后，通知所述协调系统中的其他从节点设备删除该接收端设备的配置信息，其他从节点设备根据通知在本地删除该接收端设备的配置信息；

情况2：所述协调系统中的从节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

情况3：所述协调系统中的从节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的主节点设备，主节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息，并将该修改后的配置信息发送给所述协调系统中的其他从节点设备，其他从节点设备将本地存储的该接收端设备的配置信息替换为接收到的修改后的配置信息。

19.如权利要求17所述的协调系统，其特征在于，所述协调系统中的主节点设备在自身存储的接收端设备的配置信息得到更新后，通知所述协调系统中的各从节点设备进行相应更新，各从节点设备根据通知进行相应更新，具体包括以下情况中的一个或任意组合：

情况1：所述协调系统中的主节点设备在监测到与自身连接的接收端设备异常后，将存储的该接收端设备的配置信息删除，并通知所述协调系统中的各从节点设备删除该接收端设备的配置信息，各从节点设备根据通知在本地删除该接收端设备的配置信息；

情况2：所述协调系统中的主节点设备在接收到与自身连接的接收端设备发送的更新后的配置信息后，将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息，并将该更新后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的更新后的配置信息；

情况3：所述协调系统中的主节点设备在外部系统对该从节点设备存储的接收端设备的配置信息进行修改后，将修改后的配置信息发送给所述协调系统中的各从节点设备，各从节点设备将本地存储的该接收端设备的配置信息替换为接收到的该修改后的配置信息。

20.如权利要求16-19中任一所述的协调系统，其特征在于，所述协调系统启动后，该协调系统中的各节点设备根据本设备的资源使用情况计算自身的机器空闲值，并将计算出的机器空闲值广播给所述协调系统中的其他节点设备；

各节点设备将机器空闲值最大的节点设备确定为主节点设备。

21.一种数据传输的系统，其特征在于，该系统包括：

接收端设备，用于将自身的配置信息发送给协调系统，该配置信息包括对应接收端设备需要的数据类型信息和数据广播方式信息；

协调系统，用于接收各接收端设备发送的配置信息，将各接收端设备对应的配置信息发送给发送端设备；

发送端设备，用于接收协调系统发来的各接收端设备对应的配置信息；在生成一类型的数据后，根据接收到的配置信息确定需要所述类型的数据的接收端设备以及每个需要所述类型的数据的接收端设备的数据广播方式；在确定结果中包含数据广播方式为全量广播的接收端设备时，将该数据推送给数据广播方式为全量广播的各接收端设备；在确定结果中包含数据广播方式为均衡广播的接收端设备时，使用均衡算法从数据广播方式为均衡广播的各接收端设备中选取一个接收端设备，将该数据推送给选取的接收端设备。

Images