CN112632189A - 一种数据同步系统及方法 - Google Patents

Abstract

本申请实施例公开了一种数据同步系统及方法，系统包括：第一目标服务器和第二目标服务器；第一目标服务器，用于接收来自第一主服务器的目标数据，还用于向第二目标服务器发送目标数据；第二目标服务器，用于接收来自第一目标服务器的目标数据，还用于将目标数据同步给第二主服务器。由此可见，本申请实施例提供的数据同步系统，通过第一目标服务器实时获取第一集群的第一主服务器的目标数据，并将目标数据发送给第二目标服务器，第二目标服务器接收到目标数据之后，向第二集群的第二主服务器实时的同步目标数据，基于此，第一集群的第一主服务器和第二集群的第二主服务器实现数据同步，并且在数据的同步过程中保证了数据的一致性。

Description

一种数据同步系统及方法

技术领域

本申请涉及计算机领域，尤其涉及一种数据同步系统及方法。

背景技术

目前对于数据库的应用很多，为了提高数据库的利用效率，数据库可以相互连接，形成集群，以便应对高并发和高可用的处理数据需求。如图1所示，在数据库的集群(Cluster)中，通常会有主服务器和从服务器，主服务器称为主节点(Master)，从服务器称为从节点(Slave)，通常而言，主节点之间相互连接，每一个主节点都有从节点。虽然集群内的数据库能够提供高可用的数据处理，但是不同集群之间的数据库的数据是相互独立的，不能实现数据的同步，制约了应用不同集群的数据库进行数据处理的需求。

综上，当前不同集群的数据库存在数据不能同步的问题。

发明内容

为了解决现有技术中不同集群的数据库存在数据不能同步的问题，本申请提供了一种数据同步系统及方法，能够实现不同集群的数据库数据同步。

本申请实施例提供了一种数据同步系统，所述系统包括：第一目标服务器和第二目标服务器；

所述第一目标服务器，用于接收来自第一主服务器的目标数据，还用于向所述第二目标服务器发送所述目标数据，所述第一主服务器属于第一服务器集群；

所述第二目标服务器，用于接收来自所述第一目标服务器的目标数据，还用于将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

可选的，所述第一主服务器还用于向所述第一目标服务器发送目标数据之前，接收所述第一目标服务器发送的第一消息，所述第一消息用于指示所述第一目标服务器为所述第一主服务器的从服务器。

可选的，所述第二目标服务器具体用于将所述目标数据存入目标文件，将所述目标文件同步给所述第二服务器的存储设备。

可选的，所述第二主服务器具体用于将所述存储设备中的目标文件中的所述目标数据存入内存中。

可选的，所述第一目标服务器还用于将所述目标数据进行加密，得到加密数据，向所述第二目标服务器发送所述加密数据。

可选的，所述第二目标服务器还用于接收来自所述第一目标服务器的所述加密数据，将所述加密数据进行解密，得到所述目标数据。

可选的，所述第一目标服务器还用于将所述目标数据进行压缩，得到压缩数据，向所述第二目标服务器发送所述压缩数据。

可选的，所述第二目标服务器还用于接收来自所述第一目标服务器的所述压缩数据，将所述压缩数据进行解压，得到所述目标数据。

可选的，所述系统还包括：第一备用服务器和检测服务器；

所述第一备用服务器，用于接收所述第一目标服务器发送的所述目标数据，并对所述目标数据进行存储；

所述检测服务器，用于检测所述第一目标服务器是否出现故障，若是，则向所述第一备用服务器发送启动指令，所述启动指令用于所述第一备用服务器替换所述第一目标服务器进行所述目标数据的处理。

本申请实施例还提供了一种数据同步方法，所述方法包括：

第一目标服务器接收来自第一主服务器的目标数据，所述第一主服务器属于第一服务器集群；

所述第一目标服务器向第二目标服务器发送所述目标数据，以使所述第二目标服务器将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

本申请实施例还提供了一种数据同步方法，所述方法包括：

第二目标服务器接收来自第一目标服务器的目标数据，所述目标数据由第一主服务器发送给所述第一目标服务器，所述第一主服务器属于第一服务器集群；

所述第二目标服务器将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

与现有技术相比，本申请至少具有以下优点：

本申请实施例提供了一种数据同步系统及方法，所述系统包括：第一目标服务器和第二目标服务器；所述第一目标服务器，用于接收来自第一主服务器的目标数据，还用于向所述第二目标服务器发送所述目标数据，所述第一主服务器属于第一服务器集群；所述第二目标服务器，用于接收来自所述第一目标服务器的目标数据，还用于将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。由此可见，本申请实施例提供的数据同步系统，通过第一目标服务器实时获取第一集群的第一主服务器的目标数据，并将目标数据发送给第二目标服务器，第二目标服务器接收到目标数据之后，向第二集群的第二主服务器实时的同步目标数据，基于此，第一集群的第一主服务器和第二集群的第二主服务器实现数据同步，并且在数据的同步过程中保证了数据的一致性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本申请提供的当前的数据库集群的架构图；

图2为本申请提供的一种数据同步系统的应用场景交互图；

图3为本申请提供的一种数据同步系统实施例的结构框图；

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

参见图2，该图为本申请实施例提供的一种数据同步系统的应用场景交互图。

本实施例提供的数据同步系统的应用场景交互图包括如下步骤：

步骤S201：第一目标服务器接收来自第一主服务器的目标数据，所述第一主服务器属于第一服务器集群。

在本申请的实施例中，第一目标服务器通过伪装成第一主服务器的从服务器，从第一主服务器获取目标数据。第一主服务器接收第一目标服务器发送的第一消息，第一消息用于指示第一目标服务器为第一主服务器的从服务器。

作为一种示例，数据库为Redis，第一目标服务器中的Redis软件的配置信息可以定义为某一个主服务器的从服务器，基于Redis协议从服务器可以实时的从主服务器获取数据并保存，因此，第一目标服务器作为伪从服务器，可以从主服务器实时的获取数据并保存。

在本申请的实施例中，第一主服务器属于第一服务器集群。第一主服务器可以向伪装成从服务器的第一目标服务器发送目标数据。第一目标服务器接收到目标数据中，可以进行数据的保存，将数据保存在存储设备中，以便之后的传输。具体的，存储设备可以是磁盘。

步骤S202：所述第一目标服务器向第二目标服务器发送所述目标数据。

步骤S203：第二目标服务器接收来自第一目标服务器的目标数据。

在本申请的实施例中，第一目标服务器将目标数据传输给第二目标服务器。第二目标服务器为第二主服务器的伪从服务器，第二主服务器属于第二服务器集群。

在实际应用中，出于安全考虑，第一目标服务器向第二目标服务器传输目标数据时可以进行数据加密。第一目标服务器将目标数据进行加密，得到加密数据，向第二目标服务器发送加密数据。第二目标服务器接收来自第一目标服务器的加密数据，将加密数据进行解密，得到目标数据。

在实际应用中，为了减少数据传输过程中对于资源的开销，可以将传输的目标数据进行压缩后再传输。第一目标服务器将目标数据进行压缩，得到压缩数据，向第二目标服务器发送压缩数据。第二目标服务器接收来自第一目标服务器的压缩数据，将压缩数据进行解压，得到目标数据。

在本申请的实施例中，第二目标服务器在接收到第一目标服务器发送的目标数据之后，可以进行数据的保存，将数据保存在存储设备中，以便之后的传输。具体的，存储设备可以是磁盘。

步骤S204：所述第二目标服务器将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

在本申请的实施例中，第二目标服务器将目标数据同步给第二主服务器。第二主服务器属于第二服务器集群，接收第二目标服务器同步的目标数据。

作为一种实现方式，第二目标服务器将目标数据存入目标文件，将目标文件同步给第二服务器的存储设备中。具体的，存储设备可以是硬盘或磁盘。第二主服务器将存储设备中的目标文件中的目标数据存入内存中。

由此可见，本申请实施例提供的数据同步方法，通过第一目标服务器实时获取第一集群的第一主服务器的目标数据，并将目标数据发送给第二目标服务器，第二目标服务器接收到目标数据之后，向第二集群的第二主服务器实时的同步目标数据，基于此，第一集群的第一主服务器和第二集群的第二主服务器实现数据同步，并且在数据的同步过程中保证了数据的一致性。

参见图3，该图为本申请实施例提供的一种数据同步系统的结构框图。

本实施例提供的数据同步系统300包括：第一目标服务器310和第二目标服务器320。第一目标服务器和第二目标服务器是实现数据同步和数据传输功能的服务器。具体的，第一目标服务器和第二目标服务器可以是具有数据库软件并且具有数据传输和数据同步功能的服务器。作为一种示例，数据库为Redis，第一目标服务器可以是具有Redis软件，并且具有数据传输和数据同步功能的服务器。具体的，第一目标服务器可以对应一台主服务器，也可以对应多台主服务器。

在本申请的实施例中，第一目标服务器对应一台主服务器，通过伪装成第一主服务器的从服务器，从第一主服务器获取目标数据。第一主服务器接收第一目标服务器发送的第一消息，第一消息用于指示第一目标服务器为第一主服务器的从服务器。

作为一种示例，数据库为Redis，第一目标服务器中的Redis软件的配置信息可以定义为某一个主服务器的从服务器，基于Redis协议从服务器可以实时的从主服务器获取数据并保存，因此，第一目标服务器作为伪从服务器，可以从主服务器实时的获取数据并保存。

在本申请的实施例中，第一主服务器属于第一服务器集群。第一主服务器可以向伪装成从服务器的第一目标服务器发送目标数据。第一目标服务器接收到目标数据中，可以进行数据的保存，将数据保存在存储设备中，以便之后的传输。具体的，存储设备可以是磁盘。第一目标服务器将目标数据传输给第二目标服务器。第二目标服务器为第二主服务器的伪从服务器，第二主服务器属于第二服务器集群。

在实际应用中，出于安全考虑，第一目标服务器向第二目标服务器传输目标数据时可以进行数据加密。第一目标服务器将目标数据进行加密，得到加密数据，向第二目标服务器发送加密数据。第二目标服务器接收来自第一目标服务器的加密数据，将加密数据进行解密，得到目标数据。

在实际应用中，为了减少数据传输过程中对于资源的开销，可以将传输的目标数据进行压缩后再传输。第一目标服务器将目标数据进行压缩，得到压缩数据，向第二目标服务器发送压缩数据。第二目标服务器接收来自第一目标服务器的压缩数据，将压缩数据进行解压，得到目标数据。

在本申请的实施例中，第二目标服务器在接收到第一目标服务器发送的目标数据之后，可以进行数据的保存，将数据保存在存储设备中，以便之后的传输。具体的，存储设备可以是磁盘。第二目标服务器将目标数据同步给第二主服务器。第二主服务器属于第二服务器集群，接收第二目标服务器同步的目标数据。

作为一种实现方式，第二目标服务器将目标数据存入目标文件，将目标文件同步给第二服务器的存储设备中。具体的，存储设备可以是硬盘或磁盘。第二主服务器将存储设备中的目标文件中的目标数据存入内存中。

在本申请的实施例中，数据同步系统还可以包括：第一备用服务器330和检测服务器340。第一备用服务器是第一目标服务器的备用设备，当第一目标服务器出现故障时，第一备用服务器可以接替第一目标服务器的数据处理工作，继续进行数据处理，例如数据的传输等。具体的，每一台第一目标服务器都有一个第一备用服务器。第一备用服务器，用于接收第一目标服务器发送的目标数据，并对目标数据进行存储。第一备用服务器实时获取第一目标服务器的目标数据，以便在第一目标服务器出现故障后立即接替第一目标服务器。检测服务器，用于检测第一目标服务器是否出现故障，若是，则向第一备用服务器发送启动指令，启动指令用于第一备用服务器替换第一目标服务器进行目标数据的处理。检测服务器主要是针对第一目标服务器出现故障就出现数据传输中断的情况，当检测服务器检测到第一目标服务器出现故障后，就立即启动第一备用服务器接替第一目标服务器的工作，继续进行数据处理。

在本申请的实施例中，数据同步系统还可以包括：命令行工具CLI和用户界面webUI。命令行工具CLI，用于管理服务器的元信息数据。用户界面web UI用于用户进行信息配置和信息查询。

在本申请的实施例中，数据在进行传输或同步的过程中，可以禁止主服务器进行数据的处理工作，以免增加新的数据，破坏数据的一致性或传输过程数据的丢失。

在本申请的实施例中，数据在进行传输或同步的过程中，可以进行数据的回滚或重试，以便保证数据传输时的数据一致。数据回滚可以将数据回滚到最初始的状态。数据重试可以在数据管理界面人工介入，修复数据传输过程中的异常条件，就可以继续进行数据的传输。

本申请实施例提供了一种数据同步系统及方法，所述系统包括：所述第一目标服务器，用于接收来自第一主服务器的目标数据，还用于向所述第二目标服务器发送所述目标数据，所述第一主服务器属于第一服务器集群；所述第二目标服务器，用于接收来自所述第一目标服务器的目标数据，还用于将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。由此可见，本申请实施例提供的数据同步系统，通过第一目标服务器实时获取第一集群的第一主服务器的目标数据，并将目标数据发送给第二目标服务器，第二目标服务器接收到目标数据之后，向第二集群的第二主服务器实时的同步目标数据，基于此，第一集群的第一主服务器和第二集群的第二主服务器实现数据同步，并且在数据的同步过程中保证了数据的一致性。

当介绍本申请的各种实施例的元件时，冠词“一”、“一个”、“这个”和“所述”都意图表示有一个或多个元件。词语“包括”、“包含”和“具有”都是包括性的并意味着除了列出的元件之外，还可以有其它元件。

需要说明的是，本领域普通技术人员可以理解实现上述方法实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccess Memory,RAM)等。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元及模块可以是或者也可以不是物理上分开的。另外，还可以根据实际的需要选择其中的部分或者全部单元和模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (11)

1.一种数据同步系统，其特征在于，所述系统包括：第一目标服务器和第二目标服务器；

所述第一目标服务器，用于接收来自第一主服务器的目标数据，还用于向所述第二目标服务器发送所述目标数据，所述第一主服务器属于第一服务器集群；

所述第二目标服务器，用于接收来自所述第一目标服务器的目标数据，还用于将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

2.根据权利要求1所述的系统，其特征在于，所述第一主服务器还用于向所述第一目标服务器发送目标数据之前，接收所述第一目标服务器发送的第一消息，所述第一消息用于指示所述第一目标服务器为所述第一主服务器的从服务器。

3.根据权利要求1所述的系统，其特征在于，所述第二目标服务器具体用于将所述目标数据存入目标文件，将所述目标文件同步给所述第二服务器的存储设备。

4.根据权利要求3所述的系统，其特征在于，所述第二主服务器具体用于将所述存储设备中的目标文件中的所述目标数据存入内存中。

5.根据权利要求1所述的系统，其特征在于，所述第一目标服务器还用于将所述目标数据进行加密，得到加密数据，向所述第二目标服务器发送所述加密数据。

6.根据权利要求5所述的系统，其特征在于，所述第二目标服务器还用于接收来自所述第一目标服务器的所述加密数据，将所述加密数据进行解密，得到所述目标数据。

7.根据权利要求1所述的系统，其特征在于，所述第一目标服务器还用于将所述目标数据进行压缩，得到压缩数据，向所述第二目标服务器发送所述压缩数据。

8.根据权利要求7所述的系统，其特征在于，所述第二目标服务器还用于接收来自所述第一目标服务器的所述压缩数据，将所述压缩数据进行解压，得到所述目标数据。

9.根据权利要求1所述的系统，其特征在于，所述系统还包括：第一备用服务器和检测服务器；

所述第一备用服务器，用于接收所述第一目标服务器发送的所述目标数据，并对所述目标数据进行存储；

所述检测服务器，用于检测所述第一目标服务器是否出现故障，若是，则向所述第一备用服务器发送启动指令，所述启动指令用于所述第一备用服务器替换所述第一目标服务器进行所述目标数据的处理。

10.一种数据同步方法，其特征在于，所述方法包括：

第一目标服务器接收来自第一主服务器的目标数据，所述第一主服务器属于第一服务器集群；

所述第一目标服务器向第二目标服务器发送所述目标数据，以使所述第二目标服务器将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

11.一种数据同步方法，其特征在于，所述方法包括：

第二目标服务器接收来自第一目标服务器的目标数据，所述目标数据由第一主服务器发送给所述第一目标服务器，所述第一主服务器属于第一服务器集群；

所述第二目标服务器将所述目标数据同步给第二主服务器，所述第二主服务器属于第二服务器集群。

Images