CN109905457A - 主从服务器数据同步方法、装置、计算机设备和存储介质 - Google Patents

Abstract

本发明涉及一种主从服务器的数据同步方法、装置、计算机设备和存储介质，该方法包括获取用于主服务器和从服务器进行同步的数据，将该数据发送给消息队列，从服务器可以对该消息队列进行监听，在该消息队列接收到数据时获取该数据，使得该数据无需在主服务器上进行缓存，而直接将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免复制积压缓冲区设置不合理影响数据同步效率的缺陷，提高数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，既能确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

Description

主从服务器数据同步方法、装置、计算机设备和存储介质

技术领域

本发明涉及数据处理技术领域，特别是涉及一种主从服务器数据同步方法、主从服务器数据同步装置、计算机设备和计算机可读存储介质。

背景技术

主从服务器架构是部署如Redis数据库服务器等服务器集群时采用的架构，其中Redis是一个开源的支持网络、可基于内存亦可持久化的日志型、Key-Value数据库。主从服务器架构通常包括一个主服务器和多个从服务器，主从服务器之间使用网络连接进行通信，对主从服务器的修改操作一般是在主服务器上进行的，而从服务器则从主服务器同步数据并提供数据读取服务，以分担主服务器的压力。

在传统技术当中，主从服务器的同步机制主要是主服务器将需要同步的数据发送给所有的从服务器，使得从服务器的数据和主服务器保持一致，而主服务器会将需要进行同步的数据通过在主服务器上维护的复制积压缓冲区机制进行缓存。但这种技术容易由于主服务器维护的复制积压缓冲区设置得不合理降低主从服务器数据同步的效率。

发明内容

基于此，有必要针对传统技术主从服务器数据同步的效率低的技术问题，提供一种主从服务器数据同步方法、主从服务器数据同步装置、计算机设备和计算机可读存储介质。

一种主从服务器的数据同步方法，包括步骤：

获取用于主服务器和从服务器进行同步的数据；

将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

一种主从服务器的数据同步方法，包括步骤：

对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；

若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

一种主从服务器的数据同步装置，包括：

第一获取模块，用于获取用于主服务器和从服务器进行同步的数据；

发送模块，用于将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

一种主从服务器的数据同步装置，包括：

监听模块，用于对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；

第二获取模块，用于若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

一种主从服务器的数据同步方法，包括步骤：

第三获取模块，用于主服务器获取用于所述主服务器和从服务器进行同步的数据；

第二发送模块，用于将所述数据发送至消息队列；

第二监听模块，用于所述从服务器对所述消息队列进行监听；

第四获取模块，用于若所述消息队列接收到所述数据，则所述从服务器获取所述消息队列接收到的数据。

一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如下步骤：

获取用于主服务器和从服务器进行同步的数据；将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如下步骤：

对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如下步骤：

获取用于主服务器和从服务器进行同步的数据；将所述数据发送至消息队列；对所述消息队列进行监听；若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

获取用于主服务器和从服务器进行同步的数据；将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

获取用于主服务器和从服务器进行同步的数据；将所述数据发送至消息队列；对所述消息队列进行监听；若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

上述主从服务器的数据同步方法、装置、计算机设备和存储介质，获取用于主服务器和从服务器进行同步的数据，将该数据发送给消息队列，从服务器可以对该消息队列进行监听，在该消息队列接收到数据时获取该数据，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

附图说明

图1为一个实施例中主从服务器数据同步方法的应用环境图；

图2为一个实施例中主从服务器数据同步方法的流程示意图；

图3为一个实施例中主从服务器的架构示意图；

图4为另一个实施例中主从服务器数据同步方法的流程示意图；

图5为又一个实施例中主从服务器数据同步方法的流程示意图；

图6为一个实施例中主从服务器数据同步装置的结构框图；

图7为另一个实施例中主从服务器数据同步装置的结构框图；

图8为又一个实施例中主从服务器数据同步装置的结构框图；

图9为一个实施例中计算机设备的内部结构图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

需要说明的是，本发明实施例所涉及的术语“第一\第二”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二”在允许的情况下可以互换特定的顺序或先后次序。应该理解“第一\第二”区分的对象在适当情况下可以互换，以使这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。

本发明提供的主从服务器数据同步方法，可以应用于如图1所示的应用环境中，图1为一个实施例中主从服务器数据同步方法的应用环境图，其中，主服务器100与消息队列300可以通过网络进行通信，消息队列300可以通过网络与从服务器200进行通信，其中，在主服务器100接收到用于主服务器100和从服务器200进行同步的数据时，主服务器100可以根据该数据对本地的存储数据执行相应操作，例如对存储数据进行修改、删除等操作，还可以将该数据发送给消息队列300，该消息队列300可以接收该数据并进行缓存，从服务器200则可以对消息队列300进行监听，从服务器200在消息队列300接收到该数据后，可以获取该数据，然后可以根据该数据对本地的存储数据执行相应操作，从而实现了主服务器100和从服务器200之间的数据同步。其中，主服务器100、消息队列300和从服务器200都可以通过独立的服务器或多个服务器来实现。

在一个实施例中，提供了一种主从服务器数据同步方法，参考图2，图2为一个实施例中主从服务器数据同步方法的流程示意图，该方法可以应用于图1所示的主服务器100当中，该主从服务器数据同步方法可以包括以下步骤：

步骤S101，获取用于主服务器和从服务器进行同步的数据。

本步骤中，主服务器100可以获取用于主服务器100和从服务器200进行同步的数据，其中，该数据可以包括对主服务器100本地的存储数据进行编辑操作的指令，当对主服务器100进行编辑时，主服务器100需要将该指令发送给从服务器200，使得从服务器200根据该指令对从服务器200本地的存储数据进行相应的编辑操作，从而使得主服务器100和从服务器200同步。

一般来说，处理业务逻辑的通过网络连接与主服务器100通信连接的终端可以向主服务器100发送该用于同步的数据，例如当业务逻辑需要修改主服务器100的数据时，就会给主服务器100发送修改指令，则主服务器100可以接收该修改指令作为用于主服务器和从服务器进行同步的数据，其中，用于主服务器100和从服务器200进行同步的数据可以包括用于如用于Redis主从服务器的HSET、LSET等指令。在主服务器100接收该数据时，主服务器100可以利用该数据对本地存储的数据进行相应处理。例如，该数据如果为编辑指令，则主服务器100可以执行该编辑指令，对其存储数据进行相应的编辑操作，如对数据进行修改、写入数据、删除数据等操作。

步骤S102，将数据发送至消息队列，用于指示从服务器获取消息队列接收到的数据；消息队列用于从服务器进行监听。

本步骤中，主服务器100可以将用于主服务器100和从服务器200进行同步的数据发送给消息队列300，该消息队列300可以通过服务器实现，该消息队列是指在数据的传输过程中保存该数据的容器，可以采用Rabbitmq消息队列集群作为该消息队列300，其中，从服务器200可以对该消息队列300进行监听，当从服务器200监听到该消息队列300中有新的数据时，可以从该消息队列300中将该数据拉出，然后可以利用该数据对从服务器200本地的存储数据进行相应处理。例如，该数据如果为编辑指令，则从服务器200可以将该数据从消息队列300中取出，然后执行该编辑指令，对从服务器200的存储数据进行相应的编辑操作，如修改数据、写入数据、删除数据等，而该编辑指令可以被主服务器100接收，主服务器100还可以在接收到编辑指令后执行该编辑指令，服务器200获取该编辑指令，通过执行该编辑指令就可以实现与主服务器100的数据同步。这样，当发生网络故障时，不再需要主服务器100内部来缓存数据，而是通过消息队列300来缓存数据，一般来说，消息队列可以采用如Rabbitmq消息队列集群等消息队列实现，其容量远远超过主服务器100本身的存储容量，所以可以保证消息队列能够存储下网络故障期间的需要进行同步数据，当网路故障恢复的时候，从服务器200即可监听到并获取消息队列中缓存的数据，消息队列也能够将故障期间产生的增量数据转发送给从服务器200，确保在数据量较大的时候也能够采用增量同步的方式对主从服务器的数据进行同步，既确保在网络故障恢复后使用了增量同步，也没有影响主服务器100的存储性能。

上述主从服务器的数据同步方法，获取用于主服务器和从服务器进行同步的数据，将该数据发送给消息队列，从服务器可以对该消息队列进行监听，在该消息队列接收到数据时获取该数据，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

在一个实施例中，还可以包括步骤：

接收源数据；源数据为用于访问主服务器的数据；确定源数据的类型；若源数据的类型为编辑指令，则将源数据设为用于主服务器和从服务器进行同步的数据。

本实施例主要是先确定访问主服务器的源数据的类型，在源数据的类型为编辑指令的情况下，将该源数据作为主服务器100和从服务器200进行同步的数据。

本实施例中，源数据是指为用于访问主服务器100的数据，在用户访问主服务器100时，可以将该源数据发送主服务器100进行访问，而源数据可以包括很多类型，例如对主服务器100进行访问时，可以向主服务器100发送如GET、HMGET等查询指令，该查询指令可以用于查询主服务器100中的某个数据的值，则此时源数据的数据类型为查询指令；又如可以向主服务器100发送如HSET、LSET等编辑指令，该编辑指令可以用于对主服务器100的相关数据进行如修改等编辑操作，而由于查询指令等数据一般不会修改主服务器100的存储数据的值，所以如查询指令等源数据一般不需要在主服务器100和从服务器200之间进行同步，即查询指令一般不需要从主服务器100发送给从服务器200进行同步，但是像HSET、LSET等编辑指令则一般会对主服务器100的存储数据进行修改，这时则需要主服务器100将编辑指令等数据发送给从服务器200，使得从服务器200根据该编辑指令等数据执行相应处理操作。所以，本实施例先对源数据的类型进行确定，从而将类型为编辑指令的源数据设为用于主服务器100和从服务器200进行同步的数据，无需所有的数据都在主服务器100和从服务器200之间进行同步处理，降低同步过程中数据传输量的同时也能够保证主从服务器之间的数据进行准确同步。

具体的，可以先获取主服务器的操作协议，这里的操作协议是指可以用于对主服务器和从服务器进行操作的相关协议，即通过输入怎样的指令能够使得主服务器和从服务器执行相应的操作，以明确与主服务器和从服务器进行准确交互，在获取操作协议后，可以根据该操作协议对发送到主服务器100的源数据进行解析，获得如该源数据是GET指令还是SET指令等解析结果，从而通过该解析结果确定该源数据的类型，例如解析结果如果表明该源数据是GET指令，则可以判断该源数据的类型为查询指令，如果该源数据是SET指令则可以确定该源数据的类型为编辑指令，然后当确定该源数据的类型为编辑指令后，可以将该源数据设为用于主服务器100和从服务器200进行同步的数据，然后可以将该数据发送给消息队列300使得从服务器200获取该数据，进而实现主服务器100和从服务器200的数据同步。

在一个实施例中，在获取用于主服务器和从服务器进行同步的数据的步骤之后，还可以包括：

根据数据触发主服务器执行第一操作；

将数据发送至消息队列，具体用于指示从服务器获取消息队列接收到的数据，并在获取到数据后执行与第一操作相匹配的第二操作，以使主服务器和从服务器同步。

参考图3，图3为一个实施例中主从服务器的架构示意图，本实施例可以通过第一代理服务器400接收发送给主服务器100的数据，该第一代理服务器400还可以将该数据转发给主服务器100和消息队列300。第一代理服务器400将该数据转发给主服务器100主要是使得主服务器100在接收到该数据后，可以根据该数据执行第一操作，例如对其存储数据进行修改、删除等编辑操作；而第一代理服务器400将该数据转发消息队列300后，可以通过该消息队列300将该数据发送给从服务器200，使得从服务器200获取该数据后，根据该数据执行第二操作，该第二操作是与第一操作相匹配的，例如第一操作是对主服务器100的存储数据进行修改，则第二操作相应的是对从服务器200的存储数据进行修改，这样就能够使得主服务器和从服务器进行同步。其中，第一代理服务器400可以在主服务器100中运行，即在第一代理服务器400上的程序和主服务器100上的程序可以在同一台计算机设备上运行，图3中将第一代理服务器400和主服务器100以两个结构分开示出主要是为了清晰阐明数据的流向。

具体的，访问主服务器100的数据都可以先进入该第一代理服务器400，该第一代理服务器400可以获取主服务器100的操作协议，第一代理服务器400可以根据该操作协议对该数据进行解析，如果发现该数据为编辑指令，则可以将该数据转发给主服务器100，使得主服务器100根据该数据执行相应的操作，并将该数据转发给消息队列300，消息队列300可以对该数据进行缓存，而从服务器200可以对该消息队列300进行监听，一旦发现有新的数据发送到消息队列300当中，即可将该数据取出，根据该数据执行相应的操作，实现从服务器和主服务器的数据同步；而如果该数据为非编辑指令如查询指令，则可以只将该数据转发给主服务器100。通过为主服务器100部署第一代理服务器400能够替该主服务器100分担数据处理的压力，提高主从服务器数据同步的效率的同时也能减轻主服务器100的压力。

在一个实施例中，将数据发送至消息队列，进一步用于指示监听消息队列的第二代理服务器获取消息队列接收到的数据，并将数据发送至从服务器。

本实施例中，参考图3，图3为一个实施例中主从服务器的架构示意图，第二代理服务器500可以用于监听消息队列，第二代理服务器500可以获取消息队列300接收到的数据并将该数据转发给从服务器200。其中，第二代理服务器500可以在从服务器200中运行，即在第二代理服务器500上的程序和从服务器200上的程序可以在同一台计算机设备上运行，图3将第二代理服务器500和从服务器200以两个结构分开示出是为了清晰阐明数据的流向。

具体的，从服务器200的数量可以为多个，各个从服务器200可以分别部署第二代理服务器500，各个第二代理服务器500可以从如Rabbitmq消息队列集群等消息队列300中订阅消息，一旦消息队列接收到新的数据就将数据取出，并转发给相应的从服务器200。例如，第二代理服务器500可以订阅消息队列300的消息，对消息队列300进行数据监听，当第一代理服务器400发送编辑指令到消息队列300时，消息队列300接收到该编辑指令后即有了新的数据，第二代理服务器500就将该新的数据即该编辑指令取出，然后转发给从服务器200。另外，考虑到用户可能会向从服务器200发送查询指令，而该查询指令一般不通过消息队列300发送给从服务器200，则第二代理服务器500可以代理接收该查询指令并转发给从服务器200，所以，第二代理服务器500除了负责从消息队列300中同步数据给从服务器200以外，还可以具有为从服务器200进行数据代理的作用，即可以通过网络接收如查询指令等访问从服务器200的相关数据命令，实现主从服务器数据同步的同时还可以减轻从服务器200的数据处理压力。

在一个实施例中，还可以包括步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

本实施例主要是可以将主服务器100和从服务器200原来具备的同步机制设置为关闭状态，即关闭主从服务器内置的同步机制，这样可以避免在主服务器100和从服务器200进行数据同步时，同时采用不同同步机制之间产生的混乱，避免数据同步出错。以Redis的主从服务器为例，Redis的主从服务器的原始同步机制为复制积压缓冲区机制，而本实施例将该复制积压缓冲区机制设为关闭状态，使得Redis主服务器不需要为相关数据指令开辟复制积压缓冲区，而通过消息队列300来缓存和发送相关数据指令给从服务器200进行数据同步，避免两种机制同时运行产生数据混乱而导致同步出错。

在一个实施例中，提供了一种主从服务器数据同步方法，参考图4，图4为另一个实施例中主从服务器数据同步方法的流程示意图，该方法可以应用于图1所示的从服务器200当中，该主从服务器数据同步方法可以包括以下步骤：

步骤S401，对消息队列进行监听；消息队列用于接收数据，数据为用于主服务器和从服务器进行同步的数据。

本步骤，从服务器200可以对消息队列300进行监听。其中，主服务器100可以获取用于主服务器100和从服务器200进行同步的数据，该数据可以包括对主服务器100本地的存储数据进行编辑操作的指令，当对主服务器100进行编辑时，主服务器100需要将该指令发送给从服务器200，使得从服务器200根据该指令对从服务器200本地的存储数据进行相应的编辑操作，从而使得主服务器100和从服务器200同步。

一般来说，处理业务逻辑的通过网络连接与主服务器100通信连接的终端可以向主服务器100发送该用于同步的数据，例如当业务逻辑需要修改主服务器100的数据时，就会给主服务器100发送修改指令，则主服务器100可以接收该修改指令作为用于主服务器和从服务器进行同步的数据，其中，用于主服务器100和从服务器200进行同步的数据可以包括用于如用于Redis主从服务器的HSET、LSET等指令。在主服务器100接收该数据时，主服务器100可以利用该数据对本地存储的数据进行相应处理。例如，该数据如果为编辑指令，则主服务器100可以执行该编辑指令，对其存储数据进行相应的编辑操作，如对数据进行修改、写入数据、删除数据等操作。

主服务器100可以将用于主服务器100和从服务器200进行同步的数据发送给消息队列300，该消息队列300可以通过服务器实现，该消息队列是指在数据的传输过程中保存该数据的容器，可以采用Rabbitmq消息队列集群作为该消息队列300，其中，从服务器200可以对该消息队列300进行监听。

步骤S402，若消息队列接收到数据，则获取消息队列接收到的数据。

本步骤中，用于主服务器和从服务器进行同步的数据可以通过主服务器100发送给消息队列300，该消息队列300在接收到该数据后，可以对该数据进行缓存，当从服务器200监听到该消息队列300中有新的数据时，可以从该消息队列300中将该数据拉出，然后可以利用该数据对从服务器200本地的存储数据进行相应处理。

具体的，假设数据为编辑指令，则从服务器200可以将该数据从消息队列300中取出，然后执行该编辑指令，对从服务器200的存储数据进行相应的编辑操作，如修改数据、写入数据、删除数据等，而该编辑指令可以被主服务器100接收，主服务器100还可以在接收到编辑指令后执行该编辑指令，服务器200获取该编辑指令，通过执行该编辑指令就可以实现与主服务器100的数据同步。这样，当发生网络故障时，不再需要主服务器100内部来缓存数据，而是通过消息队列300来缓存数据，一般来说，消息队列可以采用如Rabbitmq消息队列集群等消息队列实现，其容量远远超过主服务器100本身的存储容量，所以可以保证消息队列能够存储下网络故障期间的需要进行同步数据，当网路故障恢复的时候，从服务器200即可监听到并获取消息队列中缓存的数据，消息队列也能够将故障期间产生的增量数据转发送给从服务器200，确保在数据量较大的时候也能够采用增量同步的方式对主从服务器的数据进行同步，既确保在网络故障恢复后使用了增量同步，也没有影响主服务器100的存储性能。

上述主从服务器的数据同步方法，获取用于主服务器和从服务器进行同步的数据，将该数据发送给主服务器，以及将该数据发送给消息队列，从服务器可以对该消息队列进行监听，在该消息队列接收到数据时获取该数据，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

在一个实施例中，数据还用于第一代理服务器触发主服务器执行第一操作；

在获取消息队列接收到的数据的步骤之后，还可以包括：

将消息队列接收到的数据作用于从服务器，用于指示从服务器执行与第一操作相匹配的第二操作，以使主服务器与从服务器同步。

参考图3，图3为一个实施例中主从服务器的架构示意图，本实施例可以通过第一代理服务器400接收发送给主服务器100的数据，该第一代理服务器400还可以将该数据转发给主服务器100和消息队列300。第一代理服务器400将该数据转发给主服务器100主要是使得主服务器100在接收到该数据后，可以根据该数据执行第一操作，例如对其存储数据进行修改、删除等编辑操作；而第一代理服务器400将该数据转发消息队列300后，可以通过该消息队列300将该数据发送给从服务器200，使得从服务器200获取该数据后可以将该数据作用于该从服务器200本身，以根据该数据执行第二操作，该第二操作是与第一操作相匹配的操作，例如若第一操作是对主服务器100的存储数据进行修改，则从服务器200可以将该数据作用于本地的存储数据执行第二操作，即对从服务器200本地的存储数据进行修改，这样就能够使得主服务器和从服务器进行同步。其中，第一代理服务器400可以在主服务器100中运行，即在第一代理服务器400上的程序和主服务器100上的程序可以在同一台计算机设备上运行，图3中将第一代理服务器400和主服务器100以两个结构分开示出主要是为了清晰阐明数据的流向。

具体的，访问主服务器100的数据都可以先进入该第一代理服务器400，该第一代理服务器400可以获取主服务器100的操作协议，第一代理服务器400可以根据该操作协议对该数据进行解析，如果发现该数据为编辑指令，则可以将该数据转发给主服务器100，使得主服务器100根据该数据执行相应的操作，并将该数据转发给消息队列300，消息队列300可以对该数据进行缓存，而从服务器200可以对该消息队列300进行监听，一旦发现有新的数据发送到消息队列300当中，即可将该数据取出并将该数据作用于从服务器200，以根据该数据执行相应的操作，实现从服务器和主服务器的数据同步；而如果该数据为非编辑指令如查询指令，则可以只将该数据转发给主服务器100。通过为主服务器100部署第一代理服务器400能够替该主服务器100分担数据处理的压力，提高主从服务器数据同步的效率的同时也能减轻主服务器100的压力。

在一个实施例中，将消息队列接收到的数据作用于从服务器的步骤可以包括：

将消息队列接收到的数据转发至从服务器，用于触发从服务器根据数据执行第二操作。

本实施例中，参考图3，图3为一个实施例中主从服务器的架构示意图，第二代理服务器500可以用于监听消息队列，第二代理服务器500可以获取消息队列300接收到的数据并将该数据转发给从服务器200，使得从服务器200根据该数据执行第二操作。其中，第二代理服务器500可以在从服务器200中运行，即在第二代理服务器500上的程序和从服务器200上的程序可以在同一台计算机设备上运行，图3将第二代理服务器500和从服务器200以两个结构分开示出是为了清晰阐明数据的流向。

具体的，从服务器200的数量可以为多个，各个从服务器200可以分别部署第二代理服务器500，各个第二代理服务器500可以从如Rabbitmq消息队列集群等消息队列300中订阅消息，一旦消息队列接收到新的数据就将数据取出，并转发给相应的从服务器200，使得相应的从服务器200在接收到该数据后执行第二操作。例如，第二代理服务器500可以订阅消息队列300的消息，对消息队列300进行数据监听，当第一代理服务器400发送编辑指令到消息队列300时，消息队列300接收到该编辑指令后即有了新的数据，第二代理服务器500就将该新的数据即该编辑指令取出，然后转发给从服务器200，从服务器200即可根据该编辑指令对其存储数据执行相应的编辑操作。另外，考虑到用户可能会向从服务器200发送查询指令，而该查询指令一般不通过消息队列300发送给从服务器200，则第二代理服务器500可以代理接收该查询指令并转发给从服务器200，所以，第二代理服务器500除了负责从消息队列300中同步数据给从服务器200以外，还可以具有为从服务器200进行数据代理的作用，即可以通过网络接收如查询指令等访问从服务器200的相关数据命令，实现主从服务器数据同步的同时还可以减轻从服务器200的数据处理压力。

在一个实施例中，还可以包括步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

本实施例主要是可以将主服务器100和从服务器200原来具备的同步机制设置为关闭状态，即关闭主从服务器内置的同步机制，这样可以避免在主服务器100和从服务器200进行数据同步时，同时采用不同同步机制之间产生的混乱，避免数据同步出错。以Redis的主从服务器为例，Redis的主从服务器的原始同步机制为复制积压缓冲区机制，而本实施例将该复制积压缓冲区机制设为关闭状态，使得Redis主服务器不需要为相关数据指令开辟复制积压缓冲区，而通过消息队列300来缓存和发送相关数据指令给从服务器200进行数据同步，避免两种机制同时运行产生数据混乱而导致同步出错。

在一个实施例中，提供了一种主从服务器的数据同步方法，参考图5，图5为又一个实施例中主从服务器数据同步方法的流程示意图，该主从服务器的数据同步方法可以包括：

步骤S501，获取用于主服务器和从服务器进行同步的数据。

本步骤中，可以通过如图1所示的主服务器100获取该用于主服务器100和从服务器200进行同步的数据，也可以通过如图3所述的第一代理服务器400获取该用于主服务器100和从服务器200进行同步的数据，然后该第一代理服务器400可以将该数据转发给主服务器100，使得该主服务器100获取到该数据后，可以根据该数据执行相应的操作。

步骤S502，将数据发送至消息队列。

本步骤中，可以由主服务器100将用于主服务器100和从服务器200进行同步的数据发送给消息队列300，也可以有第一代理服务器400将该数据发送给消息队列300。

步骤S503，对消息队列进行监听。

其中，从服务器200可以对消息队列300进行监听，从服务器200也可以通过部署的第二代理服务器500监听该消息队列300。

步骤S504，若消息队列接收到数据，则获取消息队列接收到的数据。

其中，消息队列300可以接收主服务器100或第一代理服务器400发送的用于主服务器100和从服务器200进行同步的数据，该消息队列300可以对该数据进行缓存，当第二代理服务器500监听到消息队列300接收到了新的数据后，第二代理服务器500可以将该数据取出，并转发给从服务器200，使得从服务器200可以根据该数据执行相应的操作，实现从服务器200与主服务器100进行同步。

上述主从服务器的数据同步方法，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

在一个实施例中，提供了一种主从服务器数据同步装置，参考图6，图6为一个实施例中主从服务器数据同步装置的结构框图，该主从服务器数据同步装置可以包括：

第一获取模块101，用于获取用于主服务器和从服务器进行同步的数据；

第一发送模块102，用于将数据发送至消息队列，用于指示从服务器获取消息队列接收到的数据；消息队列用于从服务器进行监听。

在一个实施例中，还可以包括：

接收单元，用于接收源数据；源数据为用于访问主服务器的数据；

确定单元，用于确定源数据的类型；

第一设置单元，用于若源数据的类型为编辑指令，则将源数据设为用于主服务器和从服务器进行同步的数据。

在一个实施例中，还可以包括：

第一操作触发单元，用于根据数据触发主服务器执行第一操作；

第一发送模块102具体用于：指示从服务器获取消息队列接收到的数据，并在获取到数据后执行与第一操作相匹配的第二操作，以使主服务器和从服务器同步。

在一个实施例中，第一发送模块102进一步用于：

指示监听消息队列的第二代理服务器获取消息队列接收到的数据，并将数据发送至从服务器。

在一个实施例中，还可以包括：

第二设置单元，用于将主服务器和从服务器之间的原始同步机制设置为关闭状态。

在一个实施例中，提供了一种主从服务器数据同步装置，参考图7，图7为另一个实施例中主从服务器数据同步装置的结构框图，该主从服务器数据同步装置可以包括：

第一监听模块401，用于对消息队列进行监听；消息队列用于接收数据，数据为用于主服务器和从服务器进行同步的数据；

第二获取模块402，用于若消息队列接收到数据，则获取消息队列接收到的数据。

在一个实施例中，数据还用于第一代理服务器触发主服务器执行第一操作；还可以包括：

操作指示单元，将消息队列接收到的数据作用于从服务器，用于指示从服务器执行与第一操作相匹配的第二操作，以使主服务器与从服务器同步。

在一个实施例中，操作指示单元进一步用于：

将消息队列接收到的数据发送至从服务器，用于触发从服务器根据数据执行第二操作。

在一个实施例中，还可以包括：

第三设置单元，用于将主服务器和从服务器之间的原始同步机制设置为关闭状态。

在一个实施例中，提供了一种主从服务器数据同步装置，参考图8，图8为又一个实施例中主从服务器数据同步装置的结构框图，该主从服务器数据同步装置可以包括：

第三获取模块501，用于获取用于主服务器和从服务器进行同步的数据；

第二发送模块502，用于将数据发送至消息队列；

第二监听模块503，用于对消息队列进行监听；

第四获取模块504，用于若消息队列接收到数据，则获取消息队列接收到的数据。

本发明的主从服务器数据同步装置与本发明的主从服务器数据同步方法一一对应，关于主从服务器数据同步装置的具体限定可以参见上文中对于主从服务器数据同步方法的限定，在上述主从服务器数据同步方法的实施例阐述的技术特征及其有益效果均适用于主从服务器数据同步装置的实施例中，在此不再赘述。上述主从服务器数据同步装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图9所示，图9为一个实施例中计算机设备的内部结构图。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储主从服务器数据同步方法的步骤中涉及的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种主从服务器数据同步方法。

本领域技术人员可以理解，图9中示出的结构，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

获取用于主服务器和从服务器进行同步的数据；将数据发送至消息队列，用于指示从服务器获取消息队列接收到的数据；消息队列用于从服务器进行监听。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

接收源数据；源数据为用于访问主服务器的数据；确定源数据的类型；若源数据的类型为编辑指令，则将源数据设为用于主服务器和从服务器进行同步的数据。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

根据数据触发主服务器执行第一操作；将数据发送至消息队列，具体用于指示从服务器获取消息队列接收到的数据，并在获取到数据后执行与第一操作相匹配的第二操作，以使主服务器和从服务器同步。

在一个实施例中，将数据发送至消息队列，进一步用于指示监听消息队列的第二代理服务器获取消息队列接收到的数据，并将数据发送至从服务器。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

在一个实施例中，提供了一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

对消息队列进行监听；消息队列用于接收数据，数据为用于主服务器和从服务器进行同步的数据；若消息队列接收到数据，则获取消息队列接收到的数据。

在一个实施例中，数据还用于第一代理服务器触发主服务器执行第一操作；处理器执行计算机程序时还实现以下步骤：

将消息队列接收到的数据作用于从服务器，用于指示从服务器执行与第一操作相匹配的第二操作，以使主服务器与从服务器同步。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将消息队列接收到的数据转发至从服务器，用于触发从服务器根据数据执行第二操作。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

在一个实施例中，提供了一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

获取用于主服务器和从服务器进行同步的数据；将数据发送至消息队列；对消息队列进行监听；若消息队列接收到数据，则获取消息队列接收到的数据。

上述计算机设备，通过所述处理器上运行的计算机程序，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

本领域普通技术人员可以理解实现如上任一项实施例所述的主从服务器的数据同步方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本发明所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

据此，在一个实施例中提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

获取用于主服务器和从服务器进行同步的数据；将数据发送至消息队列，用于指示从服务器获取消息队列接收到的数据；消息队列用于从服务器进行监听。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

接收源数据；源数据为用于访问主服务器的数据；确定源数据的类型；若源数据的类型为编辑指令，则将源数据设为用于主服务器和从服务器进行同步的数据。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

根据数据触发主服务器执行第一操作；将数据发送至消息队列，具体用于指示从服务器获取消息队列接收到的数据，并在获取到数据后执行与第一操作相匹配的第二操作，以使主服务器和从服务器同步。

在一个实施例中，将数据发送至消息队列，进一步用于指示监听消息队列的第二代理服务器获取消息队列接收到的数据，并将数据发送至从服务器。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

在一个实施例中提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

对消息队列进行监听；消息队列用于接收数据，数据为用于主服务器和从服务器进行同步的数据；若消息队列接收到数据，则获取消息队列接收到的数据。

在一个实施例中，数据还用于第一代理服务器触发主服务器执行第一操作；计算机程序被处理器执行时还实现以下步骤：

将消息队列接收到的数据作用于从服务器，用于指示从服务器执行与第一操作相匹配的第二操作，以使主服务器与从服务器同步。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将消息队列接收到的数据转发至从服务器，用于触发从服务器根据数据执行第二操作。

在一个实施例中，计算机程序被处理器执行时还实现以下步骤：

将主服务器和从服务器之间的原始同步机制设置为关闭状态。

据此，在一个实施例中提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

获取用于主服务器和从服务器进行同步的数据；将数据发送至消息队列；对消息队列进行监听；若消息队列接收到数据，则获取消息队列接收到的数据。

上述计算机可读存储介质，通过其存储的计算机程序，使得用于主服务器和从服务器进行同步的数据无需在主服务器上进行缓存，而能够将该数据通过消息队列发送给从服务器实现主从服务器的数据同步，避免主服务器维护的复制积压缓冲区设置过大或过小影响主从服务器数据同步效率的缺陷，提高了主从服务器数据同步效率，而且在发生网络故障时还可以通过该消息队列缓存这些数据，使得主服务器不需要维护过大的复制积压缓冲区而影响主服务器的存储性能，在网络故障恢复后消息队列能将故障期间产生的增量数据发送给从服务器，既确保在网络故障恢复后使用增量同步，也没有影响主服务器的存储性能。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (15)

1.一种主从服务器的数据同步方法，其特征在于，包括步骤：

获取用于主服务器和从服务器进行同步的数据；

将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

2.根据权利要求1所述的主从服务器的数据同步方法，其特征在于，还包括步骤：

接收源数据；所述源数据为用于访问所述主服务器的数据；

确定所述源数据的类型；

若所述源数据的类型为编辑指令，则将所述源数据设为所述用于主服务器和从服务器进行同步的数据。

3.根据权利要求1所述的主从服务器的数据同步方法，其特征在于，在所述获取用于主服务器和从服务器进行同步的数据的步骤之后，还包括：

根据所述数据触发所述主服务器执行第一操作；

所述将所述数据发送至消息队列，具体用于指示所述从服务器获取所述消息队列接收到的数据，并在获取到所述数据后执行与所述第一操作相匹配的第二操作，以使所述主服务器和从服务器同步。

4.根据权利要求3所述的主从服务器的数据同步方法，其特征在于，所述将所述数据发送至消息队列，进一步用于指示监听所述消息队列的第二代理服务器获取所述消息队列接收到的数据，并将所述数据发送至所述从服务器。

5.根据权利要求1至4任一项所述的主从服务器的数据同步方法，其特征在于，还包括步骤：

将所述主服务器和从服务器之间的原始同步机制设置为关闭状态。

6.一种主从服务器的数据同步方法，其特征在于，包括步骤：

对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；

若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

7.根据权利要求6所述的主从服务器的数据同步方法，其特征在于，所述数据还用于第一代理服务器触发所述主服务器执行第一操作；

在所述获取所述消息队列接收到的数据的步骤之后，还包括：

将所述消息队列接收到的数据作用于所述从服务器，用于指示所述从服务器执行与所述第一操作相匹配的第二操作，以使所述主服务器与从服务器同步。

8.根据权利要求7所述的主从服务器的数据同步方法，其特征在于，所述将所述消息队列接收到的数据作用于所述从服务器的步骤包括：

将所述消息队列接收到的数据发送至所述从服务器，用于触发所述从服务器根据所述数据执行所述第二操作。

9.根据权利要求6至8任一项所述的主从服务器的数据同步方法，其特征在于，还包括步骤：

将所述主服务器和从服务器之间的原始同步机制设置为关闭状态。

10.一种主从服务器的数据同步方法，其特征在于，包括步骤：

获取用于主服务器和从服务器进行同步的数据；

将所述数据发送至消息队列；

对所述消息队列进行监听；

若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

11.一种主从服务器的数据同步装置，其特征在于，包括：

第一获取模块，用于获取用于主服务器和从服务器进行同步的数据；

第一发送模块，用于将所述数据发送至消息队列，用于指示所述从服务器获取所述消息队列接收到的数据；所述消息队列用于所述从服务器进行监听。

12.一种主从服务器的数据同步装置，其特征在于，包括：

第一监听模块，用于对消息队列进行监听；所述消息队列用于接收数据，所述数据为用于主服务器和从服务器进行同步的数据；

第二获取模块，用于若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

13.一种主从服务器的数据同步方法，其特征在于，包括步骤：

第三获取模块，用于获取用于主服务器和从服务器进行同步的数据；

第二发送模块，用于将所述数据发送至消息队列；

第二监听模块，用于对所述消息队列进行监听；

第四获取模块，用于若所述消息队列接收到所述数据，则获取所述消息队列接收到的数据。

14.一种计算机设备，包括处理器和存储器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至10任一项所述的主从服务器的数据同步方法的步骤。

15.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至10任一项所述的主从服务器的数据同步方法的步骤。