CN107633026A - 数据同步异常处理方法、装置及服务器 - Google Patents
数据同步异常处理方法、装置及服务器 Download PDFInfo
- Publication number
- CN107633026A CN107633026A CN201710766229.XA CN201710766229A CN107633026A CN 107633026 A CN107633026 A CN 107633026A CN 201710766229 A CN201710766229 A CN 201710766229A CN 107633026 A CN107633026 A CN 107633026A
- Authority
- CN
- China
- Prior art keywords
- server
- chronization
- data syn
- message
- client
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Computer And Data Communications (AREA)
- Debugging And Monitoring (AREA)
Abstract
一种数据同步异常处理方法，所述方法包括：监控从服务器与主服务器保持数据同步的同步状态；根据所述同步状态，判断所述从服务器的数据同步是否出现错误；若所述从服务器的数据同步出现错误，提取同步出错的错误信息；将所述错误信息发送给客户端。本发明还提供一种数据同步异常处理装置及服务器。本发明能够及时地对数据同步异常进行处理，提高系统的安全性，同时，确保系统业务正常运行。
Description
技术领域
本发明涉及数据同步技术领域，尤其涉及一种数据同步异常处理方法、装置及服务器。
背景技术
目前，在互联网行业中广泛使用着MySQL数据库技术，为了保证使用MySQL数据库进行数据处理的高效率，以及保证MySQL数据库中所存储数据的安全性，在MySQL数据库技术中提出了基于二进制日志(binlog)的主从复制机制，从服务器接收来自主服务器binlog，通过binlog与主服务器保持同步。
目前主从复制针对出现同步错误处理大致分为两种：1、由于主从复制同步错误类型较多，大多数类型的错误似乎并不影响系统业务，故可以在MySQL配置文件(my.cnf)设置从服务器错误跳过(slave_skip_errors)，当出现某类错误时，同步不中断，自动跳过执行下一个SQL语句；2、不进行slave_skip_errors的任何设置，主从同步出现错误时，同步自动中断，直到错误得到解决。
上述两种处理方式中，如果主从复制同步出现错误进行跳过处理，系统就会潜在风险，大大增加了系统的不安全性，如果不进行slave_skip_errors任何设置，主从同步出现错误时，同步自动中断，将会大大影响系统业务地正常运行。
发明内容
鉴于以上内容，有必要提供一种数据同步异常处理方法、装置及服务器，能够及时地对服务器同步异常进行处理，提高系统的安全性，同时，确保系统业务正常运行。
一种数据同步异常处理方法，所述方法包括：
监控从服务器与主服务器保持数据同步的同步状态；
根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
将所述错误信息发送给客户端。
在一种可能的实现方式中，所述若所述从服务器的数据同步出现错误，提取同步出错的错误信息之后，所述方法还包括：
构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
在一种可能的实现方式中，所述方法还包括：
增大所述同步状态的监控频率。
在一种可能的实现方式中，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述监控从服务器与主服务器保持数据同步的同步状态之前，所述方法还包括：
预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
一种数据同步异常处理装置，包括：
监控单元，用于监控从服务器与主服务器保持数据同步的同步状态；
判断单元，用于根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
提取单元，用于若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
发送单元，用于将所述错误信息发送给客户端。
在一种可能的实现方式中，所述数据同步异常处理装置还包括：
构造单元，用于若所述从服务器的数据同步出现错误，所述提取单元提取同步出错的错误信息之后，构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述发送单元将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
在一种可能的实现方式中，所述数据同步异常处理装置还包括：
增大单元，用于增大所述同步状态的监控频率。
在一种可能的实现方式中，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述数据同步异常处理装置还包括：
设置单元，用于在所述监控单元监控从服务器与主服务器保持数据同步的同步状态之前，预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
一种服务器，所述服务器包括存储器以及处理器，所述处理器用于执行存储器中存储的计算机程序以实现所述的数据同步异常处理方法。
一种计算机可读存储介质，所述计算机可读存储介质存储有至少一个指令，所述至少一个指令被处理器执行时实现所述的数据同步异常处理方法。
由以上技术方案，本发明中，可以监控从服务器与主服务器保持数据同步的同步状态；根据所述同步状态，判断所述从服务器的数据同步是否出现错误；进一步地，若所述从服务器的数据同步出现错误，可以提取同步出错的错误信息，并将所述错误信息发送给客户端。可见，通过本发明的实施例，在从服务器的数据同步出现错误时，可以及时地将错误信息发送给客户端，以便技术人员及时地解决错误，提高系统的安全性，同时，确保系统业务正常运行。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1是本发明公开的一种数据处理系统的架构图。
图2是本发明公开的一种数据同步异常处理方法的较佳实施例的流程图。
图3是本发明公开的另一种数据同步异常处理方法的较佳实施例的流程图。
图4是本发明公开的一种数据同步异常处理装置的较佳实施例的功能模块图。
图5是本发明公开的另一种数据同步异常处理装置的较佳实施例的功能模块图。
图6是本发明实现数据同步异常处理方法的较佳实施例的服务器的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
请参见图1，图1是本发明公开的一种数据处理系统的架构图。如图1所示，该数据处理系统可以包括主服务器、从服务器、消息队列遥测传输Mqtt服务器以及客户端。
其中，主服务器主要用于存储最原始的数据。其中，主服务器可以是指能对网络中其它设备(如从服务器)提供服务的计算机系统。如果一个个人电脑能够对外提供文件传输协议(File Transfer Protocol，简称FTP)服务，也可以叫主服务器。从狭义范围上讲，主服务器专指某些高性能计算机，能通过网络，对外提供服务，其相对于普通的个人电脑来说，稳定性、安全性、性能等方面都要求更高，因此在CPU、芯片组、内存、磁盘系统、网络等硬件和普通的个人电脑有所不同。
其中，从服务器主要用于接收来自主服务器的二进制日志(binlog)，通过binlog与主服务器保持同步。其中，通过从服务器与主服务器的主从复制同步功能，可以将数据从主服务器上同步复制到从服务器上，可以在主服务器和从服务器之间实现负载均衡。即可以通过在主服务器和从服务器之间切分处理客户端查询的负荷，从而得到更好的客户响应时间。同时，当主服务器出现问题时，服务器管理员可以让从服务器作为主服务器，用于数据的更新与查询服务，以确保系统业务地正常运行。
其中，客户端主要用于在主服务器或从服务器中查询数据。该客户端可以是用户设备，该用户设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，其硬件包括但不限于微处理器、专用集成电路(Application SpecificIntegrated Circuit，ASIC)、可编程门阵列(Field－Programmable Gate Array，FPGA)、数字处理器(Digital Signal Processor，DSP)、嵌入式设备等。用户设备包括但不限于任何一种可与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互的电子产品，例如，个人计算机、平板电脑、智能手机、个人数字助理(Personal Digital Assistant，PDA)、交互式网络电视(Internet Protocol Television，IPTV)、智能式穿戴式设备、数码相机等。上述用户设备仅是举例，而非穷举，包含但不限于上述终端设备。
其中，Mqtt(Message Queuing Telemetry Transport，消息队列遥测传输)服务器与客户端中的相关应用程序可直接进行通信。Mqtt服务器主要用于接收从服务器构造的Mqtt消息，并将Mqtt消息转发给客户端，以便客户端侧的技术人员及时地处理该Mqtt消息，以确保系统业务地正常运行。
需要说明的是，在图1所示的数据处理系统的架构中，从服务器可以是多个，客户端也可以是多个。此外，Mqtt服务器与从服务器可以分别独立部署，或者，可选的，Mqtt服务器还可以集成在从服务器中。
请参见图2，图2是本发明公开的一种数据同步异常处理方法的较佳实施例的流程图。其中，该数据同步异常处理方法应用于服务器，该服务器为图1所示的从服务器。根据不同的需求，该流程图中步骤的顺序可以改变，某些步骤可以省略。
S21、监控从服务器与主服务器保持数据同步的同步状态。
本发明中，服务器内置有脚本监控程序，该脚本监控程序可以通过show slavestatus\G命令来监控从服务器与主服务器保持数据同步的同步状态，该同步状态可以为同步成功或同步失败。同步成功用于表征从服务器获得的数据与主服务器的数据保持一致，同步失败用于表征从服务器获得的数据与主服务器的数据出现偏差，即主从复制同步错误。
其中，主从复制同步错误的类型有很多，比如：错误代码(Error_code)为：1032，表现为在主服务器上删除一条记录，而从服务器更新了该记录，由于异步和网络延时，从服务器的更新事件先到达主服务器执行，造成主服务器找不到这条记录，导致主从复制同步停止。又比如：错误代码(Error_code)为1062，表现为在从服务器上已经有该记录，又在主服务器上插入了同一条记录，即发生主键重复，导致主从复制同步失败。
作为一种可选的实施方式，所述方法还可以包括：
增大所述同步状态的监控频率。
在该可选的实施方式中，服务器可以增大所述同步状态的监控频率，具体的，可以通过将脚本监控程序的运行周期缩短来实现，这有利于提高监控的实时性，同时，当同步失败时，能更及时地发现错误信息。
作为另一种可选的实施方式，在步骤S21之前，所述方法还可以包括：
预先设置从服务器错误跳过。
在该可选的实施方式中，可以预先设置从服务器错误跳过，具体的，可以在mysql配置文件my.cnf中设置从服务器错误跳过(slave_skip_errors)，当后续主从复制同步出现错误时，同步可以不中断，自动跳过执行下一个sql语句，这有利于确保系统业务地正常运行。
S22、根据所述同步状态，判断所述从服务器的数据同步是否出现错误，若是，执行步骤S23，若否，结束本流程。
本发明中，若所述同步状态为同步失败，则根据所述同步失败信息，可以判断所述从服务器的数据同步出现错误，否则，若所述同步状态为同步成功，则根据所述同步成功信息，可以判断所述从服务器的数据同步成功。
S23、提取同步出错的错误信息。
本发明中，服务器判断所述从服务器的数据同步出现错误时，可以提取同步出错的错误信息，具体的，该错误信息可以包括错误代码或错误内容。其中，该错误代码用于唯一标识错误的类型，比如错误代码(Error_code)1032，错误代码(Error_code)1062。
S24、将所述错误信息发送给客户端。
本发明中，服务器提取同步出错的错误信息之后，可以及时地将所述错误信息发送给客户端，以便客户端的技术人员能够及时地看到错误信息，对错误信息及时地分析及处理。
在图2所描述的方法流程中，可以监控从服务器与主服务器保持数据同步的同步状态；根据所述同步状态，判断所述从服务器的数据同步是否出现错误；进一步地，若所述从服务器器的数据同步出现错误，可以提取同步出错的错误信息，并将所述错误信息发送给客户端。可见，通过本发明的实施例，在从服务器的数据同步出现错误时，可以及时地将错误信息发送给客户端，以便技术人员及时地解决错误，提高系统的安全性，同时，确保系统业务正常运行。
请参见图3，图3是本发明公开的另一种数据同步异常处理方法的较佳实施例的流程图。其中，该数据同步异常处理方法应用于服务器，该服务器为图1所示的从服务器。根据不同的需求，该流程图中步骤的顺序可以改变，某些步骤可以省略。
S31、监控从服务器与主服务器保持数据同步的同步状态。
S32、根据所述同步状态，判断所述从服务器的数据同步是否出现错误，若是，执行步骤S33，若否，结束本流程。
S33、提取同步出错的错误信息。
S34、构造携带有所述错误信息的消息队列遥测传输Mqtt消息。
其中，Mqtt消息(Message Queuing Telemetry Transport，消息队列遥测传输)具有不同的消息类型，比如消息类型ADVERTISE，表示广播消息；消息类型GWINFO，表示网关信息。不同消息类型的Mqtt消息可以由不同的客户端来处理。
本发明中，存在着多个客户端，不同客户端可以处理不同的错误信息，每个客户端只能监听自己能处理的消息类型的错误信息。为了能针对性地将错误信息发送给对应的客户端，在发送之前，可以构造携带有所述错误信息的消息队列遥测传输Mqtt消息，该Mqtt消息中的消息类型可以指示不同的错误信息。
具体的，可以是服务器中的脚本监控程序来构造携带有所述错误信息的Mqtt消息。
S35、经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
其中，Mqtt(Message Queuing Telemetry Transport，消息队列遥测传输)服务器与客户端中的相关应用程序可直接进行通信。Mqtt服务器主要用于接收从服务器构造的Mqtt消息，并将Mqtt消息转发给客户端，以便客户端侧的技术人员及时地处理该Mqtt消息，以确保系统业务地正常运行。
本发明中，经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端之后，该客户端就可以及时地处理该错误消息，使得该错误消息能够有效及时地得到解决。
作为另一种可选的实施方式，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述监控从服务器与主服务器保持数据同步的同步状态之前，所述方法还可以包括：
预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
在该可选的实施方式中，可以预先在每个所述从服务器中设置从服务器查询跳过。当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据将不属于所述客户端查询的范围。当客户端需要查询数据时，客户端只能从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据，这有利于在某个从服务器的数据同步出现错误时，系统业务不受影响，能够正常运行。
在图3所描述的方法流程中，服务器在提取出同步出错的错误信息之后，进一步地，可以构造携带有所述错误信息的消息队列遥测传输Mqtt消息，并经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端，从而可以有针对性地将Mqtt消息发送给对应的客户端，有利于Mqtt消息得到及时的处理。
请参见图4，图4是本发明公开的一种数据同步异常处理装置的较佳实施例的功能模块图。其中，图4描述的数据同步异常处理装置用于执行图2所描述的数据同步异常处理方法中的部分或全部步骤，具体请参照图2中的相关描述，在此不再赘述。本发明所称的单元是指一种能够被处理器所执行并且能够完成固定功能的一系列计算机程序段，其存储在存储器中。在本实施例中，关于各单元的功能将在后续的实施例中详述。
监控单元101，用于监控从服务器与主服务器保持数据同步的同步状态；
判断单元102，用于根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
提取单元103，用于若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
发送单元104，用于将所述错误信息发送给客户端。
在图4所描述的数据同步异常处理装置中，可以监控从服务器与主服务器保持数据同步的同步状态；根据所述同步状态，判断所述从服务器的数据同步是否出现错误；进一步地，若所述从服务器的数据同步出现错误，可以提取同步出错的错误信息，并将所述错误信息发送给客户端。可见，通过本发明的实施例，在从服务器的数据同步出现错误时，可以及时地将错误信息发送给客户端，以便技术人员及时地解决错误，提高系统的安全性，同时，确保系统业务正常运行。
请参见图5，图5是本发明公开的另一种数据同步异常处理装置的较佳实施例的功能模块图。其中，图5描述的数据同步异常处理装置用于执行图3所描述的数据同步异常处理方法中的部分或全部步骤。其中，图5所示的数据同步异常处理装置是在图4所示的数据同步异常处理装置的基础上进一步优化得到的，与图4所示的数据同步异常处理装置相比，图5所示的数据同步异常处理装置还包括构造单元105，可选的，图5所示的数据同步异常处理装置还包括增大单元106以及设置单元107。其中，本发明所称的单元是指一种能够被处理器所执行并且能够完成固定功能的一系列计算机程序段，其存储在存储器中。在本实施例中，关于各单元的功能将在后续的实施例中详述。
构造单元105，用于若所述从服务器的数据同步出现错误，所述提取单元提取同步出错的错误信息之后，构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述发送单元104将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
可选的，增大单元106，用于增大所述同步状态的监控频率。
可选的，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，设置单元107，用于在所述监控单元101监控从服务器与主服务器保持数据同步的同步状态之前，预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
在图5所描述的数据同步异常处理装置中，在提取出同步出错的错误信息之后，进一步地，可以构造携带有所述错误信息的消息队列遥测传输Mqtt消息，并经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端，从而可以有针对性地将Mqtt消息发送给对应的客户端，有利于Mqtt消息得到及时的处理。
上述以软件功能模块的形式实现的集成的单元，可以存储在一个计算机可读存储介质中。其中，该计算机可读存储介质可以存储计算机程序，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读存储介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读存储介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减。
如图6所示，图6是本发明实现数据同步异常处理方法的较佳实施例的服务器的结构示意图。所述服务器1包括存储器12以及处理器13。本领域技术人员可以理解，所述图6所示的服务器1的示意图仅仅是服务器1的示例，并不构成对服务器1的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述服务器1还可以包括输入输出设备、网络接入设备、总线等。
所述服务器1可以是指能对网络中其它设备提供服务的计算机系统。如果一个个人电脑能够对外提供文件传输协议(File Transfer Protocol，简称FTP)服务，也可以叫服务器。从狭义范围上讲，服务器专指某些高性能计算机，能通过网络，对外提供服务，其相对于普通的个人电脑来说，稳定性、安全性、性能等方面都要求更高，因此在CPU、芯片组、内存、磁盘系统、网络等硬件和普通的个人电脑有所不同。
所述存储器12可选地包括一个或多个计算机可读存储介质，用于存储一种数据同步异常处理方法的程序和各种数据，并在运行过程中实现高速、自动地完成程序或数据的存取。所述存储器12可选地包括高速随机存取存储器，并且还可选地包括非易失性存储器，诸如一个或多个磁盘存储设备、闪存存储器设备、或其它非易失性固态存储器设备。
所述处理器13又称中央处理器(CPU，Central Processing Unit)，是一块超大规模的集成电路，是服务器1的运算核心(Core)和控制核心(Control Unit)。所述处理器13可执行所述服务器1的操作系统以及安装的各类应用程序、程序代码等，例如数据同步异常处理装置11。
结合图2或图3，所述服务器1中的所述存储器12存储多个指令以实现一种数据同步异常处理方法，所述处理器13可执行所述多个指令从而实现：
监控从服务器与主服务器保持数据同步的同步状态；
根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
将所述错误信息发送给客户端。
在一种可选的实施方式中，若所述从服务器的数据同步出现错误，提取同步出错的错误信息之后，所述处理器13可执行所述多个指令从而实现：
构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
在一种可选的实施方式中，所述处理器13可执行所述多个指令从而实现：
增大所述同步状态的监控频率。
在一种可选的实施方式中，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述监控从服务器与主服务器保持数据同步的同步状态之前，所述处理器13可执行所述多个指令从而实现：
预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
具体地，所述处理器13对上述指令的具体实现方法可参考图2或图3对应实施例中相关步骤的描述，在此不赘述。
在图6所描述的服务器中，可以监控从服务器与主服务器保持数据同步的同步状态；根据所述同步状态，判断所述从服务器的数据同步是否出现错误；进一步地，若所述从服务器的数据同步出现错误，可以提取同步出错的错误信息，并将所述错误信息发送给客户端。可见，通过本发明的实施例，在从服务器的数据同步出现错误时，可以及时地将错误信息发送给客户端，以便技术人员及时地解决错误，提高系统的安全性，同时，确保系统业务正常运行。
在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能模块的形式实现。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第二等词语用来表示名称，而并不表示任何特定的顺序。
最后应说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案的精神和范围。
Claims (10)
1.一种数据同步异常处理方法，其特征在于，所述方法包括：
监控从服务器与主服务器保持数据同步的同步状态；
根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
将所述错误信息发送给客户端。
2.根据权利要求1所述的方法，其特征在于，所述若所述从服务器的数据同步出现错误，提取同步出错的错误信息之后，所述方法还包括：
构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：
增大所述同步状态的监控频率。
4.根据权利要求1或2所述的方法，其特征在于，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述监控从服务器与主服务器保持数据同步的同步状态之前，所述方法还包括：
预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
5.一种数据同步异常处理装置，其特征在于，包括：
监控单元，用于监控从服务器与主服务器保持数据同步的同步状态；
判断单元，用于根据所述同步状态，判断所述从服务器的数据同步是否出现错误；
提取单元，用于若所述从服务器的数据同步出现错误，提取同步出错的错误信息；
发送单元，用于将所述错误信息发送给客户端。
6.根据权利要求5所述的数据同步异常处理装置，其特征在于，所述数据同步异常处理装置还包括：
构造单元，用于若所述从服务器的数据同步出现错误，所述提取单元提取同步出错的错误信息之后，构造携带有所述错误信息的消息队列遥测传输Mqtt消息；
所述发送单元将所述错误信息发送给客户端包括：
经由Mqtt服务器将所述Mqtt消息发送给与所述Mqtt消息的消息类型匹配的客户端。
7.根据权利要求5或6所述的数据同步异常处理装置，其特征在于，所述数据同步异常处理装置还包括：
增大单元，用于增大所述同步状态的监控频率。
8.根据权利要求5或6所述的数据同步异常处理装置，其特征在于，所述从服务器有多个，数据同步出现错误的所述从服务器为第一从服务器，所述数据同步异常处理装置还包括：
设置单元，用于在所述监控单元监控从服务器与主服务器保持数据同步的同步状态之前，预先在每个所述从服务器中设置从服务器查询跳过；
其中，当所述第一从服务器的数据同步出现错误时，所述第一从服务器中的数据不属于所述客户端查询的范围，由所述客户端从多个所述从服务器中除所述第一从服务器之外的其他从服务器查询数据。
9.一种服务器，其特征在于，所述服务器包括存储器以及处理器，所述处理器用于执行存储器中存储的计算机程序以实现如权利要求1至4中任意一项所述的数据同步异常处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有至少一个指令，所述至少一个指令被处理器执行时实现如权利要求1至4任意一项所述的数据同步异常处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710766229.XA CN107633026B (zh) | 2017-08-30 | 2017-08-30 | 数据同步异常处理方法、装置及服务器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710766229.XA CN107633026B (zh) | 2017-08-30 | 2017-08-30 | 数据同步异常处理方法、装置及服务器 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107633026A true CN107633026A (zh) | 2018-01-26 |
| CN107633026B CN107633026B (zh) | 2019-12-17 |
Family
ID=61100962
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710766229.XA Active CN107633026B (zh) | 2017-08-30 | 2017-08-30 | 数据同步异常处理方法、装置及服务器 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107633026B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108984120A (zh) * | 2018-06-29 | 2018-12-11 | 郑州云海信息技术有限公司 | 存储设备路径错误的处理方法以及相关装置 |
| CN110765090A (zh) * | 2019-10-31 | 2020-02-07 | 泰康保险集团股份有限公司 | 日志数据管理方法及装置、存储介质、电子设备 |
| CN111858597A (zh) * | 2020-07-22 | 2020-10-30 | 安徽华典大数据科技有限公司 | 一种异构数据库中数据的同步方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101236554A (zh) * | 2007-11-29 | 2008-08-06 | 中兴通讯股份有限公司 | 一种数据库海量数据比对的方法 |
| CN102231161A (zh) * | 2011-06-30 | 2011-11-02 | 北京新媒传信科技有限公司 | 数据库同步验证及监控方法 |
| CN104052653A (zh) * | 2014-06-23 | 2014-09-17 | 广东天波信息技术股份有限公司 | 一种基于mqtt实现状态呈现的方法 |
| CN104935479A (zh) * | 2015-06-19 | 2015-09-23 | 郑州悉知信息技术有限公司 | 一种服务模块监控方法及系统 |
| CN105162560A (zh) * | 2015-08-24 | 2015-12-16 | 浪潮(北京)电子信息产业有限公司 | 一种数据处理方法和系统 |
| CN105335443A (zh) * | 2014-08-13 | 2016-02-17 | 阿里巴巴集团控股有限公司 | 一种用于数据同步中的异常检测的方法与设备 |
-
2017
- 2017-08-30 CN CN201710766229.XA patent/CN107633026B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101236554A (zh) * | 2007-11-29 | 2008-08-06 | 中兴通讯股份有限公司 | 一种数据库海量数据比对的方法 |
| CN102231161A (zh) * | 2011-06-30 | 2011-11-02 | 北京新媒传信科技有限公司 | 数据库同步验证及监控方法 |
| CN104052653A (zh) * | 2014-06-23 | 2014-09-17 | 广东天波信息技术股份有限公司 | 一种基于mqtt实现状态呈现的方法 |
| CN105335443A (zh) * | 2014-08-13 | 2016-02-17 | 阿里巴巴集团控股有限公司 | 一种用于数据同步中的异常检测的方法与设备 |
| CN104935479A (zh) * | 2015-06-19 | 2015-09-23 | 郑州悉知信息技术有限公司 | 一种服务模块监控方法及系统 |
| CN105162560A (zh) * | 2015-08-24 | 2015-12-16 | 浪潮(北京)电子信息产业有限公司 | 一种数据处理方法和系统 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108984120A (zh) * | 2018-06-29 | 2018-12-11 | 郑州云海信息技术有限公司 | 存储设备路径错误的处理方法以及相关装置 |
| CN110765090A (zh) * | 2019-10-31 | 2020-02-07 | 泰康保险集团股份有限公司 | 日志数据管理方法及装置、存储介质、电子设备 |
| CN111858597A (zh) * | 2020-07-22 | 2020-10-30 | 安徽华典大数据科技有限公司 | 一种异构数据库中数据的同步方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107633026B (zh) | 2019-12-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6952067B2 (ja) | 継続時間可変イベントなしパターンマッチング | |
| CN104580349B (zh) | 安全云管理代理 | |
| US11295262B2 (en) | System for fully integrated predictive decision-making and simulation | |
| US11588793B2 (en) | System and methods for dynamic geospatially-referenced cyber-physical infrastructure inventory and asset management | |
| CN107220142B (zh) | 执行数据恢复操作的方法及装置 | |
| CN104731690B (zh) | 适应性度量收集、存储、和警告阈值 | |
| CN103984715B (zh) | 一种异构数据库的数据同步、校验方法、装置及系统 | |
| CN103733198A (zh) | 流应用性能监测度量 | |
| CN109582289B (zh) | 规则引擎中规则流的处理方法、系统、存储介质和处理器 | |
| US11805106B2 (en) | System and method for trigger-based scanning of cyber-physical assets | |
| CN103299602A (zh) | 数据同步 | |
| US20230208882A1 (en) | Policy - aware vulnerability mapping and attack planning | |
| CN106209948A (zh) | 一种数据推送方法及装置 | |
| US11531539B2 (en) | Automated compliance and testing framework for software development | |
| WO2019193820A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| CN107633026A (zh) | 数据同步异常处理方法、装置及服务器 | |
| CN108647357A (zh) | 数据查询的方法及装置 | |
| CN103765858A (zh) | 用于在用户在通信网络内的浏览期间监视用户的方法和服务器 | |
| CN111813868B (zh) | 数据同步方法及装置 | |
| CN104219280B (zh) | 一种智能应用数据传输通道 | |
| CN103455599A (zh) | 用于数据同步的方法、设备和系统 | |
| CN104346426A (zh) | 共享数据去重复的方法和系统 | |
| CN103281210A (zh) | 网络设备的配置文件的版本管理系统 | |
| US20230388277A1 (en) | System and methods for predictive cyber-physical resource management | |
| CN108845896A (zh) | 灾难后数据追踪系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |