CN111694894A - 对数据同步进行监控的方法、服务器、设备和存储介质 - Google Patents

对数据同步进行监控的方法、服务器、设备和存储介质 Download PDF

Info

Publication number
CN111694894A
CN111694894A CN202010338242.7A CN202010338242A CN111694894A CN 111694894 A CN111694894 A CN 111694894A CN 202010338242 A CN202010338242 A CN 202010338242A CN 111694894 A CN111694894 A CN 111694894A
Authority
CN
China
Prior art keywords
data
library
application server
main
standby
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010338242.7A
Other languages
English (en)
Inventor
延皓
顾宏
李世宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
Original Assignee
China Construction Bank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp filed Critical China Construction Bank Corp
Priority to CN202010338242.7A priority Critical patent/CN111694894A/zh
Publication of CN111694894A publication Critical patent/CN111694894A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本公开提供了一种对数据同步进行监控的方法、服务器、设备和存储介质。所述方法包括：通过监控程序在主库中写入测试数据；所述监控程序经过第一时间间隔后查询备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。本公开提供的方法通过监控程序在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行处理，以避免数据不同步导致的业务异常。

Description

对数据同步进行监控的方法、服务器、设备和存储介质
技术领域
本发明涉及计算机应用技术领域，更为具体而言，涉及一种对主库和备库之间的数据同步进行监控的方法、应用服务器、设备和存储介质。
背景技术
ADG(Active Data Guard，主动数据保护)是Oracle数据库(甲骨文公司的一款关系数据库管理系统)自带的数据同步功能，其基本原理是将重做数据从主库传输到备库，然后在备库上应用这些重做数据，使备库与主库数据保持一致。具体而言，如图1所示，主库通过日志网络服务(LSN)进程从数据库重做缓冲区获取重做数据，并将其传给备库，备库的远程文件服务(RFS)进程接收重做数据，写入备库重做日志，再使用介质恢复协调器(MRP)实现重做数据的并行恢复。因此，ADG能够保证系统数据有多个备份，对数据进行了保护，实现了数据高的可用。
然而，采用ADG技术实现的数据实时同步，无法实现应用端的相应监控。例如，当主备库数据延迟较大时，应用端无法自动感知到备库的数据延迟，从而无法应对数据延迟导致的业务异常。
此外，WebLogic(基于JAVAEE架构的中间件)的多数据源机制保证应用到数据库连接的高可用性，多数据源采用故障转移(Failover)模式，该模式下每个应用程序都配置主备两个数据源，在所选框中排首位的是主数据源，排次位的是备数据源。正常情况应用连接主数据源，WebLogic会按照一定的频率对主数据源进行探测，当探测到主数据源失效时，自动将应用连接至备数据源。
然而，对于Weblogic多数据源技术来说，当ADG产生数据延迟时，备库仍然是可用的，所以多数据源技术不会切换备库上的数据连接，因此无法应对数据延迟导致的业务异常。
发明内容
为解决上述现有技术存在的问题或部分问题，本发明提供了一种对主库和备库之间的数据同步进行监控的方法、应用服务器、设备和存储介质，通过监控程序在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据是否同步。
根据本发明的第一方面，本发明实施方式提供了一种对主库和备库之间的数据同步进行监控的方法，其特征在于，所述方法包括：通过监控程序在所述主库中写入测试数据；所述监控程序经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
本发明上述实施方式通过监控程序在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行处理，以避免数据不同步导致的业务异常。
在本发明的一些实施方式中，所述测试数据为时间戳数据。
本发明上述实施方式通过使用时间戳数据作为测试数据，使得通过监控程序在主库中写入的测试数据每次都不同，相应的，在判断主库和备库之间的数据同步情况时需要查询备库中是否存在当前的时间戳数据，可以使主库和备库之间的数据同步监控更加准确和简单。
在本发明的一些实施方式中，所述方法还包括：对于所述数据同步异常，向用户告警。
在本发明的一些实施方式中，所述监控程序每隔第二时间间隔执行一次该方法。
本发明上述实施方式通过监控程序间隔预定时间执行监控主库和备库之间的数据同步情况的操作，可以降低监控时对数据库反复读写产生的资源消耗，同时，通过监控程序定时执行上述操作，可以实现自动且及时的数据同步监控。
在本发明的一些实施方式中，所述监控程序在连续预定次数确定所述数据同步异常时才执行所述向用户告警的处理。
本发明上述实施方式通过在连续预定次数确定主库和备库之间的数据同步异常时才进行告警，可以弱化网络抖动对数据同步监控产生的影响，提高监控准确性，同时产生告警以及时对数据同步异常进行处理，从而避免数据不同步导致的业务异常。
在本发明的一些实施方式中，发生一次告警的整体时间满足下述关系：T＝n(s+t)，其中，T表示所述整体时间，n表示所述预定次数，t表示所述第一时间间隔，s表示所述第二时间间隔。
在本发明的一些实施方式中，所述向用户告警的处理包括：所述监控程序将表示所述数据同步异常的异常信息输出到日志中；通过告警工具捕获所述日志中的异常信息进行告警。
在本发明的一些实施方式中，所述方法还包括：在连续预定次数确定所述数据同步异常后，将主数据源为所述备库的应用服务器的主数据源调整为所述主库。
本发明上述实施方式通过在连续预定次数确定数据同步异常后，将主数据源为备库的应用服务器的主数据源调整为主库，使应用服务器的主数据源均变为主库，以避免备库与主库间的数据不同步导致的主数据源为备库的应用服务器的业务异常。
在本发明的一些实施方式中，所述方法还包括：将主数据源为所述备库的应用服务器的主数据源调整为所述主库后，所述应用服务器采用流控机制对所述主库进行访问。
本发明上述实施方式在将主数据源为备库的应用服务器的主数据源调整为主库后，通过使应用服务器采用流控机制访问主库，可以避免所有应用服务器访问主库而出现主库资源耗尽的问题，以保证主库负载正常。
在本发明的一些实施方式中，所述监控程序部署在应用服务器端。
本发明上述实施方式通过在应用服务器端部署监控程序对主库和备库之间的数据同步进行监控，能够实现从应用层发现数据同步异常，进而及时对异常进行相应，从而保障业务的连续性。
根据本发明的第二方面，本发明实施方式提供了一种对主库和备库之间的数据同步进行监控的应用服务器，其特征在于，所述应用服务器包括：测试数据写入模块，用于在所述主库中写入测试数据；同步异常判断模块，用于在经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
本发明上述实施方式通过使应用服务器在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够使应用层及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行处理，以保障业务的连续性。
在本发明的一些实施方式中，所述测试数据为时间戳数据。
本发明上述实施方式通过使用时间戳数据作为测试数据，使得每次在主库中写入的测试数据都不同，相应的，在判断主库和备库之间的数据同步情况时需要查询备库中是否存在当前的时间戳数据，可以使主库和备库之间的数据同步监控更加准确和简单。
在本发明的一些实施方式中，所述应用服务器还包括：告警模块，用于对所述同步异常判断模块确定的所述数据同步异常，向用户告警。
在本发明的一些实施方式中，所述测试数据写入模块每隔第二时间间隔执行所述写入测试数据的操作以便由所述同步异常判断模块确定所述主库和备库之间的数据同步是否异常。
本发明上述实施方式通过间隔预定时间执行监控主库和备库之间的数据同步情况的操作，可以降低监控时对数据库反复读写产生的资源消耗，同时，通过定时执行上述操作，可以实现自动且及时的数据同步监控。
在本发明的一些实施方式中，在所述同步异常判断模块连续预定次数确定所述数据同步异常时所述告警模块才执行所述向用户告警的处理。
本发明上述实施方式通过在连续预定次数确定主库和备库之间的数据同步异常时才进行告警，可以弱化网络抖动对数据同步监控产生的影响，提高监控准确性，同时产生告警以及时对数据同步异常进行处理，从而避免数据不同步导致的业务异常。
在本发明的一些实施方式中，发生一次告警的整体时间满足下述关系：T＝n(s+t)，其中，T表示所述整体时间，n表示所述预定次数，t表示所述第一时间间隔，s表示所述第二时间间隔。
在本发明的一些实施方式中，所述向用户告警的处理包括：将表示所述数据同步异常的异常信息输出到日志中；通过告警工具捕获所述日志中的异常信息进行告警。
在本发明的一些实施方式中，所述应用服务器还包括：数据源调整模块，用于在所述同步异常判断模块连续预定次数确定所述数据同步异常后，将主数据源为所述备库的应用服务器的主数据源调整为所述主库。
本发明上述实施方式通过在连续预定次数确定数据同步异常后，将主数据源为备库的应用服务器的主数据源调整为主库，使应用服务器的主数据源均变为主库，以避免备库与主库间的数据不同步导致的主数据源为备库的应用服务器的业务异常。
在本发明的一些实施方式中，所述应用服务器还包括：流控模块，用于在将主数据源为所述备库的应用服务器的主数据源调整为所述主库后，使所述应用服务器采用流控机制对所述主库进行访问。
本发明上述实施方式在将主数据源为备库的应用服务器的主数据源调整为主库后，通过采用流控机制访问主库，可以避免所有应用服务器访问主库而出现主库资源耗尽的问题，从而保证主库负载正常。
根据本发明的第三方面，本发明实施方式提供一种计算机存储介质，其上存储有计算机可读指令，所述计算机可读指令被处理器执行时，使得计算机执行如下操作：所述操作包括如上任意一种实施方式所述方法所包含的步骤。
根据本发明的第四方面，本发明实施方式提供一种包括存储器和处理器的计算机设备，所述存储器用于存储一条或多条计算机指令，其中，所述一条或多条计算机指令被所述处理器执行时能够实现如上任意一种实施方式所述的方法。
由上述可知，本发明实施方式提供的对主库和备库之间的数据同步进行监控的方法、应用服务器、存储介质和设备，通过监控程序在主库中写入测试数据，以及通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据同步情况，进而对数据同步异常进行处理，以避免数据不同步导致的业务异常。
附图说明
图1是ADG工作原理的架构图；
图2是根据本发明一种实施方式的对主库和备库之间的数据同步进行监控的方法的流程示意图；
图3是根据本发明另一种实施方式的对主库和备库之间的数据同步进行监控的方法的处理操作示意图；
图4是根据本发明一种实施方式的对主库和备库之间的数据同步进行监控的应用服务器的架构图。
具体实施方式
以下结合附图和具体实施方式对本发明的各个方面进行详细阐述。其中，众所周知的模块、单元及其相互之间的连接、链接、通信或操作没有示出或未作详细说明。并且，所描述的特征、架构或功能可在一个或一个以上实施方式中以任何方式组合。本领域技术人员应当理解，下述的各种实施方式只用于举例说明，而非用于限制本发明的保护范围。还可以容易理解，本文所述和附图所示的各实施方式中的模块或单元或处理方式可以按各种不同配置进行组合和设计。
下面对本文中使用的术语进行简要说明。
ADG，Active Data Guard，主动数据保护，是Oracle11g版本的数据库自带的数据同步功能。
WebLogic，是基于JAVAEE架构的中间件，用于开发、集成、部署和管理大型分布式Web应用、网络应用和数据库应用的Java应用服务器。
图2是根据本发明一种实施方式的对主库和备库之间的数据同步进行监控的方法的流程示意图。
如图2所示，在本发明的一种实施方式中，所述方法可包括：步骤S21和步骤S22，下面对上述步骤进行具体的描述。
在步骤S21中，通过监控程序在所述主库中写入测试数据。在可选的实施方式中，测试数据为时间戳数据，使得通过监控程序在主库中写入的测试数据每次都不同。
在步骤S22中，所述监控程序经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
在可选的实施方式中，监控程序每隔第二时间间隔执行一次上述步骤S21和S22，由此，可以使监控程序间隔预定时间执行监控主库和备库之间的数据同步情况的操作，以降低监控时对数据库反复读写产生的资源消耗，同时通过监控程序定时执行上述操作，可以实现自动且及时的数据同步监控。
在可选的实施方式中，还可以针对数据同步异常的情况，向用户进行告警，以通知用户对该异常进行分析处理。然而，由于在网络抖动的情况下也会产生告警，而一般网络抖动可以自己恢复，因此，在可选的实施方式中，监控程序可以在连续预定次数确定数据同步异常时才执行向用户告警的处理，由此，可以弱化网络抖动对数据同步监控产生的影响，提高监控准确性。同时，向用户发出的告警可提示用户尽快对数据同步异常进行处理，以避免数据不同步导致的业务异常。
可选的，首先通过监控程序将表示数据同步异常的异常信息输出到日志中，然后通过告警工具捕获所述日志中的异常信息并进行告警来实现对于数据同步异常的告警操作。
根据上述可知，发生一次告警的整体时间满足下述关系：
T＝n(s+t)，
其中，T表示整体时间，n表示预定次数，t表示第一时间间隔，s表示第二时间间隔。并且，t应当满足业务层面对数据一致性要求，示例性的，如果业务要求数据实时或准实时同步，则可以将t设置为较小的秒级数值。
采用本发明实施方式的上述方法，通过监控程序在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行处理，以避免数据不同步导致的业务异常。
在可选的实施方式中，上述监控程序所执行的步骤可以通过java语言实现，并部署在应用服务器端，由此可以实现从应用层感知数据同步异常，进而及时对异常进行相应，以保障业务的连续性。
在可选的实施方式中，在连续预定次数确定数据同步异常后，监控程序将主数据源为备库的应用服务器的主数据源调整为主库，使得应用服务器的主数据源均变为主库，以避免备库与主库间的数据不同步导致的主数据源为备库的应用服务器的业务异常。可选的，在将主数据源为备库的应用服务器的主数据源调整为主库后，主库的资源开销增大，因此，可以使应用服务器采用流控机制访问主库，以避免所有应用服务器访问主库而出现主库资源耗尽的问题，从而保证主库负载正常。
在示例性的实施方式中，上述流控机制中流量控制的对象主要是接入和呼出的交易请求，其对应的量度指标主要是并发数，此时，针对主库访问的流控机制流程可以包括：在请求接入点或者是对外呼出点进行数据采集(包含控制策略逻辑所需的关键特征数据)，首先对当前流量状态进行阈值判断，如果超出阈值后，则调用相关的流控策略判断逻辑进行处理，最终决定对访问请求实施放行或拦截操作。
其中，针对流控策略目前主要采用基于资源的流量控制策略，所谓资源就是可以被识别和统计的一个对象，比如系统全局，某个渠道、某个机构、某支交易都是一种资源。资源的组成可以是单一条件也可以是复合的，比如可以根据渠道和机构两个条件进行资源的信息采集和统计。针对某些特殊的交易，还可以设置免流控交易，即使设置了流控也不会对免流控交易生效。
图3是根据本发明另一种实施方式的对主库和备库之间的数据同步进行监控的方法的处理操作示意图。
如图3所示，在本发明的另一种实施方式中，所述方法可包括下述步骤：
1)通过监控程序向主库中写入时间戳数据d；
2)经过时间t1，获取备库中的时间戳数据d’；
3)判断主库中的时间戳数据d与备库中的时间戳数据d’是否相同；
4)每经过时间s1，重复上述步骤1)至3)，当确定主库中的时间戳数据d与备库中的时间戳数据d’连续n次不相同后进行告警，同时，监控程序调整连接备库的WebLogic多数据源顺序，该步骤是将主数据源为备库的应用服务器的主数据源调整为主库；
5)对应用服务器进行流控。
采用本发明实施方式的上述方法，通过监控程序在主库中写入时间戳数据，并通过判断备库中是否存在同样的时间戳数据，以确定主库和备库之间的数据同步是否异常，能够及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行告警及对应的处理，同时调整连接备库的WebLogic多数据源顺序，可以避免备库与主库间的数据不同步导致的主数据源为备库的应用服务器的业务异。
图4是根据本发明一种实施方式的对主库和备库之间的数据同步进行监控的应用服务器的架构图。
如图4所示，所述应用服务器包括：
测试数据写入模块410，用于在所述主库中写入测试数据。在可选的实施方式中，测试数据为时间戳数据，使得每次在主库中写入的测试数据都不同。
同步异常判断模块420，用于在经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
在可选的实施方式中，测试数据写入模块410每隔第二时间间隔执行所述写入测试数据的操作以便由所述同步异常判断模块420确定所述主库和备库之间的数据同步是否异常，由此可以降低监控时对数据库反复读写产生的资源消耗，同时，通过定时执行上述操作，可以实现自动且及时的数据同步监控。
告警模块430，用于对所述同步异常判断模块420确定的所述数据同步异常，向用户告警。在可选的实施方式中，监控程序可以在连续预定次数确定数据同步异常时才执行向用户告警的处理，由此，可以弱化网络抖动对数据同步监控产生的影响，提高监控准确性。同时，向用户发出的告警可提示用户尽快对数据同步异常进行处理，以避免数据不同步导致的业务异常。
可选的，通过先将表示数据同步异常的异常信息输出到日志中，然后利用告警工具捕获所述日志中的异常信息并进行告警来实现告警模块330对于数据同步异常的告警操作。
数据源调整模块440，用于在所述同步异常判断模块420连续预定次数确定所述数据同步异常后，将主数据源为所述备库的应用服务器的主数据源调整为所述主库。此时，应用服务器的主数据源均变为主库，这样可以避免备库与主库间的数据不同步导致的主数据源为备库的应用服务器的业务异常。
流控模块450，用于在将主数据源为所述备库的应用服务器的主数据源调整为所述主库后，使所述应用服务器采用流控机制对所述主库进行访问。
流控模块450采用流控机制访问主库，可以避免所有应用服务器访问主库而出现主库资源耗尽的问题，从而保证主库负载正常。
采用本发明实施方式的上述应用服务器，通过使应用服务器在主库中写入测试数据，并通过判断备库中是否存在同样的测试数据以确定主库和备库之间的数据同步是否异常，能够使应用层及时监控到主库和备库之间的数据是否同步，进而对数据同步异常进行处理，以保障业务的连续性。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件结合硬件平台的方式来实现。基于这样的理解，本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施方式或者实施方式的某些部分所述的方法。
对应的，本发明实施方式还提供一种计算机可读存储介质，其上存储有计算机可读指令或程序，所述计算机可读指令或程序被处理器执行时，使得计算机执行如下操作：所述操作包括如上任意一种实施方式所述方法所包含的步骤，在此不再赘述。其中，所述存储介质可以包括：例如，光盘、硬盘、软盘、闪存、磁带等。
另外，本发明实施方式还提供一种包括存储器和处理器的计算机设备，所述存储器用于存储一条或多条计算机指令或程序，其中，所述一条或多条计算机指令或程序被所述处理器执行时能够实现如上任意一种实施方式所述的方法。所述计算机设备可以是，例如，服务器、台式计算机、笔记本计算机、平板电脑等。
最后应说明的是：以上实施方式仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施方式对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施方式所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施方式技术方案的精神和范围。因此本发明的保护范围应以权利要求为准。

Claims (21)

1.一种对主库和备库之间的数据同步进行监控的方法，其特征在于，所述方法包括：
通过监控程序在所述主库中写入测试数据；
所述监控程序经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
2.如权利要求1所述的方法，其特征在于，所述测试数据为时间戳数据。
3.如权利要求1或2所述的方法，其特征在于，所述方法还包括：
对于所述数据同步异常，向用户告警。
4.如权利要求3所述的方法，其特征在于，所述监控程序每隔第二时间间隔执行一次该方法。
5.如权利要求4所述的方法，其特征在于，所述监控程序在连续预定次数确定所述数据同步异常时才执行所述向用户告警的处理。
6.如权利要求5所述的方法，其特征在于，发生一次告警的整体时间满足下述关系：
T＝n(s+t)，
其中，T表示所述整体时间，n表示所述预定次数，t表示所述第一时间间隔，s表示所述第二时间间隔。
7.如权利要求5所述的方法，其特征在于，所述向用户告警的处理包括：
所述监控程序将表示所述数据同步异常的异常信息输出到日志中；
通过告警工具捕获所述日志中的异常信息进行告警。
8.如权利要求5所述的方法，其特征在于，所述方法还包括：
在连续预定次数确定所述数据同步异常后，将主数据源为所述备库的应用服务器的主数据源调整为所述主库。
9.如权利要求8所述的方法，其特征在于，所述方法还包括：
将主数据源为所述备库的应用服务器的主数据源调整为所述主库后，所述应用服务器采用流控机制对所述主库进行访问。
10.如权利要求1所述的方法，其特征在于，所述监控程序部署在应用服务器端。
11.一种对主库和备库之间的数据同步进行监控的应用服务器，其特征在于，所述应用服务器包括：
测试数据写入模块，用于在所述主库中写入测试数据；
同步异常判断模块，用于在经过第一时间间隔后查询所述备库中是否存在所述测试数据，若所述备库中不存在所述测试数据，则确定所述主库和备库之间的数据同步异常。
12.如权利要求11所述的应用服务器，其特征在于，所述测试数据为时间戳数据。
13.如权利要求11或12所述的应用服务器，其特征在于，所述应用服务器还包括：
告警模块，用于对所述同步异常判断模块确定的所述数据同步异常，向用户告警。
14.如权利要求13所述的应用服务器，其特征在于，所述测试数据写入模块每隔第二时间间隔执行所述写入测试数据的操作以便由所述同步异常判断模块确定所述主库和备库之间的数据同步是否异常。
15.如权利要求14所述的应用服务器，其特征在于，在所述同步异常判断模块连续预定次数确定所述数据同步异常时所述告警模块才执行所述向用户告警的处理。
16.如权利要求15所述的应用服务器，其特征在于，发生一次告警的整体时间满足下述关系：
T＝n(s+t)，
其中，T表示所述整体时间，n表示所述预定次数，t表示所述第一时间间隔，s表示所述第二时间间隔。
17.如权利要求15所述的应用服务器，其特征在于，所述向用户告警的处理包括：
将表示所述数据同步异常的异常信息输出到日志中；
通过告警工具捕获所述日志中的异常信息进行告警。
18.如权利要求15所述的应用服务器，其特征在于，所述应用服务器还包括：
数据源调整模块，用于在所述同步异常判断模块连续预定次数确定所述数据同步异常后，将主数据源为所述备库的应用服务器的主数据源调整为所述主库。
19.如权利要求18所述的应用服务器，其特征在于，所述应用服务器还包括：
流控模块，用于在将主数据源为所述备库的应用服务器的主数据源调整为所述主库后，使所述应用服务器采用流控机制对所述主库进行访问。
20.一种计算机存储介质，所述计算机存储介质储存计算机软件指令，其特征在于，所述计算机软件指令由处理器执行以实现如权利要求1-10中任一项所述的方法。
21.一种计算机设备，其包括存储器和处理器；
其特征在于，所述存储器用于存储一条或多条计算机指令，所述处理器执行所述一条或多条计算机指令以实现如权利要求1-10中任一项所述的方法。
CN202010338242.7A 2020-04-26 2020-04-26 对数据同步进行监控的方法、服务器、设备和存储介质 Pending CN111694894A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010338242.7A CN111694894A (zh) 2020-04-26 2020-04-26 对数据同步进行监控的方法、服务器、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010338242.7A CN111694894A (zh) 2020-04-26 2020-04-26 对数据同步进行监控的方法、服务器、设备和存储介质

Publications (1)

Publication Number Publication Date
CN111694894A true CN111694894A (zh) 2020-09-22

Family

ID=72476558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010338242.7A Pending CN111694894A (zh) 2020-04-26 2020-04-26 对数据同步进行监控的方法、服务器、设备和存储介质

Country Status (1)

Country Link
CN (1) CN111694894A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113609230A (zh) * 2021-09-16 2021-11-05 平安国际智慧城市科技股份有限公司 数据同步异常告警方法、装置、计算机设备和存储介质
CN113780902A (zh) * 2021-11-12 2021-12-10 江西省国土空间调查规划研究院 一种基于云计算的灾害风险预警管理系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09146782A (ja) * 1995-11-24 1997-06-06 Hitachi Ltd ジョブ間データ引き継ぎにおける異常発生時の対応方法
CN101436209A (zh) * 2008-12-15 2009-05-20 中兴通讯股份有限公司 一种多数据库同步的方法和装置
CN104504062A (zh) * 2014-12-22 2015-04-08 浙江宇视科技有限公司 主备数据库数据同步方法及装置
CN105245408A (zh) * 2015-11-06 2016-01-13 上海斐讯数据通信技术有限公司 数据同步监控方法及装置
CN105843702A (zh) * 2015-01-14 2016-08-10 阿里巴巴集团控股有限公司 一种用于数据备份的方法以及装置
CN106844163A (zh) * 2017-03-16 2017-06-13 郑州云海信息技术有限公司 一种数据库主从同步状态监控的方法以及装置
CN110955723A (zh) * 2019-11-15 2020-04-03 北京浪潮数据技术有限公司 一种主从数据库同步状态监控方法、装置及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09146782A (ja) * 1995-11-24 1997-06-06 Hitachi Ltd ジョブ間データ引き継ぎにおける異常発生時の対応方法
CN101436209A (zh) * 2008-12-15 2009-05-20 中兴通讯股份有限公司 一种多数据库同步的方法和装置
CN104504062A (zh) * 2014-12-22 2015-04-08 浙江宇视科技有限公司 主备数据库数据同步方法及装置
CN105843702A (zh) * 2015-01-14 2016-08-10 阿里巴巴集团控股有限公司 一种用于数据备份的方法以及装置
CN105245408A (zh) * 2015-11-06 2016-01-13 上海斐讯数据通信技术有限公司 数据同步监控方法及装置
CN106844163A (zh) * 2017-03-16 2017-06-13 郑州云海信息技术有限公司 一种数据库主从同步状态监控的方法以及装置
CN110955723A (zh) * 2019-11-15 2020-04-03 北京浪潮数据技术有限公司 一种主从数据库同步状态监控方法、装置及电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113609230A (zh) * 2021-09-16 2021-11-05 平安国际智慧城市科技股份有限公司 数据同步异常告警方法、装置、计算机设备和存储介质
CN113780902A (zh) * 2021-11-12 2021-12-10 江西省国土空间调查规划研究院 一种基于云计算的灾害风险预警管理系统

Similar Documents

Publication Publication Date Title
US9632875B2 (en) Automated and self-adjusting data protection driven by business and data activity events
US10353918B2 (en) High availability and disaster recovery in large-scale data warehouse
EP2659371B1 (en) Predicting, diagnosing, and recovering from application failures based on resource access patterns
US9098439B2 (en) Providing a fault tolerant system in a loosely-coupled cluster environment using application checkpoints and logs
US9037905B2 (en) Data processing failure recovery method, system and program
US9189348B2 (en) High availability database management system and database management method using same
US20080244307A1 (en) Method to avoid continuous application failovers in a cluster
WO2019070915A1 (en) PARTIAL RESTORATION OF A DATABASE
CN112506915B (zh) 一种应用数据的管理系统以及处理方法、装置和服务器
JP5686020B2 (ja) 監視システム
GB2478625A (en) Deleting snapshot backups for unstable virtual machine configurations
CN111177165B (zh) 数据一致性检测的方法、装置及设备
US9436539B2 (en) Synchronized debug information generation
CN112948064B (zh) 一种数据读取方法、装置及数据读取系统
US11720470B2 (en) Dynamic post-change computing-system evaluation
CN111694894A (zh) 对数据同步进行监控的方法、服务器、设备和存储介质
US20200293412A1 (en) Log Management Method, Server, and Database System
CN106815094B (zh) 一种用于实现主备同步模式下事务提交的方法与设备
US20050234919A1 (en) Cluster system and an error recovery method thereof
CN116781488A (zh) 数据库高可用实现方法、装置、数据库架构、设备和产品
CN117149527B (zh) 一种服务器数据备份与恢复系统及方法
CN113849350B (zh) 环形两地三中心拓扑切换方法、装置、系统及介质
US8478954B2 (en) Prioritizing subgroups in a consistency group
CN113268395B (zh) 业务数据的处理方法、处理装置及终端
JPH07183891A (ja) 計算機システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200922