CN110209554B - 数据库日志分发方法、装置及设备 - Google Patents

数据库日志分发方法、装置及设备 Download PDF

Info

Publication number
CN110209554B
CN110209554B CN201910513772.8A CN201910513772A CN110209554B CN 110209554 B CN110209554 B CN 110209554B CN 201910513772 A CN201910513772 A CN 201910513772A CN 110209554 B CN110209554 B CN 110209554B
Authority
CN
China
Prior art keywords
log
pulling
database
data
task
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910513772.8A
Other languages
English (en)
Other versions
CN110209554A (zh
Inventor
邓云勇
丁允胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhongtongji Network Technology Co Ltd
Original Assignee
Shanghai Zhongtongji Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhongtongji Network Technology Co Ltd filed Critical Shanghai Zhongtongji Network Technology Co Ltd
Priority to CN201910513772.8A priority Critical patent/CN110209554B/zh
Publication of CN110209554A publication Critical patent/CN110209554A/zh
Application granted granted Critical
Publication of CN110209554B publication Critical patent/CN110209554B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/202—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant
    • G06F11/2023—Failover techniques
    • G06F11/2028—Failover techniques eliminating a faulty processor or activating a spare
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3086—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves the use of self describing data formats, i.e. metadata, markup languages, human readable formats
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • G06F11/3093—Configuration details thereof, e.g. installation, enabling, spatial arrangement of the probes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/80—Database-specific techniques
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种数据库日志分发方法、装置及设备，包括通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；将所述待分发数据发送至所述消息中间件。由于二进制日志事件为预先标记的，因此，当数据库服务器发生主备切换时，就可以确定已获取的日志的位置，从而可以正确衔接，避免了获取日志重复或丢失，保证日志分发的正确。

Description

数据库日志分发方法、装置及设备
技术领域
本申请数据库技术领域，尤其涉及一种数据库日志分发方法、装置及设备。
背景技术
目前，对于数据库日志分发，一般采用的是Canal。由于数据库一般都存在主备系统，即设置两台服务器，一台处于激活状态，一台处于备用状态，当处于激活状态的服务器发生故障时，可以切换到处于备用状态的服务器，防止数据记录中断。
而数据库发生主备切换时，采用Canal进行日志分发时，无法确定从数据库中获取到了哪个实例的哪个事件，这就会导致Canal获取到的数据内容部分丢失或者部分重复，从而导致日志分发出错。
发明内容
为至少在一定程度上克服相关技术中存在的问题，本申请提供一种数据库日志分发方法、装置及设备。
根据本申请的第一方面，提供一种数据库日志分发方法，包括：
通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
将所述待分发数据发送至所述消息中间件。
可选的，所述预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识。
可选的，所述通过Dump协议向数据库服务器拉取预先标记的二进制日志事件，包括：
通过Dump协议向数据库服务器拉取二进制日志事件；
记录所述二进制日志事件的日志文件和日志位点。
可选的，还包括：
监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
可选的，还包括：
判断单位时间窗口内是否发生事物，得到判断结果；
根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
显示所述任务异常情况。
根据本申请的第二方面，提供一种数据库日志分发装置，包括：
第一拉取模块，用于通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
处理模块，用于根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
发送模块，用于将所述待分发数据发送至所述消息中间件。
可选的，所述预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识。
可选的，所述拉取模块包括：
拉取单元，用于通过Dump协议向数据库服务器拉取二进制日志事件；
记录单元，用于记录所述二进制日志事件的日志文件和日志位点。
可选的，还包括：
监视模块，用于监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录模块，用于记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
第一显示模块，用于显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
判断模块，用于判断单位时间窗口内是否发生事物，得到判断结果；
第二拉取模块，用于根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
第二显示模块，用于显示所述任务异常情况。
根据本申请的第三方面，提供一种数据库日志分发设备，包括：
处理器，以及与所述处理器相连接的存储器；
所述存储器用于存储计算机程序，所述计算机程序至少用于执行以下所述的数据库日志分发方法：
通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
将所述待分发数据发送至所述消息中间件。
可选的，所述预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识。
可选的，所述通过Dump协议向数据库服务器拉取预先标记的二进制日志事件，包括：
通过Dump协议向数据库服务器拉取二进制日志事件；
记录所述二进制日志事件的日志文件和日志位点。
可选的，还包括：
监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
可选的，还包括：
判断单位时间窗口内是否发生事物，得到判断结果；
根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
显示所述任务异常情况。
所述处理器用于调用并执行所述存储器中的所述计算机程序。
本申请提供的技术方案可以包括以下有益效果：通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；将所述待分发数据发送至所述消息中间件。由于二进制日志事件为预先标记的，因此，当数据库服务器发生主备切换时，就可以确定已获取的日志的位置，从而可以正确衔接，避免了获取日志重复或丢失，保证日志分发的正确。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
图1是本申请的实施例一提供的一种数据库日志分发方法的流程示意图。
图2是本申请的实施例二提供的一种数据库日志分发装置的结构示意图。
图3是本申请的实施例三提供的一种数据库日志分发设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
目前，对于数据库日志分发，一般采用的是Canal。由于数据库一般都存在主备系统，即设置两台服务器，一台处于激活状态，一台处于备用状态，当处于激活状态的服务器发生故障时，可以切换到处于备用状态的服务器，防止数据记录中断。
而数据库发生主备切换时，采用Canal进行日志分发时，无法确定从数据库中获取到了哪个实例的哪个事件，这就会导致Canal获取到的数据内容部分丢失或者部分重复，从而导致日志分发出错。
为了解决上述技术问题，本申请提供了一种数据库日志分发方法、装置及设备。
实施例一
请参阅图1，图1是本申请的实施例一提供的一种数据库日志分发方法的流程示意图。
如图1所示，本实施例提供的数据库日志分发方法包括：
步骤11、通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
步骤12、根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
步骤13、将所述待分发数据发送至所述消息中间件。
由于通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；将所述待分发数据发送至所述消息中间件。由于二进制日志事件为预先标记的，因此，当数据库服务器发生主备切换时，就可以确定已获取的日志的位置，从而可以正确衔接，避免了获取日志重复或丢失，保证日志分发的正确。
由于本实施例的方法是通过拉取二进制日志事件，然后记录到消息中间件中，因此可以满足实时的日志分发。
需要说明的是，利用dump协议，可以将获取数据方伪装成数据库服务器的从站，即Slave。预先标记的方法可以有很多种，一种是采用全局事务编号(Global TransactionID，GTID)，一种是利用备份的方式。
其中，当预先标记采用GTID时，数据库可以为MySQL数据库。GTID实际上是由UUID和TID组成的。其中UUID(server_uuid)是一个MySQL实例的唯一标识，保存在mysql数据目录下的auto.cnf文件里。TID(transaction_id)代表了该实例上已经提交的事务数量，并且随着事务提交单调递增。
下面是一个GTID的具体形式：3E11FA47-71CA-11E1-9E33-C80AA9429562:23
另外，利用GTID，可以对大事件进行过滤，通过对GTID的分析，将满足预设条件的GTID对应的事件过滤，不对其进行获取，以实现对数据库大事件的过滤。
当预先标记的方法采用备份方法时，步骤11可以包括：
通过Dump协议向数据库服务器拉取二进制日志事件；
记录所述二进制日志事件的日志文件和日志位点。
另外，本申请的实施例还可以对上述时间进行监视，因此，本实施例的方法还可以包括：
监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
进一步地，本实施例还可以监视任务是否发生异常，因此本实施例的方法还可以包括：
判断单位时间窗口内是否发生事物，得到判断结果；
根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
显示所述任务异常情况。
实施例二
请参阅图2，图2是本申请的实施例二提供的一种数据库日志分发装置的结构示意图。
如图2所示，本实施例提供的数据库日志分发装置，包括：
第一拉取模块21，用于通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
处理模块22，用于根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
发送模块23，用于将所述待分发数据发送至所述消息中间件。
由于通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；将所述待分发数据发送至所述消息中间件。由于二进制日志事件为预先标记的，因此，当数据库服务器发生主备切换时，就可以确定已获取的日志的位置，从而可以正确衔接，避免了获取日志重复或丢失，保证日志分发的正确。
需要说明的是，利用dump协议，可以将获取数据方伪装成数据库服务器的从站，即Slave。预先标记的方法可以有很多种，一种是采用全局事务编号(Global TransactionID，GTID)，一种是利用备份的方式。
其中，当预先标记采用GTID时，数据库可以为MySQL数据库。GTID实际上是由UUID和TID组成的。其中UUID(server_uuid)是一个MySQL实例的唯一标识，保存在mysql数据目录下的auto.cnf文件里。TID(transaction_id)代表了该实例上已经提交的事务数量，并且随着事务提交单调递增。
下面是一个GTID的具体形式：3E11FA47-71CA-11E1-9E33-C80AA9429562:23
其中，所述预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识。
进一步地，预先标记还可以采用备份的方法，因此所述拉取模块包括：
拉取单元，用于通过Dump协议向数据库服务器拉取二进制日志事件；
记录单元，用于记录所述二进制日志事件的日志文件和日志位点。
进一步地，本装置还可以包括：
监视模块，用于监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录模块，用于记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
第一显示模块，用于显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
判断模块，用于判断单位时间窗口内是否发生事物，得到判断结果；
第二拉取模块，用于根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
第二显示模块，用于显示所述任务异常情况。
实施例三
请参阅图3，图3是本申请的实施例三提供的一种数据库日志分发设备的结构示意图。
如图3所示，本实施例提供的数据库日志分发设备，包括：
处理器31，以及与所述处理器相连接的存储器32；
所述存储器用于存储计算机程序，所述计算机程序至少用于执行以下所述的数据库日志分发方法：
通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
将所述待分发数据发送至所述消息中间件。
可选的，所述预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识。
可选的，所述通过Dump协议向数据库服务器拉取预先标记的二进制日志事件，包括：
通过Dump协议向数据库服务器拉取二进制日志事件；
记录所述二进制日志事件的日志文件和日志位点。
可选的，还包括：
监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
可选的，还包括：
判断单位时间窗口内是否发生事物，得到判断结果；
根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
显示所述任务异常情况。
所述处理器用于调用并执行所述存储器中的所述计算机程序。
通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；将所述待分发数据发送至所述消息中间件。由于二进制日志事件为预先标记的，因此，当数据库服务器发生主备切换时，就可以确定已获取的日志的位置，从而可以正确衔接，避免了获取日志重复或丢失，保证日志分发的正确。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
可以理解的是，上述各实施例中相同或相似部分可以相互参考，在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
需要说明的是，在本申请的描述中，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本申请的描述中，除非另有说明，“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。
应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (7)

1.一种数据库日志分发方法，其特征在于，包括：
通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；
根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
将所述待分发数据发送至所述消息中间件；
预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识；
监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
2.根据权利要求1所述的数据库日志分发方法，其特征在于，所述通过Dump协议向数据库服务器拉取预先标记的二进制日志事件，包括：
通过Dump协议向数据库服务器拉取二进制日志事件；
记录所述二进制日志事件的日志文件和日志位点。
3.根据权利要求1所述的数据库日志分发方法，其特征在于，还包括：
判断单位时间窗口内是否发生事物，得到判断结果；
根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
显示所述任务异常情况。
4.一种数据库日志分发装置，其特征在于，包括：
第一拉取模块，用于通过Dump协议向数据库服务器拉取预先标记的二进制日志事件；预先标记的二进制日志事件由所述数据库服务器通过全局事务编号进行标识；
处理模块，用于根据接收待分发数据的消息中间件类型对所述二进制日志事件中的数据进行处理，得到所述待分发数据；
发送模块，用于将所述待分发数据发送至所述消息中间件；
监视模块，用于监视所述向数据库服务器拉取预先标记的二进制日志事件的拉取过程；
记录模块，用于记录所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态；
第一显示模块，用于显示所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态。
5.根据权利要求4所述的数据库日志分发装置，其特征在于，所述拉取模块包括：
拉取单元，用于通过Dump协议向数据库服务器拉取二进制日志事件；
记录单元，用于记录所述二进制日志事件的日志文件和日志位点。
6.根据权利要求4所述的数据库日志分发装置，其特征在于，还包括：
判断模块，用于判断单位时间窗口内是否发生事物，得到判断结果；
第二拉取模块，用于根据所述拉取的任务状态、每秒事务处理量、拉取的任务积压状态及所述判断结果得到任务异常情况；
第二显示模块，用于显示所述任务异常情况。
7.一种数据库日志分发设备，其特征在于，包括：
处理器，以及与所述处理器相连接的存储器；
所述存储器用于存储计算机程序，所述计算机程序至少用于执行权利要求1～3任一项所述的数据库日志分发方法；
所述处理器用于调用并执行所述存储器中的所述计算机程序。
CN201910513772.8A 2019-06-14 2019-06-14 数据库日志分发方法、装置及设备 Active CN110209554B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910513772.8A CN110209554B (zh) 2019-06-14 2019-06-14 数据库日志分发方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910513772.8A CN110209554B (zh) 2019-06-14 2019-06-14 数据库日志分发方法、装置及设备

Publications (2)

Publication Number Publication Date
CN110209554A CN110209554A (zh) 2019-09-06
CN110209554B true CN110209554B (zh) 2023-08-11

Family

ID=67792726

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910513772.8A Active CN110209554B (zh) 2019-06-14 2019-06-14 数据库日志分发方法、装置及设备

Country Status (1)

Country Link
CN (1) CN110209554B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110674079B (zh) * 2019-09-10 2022-07-12 杭州数梦工场科技有限公司 日志文件记录方法和装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101707633A (zh) * 2009-11-27 2010-05-12 山东中创软件商用中间件股份有限公司 一种基于文件系统的消息中间件持久消息的存储方法
CN104408132A (zh) * 2014-11-28 2015-03-11 北京京东尚科信息技术有限公司 数据推送方法和系统
CN106202075A (zh) * 2015-04-29 2016-12-07 中兴通讯股份有限公司 一种数据库主备切换的方法及装置
CN106407356A (zh) * 2016-09-07 2017-02-15 网易（杭州）网络有限公司 一种数据备份方法及装置
CN106802892A (zh) * 2015-11-26 2017-06-06 阿里巴巴集团控股有限公司 用于主备数据一致性校验的方法和设备
CN107995242A (zh) * 2016-10-27 2018-05-04 北京京东尚科信息技术有限公司 一种业务处理方法及系统
CN108076098A (zh) * 2016-11-16 2018-05-25 北京京东尚科信息技术有限公司 一种业务处理方法及系统
CN108170768A (zh) * 2017-12-25 2018-06-15 腾讯科技（深圳）有限公司 数据库同步方法、装置及可读介质
CN108804237A (zh) * 2017-05-05 2018-11-13 北京京东尚科信息技术有限公司 数据实时统计方法、装置、存储介质和电子设备
CN109144785A (zh) * 2018-08-27 2019-01-04 北京百度网讯科技有限公司 用于备份数据的方法和装置
CN109492012A (zh) * 2018-10-31 2019-03-19 厦门安胜网络科技有限公司 一种数据实时统计和检索的方法、装置及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9575849B2 (en) * 2014-11-25 2017-02-21 Sap Se Synchronized backup and recovery of database systems
US11314544B2 (en) * 2015-02-09 2022-04-26 Red Hat, Inc. Transaction log for audit purposes
WO2016168855A1 (en) * 2015-04-17 2016-10-20 Zuora, Inc. System and method for real-time cloud data synchronization using a database binary log

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101707633A (zh) * 2009-11-27 2010-05-12 山东中创软件商用中间件股份有限公司 一种基于文件系统的消息中间件持久消息的存储方法
CN104408132A (zh) * 2014-11-28 2015-03-11 北京京东尚科信息技术有限公司 数据推送方法和系统
CN106202075A (zh) * 2015-04-29 2016-12-07 中兴通讯股份有限公司 一种数据库主备切换的方法及装置
CN106802892A (zh) * 2015-11-26 2017-06-06 阿里巴巴集团控股有限公司 用于主备数据一致性校验的方法和设备
CN106407356A (zh) * 2016-09-07 2017-02-15 网易（杭州）网络有限公司 一种数据备份方法及装置
CN107995242A (zh) * 2016-10-27 2018-05-04 北京京东尚科信息技术有限公司 一种业务处理方法及系统
CN108076098A (zh) * 2016-11-16 2018-05-25 北京京东尚科信息技术有限公司 一种业务处理方法及系统
CN108804237A (zh) * 2017-05-05 2018-11-13 北京京东尚科信息技术有限公司 数据实时统计方法、装置、存储介质和电子设备
CN108170768A (zh) * 2017-12-25 2018-06-15 腾讯科技（深圳）有限公司 数据库同步方法、装置及可读介质
CN109144785A (zh) * 2018-08-27 2019-01-04 北京百度网讯科技有限公司 用于备份数据的方法和装置
CN109492012A (zh) * 2018-10-31 2019-03-19 厦门安胜网络科技有限公司 一种数据实时统计和检索的方法、装置及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
数据仓库的数据抽取技术研究;钟巧华;《计算机工程》;20041231;第30卷;全文 *

Also Published As

Publication number Publication date
CN110209554A (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
US9201647B2 (en) Configuration management center
US20130179729A1 (en) Fault tolerant system in a loosely-coupled cluster environment
US8892712B2 (en) Upgrading enterprise managers
US20080168218A1 (en) Backup system with continuous data protection
CN107896172B (zh) 监听故障处理方法及装置、存储介质和电子设备
US9436539B2 (en) Synchronized debug information generation
US20130086418A1 (en) Data processing failure recovery method, system and program
CN110554929B (zh) 数据校验方法、装置、计算机设备及存储介质
US10613922B2 (en) Synchronously generating diagnostic data
CN110209554B (zh) 数据库日志分发方法、装置及设备
US20160266961A1 (en) Trace capture of successfully completed transactions for trace debugging of failed transactions
US10970159B1 (en) Automated system maintenance capabilities for a computing system
CN109885431B (zh) 用于备份数据的方法和装置
CN109684130B (zh) 一种机房间数据备份的方法及装置
CN109299124B (zh) 用于更新模型的方法和装置
US9031969B2 (en) Guaranteed in-flight SQL insert operation support during an RAC database failover
CN113760611A (zh) 系统站点切换方法、装置、电子设备及存储介质
CN110941252A (zh) 车载设备测试方法及系统
US9594622B2 (en) Contacting remote support (call home) and reporting a catastrophic event with supporting documentation
CN113094208B (zh) 基于绑定接口和Binlog日志实现数据恢复的方法及系统
CN113703669B (zh) 一种缓存分区的管理方法、系统、设备及存储介质
CN109525470B (zh) 网络接入方法及网络接入系统
CN109960659B (zh) 用于检测应用程序的方法和装置
CN114171165B (zh) 基于独立任务管理服务的转发方法和系统
CN111737354A (zh) 数据一致性的检测方法、装置、系统及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant