CN109977168B - 基于数据页预加载的数据库数据同步方法及设备 - Google Patents
基于数据页预加载的数据库数据同步方法及设备 Download PDFInfo
- Publication number
- CN109977168B CN109977168B CN201910203434.4A CN201910203434A CN109977168B CN 109977168 B CN109977168 B CN 109977168B CN 201910203434 A CN201910203434 A CN 201910203434A CN 109977168 B CN109977168 B CN 109977168B
- Authority
- CN
- China
- Prior art keywords
- transaction
- operations
- data page
- synchronized
- page preloading
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 230000001360 synchronised effect Effects 0.000 claims abstract description 48
- 230000003213 activating effect Effects 0.000 claims abstract description 8
- 238000004891 communication Methods 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000010076 replication Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000009545 invasion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供了一种基于数据页预加载的数据库数据同步方法及设备。所述方法包括：在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。本发明实施例提供的基于数据页预加载的数据库数据同步方法及设备，可以有效提升数据库事务同步时的同步效率。
Description
技术领域
本发明实施例涉及数据库数据处理技术领域，尤其涉及一种基于数据页预加载的数据库数据同步方法及设备。
背景技术
传统的基于数据库自身的主备机制实现数据库数据的实时复制，是进行数据容灾备份，保障数据安全的重要的解决方案。数据库主备机制下，一般备机作为备份节点，通常只提供只读访问，可以在备机上做一些报表分析、数据挖掘等只读访问的应用，而不能像主机一样提供读写访问。另外，数据库主备机制要求备机数据库系统和主机一致，对于异构数据库系统环境，则不能利用数据库自身的主备机制实现有效的数据实时复制。针对数据库主备机制实现数据复制的不足，目前基于软件的异构数据库复制技术应用广泛。这种技术在源端捕获出数据库的增量数据，然后发送到目标端，在目标端通过通用的数据库访问接口，将增量数据应用到目标数据库，实现数据复制。这种技术因为使用到通用数据库接口，因此支持异构数据库系统复制，支持异构操作系统环境，并且目标端备机数据库系统可读写，是一种“双活”系统。
有多种技术方式实现获取源端数据库的增量数据，其中基于数据库日志捕获分析的数据实时同步技术，因其对源数据库侵入性小，捕获分析性能高，得到较大发展及研究。这种技术通过分析源数据库归档或联机日志，捕获出数据库的INSERT、UPDATE、DELETE操作日志，然后发送到目标端，目标端对日志信息进行逆向生成，恢复成SQL语句方式，然后使用数据库通用接口，应用到目标数据库，实现数据复制。因此，在数据库实时复制过程中，目标端的执行效率是影响数据同步性能的重要因素。
目标端数据库上执行同步事务时，如果同步事务中操作相关数据页都已经加载，那么事务执行的效率将会较为高效；否则，如果同步事务中操作相关的数据页还在数据库磁盘文件中，访问这些页时则需要等待IO线程从磁盘上加载该页，事务执行的效率将会变得非常缓慢，影响数据同步的效率。因此，如何提高事务同步时操作访问数据页的命中率就可以提升目标端数据复制的执行效率，就成为业界亟待解决的重要技术问题。
发明内容
针对现有技术存在的上述问题，本发明实施例提供了一种基于数据页预加载的数据库数据同步方法及设备。
第一方面，本发明的实施例提供了一种基于数据页预加载的数据库数据同步方法，包括：在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。
进一步地，所述则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作,包括：遍历待同步的事务操作，若事务中存在UPDATE操作和/或DELETE操作，则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作。
进一步地，所述则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作，包括：若UPDATE操作和/或DELETE操作出现连续批量操作，则将所述连续批量操作上下预设距离范围内的UPDATE操作和/或DELETE操作，转换为SELECT操作。
进一步地，所述的基于数据页预加载的数据库数据同步方法，还包括：若目标端数据同步服务启动，则初始化若干个数据页预加载线程，所述若干个数据页预加载线程，用于执行转换后的SELECT操作。
进一步地，所述的基于数据页预加载的数据库数据同步方法，还包括：若目标端数据同步服务启动，则初始化若干个事务执行线程，所述若干个事务执行线程，用于执行所述待同步的事务操作。
第二方面，本发明的实施例提供了一种基于数据页预加载的数据库数据同步装置，包括：
数据页预加载模块，用于在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；
事务同步模块，用于激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。
第三方面，本发明的实施例提供了一种电子设备，包括：
至少一个处理器；以及
与处理器通信连接的至少一个存储器，其中：
存储器存储有可被处理器执行的程序指令，处理器调用程序指令能够执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的基于数据页预加载的数据库数据同步方法。
第四方面，本发明的实施例提供了一种非暂态计算机可读存储介质，非暂态计算机可读存储介质存储计算机指令，计算机指令使计算机执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的基于数据页预加载的数据库数据同步方法。
本发明实施例提供的基于数据页预加载的数据库数据同步方法及设备，通过将事务中的操作转化为相应的处理程序较为快速简洁的SELECT操作，并投递至数据页预加载线程执行，可以实现事务执行之前对事务中的操作进行预热，从而有效提升数据库事务同步时的同步效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做一简单的介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的基于数据页预加载的数据库数据同步方法流程图；
图2为本发明实施例提供的基于数据页预加载的数据库数据同步装置结构示意图；
图3为本发明实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。另外，本发明提供的各个实施例或单个实施例中的技术特征可以相互任意结合，以形成可行的技术方案，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时，应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
本发明实施例提供了一种基于数据页预加载的数据库数据同步方法，参见图1，该方法包括：
101、在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；
102、激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。
在上述实施例的基础上，本发明实施例中提供的基于数据页预加载的数据库数据同步方法，所述则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作,包括：遍历待同步的事务操作，若事务中存在UPDATE操作和/或DELETE操作，则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作。这就可以实现事务中的UPDATE或DELETE操作涉及的数据页在数据库中预热，防止事务执行线程在执行UPDATE或DELETE操作时访问到冷数据，冷数据则需要等待从磁盘上加载，从而影响到执行的性能。
具体地，假设同步事务中存在UPDATE操作：UPDATE T SET C1＝1，C2＝1，C3＝1，C4＝1，C5＝1，…，Cn＝1，WHERE ID＝1；
上述操作在执行时，可以先把UPDATE转换成SELECT操作先执行，以便预热UPDATE需要访问的数据，转换为：SELECT 1FROM T WHERE ID＝1；
假设同步事务中存在DELETE操作：DELETE FROM T WHERE ID＝1；
上述操作在执行时，可以先把DELETE转换成SELECT操作先执行，以便预热DELETE需要访问的数据，转换为：SELECT 1FROM T WHERE ID＝1；
在上述实施例的基础上，本发明实施例中提供的基于数据页预加载的数据库数据同步方法，所述则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作，包括：若UPDATE操作和/或DELETE操作出现连续批量操作，则将所述连续批量操作上下预设距离范围内的UPDATE操作和/或DELETE操作，转换为SELECT操作。
需要说明的是，当UPDATE操作或DELETE操作出现连续批量的操作时，把这些操作都转换为SELECT操作会造成多个SELECT操作要预加载的数据页属于同一页，造成无意义的执行，浪费目的端数据库的资源。当批量操作出现时，可以采用跳跃式转换，按N为跳跃基数(N即为上下预设距离范围)，只转换该批量操作中上下间隔为N的操作为SELECT操作。
在上述实施例的基础上，本发明实施例中提供的基于数据页预加载的数据库数据同步方法，还包括：若目标端数据同步服务启动，则初始化若干个数据页预加载线程，所述若干个数据页预加载线程，用于执行转换后的SELECT操作。
在上述实施例的基础上，本发明实施例中提供的基于数据页预加载的数据库数据同步方法，还包括：若目标端数据同步服务启动，则初始化若干个事务执行线程，所述若干个事务执行线程，用于执行所述待同步的事务操作。
具体地，将事务按事务ID分类为事务1至事务N，转换后的SELECT操作由数据页预加载线程1到数据页预加载线程N顺序抽取SELECT操作执行，提交事务则分别由事务执行线程1到事务执行线程N执行。有关UPDATE操作、DELETE操作和SELECT操作的具体内容可以参见表1。
表1
相对于转换成UPDATE和DELETE操作，SELECT操作具有最小的系统侵入性，SELECT操作不会对目的表上锁；SELECT操作也不会触发目的表上的触发器；SELECT操作不会触发目的表的约束检查；SELECT操作在目的端数据库不产生任何操作日志。
本发明实施例提供的基于数据页预加载的数据库数据同步方法，通过将事务中的操作转化为相应的处理程序较为快速简洁的SELECT操作，并投递至数据页预加载线程执行，可以实现事务执行之前对事务中的操作进行预热，从而有效提升数据库事务同步时的同步效率。
本发明各个实施例的实现基础是通过具有处理器功能的设备进行程序化的处理实现的。因此在工程实际中，可以将本发明各个实施例的技术方案及其功能封装成各种模块。基于这种现实情况，在上述各实施例的基础上，本发明的实施例提供了一种基于数据页预加载的数据库数据同步装置，该装置用于执行上述方法实施例中的基于数据页预加载的数据库数据同步方法。参见图2，该装置包括：
数据页预加载模块201，用于在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；
事务同步模块202，用于激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。
本发明实施例提供的基于数据页预加载的数据库数据同步装置，采用数据页预加载模块和事务同步模块，通过将事务中的操作转化为相应的处理程序较为快速简洁的SELECT操作，并投递至数据页预加载线程执行，可以实现事务执行之前对事务中的操作进行预热，从而有效提升数据库事务同步时的同步效率。
本发明实施例的方法是依托电子设备实现的，因此对相关的电子设备有必要做一下介绍。基于此目的，本发明的实施例提供了一种电子设备，如图3所示，该电子设备包括：至少一个处理器(processor)301、通信接口(Communications Interface)304、至少一个存储器(memory)302和通信总线303，其中，至少一个处理器301，通信接口304，至少一个存储器302通过通信总线303完成相互间的通信。至少一个处理器301可以调用至少一个存储器302中的逻辑指令，以执行如下方法：在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。
此外，上述的至少一个存储器302中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。例如包括：在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现所述待同步事务涉及的数据页预加载；激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (7)
1.一种基于数据页预加载的数据库数据同步方法，其特征在于，包括：
在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现待同步事务涉及的数据页预加载；
激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务；
其中，所述则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，包括：
遍历待同步的事务操作，若事务中存在UPDATE操作和/或DELETE操作，则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作。
2.根据权利要求1所述的基于数据页预加载的数据库数据同步方法，其特征在于，所述则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作，包括：若UPDATE操作和/或DELETE操作出现连续批量操作，则将所述连续批量操作上下预设距离范围内的UPDATE操作和/或DELETE操作，转换为SELECT操作。
3.根据权利要求1所述的基于数据页预加载的数据库数据同步方法，其特征在于，还包括：
若目标端数据同步服务启动，则初始化若干个数据页预加载线程，所述若干个数据页预加载线程，用于执行转换后的SELECT操作。
4.根据权利要求1所述的基于数据页预加载的数据库数据同步方法，其特征在于，还包括：
若目标端数据同步服务启动，则初始化若干个事务执行线程，所述若干个事务执行线程，用于执行所述待同步的事务操作。
5.一种基于数据页预加载的数据库数据同步装置，其特征在于，包括：
数据页预加载模块，用于在目标端数据同步服务接收待同步的事务操作，按所述事务操作的ID进行分类缓存，若接收到任一所述ID所代表事务的COMMIT操作日志，则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，并将转换后的SELECT操作投递至数据页预加载线程，所述数据页预加载线程异步执行所述转换后的SELECT操作，实现待同步事务涉及的数据页预加载；
事务同步模块，用于激活执行线程，执行预加载的所述待同步事务，同步所述待同步事务；
其中，所述则将事务中的UPDATE操作和/或DELETE操作，转换成SELECT操作，包括：
遍历待同步的事务操作，若事务中存在UPDATE操作和/或DELETE操作，则采用UPDATE操作和/或DELETE操作中的条件列,构造SELECT操作。
6.一种电子设备，其特征在于，包括：
至少一个处理器、至少一个存储器、通信接口和总线；其中，
所述处理器、存储器、通信接口通过所述总线完成相互间的通信；
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令，以执行如权利要求1至4任一项所述的方法。
7.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至4中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910203434.4A CN109977168B (zh) | 2019-03-18 | 2019-03-18 | 基于数据页预加载的数据库数据同步方法及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910203434.4A CN109977168B (zh) | 2019-03-18 | 2019-03-18 | 基于数据页预加载的数据库数据同步方法及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109977168A CN109977168A (zh) | 2019-07-05 |
| CN109977168B true CN109977168B (zh) | 2021-11-05 |
Family
ID=67079292
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910203434.4A Active CN109977168B (zh) | 2019-03-18 | 2019-03-18 | 基于数据页预加载的数据库数据同步方法及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109977168B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110784532B (zh) * | 2019-10-25 | 2021-09-07 | 北京天润融通科技股份有限公司 | 双向数据同步方法及系统 |
| CN111290803B (zh) * | 2020-02-19 | 2023-06-09 | 上海达梦数据库有限公司 | 数据预加载方法、装置、设备及存储介质 |
| CN111694799B (zh) * | 2020-04-30 | 2023-04-25 | 武汉达梦数据库股份有限公司 | 基于日志解析同步的并行日志解析方法和数据同步系统 |
| CN113535664B (zh) * | 2021-09-14 | 2021-12-31 | 深圳兆瑞优品科技有限公司 | 一种基于数据页预加载的数据库数据同步方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102043686A (zh) * | 2009-10-20 | 2011-05-04 | 华为技术有限公司 | 一种内存数据库的容灾方法、备用服务器及系统 |
| EP2555129A1 (en) * | 2011-08-03 | 2013-02-06 | Amadeus s.a.s. | Method and system to maintain strong consistency of distributed replicated contents in a client/server system |
| CN106709043A (zh) * | 2016-12-30 | 2017-05-24 | 江苏瑞中数据股份有限公司 | 一种基于数据库日志的数据同步加载方法 |
| CN108170768A (zh) * | 2017-12-25 | 2018-06-15 | 腾讯科技（深圳）有限公司 | 数据库同步方法、装置及可读介质 |
| CN109271450A (zh) * | 2018-10-10 | 2019-01-25 | 北京百度网讯科技有限公司 | 数据库同步方法、装置、服务器和存储介质 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6910106B2 (en) * | 2002-10-04 | 2005-06-21 | Microsoft Corporation | Methods and mechanisms for proactive memory management |
| US7702646B2 (en) * | 2005-02-18 | 2010-04-20 | The Macgregor Group, Inc. | System and method for displaying data on a thin client |
| CN104301795B (zh) * | 2014-09-26 | 2017-10-20 | 四川长虹电器股份有限公司 | 基于3d模型的智能电视大数据海报信息管理方法 |
| CN104731974A (zh) * | 2015-04-13 | 2015-06-24 | 上海新炬网络信息技术有限公司 | 基于大数据流式计算的动态页面加载方法 |
| CN105786959A (zh) * | 2016-01-11 | 2016-07-20 | 北京京东尚科信息技术有限公司 | 主备数据库的同步方法及装置 |
| CN107203629B (zh) * | 2017-05-31 | 2021-02-26 | 北京京东尚科信息技术有限公司 | 页面呈现方法、系统和装置 |
| CN109271452B (zh) * | 2018-10-19 | 2021-04-13 | 武汉达梦数据库有限公司 | Db2数据库数据同步更新方法及设备 |
-
2019
- 2019-03-18 CN CN201910203434.4A patent/CN109977168B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102043686A (zh) * | 2009-10-20 | 2011-05-04 | 华为技术有限公司 | 一种内存数据库的容灾方法、备用服务器及系统 |
| EP2555129A1 (en) * | 2011-08-03 | 2013-02-06 | Amadeus s.a.s. | Method and system to maintain strong consistency of distributed replicated contents in a client/server system |
| CN106709043A (zh) * | 2016-12-30 | 2017-05-24 | 江苏瑞中数据股份有限公司 | 一种基于数据库日志的数据同步加载方法 |
| CN108170768A (zh) * | 2017-12-25 | 2018-06-15 | 腾讯科技（深圳）有限公司 | 数据库同步方法、装置及可读介质 |
| CN109271450A (zh) * | 2018-10-10 | 2019-01-25 | 北京百度网讯科技有限公司 | 数据库同步方法、装置、服务器和存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| "mysql数据库中的预热";jackyrongvip;《https://blog.csdn.net/jackyrongvip/article/details/84356690》;20130701;第1页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109977168A (zh) | 2019-07-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109977168B (zh) | 基于数据页预加载的数据库数据同步方法及设备 | |
| CN109656934B (zh) | 基于日志解析的源端Oracle数据库DDL同步方法及设备 | |
| EP3258396A1 (en) | Data synchronization method, device and system | |
| CN109271452B (zh) | Db2数据库数据同步更新方法及设备 | |
| US11928089B2 (en) | Data processing method and device for distributed database, storage medium, and electronic device | |
| CN107391635A (zh) | 数据同步系统及方法 | |
| CN110008284B (zh) | 基于数据页预加载及回滚的数据库数据同步方法及设备 | |
| US11797495B2 (en) | Simulating data definition triggers in a database system | |
| US20110035356A1 (en) | Transactional archiving of an electronic document | |
| WO2017028719A1 (zh) | 元数据输出方法、客户端和元数据服务器 | |
| CN103297485B (zh) | 分布式缓存自动管理系统和分布式缓存自动管理方法 | |
| CN109614271B (zh) | 多个集群数据一致性的控制方法、装置、设备及存储介质 | |
| CN111240892A (zh) | 数据备份方法及装置 | |
| CN111352766A (zh) | 一种数据库的双活实现方法及装置 | |
| CN111984728A (zh) | 异构数据库数据同步方法、装置、介质和电子设备 | |
| CN110119429B (zh) | 数据处理方法、装置、计算机设备和存储介质 | |
| CN105159820A (zh) | 一种系统日志数据传输方法及装置 | |
| CN114780615A (zh) | 错误码管理方法及其装置 | |
| CN118069745A (zh) | 基于事务日志的SQL Server增量获取方法、存储介质及设备 | |
| CN111309799A (zh) | 数据合并的实现方法、装置、系统及存储介质 | |
| CN111753141B (zh) | 一种数据管理方法及相关设备 | |
| Huang et al. | A monitorable peer-to-peer file sharing mechanism | |
| CN112835885A (zh) | 一种分布式表格存储的处理方法、装置及系统 | |
| CN115098889A (zh) | 一种权限管理的方法、装置、设备及存储介质 | |
| KR102123616B1 (ko) | 충돌 페이지 리스트를 이용한 병렬 저널링 방법 및 그 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant after: Wuhan dream database Co., Ltd Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant before: WUHAN DAMENG DATABASE Co.,Ltd. |
|
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Sun Feng Inventor after: Yu Yuanlan Inventor before: Fu Quan Inventor before: Sun Feng Inventor before: Yu Yuanlan |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |