CN110347746B - 一种异构数据库同步数据一致性校验方法及装置 - Google Patents
一种异构数据库同步数据一致性校验方法及装置 Download PDFInfo
- Publication number
- CN110347746B CN110347746B CN201910510663.0A CN201910510663A CN110347746B CN 110347746 B CN110347746 B CN 110347746B CN 201910510663 A CN201910510663 A CN 201910510663A CN 110347746 B CN110347746 B CN 110347746B
- Authority
- CN
- China
- Prior art keywords
- transaction
- log
- source
- synchronous
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001360 synchronised effect Effects 0.000 title claims abstract description 129
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000012795 verification Methods 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 8
- 230000008569 process Effects 0.000 abstract description 12
- 230000008859 change Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2358—Change logging, detection, and notification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据库同步技术领域，公开了一种异构数据库同步数据一致性校验方法及装置，其中，校验方法包括以下步骤：在目标端数据库建立提交事务表，在所述提交事务表中记录同步的源库事务信息；捕获并解析源端数据库的源端事务日志；捕获并解析目标端数据库的目标端事务日志；将所述目标端事务日志发送至源端数据同步校验服务；根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性。本发明对异构数据库同步数据进行一致性校验时，不会影响源端数据库的正常工作、不会影响数据实时同步过程的稳定性。
Description
技术领域
本发明涉及数据库同步技术领域，具体涉及一种异构数据库同步数据一致性校验方法及装置。
背景技术
在异构数据库同步系统同步数据的过程中，需要提供校验源端数据库和目标端数据库同步表的数据一致性，以验证数据同步的正确性。以下简称源端数据库为源端，目标端数据库为目标端。由于源端数据库一直处在生产环境中，因此源端数据表中的数据处在时刻变化的状态中。另一方面，由于异构数据库同步系统的同步性能问题，源端数据表的变化同步到目标端时可能存在一定时间的同步延时，导致某一时刻源端和目标端的数据表校验不一致。为了进行有效的动态数据对比，传统方法中，通常基于数据库系统的系统改变号，即SCN，构造源端和目标端数据对比的基准点，然后在此基准点下查询出源端和目标端数据表中的数据。对于含主键的数据表，则使用主键查询出表记录后直接进行比对；对于无主键表，则通过计算行记录的MD5值来进行比对。
上述数据库系统的系统改变号SCN是反映数据库系统的一种一致性状态的版本，每一个数据库状态的改变，数据库系统都会通过SCN进行记录，且该值不断递增，由数据库系统自身进行维护。上述基于SCN构造对比基准点的方法，在进行数据对比时，源端首先需要对数据表进行上S锁操作，然后查询数据库当前的SCN，并将其发送至目标端，再查询源端表数据；目标端需同步至该SCN后暂停同步操作，然后查询当前状态的表数据，进行对比；
上述同步数据一致性校验方法存在一定的不足，首先在数据对比时，对于源端业务压力较大的数据库系统，对数据表进行上S锁操作，有可能存在上锁失败的情况，另外上锁成功后，会影响源端数据库系统使用该表，造成一定的性能损失。另一方面，目标端在进行数据比对过程中，需要同步至比对基准点后暂停同步操作，数据一致性校验操作与数据实时同步操作深度耦合，影响数据同步系统的稳定性。
发明内容
本发明的目的在于克服上述技术不足，提供一种异构数据库同步数据一致性校验方法及装置，解决现有技术中异构数据库同步数据校验影响源端数据库的正常工作、影响同步系统稳定性的技术问题。
为达到上述技术目的，本发明的技术方案提供一种异构数据库同步数据一致性校验方法，包括以下步骤：
在目标端数据库建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
捕获并解析源端数据库的源端事务日志；
捕获并解析目标端数据库的目标端事务日志；
将所述目标端事务日志发送至源端数据同步校验服务；
根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性。
本发明还提供一种异构数据库同步数据一致性校验装置，包括源端服务器和目标端服务器；所述源端服务器内部署有源端对比程序，所述目标端服务器内部署有目标端对比程序；
所述目标端服务器用于建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
所述源端对比程序用于捕获并解析源端数据库的源端事务日志；
所述目标端对比程序用于捕获并解析目标端数据库的目标端事务日志；将所述目标端事务日志发送至源端数据同步校验服务；
所述源端对比程序还用于根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性。
与现有技术相比，本发明的有益效果包括：本发明通过在目标端数据库建立提交事务表，记录数据同步过程的同步的源库事务信息，根据同步的源库事务信息对比源端数据库的事务日志与目标端数据库的事务日志中相应的同步事务，从而实现数据同步过程的一致性校验。本发明提供的异构数据库同步数据一致性校验方法相对于数据同步过程来说，是一个独立的过程，不会影响异构数据库的数据实时同步；同时本发明对于同步数据的校验基于事务日志，无需查询源端数据库中数据表，无需对源端数据库中数据表进行上锁操作，因此不会影响源端数据库的正常工作。
附图说明
图1是本发明提供的异构数据库同步数据一致性校验方法一实施方式的流程图；
图2是本发明提供的同步事务一实施方式的组织结构图；
图3是本发明提供的异构数据库同步数据一致性校验装置的架构图；
图4是本发明提供的源端对比程序和目标端对比程序的结构示意图。
附图标记：
10、源端服务器，11、源端对比程序，111、源端日志捕获模块，112、源端日志分析模块，113、源端日志接收模块，114、日志对比模块，20、目标端服务器，21、目标端对比程序，211、目标端日志捕获模块，212、目标端日志分析模块，213、目标端日志发送模块，100、异构数据库同步系统。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
实施例1
如图1所示，本发明的实施例1提供了异构数据库同步数据一致性校验方法，包括以下步骤：
S1、在目标端数据库建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
S2、捕获并解析源端数据库的源端事务日志；
S3、捕获并解析目标端数据库的目标端事务日志；
S4、将所述目标端事务日志发送至源端数据同步校验服务；
S5、根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性。
本发明在目标端数据库中建立提交事务表，使用提交事务表记录异构数据库同步系统的同步的源库事务信息。分别捕获源端事务日志和目标端事务日志，并分别将其解析为统一消息格式。根据同步的源库事务信息定位目标端事务日志中与源端数据库相对应的同步事务，进而对比目标端事务日志和源端事务日志中相对应的同步事务的事务日志，以保证源端和目标端同步事务的一致性，实现异构数据库同步数据一致性的校验。
本发明将同步数据一致性校验过程独立开，使其与异构数据库数据实时同步过程无关，因此，不会影响异构数据库数据实时同步；同时，本发明中同步数据一致性校验基于事务日志的内容对比，无需查询源端数据库中的数据表，无需对数据表进行上锁操作，对源端数据库的影响较小。
优选的，在所述提交事务表中记录同步的源库事务信息，具体为：
以事务为最小同步单位，在同步事务的最后增加插入所述提交事务表的插入操作；
目标端数据库提交一个所述同步事务时，在所述提交事务表中插入一行提交事务记录。
本发明中异构数据库的同步过程以事务为最小同步单位，使用提交事务表记录异构数据库同步系统的同步的源库事务信息并保证源端和目标端同步事务的一致性；提交事务表为在目标端数据库中建立的一张同步系统表，每当目标端同步进程在提交一个同步事务时，会在提交事务表中插入一行提交事务记录；为保证提交事务的操作与插入提交事务表的操作满足一致性的要求，将插入提交事务表的操作作为原始的同步事务的最后一个插入操作，即INSERT操作，与原始的同步事务一起构成一个完整的事务进行提交，以保证操作的原子性。具体的，本优选实施例中，同步事务的组织结构如图2所示。
优选的，所述源库事务信息包括事务ID、事务起始SCN以及事务提交SCN，所述提交事务表记录的事务ID为源端数据库的事务ID。
所述源库事务信息包含提交事务的事务ID、事务起始SCN、事务提交SCN等信息；其中，源库事务信息中的事务ID为源端数据库中的事务ID。
优选的，所述提交事务表还用于记录同步断点信息。
提交事务表中还记录有同步断点信息，同步断点信息由异构数据库同步系统进行自动维护，无需外部干预。
优选的，如图2所示，捕获并解析源端数据库的源端事务日志，具体为：
以事务为单位，将同一同步事务的所有操作进行缓存。
优选的，捕获并解析目标端数据库的目标端事务日志，具体包括：
提取所述提交事务表的事务日志，提取出所述提交事务表记录的事务ID。
解析目标端事务日志时，目标端事务日志中包含提交事务表的操作日志，提取出提交事务表中记录的事务ID值，然后将当前事务ID以及对应的目标端的事务日志通过网络发送给源端数据同步校验服务。
优选的，根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性，具体为：
对比所述提交事务表记录的事务ID与所述源端事务日志捕获的事务ID，匹配事务ID相同的源端事务日志中同步事务和目标端事务日志中同步事务，校验匹配的同步事务中各个操作的一致性。
源端数据同步校验服务接收到目标端事务日志后，根据提交事务表中记录的事务ID对应匹配的同步事务，将目标端的同步事务与源端的同步事务进行对比，对比同步事务中的各个操作，校验同步事务的一致性，从而实现数据同步一致性的校验。
优选的，校验匹配的同步事务中各个操作的一致性，具体为：
计算同步事务中各个操作的MD5值，根据MD5值对同步事务中各个操作进行比较。
同步事务中各个操作的对比，可以直接进行数据对比，也可以计算MD5值后再进行对比。
实施例2
如图3所示，本发明的实施例2提供了异构数据库同步数据一致性校验装置，包括源端服务器10和目标端服务器20；所述源端服务器10内部署有源端对比程序11，所述目标端服务器20内部署有目标端对比程序21；
所述目标端对比程序21用于在目标端数据库建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
所述目标端服务器20用于建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
所述源端对比程序11用于捕获并解析源端数据库的源端事务日志；
所述目标端对比程序21用于捕获并解析目标端数据库的目标端事务日志；将所述目标端事务日志发送至源端数据同步校验服务；
所述源端对比程序11还用于根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性。
在源端服务器10部署源端对比程序11，源端对比程序11基于数据库日志捕获解析技术，捕获解析源端事务日志；在目标端服务器20部署目标端对比程序21，目标端对比程序21基于数据库日志捕获解析技术，捕获解析目标端事务日志；目标端对比程序21解析目标端事务日志时，目标端事务日志中包含提交事务表的操作日志，提交事务表中记录有同步的源库事务信息，使用提交事务表记录异构数据库同步系统100的同步的源库事务信息。源端对比程序11收到目标端事务日志后，根据提交事务表中的同步的源库事务信息，将其与自身解析的源端事务日志进行对比，校验同步事务的一致性，从而实现数据同步一致性的校验。
由于本发明方法基于数据库日志分析对比，因此需要分析数据库日志文件，初始时，在进行同步数据一致性校验前，首先需要分别在源端数据库和目标端数据库所在的服务器部署对比程序；或者，仅将源端对比程序11和目标端对比程序21部署于日志文件所在服务器，源端服务器10通过拷贝备份获取源端对比程序11，目标端服务器20通过拷贝备份获取目标端对比程序21。
本发明提供的异构数据库同步数据一致性校验装置，用于实现异构数据库同步数据一致性校验方法，因此，上述异构数据库同步数据一致性校验方法所具备的技术效果，异构数据库同步数据一致性校验装置同样具备，在此不再赘述。
优选的，如图4所示，所述源端对比程序11包括源端日志捕获模块111、源端日志分析模块112、源端日志接收模块113以及日志对比模块114；所述源端日志捕获模块111用于捕获源端数据库的源端事务日志，所述源端日志分析模块112用于解析源端数据库的源端事务日志，所述源端日志接收模块113用于接收所述目标端发送模块发送的所述目标端事务日志，所述日志对比模块114用于根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性；
所述目标端对比程序21包括目标端日志捕获模块211、目标端日志分析模块212以及目标端日志发送模块213；所述目标端日志捕获模块211用于捕获目标端数据库的目标端事务日志，所述目标端分析模块用于解析目标端数据库的目标端事务日志，所述目标端发送模块用于发送所述目标端事务日志至所述源端日志接收模块113。
以上所述本发明的具体实施方式，并不构成对本发明保护范围的限定。任何根据本发明的技术构思所做出的各种其他相应的改变与变形，均应包含在本发明权利要求的保护范围内。
Claims (7)
1.一种异构数据库同步数据一致性校验方法，其特征在于，包括以下步骤：
在目标端数据库建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
捕获并解析源端数据库的源端事务日志；
捕获并解析目标端数据库的目标端事务日志；
将所述目标端事务日志发送至源端数据同步校验服务；
根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性；
在所述提交事务表中记录同步的源库事务信息，具体为：
以事务为最小同步单位，在同步事务的最后增加插入所述提交事务表的插入操作；
目标端数据库提交一个所述同步事务时，在所述提交事务表中插入一行提交事务记录；
所述源库事务信息包括事务ID、事务起始SCN以及事务提交SCN，所述提交事务表记录的事务ID为源端数据库的事务ID；
根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性，具体为：
对比所述提交事务表记录的事务ID与所述源端事务日志捕获的事务ID，匹配事务ID相同的源端事务日志中同步事务和目标端事务日志中同步事务，校验匹配的同步事务中各个操作的一致性。
2.根据权利要求1所述的异构数据库同步数据一致性校验方法，其特征在于，所述提交事务表还用于记录同步断点信息。
3.根据权利要求1所述的异构数据库同步数据一致性校验方法，其特征在于，捕获并解析源端数据库的源端事务日志，具体为：
以事务为单位，将同一同步事务的所有操作进行缓存。
4.根据权利要求1所述的异构数据库同步数据一致性校验方法，其特征在于，捕获并解析目标端数据库的目标端事务日志，具体包括：
提取所述提交事务表的事务日志，提取出所述提交事务表记录的事务ID。
5.根据权利要求1所述的异构数据库同步数据一致性校验方法，其特征在于，校验匹配的同步事务中各个操作的一致性，具体为：
计算同步事务中各个操作的MD5值，根据MD5值对同步事务中各个操作进行比较。
6.一种异构数据库同步数据一致性校验装置，其特征在于，包括源端服务器和目标端服务器；所述源端服务器内部署有源端对比程序，所述目标端服务器内部署有目标端对比程序；
所述目标端服务器用于建立提交事务表，在所述提交事务表中记录同步的源库事务信息；
所述源端对比程序用于捕获并解析源端数据库的源端事务日志；
所述目标端对比程序用于捕获并解析目标端数据库的目标端事务日志；将所述目标端事务日志发送至源端数据同步校验服务；
所述源端对比程序还用于根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性；
在所述提交事务表中记录同步的源库事务信息，具体为：
以事务为最小同步单位，在同步事务的最后增加插入所述提交事务表的插入操作；
目标端数据库提交一个所述同步事务时，在所述提交事务表中插入一行提交事务记录；
所述源库事务信息包括事务ID、事务起始SCN以及事务提交SCN，所述提交事务表记录的事务ID为源端数据库的事务ID；
根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性，具体为：
对比所述提交事务表记录的事务ID与所述源端事务日志捕获的事务ID，匹配事务ID相同的源端事务日志中同步事务和目标端事务日志中同步事务，校验匹配的同步事务中各个操作的一致性。
7.根据权利要求6所述的异构数据库同步数据一致性校验装置，其特征在于，所述源端对比程序包括源端日志捕获模块、源端日志分析模块、源端日志接收模块以及日志对比模块；所述源端日志捕获模块用于捕获源端数据库的源端事务日志，所述源端日志分析模块用于解析源端数据库的源端事务日志，所述源端日志接收模块用于接收所述目标端发送模块发送的所述目标端事务日志，所述日志对比模块用于根据所述同步的源库事务信息对比所述源端事务日志与所述目标端事务日志，校验同步数据的一致性；
所述目标端对比程序包括目标端日志捕获模块、目标端日志分析模块以及目标端日志发送模块；所述目标端日志捕获模块用于捕获目标端数据库的目标端事务日志，所述目标端分析模块用于解析目标端数据库的目标端事务日志，所述目标端发送模块用于发送所述目标端事务日志至所述源端日志接收模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910510663.0A CN110347746B (zh) | 2019-06-13 | 2019-06-13 | 一种异构数据库同步数据一致性校验方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910510663.0A CN110347746B (zh) | 2019-06-13 | 2019-06-13 | 一种异构数据库同步数据一致性校验方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110347746A CN110347746A (zh) | 2019-10-18 |
| CN110347746B true CN110347746B (zh) | 2020-06-26 |
Family
ID=68181958
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910510663.0A Active CN110347746B (zh) | 2019-06-13 | 2019-06-13 | 一种异构数据库同步数据一致性校验方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110347746B (zh) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110019502B (zh) * | 2017-08-29 | 2023-03-21 | 阿里巴巴集团控股有限公司 | 在主数据库和备数据库之间的同步方法、数据库系统和设备 |
| CN110955723A (zh) * | 2019-11-15 | 2020-04-03 | 北京浪潮数据技术有限公司 | 一种主从数据库同步状态监控方法、装置及电子设备 |
| CN111198920B (zh) * | 2019-12-30 | 2024-01-23 | 上海英方软件股份有限公司 | 一种基于数据库同步确定对比表快照的方法及装置 |
| CN111241193B (zh) * | 2019-12-31 | 2021-04-27 | 武汉达梦数据库股份有限公司 | 一种基于日志解析的数据库添加列同步方法和装置 |
| CN111737230B (zh) * | 2020-06-23 | 2024-04-12 | 北京奇艺世纪科技有限公司 | 数据校验方法、装置、电子设备以及可读存储介质 |
| CN113760923B (zh) * | 2020-10-27 | 2023-09-05 | 北京京东振世信息技术有限公司 | 一种数据异构方法、装置、系统及存储介质 |
| CN112966025B (zh) * | 2021-03-17 | 2022-07-19 | 焦点科技股份有限公司 | 一种binlog日志挖掘字典实现方法 |
| CN113160918A (zh) * | 2021-05-21 | 2021-07-23 | 山东健康医疗大数据有限公司 | 一种变化数据捕获的统一处理方法及工具 |
| CN113282643B (zh) * | 2021-06-04 | 2023-03-21 | 上海英方软件股份有限公司 | 一种oracle数据库同步环境下的表对比方法及系统 |
| CN115017133B (zh) * | 2022-05-31 | 2024-04-26 | 焦点科技股份有限公司 | 一种基于文件的异构数据库数据一致性校验方法 |
| CN115145944B (zh) * | 2022-09-06 | 2022-11-18 | 中国光大银行股份有限公司 | 一种基于令牌表的异构数据库双向同步方法及装置 |
| CN116340430A (zh) * | 2023-05-24 | 2023-06-27 | 北京奥星贝斯科技有限公司 | 一种数据同步校验方法及相关设备 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103970833B (zh) * | 2014-04-02 | 2017-08-15 | 浙江大学 | 一种基于日志的异构数据库同步系统中双向同步数据循环的解决方法 |
| CN105447046A (zh) * | 2014-09-02 | 2016-03-30 | 阿里巴巴集团控股有限公司 | 一种分布式系统数据一致性处理方法、装置和系统 |
| CN108763358A (zh) * | 2018-05-16 | 2018-11-06 | 阿里巴巴集团控股有限公司 | 一种数据校验方法及装置 |
| CN109033186B (zh) * | 2018-06-27 | 2020-11-27 | 东软集团股份有限公司 | 数据一致性检测方法、装置、存储介质及电子设备 |
| CN109189852B (zh) * | 2018-08-01 | 2021-05-28 | 武汉达梦数据库有限公司 | 一种数据同步的方法及用于数据同步的装置 |
| CN110262929B (zh) * | 2018-08-13 | 2020-01-07 | 武汉达梦数据库有限公司 | 一种保证复制事务一致性的方法以及相应的复制装置 |
| CN109271450B (zh) * | 2018-10-10 | 2020-12-04 | 北京百度网讯科技有限公司 | 数据库同步方法、装置、服务器和存储介质 |
| CN109271399A (zh) * | 2018-11-19 | 2019-01-25 | 武汉达梦数据库有限公司 | 一种数据库写入日志一致性的校验方法 |
-
2019
- 2019-06-13 CN CN201910510663.0A patent/CN110347746B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN110347746A (zh) | 2019-10-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110347746B (zh) | 一种异构数据库同步数据一致性校验方法及装置 | |
| US8560502B2 (en) | Method and a system for replaying database workload with transactional consistency | |
| CN109241185B (zh) | 一种数据同步的方法以及数据同步装置 | |
| CN109460349B (zh) | 一种基于日志的测试用例生成方法和装置 | |
| US8078582B2 (en) | Data change ordering in multi-log based replication | |
| CN110309161B (zh) | 一种数据同步方法、装置及服务器 | |
| CN107609188B (zh) | 基于GoldenGate的数据同步校验方法 | |
| US7913233B2 (en) | Performance analyzer | |
| CN109933632B (zh) | 一种数据库的数据迁移方法、装置及设备 | |
| CN110427422A (zh) | 数据同步异常时数据一致性校验方法、设备及存储介质 | |
| CN111625540A (zh) | 一种关系型数据库数据同步完整性校验方法和装置 | |
| CN112231407A (zh) | PostgreSQL数据库的DDL同步方法、装置、设备和介质 | |
| KR101191832B1 (ko) | 네트워크 패킷 분석을 통한 데이터베이스 복제 방법 및 시스템 | |
| CN109299116B (zh) | 一种数据同步方法、装置、设备及可读存储介质 | |
| CN113626416A (zh) | 数据校验的方法、装置、计算设备和存储介质 | |
| CN104376088A (zh) | 一种云数据库的分布式同步方法及数据库系统 | |
| CN110222121A (zh) | 一种基于CDC方式的SQL Server数据库增量同步实现方法及系统 | |
| CN112800060A (zh) | 数据处理方法、装置、计算机可读存储介质及电子设备 | |
| CN115033578A (zh) | 一种业务数据更新的方法、相关装置及存储介质 | |
| CN112966025A (zh) | 一种binlog日志挖掘字典实现方法 | |
| US20120005175A1 (en) | Method and a system for real time replaying of database workload at a fixed initial time delay | |
| CN109669988A (zh) | 一种查询建表事物的拆分同步方法及系统 | |
| CN115827777A (zh) | 一种多数据源的自适应同步与差异识别方法、装置及设备 | |
| CN112416944A (zh) | 一种同步业务数据的方法和设备 | |
| CN107506436B (zh) | 一种用于物联网数据库存储性能测试的方法以及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP01 | Change in the name or title of a patent holder |
Address after: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee after: Wuhan dream database Co.,Ltd. Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee before: WUHAN DAMENG DATABASE Co.,Ltd. |
|
| CP01 | Change in the name or title of a patent holder | ||
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Sun Feng Inventor after: Yu Yuanlan Inventor after: Zhao Jiawei Inventor before: Fu Quan Inventor before: Sun Feng Inventor before: Yu Yuanlan Inventor before: Zhao Jiawei |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220907 Address after: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee after: Wuhan dream database Co.,Ltd. Patentee after: HUAZHONG University OF SCIENCE AND TECHNOLOGY Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230724 Address after: 16-19/F, Building C3, Future Science and Technology Building, No. 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province, 430206 Patentee after: Wuhan dream database Co.,Ltd. Address before: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. Patentee before: HUAZHONG University OF SCIENCE AND TECHNOLOGY |