CN106815326A - 一种检测无主键数据表一致性的系统及方法 - Google Patents
一种检测无主键数据表一致性的系统及方法 Download PDFInfo
- Publication number
- CN106815326A CN106815326A CN201611238008.7A CN201611238008A CN106815326A CN 106815326 A CN106815326 A CN 106815326A CN 201611238008 A CN201611238008 A CN 201611238008A CN 106815326 A CN106815326 A CN 106815326A
- Authority
- CN
- China
- Prior art keywords
- data
- agent
- packet
- skiplist
- behalf
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种检测无主键数据表一致性的系统及方法,其系统包括用于获取对比数据集、计算MD5跳表、三路快速排序、管理MD5跳表的始端数据代理AGENT、终端数据代理AGENT及用于对比数据并生成对比报告的数据校验VERI;还包括被检测的数据库同步系统、源数据库、目的数据库。本发明利用MD5跳表检测无主键数据表一致性,减少需要比对的数据量,并避免数据表必须存在主键的限制条件;利用MD5跳表管理比对数据,避免在无主键基表可能存在大量相同数据记录情况下比对算法性能退化的情形。
Description
技术领域
本发明属于无主键数据表的一致性检测领域,更具体地说,涉及一种检测无主键数据表一致性的系统及方法。
背景技术
随着信息化建设的高速发展,信息系统已经成为企业维持业务运转的关键,企业迫切需要提高信息系统的可用性,保证业务的连续性,最大限度地减少因灾难或故障所带来的损失。另一方面,多样化的业务类型导致数据访问需求的日趋复杂化,数据量的急剧攀升也导致数据库服务器不堪重负,企业同样迫切需要提高信息系统的运行效率。
数据库实时同步系统基于成熟的关系数据模型和标准接口,能以极少的系统开支实现秒级数据实时同步,可广泛应用于应急系统、容灾备份、负载均衡、数据移植、联机维护、多业务中心等业务领域。
目前存在的一些数据复制系统,例如Oracle的GoldenGate,它的数据比对系统,只能进行存在主键的基表的一致性检测,这就限制了数据复制中一致性检测的适用范围。为了满足要求,需要人工给进行比较的基表增加主键,这对于源数据库的业务系统可能造成性能和功能上的影响。
由此可见,为了尽可能减少对于业务系统的影响,需要设计一种检测无主键数据表一致性的系统及方法,适用于数据复制系统。
发明内容
为克服现有技术存在的缺陷,本发明提供一种检测无主键数据表一致性的系统及方法。
本发明解决其技术问题所采用的技术方案是:
设计一种检测无主键数据表一致性的系统,包括始端数据代理AGENT、终端数据代理AGENT及数据校验VERI,所述始端数据代理AGENT、终端数据代理AGENT用于获取对比数据集、计算MD5跳表、三路快速排序、管理MD5跳表,所述数据校验VERI用于对比数据并生成对比报告;还包括被检测的数据库同步系统、源数据库、目的数据库;所述始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据并计算出MD5摘要值,所述数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包并进行分块、排序、与MD5跳表比对以检测源数据库和目的数据库的一致性。
在上述方案中,所述始端数据代理AGENT、终端数据代理AGENT为服务程序。
在上述方案中,所述数据包包含ROWID和MD5摘要值。
本发明还提供一种检测无主键数据表一致性的方法,包括以下步骤:
步骤S010,始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据后计算出MD5摘要值;
步骤S020,数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包;
步骤S030,数据校验VERI对数据包进行分块、排序,并与MD5跳表比对。
在上述步骤S010中,包括以下步骤:
步骤S010-1,始端数据代理AGENT和终端数据代理AGENT分别在源数据库和目的数据库上执行数据查询;
步骤S010-2,始端数据代理AGENT和终端数据代理AGENT分别计算MD5摘要值;
步骤S010-3,始端数据代理AGENT和终端数据代理AGENT分别将ROWID、MD5摘要值填充在数据包中发送给数据校验VERI,其中始端数据代理AGENT发送的数据包放置于左列表,终端数据代理AGENT发送的数据包放置于右列表。
在上述步骤S030中,设置两个变量left_over和right_over管理左列表和右列表,left_over初始化为FALSE,right_over初始化为FALSE,数据校验VERI对数据包的排序包括以下步骤:
步骤S031-1,若left_over为TRUE,转至步骤S031-4,否则从左列表取出一个数据包,放到左排序内存中;
步骤S031-2,重复步骤S031-1直到左排序内存无法放入完整数据包,或者已经到达左列表最后一个数据包;
步骤S031-3,将左排序内存的数据包进行排序,排序结果写入文件中,文件名由系统自动生成,如果取到最后一个数据包,标记left_over为TRUE,转至步骤S031-1继续处理左列表;
步骤S031-4,若right_over为TRUE,转至步骤S031-7,否则从右列表取出一个数据包,放到右排序内存中;
步骤S031-5,重复步骤S031-4直到右排序内存无法放入完整数据包,或者已经到达右列表最后一个数据包;
步骤S031-6,将右排序内存的数据包进行排序,排序结果写入文件,文件名系统自动生成,如果取到最后一个排序结果包,标记right_over=TRUE,转至步骤S031-4继续处理右列表;
步骤S031-7,若left_over为TRUE且right_over为TRUE,排序结束,否则转至步骤S031-1。
在上述步骤S030中,数据校验VERI对数据包的比对包括以下步骤:
步骤S032-1,左排序内存生成的排序文件由左skiplist管理,右排序内存生成的排序文件由右skiplist管理,从每个排序文件中取出固定数量的记录初始化左skiplist和右skiplist,代表每个排序文件中初始化的MD5值数据;
步骤S032-2,从左skiplist取出最小元素L,从右skiplist取出最小元素R;
步骤S032-3,根据MD5值,比较L和R;
步骤S032-4,如果L>R或者L为空、R非空,则R的ROWID放置到DELETE文件中,从R所在的排序文件中取下一个记录放入右skiplist,从右skiplist取出最小元素存放到R,转至步骤S032-3;
步骤S032-5,如果L=R并且L与R非空,从L所在的排序文件中取下一个记录放入左skiplist,从R所在的排序文件中取下一个记录放入右skiplist,直至已经取完排序文件的记录,转至步骤S032-2;
步骤S032-6,如果L<R或者L非空、R为空,则将L的ROWID放置到结果文件夹的INSERT文件中,从L所在的排序文件中取下一个记录放入左skiplist,从左skiplist取出最小元素存放到L,转至步骤S032-3;
步骤S032-7,如果L与R均为空,算法结束;如果INSERT文件和DELETE文件均为空,则源数据库和目的数据库一致,否则将INSERT文件中的数据插入到目的数据库,然后从目的数据库删除DELETE文件中的数据。
实施本发明检测无主键数据表一致性的系统及方法,具有以下有益效果:
本发明利用MD5跳表检测无主键数据表一致性,减少需要比对的数据量,并避免数据表必须存在主键的限制条件;利用MD5跳表管理比对数据,避免在无主键基表可能存在大量相同数据记录情况下比对算法性能退化的情形。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1为检测无主键数据表一致性的系统的结构示意图;
图2为始端数据代理AGENT、终端数据代理AGENT的工作流程示意图;
图3为检测无主键数据表一致性的方法的工作流程示意图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解,现对照附图详细说明本发明的具体实施方式。
如图1所示,本发明检测无主键数据表一致性的系统,包括始端数据代理AGENT、终端数据代理AGENT及数据校验VERI,始端数据代理AGENT、终端数据代理AGENT用于获取对比数据集、计算MD5跳表、三路快速排序、管理MD5跳表,数据校验VERI用于对比数据并生成对比报告;还包括被检测的数据库同步系统、源数据库、目的数据库;始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据并计算出MD5摘要值,数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包并进行分块、排序、与MD5跳表比对以检测源数据库和目的数据库的一致性。其中,始端数据代理AGENT、终端数据代理AGENT为服务程序;数据包包含ROWID和MD5摘要值。
如图2-3所示,本发明还提供一种检测无主键数据表一致性的方法,包括以下步骤:
步骤S010,始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据后计算出MD5摘要值。步骤S010具体包括以下步骤:
步骤S010-1,始端数据代理AGENT和终端数据代理AGENT分别在源数据库和目的数据库上执行数据查询;
步骤S010-2,始端数据代理AGENT和终端数据代理AGENT分别计算MD5摘要值;
步骤S010-3,始端数据代理AGENT和终端数据代理AGENT分别将ROWID、MD5摘要值填充在数据包中发送给数据校验VERI,其中始端数据代理AGENT发送的数据包放置于左列表,终端数据代理AGENT发送的数据包放置于右列表。
步骤S020,数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包;
步骤S030,数据校验VERI对数据包进行分块、排序,并与MD5跳表比对。
在上述步骤S030中,设置两个变量left_over和right_over管理左列表和右列表,left_over初始化为FALSE,right_over初始化为FALSE,数据校验VERI对数据包的排序包括以下步骤:
步骤S031-1,若left_over为TRUE,转至步骤S031-4,否则从左列表取出一个数据包,放到左排序内存中;
步骤S031-2,重复步骤S031-1直到左排序内存无法放入完整数据包,或者已经到达左列表最后一个数据包;
步骤S031-3,将左排序内存的数据包进行排序,排序结果写入文件中,文件名由系统自动生成,如果取到最后一个数据包,标记left_over为TRUE,转至步骤S031-1继续处理左列表;
步骤S031-4,若right_over为TRUE,转至步骤S031-7,否则从右列表取出一个数据包,放到右排序内存中;
步骤S031-5,重复步骤S031-4直到右排序内存无法放入完整数据包,或者已经到达右列表最后一个数据包;
步骤S031-6,将右排序内存的数据包进行排序,排序结果写入文件,文件名系统自动生成,如果取到最后一个排序结果包,标记right_over=TRUE,转至步骤S031-4继续处理右列表;
步骤S031-7,若left_over为TRUE且right_over为TRUE,排序结束,否则转至步骤S031-1。
在上述步骤S030中,数据校验VERI对数据包的比对包括以下步骤:
步骤S032-1,左排序内存生成的排序文件由左skiplist管理,右排序内存生成的排序文件由右skiplist管理,从每个排序文件中取出固定数量的记录初始化左skiplist和右skiplist,代表每个排序文件中初始化的MD5值数据;
步骤S032-2,从左skiplist取出最小元素L,从右skiplist取出最小元素R;
步骤S032-3,根据MD5值,比较L和R;
步骤S032-4,如果L>R或者L为空、R非空,则R的ROWID放置到DELETE文件中,从R所在的排序文件中取下一个记录放入右skiplist,从右skiplist取出最小元素存放到R,转至步骤S032-3;
步骤S032-5,如果L=R并且L与R非空,从L所在的排序文件中取下一个记录放入左skiplist,从R所在的排序文件中取下一个记录放入右skiplist,直至已经取完排序文件的记录,转至步骤S032-2;
步骤S032-6,如果L<R或者L非空、R为空,则将L的ROWID放置到结果文件夹的INSERT文件中,从L所在的排序文件中取下一个记录放入左skiplist,从左skiplist取出最小元素存放到L,转至步骤S032-3;
步骤S032-7,如果L与R均为空,算法结束;如果INSERT文件和DELETE文件均为空,则源数据库和目的数据库一致,否则将INSERT文件中的数据插入到目的数据库,然后从目的数据库删除DELETE文件中的数据。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。
Claims (7)
1.一种检测无主键数据表一致性的系统,其特征在于,包括始端数据代理AGENT、终端数据代理AGENT及数据校验VERI,所述始端数据代理AGENT、终端数据代理AGENT用于获取对比数据集、计算MD5跳表、三路快速排序、管理MD5跳表,所述数据校验VERI用于对比数据并生成对比报告;还包括被检测的数据库同步系统、源数据库、目的数据库;所述始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据并计算出MD5摘要值,所述数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包并进行分块、排序、与MD5跳表比对以检测源数据库和目的数据库的一致性。
2.根据权利要求1所述的检测无主键数据表一致性的系统,其特征在于,所述始端数据代理AGENT、终端数据代理AGENT为服务程序。
3.根据权利要求1所述的检测无主键数据表一致性的系统,其特征在于,所述数据包包含ROWID和MD5摘要值。
4.一种检测无主键数据表一致性的方法,其特征在于,包括以下步骤:
步骤S010,始端数据代理AGENT和终端数据代理AGENT分别从源数据库和目的数据库获取待检测的最新版本表数据后计算出MD5摘要值;
步骤S020,数据校验VERI接收始端数据代理AGENT和终端数据代理AGENT发送的数据包;
步骤S030,数据校验VERI对数据包进行分块、排序,并与MD5跳表比对。
5.根据权利要求4所述的检测无主键数据表一致性的方法,其特征在于,在步骤S010中,包括以下步骤:
步骤S010-1,始端数据代理AGENT和终端数据代理AGENT分别在源数据库和目的数据库上执行数据查询;
步骤S010-2,始端数据代理AGENT和终端数据代理AGENT分别计算MD5摘要值;
步骤S010-3,始端数据代理AGENT和终端数据代理AGENT分别将ROWID、MD5摘要值填充在数据包中发送给数据校验VERI,其中始端数据代理AGENT发送的数据包放置于左列表,终端数据代理AGENT发送的数据包放置于右列表。
6.根据权利要求5所述的检测无主键数据表一致性的方法,其特征在于,在步骤S030中,设置两个变量left_over和right_over管理左列表和右列表,left_over初始化为FALSE,right_over初始化为FALSE,数据校验VERI对数据包的排序包括以下步骤:
步骤S031-1,若left_over为TRUE,转至步骤S031-4,否则从左列表取出一个数据包,放到左排序内存中;
步骤S031-2,重复步骤S031-1直到左排序内存无法放入完整数据包,或者已经到达左列表最后一个数据包;
步骤S031-3,将左排序内存的数据包进行排序,排序结果写入文件中,文件名由系统自动生成,如果取到最后一个数据包,标记left_over为TRUE,转至步骤S031-1继续处理左列表;
步骤S031-4,若right_over为TRUE,转至步骤S031-7,否则从右列表取出一个数据包,放到右排序内存中;
步骤S031-5,重复步骤S031-4直到右排序内存无法放入完整数据包,或者已经到达右列表最后一个数据包;
步骤S031-6,将右排序内存的数据包进行排序,排序结果写入文件,文件名系统自动生成,如果取到最后一个排序结果包,标记right_over=TRUE,转至步骤S031-4继续处理右列表;
步骤S031-7,若left_over为TRUE且right_over为TRUE,排序结束,否则转至步骤S031-1。
7.根据权利要求6所述的检测无主键数据表一致性的方法,其特征在于,在步骤S030中,数据校验VERI对数据包的比对包括以下步骤:
步骤S032-1,左排序内存生成的排序文件由左skiplist管理,右排序内存生成的排序文件由右skiplist管理,从每个排序文件中取出固定数量的记录初始化左skiplist和右skiplist,代表每个排序文件中初始化的MD5值数据;
步骤S032-2,从左skiplist取出最小元素L,从右skiplist取出最小元素R;
步骤S032-3,根据MD5值,比较L和R;
步骤S032-4,如果L>R或者L为空、R非空,则R的ROWID放置到DELETE文件中,从R所在的排序文件中取下一个记录放入右skiplist,从右skiplist取出最小元素存放到R,转至步骤S032-3;
步骤S032-5,如果L=R并且L与R非空,从L所在的排序文件中取下一个记录放入左skiplist,从R所在的排序文件中取下一个记录放入右skiplist,直至已经取完排序文件的记录,转至步骤S032-2;
步骤S032-6,如果L<R或者L非空、R为空,则将L的ROWID放置到结果文件夹的INSERT文件中,从L所在的排序文件中取下一个记录放入左skiplist,从左skiplist取出最小元素存放到L,转至步骤S032-3;
步骤S032-7,如果L与R均为空,算法结束;如果INSERT文件和DELETE文件均为空,则源数据库和目的数据库一致,否则将INSERT文件中的数据插入到目的数据库,然后从目的数据库删除DELETE文件中的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611238008.7A CN106815326B (zh) | 2016-12-28 | 2016-12-28 | 一种检测无主键数据表一致性的系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611238008.7A CN106815326B (zh) | 2016-12-28 | 2016-12-28 | 一种检测无主键数据表一致性的系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106815326A true CN106815326A (zh) | 2017-06-09 |
CN106815326B CN106815326B (zh) | 2021-03-02 |
Family
ID=59110533
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611238008.7A Active CN106815326B (zh) | 2016-12-28 | 2016-12-28 | 一种检测无主键数据表一致性的系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106815326B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108897794A (zh) * | 2018-06-12 | 2018-11-27 | 东软集团股份有限公司 | 无主键数据表的同步方法、装置、存储介质和电子设备 |
CN108959504A (zh) * | 2018-06-27 | 2018-12-07 | 郑州云海信息技术有限公司 | 一种文件系统远程数据同步实现方法和系统 |
CN109086133A (zh) * | 2018-07-06 | 2018-12-25 | 第四范式(北京)技术有限公司 | 管理内存数据及在内存中维护数据的方法和系统 |
CN109634972A (zh) * | 2018-11-12 | 2019-04-16 | 武汉达梦数据库有限公司 | 一种数据同步时使用rowid定位的方法 |
CN110222027A (zh) * | 2019-04-24 | 2019-09-10 | 福建天泉教育科技有限公司 | 数据迁移的数量校验方法及计算机可读存储介质 |
CN110852058A (zh) * | 2019-09-24 | 2020-02-28 | 贵阳朗玛信息技术股份有限公司 | 一种清单比对的方法及装置 |
CN111274311A (zh) * | 2018-12-05 | 2020-06-12 | 聚好看科技股份有限公司 | 一种跨机房数据库的数据同步方法和装置 |
CN111626882A (zh) * | 2020-05-28 | 2020-09-04 | 泰康保险集团股份有限公司 | 数据检测方法、装置、计算机可读介质及电子设备 |
CN111949663A (zh) * | 2020-08-17 | 2020-11-17 | 沈阳京华博瑞科技有限公司 | 一种大数据主外键一致性评价方法、装置和设备 |
CN112579591A (zh) * | 2019-09-30 | 2021-03-30 | 重庆小雨点小额贷款有限公司 | 数据校验方法、装置、电子设备及计算机可读存储介质 |
CN113220785A (zh) * | 2021-05-21 | 2021-08-06 | 上海申铁信息工程有限公司 | 一种基于主键比对的数据库变更记录同步方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090132563A1 (en) * | 2007-11-19 | 2009-05-21 | Sun Microsystems, Inc. | Simple optimistic skiplist |
CN103970795A (zh) * | 2013-01-31 | 2014-08-06 | 杭州勒卡斯广告策划有限公司 | 一种数据处理方法、装置及系统 |
CN104021132A (zh) * | 2013-12-08 | 2014-09-03 | 郑州正信科技发展股份有限公司 | 主备数据库数据一致性核查备份方法及其系统 |
CN104731792A (zh) * | 2013-12-19 | 2015-06-24 | 中国银联股份有限公司 | 数据库一致性校验方法及系统、定位数据库差异的方法及系统 |
CN105320775A (zh) * | 2015-11-11 | 2016-02-10 | 中科曙光信息技术无锡有限公司 | 数据的存取方法和装置 |
-
2016
- 2016-12-28 CN CN201611238008.7A patent/CN106815326B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090132563A1 (en) * | 2007-11-19 | 2009-05-21 | Sun Microsystems, Inc. | Simple optimistic skiplist |
CN103970795A (zh) * | 2013-01-31 | 2014-08-06 | 杭州勒卡斯广告策划有限公司 | 一种数据处理方法、装置及系统 |
CN104021132A (zh) * | 2013-12-08 | 2014-09-03 | 郑州正信科技发展股份有限公司 | 主备数据库数据一致性核查备份方法及其系统 |
CN104731792A (zh) * | 2013-12-19 | 2015-06-24 | 中国银联股份有限公司 | 数据库一致性校验方法及系统、定位数据库差异的方法及系统 |
CN105320775A (zh) * | 2015-11-11 | 2016-02-10 | 中科曙光信息技术无锡有限公司 | 数据的存取方法和装置 |
Non-Patent Citations (2)
Title |
---|
周维等: "基于并发跳表的云数据处理双层索引架构研究", 《计算机研究与发展》 * |
陈慧南: "《数据结构——C语言描述》", 31 July 2015 * |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108897794B (zh) * | 2018-06-12 | 2020-11-27 | 东软集团股份有限公司 | 无主键数据表的同步方法、装置、存储介质和电子设备 |
CN108897794A (zh) * | 2018-06-12 | 2018-11-27 | 东软集团股份有限公司 | 无主键数据表的同步方法、装置、存储介质和电子设备 |
CN108959504A (zh) * | 2018-06-27 | 2018-12-07 | 郑州云海信息技术有限公司 | 一种文件系统远程数据同步实现方法和系统 |
CN108959504B (zh) * | 2018-06-27 | 2021-11-26 | 郑州云海信息技术有限公司 | 一种文件系统远程数据同步实现方法和系统 |
CN109086133A (zh) * | 2018-07-06 | 2018-12-25 | 第四范式(北京)技术有限公司 | 管理内存数据及在内存中维护数据的方法和系统 |
CN109634972A (zh) * | 2018-11-12 | 2019-04-16 | 武汉达梦数据库有限公司 | 一种数据同步时使用rowid定位的方法 |
CN111274311A (zh) * | 2018-12-05 | 2020-06-12 | 聚好看科技股份有限公司 | 一种跨机房数据库的数据同步方法和装置 |
CN110222027A (zh) * | 2019-04-24 | 2019-09-10 | 福建天泉教育科技有限公司 | 数据迁移的数量校验方法及计算机可读存储介质 |
CN110852058A (zh) * | 2019-09-24 | 2020-02-28 | 贵阳朗玛信息技术股份有限公司 | 一种清单比对的方法及装置 |
CN112579591A (zh) * | 2019-09-30 | 2021-03-30 | 重庆小雨点小额贷款有限公司 | 数据校验方法、装置、电子设备及计算机可读存储介质 |
CN111626882A (zh) * | 2020-05-28 | 2020-09-04 | 泰康保险集团股份有限公司 | 数据检测方法、装置、计算机可读介质及电子设备 |
CN111626882B (zh) * | 2020-05-28 | 2022-07-19 | 泰康保险集团股份有限公司 | 数据检测方法、装置、计算机可读介质及电子设备 |
CN111949663A (zh) * | 2020-08-17 | 2020-11-17 | 沈阳京华博瑞科技有限公司 | 一种大数据主外键一致性评价方法、装置和设备 |
CN113220785A (zh) * | 2021-05-21 | 2021-08-06 | 上海申铁信息工程有限公司 | 一种基于主键比对的数据库变更记录同步方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN106815326B (zh) | 2021-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106815326A (zh) | 一种检测无主键数据表一致性的系统及方法 | |
CN106570086B (zh) | 数据迁移系统及数据迁移方法 | |
EP4155966A1 (en) | Blockchain data indexing method, and blockchain data storage method | |
CN107943833B (zh) | 一种基于区块链的无中心分布式文件存储及检索方法 | |
CN104794123B (zh) | 一种为半结构化数据构建NoSQL数据库索引的方法及装置 | |
CN104077423B (zh) | 一种基于一致性散列的结构化数据存储、查询和迁移方法 | |
US20180115428A1 (en) | System and method for verification of data transferred among several data storages | |
CN105872127B (zh) | 一种ip地址管理系统 | |
CN104021123A (zh) | 用于数据迁移的方法和系统 | |
US20180150536A1 (en) | Instance-based distributed data recovery method and apparatus | |
CN102890678A (zh) | 一种基于格雷编码的分布式数据布局方法及查询方法 | |
CN104008199B (zh) | 一种数据查询方法 | |
CN104142962B (zh) | 一种对电子地图的线要素进行处理的方法 | |
CN109062936B (zh) | 一种数据查询方法、计算机可读存储介质及终端设备 | |
CN106326222A (zh) | 一种数据处理方法和装置 | |
CN106202416A (zh) | 列表数据写方法和装置、列表数据读取方法和装置 | |
CN112256698B (zh) | 一种基于多哈希函数的表关系自动关联方法 | |
CN107391557B (zh) | 针对设置链外勘误表的区块链串行查询方法及系统 | |
CN106933823A (zh) | 数据同步方法及装置 | |
CN106599091A (zh) | 基于键值存储的rdf图结构存储和索引方法 | |
CN102467525A (zh) | 单据关联方法及系统 | |
CN107291768A (zh) | 一种索引建立的方法及装置 | |
CN107016075A (zh) | 集群数据同步方法及装置 | |
CN107451177B (zh) | 针对增加区块的单个勘误的区块链的查询方法及系统 | |
CN107169003B (zh) | 一种数据关联方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: 100105 gate E5, North District, National Convention Center, 7 Tianchen East Road, Chaoyang District, Beijing Patentee after: TRAVELSKY TECHNOLOGY Ltd. Patentee after: Wuhan dream database Co., Ltd Address before: 100105 gate E5, North District, National Convention Center, 7 Tianchen East Road, Chaoyang District, Beijing Patentee before: TRAVELSKY TECHNOLOGY Ltd. Patentee before: Wuhan dream database Co., Ltd |