CN109271452B - Db2数据库数据同步更新方法及设备 - Google Patents
Db2数据库数据同步更新方法及设备 Download PDFInfo
- Publication number
- CN109271452B CN109271452B CN201811219296.0A CN201811219296A CN109271452B CN 109271452 B CN109271452 B CN 109271452B CN 201811219296 A CN201811219296 A CN 201811219296A CN 109271452 B CN109271452 B CN 109271452B
- Authority
- CN
- China
- Prior art keywords
- database
- data
- source
- target
- lsn
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000001360 synchronised effect Effects 0.000 title claims abstract description 59
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000008859 change Effects 0.000 claims abstract description 18
- 238000004891 communication Methods 0.000 claims description 8
- 238000012217 deletion Methods 0.000 claims description 8
- 230000037430 deletion Effects 0.000 claims description 8
- 230000000977 initiatory effect Effects 0.000 claims description 3
- 239000000126 substance Substances 0.000 claims 1
- 230000002411 adverse Effects 0.000 abstract description 5
- 230000000694 effects Effects 0.000 abstract description 5
- 230000008569 process Effects 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000010076 replication Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Abstract
本发明实施例提供了DB2数据库数据同步更新方法及设备。所述方法包括：根据待同步更新表创建数据详细地址存储列，对待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为待同步更新表的起始LSN，释放S锁；获取待同步更新表的结果集，将结果集发送至目标端数据库入库，获取源端DB2数据库当前LSN作为待同步更新表的结束LSN；接收源端同步更新服务发送的初始化数据，在目标端数据库将ROWID插入数据详细地址存储列，初始化待同步更新表的数据；启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新。本发明的各个实施例可以在保证目标端数据库数据一致性的前提下，避免长时间对待同步更新表上S锁造成的不利影响。
Description
技术领域
本发明实施例涉及计算机技术领域，尤其涉及一种DB2数据库数据同步更新方法及设备。
背景技术
在基于软件的数据库数据复制技术中，基于数据库日志分析的数据实时同步技术，支持异构系统复制，并且异构备机可读写，对源端数据库的影响也比较小，因此在数据库实时复制领域得到广泛应用。目前在使用数据同步服务进行数据库数据初始化的主要技术原理是，首先对源端数据库中的同步表上S锁，防止其他事务对同步表做修改操作，查询出当前数据库的LSN值作为表增量同步的起始LSN，然后使用SELECT语句查询出源表中的数据。对于支持多版本并发控制的关系型数据库，在发出SELECT查询语句后，可以释放掉同步表上的S锁，因为SELECT语句能够利用多版本机制查询出起始LSN对应的结果集，对于大于此LSN的事务操作，SELECT不会查询到变化的数据。这一部分的变化则是通过后续的增量同步来保证源和目标端的数据一致性。而对于不支持多版本机制的关系型数据库，在SELECT查询并提取完所有结果集之后才能释放表上的S锁，防止在查询过程中，其他事务对同步表做修改操作，而读取到了变更的数据，这样再次在增量同步时会重复同步起始LSN之后提交的事务操作。
对于DB2数据库，由于其不支持多版本并发控制机制，因此在目前初始化步骤实现中需要对数据库同步表保持S锁。如果不对该表保持S锁，那么在某个表初始化时，查询操作会读取到在提取查询结果集期间其它事务提交的数据，初始化结束后开启同步时，这些提取结果集期间产生的事务会被再次同步，从而影响目标端库数据的一致性。如果对该表保持S锁，当源端数据表中数据量非常大时，查询结果集会花费较长时间，而长时间对同步表保持S锁，会对数据库上的应用程序造成较大影响。因此，找到在保证目标端数据库数据一致性的前提下，避免因长时间对待同步更新表上S锁，对应用程序造成不利影响的方法，就成为业界广泛关注的问题。
发明内容
针对现有技术存在的上述问题，本发明实施例提供了一种DB2数据库数据同步更新方法及设备。
第一方面，本发明的实施例提供了一种DB2数据库数据同步更新方法，包括：在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。
进一步地，所述数据详细地址存储列的形式包括：隐藏列或普通列。
进一步地，所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库，包括：捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，将转换后的结果通过TCP/IP网络发送至目标端数据库。
进一步地，所述捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，包括：将INSERT语句转换成DELETE语句及新的INSERT语句。
进一步地，所述将INSERT语句转换成DELETE及新的INSERT语句，包括：在源端数据库构造附带ROWID的DELETE语句发送至目标端数据库进行同步更新服务，在目标端数据库的同步更新表中删除所述ROWID对应的记录，将所述新的INSERT语句发送至目标端数据库进行同步更新服务，将所述ROWID插入所述数据详细地址存储列。
进一步地，所述将INSERT语句转换成DELETE语句及新的INSERT语句，包括：同步更新UPDATE语句，根据源端数据库的值更新目标端数据库中的相应记录。
进一步地，所述所述将INSERT语句转换成DELETE语句及新的INSERT语句，包括：同步更新DELETE语句，根据源端数据库的值删除目标端数据库中的相应记录。
第二方面，本发明的实施例提供了一种DB2数据库数据同步更新装置，包括：待更新数据获取模块，用于在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；数据同步更新模块，用于在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。
第三方面，本发明的实施例提供了一种电子设备，包括：
至少一个处理器；以及
与处理器通信连接的至少一个存储器，其中：
存储器存储有可被处理器执行的程序指令，处理器调用程序指令能够执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的DB2数据库数据同步更新方法。
第四方面，本发明的实施例提供了一种非暂态计算机可读存储介质，非暂态计算机可读存储介质存储计算机指令，计算机指令使计算机执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的DB2数据库数据同步更新方法。
本发明实施例提供的DB2数据库数据同步更新方法及设备，通过在源端数据库初始化过程中对待同步更新表上短暂的S锁，可以在保证目标端数据库数据一致性的前提下，避免因长时间对待同步更新表上S锁，对应用程序造成的不利影响。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的DB2数据库数据同步更新方法流程图；
图2为本发明实施例提供的DB2数据库数据同步更新装置结构示意图；
图3为本发明实施例提供的电子设备的实体结构示意图；
图4为本发明实施例提供的DB2数据库数据同步更新架构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。另外，本发明提供的各个实施例或单个实施例中的技术特征，可以相互任意结合以形成可行的技术方案，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时，应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
本发明实施例提供了一种DB2数据库数据同步更新方法，参见图1，该方法包括：
101、在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集(在另一实施例中，可以选择SELECT语句获取所述待同步更新表的结果集)，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
102、在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务(在另一实施例中，还包括：若所述结束LSN小于所述起始LSN，则忽略数据实时同步更新服务)，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。
本发明实施例提供的DB2数据库数据同步更新方法，通过在源端数据库初始化过程中对待同步更新表上短暂的S锁，可以在保证目标端数据库数据一致性的前提下，避免因长时间对待同步更新表上S锁，对应用程序造成的不利影响。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述数据详细地址存储列的形式包括：隐藏列或普通列(在另一实施例中，该隐藏列或普通列可以命名为##ROWID)。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库，包括：
捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，将转换后的结果通过TCP/IP网络发送至目标端数据库。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，包括：将INSERT语句转换成DELETE语句及新的INSERT语句。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述将INSERT语句转换成DELETE及新的INSERT语句，包括：
在源端数据库构造附带ROWID的DELETE语句发送至目标端数据库进行同步更新服务，在目标端数据库的同步更新表中删除所述ROWID对应的记录，将所述新的INSERT语句发送至目标端数据库进行同步更新服务，将所述ROWID插入所述数据详细地址存储列。
构造DELETE语句的目的是为了清除在初始化操作期间产生的INSERT语句可能已经被装载到目标端数据库的数据中，防止同步这些数据的INSERT语句在目标端数据库产生冲突。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述将INSERT语句转换成DELETE语句及新的INSERT语句，包括：同步更新UPDATE语句，根据源端数据库的值更新目标端数据库中的相应记录。
在上述实施例的基础上，本发明实施例中提供的DB2数据库数据同步更新方法，所述所述将INSERT语句转换成DELETE语句及新的INSERT语句，包括：同步更新DELETE语句，根据源端数据库的值删除目标端数据库中的相应记录。
最后，需要说明的是，当源端数据库的起始LSN大于待同步更新表的结束LSN后，日志操作结束转换，按照普通的方式投递，无需再维护目标端数据库的数据详细地址存储列。
本发明各个实施例的实现基础是通过具有处理器功能的设备进行程序化的处理实现的。因此在工程实际中，可以将本发明各个实施例的技术方案及其功能封装成各种模块。基于这种现实情况，在上述各实施例的基础上，本发明的实施例提供了一种DB2数据库数据同步更新装置，该装置用于执行上述方法实施例中的DB2数据库数据同步更新方法。参见图2，该装置包括：
待更新数据获取模块201，用于在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
数据同步更新模块202，用于在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；
其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。
本发明实施例提供的DB2数据库数据同步更新装置，通过设计待更新数据获取模块及数据同步更新模块，在源端数据库初始化过程中对待同步更新表上短暂的S锁，可以在保证目标端数据库数据一致性的前提下，避免因长时间对待同步更新表上S锁，对应用程序造成的不利影响。
本发明实施例的方法是依托电子设备实现的，因此对相关的电子设备有必要做一下介绍。基于此目的，本发明的实施例提供了一种电子设备，如图3所示，该电子设备包括：至少一个处理器(processor)301、通信接口(Communications Interface)304、至少一个存储器(memory)302和通信总线303，其中，至少一个处理器301，通信接口304，至少一个存储器302通过通信总线303完成相互间的通信。至少一个处理器301可以调用至少一个存储器302中的逻辑指令，以执行如下方法：在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。
此外，上述的至少一个存储器302中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。例如包括：在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
为了对上述各个实施例及本发明的精神实质做更进一步的阐述，有必要对基于日志分析的数据库数据同步更新的架构做出阐述。请参见图4，该架构包括：源端数据库401、交易日志402、日志捕获403、TCP/IP网络404、管理进程405、同步更新406及目标端数据库407。
在源端数据库401产生交易日志402，日志捕获403捕获交易日志402后进行分析，将分析结果通过TCP/IP网络404发送至目标端数据库407一侧，由同步更新406进行同步更新后，发送至目标端数据库407进行数据库数据的更新。整个过程中，管理进程405用于在源端数据库401一侧及目标端数据库407一侧进行数据管理。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (7)
1.一种DB2数据库数据同步更新方法，其特征在于，包括：
在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；
其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID；
所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库，包括：
捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，将转换后的结果通过TCP/IP网络发送至目标端数据库；
所述捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，包括：
将INSERT语句转换成DELETE语句及新的INSERT语句；
所述将INSERT语句转换成DELETE及新的INSERT语句，包括：
在源端数据库构造附带ROWID的DELETE语句发送至目标端数据库进行同步更新服务，在目标端数据库的同步更新表中删除所述ROWID对应的记录，将所述新的INSERT语句发送至目标端数据库进行同步更新服务，将所述ROWID插入所述数据详细地址存储列。
2.根据权利要求1所述的DB2数据库数据同步更新方法，其特征在于，所述数据详细地址存储列的形式包括：隐藏列或普通列。
3.根据权利要求1所述的DB2数据库数据同步更新方法，其特征在于，所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新，包括：
同步更新UPDATE语句，根据源端数据库的值更新目标端数据库中的相应记录。
4.根据权利要求1所述的DB2数据库数据同步更新方法，其特征在于，所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新，包括：
同步更新DELETE语句，根据源端数据库的值删除目标端数据库中的相应记录。
5.一种DB2数据库数据同步更新装置，其特征在于，包括：
待更新数据获取模块，用于在目标端数据库，根据待同步更新表创建数据详细地址存储列，在源端数据库，对所述待同步更新表上S锁，获取源端DB2数据库当前的日志序列号LSN作为所述待同步更新表的起始LSN，释放S锁；获取所述待同步更新表的结果集，将所述结果集发送至目标端数据库入库，再次获取源端DB2数据库当前LSN作为所述待同步更新表的结束LSN；
数据同步更新模块，用于在目标端数据库，接收源端同步更新服务发送的初始化数据，将所述待同步更新表中的数据及数据详细地址ROWID组成INSERT语句，并在目标端数据库中将ROWID插入所述数据详细地址存储列，完成所述待同步更新表的数据初始化；在源端数据库，若所述结束LSN大于等于所述起始LSN，启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库进行数据同步更新；
其中，所述数据详细地址存储列用于存储源端数据库中的ROWID，所述结果集中包括所述源端数据库中的ROWID；
所述启动数据实时同步更新服务，将源端DB2数据库的变化发送至目标端数据库，包括：
捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，将转换后的结果通过TCP/IP网络发送至目标端数据库；
所述捕获并分析源端数据库日志，将源端DB2数据库的增删变化进行转换，包括：
将INSERT语句转换成DELETE语句及新的INSERT语句；
所述将INSERT语句转换成DELETE及新的INSERT语句，包括：
在源端数据库构造附带ROWID的DELETE语句发送至目标端数据库进行同步更新服务，在目标端数据库的同步更新表中删除所述ROWID对应的记录，将所述新的INSERT语句发送至目标端数据库进行同步更新服务，将所述ROWID插入所述数据详细地址存储列。
6.一种电子设备，其特征在于，包括：
至少一个处理器、至少一个存储器、通信接口和总线；其中，
所述处理器、存储器、通信接口通过所述总线完成相互间的通信；
所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令，以执行如权利要求1至4任一项所述的方法。
7.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至4中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811219296.0A CN109271452B (zh) | 2018-10-19 | 2018-10-19 | Db2数据库数据同步更新方法及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811219296.0A CN109271452B (zh) | 2018-10-19 | 2018-10-19 | Db2数据库数据同步更新方法及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109271452A CN109271452A (zh) | 2019-01-25 |
| CN109271452B true CN109271452B (zh) | 2021-04-13 |
Family
ID=65193510
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811219296.0A Active CN109271452B (zh) | 2018-10-19 | 2018-10-19 | Db2数据库数据同步更新方法及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109271452B (zh) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109977168B (zh) * | 2019-03-18 | 2021-11-05 | 武汉达梦数据库股份有限公司 | 基于数据页预加载的数据库数据同步方法及设备 |
| CN110222115A (zh) * | 2019-04-30 | 2019-09-10 | 武汉达梦数据库有限公司 | 基于表初始化分组装载的数据库同步方法及设备 |
| CN110196859A (zh) * | 2019-06-10 | 2019-09-03 | 天津神舟通用数据技术有限公司 | 基于jdbc分发器的数据库读写分离集群实时一致性方法 |
| CN110502523A (zh) * | 2019-08-01 | 2019-11-26 | 广东浪潮大数据研究有限公司 | 业务数据存储方法、装置、服务器及计算机可读存储介质 |
| CN111782869B (zh) * | 2020-07-08 | 2022-02-18 | 珠海大横琴科技发展有限公司 | 视频大数据事件库构建方法、装置及计算机设备 |
| CN113190281B (zh) * | 2021-04-08 | 2022-05-17 | 武汉达梦数据库股份有限公司 | 一种基于rowid区间的初始化装载方法与装置 |
| CN113590716B (zh) * | 2021-08-09 | 2022-06-10 | 深圳市携客互联科技有限公司 | 基于erp系统集成接口业务数据自动同步方法 |
| CN113722396B (zh) * | 2021-08-25 | 2023-12-22 | 武汉达梦数据库股份有限公司 | 一种数据同步接收端服务主备切换的方法及设备 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100368998C (zh) * | 2004-07-23 | 2008-02-13 | 中兴通讯股份有限公司 | 一种多数据库数据同步方法 |
| CN101183377B (zh) * | 2007-12-10 | 2010-09-08 | 华中科技大学 | 一种基于消息中间件的高可用性数据库集群系统 |
| CN104750720B (zh) * | 2013-12-30 | 2018-04-27 | 中国银联股份有限公司 | 多线程并发访问环境下高性能数据处理的实现 |
| CN106155839B (zh) * | 2015-04-28 | 2019-07-30 | 阿里巴巴集团控股有限公司 | 一种用于备份数据的方法与设备 |
| CN105589961B (zh) * | 2015-12-21 | 2019-02-19 | 武汉达梦数据库有限公司 | 一种数据库实时同步系统数据一致性的检测方法及系统 |
| CN108182291A (zh) * | 2018-01-30 | 2018-06-19 | 国网江苏省电力有限公司扬州供电分公司 | 一种基于NoSql数据库同关系型数据库的数据交互机制 |
-
2018
- 2018-10-19 CN CN201811219296.0A patent/CN109271452B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN109271452A (zh) | 2019-01-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109271452B (zh) | Db2数据库数据同步更新方法及设备 | |
| CN109656934B (zh) | 基于日志解析的源端Oracle数据库DDL同步方法及设备 | |
| CN105630863B (zh) | 用于多版本并发提交状态的事务控制块 | |
| CN110209735B (zh) | 数据库备份方法、数据库备份装置、计算设备和存储介质 | |
| CN108536752B (zh) | 一种数据同步方法、装置和设备 | |
| TWI521363B (zh) | Method, device and system for implementing incremental data extraction | |
| CN110232093B (zh) | 数据库同步中基于闪回查询的初始化装载方法及设备 | |
| JP6521402B2 (ja) | ＫｅｙＶａｌｕｅデータベースのデータテーブルを更新するための方法およびテーブルデータを更新するための装置 | |
| CN108121827B (zh) | 一种全量数据的同步方法及装置 | |
| US11347933B1 (en) | Distributed collaborative storage with operational transformation | |
| CN108205560B (zh) | 一种数据同步方法以及装置 | |
| CN109977168B (zh) | 基于数据页预加载的数据库数据同步方法及设备 | |
| CN111414362B (zh) | 数据读取方法、装置、设备及存储介质 | |
| CN110008284B (zh) | 基于数据页预加载及回滚的数据库数据同步方法及设备 | |
| CN115730008A (zh) | 一种日志解析方法、数据同步系统、电子设备及存储介质 | |
| US8935294B2 (en) | Minimizing computer resource usage when converting data types of a table column | |
| US20090307279A1 (en) | Refresh and filter anchors | |
| CN111352766A (zh) | 一种数据库的双活实现方法及装置 | |
| CN110196786B (zh) | 数据库回滚同步中内存的控制方法及设备 | |
| US8818947B2 (en) | Landscape transformation replication server | |
| CN115658815A (zh) | 基于cdc实现的数据同步的方法 | |
| CN116069859A (zh) | 数据库的增量数据同步方法、存储介质与计算机设备 | |
| CN111966650B (zh) | 一种运维大数据共享数据表的处理方法、装置及存储介质 | |
| CN111241193B (zh) | 一种基于日志解析的数据库添加列同步方法和装置 | |
| CN114741453A (zh) | 数据同步的方法、系统及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB03 | Change of inventor or designer information |
Inventor after: Fu Quan Inventor after: Sun Feng Inventor after: Zhao Jiawei Inventor before: Fu Quan Inventor before: Sun Feng Inventor before: Zhao Jiawei Inventor before: Yang Chun |
|
| CB03 | Change of inventor or designer information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CB03 | Change of inventor or designer information |
Inventor after: Sun Feng Inventor after: Zhao Jiawei Inventor before: Fu Quan Inventor before: Sun Feng Inventor before: Zhao Jiawei |
|
| CB03 | Change of inventor or designer information | ||
| CP03 | Change of name, title or address |
Address after: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee after: Wuhan dream database Co.,Ltd. Address before: 430014 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee before: WUHAN DAMENG DATABASE Co.,Ltd. |
|
| CP03 | Change of name, title or address | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220913 Address after: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee after: Wuhan dream database Co.,Ltd. Patentee after: HUAZHONG University OF SCIENCE AND TECHNOLOGY Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230725 Address after: 16-19/F, Building C3, Future Science and Technology Building, No. 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province, 430206 Patentee after: Wuhan dream database Co.,Ltd. Address before: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. Patentee before: HUAZHONG University OF SCIENCE AND TECHNOLOGY |
|
| TR01 | Transfer of patent right |