CN102929946A - 一种数据同步方法、装置及系统 - Google Patents
一种数据同步方法、装置及系统 Download PDFInfo
- Publication number
- CN102929946A CN102929946A CN2012103742502A CN201210374250A CN102929946A CN 102929946 A CN102929946 A CN 102929946A CN 2012103742502 A CN2012103742502 A CN 2012103742502A CN 201210374250 A CN201210374250 A CN 201210374250A CN 102929946 A CN102929946 A CN 102929946A
- Authority
- CN
- China
- Prior art keywords
- data
- modification
- list
- preamble
- working
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种数据同步方法、装置及系统，所述方法包括获取源端数据库的变更表中的数据作为当前同步数据；其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据。本申请实施例由对记录有源端数据库增量数据的变更表的操作，代替直接对源端数据库的操作，避免了对源端数据库较强的侵入性，从而提高数据同步的性能。
Description
技术领域
本申请涉及数据传输领域，特别涉及一种数据同步方法、装置及系统。
背景技术
目前，一般采用在源端数据库（oracle数据库）建立快照表及触发器的方法，实现增量数据同步，具体过程为：通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中。
但上述实现数据同步的方案中，在源端数据库中建立触发器与快照表会使得对源端数据库的侵入性较强，并且影响源端数据库中相应表的操作性能，数据同步速度相对较慢。
发明内容
有鉴于此，本申请提供一种数据同步方法、装置及系统，用于解决现有数据同步方案对源端数据库的侵入性较强，并且影响源端数据库中相应表的操作性能，数据同步速度相对较慢的技术问题。
为解决上述技术问题，本申请提供了一种数据同步方法，包括：
获取源端数据库的变更表中的数据作为当前同步数据；
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中；
将所述当前同步数据发送至目的端数据库；
获取所述目的端数据库的接收结果信息，判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，删除所述变更表中的当前同步数据。
上述方法，优选的，所述获取源端数据库的变更表中的数据作为当前同步数据包括：
任意提取源端数据库的变更表中的一条或多条数据作为当前同步数据；
或提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
上述方法，优选的，所述将所述当前同步数据发送至目的端数据库包括：
对所述当前同步数据进行封装，得到当前数据包；
将所述当前数据包发送至目的端数据库。
上述方法，优选的，若所述接收结果信息表明所述当前同步数据传输未成功，所述方法还包括：
触发所述目的端数据库对其接收到的当前同步数据进行删除；
重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
上述方法，优选的，在所述删除所述变更表中的当前同步数据之后，所述方法还包括：
本申请提供了一种数据同步装置，包括：
数据获取单元，用于获取源端数据库的变更表中的数据作为当前同步数据；
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中；
数据发送单元，用于将所述当前同步数据发送至目的端数据库；
逻辑判断单元，用于获取所述目的端数据库的接收结果信息，判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，触发数据删除单元；
所述数据删除单元，用于删除所述变更表中的当前同步数据。
上述装置，优选的，所述数据获取单元包括第一获取子单元或第二获取子单元，其中：
所述第一获取子单元，用于任意提取源端数据库的变更表中的一条或条数据作为当前同步数据；
所述第二获取子单元，用于提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
上述装置，优选的，所述数据发送单元包括：
封装子单元，用于对所述当前同步数据进行封装，得到当前数据包；
发送子单元，用于将所述当前数据包发送至目的端数据库。
上述装置，优选的，所述装置还包括：
第一触发单元，用于若所述接收结果信息表明所述当前同步数据传输未成功，触发所述目的端数据库对其接收到的当前同步数据进行删除，并触发所述数据获取单元重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
上述装置，优选的，所述装置还包括：
本申请还提供了一种数据同步系统，包括如上述任意一项所述的数据同步装置。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请提供的一种数据同步方法、装置及系统，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，从而实现源端数据库与目的端数据库之间的数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例一提供的一种数据同步方法的流程图；
图2为本申请实施例二提供的一种数据同步方法的流程图；
图3为本申请实施例三提供的一种数据同步装置的结构示意图
图4为本申请实施例三提供的一种数据同步装置的部分结构示意图；
图5为本申请实施例三提供的一种数据同步装置的另一部分结构示意图；
图6为本申请实施例四提供的一种数据同步装置的结构示意图；
图7为本申请实施例五提供的一种数据同步系统生成变更表的数据流向图；
图8为本申请实施例五提供的一种数据同步系统实现数据同步的流程图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
参考图1，其示出了本申请实施例一提供的一种数据同步方法的流程图，所述方法可以包括以下步骤：
步骤101：获取源端数据库的变更表中的数据作为当前同步数据。
需要说明的是，本申请可以应用于Oracle数据库，在产品图形化配置工具中，建立Xbean配置文件，源端数据库通过该配置文件使用Oracle特有的dbms-cdc-publish来创建一个变更表，Oracle数据库将增量变化数据自动保存至所述变更表中。
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中。
需要说明的是，所述源端数据库的增量变化数据可以通过解析所述源端数据库的日志文件的方式进行获取。
步骤102：将所述当前同步数据发送至目的端数据库。
优选的，所述步骤102可以包括以下步骤：
对所述当前同步数据进行封装，得到当前数据包。
将所述当前数据包发送至目的端数据库。
其中，所述将所述当前数据包发送至目的端数据库的具体实现包括：
启动发送线程；
利用所述发送线程将所述当前数据包发送至所述目的端数据库。
步骤103：获取所述目的端数据库的接收结果信息。
其中，所述接收结果信息是指：在所述目的端数据库接收到所述当前同步数据之后，所述目的端数据库判断所述当前同步数据的数据格式等信息是否满足传输成功规则的信息。
步骤104：判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，执行步骤105；
步骤105：删除所述变更表中的当前同步数据。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请实施例一提供的一种数据同步方法，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，从而实现源端数据库与目的端数据库之间的增量数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
优选的，所述步骤101可以通过以下方式具体实现：
方式一：任意提取源端数据库的变更表中的一条或多条数据作为当前同步数据。
需要说明的是，当所述步骤101通过所述方式一实现时，所述步骤105具体包括：
删除所述变更表中当前选取的一条或多条数据。
方式二：提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
参考图2，其示出了本申请实施例二提供的一种数据同步方法的流程图，在所述步骤104中，判断所述接收结果信息是否表明所述当前同步数据传输成功时，若所述接收结果信息表明所述当前同步数据传输未成功，所述方法还包括：
步骤S106：触发所述目的端数据库对其接收到的当前同步数据进行删除，并返回执行所述步骤101重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
需要说明的是，图2中所示的所述步骤101至所述步骤105与本申请实施例一中所述内容一致，在此不再详细描述。
其中，若所述接收结果信息表明所述当前同步数据传输未成功，说明所述当前同步数据在传输过程中被植入非法数据，或部分数据丢失等，此时需要重新对所述变更表中的数据进行获取并传输。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请实施例二提供的一种数据同步方法，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，而若所述接收结果信息表明所述当前同步数据未传输成功，则触发所述目的端数据库对其接收到的当前同步数据进行删除，并重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功，从而实现源端数据库与目的端数据库之间的一次增量数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
参考图3，其示出了本申请实施例三提供的一种数据同步装置的结构示意图，所述装置包括：
数据获取单元301，用于获取源端数据库的变更表中的数据作为当前同步数据；
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中。
需要说明的是，本申请可以应用于Oracle数据库，在产品图形化配置工具中，建立Xbean配置文件，源端数据库通过该配置文件使用Oracle特有的dbms-cdc-publish来创建一个变更表，Oracle数据库将增量变化数据自动保存至所述变更表中。
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中。
需要说明的是，所述源端数据库的增量变化数据可以通过解析所述源端数据库的日志文件的方式进行获取。
优选的，参考图4，其示出了本申请实施例三的部分结构示意图，所述数据获取单元301包括第一获取子单元311或第二获取子单元312，其中：
所述第一获取子单元311，用于任意提取源端数据库的变更表中的一条或条数据作为当前同步数据；
所述第二获取子单元312，用于提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
数据发送单元302，用于将所述当前同步数据发送至目的端数据库。
其中，所述数据发送单元302与所述数据获取单元301相连接。
优选的，参考图5，其示出了本申请实施例三的另一部分结构示意图，所述数据发送单元302包括：
封装子单元321，用于对所述当前同步数据进行封装，得到当前数据包；
发送子单元322，用于将所述当前数据包发送至目的端数据库。
其中，所述发送子单元322具体用于：
启动发送线程；
利用所述发送线程将所述当前数据包发送至所述目的端数据库。
逻辑判断单元303，用于获取所述目的端数据库的接收结果信息，判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，触发数据删除单元304。
其中，所述接收结果信息是指：在所述目的端数据库接收到所述当前同步数据之后，所述目的端数据库判断所述当前同步数据的数据格式等信息是否满足传输成功规则的信息。
所述数据删除单元304，用于删除所述变更表中的当前同步数据。
其中，所述数据删除单元304与所述逻辑判断单元303相连接。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请实施例三提供的一种数据同步装置，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，从而实现源端数据库与目的端数据库之间的增量数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
参考图6，其示出了本申请实施例四提供的一种数据同步装置的结构示意图，所述装置还包括：
第一触发单元305，用于若所述接收结果信息表明所述当前同步数据传输未成功，触发所述目的端数据库对其接收到的当前同步数据进行删除，并触发所述数据获取单元301重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
需要说明的是，所述第一触发单元305分别与所述逻辑判断单元303和所述数据获取单元301相连接。
其中，若所述接收结果信息表明所述当前同步数据传输未成功，说明所述当前同步数据在传输过程中被植入非法数据，或部分数据丢失等，此时需要触发所述数据获取单元301重新对所述变更表中的数据进行获取并传输。
需要说明的是，所述数据获取单元301、所述数据发送单元302、所述逻辑判断单元303和所述数据删除单元304与本申请实施例四三中所述内容一致，在此不再详细描述。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请实施例四提供的一种数据同步装置，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，而若所述接收结果信息表明所述当前同步数据未传输成功，则触发所述目的端数据库对其接收到的当前同步数据进行删除，并重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功，从而实现源端数据库与目的端数据库之间的一次增量数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
本申请五还提供了一种数据同步系统，所述系统包括如上述实施例三与实施例四任意一项所述的数据同步装置。
需要说明的是，在本申请实施例实现数据同步之前，在所述源端数据库source database online redo longfile中抽取增量数据，生成变更表changetable。因此，所述变更表由所述源端数据库中提取。
参考图7，源端数据库生成变更表的流程示意图。
其中，在本申请实现数据同步之前，InforSuite SIB(SIB，本申请实施例)首先根据配置信息，在源库中部署CDC HOTLOG，建立变更源ChangeSource，基于该变更源创建变更集Change Set，最后依据变更集生成变更表Change Table。之后源端数据库会将变化信息以日志文件的形式保存，并解析日志文件，将变化信息写入Change Table中。
之后，本申请读取ChangeTable中数据，将数据同步至目的端数据库，成功同步后，删除ChangeTable中的对应数据。
参考图8，其示出了本申请实施例五实现数据同步的流程图，在：
801：解析Xbean，获取配置信息。
其中，Xbean是配置CDC hotlog参数的xml配置文件，源端解析该文件获取配置信息。
802：初始化hotlog环境。
其中，源端利用配置信息，使用oracle特有的dbms_cdc_publish来创建一个变更表，用于捕获源表变更记录。初始化环境后，Oracle将增量数据自动保存到变更表Change table中。
803：循环查询Change table：源端查询线程循环查询Change table中的增量数据。
804：封装并发送数据：将查询线程查询的数据打包，利用发送线程发送到目的端。
805：数据入库：目的端收到发送线程发送的数据，将数据保存到目的数据库。
806：返回信息
通过同步线程返回失败或成功信息。
807：接收并处理返回信息：源端收到返回信息，并判断信息是成功还是失败的信息。
808：删除Change table信息：当返回信息是成功信息，源端将删除Change table中对应的信息。
809：不删除Change table信息：当返回信息是失败信息，源端将不删除Change table中对应的信息。
810：继续循环：返回执行803开始新的循环。
由上述方案可知，相对应现有技术中通过触发器捕获源端数据库的增量数据，并将增量数据写入快照表中，从而将快照表中的增量数据写入到目的端数据库中的方案，本申请实施例五提供的一种数据同步系统，通过获取源端数据库的变更表中的数据作为当前同步数据；将所述当前同步数据发送至目的端数据库；获取所述目的端数据库的接收结果信息，若所述接收结果信息表明所述当前同步数据传输成功，删除所述变更表中的当前同步数据，从而实现源端数据库与目的端数据库之间的数据同步，同时，相对于现有方案，由对记录有源端数据库增量数据的变更表的操作，代替触发器加快照表的操作，避免了对源端数据库较强的侵入性，同时提高了数据同步的性能。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在+另外的相同要素。
以上对本申请所提供的一种数据同步方法、装置及系统进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。
Claims (9)
1.一种数据同步方法，其特征在于，包括：
获取源端数据库的变更表中的数据作为当前同步数据；
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中；
将所述当前同步数据发送至目的端数据库；
获取所述目的端数据库的接收结果信息，判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，删除所述变更表中的当前同步数据。
2.根据权利要求1所述的方法，其特征在于，所述获取源端数据库的变更表中的数据作为当前同步数据包括：
任意提取源端数据库的变更表中的一条或多条数据作为当前同步数据；
或提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
3.根据权利要求1所述的方法，其特征在于，所述将所述当前同步数据发送至目的端数据库包括：
对所述当前同步数据进行封装，得到当前数据包；
将所述当前数据包发送至目的端数据库。
4.根据权利要求1所述的方法，其特征在于，若所述接收结果信息表明所述当前同步数据传输未成功，所述方法还包括：
触发所述目的端数据库对其接收到的当前同步数据进行删除；
重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
5.一种数据同步装置，其特征在于，包括：
数据获取单元，用于获取源端数据库的变更表中的数据作为当前同步数据；
其中，所述变更表中的数据由源端数据库的增量变化数据中提取，并以条为单位按照其被提取的前后顺序依次存储至预设的变更表中；
数据发送单元，用于将所述当前同步数据发送至目的端数据库；
逻辑判断单元，用于获取所述目的端数据库的接收结果信息，判断所述接收结果信息是否表明所述当前同步数据传输成功，如果是，触发数据删除单元；
所述数据删除单元，用于删除所述变更表中的当前同步数据。
6.根据权利要求5所述的装置，其特征在于，所述数据获取单元包括第一获取子单元或第二获取子单元，其中：
所述第一获取子单元，用于任意提取源端数据库的变更表中的一条或条数据作为当前同步数据；
所述第二获取子单元，用于提取所述变更表中存储顺序最前的一条或连续多条数据作为当前同步数据。
7.根据权利要求5所述的装置，其特征在于，所述数据发送单元包括：
封装子单元，用于对所述当前同步数据进行封装，得到当前数据包；
发送子单元，用于将所述当前数据包发送至目的端数据库。
8.根据权利要求5所述的装置，其特征在于，所述装置还包括：
第一触发单元，用于若所述接收结果信息表明所述当前同步数据传输未成功，触发所述目的端数据库对其接收到的当前同步数据进行删除，并触发所述数据获取单元重新获取所述变更表中的数据作为当前同步数据，直到所述目的端数据库的接收结果信息表明所述当前同步数据传输成功。
9.一种数据同步系统，其特征在于，包括如上述权利要求5至8任意一项所述的数据同步装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2012103742502A CN102929946A (zh) | 2012-09-27 | 2012-09-27 | 一种数据同步方法、装置及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2012103742502A CN102929946A (zh) | 2012-09-27 | 2012-09-27 | 一种数据同步方法、装置及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102929946A true CN102929946A (zh) | 2013-02-13 |
Family
ID=47644744
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2012103742502A Pending CN102929946A (zh) | 2012-09-27 | 2012-09-27 | 一种数据同步方法、装置及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102929946A (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104462568A (zh) * | 2014-12-26 | 2015-03-25 | 山东中创软件商用中间件股份有限公司 | 一种数据对账方法、装置和系统 |
| CN105677885A (zh) * | 2016-01-14 | 2016-06-15 | 大连陆海科技股份有限公司 | 航运业数据同步的收发设备及方法、及同步系统 |
| CN105824865A (zh) * | 2015-12-09 | 2016-08-03 | 广东亿迅科技有限公司 | 一种分布式数据库间数据同步系统 |
| CN103699580B (zh) * | 2013-12-03 | 2016-08-24 | 中国铁路总公司 | 数据库同步方法及装置 |
| CN106484807A (zh) * | 2016-09-23 | 2017-03-08 | 北京许继电气有限公司 | 构建自主可控数据库双活或多活集群架构的方法和系统 |
| CN107038195A (zh) * | 2015-12-17 | 2017-08-11 | 阿里巴巴集团控股有限公司 | 数据同步方法和装置 |
| CN107967275A (zh) * | 2016-10-19 | 2018-04-27 | 北京国双科技有限公司 | 关系型数据库中的数据处理方法及装置 |
| CN108009209A (zh) * | 2017-11-08 | 2018-05-08 | 山东中创软件商用中间件股份有限公司 | 一种查询服务血缘关系信息的方法及装置 |
| CN108334614A (zh) * | 2018-02-07 | 2018-07-27 | 中国平安人寿保险股份有限公司 | 一种数据更新方法、系统及存储介质 |
| CN109656992A (zh) * | 2018-11-27 | 2019-04-19 | 山东中创软件商用中间件股份有限公司 | 一种数据传输对账方法、装置及设备 |
| CN110019512A (zh) * | 2017-10-11 | 2019-07-16 | 北京国双科技有限公司 | 一种数据处理方法及装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090070391A1 (en) * | 2007-09-06 | 2009-03-12 | Ann-Louise Blair | Systems, methods and software programs for data synchronization |
| CN101645072A (zh) * | 2009-08-25 | 2010-02-10 | 山东中创软件商用中间件股份有限公司 | 基于Oracle CDC技术实现的变更数据抽取方法 |
| CN102184251A (zh) * | 2011-05-25 | 2011-09-14 | 盛趣信息技术（上海）有限公司 | 一种数据表同步系统及方法 |
-
2012
- 2012-09-27 CN CN2012103742502A patent/CN102929946A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090070391A1 (en) * | 2007-09-06 | 2009-03-12 | Ann-Louise Blair | Systems, methods and software programs for data synchronization |
| CN101645072A (zh) * | 2009-08-25 | 2010-02-10 | 山东中创软件商用中间件股份有限公司 | 基于Oracle CDC技术实现的变更数据抽取方法 |
| CN102184251A (zh) * | 2011-05-25 | 2011-09-14 | 盛趣信息技术（上海）有限公司 | 一种数据表同步系统及方法 |
Non-Patent Citations (3)
| Title |
|---|
| 刘洋 等: "数据库同步技术中变化数据捕获模式的研究与比较", 《科技视界》 * |
| 戴浩 等: "ETL中的数据增量抽取机制研究", 《计算机工程与设计》 * |
| 邹先霞 等: "基于数据库日志的变化数据捕获研究", 《小型微型计算机系统》 * |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103699580B (zh) * | 2013-12-03 | 2016-08-24 | 中国铁路总公司 | 数据库同步方法及装置 |
| CN104462568B (zh) * | 2014-12-26 | 2018-07-31 | 山东中创软件商用中间件股份有限公司 | 一种数据对账方法、装置和系统 |
| CN104462568A (zh) * | 2014-12-26 | 2015-03-25 | 山东中创软件商用中间件股份有限公司 | 一种数据对账方法、装置和系统 |
| CN105824865A (zh) * | 2015-12-09 | 2016-08-03 | 广东亿迅科技有限公司 | 一种分布式数据库间数据同步系统 |
| CN107038195A (zh) * | 2015-12-17 | 2017-08-11 | 阿里巴巴集团控股有限公司 | 数据同步方法和装置 |
| CN107038195B (zh) * | 2015-12-17 | 2020-07-03 | 阿里巴巴集团控股有限公司 | 数据同步方法和装置 |
| CN105677885A (zh) * | 2016-01-14 | 2016-06-15 | 大连陆海科技股份有限公司 | 航运业数据同步的收发设备及方法、及同步系统 |
| CN106484807A (zh) * | 2016-09-23 | 2017-03-08 | 北京许继电气有限公司 | 构建自主可控数据库双活或多活集群架构的方法和系统 |
| CN107967275A (zh) * | 2016-10-19 | 2018-04-27 | 北京国双科技有限公司 | 关系型数据库中的数据处理方法及装置 |
| CN107967275B (zh) * | 2016-10-19 | 2020-08-11 | 北京国双科技有限公司 | 关系型数据库中的数据处理方法及装置 |
| CN110019512A (zh) * | 2017-10-11 | 2019-07-16 | 北京国双科技有限公司 | 一种数据处理方法及装置 |
| CN108009209A (zh) * | 2017-11-08 | 2018-05-08 | 山东中创软件商用中间件股份有限公司 | 一种查询服务血缘关系信息的方法及装置 |
| CN108009209B (zh) * | 2017-11-08 | 2021-11-23 | 山东中创软件商用中间件股份有限公司 | 一种查询服务血缘关系信息的方法及装置 |
| CN108334614A (zh) * | 2018-02-07 | 2018-07-27 | 中国平安人寿保险股份有限公司 | 一种数据更新方法、系统及存储介质 |
| CN109656992A (zh) * | 2018-11-27 | 2019-04-19 | 山东中创软件商用中间件股份有限公司 | 一种数据传输对账方法、装置及设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102929946A (zh) | 一种数据同步方法、装置及系统 | |
| CN100562874C (zh) | 一种增量数据捕获方法和系统 | |
| US8543539B2 (en) | Method and system for capturing change of data | |
| CN110879813A (zh) | 一种基于二进制日志解析的MySQL数据库增量同步实现方法 | |
| CN105701096A (zh) | 索引生成方法、数据查询方法、装置及系统 | |
| CN104104717A (zh) | 投放渠道数据统计方法及装置 | |
| CN102609432B (zh) | 文件管理装置和文件管理方法 | |
| CN102902762B (zh) | 一种删除重复数据的方法、装置和系统 | |
| CN104050269A (zh) | 日志压缩方法及装置、解压缩方法及装置 | |
| CN105550219A (zh) | 一种信息资源的自动编目方法 | |
| CN103605778A (zh) | 一种视频文件的定位方法、装置及系统 | |
| CN102308296A (zh) | 哈希计算处理方法及装置 | |
| CN104463508A (zh) | 一种多个工作流系统间的协同方法及装置 | |
| CN105447168A (zh) | Mp4格式的碎片文件恢复与重组的方法 | |
| CN104778078A (zh) | 一种内容管理系统以及信息内容发布方法 | |
| CN103177022A (zh) | 一种恶意文件搜索方法及装置 | |
| CN106802928B (zh) | 电网历史数据管理方法及其系统 | |
| CN102902922A (zh) | 文件修复方法和系统 | |
| US8190655B2 (en) | Method for reliable and efficient filesystem metadata conversion | |
| CN102457553A (zh) | 基于B/S模式的离线SaaS应用软件实现方法 | |
| CN103927325A (zh) | 一种对url进行分类的方法及装置 | |
| CN104216980B (zh) | 一种文件系统序列化操作的分类方法 | |
| CN103502970A (zh) | 一种键值对的操作方法及装置 | |
| CN102982288B (zh) | 在便携式终端中执行数据的加密和解密的设备和方法 | |
| CN104462108A (zh) | 数据库结构对象处理方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20130213 |