CN103699580A - 数据库同步方法及装置 - Google Patents
数据库同步方法及装置 Download PDFInfo
- Publication number
- CN103699580A CN103699580A CN201310641728.8A CN201310641728A CN103699580A CN 103699580 A CN103699580 A CN 103699580A CN 201310641728 A CN201310641728 A CN 201310641728A CN 103699580 A CN103699580 A CN 103699580A
- Authority
- CN
- China
- Prior art keywords
- database
- data variation
- data
- variation information
- synchronization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 230000001360 synchronised effect Effects 0.000 claims abstract description 75
- 238000013507 mapping Methods 0.000 claims description 18
- 238000012544 monitoring process Methods 0.000 claims description 6
- 239000002699 waste material Substances 0.000 abstract 1
- 238000001914 filtration Methods 0.000 description 4
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/275—Synchronous replication
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种数据库同步方法及装置。该方法包括：监听源数据库的日志，捕获所述源数据库的数据变化信息；确定待同步的各目标数据库的类型；根据各目标数据库的类型，获取与各目标数据库的类型对应的同步规则；根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与所述源数据库进行数据同步。本发明中预先为不同类型的目标数据库建立不同的同步规则，在获取到源数据库的数据变化信息后，基于各目标数据库对应的同步规则和数据变化信息，将各目标数据库与源数据库进行数据同步，克服了现有技术中需要多次采集源数据库的数据变化信息问题，降低了资源浪费，并且提高了数据库之间的同步效率。
Description
技术领域
本发明涉及数据处理技术，尤其涉及一种数据库同步方法及装置。
背景技术
对于同一信息处理系统，基于源数据库以及不同使用需求，为该信息处理系统建立多个数据库。当源数据库中的数据发生变化时，要保证基于源数据库建立的其他数据库与源数据库之间的数据同步，就需要根据源数据库的数据变化对其他数据库进行数据同步。
但是由于各数据的使用需求不同，相应的各数据库之间的同步需求也不相同。目前针对各数据库相应地从源数据中获取与各数据库相应的数据变化信息，然后再基于各自的数据变化信息将数据变化同步到各数据库中。现有的数据库同步方法需要多次对源数据库的数据变化信息进行采集，不仅造成资源浪费，而且使得数据库之间的同步效率较低。
发明内容
本发明提供一种数据库同步方法及装置，以解决需要多次采集源数据库的数据变化信息，不仅造成资源浪费，而且使得数据库之间的同步效率较低的问题。
为了实现上述目的，本发明提供了一种数据库同步方法，包括：
监听源数据库的日志，捕获所述源数据库的数据变化信息；
确定待同步的各目标数据库的类型；
获取与各目标数据库的类型对应的同步规则；
根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与所述源数据库进行数据同步。
为了实现上述目的，本发明提供了一种数据库同步装置，包括：
捕获模块，用于监听源数据库的日志，捕获所述源数据库的数据变化信息；
确定模块，用于确定待同步的各目标数据库的类型；
获取模块，用于根据各目标数据库的类型，获取与各目标数据库的类型对应的同步规则；
同步模块，用于根据所述数据变化信息和各目标数据库的所述同步规则，将所述目标数据库与所述源数据库进行数据同步。
本发明提供的一种数据库同步方法及装置，监听源数据库的日志，捕获所述源数据库的数据变化信息，确定待同步的各目标数据库的类型，根据各目标数据库的类型，获取与各目标数据库的类型对应的同步规则，根据所述数据变化信息和各目标数据库对应的所述同步规则，将所述目标数据库与所述源数据库进行数据同步。本发明中为不同类型的目标数据库建立不同的同步规则，在获取到源数据库的数据变化信息后，基于各目标数据库对应的同步规则和数据变化信息，将目标数据库与源数据库进行数据同步，克服了现有技术中需要多次采集源数据库的数据变化信息问题，降低了资源浪费，并且提高了数据库之间的同步效率。
附图说明
图1为本发明实施例提供的一种数据库同步方法的流程示意图；
图2为本发明实施例提供的一种数据库同步装置的结构示意图；
图3为本发明实施例提供的一种数据库同步系统的结构示意图。
具体实施方式
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
图1为本发明实施例提供的一种数据库同步方法的流程示意图。本实施例中，该方法的执行主体可以为数据库同步装置。如图1所示，该方法包括以下步骤：
101、监听源数据库的日志，捕获所述源数据库的数据变化信息。
具体地，数据库同步装置对源数据库的日志进行监听，在源数据库的日志发生变化时，数据库同步装置捕获到该源数据库的数据变化信息。例如，源数据库可以为结构化查询语句（Structured Query Language，简称SQL）数据库，相应的，数据变化信息可以为SQL数据变化语句。
102、确定待同步的各目标数据库的类型。
实际应用中，数据库同步装置可与多个数据库进行连接，在获取到数据变化信息后，数据库同步装置可以确定待同步的各目标数据库的类型。本实施例中，目标数据库的类型包括：源数据库的完全备份数据库、源数据库的部分备份数据库、用于存储数据变化信息的文件数据库、与源数据库异构的数据库，本实施例中，源数据库为关系型数据库，而与源数据库异构的数据库为内存型数据库。为了便于表达和区分不同类型的数据库，本实施例中将源数据库的完全备份数据库称为第一数据库、源数据库的部分备份数据库称为第二数据库、内存型数据库称为第三数据库以及将用于存储数据变化信息的文件数据库称为第四数据库。
103、获取与各目标数据库的类型对应的同步规则。
本实施例中，数据库同步装置中预先存储各类型目标数据库对应的同步规则。在确定出目标数据库的类型后，数据库同步装置根据各目标数据库的类型，获取与各类型目标数据库相应的同步规则。具体地，在数据库同步装置中预先存储目标数据库的类型标识与同步规则标识之间的映射关系，当确定出目标数据库的类型后，根据待同步的各目标数据库的类型标识查询上述映射关系，可以获取到与各目标数据库对应的同步规则标识，根据各目标数据库对应的同步规则标识，得到与各目标数据库对应的同步规则。
104、根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与所述源数据库进行数据同步。
具体地，如果待同步的目标数据库的类型为第一数据库，即第一数据库为源数据库的完全备份的数据库时，则获取到的与第一数据库对应的同步规则为：根据获取到的数据变化信息，将源数据库中所有数据变化同步到该第一数据库中。
如果待同步的目标数据库的类型为第二数据库，即第二数据库为源数据库的部分备份，则获取到的与第二数据库对应的同步规则为：从数据变化信息中获取与第二数据库对应的第一数据变化信息，将第一数据变化信息对应的数据变化同步到第二数据库中。
如果待同步的目标数据库的类型为第三数据库，其中，源数据库为关系型数据库，该第三数据库为内存型数据库，则获取到的与第三数据库对应的同步规则中包括预设的源数据库中数据表与第三数据库中数据表之间的映射关系，获取与源数据库中数据表相关的第二数据变化信息，根据所述第二数据变化信息以及该映射关系，将第二数据变化信息对应的数据变化同步到第三数据库中。
如果待同步的目标数据库的类型为第四数据库，即第四数据库为用于存储数据变化信息的文件型数据库，则获取到的与第四数据库对应的同步规则为：将数据变化信息存储到该第四数据库中。
相应地，当目标数据库为第一数据库时，数据库同步装置根据该数据变化信息和第一数据库对应的同步规则，将源数据库中所有数据变化同步到该第一数据库中。
相应地，当目标数据库为第二数据库时，数据库同步装置从数据变化信息中获取该第二数据库对应的第一数据变化信息，然后将第一数据变化信息对应的数据变化同步到第二数据库中。例如，第二数据库为源数据库中某一个子集的备份数据库，则数据库同步装置从数据变化信息中获取该子集的数据变化信息即第一数据变化信息，然后根据该第一数据变化信息将该子集的数据变化同步到第二数据库中，这样就能够保证第二数据库与源数据库中该子集的同步。
相应地，当目标数据库为第三数据库时，数据库同步装置查询第三数据库对应的同步规则中源数据库中数据表与第三数据库中数据表之间的映射关系，基于映射关系中源数据库中数据表，获取与源数据库中数据表相关的第二数据变化信息，根据该第二数据变化信息和上述映射关系，将第二数据变化信息对应的数据变化同步到第三数据库中的数据表中。本实施例实现了关系型数据库与内存型数据库的同步。
相应地，当目标数据库为第四数据库时，数据库同步装置将数据变化信息同步到第四数据库中。
进一步地，数据库同步装置还可以在源数据库与目标数据库进行同步过程中，监测是否发生数据同步中断，例如，目标数据库因为硬件或网络故障导致数据同步无法进行，就会造成数据同步的中断。在监测到所述数据同步中断时，记录所述数据同步中断发生的中断点，以保证在所述数据同步中断恢复后，将所述中断点后的数据变化同步到所述目标数据库中。
进一步地，数据库同步装置在获取到数据变化信息后，还可以对数据变化信息进行预处理，例如，当数据变化信息为SQL数据变化语句时，对该SQL数据变化语句进行解析，得到数据变化信息。
数据库同步装置还可以获取到每个数据变化信息的关键字，然后根据关键字对数据变化信息进行过滤，以降低待同步的数据量。本实施例中，在数据库同步装置中设置一个用于对数据变化信息进行过滤的列表，该列表中存储有用于过滤的关键字，当数据库同步装置监听到的数据变化信息中包括的关键字为该列表中关键字时，将该数据变化信息过滤掉，这样待同步的数据变化信息就可以得到精简，从而减少了待同步的数据的数据量，降低资源浪费，提高数据库之间的同步效率。其中上述列表可以由管理人员根据实际需求进行灵活设置。
而且数据库同步装置可以采用消息队列机制，将数据变化信息发送到消息对列中，数据库同步装置基于消息队列对所有数据变化信息，实现数据库之间的数据同步。可选地，数据库同步装置还可以对数据变化信息进行缓存，以避免数据变化信息的丢失。
本实施例提供的数据库同步方法可以应用在铁路客票系统中，目前铁路客票系统包括基于传统关系型数据库的铁路客票系统和基于内存型数据库的互联网铁路客票系统。将执行本实施例提供的数据库同步方法硬件或者软件，设置在传统铁路客票系统中的数据库与互联网铁路客票系统中的数据库之间，将其中传统铁路客票系统中的数据库作为源数据库，数据库同步装置监听源数据库的数据变化信息，然后确定互联网铁路客票系统中数据库的类型，进而获取相应的同步规则，基于同步规则和数据变化信息，将数据变化同步到该互联网铁路客票系统的数据库中，这样就实现传统铁路客票系统与互联网客票系统之间的数据同步。
本实施例提供的数据库同步方法，监听源数据库的日志，捕获源数据库的数据变化信息，确定待同步的各目标数据库的类型，根据各目标数据库的类型，获取与各目标数据库的类型对应的同步规则，根据数据变化信息和各目标数据库对应的同步规则，将各目标数据库与源数据库进行数据同步。本实施例中为不同类型的目标数据库建立不同的同步规则，在获取到源数据库的数据变化信息后，基于各目标数据库对应的同步规则，将目标数据库与源数据库进行数据同步，克服了现有技术中需要多次采集源数据库的数据变化信息问题，降低了资源浪费，并且提高了数据库之间的同步效率。
图2为本发明实施例提供的一种数据库同步装置的结构示意图。如图2所示，该数据库同步装置包括：捕获模块21、确定模块22、获取模块23和同步模块24。
具体地，捕获模块21对源数据库的日志进行监听，在源数据库的日志发生变化时，可以捕获到该源数据库的数据变化信息。例如，源数据库可以为SQL数据库，相应的，数据变化信息可以为SQL数据变化语句。
实际应用中，数据库同步装置可以与多个数据库进行连接。捕获模块21与确定模块22连接，在获取到数据变化信息后，确定模块22可以确定待同步的各目标数据库的类型。本实施例中，目标数据库的类型包括：源数据库的完全备份数据库、源数据库的部分备份数据库、用于存储数据变化信息的文件数据库、与源数据库异构的数据库，本实施例中，源数据库为关系型数据库，而与源数据库异构的数据库为内存型数据库。为了便于表达和区分不同类型的数据库，本实施例中将源数据库的完全备份数据库称为第一数据库、源数据库的部分备份数据库称为第二数据库、内存型数据库称为第三数据库以及将用于存储数据变化信息的文件数据库称为第四数据库。
本实施例中，数据库同步装置中预先存储各类型目标数据库对应的同步规则。确定模块22与获取模块23连接，在确定模块22确定出目标数据库的类型后，获取模块23根据各目标数据库的类型，获取与各类型目标数据库相应的同步规则。具体地，在数据库同步装置中预先存储目标数据库的类型标识与同步规则标识之间的映射关系，当确定出目标数据库的类型后，获取模块23根据待同步的各目标数据库的类型标识查询上述映射关系，可以获取到与各目标数据库对应的同步规则标识，根据各目标数据库对应的同步规则标识，得到与各目标数据库对应的同步规则。
具体地，如果待同步的目标数据库的类型为第一数据库，即第一数据库为源数据库的完全备份的数据库时，则获取到的与第一数据库对应的同步规则为：根据获取到的数据变化信息，将源数据库中所有数据变化同步到该第一数据库中。
如果待同步的目标数据库的类型为第二数据库，即第二数据库为源数据库的部分备份，则获取到的与第二数据库对应的同步规则为：从数据变化信息中获取与第二数据库对应的第一数据变化信息，将第一数据变化信息对应的数据变化同步到第二数据库中。
如果待同步的目标数据库的类型为第三数据库，其中，源数据库为关系型数据库，该第三数据库为内存型数据库，则获取到的与第三数据库对应的同步规则中包括预设的源数据库中数据表与第三数据库中数据表之间的映射关系，获取与源数据库中数据表相关的第二数据变化信息，根据所述第二数据变化信息以及该映射关系，将第二数据变化信息对应的数据变化同步到第三数据库中。
如果待同步的目标数据库的类型为第四数据库，即第四数据库为用于存储数据变化信息的文件型数据库，则获取到的与第四数据库对应的同步规则为：将数据变化信息存储到该第四数据库中。
本实施例中，获取模块23与同步模块24连接。在获取模块23获取到各目标数据库对应的同步规则后，同步模块24根据数据变化信息与各目标数据库的同步规则，将各目标数据库与源数据库进行数据同步。
相应地，当目标数据库为第一数据库时，同步模块24根据获取到的数据变化信息和第一数据库对应的同步规则，将源数据库中所有数据变化同步到该第一数据库中。
相应地，当目标数据库为第二数据库时，同步模块24从数据变化信息中获取与该第二数据库对应的第一数据变化信息，然后将第一数据变化信息对应的数据变化同步到第二数据库中。例如，第二数据库为源数据库中某一个子集的备份数据库，则数据库同步装置从数据变化信息中获取该子集的数据变化信息即第一数据变化信息，然后根据该第一数据变化信息将该子集的数据变化同步到第二数据库中，这样就能够保证第二数据库与源数据库中该子集的同步。
相应地，当目标数据库为第三数据库时，同步模块24查询第三数据库对应的同步规则中源数据库中数据表与第三数据库中数据表之间的映射关系，基于映射关系中源数据库中数据表，获取与源数据库中数据表相关的第二数据变化信息，根据该第二数据变化信息和上述映射关系，将第二数据变化信息对应的数据变化同步到第三数据库中的数据表中。本实施例实现了关系型数据库与内存型数据库的同步。
相应地，当目标数据库为第四数据库时，同步模块24将数据变化信息同步到第四数据库中。
进一步地，数据库同步装置还可以在源数据库与目标数据库进行同步过程中，通过同步模块24监测是否发生数据同步中断，例如，目标数据库因为硬件或网络故障导致数据同步无法进行，就会造成数据同步的中断。在监测到所述数据同步中断时，并记录所述数据同步中断发生的中断点，以保证在所述数据同步中断恢复后，将所述中断点后的数据变化同步到所述目标数据库中。
进一步地，在获取到数据变化信息后，捕获模块21还可以对数据变化信息进行预处理，例如，当数据变化信息为SQL数据变化语句时，对该SQL数据变化语句进行解析，得到数据变化信息。
捕获模块21还可以获取到每个数据变化信息的关键字，然后根据关键字对数据变化信息进行过滤，以降低待同步的数据量。本实施例中，在数据库同步装置中设置一个用于对数据变化信息进行过滤的列表，该列表中存储有用于过滤的关键字，当捕获模块21监听到的数据变化信息中包括的关键字为该列表中关键字时，将该数据变化信息过滤掉，这样待同步的数据变化信息就可以得到精简，从而减少了待同步的数据数据量，降低资源浪费，提高数据库之间的同步效率。其中上述列表可以由管理人员根据实际需求进行灵活设置。
而且同步装置24可以采用消息队列机制，将数据变化信息发送到消息对列中，然后基于消息队列对所有数据变化信息，实现数据库之间的数据同步。可选地，数据库同步装置还可以对数据变化信息进行缓存，以避免数据变化信息的丢失。
目前铁路客票系统包括基于传统关系型数据库的铁路客票系统和基于内存数据库的铁路互联网客票系统。本实施例提供的数据库同步装置，可以应用在铁路客票系统中。将执行数据同步装置设置在传统铁路客票系统与互联网铁路客票系统之间，将其中传统铁路客票系统中的数据库作为源数据库，数据库同步装置监听源数据库的数据变化信息，然后确定互联网铁路客票系统中数据库的类型，获取相应的同步规则，基于同步规则和数据变化信息，将数据变化同步到该互联网铁路客票系统中的数据库中，这样就实现传统铁路客票系统与互联网客票系统之间的数据同步。
本实施例提供的数据库同步装置，监听源数据库的日志，捕获源数据库的数据变化信息，确定待同步的各目标数据库的类型，根据各目标数据库的类型，获取与各目标数据库的类型对应的同步规则，根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与所述源数据库进行数据同步。本发明中预先为不同类型的目标数据库建立不同的同步规则，在获取到源数据库的数据变化信息后，基于各目标数据库对应的同步规则和数据变化信息，将各目标数据库与源数据库进行数据同步，克服了现有技术中需要多次采集源数据库的数据变化信息问题，降低了资源浪费，并且提高了数据库之间的同步效率。
图3为本发明实施例提供的一种数据库同步系统的结构示意图。如图3所示，该数据库同步系统包括：数据库同步装置1、源数据库2和至少一个目标数据库3。
其中，数据库同步装置1为上述实施例提供的数据库同步装置，设置在源数据库2与目标数据库3之间，用于实现源数据库2与目标数据库3的数据同步。关于数据库同步装置1的相关介绍可参见上述实施例中相关内容的记载，此处不再赘述。
本实施例中预先为不同类型的目标数据库建立不同的同步规则，在获取到源数据库的数据变化信息后，基于各目标数据库对应的同步规则，对目标数据库进行数据同步，克服了现有技术中需要多次采集源数据库的数据变化信息问题，降低了资源浪费，并且提高了数据库之间的同步效率。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (10)
1.一种数据库同步方法，其特征在于，包括：
监听源数据库的日志，捕获所述源数据库的数据变化信息；
确定待同步的各目标数据库的类型；
获取与各目标数据库的类型对应的同步规则；
根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与所述源数据库进行数据同步。
2.根据权利要求1所述的数据库同步方法，其特征在于，如果所述目标数据库的类型为第一数据库；其中，所述第一数据库为所述源数据库的完全备份；则与所述第一数据库对应的所述同步规则为：根据所述数据变化信息，将所述源数据库中所有数据变化同步到所述第一数据库中。
3.根据权利要求1所述的数据库同步方法，其特征在于，如果所述目标数据库的类型为第二数据库，其中所述第二数据库为所述源数据库的部分备份；则与所述第二数据库对应的所述同步规则为：从所述数据变化信息中获取与所述第二数据库对应的第一数据变化信息，将所述第一数据变化信息对应的数据变化同步到所述第二数据库中。
4.根据权利要求1所述的数据库同步方法，其特征在于，如果所述目标数据库的类型为第三数据库，所述源数据库为关系型数据库，所述第三数据库为内存型数据库；则与所述第三数据库对应的所述同步规则包括预设的所述源数据库中数据表与所述第三数据库中数据表之间的映射关系，获取与所述源数据库中数据表相关的第二数据变化信息，根据所述第二数据变化信息以及所述映射关系，将所述第二数据变化信息对应的数据变化同步到所述第三数据库中。
5.根据权利要求1-4任一项所述的数据库同步方法，其特征在于，如果所述目标数据库的类型为第四数据库，其中所述第四数据库用于存储所述数据变化信息的文件型数据库；则与所述第四数据库对应的所述同步规则为：将所述数据变化信息存储到所述第四数据库中。
6.一种数据库同步装置，其特征在于，包括：
捕获模块，用于监听源数据库的日志，捕获所述源数据库的数据变化信息；
确定模块，用于确定待同步的各目标数据库的类型；
获取模块，用于获取与各目标数据库的类型对应的同步规则；
同步模块，用于根据所述数据变化信息和各目标数据库对应的所述同步规则，将各目标数据库与源数据库进行数据同步。
7.根据权利要求6所述的数据库同步装置，其特征在于，如果所述目标数据库的类型为第一数据库；其中，所述第一数据库为所述源数据库的完全备份；则与所述第一数据库对应的所述同步规则为：根据所述数据变化信息，将所述源数据库中所有数据变化同步到所述第一数据库中。
8.根据权利要求6所述的数据库同步装置，其特征在于，如果所述目标数据库的类型为第二数据库，其中所述第二数据库为所述源数据库的部分备份；则与所述第二数据库对应的所述同步规则为从所述数据变化信息中获取与所述第二数据库对应的第一数据变化信息，将所述第一数据变化信息对应的数据变化同步到所述第二数据库中。
9.根据权利要求6所述的数据库同步装置，其特征在于，如果所述目标数据库的类型为第三数据库，所述源数据库为关系型数据库，所述第三数据库为内存型数据库；则与所述第三数据库对应的所述同步规则包括预设的所述源数据库中数据表与所述第三数据库中数据表之间的映射关系，获取与所述源数据库中数据表相关的第二数据变化信息，根据所述第二数据变化信息以及所述映射关系，将所述第二数据变化信息对应的数据变化同步到所述第三数据库中。
10.根据权利要求6-9任一项所述的数据库同步装置，其特征在于，如果所述目标数据库的类型为第四数据库，其中所述第四数据库用于存储所述数据变化信息的文件型数据库；则与所述第四数据库对应的所述同步规则为：将所述数据变化信息存储到所述第四数据库中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310641728.8A CN103699580B (zh) | 2013-12-03 | 2013-12-03 | 数据库同步方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310641728.8A CN103699580B (zh) | 2013-12-03 | 2013-12-03 | 数据库同步方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103699580A true CN103699580A (zh) | 2014-04-02 |
| CN103699580B CN103699580B (zh) | 2016-08-24 |
Family
ID=50361108
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310641728.8A Active CN103699580B (zh) | 2013-12-03 | 2013-12-03 | 数据库同步方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103699580B (zh) |
Cited By (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105554017A (zh) * | 2015-12-31 | 2016-05-04 | 北京致远协创软件有限公司 | 监听方法及装置 |
| CN105574109A (zh) * | 2015-12-10 | 2016-05-11 | 青岛海信传媒网络技术有限公司 | 一种数据库同步方法、同步设备及系统 |
| CN105787077A (zh) * | 2016-03-02 | 2016-07-20 | 百度在线网络技术（北京）有限公司 | 数据同步方法和装置 |
| CN105868361A (zh) * | 2016-03-29 | 2016-08-17 | 中国银行股份有限公司 | 一种数据更新方法和装置 |
| CN106095944A (zh) * | 2016-06-15 | 2016-11-09 | 深圳海带宝网络科技股份有限公司 | 一种跨境电商全球数据同步系统 |
| CN106503216A (zh) * | 2016-11-03 | 2017-03-15 | 用友网络科技股份有限公司 | 支持分层的元数据同步方法及元数据同步装置 |
| CN106557592A (zh) * | 2016-12-02 | 2017-04-05 | 中铁程科技有限责任公司 | 数据同步方法、装置及服务器集群 |
| CN106598977A (zh) * | 2015-10-15 | 2017-04-26 | 北京国双科技有限公司 | 数据迁移方法和装置 |
| CN106649378A (zh) * | 2015-11-02 | 2017-05-10 | 北大方正集团有限公司 | 一种数据同步方法及装置 |
| CN107145562A (zh) * | 2017-05-02 | 2017-09-08 | 北京奇艺世纪科技有限公司 | 一种数据同步方法、装置及系统 |
| CN107291790A (zh) * | 2016-03-31 | 2017-10-24 | Ls 产电株式会社 | 管理双工ems服务器之间的db的方法 |
| CN107391635A (zh) * | 2017-06-30 | 2017-11-24 | 北京奇虎科技有限公司 | 数据同步系统及方法 |
| CN107729175A (zh) * | 2016-11-15 | 2018-02-23 | 西安艾润物联网技术服务有限责任公司 | 线下数据库在云平台上的备份方法和装置 |
| CN108228814A (zh) * | 2017-12-29 | 2018-06-29 | 泰康保险集团股份有限公司 | 数据同步方法及装置 |
| WO2018120681A1 (zh) * | 2016-12-30 | 2018-07-05 | 平安科技（深圳）有限公司 | 数据同步方法、装置、系统、数据处理服务器和存储介质 |
| CN108664520A (zh) * | 2017-04-01 | 2018-10-16 | 北京京东尚科信息技术有限公司 | 维护数据一致性的方法、装置、电子设备和可读存储介质 |
| CN108763387A (zh) * | 2018-05-20 | 2018-11-06 | 湖北九州云仓科技发展有限公司 | 异构平台的大数据融合方法、电子设备、存储介质及系统 |
| CN108984743A (zh) * | 2018-07-16 | 2018-12-11 | 广州友米科技有限公司 | 基于境内外数据中心实现跨境数据同步的方法 |
| CN109033268A (zh) * | 2018-07-10 | 2018-12-18 | 安心财产保险有限责任公司 | 数据同步方法、装置、设备及存储介质 |
| WO2019000629A1 (zh) * | 2017-06-25 | 2019-01-03 | 平安科技（深圳）有限公司 | 多数据源数据同步方法、系统、应用服务器及计算机可读存储介质 |
| CN109271442A (zh) * | 2018-07-27 | 2019-01-25 | 东软集团股份有限公司 | 数据库同步恢复方法、装置、计算机可读存储介质和电子设备 |
| CN109857809A (zh) * | 2019-01-31 | 2019-06-07 | 浙江小泰科技有限公司 | 一种原始数据库数据同步到目标数据库的同步方法及系统 |
| CN109976968A (zh) * | 2017-12-27 | 2019-07-05 | 航天信息股份有限公司 | 一种获取数据库变化表数据的方法、装置、介质及设备 |
| CN110019873A (zh) * | 2017-12-25 | 2019-07-16 | 深圳市优必选科技有限公司 | 人脸数据处理方法、装置及设备 |
| CN110263052A (zh) * | 2019-06-25 | 2019-09-20 | 苏宁消费金融有限公司 | 一种基于大数据Hadoop平台ODS自动化同步技术创新方法 |
| CN112000646A (zh) * | 2020-08-25 | 2020-11-27 | 北京浪潮数据技术有限公司 | 一种数据库初始化方法、装置及电子设备和存储介质 |
| CN112883040A (zh) * | 2021-02-04 | 2021-06-01 | 中国工商银行股份有限公司 | 一种数据同步方法、装置及设备 |
| CN113535478A (zh) * | 2021-07-15 | 2021-10-22 | 中国电信股份有限公司 | 数据备份方法及装置、存储介质及电子设备 |
| CN113722394A (zh) * | 2021-08-17 | 2021-11-30 | 北京百悟科技有限公司 | 数据同步方法、设备及存储介质 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108009252A (zh) * | 2017-12-04 | 2018-05-08 | 传神语联网网络科技股份有限公司 | 数据同步的方法及装置 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102129478B (zh) * | 2011-04-26 | 2012-10-03 | 广州从兴电子开发有限公司 | 数据库同步方法及系统 |
| CN102184251B (zh) * | 2011-05-25 | 2013-03-27 | 盛趣信息技术（上海）有限公司 | 一种数据表同步系统及方法 |
| CN102542007B (zh) * | 2011-12-13 | 2014-06-25 | 中国电子科技集团公司第十五研究所 | 关系型数据库之间的同步方法及系统 |
| CN102929946A (zh) * | 2012-09-27 | 2013-02-13 | 山东中创软件工程股份有限公司 | 一种数据同步方法、装置及系统 |
-
2013
- 2013-12-03 CN CN201310641728.8A patent/CN103699580B/zh active Active
Cited By (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106598977A (zh) * | 2015-10-15 | 2017-04-26 | 北京国双科技有限公司 | 数据迁移方法和装置 |
| CN106649378B (zh) * | 2015-11-02 | 2020-07-14 | 北大方正集团有限公司 | 一种数据同步方法及装置 |
| CN106649378A (zh) * | 2015-11-02 | 2017-05-10 | 北大方正集团有限公司 | 一种数据同步方法及装置 |
| CN105574109A (zh) * | 2015-12-10 | 2016-05-11 | 青岛海信传媒网络技术有限公司 | 一种数据库同步方法、同步设备及系统 |
| CN105554017A (zh) * | 2015-12-31 | 2016-05-04 | 北京致远协创软件有限公司 | 监听方法及装置 |
| CN105554017B (zh) * | 2015-12-31 | 2019-06-04 | 北京致远互联软件股份有限公司 | 监听方法及装置 |
| CN105787077A (zh) * | 2016-03-02 | 2016-07-20 | 百度在线网络技术（北京）有限公司 | 数据同步方法和装置 |
| CN105787077B (zh) * | 2016-03-02 | 2020-05-15 | 百度在线网络技术（北京）有限公司 | 数据同步方法和装置 |
| CN105868361A (zh) * | 2016-03-29 | 2016-08-17 | 中国银行股份有限公司 | 一种数据更新方法和装置 |
| CN107291790B (zh) * | 2016-03-31 | 2022-04-15 | Ls 产电株式会社 | 管理双工ems服务器之间的db的方法 |
| CN107291790A (zh) * | 2016-03-31 | 2017-10-24 | Ls 产电株式会社 | 管理双工ems服务器之间的db的方法 |
| CN106095944A (zh) * | 2016-06-15 | 2016-11-09 | 深圳海带宝网络科技股份有限公司 | 一种跨境电商全球数据同步系统 |
| CN106503216A (zh) * | 2016-11-03 | 2017-03-15 | 用友网络科技股份有限公司 | 支持分层的元数据同步方法及元数据同步装置 |
| CN107729175A (zh) * | 2016-11-15 | 2018-02-23 | 西安艾润物联网技术服务有限责任公司 | 线下数据库在云平台上的备份方法和装置 |
| CN106557592A (zh) * | 2016-12-02 | 2017-04-05 | 中铁程科技有限责任公司 | 数据同步方法、装置及服务器集群 |
| WO2018120681A1 (zh) * | 2016-12-30 | 2018-07-05 | 平安科技（深圳）有限公司 | 数据同步方法、装置、系统、数据处理服务器和存储介质 |
| CN108664520B (zh) * | 2017-04-01 | 2021-02-26 | 北京京东尚科信息技术有限公司 | 维护数据一致性的方法、装置、电子设备和可读存储介质 |
| CN108664520A (zh) * | 2017-04-01 | 2018-10-16 | 北京京东尚科信息技术有限公司 | 维护数据一致性的方法、装置、电子设备和可读存储介质 |
| CN107145562B (zh) * | 2017-05-02 | 2020-07-28 | 北京奇艺世纪科技有限公司 | 一种数据同步方法、装置及系统 |
| CN107145562A (zh) * | 2017-05-02 | 2017-09-08 | 北京奇艺世纪科技有限公司 | 一种数据同步方法、装置及系统 |
| WO2019000629A1 (zh) * | 2017-06-25 | 2019-01-03 | 平安科技（深圳）有限公司 | 多数据源数据同步方法、系统、应用服务器及计算机可读存储介质 |
| CN107391635A (zh) * | 2017-06-30 | 2017-11-24 | 北京奇虎科技有限公司 | 数据同步系统及方法 |
| CN110019873A (zh) * | 2017-12-25 | 2019-07-16 | 深圳市优必选科技有限公司 | 人脸数据处理方法、装置及设备 |
| CN109976968A (zh) * | 2017-12-27 | 2019-07-05 | 航天信息股份有限公司 | 一种获取数据库变化表数据的方法、装置、介质及设备 |
| CN108228814A (zh) * | 2017-12-29 | 2018-06-29 | 泰康保险集团股份有限公司 | 数据同步方法及装置 |
| CN108228814B (zh) * | 2017-12-29 | 2022-02-15 | 泰康保险集团股份有限公司 | 数据同步方法及装置 |
| CN108763387A (zh) * | 2018-05-20 | 2018-11-06 | 湖北九州云仓科技发展有限公司 | 异构平台的大数据融合方法、电子设备、存储介质及系统 |
| CN109033268A (zh) * | 2018-07-10 | 2018-12-18 | 安心财产保险有限责任公司 | 数据同步方法、装置、设备及存储介质 |
| CN108984743B (zh) * | 2018-07-16 | 2021-04-13 | 广州天高软件科技有限公司 | 基于境内外数据中心实现跨境数据同步的方法 |
| CN108984743A (zh) * | 2018-07-16 | 2018-12-11 | 广州友米科技有限公司 | 基于境内外数据中心实现跨境数据同步的方法 |
| CN109271442A (zh) * | 2018-07-27 | 2019-01-25 | 东软集团股份有限公司 | 数据库同步恢复方法、装置、计算机可读存储介质和电子设备 |
| CN109857809A (zh) * | 2019-01-31 | 2019-06-07 | 浙江小泰科技有限公司 | 一种原始数据库数据同步到目标数据库的同步方法及系统 |
| CN110263052B (zh) * | 2019-06-25 | 2021-07-20 | 苏宁消费金融有限公司 | 一种基于大数据Hadoop平台ODS自动化同步技术创新方法 |
| CN110263052A (zh) * | 2019-06-25 | 2019-09-20 | 苏宁消费金融有限公司 | 一种基于大数据Hadoop平台ODS自动化同步技术创新方法 |
| CN112000646A (zh) * | 2020-08-25 | 2020-11-27 | 北京浪潮数据技术有限公司 | 一种数据库初始化方法、装置及电子设备和存储介质 |
| CN112000646B (zh) * | 2020-08-25 | 2022-08-02 | 北京浪潮数据技术有限公司 | 一种数据库初始化方法、装置及电子设备和存储介质 |
| CN112883040A (zh) * | 2021-02-04 | 2021-06-01 | 中国工商银行股份有限公司 | 一种数据同步方法、装置及设备 |
| CN113535478A (zh) * | 2021-07-15 | 2021-10-22 | 中国电信股份有限公司 | 数据备份方法及装置、存储介质及电子设备 |
| CN113535478B (zh) * | 2021-07-15 | 2024-01-02 | 天翼云科技有限公司 | 数据备份方法及装置、存储介质及电子设备 |
| CN113722394A (zh) * | 2021-08-17 | 2021-11-30 | 北京百悟科技有限公司 | 数据同步方法、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103699580B (zh) | 2016-08-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103699580A (zh) | 数据库同步方法及装置 | |
| CN110347746B (zh) | 一种异构数据库同步数据一致性校验方法及装置 | |
| CN104516989B (zh) | 增量数据推送系统和方法 | |
| CN110019267A (zh) | 一种元数据更新方法、装置、系统、电子设备及存储介质 | |
| CN104219288B (zh) | 基于多线程的分布式数据同步方法及其系统 | |
| CN105005618A (zh) | 一种异构数据库之间的数据同步方法及系统 | |
| CN104750855B (zh) | 一种大数据存储优化方法和装置 | |
| CN103699638A (zh) | 一种基于配置参数实现跨数据库类型同步数据的方法 | |
| CN106126601A (zh) | 一种社保大数据分布式预处理方法及系统 | |
| CN110647531A (zh) | 数据同步方法、装置、设备及计算机可读存储介质 | |
| CN110795499A (zh) | 基于大数据的集群数据同步方法、装置、设备及存储介质 | |
| CN103631623A (zh) | 一种集群系统中部署应用软件的方法及装置 | |
| CN109657007A (zh) | 基于异步提交的数据库数据同步并行执行方法及设备 | |
| CN103716384A (zh) | 跨数据中心实现云存储数据同步的方法和装置 | |
| US8756312B2 (en) | Multi-tier message correlation | |
| CN104834700A (zh) | 一种基于轨迹变更的移动数据增量捕获方法 | |
| CN105512267A (zh) | 一种配置文件的调整方法和装置 | |
| CN111737355A (zh) | 基于MongoDB元数据管理的异构数据源同步的方法及系统 | |
| CN103377292B (zh) | 数据库结果集缓存方法及设备 | |
| CN104991849A (zh) | 一种通过zabbix监控Linux进程占用系统资源的方法 | |
| US20140108367A1 (en) | Client apparatus and database server for resumable transaction and method thereof | |
| CN105447168A (zh) | Mp4格式的碎片文件恢复与重组的方法 | |
| CN111177254A (zh) | 一种异构关系型数据库之间数据同步的方法和装置 | |
| CN105159820A (zh) | 一种系统日志数据传输方法及装置 | |
| CN107291938B (zh) | 订单查询系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| ASS | Succession or assignment of patent right |
Owner name: CHINA RAILWAY TRIP SCIENCE AND TECHNOLOGY CO., LTD Effective date: 20150908 Owner name: CHINA RAILWAY CORPORATION Free format text: FORMER OWNER: CHINA RAILWAY TRIP SCIENCE AND TECHNOLOGY CO., LTD. Effective date: 20150908 |
|
| C41 | Transfer of patent application or patent right or utility model | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20150908 Address after: 10 Fuxing Road, Beijing, No. 100844 Applicant after: CHINA RAILWAY CORPORATION Applicant after: CHINA RAILWAY TRIP SCIENCE AND TECHNOLOGY CO., LTD. Address before: 100081 Beijing city Haidian District a two or three storey building of Daliushu Road No. 2 Applicant before: CHINA RAILWAY TRIP SCIENCE AND TECHNOLOGY CO., LTD. |
|
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |