CN106326469A - 数据的同步方法和装置 - Google Patents
数据的同步方法和装置 Download PDFInfo
- Publication number
- CN106326469A CN106326469A CN201610783784.9A CN201610783784A CN106326469A CN 106326469 A CN106326469 A CN 106326469A CN 201610783784 A CN201610783784 A CN 201610783784A CN 106326469 A CN106326469 A CN 106326469A
- Authority
- CN
- China
- Prior art keywords
- data
- incremental data
- application programming
- message system
- skytools
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/275—Synchronous replication
Abstract
本发明提供了一种数据的同步方法和装置。其中，该方法包括：在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；将增量数据同步至配置信息所指示的一个或多个系统，其中，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。本发明解决了相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题。
Description
技术领域
本发明涉及互联网领域，具体而言，涉及一种数据的同步方法和装置。
背景技术
Skytools是一个最初由Skype开发的软件包，是一个工具与服务的集合。这个工具用于解决多个PostgreSQL数据库之间的复制，同步传输等问题。
在现有技术中，Skytools可以满足同构系统(即PostgreSQL数据库)之间的实时增量数据同步。但是，随着计算机技术的发展，异构系统(比如消息系统Kafka、搜索引擎系统Elasticsearch、nosql数据库系统Mongodb、缓存系统Redis、大数据计算引擎系统Impala等等)的出现，PostgreSQL数据库与这些异构系统之间的实时增量数据同步的需求也越来越强烈。然后Skytools的现有功能并不能满足这些需求。
针对相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据的同步方法和装置，以至少解决相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题。
根据本发明实施例的一个方面，提供了一种数据的同步方法，该方法包括：在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；将增量数据同步至配置信息所指示的一个或多个系统，其中，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
进一步地，将增量数据同步至配置信息所指示的一个或多个系统包括：将增量数据发送至消息系统，由消息系统将增量数据同步至一个或多个系统，其中，消息系统为Kafka消息系统。
进一步地，将增量数据发送至消息系统包括：利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统，其中，第一应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
进一步地，方法还包括在利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统之后，接收第一应用程序编程接口的回应信息，其中，在接收到回应信息的情况下，确认将增量数据发送至消息系统的操作执行成功。
进一步地，一个或多个系统包括以下至少之一：搜索引擎系统Elasticsearch、数据库系统Mongodb、缓存系统Redis以及大数据计算引擎系统Impala。
进一步地，获取增量数据包括：利用Skytools工具集中的第二应用程序编程接口读取目标数据库中的增量数据，其中，第二应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
进一步地，目标数据库包括PostgreSQL类型的数据库。
根据本发明实施例的另一个方面，提供了一种数据的同步装置，该装置包括：获取单元，用于在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；同步单元，用于将增量数据同步至配置信息所指示的一个或多个系统，其中，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
进一步地，同步单元还用于将增量数据发送至消息系统，由消息系统将增量数据同步至一个或多个系统，其中，消息系统为Kafka消息系统。
进一步地，同步单元包括：发送模块，用于利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统，其中，第一应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
通过上述实施例，在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；将增量数据同步至配置信息所指示的一个或多个系统，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。从而解决了相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题，实现了在数据库与异构系统之间进行实时增量数据同步的技术效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的数据的同步方法的流程图；
图2是根据本发明实施例的数据的同步装置的示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
首先，在对本发明实施例进行描述的过程中出现的部分名词或术语适用于如下解释：
PostgreSQL:是一个开源的、社区驱动的、自由的且符合标准的对象-关系型数据库系统。
Kafka：Apache Kafka是由Apache软件基金会开发的一个开源消息系统项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源的软件系统。
Elasticsearch：ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个具备分布式多用户能力的全文搜索引擎，基于RESTful web接口实现。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。
Redis：是一个开源的、支持网络的、基于内存的键值对存储数据库，使用ANSI C编写。根据相关数据显示，Redis是最流行的键值对存储数据库。
Mongodb：MongoDB是一种文档导向的数据库管理系统，由C++撰写而成，以此来解决应用程序开发社区中的大量问题。
Impala：Impala是一种新型查询系统，它提供SQL语义，能查询存储在Hadoop的HDFS和HBase中的PB级大数据。Impala的最大特点是的速度快。
为了可以满足PostgreSQL数据库与异构系统，比如消息系统(Kafka)、搜索引擎系统(Elasticsearch)、nosql数据库系统(Mongodb)、缓存系统(Redis)、大数据计算引擎系统(Impala)之间的实时增量同步数据。根据本发明实施例，提供了一种数据的同步方法的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的数据的同步方法的流程图，如图1所示，该方法包括如下步骤：
步骤S101，在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息。
步骤S102，将增量数据同步至配置信息所指示的一个或多个系统，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
通过上述实施例，在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；将增量数据同步至配置信息所指示的一个或多个系统，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。从而解决了相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题，实现了在数据库与异构系统之间进行实时增量数据同步的技术效果。
可选地，一个或多个系统包括以下至少之一：搜索引擎系统Elasticsearch、数据库系统Mongodb、缓存系统Redis以及大数据计算引擎系统Impala。上述的目标数据库包括PostgreSQL类型的数据库。
在步骤S101中，获取增量数据包括：利用Skytools工具集中的第二应用程序编程接口读取目标数据库中的增量数据，其中，第二应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
具体地，在Skytools工具集中，有个子集，叫做pgq。使用python语言实现，调用消息系统(Kafka)的相关应用程序接口api，将实时增量数据同步到消息系统中。并且通过api调用成功后进行标记，api调用失败以后不断进行重试，来保证数据不会漏传输也不会重复传输,每条数据都传输一次，而且仅仅被传输一次。
在步骤S102中，将增量数据同步至配置信息所指示的一个或多个系统包括：将增量数据发送至消息系统，由消息系统将增量数据同步至一个或多个系统，其中，消息系统为Kafka消息系统。
具体地，将增量数据发送至消息系统包括：利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统，其中，第一应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
可选地，在利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统之后，接收第一应用程序编程接口的回应信息，其中，在接收到回应信息的情况下，确认将增量数据发送至消息系统的操作执行成功。
在Skytools工具集中，有个子集，叫做pgq，可使用python语言实现，调用搜索引擎系统(Elasticsearch)的相关api，将实时增量数据同步到消息系统中。并且通过api调用成功后进行标记，api调用失败以后不断进行重试，来保证数据不会漏传输也不会重复传输,每条数据都被传输一次，而且仅仅被传输一次。
在Skytools工具集中，有个子集，叫做pgq，可使用python语言实现，调用nosql数据库系统(Mongodb)的相关api，将实时增量数据同步到消息系统中。并且通过api调用成功后进行标记，api调用失败以后不断进行重试，来保证数据不会漏传输也不会重复传输,每条数据都被传输一次，而且仅仅被传输一次。
在Skytools工具集中，有个子集，叫做pgq，使用python语言实现，调用缓存系统(Redis)的相关api，将实时增量数据同步到消息系统中。并且通过api调用成功后进行标记，api调用失败以后不断进行重试，来保证数据不会漏传输也不会重复传输,每条数据都被传输一次，而且仅仅被传输一次。
在Skytools工具集中，有个子集，叫做pgq，使用python语言实现，调用大数据计算引擎系统(Impala)的相关api，将实时增量数据同步到消息系统中。并且通过api调用成功后进行标记，api调用失败以后不断进行重试，来保证数据不会漏传输也不会重复传输,每条数据都被传输一次，而且仅仅被传输一次。
需要说明的是，在步骤S101之前，通过自定义的配置文件，可以配置哪些数据需要进行同步，哪几个异构系统需要进行同步。灵活配置，便于修改，便于运维。
通过上述实施例，提供了PostgreSQL数据库与异构系统之间的实时增量同步数据的整个技术设计和技术实现方案，使得PostgreSQL数据库与异构系统之间的可以实现实时增量同步数据。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
本发明实施例中还提供了一种数据的同步装置。该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图2是根据本发明实施例的数据的同步装置的示意图。如图2所示，该装置可以包括：获取单元21和同步单元22。
获取单元21，用于在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；
同步单元22，用于将增量数据同步至配置信息所指示的一个或多个系统，其中，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
通过上述实施例，获取单元在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；同步单元将增量数据同步至配置信息所指示的一个或多个系统，其中，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统，从而解决了相关技术中数据库与异构系统之间不能进行实时增量数据同步的技术问题，实现了在数据库与异构系统之间进行实时增量数据同步的技术效果。
可选地，一个或多个系统包括以下至少之一：搜索引擎系统Elasticsearch、数据库系统Mongodb、缓存系统Redis以及大数据计算引擎系统Impala。上述的目标数据库包括PostgreSQL类型的数据库。
可选地，获取单元还用于利用Skytools工具集中的第二应用程序编程接口读取目标数据库中的增量数据，其中，第二应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
在上述实施例中，同步单元还用于将增量数据发送至消息系统，由消息系统将增量数据同步至一个或多个系统，其中，消息系统为Kafka消息系统。
可选地，同步单元包括：发送模块，用于利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统，其中，第一应用程序编程接口为Skytools工具集的pgq子集中的应用程序编程接口。
上述的发送模块还用于在利用Skytools工具集中的第一应用程序编程接口发送增量数据至消息系统之后，接收第一应用程序编程接口的回应信息，其中，在接收到回应信息的情况下，确认将增量数据发送至消息系统的操作执行成功。
需要说明的是，上述装置还包括配置单元，用于通过自定义的配置文件配置需要同步的数据和/或需要同步的异构系统，可以配置哪些数据需要进行同步，哪几个异构系统需要进行同步。灵活配置，便于修改，便于运维。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
实施例3
本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：
S1，在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；
S2，将增量数据同步至配置信息所指示的一个或多个系统，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
可选地，在本实施例中，处理器根据存储介质中已存储的程序代码执行：在目标数据库中存在增量数据的情况下，获取增量数据和目标数据库的配置信息；将增量数据同步至配置信息所指示的一个或多个系统，一个或多个系统为配置信息中与增量数据的数据类型对应的异构系统。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种数据的同步方法，其特征在于，包括：
在目标数据库中存在增量数据的情况下，获取所述增量数据和所述目标数据库的配置信息；
将所述增量数据同步至所述配置信息所指示的一个或多个系统，其中，所述一个或多个系统为所述配置信息中与所述增量数据的数据类型对应的异构系统。
2.根据权利要求1所述的方法，其特征在于，将所述增量数据同步至所述配置信息所指示的一个或多个系统包括：
将所述增量数据发送至消息系统，由所述消息系统将所述增量数据同步至所述一个或多个系统，其中，所述消息系统为Kafka消息系统。
3.根据权利要求2所述的方法，其特征在于，将所述增量数据发送至消息系统包括：
利用Skytools工具集中的第一应用程序编程接口发送所述增量数据至所述消息系统，其中，所述第一应用程序编程接口为所述Skytools工具集的pgq子集中的应用程序编程接口。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
在利用Skytools工具集中的第一应用程序编程接口发送所述增量数据至所述消息系统之后，接收所述第一应用程序编程接口的回应信息，其中，在接收到所述回应信息的情况下，确认将所述增量数据发送至消息系统的操作执行成功。
5.根据权利要求1所述的方法，其特征在于，所述一个或多个系统包括以下至少之一：
搜索引擎系统Elasticsearch、数据库系统Mongodb、缓存系统Redis以及大数据计算引擎系统Impala。
6.根据权利要求1至5中任意一项所述的方法，其特征在于，获取所述增量数据包括：
利用Skytools工具集中的第二应用程序编程接口读取所述目标数据库中的所述增量数据，其中，所述第二应用程序编程接口为所述Skytools工具集的pgq子集中的应用程序编程接口。
7.根据权利要求1所述的方法，其特征在于，所述目标数据库包括PostgreSQL类型的数据库。
8.一种数据的同步装置，其特征在于，包括：
获取单元，用于在目标数据库中存在增量数据的情况下，获取所述增量数据和所述目标数据库的配置信息；
同步单元，用于将所述增量数据同步至所述配置信息所指示的一个或多个系统，其中，所述一个或多个系统为所述配置信息中与所述增量数据的数据类型对应的异构系统。
9.根据权利要求8所述的装置，其特征在于，所述同步单元还用于将所述增量数据发送至消息系统，由所述消息系统将所述增量数据同步至所述一个或多个系统，其中，所述消息系统为Kafka消息系统。
10.根据权利要求9所述的装置，其特征在于，所述同步单元包括：
发送模块，用于利用Skytools工具集中的第一应用程序编程接口发送所述增量数据至所述消息系统，其中，所述第一应用程序编程接口为所述Skytools工具集的pgq子集中的应用程序编程接口。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610783784.9A CN106326469A (zh) | 2016-08-31 | 2016-08-31 | 数据的同步方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610783784.9A CN106326469A (zh) | 2016-08-31 | 2016-08-31 | 数据的同步方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106326469A true CN106326469A (zh) | 2017-01-11 |
Family
ID=57789047
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610783784.9A Pending CN106326469A (zh) | 2016-08-31 | 2016-08-31 | 数据的同步方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106326469A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107341230A (zh) * | 2017-07-03 | 2017-11-10 | 北京奇虎科技有限公司 | 异构数据库的数据同步方法及装置 |
| CN107609086A (zh) * | 2017-09-07 | 2018-01-19 | 同程网络科技股份有限公司 | 一种app推送方法及其引擎系统 |
| CN107748790A (zh) * | 2017-11-01 | 2018-03-02 | 北京奇艺世纪科技有限公司 | 一种线上服务系统、数据加载方法、装置及设备 |
| CN110019310A (zh) * | 2017-12-29 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 数据处理方法及系统、计算机系统、计算机可读存储介质 |
| CN110175146A (zh) * | 2019-04-13 | 2019-08-27 | 深圳市同泰怡信息技术有限公司 | 硬盘信息获取方法和获取硬盘信息的装置 |
| CN110852778A (zh) * | 2019-09-30 | 2020-02-28 | 口口相传(北京)网络技术有限公司 | 一种针对业务对象的数据处理方法及装置 |
| CN111367991A (zh) * | 2018-12-25 | 2020-07-03 | 中国科学院信息工程研究所 | 一种基于消息队列的MongoDB数据实时同步方法及系统 |
| CN112395290A (zh) * | 2020-11-20 | 2021-02-23 | 深圳市麦谷科技有限公司 | 一种数据同步实现方法及系统 |
| CN112487087A (zh) * | 2020-11-17 | 2021-03-12 | 中国人寿保险股份有限公司 | 一种增量数据实时同步的方法及相关设备 |
| CN113297274A (zh) * | 2021-06-10 | 2021-08-24 | 杭州每刻科技有限公司 | 一种签收数据查询方法和系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102495910A (zh) * | 2011-12-28 | 2012-06-13 | 畅捷通信息技术股份有限公司 | 实现异构系统数据定时同步的装置和方法 |
| CN102693324A (zh) * | 2012-01-09 | 2012-09-26 | 西安电子科技大学 | 一种分布式数据库同步系统、同步方法和节点管理方法 |
| US20130318044A1 (en) * | 2010-07-27 | 2013-11-28 | Oracle International Corporation | Mysql database heterogeneous log based replication |
| CN104778175A (zh) * | 2014-01-13 | 2015-07-15 | 世纪禾光科技发展（北京）有限公司 | 一种实现异构数据库数据同步的方法及系统 |
| CN105005618A (zh) * | 2015-07-21 | 2015-10-28 | 杭州合众数据技术有限公司 | 一种异构数据库之间的数据同步方法及系统 |
| CN105574109A (zh) * | 2015-12-10 | 2016-05-11 | 青岛海信传媒网络技术有限公司 | 一种数据库同步方法、同步设备及系统 |
-
2016
- 2016-08-31 CN CN201610783784.9A patent/CN106326469A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130318044A1 (en) * | 2010-07-27 | 2013-11-28 | Oracle International Corporation | Mysql database heterogeneous log based replication |
| CN102495910A (zh) * | 2011-12-28 | 2012-06-13 | 畅捷通信息技术股份有限公司 | 实现异构系统数据定时同步的装置和方法 |
| CN102693324A (zh) * | 2012-01-09 | 2012-09-26 | 西安电子科技大学 | 一种分布式数据库同步系统、同步方法和节点管理方法 |
| CN104778175A (zh) * | 2014-01-13 | 2015-07-15 | 世纪禾光科技发展（北京）有限公司 | 一种实现异构数据库数据同步的方法及系统 |
| CN105005618A (zh) * | 2015-07-21 | 2015-10-28 | 杭州合众数据技术有限公司 | 一种异构数据库之间的数据同步方法及系统 |
| CN105574109A (zh) * | 2015-12-10 | 2016-05-11 | 青岛海信传媒网络技术有限公司 | 一种数据库同步方法、同步设备及系统 |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107341230A (zh) * | 2017-07-03 | 2017-11-10 | 北京奇虎科技有限公司 | 异构数据库的数据同步方法及装置 |
| CN107609086A (zh) * | 2017-09-07 | 2018-01-19 | 同程网络科技股份有限公司 | 一种app推送方法及其引擎系统 |
| CN107748790A (zh) * | 2017-11-01 | 2018-03-02 | 北京奇艺世纪科技有限公司 | 一种线上服务系统、数据加载方法、装置及设备 |
| CN107748790B (zh) * | 2017-11-01 | 2021-09-10 | 北京奇艺世纪科技有限公司 | 一种线上服务系统、数据加载方法、装置及设备 |
| CN110019310A (zh) * | 2017-12-29 | 2019-07-16 | 北京京东尚科信息技术有限公司 | 数据处理方法及系统、计算机系统、计算机可读存储介质 |
| CN111367991A (zh) * | 2018-12-25 | 2020-07-03 | 中国科学院信息工程研究所 | 一种基于消息队列的MongoDB数据实时同步方法及系统 |
| CN111367991B (zh) * | 2018-12-25 | 2024-03-12 | 中国科学院信息工程研究所 | 一种基于消息队列的MongoDB数据实时同步方法及系统 |
| CN110175146A (zh) * | 2019-04-13 | 2019-08-27 | 深圳市同泰怡信息技术有限公司 | 硬盘信息获取方法和获取硬盘信息的装置 |
| CN110175146B (zh) * | 2019-04-13 | 2021-11-26 | 深圳市同泰怡信息技术有限公司 | 硬盘信息获取方法和获取硬盘信息的装置 |
| CN110852778A (zh) * | 2019-09-30 | 2020-02-28 | 口口相传(北京)网络技术有限公司 | 一种针对业务对象的数据处理方法及装置 |
| CN110852778B (zh) * | 2019-09-30 | 2021-03-26 | 口口相传(北京)网络技术有限公司 | 一种针对业务对象的数据处理方法及装置 |
| CN112487087A (zh) * | 2020-11-17 | 2021-03-12 | 中国人寿保险股份有限公司 | 一种增量数据实时同步的方法及相关设备 |
| CN112395290A (zh) * | 2020-11-20 | 2021-02-23 | 深圳市麦谷科技有限公司 | 一种数据同步实现方法及系统 |
| CN113297274A (zh) * | 2021-06-10 | 2021-08-24 | 杭州每刻科技有限公司 | 一种签收数据查询方法和系统 |
| CN113297274B (zh) * | 2021-06-10 | 2023-09-01 | 杭州每刻科技有限公司 | 一种签收数据查询方法和系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106326469A (zh) | 数据的同步方法和装置 | |
| CN103299602B (zh) | 数据同步 | |
| CN110009338B (zh) | 基于区块链的记账方法及装置、电子设备 | |
| SG10201810910YA (en) | Data sharing method based on plurality of blockchains | |
| CN110189121B (zh) | 数据处理方法、装置、区块链客户端和区块链节点 | |
| CN109902071A (zh) | 业务日志存储方法、系统、装置及设备 | |
| CN109639636A (zh) | 业务数据转发、业务数据处理方法、装置及电子设备 | |
| CN105515872B (zh) | 配置信息的更新方法、装置及系统 | |
| CN106131175B (zh) | 一种信息获取、信息推送方法和设备 | |
| US9571999B2 (en) | Conditional interaction control for a virtual object | |
| CN107463409A (zh) | 一种接口转换方法、接口转换器、存储介质及电子终端 | |
| CN108289034B (zh) | 一种故障发现方法和装置 | |
| CN113792347B (zh) | 基于区块链的联邦学习方法、装置、设备及存储介质 | |
| WO2021094879A1 (en) | Secure federation of distributed stochastic gradient descent | |
| CN106210849A (zh) | 一种弹幕信息处理方法及装置 | |
| CN113837760B (zh) | 数据处理方法、装置、计算机设备以及存储介质 | |
| CN104348848A (zh) | 管理图片的方法、终端设备和服务器 | |
| CN109255587A (zh) | 一种工作数据的协同处理方法及装置 | |
| US20210064473A1 (en) | Method and device for failover in hbase system, and non-transitory computer-readable storage medium | |
| CN106060023A (zh) | 一种恶意数据的拦截处理方法及装置 | |
| CN110730075A (zh) | 数据处理方法、装置和系统 | |
| CN111428114A (zh) | Elasticsearch搜索引擎的索引创建方法及装置 | |
| CN110032499A (zh) | 页面用户流失的分析方法、装置、服务器及可读存储介质 | |
| CN110362294A (zh) | 开发任务执行方法、装置、电子设备及存储介质 | |
| CN110070379A (zh) | 一种消息传输方法、装置及服务器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: Wuxi District of Jiangsu city in Wuxi Province, Zhenze Road No. 18, Wuxi (National) Software Park Dolphin C seat 2, 3 floor Applicant after: Wuxi private online Polytron Technologies Inc Address before: Wuxi District of Jiangsu city in Wuxi Province, Zhenze Road No. 18, Wuxi (National) Software Park Dolphin C seat 2, 3 floor Applicant before: Wuxi Yazuo Online Technology Development Co., Ltd. |
|
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170111 |