WO2016101758A1 - 一种跨集群的数据同步方法和装置 - Google Patents

一种跨集群的数据同步方法和装置 Download PDF

Info

Publication number
WO2016101758A1
WO2016101758A1 PCT/CN2015/095504 CN2015095504W WO2016101758A1 WO 2016101758 A1 WO2016101758 A1 WO 2016101758A1 CN 2015095504 W CN2015095504 W CN 2015095504W WO 2016101758 A1 WO2016101758 A1 WO 2016101758A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
cluster
timestamp information
expiration time
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2015/095504
Other languages
English (en)
French (fr)
Inventor
李明昊
陈营
宋昭
陈宗志
王超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd, Qizhi Software Beijing Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Publication of WO2016101758A1 publication Critical patent/WO2016101758A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network

Definitions

  • the present invention relates to the field of communications technologies, and in particular, to a data synchronization method and apparatus across a cluster.
  • the advantages of the cluster service system are not only low price and high availability, but also strong scalability, which is very popular among users in network applications.
  • a corresponding cache may be set for the cluster, wherein the cache may store part of the data in the database (such as frequently accessed data), so that the client can access the cluster.
  • the data is read from the cache, and when the cache hit fails, the database is queried, so that the access frequency to the database can be reduced, and the running performance of the application can be improved.
  • the present invention has been made in order to provide a cross-cluster data synchronization method and apparatus that overcomes the above problems or at least partially solves the above problems.
  • a data synchronization method across a cluster including:
  • the first timestamp information is a set of a first expiration time of the data and a sending time when the data is sent by the first cluster ;
  • a write operation is performed on the data and the second expiration time corresponding to the data to be stored in the second cluster.
  • a computer program comprising computer readable code
  • the computing device is caused to perform the cross-cluster data synchronization method described above.
  • a cross-cluster data synchronization apparatus including:
  • a first receiving module configured to receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and the data is used by the first cluster a collection of times when sending;
  • Generating a module configured to generate a second expiration time corresponding to the data according to the first timestamp information and a corresponding receiving time thereof;
  • a write module configured to perform a write operation on the data and a second expiration time corresponding to the data to be stored in the second cluster.
  • a cross-cluster data synchronization method and apparatus receives data from a first cluster and corresponding first timestamp information, and according to the first timestamp information and a corresponding receiving time thereof, Generating a second expiration time corresponding to the data; and generating a second expiration because the first timestamp information is a set of a first expiration time of the data and a sending time when the data is sent by the first cluster
  • the receiving time corresponding to the first timestamp information is considered in the process of time, that is, the influence of the transmission time on the first expiration time is considered, so that the synchronization of the time-sensitive data in the first cluster and the second cluster can be ensured.
  • FIG. 1 is a flow chart showing the steps of a cross-cluster data synchronization method according to an embodiment of the present invention
  • FIG. 2 is a flow chart showing the steps of a data synchronization method across a cluster according to an embodiment of the present invention
  • FIG. 3 is a flow chart showing the steps of a cross-cluster data synchronization method according to an example of the present invention.
  • FIG. 4 is a flow chart showing the steps of a cross-cluster data synchronization method according to an embodiment of the present invention.
  • FIG. 5 is a flow chart showing the steps of a cross-cluster data synchronization method according to an embodiment of the present invention.
  • FIG. 6 is a flow chart showing the steps of a data synchronization method across a cluster according to an embodiment of the present invention
  • FIG. 7 is a schematic structural diagram of a cluster system according to an embodiment of the present invention.
  • FIG. 8 is a flow chart showing the steps of a data processing method of the cache 1 shown in FIG. 7 according to an embodiment of the present invention
  • FIG. 9 is a schematic structural diagram of a data synchronization device across a cluster according to an embodiment of the present invention.
  • Figure 10 schematically shows a block diagram of a computing device for performing the method according to the invention
  • Fig. 11 schematically shows a storage unit for holding or carrying program code implementing the method according to the invention.
  • the schematic diagram of the step process may specifically include the following steps:
  • Step 101 Receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and a sending when the data is sent by the first cluster a collection of time;
  • Step 102 Generate a second expiration time corresponding to the data according to the first timestamp information and a corresponding receiving time thereof;
  • Step 103 Perform a write operation on the data and a second expiration time corresponding to the data to be stored in the second cluster.
  • the embodiment of the present invention can be applied to a cluster system of various service scenarios for performing data synchronization across a cluster, where the cluster unit can be an IDC (Internet Data Center) or a computer room, etc., in the embodiment of the present invention. There are no restrictions on specific cluster units.
  • a write interface that sets an expiration time can be provided for the data, and the write interface can be used to set the expiration time of the data when the data is written.
  • the write interface set_with_ttl(key, value, ttl) interface can be used to simultaneously write the expiration time ttl of the key-value specified key-value, so that the data collation process can be based on the ttl
  • the key-value is sorted. For example, after the ttl expires, the key-value can be deleted.
  • Embodiments of the present invention can be used for synchronization of time-sensitive data across clusters.
  • the data synchronization process between the IDCl and the ID2 is triggered, and the data synchronization process may be specifically performed.
  • IDC1 sends the key-value and its corresponding ttl1 to IDC2; after receiving the key-value and its corresponding ttl1, the IDC2 side also writes the key-value by calling the set_with_ttl(key, value, ttl) interface. Corresponds to ttl1.
  • the above data synchronization process does not consider the transmission time of the data, and thus causes the synchronization of the time-sensitive data in IDC1 and IDC2. Assuming that ttl1 is 100s and the key-value transmission time is 10s, then the ID-side key-value will expire after 100s, and the IDC2 side key-value will be after 110s. Expired, obviously, The key-values in IDC1 and IDC2 are not synchronized.
  • the first cluster and the second cluster may be a triggering party and a receiving party of the data synchronization, where the first cluster may send the data to the second cluster when the data stored in the second cluster changes.
  • Corresponding first timestamp information wherein the first timestamp information is a set of an expiration time of the data and a sending time when the data is sent by the first cluster.
  • the data when a write operation is performed on the second expiration time corresponding to the data and the data to be stored in the second cluster, the data may be written into a database or a cache of the cluster, which is in the embodiment of the present invention.
  • the specific write position is not limited.
  • the data from the first cluster and the corresponding first timestamp information are received, and the second corresponding to the data is generated according to the first timestamp information and the corresponding receiving time.
  • An expiration time wherein the first timestamp information is a set of a first expiration time of the data and a transmission time when the data is sent by the first cluster, and the second expiration time is considered in the process of generating the second expiration time
  • the receiving time corresponding to the first timestamp information that is, the influence of the transmission time on the first expiration time, is considered, so that the synchronization of the time-sensitive data in the first cluster and the second cluster can be ensured.
  • FIG. 2 a schematic flowchart of a step of a data synchronization method for a cross-cluster according to an embodiment of the present invention is shown.
  • Step 201 Receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and a sending when the data is sent by the first cluster a collection of time;
  • Step 202 Record, when receiving data from the first cluster and the corresponding first timestamp information, record a corresponding receiving time;
  • Step 203 Read the first timestamp information.
  • Step 204 Acquire a second expiration time corresponding to the data according to the first timestamp information and the receiving time;
  • Step 205 Perform a write operation on the data and the second expiration time corresponding to the data to be stored in the second cluster.
  • the process of generating the second expiration time corresponding to the data according to the first timestamp information and the corresponding receiving time by the second cluster is implemented by the step 202 and the step 204 in the embodiment. Since the receiving time corresponding to the first timestamp information is considered in the process of generating the second expiration time, that is, the influence of the transmission time on the first expiration time is considered, so that the first cluster and the second cluster can be guaranteed. Synchronization of time-sensitive data.
  • FIG. 3 a flow chart of the steps of a data synchronization method for a cross-cluster according to an example of the present invention is shown, which may specifically include the following steps:
  • Step 302 IDC2 receives the key, value and expired_time, and records the corresponding receiving time current_timel;
  • Step 304 IDC2 performs a write operation on key, value, and tt2.
  • the first expiration time ttl1 of the data is 100s
  • the transmission time current_time when the data is transmitted by the first cluster is 1:50
  • the reception time current_time1 for the first timestamp information is 2:00
  • FIG. 4 a schematic flowchart of a step of a data synchronization method for a cross-cluster according to an embodiment of the present invention is shown.
  • Step 401 Receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and a sending when the data is sent by the first cluster a collection of time;
  • Step 402 Record, when receiving data from the first cluster and the corresponding first timestamp information, record a corresponding receiving time;
  • Step 403 Acquire, according to the first timestamp information, a sending time corresponding to the first expiration time and the first expiration time;
  • Step 404 Obtain a second expiration time corresponding to the data according to the first expiration time, the sending time and the receiving time corresponding to the first expiration time, and
  • Step 405 Perform a write operation on the data and the second expiration time corresponding to the data to be stored in the second cluster.
  • the process of generating the second expiration time corresponding to the data according to the first timestamp information and the corresponding receiving time of the second cluster is implemented by the step 402 and the step 404.
  • FIG. 5 a schematic flowchart of a step of a data synchronization method for a cross-cluster according to an embodiment of the present invention is shown.
  • Step 501 Receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and a sending when the data is sent by the first cluster a collection of time;
  • Step 502 Generate a second expiration time corresponding to the data according to the first timestamp information and the corresponding receiving time.
  • Step 503 Perform a write operation on the data and a second expiration time corresponding to the data to be stored in the second cluster;
  • Step 504 When the data stored in the second cluster changes, send the change data and the corresponding second timestamp information to the first cluster, where the second timestamp information is a third expiration time of the data. And a set of transmission times when the change data is transmitted by the second cluster.
  • the embodiment may further change the data stored in the second cluster.
  • the first cluster sends the change data and the corresponding second timestamp information, that is, the data synchronization of the first cluster to the second cluster can be implemented, and the data synchronization of the second cluster to the first cluster can also be implemented.
  • the method may further include: receiving, after the data stored in the first cluster changes, the changed data sent by the first cluster and the corresponding third timestamp information;
  • the third timestamp information is a set of an expiration time of the changed data and a sending time when the changed data is sent by the first cluster.
  • the method may further include: generating, according to the third timestamp information and the corresponding receiving time, a fourth expiration time corresponding to the changed data; and utilizing And receiving the changed data and the fourth expiration time, and updating the second expiration time corresponding to the data stored in the second cluster and the data.
  • the process of updating the data stored in the second cluster and the second expiration time corresponding to the data may be: updating key-value-ttl2 to key-value-ttl4.
  • FIG. 6 a schematic flowchart of a step of a data synchronization method for a cross-cluster according to an embodiment of the present invention is shown.
  • Step 601 Receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and a sending when the data is sent by the first cluster a collection of time;
  • Step 602 Generate a second expiration time corresponding to the data according to the first timestamp information and a corresponding receiving time thereof;
  • Step 603 Write the second expiration time corresponding to the data and the data to the cache system of the second cluster.
  • the embodiment may write the data and the second expiration time corresponding to the data into the cache system of the second cluster, so that data synchronization across the cluster cache can be implemented.
  • FIG. 7 a schematic structural diagram of a cluster system according to an embodiment of the present invention may be further illustrated, which may include: IDC1 and IDC2, wherein the IDC1 side is provided with a client 1 and a cache 1, and the IDC2 side is provided with a client. 2 and cache 2, IDC1 and IDC2 have a common database, which is connected to cache 1 and cache 2 respectively, and client 1 can send a read request or a write request to cache 1, and client 2 can send a read request to cache 2. Or the write request, and when the data stored in the cache 1 or the cache 2 changes, the data synchronization process to another cache may be triggered, and the cache 1 is taken as an example. 1 New data is written to the cache, or the database writes new data to the cache, and so on.
  • FIG. 8 is a flow chart showing the steps of the data processing method of the cache 1 shown in FIG. 7 according to an embodiment of the present invention. Specifically, the method may include the following steps:
  • Step 801 the cache 1 receives a read request from the client 1;
  • Step 802 the cache 1 determines whether it has the data corresponding to the read request, and if so, step 803 is performed, otherwise step 804 is performed;
  • Step 803 the cache 1 returns the first data corresponding to the read request to the client 1;
  • Step 804 the cache 1 requests the database to forward the read request, and receives the first data corresponding to the read request returned by the database and the expiration time of the first data, and performs the steps 803 and 805;
  • Step 805 The cache 1 sends the first data and its corresponding fourth timestamp information to the cache 2, where the fourth timestamp information is an expiration time of the first data and the first data is cached. 1 a collection of transmission times at the time of transmission;
  • Step 806 the cache 1 receives a write request from the client 1;
  • Step 807 The cache 1 writes the expiration time of the second data and the second data corresponding to the write request to the cache, and sends the second data and the corresponding fifth timestamp information to the cache 2;
  • the fifth timestamp information is a set of an expiration time of the second data and a transmission time when the second data is sent by the cache 1.
  • FIG. 9 is a schematic structural diagram of a data synchronization device for a cross-cluster according to an embodiment of the present invention.
  • the device may be configured as a second cluster side, and may specifically include the following modules:
  • the first receiving module 901 is configured to receive data from the first cluster and corresponding first timestamp information, where the first timestamp information is a first expiration time of the data and the data is first a collection of transmission times when the cluster is sent;
  • the generating module 902 is configured to generate a second expiration time corresponding to the data according to the first timestamp information and its corresponding receiving time;
  • the writing module 903 is configured to perform a write operation on the data and a second expiration time corresponding to the data to be stored in the second cluster.
  • the generating module 902 may further include:
  • a first recording submodule configured to record a corresponding receiving time when receiving data from the first cluster and corresponding first timestamp information
  • Reading a submodule configured to read the first timestamp information
  • the first obtaining submodule is configured to acquire a second expiration time corresponding to the data according to the first timestamp information and the receiving time.
  • the generating module 902 may further include:
  • a second recording submodule configured to record a corresponding receiving time when receiving data from the first cluster and the corresponding first timestamp information
  • a second obtaining submodule configured to acquire, according to the first timestamp information, a sending time corresponding to the first expiration time and the first expiration time;
  • the third obtaining sub-module is configured to acquire a second expiration time corresponding to the data according to the first expiration time, the sending time and the receiving time corresponding to the first expiration time.
  • the writing module 903 may be specifically configured to write the data and the second expiration time corresponding to the data into the cache system of the second cluster.
  • the apparatus may further include:
  • a sending module configured to send the change data and the corresponding second timestamp information to the first cluster when the data stored in the second cluster changes; wherein the second timestamp information is the third of the data The set of expiration times and the transmission time when the change data is transmitted by the second cluster.
  • the device may further include:
  • the second receiving module is configured to receive the changed data and the corresponding third timestamp information sent by the first cluster when the data stored in the first cluster changes; wherein the third timestamp information is The set of the expiration time of the changed data and the transmission time when the changed data is transmitted by the first cluster.
  • the device may further include:
  • a generating module configured to generate a fourth expiration time corresponding to the changed data according to the third timestamp information and a corresponding receiving time thereof;
  • an update module configured to update the data stored in the second cluster and the second expiration time corresponding to the data by using the received changed data and the fourth expiration time.
  • the description is relatively simple, and the relevant parts can be referred to the description of the method embodiment.
  • the various component embodiments of the present invention may be implemented in hardware, or in a software module running on one or more processors, or in a combination thereof.
  • a microprocessor or digital signal processor may be used in practice to implement some or all of some or all of the components of the cross-cluster data synchronization method and apparatus in accordance with embodiments of the present invention.
  • the invention can also be implemented as a device or device program (e.g., a computer program and a computer program product) for performing some or all of the methods described herein.
  • Such a program implementing the present invention may be stored on a computer readable medium or may have one or The form of multiple signals. Such signals may be downloaded from an internet platform, provided on a carrier signal, or provided in any other form.
  • Figure 10 illustrates a computing device, such as a search engine server, that can implement the above described method in accordance with the present invention.
  • the computing device conventionally includes a processor 1010 and a computer program product or computer readable medium in the form of a memory 1030.
  • the memory 1030 may be an electronic memory such as a flash memory, an EEPROM (Electrically Erasable Programmable Read Only Memory), an EPROM, a hard disk, or a ROM.
  • the memory 1030 has a storage space 1050 that stores program code 1051 for performing any of the method steps described above.
  • storage space 1050 storing program code may include various program codes 1051 for implementing various steps in the above methods, respectively.
  • the program code can be read from or written to one or more computer program products.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Abstract

本发明实施例提供了一种跨集群的数据同步方法和装置，其中的方法具体包括：接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。本发明实施例能够保证第一集群和第二集群中时效性数据的同步。

Description

一种跨集群的数据同步方法和装置 技术领域
本发明涉及通信技术领域，特别是涉及一种跨集群的数据同步方法和装置。
背景技术
与大型机相比，集群服务系统的优势，不仅在于低廉的价格和其高可用性，还具有很强的可扩展性，因而在网络应用中备受用户的青睐。
为了降低应用程序客户端对集群中数据库的访问频次，可以针对集群设置相应的缓存，其中，缓存中可以存储数据库中的部分数据(如频繁访问的数据)，这样，客户端在访问集群时可以首先从缓存中读取数据，当缓存命中失败时再去查询数据库，因此能够降低对数据库的访问频次，且能够提高应用程序的运行性能。
目前，由于各集群中缓存均可以接收并处理客户端的访问请求，因此，跨集群缓存的数据同步变得尤为重要。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种跨集群的数据同步方法和装置。
依据本发明的一个方面，提供了一种跨集群的数据同步方法，包括：
接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
根据本发明的另一方面，提供了一种计算机程序，包括计算机可读代码， 当所述计算机可读代码在计算设备上运行时，导致所述计算设备执行上文所述的的跨集群的数据同步方法。
根据本发明的再一方面，提供了一种计算机可读介质，其中存储了上文所述的计算机程序。
依据本发明的又一方面，提供了一种跨集群的数据同步装置，包括：
第一接收模块，配置为接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的时间的集合；
生成模块，配置为依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
写入模块，配置为对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
根据本发明实施例的一种跨集群的数据同步方法和装置，接收来自第一集群的数据及其对应的第一时间戳信息，并依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；由于所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合，而在生成第二过期时间的过程中考虑了所述第一时间戳信息对应的接收时间，也即考虑了传输时间对于第一过期时间的影响，因此能够保证第一集群和第二集群中时效性数据的同步。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文可选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出可选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图；
图2示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图；
图3示出了根据本发明一个示例的一种跨集群的数据同步方法的步骤流程示意图；
图4示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图；
图5示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图；
图6示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图；
图7示出了根据本发明一个实施例的一种集群系统的结构示意图；
图8示出了根据本发明一个实施例的一种图7所示缓存1的数据处理方法的步骤流程示意图；
图9示出了根据本发明一个实施例的一种跨集群的数据同步装置的结构示意图；
图10示意性地示出了用于执行根据本发明的方法的计算设备的框图；以及
图11示意性地示出了用于保持或者携带实现根据本发明的方法的程序代码的存储单元。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
参照图1，示出了根据本发明一个实施例的一种跨集群的数据同步方法 的步骤流程示意图，具体可以包括如下步骤：
步骤101、接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
步骤102、依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
步骤103、对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
本发明实施例可以应用于各种业务场景的集群系统中，用于进行跨集群的数据同步，其中的集群单位可以为IDC(互联网数据中心，Intemet Data Center)或者机房等等，本发明实施例对具体的集群单位不加以限制。
对于集群的某些业务场景而言，其数据往往具有一定的时效性。另外，为了提高缓存的命中率，集群中缓存的数据也需要具有一定的时效性，以通过更新缓存来适应业务场景数据的变化。为了实现时效性管理，可以针对数据提供设置过期时间的写入接口，该写入接口可用于在写入数据时设置数据的过期时间。例如，在本发明的一种应用示例中，写入接口set_with_ttl(key，value，ttl)接口可用于同时写入key-value指定key-value的过期时间ttl，以使得数据整理流程可以依据该ttl实现对key-value的整理，例如，在ttl过期后，可以对key-value执行删除操作。
本发明实施例可用于跨集群的时效性数据的同步。传统方案中，IDCl侧发生通过调用set_with_ttl(key，value，ttl)接口写入key-value及其对应ttl1的事件后，会触发IDCl与ID2之间的数据同步流程，所述数据同步流程具体可以包括：IDC1将key-value及其对应的ttl1发送至IDC2；IDC2侧在接收到key-value及其对应的ttl1后，也通过调用set_with_ttl(key，value，ttl)接口写入key-value及其对应ttl1。上述数据同步流程未考虑数据的传输时间，因此会引起IDC1和IDC2中时效性数据的不同步。假设ttl1为100s，key-value的传输时间为10s，那么，从IDC1侧写入key-value的时刻算起，IDC侧key-value将在100s后过期，而IDC2侧key-value将在110s后过期，显然， IDC1和IDC2中key-value是不同步的。
本发明实施例中，第一集群和第二集群可以为数据同步的触发方和接收方，其中，第一集群在第二集群存储的数据发生变化时，可以向第二集群发送该数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的过期时间与所述数据被第一集群发送时的发送时间的集合。
在具体实现中，在对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群时，可以将所述数据写入集群的数据库或者缓存，本发明实施例对具体的写入位置不加以限制。
综上，本发明实施例中，接收来自第一集群的数据及其对应的第一时间戳信息，并依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；由于所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合，而在生成第二过期时间的过程中考虑了所述第一时间戳信息对应的接收时间，也即考虑了传输时间对于第一过期时间的影响，因此能够保证第一集群和第二集群中时效性数据的同步。
参照图2，示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图，具体可以包括如下步骤：
步骤201、接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
步骤202、在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
步骤203、读取所述第一时间戳信息；
步骤204、依据所述第一时间戳信息与所述接收时间，获取所述数据对应的第二过期时间；以及
步骤205、对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
相对于图1所示实施例，本实施例通过步骤202和步骤204来实现第二集群依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间的过程；由于在生成第二过期时间的过程中考虑了所述第一时间戳信息对应的接收时间，也即考虑了传输时间对于第一过期时间的影响，因此能够保证第一集群和第二集群中时效性数据的同步。
为使本领域技术人员更好地理解本发明，参照图3，示出了根据本发明一个示例的一种跨集群的数据同步方法的步骤流程示意图，具体可以包括如下步骤：
步骤301、IDC1在写入key-value-ttl1后，生成第一时间戳信息expired_time＝ttl1+current_time，并将key、value和expired_time传输至IDC2；其中，ttl为key-value的第一过期时间；
步骤302、IDC2接收到key、value和expired_time，并记录对应的接收时间current_timel；
步骤303、IDC2生成第二过期时间ttl2＝expired_time-current_time1；
步骤304IDC2对key、value和tt2执行写入操作。
假设所述数据的第一过期时间ttl1为100s，所述数据被第一集群发送时的发送时间current_time为1：50，进一步假设对于所述第一时间戳信息的接收时间current_timel为2：00，那么，依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间为：100s+1：50-2：00＝90s，因此能够保证第一集群和第二集群中时效性数据的同步。
参照图4，示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图，具体可以包括如下步骤：
步骤401、接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
步骤402、在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
步骤403、依据所述第一时间戳信息获取所述第一过期时间和所述第一过期时间对应的发送时间；
步骤404、依据所述第一过期时间、所述第一过期时间对应的发送时间和接收时间，获取所述数据对应的第二过期时间；以及
步骤405、对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
相对于图1所示实施例，本实施例通过步骤402和步骤404来实现第二集群依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间的过程，其中，步骤404获取所述数据对应的第二过期时间的过程可以为：第二过期时间＝第一过期时间+(接收时间-发送时间)；由于接收时间与发送时间的差值为传输时间，也即在生成第二过期时间的过程中考虑了传输时间对于第一过期时间的影响，因此能够保证第一集群和第二集群中时效性数据的同步。
参照图5，示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图，具体可以包括如下步骤：
步骤501、接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
步骤502、依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；
步骤503、对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群；以及
步骤504、在第二集群存储的数据发生变化时，向第一集群发送该变化数据及其对应的第二时间戳信息；其中，所述第二时间戳信息为所述数据的第三过期时间与所述变化数据被第二集群发送时的发送时间的集合。
相对于图1所示实施例，本实施例除了可以接收来自第一集群的数据及其对应的第一时间戳信息外，还可以在第二集群存储的数据发生变化时，向 第一集群发送该变化数据及其对应的第二时间戳信息，也即，既能够实现第一集群到第二集群的数据同步，也能够实现第二集群到第一集群的数据同步。
在本发明的一种可选实施例中，所述方法还可以包括：在第一集群存储的数据发生变化时，接收第一集群发送的该变化后数据及其对应的第三时间戳信息；其中，所述第三时间戳信息为所述变化后数据的过期时间与所述变化后数据被第一集群发送时的发送时间的集合。本可选实施例中，第一集群的数据可能发生如下变化：key-value-ttl1变化为key-value-ttl3，则可以按照如下过程生成变化后数据对应的第三时间戳信息：expired_time3＝ttl3+current_time3，其中，expired_time3、ttl3和current_time3分别表示第三时间戳信息、所述变化后数据的过期时间和所述变化后数据被第一集群发送时的发送时间。
在本发明的另一种可选实施例中，所述方法还可以包括：依据所述第三时间戳信息及其对应的接收时间，生成所述变化后数据对应的第四过期时间；以及利用接收的所述变化后数据及所述第四过期时间，更新存储在第二集群所述数据和所述数据对应的第二过期时间。
对于上例，在接收到key、value和expired_time3后，可以记录对应的接收时间current_time4，并生成第四过期时间ttl4＝expired_time3-current_time4。则更新存储在第二集群所述数据和所述数据对应的第二过期时间的过程可以为，将key-value-ttl2更新为key-value-ttl4。
参照图6，示出了根据本发明一个实施例的一种跨集群的数据同步方法的步骤流程示意图，具体可以包括如下步骤：
步骤601、接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
步骤602、依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
步骤603、将所述数据和所述数据对应的第二过期时间写入第二集群的缓存系统。
相对于图1所示实施例，本实施例可以将所述数据和所述数据对应的第二过期时间写入第二集群的缓存系统，因此能够实现跨集群缓存的数据同步。
参照图7，示出了根据本发明一个实施例的一种集群系统的结构示意图，其具体可以包括：IDC1和IDC2，其中，IDC1侧设置有客户端1和缓存1，IDC2侧设置有客户端2和缓存2，IDC1和IDC2具有共同的数据库，该数据库分别于缓存1和缓存2相连，并且，客户端1可以向缓存1发送读请求或写请求，客户端2可以向缓存2发送读请求或写请求，以及，在缓存1或缓存2中存储的数据发生变化时，均可以触发向另一缓存的数据同步流程，以缓存1为例，其中存储的数据发生变化具体可以包括：客户端1向缓存中写入了新的数据，或者，数据库向缓存中写入了新的数据等等。
参照图8，示出了根据本发明一个实施例的一种图7所示缓存1的数据处理方法的步骤流程示意图，具体可以包括如下步骤：
步骤801、缓存1接收来自客户端1的读请求；
步骤802、缓存1判断自身是否存在所述读请求对应的数据，若是，则执行步骤803，否则执行步骤804；
步骤803、缓存1向客户端1返回所述读请求对应的第一数据；
步骤804、缓存1向数据库请求转发所述读请求，并接收所述数据库返回的所述读请求对应的第一数据和所述第一数据的过期时间，并执行所述步骤803和步骤805；
步骤805、缓存1向缓存2发送所述第一数据及其对应的第四时间戳信息；其中，所述第四时间戳信息为所述第一数据的过期时间与所述第一数据被缓存1发送时的发送时间的集合；
步骤806、缓存1接收来自客户端1的写请求；
步骤807、缓存1将所述写请求对应的第二数据和所述第二数据的过期时间写入缓存，并向缓存2发送所述第二数据及其对应的第五时间戳信息； 其中，所述第五时间戳信息为所述第二数据的过期时间与所述第二数据被缓存1发送时的发送时间的集合。
对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图9，示出了根据本发明一个实施例的一种跨集群的数据同步装置的结构示意图，该装置可以应配置为第二集群侧，具体可以包括如下模块：
第一接收模块901，配置为接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
生成模块902，配置为依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
写入模块903，配置为对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
在本发明的一种可选实施例中，所述生成模块902，可以进一步包括：
第一记录子模块，配置为在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
读取子模块，配置为读取所述第一时间戳信息；以及
第一获取子模块，配置为依据所述第一时间戳信息与所述接收时间，获取所述数据对应的第二过期时间。
在本发明的另一种可选实施例中，所述生成模块902，可以进一步包括：
第二记录子模块，配置为在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
第二获取子模块，配置为依据所述第一时间戳信息获取所述第一过期时间和所述第一过期时间对应的发送时间；以及
第三获取子模块，配置为依据所述第一过期时间、所述第一过期时间对应的发送时间和接收时间，获取所述数据对应的第二过期时间。
在本发明的再一种可选实施例中，所述写入模块903，可具体配置为将所述数据和所述数据对应的第二过期时间写入第二集群的缓存系统。
在本发明的又一种可选实施例中，所述装置还可以包括：
发送模块，配置为在第二集群存储的数据发生变化时，向第一集群发送该变化数据及其对应的第二时间戳信息；其中，所述第二时间戳信息为所述数据的第三过期时间与所述变化数据被第二集群发送时的发送时间的集合。
在本发明的一种可选实施例中，所述装置还可以包括：
第二接收模块，配置为在第一集群存储的数据发生变化时，接收第一集群发送的该变化后数据及其对应的第三时间戳信息；其中，所述第三时间戳信息为所述变化后数据的过期时间与所述变化后数据被第一集群发送时的发送时间的集合。
在本发明的另一种可选实施例中，所述装置还可以包括：
生成模块，配置为依据所述第三时间戳信息及其对应的接收时间，生成所述变化后数据对应的第四过期时间；以及
更新模块，配置为利用接收的所述变化后数据及所述第四过期时间，更新存储在第二集群所述数据和所述数据对应的第二过期时间。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的跨集群的数据同步方法和装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或 者多个信号的形式。这样的信号可以从因特网平台上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
例如，图10示出了可以实现根据本发明上述方法的计算设备，例如搜索引擎服务器。该计算设备传统上包括处理器1010和以存储器1030形式的计算机程序产品或者计算机可读介质。存储器1030可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。存储器1030具有存储用于执行上述方法中的任何方法步骤的程序代码1051的存储空间1050。例如，存储程序代码的存储空间1050可以包括分别用于实现上面的方法中的各种步骤的各个程序代码1051。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘，紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为例如图11所示的便携式或者固定存储单元。该存储单元可以具有与图10的计算设备中的存储器1030类似布置的存储段、存储空间等。程序代码可以例如以适当形式进行压缩。通常，存储单元包括用于执行根据本发明的方法步骤的计算机可读代码1051’，即可以由诸如1010之类的处理器读取的代码，当这些代码由服务器运行时，导致该服务器执行上面所描述的方法中的各个步骤。
本文中所称的“一个实施例”、“实施例”或者“一个或者多个实施例”意味着，结合实施例描述的特定特征、结构或者特性包括在本发明的至少一个实施例中。此外，请注意，这里“在一个实施例中”的词语例子不一定全指同一个实施例。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利 要求的限制。单词“包括”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
此外，还应当注意，本说明书中使用的语言主要是为了可读性和教导的目的而选择的，而不是为了解释或者限定本发明的主题而选择的。因此，在不偏离所附权利要求书的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围，对本发明所做的公开是说明性的，而非限制性的，本发明的范围由所附权利要求书限定。

Claims (16)

  1. 一种跨集群的数据同步方法，包括：
    接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的发送时间的集合；
    依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
    对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
  2. 如权利要求1所述的方法，其中，所述第二集群依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间的步骤，包括：
    在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
    读取所述第一时间戳信息；以及
    依据所述第一时间戳信息与所述接收时间，获取所述数据对应的第二过期时间。
  3. 如权利要求1所述的方法，其中，所述第二集群依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间的步骤，包括：
    在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
    依据所述第一时间戳信息获取所述第一过期时间和所述第一过期时间对应的发送时间；
    依据所述第一过期时间、所述第一过期时间对应的发送时间和接收时间，获取所述数据对应的第二过期时间。
  4. 如权利要求1或2或3所述的方法，其中，所述对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群以存储在第二集群以存储在第二集群的步骤，包括：
    将所述数据和所述数据对应的第二过期时间写入第二集群自身的缓存系统。
  5. 如权利要求1或2或3所述的方法，其中，所述方法还包括：
    在第二集群存储的数据发生变化时，向第一集群发送该变化数据及其对应的第二时间戳信息；其中，所述第二时间戳信息为所述数据的第三过期时间与所述变化数据被第二集群发送时的发送时间的集合。
  6. 如权利要求1或2或3所述的方法，其中，还包括：
    在第一集群存储的数据发生变化时，接收第一集群发送的该变化后数据及其对应的第三时间戳信息；其中，所述第三时间戳信息为所述变化后数据的过期时间与所述变化后数据被第一集群发送时的时间的集合。
  7. 如权利要求6所述的方法，其中，还包括：
    依据所述第三时间戳信息及其对应的接收时间，生成所述变化后数据对应的第四过期时间；以及
    利用接收的所述变化后数据及所述第四过期时间，更新存储在第二集群所述数据和所述数据对应的第二过期时间。
  8. 一种计算机程序，包括计算机可读代码，当所述计算机可读代码在计算设备上运行时，导致所述计算设备执行根据权利要求1至7中的任一项所述的跨集群的数据同步方法。
  9. 一种计算机可读介质，其中存储了如权利要求8所述的计算机程序。
  10. 一种跨集群的数据同步装置，包括：
    第一接收模块，配置为接收来自第一集群的数据及其对应的第一时间戳信息；其中，所述第一时间戳信息为所述数据的第一过期时间与所述数据被第一集群发送时的时间的集合；
    生成模块，配置为依据所述第一时间戳信息及其对应的接收时间，生成所述数据对应的第二过期时间；以及
    写入模块，配置为对所述数据和所述数据对应的第二过期时间执行写入操作以存储在第二集群。
  11. 如权利要求10所述的装置，其中，所述生成模块，包括：
    第一记录子模块，配置为在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
    读取子模块，配置为读取所述第一时间戳信息；以及
    第一获取子模块，配置为依据所述第一时间戳信息与所述接收时间，获取所述数据对应的第二过期时间。
  12. 如权利要求10所述的装置，其中，所述生成模块，包括：
    第二记录子模块，配置为在接收来自第一集群的数据及其对应的第一时间戳信息时，记录对应的接收时间；
    第二获取子模块，配置为依据所述第一时间戳信息获取所述第一过期时间和所述第一过期时间对应的发送时间；以及
    第三获取子模块，配置为依据所述第一过期时间、所述第一过期时间对应的发送时间和接收时间，获取所述数据对应的第二过期时间。
  13. 如权利要求10或11或12所述的装置，其中，所述写入模块，具体配置为将所述数据和所述数据对应的第二过期时间写入第二集群的缓存系统。
  14. 如权利要求10或11或12所述的装置，其中，所述装置还包括：
    发送模块，配置为在第二集群存储的数据发生变化时，向第一集群发送该变化数据及其对应的第二时间戳信息；其中，所述第二时间戳信息为所述数据的第三过期时间与所述变化数据被第二集群发送时的发送时间的集合。
  15. 如权利要求10或11或12所述的装置，其中，所述装置还包括：
    第二接收模块，配置为在第一集群存储的数据发生变化时，接收第一集群发送的该变化后数据及其对应的第三时间戳信息；其中，所述第三时间戳信息为所述变化后数据的过期时间与所述变化后数据被第一集群发送时的发送时间的集合。
  16. 如权利要求15所述的装置，其中，所述装置还包括：
    生成模块，配置为依据所述第三时间戳信息及其对应的接收时间，生成所述变化后数据对应的第四过期时间；以及
    更新模块，配置为利用接收的所述变化后数据及所述第四过期时间，更新存储在第二集群所述数据和所述数据对应的第二过期时间。
PCT/CN2015/095504 2014-12-27 2015-11-25 一种跨集群的数据同步方法和装置 Ceased WO2016101758A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201410836865.1 2014-12-27
CN201410836865.1A CN104580183B (zh) 2014-12-27 2014-12-27 一种跨集群的数据同步方法和装置

Publications (1)

Publication Number Publication Date
WO2016101758A1 true WO2016101758A1 (zh) 2016-06-30

Family

ID=53095364

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2015/095504 Ceased WO2016101758A1 (zh) 2014-12-27 2015-11-25 一种跨集群的数据同步方法和装置

Country Status (2)

Country Link
CN (1) CN104580183B (zh)
WO (1) WO2016101758A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108512877A (zh) * 2017-02-28 2018-09-07 腾讯科技（北京）有限公司 一种服务器集群中分享数据的方法和装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104580183B (zh) * 2014-12-27 2019-02-15 北京奇虎科技有限公司 一种跨集群的数据同步方法和装置
CN107231400B (zh) * 2016-03-25 2020-07-03 阿里巴巴集团控股有限公司 一种数据的同步方法和装置
CN106357723A (zh) * 2016-08-15 2017-01-25 杭州古北电子科技有限公司 一种基于云主机的多集群缓存信息同步系统和方法
CN111708796A (zh) * 2020-06-23 2020-09-25 浪潮云信息技术股份公司 一种基于时间戳的数据一致性方法
CN112765182A (zh) * 2021-01-28 2021-05-07 江苏视博云信息技术有限公司 云服务器集群间的数据同步方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7124319B2 (en) * 2002-03-19 2006-10-17 Sun Microsystems, Inc. Delay compensation for synchronous processing sets
US7899783B1 (en) * 2006-05-30 2011-03-01 Cisco Technology, Inc Monitoring data integrity
CN102006330A (zh) * 2010-12-01 2011-04-06 北京瑞信在线系统技术有限公司 分布式缓存系统、数据的缓存方法及缓存数据的查询方法
CN103580845A (zh) * 2012-07-19 2014-02-12 中兴通讯股份有限公司 一种基于虚拟交换集群的时钟同步方法及装置
CN104156361A (zh) * 2013-05-13 2014-11-19 阿里巴巴集团控股有限公司 一种实现数据同步的方法及系统
CN104580183A (zh) * 2014-12-27 2015-04-29 北京奇虎科技有限公司 一种跨集群的数据同步方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7451339B2 (en) * 2006-09-15 2008-11-11 International Business Machines Corporation Pulse-per-second attachment for STP
CN101426026B (zh) * 2008-09-17 2013-07-03 北京六维世纪网络技术有限公司 一种多服务器间数据同步的方法及系统
CN101425891B (zh) * 2008-12-09 2012-09-12 中兴通讯股份有限公司 时间同步方法、系统和客户端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7124319B2 (en) * 2002-03-19 2006-10-17 Sun Microsystems, Inc. Delay compensation for synchronous processing sets
US7899783B1 (en) * 2006-05-30 2011-03-01 Cisco Technology, Inc Monitoring data integrity
CN102006330A (zh) * 2010-12-01 2011-04-06 北京瑞信在线系统技术有限公司 分布式缓存系统、数据的缓存方法及缓存数据的查询方法
CN103580845A (zh) * 2012-07-19 2014-02-12 中兴通讯股份有限公司 一种基于虚拟交换集群的时钟同步方法及装置
CN104156361A (zh) * 2013-05-13 2014-11-19 阿里巴巴集团控股有限公司 一种实现数据同步的方法及系统
CN104580183A (zh) * 2014-12-27 2015-04-29 北京奇虎科技有限公司 一种跨集群的数据同步方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108512877A (zh) * 2017-02-28 2018-09-07 腾讯科技（北京）有限公司 一种服务器集群中分享数据的方法和装置
CN108512877B (zh) * 2017-02-28 2022-03-18 腾讯科技（北京）有限公司 一种服务器集群中分享数据的方法和装置

Also Published As

Publication number Publication date
CN104580183A (zh) 2015-04-29
CN104580183B (zh) 2019-02-15

Similar Documents

Publication Publication Date Title
CN110188096B (zh) 一种数据记录的索引创建方法、装置及设备
CN111737265B (zh) 区块数据访问方法、区块数据存储方法及装置
CN107590207B (zh) 数据同步方法及装置、电子设备
CN103973810B (zh) 基于互联网协议ip盘的数据处理方法和装置
CN106649828B (zh) 一种数据查询方法及系统
WO2016091069A1 (zh) 一种数据操作方法及装置
CN107153644B (zh) 一种数据同步方法及装置
WO2016101752A1 (zh) 数据同步方法及装置
CN110162662A (zh) 一种块链式账本中数据记录的验证方法、装置及设备
US9031909B2 (en) Provisioning and/or synchronizing using common metadata
CN111815454B (zh) 数据上链方法及装置、电子设备、存储介质
CN110347674A (zh) 一种基于业务标识的索引创建方法、装置及设备
CN110162526A (zh) 一种块链式账本中数据记录的查询方法、装置及设备
CN116049306B (zh) 数据同步方法、装置、电子设备以及可读存储介质
WO2015081848A1 (zh) 社交化扩展搜索方法及相应的装置、系统
CN106156070A (zh) 一种查询方法、文件合并方法与相关装置
WO2019100853A1 (zh) 分页查询方法及装置和电子设备
CN104580183A (zh) 一种跨集群的数据同步方法和装置
CN109992469B (zh) 一种合并日志的方法及装置
CN113485980A (zh) 数据处理方法、装置、电子设备及存储介质
CN112948410A (zh) 数据处理方法、装置、设备及介质
CN105610917A (zh) 实现系统中同步数据修复的方法及系统
CN110515803B (zh) 针对日志消息的处理方法、装置以及电子设备
CN114443777B (zh) 多数据聚合管理方法、装置、设备及系统
CN111858480A (zh) 一种数据处理方法、装置及计算机存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15871827

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15871827

Country of ref document: EP

Kind code of ref document: A1