CN104426975A - 用于数据同步的方法、设备和系统 - Google Patents

用于数据同步的方法、设备和系统 Download PDF

Info

Publication number
CN104426975A
CN104426975A CN201310394668.4A CN201310394668A CN104426975A CN 104426975 A CN104426975 A CN 104426975A CN 201310394668 A CN201310394668 A CN 201310394668A CN 104426975 A CN104426975 A CN 104426975A
Authority
CN
China
Prior art keywords
remote data
file
equipment
data base
text
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310394668.4A
Other languages
English (en)
Inventor
王卓然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Netqin Technology Co Ltd
Original Assignee
Beijing Netqin Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Netqin Technology Co Ltd filed Critical Beijing Netqin Technology Co Ltd
Priority to CN201310394668.4A priority Critical patent/CN104426975A/zh
Publication of CN104426975A publication Critical patent/CN104426975A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Abstract

本发明提供了用于在多个数据库之间同步数据的方法、设备和系统。所述多个数据库包括本地数据库和至少一个远程数据库。所述方法包括：a)监视至少一个中间设备上是否存在待同步的由所述至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件；b)在发现所述至少一个中间设备上存在待同步的远程数据文件的情况下，从所述至少一个中间设备获取所述远程数据文件；c)根据所述远程数据文件的文件头，获取所述远程数据文件的远程数据正文；以及d)根据所述远程数据正文来处理所述本地数据库中的相应数据。

Description

用于数据同步的方法、设备和系统
技术领域
本发明涉及数据库领域，更具体地涉及用于在数据库之间同步数据的方法、设备和系统。
背景技术
随着社会信息化的发展，人们需要进行各种信息的交流、传输和存储，而人们使用的电脑、手机、PDA等设备上的信息具有一定的独立性。为了方便我们将这些非常散乱的数据进行合理的管理，需要将这些信息有机地统一起来，以便在处理完数据之后能进行有效使用。因此，就需要数据库来维护和管理这些数据。
数据库是按照数据结构来组织、存储和管理数据的软件。数据库中的数据通常是以与现实应用相关的模型来进行组织的。随着需要存储和管理的数据的规模越来越大以及网络带宽的限制，分布式数据库已经成为了数据库中的主流。在分布式数据库中，数据以冗余方式分散在不同的节点上。例如，在第一节点上存储和管理数据库的第一部分数据D1，在第二节点上存储和管理数据库的第二部分数据D2，…在第N个节点上存储和管理数据库的第N部分数据DN，且D1、D2、…、DN的并集是该分布式数据库的数据全集，而D1、D2、…、DN中任意两个之间可以存在一定的冗余，即存在一定量相同的数据。作为一个极端情况，D1、D2、…、DN可以完全相同，即它们中的每一个均保存了该数据库的所有数据内容。然而，为了使得分布式数据库中各节点的冗余数据保持一致，或为了方便用户能够访问该分布式数据库中最接近用户的节点(该节点可能不具有用户所想要访问的数据部分)，因此在分布式数据库中，不可避免地要涉及到不同节点之间的数据同步。
在现有技术中，公开了一种通过事件来触发对不同节点的数据进行同步的方案。该同步方案实现在具有不同种类数据库节点、不同数据模型的环境下。其需要实现将一个或多个源数据库(源节点)及时同步到一个或多个目标数据库(目标节点)，以及大批量数据的快速同步。该方法包括：当源数据库中的数据变更时，产生请求同步的变更事件；当检测到变更事件时，就触发推送数据模块将这次变更的数据按照目标节点的接收数据模块的数据结构组成数据包，并发给该接收数据模块；该接收数据模块经过数据包解析后，根据变更数据的内容来操作相应的目标数据库。
然而，该方案的问题在于：(1)需要通过变更事件触发才能进行数据同步；(2)其次，如果变更事件过多，数据同步将非常频繁，极大地浪费了系统和网络资源；以及(3)数据安全度不高。
发明内容
为了解决上述问题，提供了根据本发明的用于数据同步的方法、设备和系统。
根据本发明的第一方面，提供了一种用于同步多个数据库的方法。所述多个数据库包括本地数据库和至少一个远程数据库。所述方法包括：a)在预定同步时间，基于所述本地数据库中的数据，生成本地数据正文；b)合并所述本地数据正文和基于所述本地数据正文生成的文件头，以形成本地数据文件；以及c)向至少一个中间设备上传所述本地数据文件，供所述至少一个远程数据库在另一预定同步时间从所述至少一个中间设备获取所述本地数据文件。
在一些实施例中，所述本地数据库中的数据包括以下至少一项：保单号、移动设备的市场价格、延保期限、延保价格、销售日期、用户姓名、用户邮箱、用户电话号码、用户所在国家、用户购买移动设备所在国家、用户购买货币、移动设备的型号、序列号、以及付款方式。
在一些实施例中，所述本地数据库中的数据是所述本地数据库中在指定时间段期间新增、修改和/或删除的数据。
在一些实施例中，步骤a)包括：创建本地空白数据文件；以及在所述本地空白数据文件中，以预先规定的数据格式将所述本地数据库中的数据填入所述本地空白数据文件中，以形成所述本地数据正文。
在一些实施例中，步骤b)包括：计算所述本地数据正文的数字摘要；以及至少根据所述数字摘要、所述本地数据文件的预期文件名、以及所述本地数据正文的大小，生成所述本地数据文件的文件头。
在一些实施例中，所述数字摘要是MD5值。
在一些实施例中，在步骤b)和c)之间，所述方法还包括：对所述本地数据文件加密。
在一些实施例中，步骤c)包括：使用加密传输协议向所述至少一个中间设备上传所述本地数据文件。
在一些实施例中，所述加密传输协议是安全文件传输协议(SFTP)。
在一些实施例中，在步骤c)中，如果上传失败，则进行预定次数的重传。
在一些实施例中，在步骤c)中，如果所述重传全部失败，则向相关人员发送相应的告警邮件。
在一些实施例中，在步骤c)之后，所述方法还包括：在所述本地数据库中记录与本次同步相关的历史记录。
在一些实施例中，所述历史记录包括以下至少一项：所述本地数据文件的文件名、所述本地数据文件的创建时间、所述本地数据正文的数字摘要值、上传是否成功、上传时间、在所述至少一个中间设备上存放所述本地数据文件的存储目录、以及存放所述本地数据文件的本地存储目录。
根据本发明的第二方面，提供了一种用于同步多个数据库的设备，所述多个数据库包括至少一个远程数据库和由所述设备承载的本地数据库。所述设备包括：生成单元，用于在预定同步时间，基于所述本地数据库中的数据，生成本地数据正文；合并单元，用于合并所述本地数据正文和基于所述本地数据正文生成的文件头，以形成本地数据文件；以及上传单元，用于向至少一个中间设备上传所述本地数据文件，供所述至少一个远程数据库在另一预定同步时间从所述至少一个中间设备获取所述本地数据文件。
在一些实施例中，所述本地数据库中的数据包括以下至少一项：保单号、移动设备的市场价格、延保期限、延保价格、销售日期、用户姓名、用户邮箱、用户电话号码、用户所在国家、用户购买移动设备所在国家、用户购买货币、移动设备的型号、序列号、以及付款方式。
在一些实施例中，所述本地数据库中的数据是所述本地数据库中在指定时间段期间新增、修改和/或删除的数据。
在一些实施例中，所述生成单元还用于：创建本地空白数据文件；以及在所述本地空白数据文件中，以预先规定的数据格式将所述本地数据库中的数据填入所述本地空白数据文件中，以形成所述本地数据正文。
在一些实施例中，所述合并单元还用于：计算所述本地数据正文的数字摘要；以及至少根据所述数字摘要、所述本地数据文件的预期文件名、以及所述本地数据正文的大小，生成所述本地数据文件的文件头。
在一些实施例中，所述数字摘要是MD5值。
在一些实施例中，所述设备还包括：加密单元，用于对所述本地数据文件加密。
在一些实施例中，所述上传单元还用于：使用加密传输协议向所述至少一个中间设备上传所述本地数据文件。
在一些实施例中，所述加密传输协议是安全文件传输协议(SFTP)。
在一些实施例中，所述上传单元还用于：如果上传失败，则进行预定次数的重传。
在一些实施例中，所述上传单元还用于：如果所述重传全部失败，则向相关人员发送相应的告警邮件。
在一些实施例中，所述设备还包括：记录单元，用于在所述本地数据库中记录与本次同步相关的历史记录。
在一些实施例中，所述历史记录包括以下至少一项：所述本地数据文件的文件名、所述本地数据文件的创建时间、所述本地数据正文的数字摘要值、上传是否成功、上传时间、在所述至少一个中间设备上存放所述本地数据文件的存储目录、以及存放所述本地数据文件的本地存储目录。
根据本发明的第三方面，提供了一种用于同步多个数据库的系统，所述多个数据库包括本地数据库和至少一个远程数据库。该系统包括承载所述本地数据库的根据上述第二方面的设备、以及承载所述至少一个远程数据库的至少一个远程数据库节点、以及至少一个中间设备。
根据本发明的第四方面，提供了一种用于同步多个数据库的方法，所述多个数据库包括本地数据库和至少一个远程数据库。所述方法包括：a)监视至少一个中间设备上是否存在待同步的由所述至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件；b)在发现所述至少一个中间设备上存在待同步的远程数据文件的情况下，从所述至少一个中间设备获取所述远程数据文件；c)根据所述远程数据文件的文件头，获取所述远程数据文件的远程数据正文；以及d)根据所述远程数据正文来处理所述本地数据库中的相应数据。
在一些实施例中，所述远程数据正文包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
在一些实施例中，步骤d)中的处理的类型包括：新增数据、修改数据、以及删除数据。
在一些实施例中，步骤c)还包括：计算所述远程数据正文的数字摘要；以及比较计算出的数字摘要和所述远程数据文件的文件头中包括的数字摘要：如果两个数字摘要匹配，则确定所述远程数据正文未被篡改或丢失并继续后续步骤；否则确定所述远程数据正文已被篡改或丢失，所述方法直接结束。
在一些实施例中，所述数字摘要是MD5值。
在一些实施例中，在步骤b)和c)之间，所述方法还包括：对所述远程数据文件解密。
在一些实施例中，步骤b)包括：使用加密传输协议从所述至少一个中间设备获取所述远程数据文件。
在一些实施例中，所述加密传输协议是安全文件传输协议(SFTP)。
在一些实施例中，在步骤b)中，如果获取所述远程数据文件失败，则进行预定次数的重传。
在一些实施例中，在步骤b)中，如果所述重传全部失败，则向相关人员发送相应的告警邮件。
在一些实施例中，在步骤b)之后，所述方法还包括：在所述本地数据库中记录与本次同步相关的历史记录。
根据本发明的第五方面，提供了一种用于同步多个数据库的设备，所述多个数据库包括至少一个远程数据库和由所述设备承载的本地数据库。所述设备包括：监视单元，用于监视至少一个中间设备上是否存在待同步的由所述至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件；文件获取单元，用于在发现所述至少一个中间设备上存在待同步的远程数据文件的情况下，从所述至少一个中间设备获取所述远程数据文件；正文获取单元，用于根据所述远程数据文件的文件头，获取所述远程数据文件的远程数据正文；以及处理单元，用于根据所述远程数据正文来处理所述本地数据库中的相应数据。
在一些实施例中，所述远程数据正文包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
在一些实施例中，所述处理单元的处理的类型包括：新增数据、修改数据、以及删除数据。
在一些实施例中，所述正文获取单元还用于：计算所述远程数据正文的数字摘要；以及比较计算出的数字摘要和所述远程数据文件的文件头中包括的数字摘要：如果两个数字摘要匹配，则确定所述远程数据正文未被篡改或丢失并继续后续步骤；否则确定所述远程数据正文已被篡改或丢失，所述设备的处理直接结束。
在一些实施例中，所述数字摘要是MD5值。
在一些实施例中，所述设备还包括：解密单元，用于对所述远程数据文件解密。
在一些实施例中，所述文件获取单元还用于：使用加密传输协议从所述至少一个中间设备获取所述远程数据文件。
在一些实施例中，所述加密传输协议是安全文件传输协议(SFTP)。
在一些实施例中，所述文件获取单元还用于：如果获取所述远程数据文件失败，则进行预定次数的重传。
在一些实施例中，所述文件获取单元还用于：如果所述重传全部失败，则向相关人员发送相应的告警邮件。
在一些实施例中，所述设备还包括：记录单元，用于在所述本地数据库中记录与本次同步相关的历史记录。
根据本发明的第六方面，提供了一种用于同步多个数据库的系统，所述多个数据库包括本地数据库和至少一个远程数据库。该系统包括承载所述本地数据库的根据上述第五方面的设备、以及承载所述至少一个远程数据库的至少一个远程数据库节点、以及至少一个中间设备。
使用本发明的方法、设备或系统，实现了数据的定时同步，降低了对系统和网络性能的影响。此外，对数据传输进行加密处理，从而在及时完成数据同步的同时保证了数据的安全性。
附图说明
通过下面结合附图说明本发明的优选实施例，将使本发明的上述及其它目的、特征和优点更加清楚，其中：
图1是示出了根据本发明的数据同步系统的应用场景的示意图。
图2是示出了根据本发明实施例的用于数据同步的方法的流程图。
图3是示出了根据本发明实施例的用于数据同步的另一方法的流程图。
图4是示出了根据本发明实施例的用于数据同步的设备的框图。
图5是示出了根据本发明实施例的用于数据同步的另一设备的框图。
具体实施方式
下面参照附图对本发明的优选实施例进行详细说明，在描述过程中省略了对于本发明来说是不必要的细节和功能，以防止对本发明的理解造成混淆。以下，以本发明应用于有线通信系统的场景为例，对本发明进行了详细描述。但本发明并不局限于此，本发明也可以应用于固定通信系统、移动通信系统，或者应用于移动通信系统、固定通信系统、有线通信系统等的任意混合结构。就有线通信系统而言，本发明并不局限于所涉及的各个有线通信终端(节点)的具体通信方式，可以包括(但不限于)：固定电话网络、有线电视网络、xDSL、以太网、光网络等，不同的有线终端可以采用相同的通信协议，也可以采用不同的通信协议。本发明并不局限于有线终端的具体操作系统，可以包括(但不限于)Windows、Unix、Linux、OS X等，不同的有线终端可以采用相同的操作系统，也可以采用不同的操作系统。此外，在本发明应用于移动通信系统的情况下，移动终端的具体操作系统可以包括(但不限于)iOS、Android(安卓)、Windows Phone、Symbian等。
图1是示出了根据本发明的数据同步系统1000的应用场景的示意图。如图1所示，数据同步系统1000可以包括：(本地)数据库节点(设备)100、(远程)数据库节点(设备)200、以及中间设备300。下文中，当不特别指定时，将(本地)数据库节点100和(远程)数据库节点200统称为数据库节点。
为了清楚起见，图中仅示出了两个数据库节点100和200，但本发明并不局限于此，可以包括三个或更多数目的数据库节点等等。数据库节点100和200可以属于用户或者可以由用户操作。同样地，为了清楚起见，图中仅示出了一个中间设备300，但本发明并不局限于此，也可以包括两个或更多数目的中间设备300或没有中间设备300。此外，在本实施例中，用户选择对数据库节点100进行直接访问，并通过数据库节点100对整个分布式数据库中的数据进行访问。此时，相对于该用户而言，数据库节点100即为用户的本地数据库节点，而数据库节点200由于是用户通过数据库节点100来访问的，因此数据库节点200被视为远程数据库节点。因此在实际物理距离和虚拟网络距离的意义上，本地数据库节点100都不一定比远程数据库节点200更接近用户，但在本实施例中，将本地数据库节点100示出为比远程数据库节点200更接近用户。但本发明不限于此，在其他实施例中，用户可以选择数据库节点200作为其本地数据库节点，而相应地将数据库节点100视为远程数据库节点，并同样进行后续各种操作。
数据库节点100和200可以通过通信网络与中间设备300相连并与之进行通信。通信网络的示例可以包括(但不限于)：互联网、移动通信网络、固定线路(如xDSL、光纤等)等。
在下文中，将主要针对本地数据库节点100和远程数据库节点200来分别描述本发明的各实施例。本地数据库节点100和远程数据库节点200上分别承载有本地数据库和远程数据库。这两个数据库均为整个分布式数据库的一部分，或者如上所述，这两个数据库的内容理论上应当是一致的。因此需要在这两个数据库之间进行数据同步。
在图1所示实施例中，为了对本地数据库节点100和远程数据库节点200的数据进行同步，将根据本发明的实施例的数据同步客户端150和250(以下简称为客户端150和250)分别安装在本地数据库节点100和远程数据库节点200上。客户端150和250可以由用户以软件的形式白行安装在数据库节点中，或者可以由服务器生产厂商以硬件或固件的形式分别安装在数据库节点100和200中。在一些实施例中，客户端150和250可以是例如在用户购买了数据库节点100和200之后从网络中下载的专门用于本发明的应用软件。在另一些实施例中，客户端150和250可以是例如由生产厂商以固件或硬件形式预先安装在数据库节点中的应用程序。在又一些实施例中，客户端150和250可以是由生产厂商生产的硬件模块或数据库节点本身。
在下文中，将以手机(移动设备)保险为应用场景来详细描述本发明的实施例。然而应当意识到：本发明不限于该具体应用，实际上其可以应用于任何需要进行数据同步的应用场景。
在本实施例中，本地数据库节点100是与向用户销售手机并提供手机保险服务的零售商/保险提供商相关联的。当零售商向用户销售手机后，其和/或/保险提供商可以向用户提供手机保险服务。即，用户可以选择是否为手机上保险。在购买了手机保险之后，如果用户的手机无意中丢失、损坏，零售商(或保险提供商)可以为手机用户相应提供手机保险服务(例如，无偿提供新手机、提供手机上数据恢复服务等等)。因此，需要在本地数据库节点100中记录与手机及其保险服务相关的信息内容。
在一些实施例中，该信息内容可以包括以下至少一项：保单号、手机(移动设备)的市场价格、延保期限、延保价格、销售日期、用户姓名、用户邮箱、用户电话号码、用户所在国家、用户购买移动设备所在国家、用户购买货币、手机(移动设备)的型号、序列号、以及付款方式等等。当然，信息内容不限于上述这些项，也可以是与用户、手机、保险服务等相关的任何其他信息。
此外，为了方便用户在异地进行保险业务(例如，由于在外地出差时丢失手机，而需要在当地办理保险业务)，因此需要将用户在本地数据库节点100中的这些数据信息同步到各个其他数据库节点中(例如，远程数据库节点200)。接下来，将描述该同步过程的示例流程。
1、本地数据库节点侧
首先，本地数据库节点100根据用户或保险提供商的设定，在本地数据库节点的本地数据库的数据中查询出指定时间段(该时间段可以设置，例如，指定购买时间为昨天的所有相关数据)内的数据。该数据可以包括上面列出的各种数据。
接下来，本地数据库节点100根据查询出的数据创建本地数据文件。具体流程如下：
(1)首先，本地数据库节点100创建一个空白的本地数据文件。该本地数据文件的文件名可以用特定前缀和创建日期组成。该本地数据文件的格式可以符合本地数据库节点100和远程数据库节点200约定的格式，并使用约定的分隔符对各数据项进行分割。
(2)接下来，本地数据库节点100对所有查询出的数据进行批处理，以形成该本地数据文件的本地数据正文。该查询出的数据可以是一条或多条完整的数据记录，也可以是基于历史数据记录的增量文件。即，用于同步的数据可以是相关数据记录的完整版本，也可以是相对于上一次同步的数据的差异版本(增量版本)。通常在第一次同步时，必须使用数据的完整版本，以使得不具有该数据的其他数据库节点能够获得该数据的全部内容。并在后续同步时，通过使用增量版本，来减少所需要传输的数据量。当然，本发明不限于此，在本发明的一些实施例中，实际上可以传输本地数据库节点100想要同步的任何数据。
此外，由本地数据库节点100或由用户/服务提供商等给出预期的文件名或根据指定规则自动生成的文件名，并计算整个本地数据正文的数字摘要(例如，MD5值)。然后，将得到的与数字摘要值、预期文件名和本地数据正文的大小等相关的各信息写入该本地数据文件的文件头，并形成本地数据文件。在一个实施例中，可以通过合并本地数据正文和上述基于该本地数据正文生成的文件头，来形成本地数据文件。
(3)在计算过数字摘要值之后，可以可选地对本地数据文件的所有内容进行加密，最终形成加密的本地数据文件。
当创建了本地数据文件之后，本地数据库节点100可以通过加密传输协议(例如，安全文件传输协议(SFTP))将其上传到中间设备300(例如，SFTP服务器)的指定目录。如果上传失败，则进行一定次数的(例如，3次)重传。如果这些重传全部失败，则发告警邮件通知相关维护人员。
此外，可以在本地数据库节点100和/或其他指定位置处记录与此次上传相关的历史记录。该上传历史记录可以包括：本次上传的文件名称、其创建时间、数字摘要(MD5)值、本次上传是否成功、上传时间、本次上传的远程目录(目的目录)和本地目录(源目录)等。该历史记录可供维护人员查询，以确保本地数据库节点100正常工作。
在将本地数据库节点100中的数据上传到中间设备300之后，远程数据库节点200可以在规定时间(例如，每天定点或按照预定的时间间隔来获取)从中间设备300的指定目录获取该本地数据文件，并完成数据同步(下节中将详细描述该流程)。在一个实施例中，远程数据库节点200可以通过以下方式来获取本地数据文件：周期性检测中间设备300的指定目录中是否出现新的数据文件，且在新数据文件出现的情况下，下载该数据文件。
接下来，将具体描述远程数据库节点200获取由本地数据库节点100所同步的数据的流程。
2、远程数据库节点侧
请注意，对于远程数据库节点200的用户而言，该数据库节点200实际上是其用户的本地数据库节点。但是为了方便读者理解，此处仍然使用图1中所示的实施例来说明数据库节点200处的处理流程。因此，在该流程中，实际上可以将本地数据库节点100和远程数据库节点200加以互换，而不影响该流程的实际作用。
在一个实施例中，由本地数据库节点100如上所述地将其数据同步(上传)到中间设备300(例如，SFTP服务器)的指定目录下。在该情况下，远程数据库节点200需要通过程序监视该中间设备300上的指定目录中是否出现新的数据文件。在一个实施例中，该监视可以是周期性地。在另一个实施例中，该监视可以发生在由用户指定的任意时间上等等，本发明不限于此。当检测到出现新的数据文件时，继续后续流程。否则，继续监视。
请注意，在本地数据库节点100上传文件的过程中，该文件的文件名的后缀可以以字符串(例如，“tmp”)结尾。这表示这个文件正在同步，且只有当完全上传后才将其重命名为标准名称(例如，去掉tmp后缀)，以区分文件是否处于同步状态。因此，远程数据库节点200在检测到具有标准名称的数据文件之前，并不会认为有新的数据文件出现。当然，在本发明的其他实施例中，也可以使用其他方式来避免远程数据库节点200在本地数据库节点100上传完成之前就下载未完成的部分数据文件。例如，在一个实施例中，远程数据库节点200可以使用SFTP服务器中与传输文件是否完成相关的标志来判断是否上传完成。在另一个实施例中，远程数据库节点200可以使用上传文件的文件头中的正文长度来判断上传是否完成。在又一个实施例中，远程数据库节点200可以通过多次获取该文件的长度并进行比较来判断是否正在上传过程中。总之，在本发明的实施例中，远程数据库节点200可以通过各种方式来判断本地数据库节点100上传数据是否完成，以避免提前获取未完成的上传数据。
当远程数据库节点200的监视程序发现新的数据文件后，其将自动尝试将该数据文件下载到本地的指定目录。如果下载失败，则会进行一定次数(该次数可以由用户或服务提供商来设置，例如3次)的重试。如果全部重试都失败，则发告警邮件通知相关维护人员。
此外，可以将与本次下载相关的历史信息记录到远程数据库节点200中。与上传历史信息类似地，该下载历史记录包括：本次下载的文件名称、其创建时间、数字摘要(MD5)值、本次下载是否成功、下载时间、本次下载的远程目录(源目录)和本地目录(目的目录)等。该历史记录可供维护人员查询，以确保远程数据库节点200正常工作。
在一个实施例中，当数据文件下载成功后，如果该数据文件是被加密的数据文件，则远程数据库节点200对其进行相应解密。在解密之后，远程数据库节点200需要对数据文件的内容进行解析。解析后的内容包括上述本地数据文件的文件头和本地数据正文部分。如上所述，该文件头中可以含有本地数据正文的数字摘要(MD5值)、文件名和文件大小信息。
远程数据库节点200对解析出的本地数据正文进行数字摘要(MD5)处理，得到其数字摘要值，并将该数字摘要值和文件头信息中含有的数字摘要值进行匹配。如果一致，则证明该本地数据文件的内容未被篡改或丢失。相反，如果不一致，则证明该本地数据文件的内容已被篡改或丢失，其数据不可靠。在解析或比对过程中，如果发现异常数据，则会发邮件通知相关维护人员以进行相应的处理操作。
在确定数字摘要值一致后，根据上述约定好的文件格式，将本地数据文件的本地数据正文部分的数据解析为远程数据库节点200上的远程数据库所能理解的一条或多条数据项，并对远程数据库节点200中的相应数据进行操作。操作可以包括例如：新增数据、修改数据、以及删除数据。此外，除了前文中描述的数据内容之外，该数据还可以包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
此外，在解析并处理过数据之后，将与解析相关的信息(例如，解析是否成功、解析时间等)也作为下载历史信息保存在远程数据库节点200中。至此，在本地数据库节点100和远程数据库节点200之间的数据同步过程完成。
使用上述方法，实现了在本地数据库节点100和远程数据库节点200之间的数据的定时同步，降低了对系统和网络性能的影响。此外，通过对数据传输进行加密处理(包括文件加密和传输加密)，从而在及时完成数据同步的同时保证了数据的安全性。
此外，尽管在上述实施例中使用了一个中间设备300，但在本发明的其他实施例中，可以使用多个中间设备300来分别同步一部分数据，或者也可以不存在中间设备300，而由(一个或多个)本地数据库节点100直接将数据上传到(一个或多个)远程数据库节点200，而无需远程数据库节点200的主动处理(包括上述远程数据库节点侧的处理)。此外，也可以由(一个或多个)远程数据库节点200从(一个或多个)本地数据库节点100获取数据文件，而无需本地数据库节点100的主动处理(包括上述本地数据库节点侧的处理)。
图2是示出了根据本发明实施例的数据同步方法400的流程图。如图2所示，数据同步方法400可以包括步骤S410、S420和S430。根据本发明，方法400的一些步骤可以单独执行或组合执行，以及可以并行执行或顺序执行，并不局限于图2所示的具体操作顺序。在一些实施例中，方法400可以由图1所示的本地数据库节点(数据同步设备)100或安装在本地数据库节点100中的客户端150执行。
此外，图3是示出了根据本发明实施例的另一数据同步方法450的流程图。如图3所示，数据同步方法450可以包括步骤S460、S470、S480和S490。根据本发明，方法450的一些步骤可以单独执行或组合执行，以及可以并行执行或顺序执行，并不局限于图3所示的具体操作顺序。在一些实施例中，方法450可以由图1所示的远程数据库节点(数据同步设备)200或安装在远程数据库节200中的客户端250执行。
图4是示出了根据本发明实施例的用于同步多个数据库的设备(本地数据库节点)100的框图，该多个数据库可以包括至少一个远程数据库和在该设备上的本地数据库。如图4所示，设备100可以包括：生成单元110、合并单元120和上传单元130。
生成单元110用于在预定同步时间，基于本地数据库中的数据，生成本地数据正文。生成单元110可以是设备100的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以与设备100的存储器(例如，硬盘、软盘、光盘等)相配合，在预定同步时间，基于存储器中存储的本地数据库的数据，生成本地数据正文。
合并单元120用于合并该本地数据正文和基于该本地数据正文生成的文件头，以形成本地数据文件。合并单元120可以是设备100的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以将本地数据正文与基于本地数据正文生成的文件头合并，进而形成本地数据文件。
上传单元130用于向至少一个中间设备上传该本地数据文件，供至少一个远程数据库在另一预定同步时间从该至少一个中间设备获取本地数据文件。上传单元130可以是设备100的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以与设备100的通信部分(例如，无线收发信机、以太网卡、xDSL调制解调器等)相配合，向至少一个中间设备上传本地数据文件，供至少一个远程数据库在另一预定同步时间从该至少一个中间设备获取本地数据文件。
此外，设备100还可以包括图2中未示出的其它单元，例如加密单元和记录单元。加密单元用于对合并单元120所生成的本地数据文件加密，以增强数据传输期间的安全性。记录单元用于在本地数据库中记录与本次同步相关的历史记录，以供维护人员查询并确定设备100是否正常工作。
图5是示出了根据本发明实施例的用于同步多个数据库的另一设备(远程数据库节点)200的框图，该多个数据库包括至少一个远程数据库和在该设备上的本地数据库。此处请注意：尽管设备200在上述实施例中对应于远程数据库节点200，但是仍然将其上承载的数据库称为“本地”数据库，以指明该数据库相对于其他数据库是在设备200本地的数据库，并进而方便下面说明之用。
如图5所示，设备200可以包括：监视单元210、文件获取单元220、正文获取单元230和处理单元240。
监视单元210用于监视至少一个中间设备上是否存在待同步的由至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件。监视单元210可以是设备200的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以与设备200的通信部分(例如，无线收发信机、以太网卡、xDSL调制解调器)相配合，监视至少一个中间设备上是否存在待同步的由至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件。
文件获取单元220用于在发现至少一个中间设备上存在待同步的远程数据文件的情况下，从该至少一个中间设备获取远程数据文件。文件获取单元220可以是设备200的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以与设备200的通信部分(例如，无线收发信机、以太网卡、xDSL调制解调器)和存储器(例如，硬盘、软盘、光盘等)相配合，在发现至少一个中间设备上存在待同步的远程数据文件的情况下，从该至少一个中间设备获取远程数据文件，并保存到本地存储器上。
正文获取单元230用于根据远程数据文件的文件头，获取远程数据文件的远程数据正文。在一个实施例中，该远程数据文件可以对应于由本地数据库节点100上传的本地数据文件。正文获取单元230可以是设备200的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以根据获取到的远程数据文件的文件头，获取远程数据文件的远程数据正文。
处理单元240用于根据远程数据正文来处理本地数据库中的相应数据。处理单元240可以是设备200的中央处理单元(CPU)、数字信号处理器(DSP)、微处理器、微控制器等等，其可以与设备200的存储器(例如，硬盘、软盘、光盘等)相配合，根据远程数据正文来处理在存储器中存储的本地数据库中的相应数据。例如，根据远程数据正文来新增、修改和/或删除本地数据库中的相应数据。
此外，设备200还可以包括图3中未示出的其它单元，例如解密单元和记录单元。解密单元用于对文件获取单元220获取到的远程数据文件解密，以增强数据传输期间的安全性。记录单元用于在本地数据库中记录与本次同步相关的历史记录，以供维护人员查询并确定设备200是否正常工作。
以下将结合图2和图4，对根据本发明实施例的数据同步方法400和数据同步设备(本地数据库节点)100进行详细的描述。
方法400开始于步骤S410，在步骤S410中，可以由设备100的生成单元110在预定同步时间，基于本地数据库中的数据，生成本地数据正文。
在步骤S420中，可以由设备100的合并单元120合并本地数据正文和基于本地数据正文生成的文件头，以形成本地数据文件。
在步骤S430中，可以由设备100的上传单元130向至少一个中间设备上传本地数据文件，供至少一个远程数据库在另一预定同步时间从该至少一个中间设备获取本地数据文件。
在一些实施例中，本地数据库中的数据可以包括以下至少一项：保单号、移动设备的市场价格、延保期限、延保价格、销售日期、用户姓名、用户邮箱、用户电话号码、用户所在国家、用户购买移动设备所在国家、用户购买货币、移动设备的型号、序列号、以及付款方式。
在一些实施例中，本地数据库中的数据可以是本地数据库中在指定时间段期间新增、修改和/或删除的数据。
在一些实施例中，步骤S410可以包括：创建本地空白数据文件；以及在本地空白数据文件中，以预先规定的数据格式将本地数据库中的数据填入本地空白数据文件中，以形成本地数据正文。
在一些实施例中，步骤b)可以包括：计算本地数据正文的数字摘要；以及至少根据该数字摘要、本地数据文件的预期文件名、以及本地数据正文的大小，生成本地数据文件的文件头。
在一些实施例中，数字摘要可以是MD5值。
在一些实施例中，在步骤S420和S430之间，该方法还可以包括：对本地数据文件加密。
在一些实施例中，步骤S430可以包括：使用加密传输协议向至少一个中间设备上传本地数据文件。
在一些实施例中，加密传输协议可以是安全文件传输协议(SFTP)。
在一些实施例中，在步骤S430中，如果上传失败，则可以进行预定次数的重传。
在一些实施例中，在步骤S430中，如果重传全部失败，则可以向相关人员发送相应的告警邮件。
在一些实施例中，在步骤S430之后，该方法还可以包括：在本地数据库中记录与本次同步相关的历史记录。
在一些实施例中，历史记录可以包括以下至少一项：所述本地数据文件的文件名、所述本地数据文件的创建时间、所述本地数据正文的数字摘要值、上传是否成功、上传时间、在所述至少一个中间设备上存放所述本地数据文件的存储目录、以及存放所述本地数据文件的本地存储目录。
以下将结合图3和图5，对根据本发明实施例的另一数据同步方法450和数据同步设备(远程数据库节点)200进行详细的描述。
方法450开始于步骤S460，在步骤S460中，可以由设备200的监视单元210监视至少一个中间设备上是否存在待同步的由至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件。
在步骤S470中，可以由设备200的文件获取单元220在发现至少一个中间设备上存在待同步的远程数据文件的情况下，从该至少一个中间设备获取远程数据文件。
在步骤S480中，可以由设备200的正文获取单元230根据远程数据文件的文件头，获取该远程数据文件的远程数据正文。
在步骤S490中，可以由设备200的处理单元240根据远程数据正文来处理本地数据库中的相应数据。
在一些实施例中，远程数据正文可以包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
在一些实施例中，步骤S490中的处理的类型可以包括：新增数据、修改数据、以及删除数据。
在一些实施例中，步骤S490还可以包括：计算远程数据正文的数字摘要；以及比较计算出的数字摘要和远程数据文件的文件头中包括的数字摘要：如果两个数字摘要匹配，则确定远程数据正文未被篡改或丢失并继续后续步骤；否则确定远程数据正文已被篡改或丢失，该方法直接结束。
在一些实施例中，数字摘要可以是MD5值。
在一些实施例中，在步骤S470和S480之间，该方法还可以包括：对远程数据文件解密。
在一些实施例中，步骤S470可以包括：使用加密传输协议从至少一个中间设备获取远程数据文件。
在一些实施例中，加密传输协议可以是安全文件传输协议(SFTP)。
在一些实施例中，在步骤S470中，如果获取远程数据文件失败，则可以进行预定次数的重传。
在一些实施例中，在步骤S470中，如果重传全部失败，则可以向相关人员发送相应的告警邮件。
在一些实施例中，在步骤S470之后，该方法还可以包括：在本地数据库中记录与本次同步相关的历史记录。
至此已经结合优选实施例对本发明进行了描述。应该理解，本领域技术人员在不脱离本发明的精神和范围的情况下，可以进行各种其它的改变、替换和添加。因此，本发明的范围不局限于上述特定实施例，而应由所附权利要求所限定。

Claims (23)

1.一种用于同步多个数据库的方法，所述多个数据库包括本地数据库和至少一个远程数据库，所述方法包括：
a)监视至少一个中间设备上是否存在待同步的由所述至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件；
b)在发现所述至少一个中间设备上存在待同步的远程数据文件的情况下，从所述至少一个中间设备获取所述远程数据文件；
c)根据所述远程数据文件的文件头，获取所述远程数据文件的远程数据正文；以及
d)根据所述远程数据正文来处理所述本地数据库中的相应数据。
2.根据权利要求1所述的方法，其中，所述远程数据正文包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
3.根据权利要求1所述的方法，其中，步骤d)中的处理的类型包括：新增数据、修改数据、以及删除数据。
4.根据权利要求1所述的方法，其中，步骤c)还包括：计算所述远程数据正文的数字摘要；以及比较计算出的数字摘要和所述远程数据文件的文件头中包括的数字摘要：如果两个数字摘要匹配，则确定所述远程数据正文未被篡改或丢失并继续后续步骤；否则确定所述远程数据正文已被篡改或丢失，所述方法直接结束。
5.根据权利要求4所述的方法，其中，所述数字摘要是MD5值。
6.根据权利要求1所述的方法，其中，在步骤b)和c)之间，所述方法还包括：对所述远程数据文件解密。
7.根据权利要求1所述的方法，其中，步骤b)包括：使用加密传输协议从所述至少一个中间设备获取所述远程数据文件。
8.根据权利要求7所述的方法，其中，所述加密传输协议是安全文件传输协议(SFTP)。
9.根据权利要求1所述的方法，其中，在步骤b)中，如果获取所述远程数据文件失败，则进行预定次数的重传。
10.根据权利要求9所述的方法，其中，在步骤b)中，如果所述重传全部失败，则向相关人员发送相应的告警邮件。
11.根据权利要求1所述的方法，其中，在步骤b)之后，所述方法还包括：在所述本地数据库中记录与本次同步相关的历史记录。
12.一种用于同步多个数据库的设备，所述多个数据库包括至少一个远程数据库和由所述设备承载的本地数据库，所述设备包括：
监视单元，用于监视至少一个中间设备上是否存在待同步的由所述至少一个远程数据库中的一个或多个远程数据库上传的远程数据文件；
文件获取单元，用于在发现所述至少一个中间设备上存在待同步的远程数据文件的情况下，从所述至少一个中间设备获取所述远程数据文件；
正文获取单元，用于根据所述远程数据文件的文件头，获取所述远程数据文件的远程数据正文；以及
处理单元，用于根据所述远程数据正文来处理所述本地数据库中的相应数据。
13.根据权利要求12所述的设备，其中，所述远程数据正文包括以下至少一项：理赔状态信息、派工信息、物流信息、保单号、新移动设备的设备标识、以及旧移动设备的设备标识。
14.根据权利要求12所述的设备，其中，所述处理单元的处理的类型包括：新增数据、修改数据、以及删除数据。
15.根据权利要求12所述的设备，其中，所述正文获取单元还用于：
计算所述远程数据正文的数字摘要；以及
比较计算出的数字摘要和所述远程数据文件的文件头中包括的数字摘要：
如果两个数字摘要匹配，则确定所述远程数据正文未被篡改或丢失并继续后续步骤；
否则确定所述远程数据正文已被篡改或丢失，所述设备的处理直接结束。
16.根据权利要求15所述的设备，其中，所述数字摘要是MD5值。
17.根据权利要求12所述的设备，其中，所述设备还包括：解密单元，用于对所述远程数据文件解密。
18.根据权利要求12所述的设备，其中，所述文件获取单元还用于：使用加密传输协议从所述至少一个中间设备获取所述远程数据文件。
19.根据权利要求18所述的设备，其中，所述加密传输协议是安全文件传输协议(SFTP)。
20.根据权利要求12所述的设备，其中，所述文件获取单元还用于：如果获取所述远程数据文件失败，则进行预定次数的重传。
21.根据权利要求20所述的设备，其中，所述文件获取单元还用于：如果所述重传全部失败，则向相关人员发送相应的告警邮件。
22.根据权利要求12所述的设备，其中，所述设备还包括：记录单元，用于在所述本地数据库中记录与本次同步相关的历史记录。
23.一种用于同步多个数据库的系统，所述多个数据库包括本地数据库和至少一个远程数据库，该系统包括承载所述本地数据库的根据权利要求12～22中任一项所述的设备、以及承载所述至少一个远程数据库的至少一个远程数据库节点、以及至少一个中间设备。
CN201310394668.4A 2013-09-03 2013-09-03 用于数据同步的方法、设备和系统 Pending CN104426975A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310394668.4A CN104426975A (zh) 2013-09-03 2013-09-03 用于数据同步的方法、设备和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310394668.4A CN104426975A (zh) 2013-09-03 2013-09-03 用于数据同步的方法、设备和系统

Publications (1)

Publication Number Publication Date
CN104426975A true CN104426975A (zh) 2015-03-18

Family

ID=52974888

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310394668.4A Pending CN104426975A (zh) 2013-09-03 2013-09-03 用于数据同步的方法、设备和系统

Country Status (1)

Country Link
CN (1) CN104426975A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107491565A (zh) * 2017-10-10 2017-12-19 语联网（武汉）信息技术有限公司 一种数据同步方法
CN108027828A (zh) * 2015-09-14 2018-05-11 微软技术许可有限责任公司 与无状态同步节点的托管文件同步
CN109561125A (zh) * 2017-09-27 2019-04-02 阿里巴巴集团控股有限公司 一种数据传输方法、分布式系统中复制数据的方法及装置
CN110933025A (zh) * 2019-10-21 2020-03-27 武汉神库小匠科技有限公司 多源异构数据跨域同步共享存储方法、装置、设备及介质
CN111507066A (zh) * 2020-04-21 2020-08-07 北京思特奇信息技术股份有限公司 一种上传加载文件并解析入库方法及系统
WO2021027126A1 (zh) * 2019-08-14 2021-02-18 平安科技（深圳）有限公司 数据库检测方法、装置、设备及计算机可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101464888A (zh) * 2008-12-29 2009-06-24 深圳市迈科龙电子有限公司 信息系统平滑升级的装置和方法
CN102082807A (zh) * 2009-12-01 2011-06-01 突触计算机系统（上海）有限公司 基于多协议的文件传输方法及装置
EP2369494A1 (en) * 2008-12-23 2011-09-28 ZTE Corporation Web application based database system and data management method therof
CN102355497A (zh) * 2011-09-28 2012-02-15 中国铁道科学研究院电子计算技术研究所 数据同步方法
CN102930225A (zh) * 2012-10-25 2013-02-13 中国航天科工集团第二研究院七〇六所 基于密级标识的电子文档访问控制方法
CN103152418A (zh) * 2013-03-08 2013-06-12 上海伊邦医药信息科技有限公司 线下与线上互联网商品零售系统间的数据同步系统和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2369494A1 (en) * 2008-12-23 2011-09-28 ZTE Corporation Web application based database system and data management method therof
CN101464888A (zh) * 2008-12-29 2009-06-24 深圳市迈科龙电子有限公司 信息系统平滑升级的装置和方法
CN102082807A (zh) * 2009-12-01 2011-06-01 突触计算机系统（上海）有限公司 基于多协议的文件传输方法及装置
CN102355497A (zh) * 2011-09-28 2012-02-15 中国铁道科学研究院电子计算技术研究所 数据同步方法
CN102930225A (zh) * 2012-10-25 2013-02-13 中国航天科工集团第二研究院七〇六所 基于密级标识的电子文档访问控制方法
CN103152418A (zh) * 2013-03-08 2013-06-12 上海伊邦医药信息科技有限公司 线下与线上互联网商品零售系统间的数据同步系统和方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108027828A (zh) * 2015-09-14 2018-05-11 微软技术许可有限责任公司 与无状态同步节点的托管文件同步
CN108027828B (zh) * 2015-09-14 2022-04-08 微软技术许可有限责任公司 与无状态同步节点的托管文件同步
US11943291B2 (en) 2015-09-14 2024-03-26 Microsoft Technology Licensing, Llc Hosted file sync with stateless sync nodes
CN109561125A (zh) * 2017-09-27 2019-04-02 阿里巴巴集团控股有限公司 一种数据传输方法、分布式系统中复制数据的方法及装置
CN107491565A (zh) * 2017-10-10 2017-12-19 语联网（武汉）信息技术有限公司 一种数据同步方法
CN107491565B (zh) * 2017-10-10 2020-01-14 语联网（武汉）信息技术有限公司 一种数据同步方法
WO2021027126A1 (zh) * 2019-08-14 2021-02-18 平安科技（深圳）有限公司 数据库检测方法、装置、设备及计算机可读存储介质
CN110933025A (zh) * 2019-10-21 2020-03-27 武汉神库小匠科技有限公司 多源异构数据跨域同步共享存储方法、装置、设备及介质
CN111507066A (zh) * 2020-04-21 2020-08-07 北京思特奇信息技术股份有限公司 一种上传加载文件并解析入库方法及系统
CN111507066B (zh) * 2020-04-21 2024-01-12 北京思特奇信息技术股份有限公司 一种上传加载文件并解析入库方法及系统

Similar Documents

Publication Publication Date Title
CN103455599A (zh) 用于数据同步的方法、设备和系统
CN109522330B (zh) 基于区块链的云平台数据处理方法、装置、设备及介质
US11569982B2 (en) Blockchain compression using summary and padding blocks
CN104426975A (zh) 用于数据同步的方法、设备和系统
CN102307210B (zh) 一种数据下载系统及其数据管理和下载方法
US8510404B2 (en) Peer to peer Synchronization system and method
CN109522363B (zh) 基于区块链的云平台同步方法、系统、设备及存储介质
US9442803B2 (en) Method and system of distributed backup for computer devices in a network
CN102075542A (zh) 一种云计算数据安全支撑平台
JP2009512077A (ja) データ・バックアップのための方法およびシステム
CN109302495A (zh) 一种数据存储方法及装置
CN111597567B (zh) 数据处理方法、装置、节点设备及存储介质
CN110061887B (zh) 一种基于区块链的流量统计方法、装置和设备
CN108769153B (zh) 一种网络应用的数据处理方法及系统
CN109491645A (zh) 基于界面元素的埋点方法、装置、计算机设备及存储介质
CN111488372A (zh) 一种数据处理方法、设备及存储介质
CN104798052A (zh) 消费者匹配的方法和装置
CN103475721A (zh) 一种数字资产的更新系统及其方法
US9332405B2 (en) Short message backup method, mobile terminal, and server
CN111382458A (zh) 数据分批封存方法、装置及计算机存储介质
CN114036495B (zh) 一种更新私有化部署验证码系统的方法及装置
CN113765675B (zh) 一种交易数据处理方法、装置、设备以及介质
TWI694704B (zh) 數據分批封存方法、裝置及電腦存儲介質
US11301488B2 (en) Method, electronic device and computer program product for data processing
CN115687505A (zh) 日志记录和查询方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150318

WD01 Invention patent application deemed withdrawn after publication