CN112256484A - 一种数据备份的方法、装置和系统 - Google Patents

Abstract

本说明书提供一种数据备份的方法、装置和系统，该方法包括：接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识，判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识，若存在，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。通过该方法，可以避免主节点和备节点因信息同步不一致，导致服务提供服务的技术问题。

Description

一种数据备份的方法、装置和系统

技术领域

本公开涉及通信技术领域，尤其涉及一种数据备份的方法、装置和系统。

背景技术

高可用性，是用来描述一个计算机系统持续不间断提供服务的能力。目前，计算机系统向外提供的服务一般依赖网络提供给不同终端访问。如果提供服务的某台计算机，在硬件、网络或系统本身故障的情况下，无法提供服务，我们就称该计算机节点down掉，如果提供服务的只有一台计算机，则故障会导致系统彻底失去持续服务能力，无法保证高可用性。基于这种场景，当前主流的解决方式是使用主备模式，包括一主一备和一主多备等不同形式，在主节点无法提供服务时，由备节点继续向外提供服务，保证服务的高可用性。

浮动IP，浮动IP是可以在主节点或备节点上临时存在的IP，可以在主节点和备节点上浮动，同一时刻浮动IP只会在一个节点上。

双机热备，是高可用性的一种实现方式，采用一主一备形式。目前主流的应用软件和数据库软件，大部分都有支持双机热备的方案。如MySQL、Postgresql等数据库，修改相应的配置就可以实现主备数据库之间的数据同步，实现双机热备。

双机热备实现的高可用，是以主节点down时，备节点状态为up(可服务)作为前提，此时备节点的数据与主节点的数据可以保持一致，备节点接替故障主节点向外提供服务是没问题的。而如果备节点先down，主备节点数据无法保持一致，这时主节点down，备节点再up，备节点接替主节点向外提供服务时，会丢失一部分主节点未同步到备节点的数据。备节点此时向外提供服务更新的数据，因主节点down，无法通知到主节点，如果备节点此时down，主节点再up，又会造成备节点更新的数据丢失。这种主、备节点交替up、down场景下，数据一致性是难以保证的。

发明内容

本说明书提供了一种数据备份的方法、装置和系统，通过该方法，可以避免主节点和备节点因信息同步不一致，导致服务提供服务的技术问题。

本说明书实施例提供了一种数据备份的方法，该方法应用于存储组件，所述存储组件分别连接主节点设备和备节点设备，所述方法包括：

接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

若存在，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

通过上述实施例可以看出，备节点设备可以主动向存储组件获取与主键标识对应的数据信息，从而可以避免备节点设备中的数据与主节点设备中的数据不一致的情况发生。

可选的，获取所述主键标识表的方法包括：

接收主节点设备发送的目标主键标识，所述目标主键标识用于标识该主节点设备执行的待执行任务；

将获取的目标主键标识记录在所述主键标识表中。

通过上述实施例可以看出，当主节点在处理待执行任务时，可以主动向存储组件发送与待执行任务对应的主键标识和数据信息，以保证存储组件中存储的数据为最新的数据。

可选的，该方法还包括：

接收主节点设备发送的与目标主键标识对应的目标数据信息；

将所述目标数据信息与所述目标主键标识对应存储。

本说明书实施例还提供了一种数据备份的方法，该方法应用于主节点设备，所述主节点设备连接存储组件，所述方法包括：

执行目标待执行任务；

向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

从上述实施例可以看出，主节点设备可以主动向存储组件同步其正处理的待执行任务的主键标识以及对应的数据信息，以使备节电设备在预设条件下从存储组件获取该数据信息。

可选的，在向存储组件同步目标主键标识后，为所述目标主键标识设置数据补偿定时；

当所述数据补充定时超时后，检测所述存储组件中是否存在所述目标主键标识，若存在，则向存储组件同步与所述目标主键标识对应的数据信息。

本说明书实施例还提供了一种数据备份的方法，该方法应用于备节点设备，所述备节点设备连接存储组件，所述方法包括：

监控存储组件中新增的第二主键标识；

判断自身是否存在与所述第二主键标识对应的数据信息；

若不存在，则向所述存储组件发送数据同步请求，所述数据同步请求中携带所述第二主键标识，以使所述存储组件根据所述数据同步请求发送与所述第二主键标识对应的数据信息。

通过上述实施例可以看出，备节点设备可以实时监控存储组件中是否有新增的主键标识，若有，且自身尚未存储与该新增主键标识对应的数据信息时，可以从存储组件中获取该数据信息。

可选的，若判断自身存在与所述第二主键标识对应的数据信息时，所述方法还包括：

向所述存储组件发送删除通知，所述删除通知中携带第二主键标识，以使所述存储组件在接收到所述删除通知后，删除第二主键标识。

本说明书实施例还提供了一种数据备份系统，该数据备份系统包括：存储组件，以及与所述存储组件连接的主节点设备和备节点设备；

所述主节点设备执行目标待执行任务，并向存储组件同步目标主键标识以及与所述目标主键标识对应的数据信息，所述目标主键标识用于标识该目标待执行任务；

所述备节点设备监控所述存储组件中新增目标主键标识，判断自身是否存在与所述新增目标主键标识对应的数据信息，若不存在，则向所述存储组件发送数据同步请求，所述数据同步请求携带目标主键标识；

所述存储组件接收到备节点设备发送数据同步请求，根据所述数据同步请求中携带的目标主键标识，向所述备节点设备发送与所述目标主键标识对应的数据信息。

本说明书实施例还提供了一种数据备份的装置，该装置应用于存储组件，该存储组件分别连接主节点设备和备节点设备，该装置包括：

接收模块，用于接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

处理模块，用于判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

所述处理模块，还用于若判断存在所述第一主键标识，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

本说明书实施例还提供了一种数据备份的装置，该装置应用于主节点设备，所述主节点设备连接存储组件，该装置包括：

执行模块，用于执行目标待执行任务；

处理模块，用于向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

所述处理模块，还用于向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

本说明书实施例还提供了一种数据备份的装置，该装置应用于备节点设备，所述备节点设备连接存储组件，该装置包括：

监控模块，用于监控存储组件中新增的第二主键标识；

处理模块，用于判断自身是否存在与所述第二主键标识对应的数据信息；

所述处理模块，还用于当判断不存在时，则向所述存储组件发送数据同步请求，所述数据同步请求中携带所述第二主键标识，以使所述存储组件根据所述数据同步请求发送与所述第二主键标识对应的数据信息。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本说明书的实施例，并与说明书一起用于解释本说明书的原理。

图1为本公开实施例提供的一种数据备份的方法的流程示意图；

图2为本公开实施例提供的一种数据备份的方法的架构示意图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书的一些方面相一致的装置和方法的例子。

在本说明书使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书。在本说明书和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。

应当理解，尽管在本说明书可能采用术语目标、第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。

在本说明书中，存储组件可以为具备存储能力的服务器(分布式服务器)，例如zookeeper组件。

目前，在利用zookeeper组件进行存储的过程中，主备节点通过在zookeeper中写入同一个临时节点A，写入成功的作为主用工作节点处理业务，写入失败的作为备用工作节点不处理业务。当工作节点故障down掉，备用工作节点自动完成升主。

具体的，主备节点上线时同时向zookeeper注册临时节点A并写入自身的IP地址，注册成功的节点X将其数据库切换为Active状态，注册失败的节点Y将其数据库切换为Standby状态，切换完成后主备节点同时监听zookeeper上的临时节点A。

当Active数据库所在的节点X离线后，zookeeper上的临时节点A会消失并发送广播通知给监听A的所有节点(X和Y，由于X已经离线，只有Y会收到该广播消息)，为了防止数据库进行无效的主备切换(节点X离线后立刻又恢复，这时候是不需要进行主备切换的)，节点Y收到广播事件后等待5秒再重新向zookeeper注册临时节点A并写入自身的IP地址，注册成功则将其数据库切换为Active状态，注册失败则保持数据库的Standby状态。

当节点X上线后重新向zookeeper注册临时节点A，注册失败后将其数据库切换为Standby状态(由于步骤2中节点Y注册A成功，临时节点A已经存在)，至此完成数据库节点X和Y的主备互换。

然而，当存在主备节点交替up/down场景时，备工作节点故障down掉，主工作节点增量数据无法同步给备，备节点无法保持与主节点的数据一致性，备节点up时，主节点down掉，备节点升主，将会丢失上一次主工作节点的增量数据。

为了解决上述技术问题，本说明书实施例提供了一种数据备份的方法，如图1所示，该方法应用于存储组件，该存储组件分别连接主节点设备和备节点设备，该方法包括：

S101接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

S102判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

S103若存在，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

在本实施例中，存储组件可以获取主节点设备正在处理的任务(待执行任务)的主键标识以及对应的数据信息，并且在备节点数据发送数据同步请求时，可以将对应的数据信息发送给备节点设备，以使备节点设备能够同步到最新的数据信息。

在步骤S101中，备节点设备可以实时监控存储组件中主键标识的变化情况，当获知存储组件中新增了主键标识(例如，监控到存储组件中新增了第二主键标识)，则可向存储组件发送数据同步请求，且在该数据同步请求中添加第二主键标识，以使存储组件知晓需要同步那些数据信息。

在一种实现方式中，由于主节点设备和备节点设备间的数据库可以相互通信(实现主备功能)，主节点在执行目标待执行任务时，所产生的数据可以通过主节点设备的数据库发送给备节点设备的数据库，以实现主备数据同步的功能。

在执行步骤S101前，当备节点设备获知存储组件中新增第二主键标识时，可以先判断自身是否存在与该第二组件标识对应的数据信息，若存在，则说明备节点设备已经从主节点设备的数据库中通过了与该第二组件标识对应的数据信息。

此时备节点设备可以选择不向存储组件发送数据同步请求，或者，可以选择向存储组件发送删除通知，该删除通知中携带第二主键标识，以使所述存储组件在接收到所述删除通知后，删除第二主键标识，从而可以节省存储组件的存储资源。

若不存在，则说明备节点设备未能从主节点设备成功通过数据信息，此时，备节点设备可以向存储组件发送数据同步请求，以获取相应的数据信息，从而实现数据同步。

在步骤S102中，存储组件在收到备节点设备发送的数据同步请求后，可以根据其携带的第二主键标识从主键标识表中查找是否存在匹配的第一主键标识(需要强调的是，此第一主键标识、第二主键标识仅为了描述清晰进行的区分，当第一主键标识和第二主键标识匹配时，则可认为第一主键标识与第二主键标识相同)，若存在，则将第一主键标识对应的数据信息发送给备节点设备。

在本实施例中，存储组件存储的主键标识表可以是存储组件根据主节点设备发送的主键标识来生成的。其中该主键标识可以为报文的take id。

具体的，如图2所示，本说明书实施例还提供了一种数据备份的方法，该方法应用于主节点设备，该主节点设备连接存储组件，该方法包括：

S201执行目标待执行任务；

S202向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

S203向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

在执行步骤S202后，主节点设备可以为发送给存储组件的目标主键标识设置数据补偿定时，该数据补偿时间可是设置为5秒、10秒等，待数据补偿时间超时后，检查存储组件中是否还存在该目标主键标识，若存在，则向存储组件同步与所述目标主键标识对应的数据信息。

其中，如前实施例所述，主节点设备和备节点设备的数据库间可能存在同步通道，在主节点设备处理目标待执行任务时，主节点设备可能已经将目标待执行任务的数据信息发送给了备节点设备。

而当主节点设备将目标主键标识发送给存储组件后，备节点设备可获知该目标主键标识(此处备节点设备获知的目标主键标识为前述实施例中的第二主键标识)，此时，若备节点设备确定数据库中已经存在与目标主键标识对应的数据信息后，可能会向存储组件发送删除通知，告知存储组件删除该目标主键标识，该步骤可能会在3秒内完成(此处仅例举参考时间)。

而主节点设备设置的数据补偿定时大于该3秒，例如设置为5秒，当主节点设备检查存储组件中依然存在目标主键标识时，则可认为备节点设备没有给存储组件发送删除通知(也就是说备节点设备没有与主节点设备同步)，此时，存在备节点设备需要从存储组件中获取与目标主键标识对应的数据信息，那么主节点设备则将与目标主键标识对应的数据信息发送给存储组件。反之，若发现存储组件中不存在该目标主键标识时，则认为备节点设备已经从主节点设备同步了数据，则此时，主节点设备不在将数据信息发送该存储组件。

在本实施例中，存储组件中主键标识表则根据主节点设备发送的目标主键标识，并根据该目标主键标识生成的表，同时该主键标识表中的每个目标主键标识关联有对应的数据信息。

通过上述实施例可以看出，备节点设备可以主动向存储组件获取与主键标识对应的数据信息，从而可以避免备节点设备中的数据与主节点设备中的数据不一致的情况发生。

本说明书实施例还提供了一种数据备份系统，所述数据备份系统包括：存储组件，以及与所述存储组件连接的主节点设备和备节点设备；

S303所述主节点设备执行目标待执行任务，并向存储组件同步目标主键标识以及与所述目标主键标识对应的数据信息，所述目标主键标识用于标识该目标待执行任务；

S304所述备节点设备监控所述存储组件中新增目标主键标识，判断自身是否存在与所述新增目标主键标识对应的数据信息，若不存在，则向所述存储组件发送数据同步请求，所述数据同步请求携带目标主键标识；

S305所述存储组件接收到备节点设备发送数据同步请求，根据所述数据同步请求中携带的目标主键标识，向所述备节点设备发送与所述目标主键标识对应的数据信息。

基于与上述方法、系统相同的思想构思，本说明书实施例还提供了一种数据备份的装置，该装置应用于存储组件，该存储组件分别连接主节点设备和备节点设备，该装置包括：

接收模块，用于接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

处理模块，用于判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

所述处理模块，还用于若判断存在所述第一主键标识，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

本说明书实施例还提供了一种数据备份的装置，该装置应用于主节点设备，所述主节点设备连接存储组件，该装置包括：执行模块，用于执行目标待执行任务；

处理模块，用于向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

所述处理模块，还用于向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

本说明书实施例还提供了一种数据备份的装置，该装置应用于备节点设备，所述备节点设备连接存储组件，该装置包括：

监控模块，用于监控存储组件中新增的第二主键标识；

处理模块，用于判断自身是否存在与所述第二主键标识对应的数据信息；

所述处理模块，还用于当判断不存在时，则向所述存储组件发送数据同步请求，所述数据同步请求中携带所述第二主键标识，以使所述存储组件根据所述数据同步请求发送与所述第二主键标识对应的数据信息。

上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。

本领域技术人员在考虑说明书及实践这里申请的发明后，将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本说明书的真正范围和精神由下面的权利要求指出。

应当理解的是，本说明书并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。

以上所述仅为本说明书的较佳实施例而已，并不用以限制本说明书，凡在本说明书的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书保护的范围之内。

Claims (11)

1.一种数据备份的方法，其特征在于，所述方法应用于存储组件，所述存储组件分别连接主节点设备和备节点设备，所述方法包括：

接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

若存在，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

2.根据权利要求1所述的方法，其特征在于，获取所述主键标识表的方法包括：

接收主节点设备发送的目标主键标识，所述目标主键标识用于标识该主节点设备执行的待执行任务；

将获取的目标主键标识记录在所述主键标识表中。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

接收主节点设备发送的与目标主键标识对应的目标数据信息；

将所述目标数据信息与所述目标主键标识对应存储。

4.一种数据备份的方法，其特征在于，所述方法应用于主节点设备，所述主节点设备连接存储组件，所述方法包括：

执行目标待执行任务；

向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

在向存储组件同步目标主键标识后，为所述目标主键标识设置数据补偿定时；

当所述数据补充定时超时后，检测所述存储组件中是否存在所述目标主键标识，若存在，则向存储组件同步与所述目标主键标识对应的数据信息。

6.一种数据备份的方法，其特征在于，所述方法应用于备节点设备，所述备节点设备连接存储组件，所述方法包括：

监控存储组件中新增的第二主键标识；

判断自身是否存在与所述第二主键标识对应的数据信息；

若不存在，则向所述存储组件发送数据同步请求，所述数据同步请求中携带所述第二主键标识，以使所述存储组件根据所述数据同步请求发送与所述第二主键标识对应的数据信息。

7.根据权利要求6所述的方法，其特征在于，若判断自身存在与所述第二主键标识对应的数据信息时，所述方法还包括：

向所述存储组件发送删除通知，所述删除通知中携带第二主键标识，以使所述存储组件在接收到所述删除通知后，删除第二主键标识。

8.一种数据备份系统，其特征在于，所述数据备份系统包括：存储组件，以及与所述存储组件连接的主节点设备和备节点设备；

所述主节点设备执行目标待执行任务，并向存储组件同步目标主键标识以及与所述目标主键标识对应的数据信息，所述目标主键标识用于标识该目标待执行任务；

所述备节点设备监控所述存储组件中新增目标主键标识，判断自身是否存在与所述新增目标主键标识对应的数据信息，若不存在，则向所述存储组件发送数据同步请求，所述数据同步请求携带目标主键标识；

所述存储组件接收到备节点设备发送数据同步请求，根据所述数据同步请求中携带的目标主键标识，向所述备节点设备发送与所述目标主键标识对应的数据信息。

9.一种数据备份的装置，其特征在于，该装置应用于存储组件，该存储组件分别连接主节点设备和备节点设备，该装置包括：

接收模块，用于接收备节点设备发送的数据同步请求，所述数据同步请求携带第二主键标识；

处理模块，用于判断自身存储的主键标识表中是否存在与所述第二主键标识匹配的第一主键标识；

所述处理模块，还用于若判断存在所述第一主键标识，则将与所述第一主键标识对应的数据信息同步给所述备节点设备。

10.一种数据备份的装置，其特征在于，该装置应用于主节点设备，所述主节点设备连接存储组件，该装置包括：

执行模块，用于执行目标待执行任务；

处理模块，用于向存储组件同步目标主键标识，以使所述存储组件根据所述目标主键标识生成主键标识表，其中，所述目标主键标识用于标识所述目标待执行任务；

所述处理模块，还用于向所述存储组件同步与所述目标主键标识对应的数据信息，以使与存储组件连接的备节点设备同步所述数据信息。

11.一种数据备份的装置，其特征在于，该装置应用于备节点设备，所述备节点设备连接存储组件，该装置包括：

监控模块，用于监控存储组件中新增的第二主键标识；

处理模块，用于判断自身是否存在与所述第二主键标识对应的数据信息；

所述处理模块，还用于当判断不存在时，则向所述存储组件发送数据同步请求，所述数据同步请求中携带所述第二主键标识，以使所述存储组件根据所述数据同步请求发送与所述第二主键标识对应的数据信息。

Images