CN111090543A - 一种Zookeeper的备份恢复方法、终端及计算机可读存储介质 - Google Patents

Abstract

本发明实施例公开了一种Zookeeper的备份恢复方法、终端及计算机可读存储介质，涉及计算机应用技术领域。本发明提出的备份流程通过设置配置文件的备份参数，以确定待备份的数据节点；恢复流程通过设置恢复参数以进行个性化选择待备份文件，更加灵活地对Zookeeper进行备份和恢复，能减少人为误操作造成的损失，降低出错率。本发明提供的技术方案可实现备份和恢复的自动化，提高了数据备份和恢复的效率；更重要的是能设置配置文件参数，可以灵活选择需要备份的数据节点，选择需要恢复的数据节点，实现不同需求的备份和恢复，更加灵活和实用。

Description

一种Zookeeper的备份恢复方法、终端及计算机可读存储介质

技术领域

本发明涉及计算机应用技术领域，尤其涉及一种Zookeeper的备份恢复方法。

背景技术

Zookeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理、分布式数据库数据一致性等等。Zookeeper的分布式服务架构的数据一致性，决定了它存储的数据的重要性，误操作往往会带来严重的后果，如误删除，若未备份数据，将造成不可逆转的数据损失。

现有技术中对Zookeeper的数据进行备份恢复有两种方法，一种是使用Zookeeper自带的命令进行数据备份恢复：使用Zookeeper自带的get命令获取某个数据节点的数据，进行数据备份；使用Zookeeper自带的set命令把备份数据修改进Zookeeper对应的数据节点，进行数据恢复。然而，这种操作所有的数据备份都是人工获取，数据恢复也是人工恢复，操作分化、数据存储不规范；数据的备份和恢复只能按数据节点一一进行操作，容易出错；因此这只适用于少量数据节点的备份，无法备份大量的数据。

另一种方法是使用日志和快照文件进行备份和恢复：人工或定时备份zookeeper数据目录最新的日志和快照文件，日志文件是存放zookeeper所有数据，快照文件则是内存增量文件。如果发生了误操作，则恢复到备份那天的全部数据。然而不能恢复当天的数据，否则会发生错乱，且只能备份和恢复全部数据节点的数据，不能针对性的备份恢复。

发明内容

本发明所要解决的技术问题是提供一种能够配合需要进行数据的个性化备份恢复的Zookeeper的备份恢复方法，并减小人为操作带来的数据损失。

为了解决上述问题，本发明提供以下技术方案：

第一方面，本发明实施例提供一种分布式架构Zookeeper的备份恢复方法，包括备份流程和恢复流程：

所述备份流程包括以下步骤：

S101读取配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及备份参数；

S102根据所述zookeeper地址连接到zookeeper；

S103通过所述备份参数确定待备份节点；

S104查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份；

所述恢复流程包括以下步骤：

S105若接收到恢复指令，读取所述配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及恢复参数；

S106根据所述恢复参数确定待恢复的备份文件；

S107读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据；

S108根据所述zookeeper地址连接到zookeeper；

S109根据所述恢复参数确定待恢复节点；

S110在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。其进一步地技术方案为，所述根据所述恢复参数确定待恢复的备份文件，包括：

根据所述恢复参数设置待恢复的文件节点，并将待恢复的文件节点对应的备份文件作为待恢复的备份文件。

其进一步地技术方案为，所述通过所述备份参数确定待备份节点，包括：

通过备份过滤器设置不需要备份的节点；

从所述备份参数中过滤所述不需要备份的节点，以确定待备份节点。

其进一步地技术方案为，所述根据所述恢复参数确定待恢复节点，包括：

通过恢复过滤器设置不需要恢复的节点；

从所述恢复参数中过滤所述不需要恢复的节点，以确定待恢复节点。

其进一步地技术方案为，所述完成备份步骤之后，还包括：根据所述日志文件路径将备份操作写入日志文件。

其进一步地技术方案为，所述完成恢复步骤之后，还包括：根据所述日志文件路径将恢复操作写入日志文件。

其进一步地技术方案为，还包括判断是否到达预设备份时间，若是，则执行所述读取配置文件中的参数的步骤。

第二方面，本发明实施例提供了一种终端，该终端包括:用于执行如第一方面所述的方法的单元。

第三方面，本发明实施例提供了另一种终端，该终端包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储支持终端执行上述方法的应用程序代码，所述处理器被配置用于执行上述第一方面的方法。

第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行上述第一方面的方法。

与现有技术相比，本发明的有益效果包括：本发明提出的备份流程通过设置配置文件的备份参数，以确定待备份的数据节点；恢复流程通过设置恢复参数以进行个性化选择待备份文件，更加灵活地对Zookeeper进行备份和恢复，能减少人为误操作造成的损失，降低出错率。本发明提供的技术方案可实现备份和恢复的自动化，提高了数据备份和恢复的效率；更重要的是能设置配置文件参数，可以灵活选择需要备份的数据节点，选择需要恢复的数据节点，实现不同需求的备份和恢复，更加灵活和实用。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种分布式架构Zookeeper的备份恢复方法的示意流程图；

图2是本发明实施例提供的一种终端的示意性框图；

图3是本发明另一实施例提供的一种终端的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

本方案用C++语言开发针对Zookeeper的数据备份和恢复方法实现了工具化。其中，backupZKinfo为备份工具，用于备份zookeeper数据；recoverZKinfo为恢复工具，用于将备份的zookeeper数据恢复到zookeeper上。

备份工具和恢复工具共用一个配置文件backupConf.xml，备份工具根据配置文件进行备份需备份的数据节点的数据，恢复工具根据配置文件进行恢复需恢复的对应节点的数据。

参见图1，其为本发明实施例提供的一种分布式架构Zookeeper的备份恢复方法的示意流程图。如图所示该方法包括备份流程和恢复流程，其中S101-S104为备份流程，S105-S110为恢复流程。

S101，读取配置文件中的参数。

具体实施中，备份工具读取配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及备份参数。

网络设备、系统及服务程序等，在运作时都会产生一个叫log的事件记录；每一行日志都记载着日期、时间、使用者及动作等相关操作的描述，以供追溯和查找。

日志文件路径用于指引操作日志的文件的存储位置。

zookeeper地址用于连接需要备份的zookeeper。

备份参数是对于备份需求的设置，备份参数包括可备份的数据节点以及不需要备份的节点。实际操作中，本领域技术人员可根据需要自行设置备份需求，实现个性化备份。

S102，根据所述zookeeper地址连接到zookeeper。

具体实施中，备份工具连接到zookeeper以对zookeeper的文件进行备份。

S103，通过所述备份参数确定待备份节点。

具体实施中，备份参数包括可备份的数据节点以及不需要备份的节点。

在某些实施例，例如本实施例中，通过备份过滤器设置不需要备份的节点；

从备份参数中的可备份的数据节点中过滤不需要备份的节点，以确定待备份节点。

S104，查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份。

具体实施中，备份工具在zookeeper中查询并获取待备份节点的数据，待备份节点可以是一个，也可以是多个。

若待备份节点是一个，则将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份。

若待备份节点是多个，则依次将各待备份节点的数据分别转化成xml格式的备份文件进行存储，完成备份，从而避免备份的数据混淆。

S105，若接收到恢复指令，读取所述配置文件中的参数。

具体实施中，若恢复工具接收到恢复指令，则读取配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及恢复参数。

备份工具和恢复工具共同使用一个配置文件，其中的恢复参数是对于恢复需求的设置，技术人员可根据需要对可恢复的文件进行设置，选择部分恢复或全部恢复。

S106，根据所述恢复参数确定待恢复的备份文件。

在某些实施例，例如本实施例中，恢复工具根据所述恢复参数设置待恢复的文件节点，并将待恢复的文件节点对应的备份文件作为待恢复的备份文件。

恢复参数可设置备份出来的xml文件恢复到技术人员预设的文件节点，即设置该xml文件的恢复程度，全部恢复或者部分恢复，以确定待恢复的文件节点。

具体实施中，恢复工具根据设置的各备份文件的恢复程度读取相应的xml文件，确定待恢复的文件节点，并将待恢复的文件节点对应的备份文件作为待恢复的备份文件。

S107，读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据。

具体实施中，恢复工具读取待恢复的备份文件并解析成zookeeper存储格式的节点数据。

S108，根据所述zookeeper地址连接到zookeeper。

具体实施中，恢复工具连接到zookeeper以准备对待恢复文件恢复到zookeeper上。

S109，根据所述恢复参数确定待恢复节点。

具体实施中，恢复工具连接到zookeeper之后再通过恢复过滤器设置不需要恢复的节点；

恢复工具从恢复参数中过滤所述不需要恢复的节点，以确定待恢复节点。

S110，在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。

具体实施中，恢复工具在zookeeper创建待恢复节点的节点数据文件，待恢复节点的节点数据文件可以是一个，也可以是多个。

若待恢复节点的节点数据文件是一个，则在zookeeper创建解析出该文件完成恢复。

若待恢复节点的节点数据文件是多个，则依次在zookeeper分别创建解析出各文件，完成恢复，从而避免恢复出来的数据混淆。

在某些实施例，例如本实施例中，在完成备份步骤之后，还包括：备份工具根据日志文件路径将备份操作写入日志文件。

在某些实施例，例如本实施例中，在完成恢复步骤之后，还包括：恢复工具根据日志文件路径将恢复操作写入日志文件。

在某些实施例，例如本实施例中，还包括，备份工具判断是否到达预设备份时间，若是，则执行读取配置文件中的参数的步骤。

具体实施中，可通过设置脚本或者定时任务实现自动化备份，例如根据工作需求，设置为三小时备份一次。

参见图2，其为本发明实施例提供的一种终端的示意框图。如图所示，本实施例中的终端200可包括：第一读取单元201，第一连接单元202，第一确定单元203，备份单元204，第二读取单元205，第二确定单元206，解析单元207，第二连接单元208，第三确定单元209，恢复单元210。其中：

第一读取单元201，用于读取配置文件中的参数。

第一连接单元202，用于根据所述zookeeper地址连接到zookeeper。

第一确定单元203，用于通过所述备份参数确定待备份节点。

备份单元204，用于查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份。

第二读取单元205，用于若接收到恢复指令，读取所述配置文件中的参数。

第二确定单元206，用于根据所述恢复参数确定待恢复的备份文件。

解析单元207，用于读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据。

第二连接单元208，用于根据所述zookeeper地址连接到zookeeper。

第三确定单元209，用于根据所述恢复参数确定待恢复节点。

恢复单元210，用于在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。

参见图3，是本发明另一实施例提供的一种终端300示意框图。如图所示的本实施例中的终端300可以包括：一个或多个处理器301；一个或多个输入设备302，一个或多个输出设备303和存储器304。上述处理器301、输入设备302、输出设备303和存储器304通过总线305连接。存储器302用于存储指令，处理器301用于执行存储器302存储的指令。其中，处理器301用于执行：

读取配置文件中的参数、根据所述zookeeper地址连接到zookeeper、通过所述备份参数确定待备份节点、查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份、若接收到恢复指令，读取所述配置文件中的参数、根据所述恢复参数确定待恢复的备份文件、读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据、根据所述zookeeper地址连接到zookeeper、根据所述恢复参数确定待恢复节点、在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。

应当理解，在本发明实施例中，所称处理器301可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

输入设备302可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等，输出设备303可以包括显示器(LCD等)、扬声器等。

该存储器304可以包括只读存储器和随机存取存储器，并向处理器301提供指令和数据。存储器304的一部分还可以包括非易失性随机存取存储器。例如，存储器304还可以存储设备类型的信息。

具体实现中，本发明实施例中所描述的处理器301、输入设备302、输出设备303可执行本发明实施例提供的一种参数调整方法的个实施例中所描述的实现方式，也可执行本发明实施例所描述的终端300的实现方式，在此不再赘述。

在本发明的另一实施例中提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现：

读取配置文件中的参数、根据所述zookeeper地址连接到zookeeper、通过所述备份参数确定待备份节点、查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份、若接收到恢复指令，读取所述配置文件中的参数、根据所述恢复参数确定待恢复的备份文件、读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据、根据所述zookeeper地址连接到zookeeper、根据所述恢复参数确定待恢复节点、在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。

所述计算机可读存储介质可以是前述任一实施例所述的终端的内部存储单元，例如终端的硬盘或内存。所述计算机可读存储介质也可以是所述终端的外部存储设备，例如所述终端上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)等。进一步地，所述计算机可读存储介质还可以既包括所述终端的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的终端和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本发明所提供的几个实施例中，应该理解到，所揭露的终端和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种Zookeeper的备份恢复方法，其特征在于，包括备份流程和恢复流程：

所述备份流程包括以下步骤：

S101读取配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及备份参数；

S102根据所述zookeeper地址连接到zookeeper；

S103通过所述备份参数确定待备份节点；

S104查询并获取所述待备份节点的数据，将所述待备份节点的数据转化成xml格式的备份文件进行存储，完成备份；

所述恢复流程包括以下步骤：

S105若接收到恢复指令，读取所述配置文件中的参数，所述参数包括日志文件路径、zookeeper地址以及恢复参数；

S106根据所述恢复参数确定待恢复的备份文件；

S107读取所述待恢复的备份文件并解析成zookeeper存储格式的节点数据；

S108根据所述zookeeper地址连接到zookeeper；

S109根据所述恢复参数确定待恢复节点；

S110在zookeeper创建所述待恢复节点的节点数据文件，完成恢复。

2.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，所述根据所述恢复参数确定待恢复的备份文件，包括：

根据所述恢复参数设置待恢复的文件节点，并将待恢复的文件节点对应的备份文件作为待恢复的备份文件。

3.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，所述通过所述备份参数确定待备份节点，包括：

通过备份过滤器设置不需要备份的节点；

从所述备份参数中过滤所述不需要备份的节点，以确定待备份节点。

4.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，所述根据所述恢复参数确定待恢复节点，包括：

通过恢复过滤器设置不需要恢复的节点；

从所述恢复参数中过滤所述不需要恢复的节点，以确定待恢复节点。

5.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，所述完成备份步骤之后，还包括：根据所述日志文件路径将备份操作写入日志文件。

6.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，所述完成恢复步骤之后，还包括：根据所述日志文件路径将恢复操作写入日志文件。

7.如权利要求1所述的Zookeeper的备份恢复方法，其特征在于，还包括判断是否到达预设备份时间，若是，则执行所述读取配置文件中的参数的步骤。

8.一种终端，其特征在于，包括：用于执行如权利要求1-7任一项所述的方法的单元。

9.一种终端，其特征在于，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储应用程序代码，所述处理器被配置用于调用所述程序代码，执行如权利要求1-7任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1-7任一项所述的方法。

Images