CN115756948A - 一种数据备份方法、装置、设备、系统及存储介质 - Google Patents

Abstract

本申请公开了一种数据备份方法，方法应用于运行备份调度容器的调度节点，该方法包括：若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；通过备份调度容器分别统计所述第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；通过备份调度容器基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点；通过备份调度容器发送执行指令至目标节点，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。本申请还公开了一种数据备份装置、设备、系统及存储介质。

Description

一种数据备份方法、装置、设备、系统及存储介质

技术领域

本申请涉及云计算服务技术领域，尤其涉及一种数据备份方法、装置、设备、系统及存储介质。

背景技术

随着互联网技术的飞速发展，云计算时代的到来，各种云计算解决方案层出不穷，平台即服务(Platform as a Service，Paas)作为一种新的服务提供模式，得到的快速的部署与应用。目前，在Paas领域中，实现云化数据的实现方式主要有两种：一种是基于云计算管理平台(OpenStack)的虚拟化部署数据库服务，另一种是基于管理容器集群的平台(Kubernetes，k8s)的容器化数据库服务。在基于k8s的容器化数据库服务的平台上，由于容器化的隔离性，每个机器中均运行有多个数据库实例，这样，每个数据库实例分配到的运行资源相对较少，导致数据库实例运行稳定性较差，因此，需要对k8s的容器化数据库服务的平台的数据进行备份。目前，基于k8s的容器化数据库服务的平台的数据进行备份的方案主要有两种：一种备份方案是用户设置备份策略，绑定云化数据库集群中的某一数据库实例来按照备份策略定期备份，另一种备份方案是云化数据库集群控制备份执行，当到达备份时间时，从数据库集群内选择某一数据库实例进行备份。

目前，上述两种备份方案中，在选择数据库实例进行备份操作时，均未考虑数据库实例对应的备份节点的负载情况，若进行备份的数据库实例所对应的实体备份设备的负载较高，导致该数据库实例的备份效率较低，严重降低了数据库对应的服务性能。

申请内容

为解决上述技术问题，本申请期望提供一种数据备份方法、装置、设备、系统及存储介质，解决了目前进行数据备份时，未充分考虑数据库实例对应的备份节点的负载，导致备份效率较低的问题，提出了一种确定用于进行备份数据的数据库实例的方法，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。

本申请的技术方案是这样实现的：

第一方面，一种数据备份方法，所述方法应用于运行备份调度容器的调度节点，所述方法包括：

若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个所述第一参考节点用于运行与所述目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；

通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个所述目标预测消耗资源；

通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；

通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作。

可选的，所述通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源，包括：

通过备份调度容器接收每一所述第一参考节点发送的目标预测消耗资源，得到所述至少一个目标预测消耗资源；

或者，通过备份调度容器接收每一所述第一参考节点发送的第一消耗资源和第二消耗资源；其中，所述第一消耗资源包括对应的所述第一参考节点运行所述目标实例时的消耗资源，所述第二消耗资源包括对应的所述第一参考节点运行所述目标实例时除所述第一消耗资源外的消耗资源；

通过备份调度容器确定每一所述第一参考节点的所述第一消耗资源和第二消耗资源的和值，得到至少一个所述目标预测消耗资源。

可选的，所述第二消耗资源至少包括对应的所述第一参考节点运行所述目标实例时运行的参考实例的消耗资源和对应的所述第一参考节点运行所述目标实例时，除运行所述目标实例和所述参考实例外的目标运行语句的运行消耗资源；其中，所述参考实例为对应的所述第一参考节点中运行所述目标实例时运行的除所述目标实例外的实例。

可选的，所述若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点，包括：

若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器接收每一第二参考节点发送的所述目标数据库的目标信息，得到至少一个目标信息；

基于至少一个所述目标信息，从至少一个所述第二参考节点中确定得到至少一个所述第一参考节点。

可选的，所述基于至少一个所述目标信息，从至少一个所述第二参考节点中确定得到至少一个所述第一参考节点，包括：

从至少一个所述目标信息中，确定至少一个包括目标标识的目标信息；其中，所述目标标识用于标识对应的第二参考节点未宕机；

从至少一个所述第二参考节点中，确定与至少一个包括目标标识的目标信息匹配的节点，得到至少一个所述第一参考节点。

可选的，所述若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点之前，所述方法还包括：

通过所述备份调度容器获取针对所述目标数据库的预设备份策略；

通过所述备份调度容器将所述预设备份策略发送至至少一个第二参考节点；其中，至少一个所述第二参考节点为运行有与所述目标数据库对应的目标实例绑定的备份RPC容器的节点，所述预设备份策略用于指示每一所述第二参考节点通过设置的所述备份RPC容器检测到所述目标数据库的大小超过预设数据库阈值时，发送所述目标预测消耗资源至所述调度节点，至少一个所述第二参考节点包括至少一个所述第一参考节点。

可选的，所述执行指令还用于指示针对所述目标数据库当前时刻至下一次全量备份操作时刻之间的增量备份操作均有所述目标节点执行。

可选的，所述通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点，包括：

通过所述备份调度容器确定至少一个所述第一参考节点的最大资源；

通过所述备份调度容器确定每一所述第一参考节点与对应的目标预测消耗资源之间的差值，得到至少一个参考差值；

通过所述备份调度容器确定所述至少一个参考差值中确定值最大的目标差值；

通过所述备份调度容器从所述至少一个第一参考节点中，确定所述目标差值对应的第一参考节点为所述目标节点。

第二方面，一种数据备份装置，所述装置包括：第一确定单元、统计单元、第二确定单元和发送单元；其中：

所述第一确定单元，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；

所述统计单元，用于通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个所述目标；

所述第二确定单元，用于通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；

所述发送单元，用于通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作。

第三方面，一种数据备份设备，所述设备包括：存储器、处理器和通信总线；其中：

所述存储器，用于存储可执行指令；

所述通信总线，用于实现所述处理器和所述存储器之间的通信连接；

所述处理器，用于运行备份调度容器执行所述存储器中存储的数据备份方法，实现如前述任一项所述的数据备份方法的步骤。

第四方面，一种数据备份系统，所述系统包括：用于运行备份调度容器的调度节点，和用于运行与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第二参考节点；其中：

所述调度节点，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；其中，至少一个所述第二参考节点包括至少一个所述第一参考节点，通过备份调度容器分别统计第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作；

所述目标节点，用于通过所述目标RPC容器接收所述调度节点发送的执行指令；响应所述执行指令，在所述目标数据库对应的全量备份时刻，执行针对所述目标数据库的全量备份操作。

第五方面，一种存储介质，所述存储介质上存储有数据备份方法，所述数据备份方法被处理器执行时实现如前述任一项所述的数据备份方法的步骤。

本申请实施例提供了一种数据备份方法、装置、设备、系统及存储介质，若检测到当前时刻为对目标数据库进行全量备份的时候，调度节点通过备份调度容器确定运行有与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第一参考节点，然后通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源，并基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点，最后发送执行指令至目标节点。这样，通过调度节点集中对运行有绑定目标数据库对应的目标实例的备份RPC容器的至少一个第一参考节点，根据每一第一参考节点的目标预测消耗资源进行分析，确定得到目标节点，并指示目标节点执行针对目标数据库的全量备份操作，解决了目前进行数据备份时，未充分考虑数据库实例对应的备份节点的负载，导致备份效率较低的问题，提出了一种确定用于进行备份数据的数据库实例的方法，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。

附图说明

图1为本申请实施例提供的数据备份方法的流程示意图一；

图2为本申请实施例提供的数据备份方法的流程示意图二；

图3为本申请实施例提供的数据备份方法的一种应用场景；

图4为本申请实施例提供的数据备份方法的流程示意图三；

图5为本申请实施例提供的一种数据备份装置的结构示意图；

图6为本申请实施例提供的一种数据备份设备的结构示意图；

图7为本申请实施例提供的一种数据备份系统的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

本申请的实施例提供一种数据备份方法，参照图1所示，用于运行备份调度容器的调度节点，该方法包括以下步骤：

步骤101、若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点。

其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器。

在本申请实施例中，调度节点为运行有备份调度容器的节点设备，例如可以是服务器等设备。至少一个第一参考节点为运行有与目标数据库对应的目标实例绑定的备份远程过程调用(Remote Procedure Call，RPC)容器的节点设备，例如可以是计算机设备等具有存储功能的设备。当前时刻为对目标数据库进行全量备份的时刻可以是根据目标数据库的全量备份周期来确定的。备份调度容器检测到当前时刻为对目标数据库进行全量备份的备份时刻时，确定当前时刻与目标数据库对应的至少一个第一参考节点。

需说明的是，至少一个第一参考节点可以是运行有与目标数据库对应的目标实例绑定的备份RPC容器的全部节点中的符合预设要求的节点。预设要求例如可以是该节点运行的对应的备份RPC容器是存活的。

步骤102、通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源。

在本申请实施例中，备份调度容器对确定的至少一个第一参考节点中的每一第一参考节点将要进行全量备份目标数据库时对应的目标预测消耗资源进行统计，以得到每一第一参考节点的目标预测消耗资源，进而可以统计得到至少一个第一参考节点对应的目标预测消耗资源。每一第一参考节点的目标预测消耗资源主要为磁盘资源输入输出(Input/Output，IO)消耗。

步骤103、通过备份调度容器基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点。

在本申请实施例中，备份调度容器得到至少一个目标预测消耗资源后，从至少一个目标预测消耗资源中确定一个预测消耗资源最小的目标预测消耗资源，从至少一个第一参考节点中确定该预测消耗资源最小的目标预测消耗资源对应的节点为目标节点。或者，备份调度容器基于至少一个目标预测消耗资源，确定每一第一参考节点的剩余资源，

步骤104、通过备份调度容器发送执行指令至目标节点。

其中，执行指令用于指示目标节点运行的目标RPC容器执行针对目标数据库的全量备份操作。

在本申请实施例中，备份调度容器确定目标节点后，备份调度容器生成用于指示目标节点执行针对目标数据库的全量备份操作，对应的，目标节点接收到执行指令后，目标节点中的目标RPC容器控制其绑定的目标实例执行针对目标数据库的全量备份操作。这样，通过对多个数据库实例对应的节点的消耗资源的分析，确定出一个可以执行备份操作的数据库实例，降低了在备份高峰期部分节点的磁盘资源IO的网络瓶颈的限制，提高了数据库的服务性能。

本申请实施例提供的一种数据备份方法，若检测到当前时刻为对目标数据库进行全量备份的时候，调度节点通过备份调度容器确定运行有与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第一参考节点，然后通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源，并基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点，最后发送执行指令至目标节点。这样，通过调度节点集中对运行有绑定目标数据库对应的目标实例的备份RPC容器的至少一个第一参考节点，根据每一第一参考节点的目标预测消耗资源进行分析，确定得到目标节点，并指示目标节点执行针对目标数据库的全量备份操作，解决了目前进行数据备份时，未充分考虑数据库实例对应的备份节点的负载，导致备份效率较低的问题，提出了一种确定用于进行备份数据的数据库实例的方法，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。

基于前述实施例，本申请的实施例提供一种数据备份方法，方法应用于运行备份调度容器的调度节点，该方法包括以下步骤：

步骤201、若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点。

其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器。

在本申请实施例中，以调度节点和至少一个第一参考节点为k8s的容器化数据库服务的平台中云化数据库集群为例进行说明，调度节点中除运行有备份调度容器外，还可以运行有实现其他功能的容器，例如还可以是与其他数据库对应的实例绑定的备份RPC容器，同理，至少一个第一参考节点中除运行有与目标数据库对应的目标实例绑定的备份RPC容器外，还运行有其他数据库对应的实例绑定的备份RPC容器。与目标数据库对应的目标实例绑定的备份RPC容器可以只是设置在k8s的容器化数据库服务的平台中云化数据库集群中的部分节点中，也可以设置在k8s的容器化数据库服务的平台中云化数据库集群中的全部节点中，具体由实际应用场景来确定。

以目标数据库为数据库A为例进行说明，备份调度容器根据数据库A的全量备份周期，确定当前时刻需要对数据库A进行全量备份的时刻时，备份调度容器确定运行有与数据库A的数据库实例绑定的备份RPC容器对应的至少一个第一参考节点B1、B2、B3、B4。

步骤202、通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源。

在本申请实施例中，备份调动容器分别统计第一参考节点B1、B2、B3、B4在对目标数据库进行全量备份时对应的目标预测消耗资源，得到第一参考节点B1、B2、B3、B4各自依次对应的目标预测消耗资源X1、X2、X3、X4。

步骤203、通过备份调度容器基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点。

在本申请实施例中，备份调度容器从X1、X2、X3、X4中确定出值最小的目标预测消耗资源，假设为X3，则可以从第一参考节点B1、B2、B3、B4中，确定X3对应的第一参考节点B3为目标节点，即目标节点B3对目标数据库进行全量备份时对应的目标预测消耗资源最小。

步骤204、通过备份调度容器发送执行指令至目标节点。

其中，执行指令用于指示目标节点运行的目标RPC容器执行针对目标数据库的全量备份操作。

在本申请实施例中，备份调度容器发送执行指令至目标节点B3，使目标节点B3执行对目标数据库的全量备份操作。

基于前述实施例，在本申请其他实施例中，步骤202可以由步骤202a来实现，即第一参考节点将自身对目标数据库进行全量备份时的目标预测消耗资源已经计算后，直接发送给备份调度容器，或者步骤202可以由步骤202b～202c来实现，即第一参考节点将用于预测其对目标数据库进行全量备份时的目标预测消耗资源的第一消耗资源和第二消耗资源发送给备份调度容器，由备份调度容器根据接收到的第一消耗资源和第二消耗资源确定第一参考节点对应的目标预测消耗资源：

步骤202a、通过备份调度容器接收每一第一参考节点发送的目标预测消耗资源，得到至少一个目标预测消耗资源。

在本申请实施例中，每一第一参考节点已经将各自对应目标数据库进行全量备份操作时的目标预测消耗资源确定好后，将对应的目标预测消耗资源直接发送给备份调度容器。

步骤202b、通过备份调度容器接收每一第一参考节点发送的第一消耗资源和第二消耗资源。

其中，第一消耗资源包括对应的第一参考节点运行目标实例时的消耗资源，第二消耗资源包括对应的第一参考节点运行目标实例时除运行目标实例的消耗资源外时的消耗资源。

在本申请实施例中，第一消耗资源为第一参考节点运行目标实例对目标数据库进行全量备份时，第一参考节点所需的消耗资源，由于第一参考节点中可能还运行有除目标数据库外的全量备份操作外的其他进程，因此，在考虑第一参考节点对目标数据库进行全量备份时的消耗资源时，还需考虑其他进程的消耗资源，即第二消耗资源。

步骤202c、通过备份调度容器确定每一第一参考节点的第一消耗资源和第二消耗资源的和值，得到至少一个目标预测消耗资源。

在本申请实施例中，备份调度容器对接收到的每一第一参考节点的第一消耗资源和第二消耗资源进行和值计算，得到每一第一参考节点的目标预测消耗资源，从而得到至少一个目标预测消耗资源。示例性的，假设备份调度容器接收到第一参考节点B1的第一消耗资源为X11，第一参考节点B1的第二消耗资源为X12，第一参考节点B2的第一消耗资源为X21，第一参考节点B2的第二消耗资源为X22，第一参考节点B3的第一消耗资源为X31，第一参考节点B3的第二消耗资源为X32，第一参考节点B4的第一消耗资源为X41，第一参考节点B4的第二消耗资源为X42，对应的，备份调度容器确定得到的第一参考节点B1的目标预测消耗资源为X1＝X11+X12，第一参考节点B2的目标预测消耗资源为X2＝X21+X22，第一参考节点B3的目标预测消耗资源为X3＝X31+X32，第一参考节点B4的目标预测消耗资源为X4＝X41+X42。

需说明的是，在步骤202a中，每一第一参考节点确定自身对应的目标预测消耗资源可以参照步骤202b和步骤203c中的实现过程，即每一第一参考节点确定对目标数据库进行全量备份时对应的第一消耗资源和第二消耗资源后，计算第一消耗资源和第二消耗资源，得到自身对应的目标预测消耗资源，并将目标预测消耗资源发送至备份调度容器。

基于前述实施例，在本申请其他实施例中，第二消耗资源至少包括对应的第一参考节点运行目标实例时运行的参考实例的消耗资源和对应的第一参考节点运行目标实例时，除运行目标实例和参考实例外的目标运行语句的运行消耗资源；其中，参考实例为对应的第一参考节点中运行目标实例时运行的除目标实例外的实例。

在本申请实施例中，在确定第二消耗资源时，若第一参考节点中运行有除目标数据库外的其他参考实例时，需统计在运行目标实例全量备份目标数据库时，若其他参考实例也运行时的消耗资源，以及一些其他目标运行语句运行时对应的运行消耗资源。目标运行语句例如可以是结构化查询语言(Structured Query Language，SQL)。

基于前述实施例，在本申请其他实施例中，步骤201可以由步骤201a～201b来实现：

步骤201a、若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器接收每一第二参考节点发送的目标数据库的目标信息，得到至少一个目标信息。

在本申请实施例中，目标信息是用于指示第一参考节点中的目标数据库是否宕机的信息。

步骤201b、基于至少一个目标信息，从至少一个第二参考节点中确定得到至少一个第一参考节点。

在本申请实施例中，对至少一个第二参考节点对应的至少一个目标信息进行分析，以从至少一个第二参考节点中确定得到至少一个第一参考节点。

基于前述实施例，在本申请其他实施例中，步骤201b可以由步骤a11～来实现：

步骤a11、从至少一个目标信息中，确定至少一个包括目标标识的目标信息。

其中，目标标识用于标识对应的第二参考节点未宕机。

步骤a12、从至少一个第二参考节点中，确定与至少一个包括目标标识的目标信息匹配的节点，得到至少一个第一参考节点。

在本申请实施例中，将至少一个第二参考节点中处于宕机状态的节点进行剔除，得到正常工作状态的至少一个第一参考节点。

基于前述实施例，在本申请其他实施例中，参照图2所示，调度节点执行步骤201之前，还用于执行步骤205～206：

步骤205、通过备份调度容器获取针对目标数据库的预设备份策略。

在本申请实施例中，预设备份策略可以是用于根据目标数据库的实际备份需求进行设置得到的。

步骤206、通过备份调度容器将预设备份策略发送至至少一个第二参考节点。

其中，至少一个第二参考节点为运行有与目标数据库对应的目标实例绑定的备份RPC容器的节点，预设备份策略用于指示每一第二参考节点通过设置的备份RPC容器检测到目标数据库的大小超过预设数据库阈值时，发送目标预测消耗资源至调度节点，至少一个第二参考节点包括至少一个第一参考节点。

在本申请实施例中，备份调度容器将预设备份策略发送至至少一个第二参考节点，至少一个第二参考节点可以根据预设备份策略执行针对目标数据库的备份策略。预设数据库阈值为根据大量实验得到的经验值。

基于前述实施例，在本申请其他实施例中，执行指令还用于指示针对目标数据库当前时刻至下一次全量备份操作时刻之间的增量备份操作均有目标节点执行。

基于前述实施例，在本申请其他实施例中，步骤203可以由步骤203a～203d来实现：

步骤203a、通过备份调度容器确定至少一个第一参考节点的最大资源。

在本申请实施例中，每一第一参考节点的最大资源为每一第一参考节点所能提供的最多资源。

步骤203b、通过备份调度容器确定每一第一参考节点与对应的目标预测消耗资源之间的差值，得到至少一个参考差值。

步骤203c、通过备份调度容器确定至少一个参考差值中确定值最大的目标差值。

步骤203d、通过备份调度容器从至少一个第一参考节点中，确定目标差值对应的第一参考节点为目标节点。

这样，在至少一个第一参考节点的最大资源不同时，通过判断每一第一参考节点的剩余资源，来确定剩余资源最多的第一参考节点为目标节点，保证能够确定剩余资源最多的节点执行备份操作，提高了针对目标数据库的备份操作。

基于前述实施例，本申请实施例提供一种数据备份方法的应用场景，参照图3所示，包括调度节点31、数据库集群32和云存储分布式系统(Ceph)33；其中，调度节点31中运行有备份调度容器和备份策略，数据库集群32包括运行有目标数据库的目标实例绑定的备份RPC容器1的节点1、运行有目标数据库的目标实例绑定的备份RPC容器2的节点2、运行有目标数据库的目标实例绑定的备份RPC容器3的节点3、……、运行有目标数据库的目标实例绑定的备份RPC容器n的节点n。

基于图3所示的应用场景，参照图4实现的数据备份方法的实现流程可以如下所示：

步骤401、开始。

步骤402、备份调度容器下发用户备份策略。

其中，调度节点通过备份调度容器采集用户在网页(Web)前端设置的用户备份策略，并将用户备份策略下发至相应数据库集群实例绑定的备份RPC容器对应的节点1、节点2和节点3，……，节点n。

步骤403、备份RPC容器判断数据库大小是否超过库阈值，若数据库大小超过库阈值，执行步骤404，否则，执行步骤407。

其中，第一，备份调度容器对节点的心跳信号进行检测，即检测节点1、节点2、节点3、……、节点n中的目标数据库是否出现宕机的情况，若检测到有节点中的目标数据库出现宕机的情况，剔除宕机的节点，以使后续分析过程中不考虑出现宕机的节点。示例性的，检测到节点3出现宕机的情况，因此剔除节点3。

第二，节点1、节点2、节点4、……、节点n的备份RPC容器接收到用户备份策略后，根据用户备份策略中设定的采集周期，定时采集对应的数据库实例大小。

步骤404、备份RPC容器上传消耗资源信息。

其中，在数据库大小信息大于用户备份策略中设置的库阈值时，发送目标数据库对应的目标实例的消耗资源信息至调度节点的备份调度容器，上传的消耗资源信息至少包括每一节点全量备份目标数据库时所需的备份预设时长、SQL语句执行开始时刻和SQL语句执行时长。备份预设时长的计算方法可以表示为：备份预设时长等于数据库实例大小除以磁盘IO速率，SQL执行时长的计算方法可以表示为：SQL执行代价中的扫描记录大小总和除以磁盘IO速率。

步骤405、备份调度容器确定目标节点。

其中，调度节点的备份调度容器汇总节点1、节点2、节点4、……、节点n上传的针对目标数据库的消耗资源信息。根据用户备份策略确定目标数据库的备份起始时刻，可以通过用户备份策略中设置的针对目标数据库的全量备份周期来确定得到。

由于目标数据库部署于多实例数据库集群时，集群中的实例通常分布在不同的节点中，针对每一节点的总消耗资源即前述目标预测消耗资源，需考虑在针对目标数据库进行备份阶段，节点上其他非本集群的数据库实例的备份时段以及节点中所有SQL语句的执行时段所导致的消耗资源。如此，目标数据库在每一节点上的总消耗资源可以通过以下公式计算得到：((节点上每一SQL语句执行时长+对应的每一SQL语句执行开始时刻－该集群备份开始时刻)+(节点上其他实例备份执行时长+其他实例备份执行开始时刻－该集群备份开始时刻)+目标数据库的)*磁盘IO速率。示例性的，假设有3个SQL语句SQL1和SQL2、其他实例包括实例1和实例2时，对应的节点的总消耗资源可以记为：((SQL1的执行时长+SQL1的执行开始时刻－目标数据库备份开始时刻)+(SQL2的执行时长+SQL2的执行开始时刻－目标数据库备份开始时刻)+(实例1的备份执行时长+实例2的备份执行开始时刻－目标数据库备份开始时刻)+(实例2的备份执行时长+实例2的备份执行开始时刻－目标数据库备份开始时刻))*磁盘IO速率。备份调度容器确定节点的总消耗资源最小的节点为目标节点，并将备份执行进行任务下发，下发至目标节点。

步骤406、目标节点执行针对目标数据库的备份任务。

其中，目标节点接收到备份任务后，执行针对目标数据库的备份任务。需说明的是，目标数据库的下一次全量备份任务执行前的所有增量备份都由此步骤405中确定的目标节点来执行。示例性的，图3中确定的是节点2为目标节点。节点2可以通过简单存储服务(Simple Storage Service，S3)对象存储接口将目标数据库全量备份到云存储Ceph上。

步骤407、备份RPC容器不上报消耗资源信息。

步骤408、结束。

需要说明的是，本实施例中与其它实施例中相同步骤和相同内容的说明，可以参照其它实施例中的描述，此处不再赘述。

本申请实施例提供的一种数据备份方法，若检测到当前时刻为对目标数据库进行全量备份的时候，调度节点通过备份调度容器确定运行有与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第一参考节点，然后通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源，并基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点，最后发送执行指令至目标节点。这样，通过调度节点集中对运行有绑定目标数据库对应的目标实例的备份RPC容器的至少一个第一参考节点，根据每一第一参考节点的目标预测消耗资源进行分析，确定得到目标节点，并指示目标节点执行针对目标数据库的全量备份操作，解决了目前进行数据备份时，未充分考虑数据库实例对应的备份节点的负载，导致备份效率较低的问题，提出了一种确定用于进行备份数据的数据库实例的方法，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。

基于前述实施例，本申请的实施例提供一种数据备份装置，该装置可以应用于图1～2对应的实施例提供的数据备份方法中，参照图5所示，该数据备份装置5可以包括：第一确定单元51、统计单元52、第二确定单元53和发送单元54；其中：

第一确定单元51，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；

统计单元52，用于通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；

第二确定单元53，用于通过备份调度容器基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点；

发送单元54，用于通过备份调度容器发送执行指令至目标节点；其中，执行指令用于指示目标节点运行的目标RPC容器执行针对目标数据库的全量备份操作。

在本申请其他实施例中，统计单元包括：第一接收模块和第一确定模块；其中：

第一接收模块，用于通过备份调度容器接收每一第一参考节点发送的目标预测消耗资源，得到至少一个目标预测消耗资源；

或者，第一接收模块，用于通过备份调度容器接收每一第一参考节点发送的第一消耗资源和第二消耗资源；其中，第一消耗资源包括对应的第一参考节点运行目标实例时的消耗资源，第二消耗资源包括对应的第一参考节点运行目标实例时除运行目标实例的消耗资源外时的消耗资源；

第一确定模块，用于通过备份调度容器确定每一第一参考节点的第一消耗资源和第二消耗资源的和值，得到至少一个目标预测消耗资源。

在本申请其他实施例中，第二消耗资源至少包括对应的第一参考节点运行目标实例时运行的参考实例的消耗资源和对应的第一参考节点运行目标实例时，除运行目标实例和参考实例外的目标运行语句的运行消耗资源；其中，参考实例为对应的第一参考节点中运行目标实例时运行的除目标实例外的实例。

在本申请其他实施例中，第一确定单元包括：第二接收模块和第二确定模块；其中：

第二接收模块，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器接收每一第二参考节点发送的目标数据库的目标信息，得到至少一个目标信息；

第二确定模块，用于基于至少一个目标信息，从至少一个第二参考节点中确定得到至少一个第一参考节点。

在本申请其他实施例中，第二确定模块，具体用于实现以下步骤：

从至少一个目标信息中，确定至少一个包括目标标识的目标信息；其中，目标标识用于标识对应的第二参考节点未宕机；

从至少一个第二参考节点中，确定与至少一个包括目标标识的目标信息匹配的节点，得到至少一个第一参考节点。

在本申请其他实施例中，第一确定单元之前，数据备份装置还包括获取单元；其中：

获取单元，用于通过备份调度容器获取针对目标数据库的预设备份策略；

发送单元，用于通过备份调度容器将预设备份策略发送至至少一个第二参考节点；其中，至少一个第二参考节点为运行有与目标数据库对应的目标实例绑定的备份RPC容器的节点，预设备份策略用于指示每一第二参考节点通过设置的备份RPC容器检测到目标数据库的大小超过预设数据库阈值时，发送目标预测消耗资源至调度节点，至少一个第二参考节点包括至少一个第一参考节点。

在本申请其他实施例中，执行指令还用于指示针对目标数据库当前时刻至下一次全量备份操作时刻之间的增量备份操作均有目标节点执行。

在本申请其他实施例中，第二确定单元包括第三确定模块；其中：

第三确定模块，用于通过备份调度容器确定至少一个第一参考节点的最大资源；

第三确定模块，用于通过备份调度容器确定每一第一参考节点与对应的目标预测消耗资源之间的差值，得到至少一个参考差值；

第三确定模块，用于通过备份调度容器确定至少一个参考差值中确定值最大的目标差值；

第三确定模块，用于通过备份调度容器从至少一个第一参考节点中，确定目标差值对应的第一参考节点为目标节点。

需要说明的是，本实施例中数据备份装置的单元和模块之间的信息交互过程，可以参照图1～2对应的实施例提供的数据备份方法中的实现过程，此处不再赘述。

本申请实施例提供的一种数据备份装置，若检测到当前时刻为对目标数据库进行全量备份的时候，调度节点通过备份调度容器确定运行有与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第一参考节点，然后通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源，并基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点，最后发送执行指令至目标节点。这样，通过调度节点集中对运行有绑定目标数据库对应的目标实例的备份RPC容器的至少一个第一参考节点，根据每一第一参考节点的目标预测消耗资源进行分析，确定得到目标节点，并指示目标节点执行针对目标数据库的全量备份操作，解决了目前进行数据备份时，未充分考虑数据库实例对应的备份节点的负载，导致备份效率较低的问题，提出了一种确定用于进行备份数据的数据库实例的方法，实现了集中调度管理备份，提高了备份效率，保证了数据库的服务性能。

基于前述实施例，本申请的实施例提供一种数据备份设备，该数据备份设备可以应用于图1～2对应的实施例提供的数据备份方法中，参照图6所示，该数据备份设备6可以包括：处理器61、存储器62和通信总线63，其中：

存储器62，用于存储可执行指令；

通信总线63，用于实现处理器61和存储器62之间的通信连接；

处理器61，用于执行存储器62中存储的数据备份方法，以实现图1～2对应的实施例提供的数据备份方法中的实现过程，此处不再赘述。

基于前述实施例，本申请实施例提供一种数据备份系统，参照图7所示，该数据备份系统7包括：用于运行备份调度容器的调度节点71，和用于运行与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第二参考节点72；其中：

调度节点71，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器，至少一个第二参考节点包括至少一个第一参考节点；通过备份调度容器分别统计第一参考节点全量备份目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；通过备份调度容器基于至少一个目标预测消耗资源，从至少一个第一参考节点中确定目标节点；通过备份调度容器发送执行指令至目标节点；其中，执行指令用于指示目标节点运行的目标RPC容器执行针对目标数据库的全量备份操作；

目标节点72，用于通过目标RPC容器接收调度节点发送的执行指令；响应执行指令，在目标数据库对应的全量备份时刻，执行针对目标数据库的全量备份操作。

基于前述实施例，在本申请其他实施例中，用于运行备份调度容器的调度节点71的具体实现过程可以参照图1～2所示的实施例的实现过程，此处不再详细赘述。需说明的是，调度节点71为前述数据备份设备。

基于前述实施例，本申请的实施例提供一种计算机可读存储介质，简称为存储介质，该计算机可读存储介质存储有一个或者多个程序，该一个或者多个程序可被一个或者多个处理器执行，以实现参照图1～2对应的实施例提供的数据备份方法中的实现过程，此处不再赘述。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本申请的较佳实施例而已，并非用于限定本申请的保护范围。

Claims (12)

1.一种数据备份方法，其特征在于，所述方法应用于运行备份调度容器的调度节点，所述方法包括：

若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个所述第一参考节点用于运行与所述目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；

通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；

通过备份调度容器基于至少一个所述目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；

通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作。

2.根据权利要求1所述的方法，其特征在于，所述通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个所述目标预测消耗资源，包括：

通过备份调度容器接收每一所述第一参考节点发送的目标预测消耗资源，得到至少一个所述目标预测消耗资源；

或者，通过备份调度容器接收每一所述第一参考节点发送的第一消耗资源和第二消耗资源；其中，所述第一消耗资源包括对应的所述第一参考节点运行所述目标实例时的消耗资源，所述第二消耗资源包括对应的所述第一参考节点运行所述目标实例时除所述第一消耗资源外的消耗资源；

通过备份调度容器确定每一所述第一参考节点的所述第一消耗资源和第二消耗资源的和值，得到至少一个所述目标预测消耗资源。

3.根据权利要求2所述的方法，其特征在于，所述第二消耗资源至少包括对应的所述第一参考节点运行所述目标实例时运行的参考实例的消耗资源和对应的所述第一参考节点运行所述目标实例时，除运行所述目标实例和所述参考实例外的目标运行语句的运行消耗资源；其中，所述参考实例为对应的所述第一参考节点中运行所述目标实例时运行的除所述目标实例外的实例。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点，包括：

若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器接收每一第二参考节点发送的所述目标数据库的目标信息，得到至少一个目标信息；

基于至少一个所述目标信息，从至少一个所述第二参考节点中确定得到至少一个所述第一参考节点。

5.根据权利要求4所述的方法，其特征在于，所述基于至少一个所述目标信息，从至少一个所述第二参考节点中确定得到至少一个所述第一参考节点，包括：

从至少一个所述目标信息中，确定至少一个包括目标标识的目标信息；其中，所述目标标识用于标识对应的第二参考节点未宕机；

从至少一个所述第二参考节点中，确定与至少一个包括目标标识的目标信息匹配的节点，得到至少一个所述第一参考节点。

6.根据权利要求2至3、5任一项所述的方法，其特征在于，所述若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点之前，所述方法还包括：

通过所述备份调度容器获取针对所述目标数据库的预设备份策略；

通过所述备份调度容器将所述预设备份策略发送至至少一个第二参考节点；其中，至少一个所述第二参考节点为运行有与所述目标数据库对应的目标实例绑定的备份RPC容器的节点，所述预设备份策略用于指示每一所述第二参考节点通过设置的所述备份RPC容器检测到所述目标数据库的大小超过预设数据库阈值时，发送所述目标预测消耗资源至所述调度节点，至少一个所述第二参考节点包括至少一个所述第一参考节点。

7.根据权利要求1所述的方法，其特征在于，所述执行指令还用于指示针对所述目标数据库当前时刻至下一次全量备份操作时刻之间的增量备份操作均有所述目标节点执行。

8.根据权利要求1至3、5、7任一项所述的方法，其特征在于，所述通过备份调度容器基于至少一个所述目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点，包括：

通过所述备份调度容器确定至少一个所述第一参考节点的最大资源；

通过所述备份调度容器确定每一所述第一参考节点与对应的目标预测消耗资源之间的差值，得到至少一个参考差值；

通过所述备份调度容器确定所述至少一个参考差值中确定值最大的目标差值；

通过所述备份调度容器从所述至少一个第一参考节点中，确定所述目标差值对应的第一参考节点为所述目标节点。

9.一种数据备份装置，其特征在于，所述装置包括：第一确定单元、统计单元、第二确定单元和发送单元；其中：

所述第一确定单元，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个所述第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器；

所述统计单元，用于通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时的目标预测消耗资源，得到至少一个目标预测消耗资源；

所述第二确定单元，用于通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；

所述发送单元，用于通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作。

10.一种数据备份设备，其特征在于，所述设备包括：存储器、处理器和通信总线；其中：

所述存储器，用于存储可执行指令；

所述通信总线，用于实现所述处理器和所述存储器之间的通信连接；

所述处理器，用于运行备份调度容器执行所述存储器中存储的数据备份方法，实现如权利要求1至8中任一项所述的数据备份方法的步骤。

11.一种数据备份系统，其特征在于，所述系统包括：用于运行备份调度容器的调度节点，和用于运行与目标数据库对应的目标实例绑定的备份RPC容器的至少一个第二参考节点；其中：

所述调度节点，用于若检测到当前时刻为对目标数据库进行全量备份的时刻，通过备份调度容器确定至少一个第一参考节点；其中，至少一个所述第一参考节点用于运行与目标数据库对应的目标实例绑定的备份远程过程调用RPC容器，至少一个所述第二参考节点包括至少一个所述第一参考节点；通过备份调度容器分别统计所述第一参考节点全量备份所述目标数据库时目标预测消耗资源，得到至少一个目标预测消耗资源；通过备份调度容器基于所述至少一个目标预测消耗资源，从所述至少一个第一参考节点中确定目标节点；通过备份调度容器发送执行指令至所述目标节点；其中，所述执行指令用于指示所述目标节点运行的目标RPC容器执行针对所述目标数据库的全量备份操作；

所述目标节点，用于通过所述目标RPC容器接收所述调度节点发送的执行指令；响应所述执行指令，在所述目标数据库对应的全量备份时刻，执行针对所述目标数据库的全量备份操作。

12.一种存储介质，其特征在于，所述存储介质上存储有数据备份方法，所述数据备份方法被处理器执行时实现如权利要求1至8中任一项所述的数据备份方法的步骤。

Images