CN114328017A - 一种数据库备份方法、系统、计算机设备和存储介质 - Google Patents

Abstract

本发明涉及数据库存储技术领域，具体公开了一种数据库备份方法、系统、计算机设备和存储介质，所述方法包括接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库。本发明通过对备份数据库进行二级备份，通过二级备份数据库提高应急处理能力，而且二级备份数据库仅需要基础的存储器即可完成，普适性极强，便于推广使用。

Description

一种数据库备份方法、系统、计算机设备和存储介质

技术领域

本发明涉及数据库存储技术领域，具体是一种数据库备份方法、系统、计算机设备和存储介质。

背景技术

数据库指长期存储在计算机内有组织的、可共享的数据集合。数据库中的数据按一定的数据模型组织、描述和存储，数据库的应用非常广泛，几乎每个提供服务的运营商需要搭建自己的数据库，它往往存储着非常重要的信息，比如账户信息等等，因此，需要对数据库进行备份。

现有的数据库备份过程往往是即时性的，当发生中断时，缓存区数据随之清空，这么做的目的是使得缓存区以一个全新的姿态接收其它数据库备份操作，如果缓存区中还存在数据，那么势必会影响其它的备份过程。可以想到，现有的数据库备份方式的应急处理能力不足。

发明内容

本发明的目的在于提供一种数据库备份方法、系统、计算机设备和存储介质，以解决上述背景技术中提出的问题。

为实现上述目的，本发明提供如下技术方案：

一种数据库备份方法、系统、计算机设备和存储介质，所述方法包括：

接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

作为本发明进一步的方案：所述接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库的步骤包括：

接收用户发送的含有数据库地址的备份请求，对用户进行身份验证，当用户通过身份验证时，获取用户级别；

根据所述数据库地址读取目标数据库的需求级别，当所述用户级别达到所述需求级别时，定位目标数据库；

读取目标数据库中的数据的排序标准，根据所述排序标准确定文件句柄；

根据所述文件句柄将所述目标数据库拆分为子数据库。

作为本发明进一步的方案：所述根据所述文件句柄将所述目标数据库拆分为子数据库的步骤包括：

根据预设的子数据库容量确定偏移量，根据所述偏移量依次读取目标数据库中的数据；其中，所述偏移量与所述子数据库容量的差值小于预设的差值阈值；

判断所述数据是否为文件截止符，当所述数据为文件截止符时，将所述文件截止符标记为拆分点；

当所述数据不是文件截止符时，从当前偏移量开始依次读取数据，直至读取到文件截止符或数据库尾标识符，将文件截止符或数据库尾标识符标记为拆分点；

根据标记的拆分点将所述目标数据库拆分为子数据库。

作为本发明进一步的方案：所述一级备份进程数为第一进程数、第二进程数和第三进程数中的最小值，其中，所述第一进程数由所述硬件架构的中央处理器的配置信息确定；所述第二进程数由所述硬件架构的输入输出的配置信息确定；所述第三进程数根据所述子数据库的容量和所述子数据库的数量确定。

作为本发明进一步的方案：所述根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库的步骤包括：

获取子数据库的数量，新建内容为空的含有子数据库数量的一级数据库集；

根据所述一级备份进程数提取所述子数据库中的数据，并将所述数据输入所述一级数据库集中的子数据库；

当提取过程完成时，将所述一级数据库集中的子数据库与含有原始数据的子数据库中的所有数据输入异或缓存区进行异或运算；

当异或运算结果为零时，备份完成，当异或运算结果不为零时，重新备份。

作为本发明进一步的方案：所述根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库的步骤包括：

新建与所述一级数据集相同的二级数据集，所述一级数据库集中的子数据库备份完成时，将完成备份的子数据库中的数据备份至二级数据集中的子数据库中；

分别计算基于目标数据库生成的子数据库、一级数据库集中的子数据库和二级数据集中的子数据库中数据的和以及平方和；

比对三组计算数据，当三组计算数据相同时，备份完成，当一级数据库集中的子数据库的计算数据不同时，重新备份一级数据库集中的子数据库，当二级数据库集中的子数据库的计算数据不同时，重新备份二级数据库集中的子数据库。

作为本发明进一步的方案：所述第一备份数据库中断时，删除未完成的备份数据；所述第二备份数据库中断时，在预设的时间范围内存储未完成的备份数据。

本发明技术方案还提供了一种数据库备份系统，所述系统包括：

数据拆分模块，用于接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

进程数确定模块，用于获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

第一备份模块，用于根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

第二备份模块，用于根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

本发明技术方案还提供了一种计算机设备，所述计算机设备包括一个或多个处理器和一个或多个存储器，所述一个或多个存储器中存储有至少一条程序代码，所述程序代码由所述一个或多个处理器加载并执行时，实现所述数据库备份方法。

本发明技术方案还提供了一种存储介质，所述存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行时，实现所述数据库备份方法。

与现有技术相比，本发明的有益效果是：本发明通过对备份数据库进行二级备份，通过二级备份数据库提高应急处理能力，而且二级备份数据库仅需基础的存储器即可完成，普适性极强，便于推广使用。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例。

图1示出了数据库备份方法的流程框图。

图2示出了数据库备份方法的第一子流程框图。

图3示出了数据库备份方法的第二子流程框图。

图4示出了数据库备份方法的第三子流程框图。

图5示出了数据库备份方法的第四子流程框图。

图6示出了数据库备份方法系统的组成结构框图。

具体实施方式

为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

实施例1

图1示出了数据库备份方法的流程框图本发明实施例中，一种数据库备份方法、系统、计算机设备和存储介质，所述方法包括步骤S100至步骤S400：

步骤S100：接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

步骤S100的目的是将目标数据库拆分为数据量更小的子数据库，所述子数据库可以理解为一些数据量较小的数据表；

步骤S200：获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

每个计算机设备的硬件架构是不同的，不同的硬件架构，读取处理数据的能力是不同的，性能较高的设备，进程数要多一些，性能较低的设备，进程数会少一些；

步骤S300：根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

步骤S400：根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

步骤S300和步骤S400是本发明技术方案中的核心步骤，通俗地说，生成一个关于备份数据的备份，这么做的好处一是能够对备份数据进行检测，二是能够提高对于特殊情况的应对能力，比如，如果备份过程突然中断，如果将数据保存在备份数据库，那么，这那段时间内，备份数据库将无法用于其它数据库的备份过程，因此，现有的备份过程往往是一旦中断就立即执行复位动作，要么就是定时的将备份数据上传至某个存储区，当发生中断时，总会丢失一些数据。如果是两个数据库，就可以实时的记录备份过程，并且不影响其它备份过程。

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

第二备份数据库的缓存时间大于所述第一备份数据库，在实际情况中，第一备份数据库的备份时间为零，即，一旦发生中断，立即复位，第二备份数据库的备份时间往往是以日为单位的，当时间超过备份时间，第二备份数据库也是清空的；值得一提的是，第二备份数据库的可以不止一个。

图2示出了数据库备份方法的第一子流程框图，所述接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库的步骤包括步骤S101至步骤S104：

步骤S101：接收用户发送的含有数据库地址的备份请求，对用户进行身份验证，当用户通过身份验证时，获取用户级别；

步骤S102：根据所述数据库地址读取目标数据库的需求级别，当所述用户级别达到所述需求级别时，定位目标数据库；

步骤S103：读取目标数据库中的数据的排序标准，根据所述排序标准确定文件句柄；

步骤S104：根据所述文件句柄将所述目标数据库拆分为子数据库。

步骤S101至步骤S104提供了一种数据拆分方法，首先，步骤S101对用户进行身份验证，然后，步骤S202对用户进行权限验证，不是每个用户都可以对任何数据库进行备份的，最后，读取目标数据库中的排序标准，确定拆分方式。其中，排序标准可以是时间，也可以是名称首字母，最常见的是时间。

图3示出了数据库备份方法的第二子流程框图，所述根据所述文件句柄将所述目标数据库拆分为子数据库的步骤包括步骤S1041至步骤S1044：

步骤S1041：根据预设的子数据库容量确定偏移量，根据所述偏移量依次读取目标数据库中的数据；其中，所述偏移量与所述子数据库容量的差值小于预设的差值阈值；

步骤S1042：判断所述数据是否为文件截止符，当所述数据为文件截止符时，将所述文件截止符标记为拆分点；

步骤S1043：当所述数据不是文件截止符时，从当前偏移量开始依次读取数据，直至读取到文件截止符或数据库尾标识符，将文件截止符或数据库尾标识符标记为拆分点；

步骤S1044：根据标记的拆分点将所述目标数据库拆分为子数据库。

步骤S1041至步骤S1044对所述步骤S104进行了进一步的限定，其核心内容是检测文件截止符，需要说明的是，偏移量一般是接近子数据库的容量的数据，这样可以使得每个子数据库中的数据量大致是相同的。

进一步的，所述一级备份进程数为第一进程数、第二进程数和第三进程数中的最小值，其中，所述第一进程数由所述硬件架构的中央处理器的配置信息确定；所述第二进程数由所述硬件架构的输入输出的配置信息确定；所述第三进程数根据所述子数据库的容量和所述子数据库的数量确定。

图4示出了数据库备份方法的第三子流程框图，所述根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库的步骤包括步骤S301至步骤S304：

步骤S301：获取子数据库的数量，新建内容为空的含有子数据库数量的一级数据库集；

步骤S302：根据所述一级备份进程数提取所述子数据库中的数据，并将所述数据输入所述一级数据库集中的子数据库；

步骤S303：当提取过程完成时，将所述一级数据库集中的子数据库与含有原始数据的子数据库中的所有数据输入异或缓存区进行异或运算；

步骤S304：当异或运算结果为零时，备份完成，当异或运算结果不为零时，重新备份。

上述内容是对第一备份数据库的验证过程，验证的核心是异或运算，如果，备份的数据与原始数据是相同的，最终的异或运算结果应该是零，这么做的过程仅需要一个变量，用于存储异或结果即可。

图5示出了数据库备份方法的第四子流程框图，所述根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库的步骤包括步骤S401至步骤S403：

步骤S401：新建与所述一级数据集相同的二级数据集，所述一级数据库集中的子数据库备份完成时，将完成备份的子数据库中的数据备份至二级数据集中的子数据库中；

步骤S402：分别计算基于目标数据库生成的子数据库、一级数据库集中的子数据库和二级数据集中的子数据库中数据的和以及平方和；

步骤S403：比对三组计算数据，当三组计算数据相同时，备份完成，当一级数据库集中的子数据库的计算数据不同时，重新备份一级数据库集中的子数据库，当二级数据库集中的子数据库的计算数据不同时，重新备份二级数据库集中的子数据库。

步骤S401至步骤S403的核心步骤是对第二备份数据库进行数据验证，验证过程是同时对三个子数据库进行验证，通过根据预设的计算公式计算不同子数据库中的计算数据，然后比对这个计算数据即可。

需要说明的是，无论是步骤S301至步骤S304中的异或运算，还是步骤S401至步骤S403的计算数据，它们的目的并不简单的是判断是否存在备份错误，它还包含一定的定位功能，我们知道，备份过程中出现错误的概率是很小的，其发生的错误大都是缺失的一个数据，对于异或运算来说，最终的异或运算结果就是那个缺失的数据；如果缺失了两个数据，那么通过和与平方和，可以构建两个独立的方程组，根据所述方程组可以计算缺失的数据。比如，两个子数据库的和之差就是那两个缺失数据的和，两个子数据库的平方和之差就是那两个缺失数据的平方和。

值得一提的是，如果是缺失三个数据，那么可以再计算一个值，构建新的方程，从而计算缺失的数据；但是，一般情况下，不会发生多个数据缺失的情况，当缺失的数据达到一定阈值时，往往就重新备份了。

在本发明技术方案的一个优选实施例中，所述第一备份数据库中断时，删除未完成的备份数据；所述第二备份数据库中断时，在预设的时间范围内存储未完成的备份数据。

实施例2

图6示出了数据库备份方法系统的组成结构框图，本发明实施例中，一种数据库备份方法、系统、计算机设备和存储介质，所述系统10包括：

数据拆分模块11，用于接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

进程数确定模块12，用于获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

第一备份模块13，用于根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

第二备份模块14，用于根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

所述数据库备份方法所能实现的功能均由计算机设备完成，所述计算机设备包括一个或多个处理器和一个或多个存储器，所述一个或多个存储器中存储有至少一条程序代码，所述程序代码由所述一个或多个处理器加载并执行以实现所述数据过滤方法。

处理器从存储器中逐条取出指令、分析指令，然后根据指令要求完成相应操作，产生一系列控制命令，使计算机各部分自动、连续并协调动作，成为一个有机的整体，实现程序的输入、数据的输入以及运算并输出结果，这一过程中产生的算术运算或逻辑运算均由运算器完成；所述存储器包括只读存储器（Read-Only Memory，ROM），所述只读存储器用于存储计算机程序，所述存储器外部设有保护装置。

示例性的，计算机程序可以被分割成一个或多个模块，一个或者多个模块被存储在存储器中，并由处理器执行，以完成本发明。一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述计算机程序在终端设备中的执行过程。

本领域技术人员可以理解，上述服务设备的描述仅仅是示例，并不构成对终端设备的限定，可以包括比上述描述更多或更少的部件，或者组合某些部件，或者不同的部件，例如可以包括输入输出设备、网络接入设备、总线等。

所称处理器可以是中央处理单元（Central Processing Unit，CPU），还可以是其他通用处理器、数字信号处理器 （Digital Signal Processor，DSP）、专用集成电路（Application Specific Integrated Circuit，ASIC）、现成可编程门阵列 （Field-Programmable Gate Array，FPGA）或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，上述处理器是上述终端设备的控制中心，利用各种接口和线路连接整个用户终端的各个部分。

上述存储器可用于存储计算机程序和/或模块，上述处理器通过运行或执行存储在存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现上述终端设备的各种功能。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如信息采集模板展示功能、产品信息发布功能等）等；存储数据区可存储根据泊位状态显示系统的使用所创建的数据（比如不同产品种类对应的产品信息采集模板、不同产品提供方需要发布的产品信息等）等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡（Smart Media Card， SMC），安全数字（Secure Digital， SD）卡，闪存卡（Flash Card）、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

终端设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取介质中。基于这样的理解，本发明实现上述实施例系统中的全部或部分模块/单元，也可以通过计算机程序来指令相关的硬件来完成，上述的计算机程序可存储于计算机可读介质中，该计算机程序在被处理器执行时，可实现上述各个系统实施例的功能。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、电载波信号、电信信号以及软件分发介质等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种数据库备份方法，其特征在于，所述方法包括：

接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

2.根据权利要求1所述的数据库备份方法，其特征在于，所述接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库的步骤包括：

接收用户发送的含有数据库地址的备份请求，对用户进行身份验证，当用户通过身份验证时，获取用户级别；

根据所述数据库地址读取目标数据库的需求级别，当所述用户级别达到所述需求级别时，定位目标数据库；

读取目标数据库中的数据的排序标准，根据所述排序标准确定文件句柄；

根据所述文件句柄将所述目标数据库拆分为子数据库。

3.根据权利要求2所述的数据库备份方法，其特征在于，所述根据所述文件句柄将所述目标数据库拆分为子数据库的步骤包括：

根据预设的子数据库容量确定偏移量，根据所述偏移量依次读取目标数据库中的数据；其中，所述偏移量与所述子数据库容量的差值小于预设的差值阈值；

判断所述数据是否为文件截止符，当所述数据为文件截止符时，将所述文件截止符标记为拆分点；

当所述数据不是文件截止符时，从当前偏移量开始依次读取数据，直至读取到文件截止符或数据库尾标识符，将文件截止符或数据库尾标识符标记为拆分点；

根据标记的拆分点将所述目标数据库拆分为子数据库。

4.根据权利要求1所述的数据库备份方法，其特征在于，所述一级备份进程数为第一进程数、第二进程数和第三进程数中的最小值，其中，所述第一进程数由所述硬件架构的中央处理器的配置信息确定；所述第二进程数由所述硬件架构的输入输出的配置信息确定；所述第三进程数根据所述子数据库的容量和所述子数据库的数量确定。

5.根据权利要求1所述的数据库备份方法，其特征在于，所述根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库的步骤包括：

获取子数据库的数量，新建内容为空的含有子数据库数量的一级数据库集；

根据所述一级备份进程数提取所述子数据库中的数据，并将所述数据输入所述一级数据库集中的子数据库；

当提取过程完成时，将所述一级数据库集中的子数据库与含有原始数据的子数据库中的所有数据输入异或缓存区进行异或运算；

当异或运算结果为零时，备份完成，当异或运算结果不为零时，重新备份。

6.根据权利要求5所述的数据库备份方法，其特征在于，所述根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库的步骤包括：

新建与所述一级数据集相同的二级数据集，所述一级数据库集中的子数据库备份完成时，将完成备份的子数据库中的数据备份至二级数据集中的子数据库中；

分别计算基于目标数据库生成的子数据库、一级数据库集中的子数据库和二级数据集中的子数据库中数据的和以及平方和；

比对三组计算数据，当三组计算数据相同时，备份完成，当一级数据库集中的子数据库的计算数据不同时，重新备份一级数据库集中的子数据库，当二级数据库集中的子数据库的计算数据不同时，重新备份二级数据库集中的子数据库。

7.根据权利要求1-6任一项所述的数据库备份方法，其特征在于，所述第一备份数据库中断时，删除未完成的备份数据；所述第二备份数据库中断时，在预设的时间范围内存储未完成的备份数据。

8.一种数据库备份系统，其特征在于，所述系统包括：

数据拆分模块，用于接收含有数据库地址的备份指令，根据所述数据库地址定位目标数据库，对所述目标数据库进行数据拆分，得到子数据库；

进程数确定模块，用于获取硬件架构的配置信息，根据所述配置信息确定一级备份进程数和二级备份进程数；

第一备份模块，用于根据所述一级备份进程数对所述子数据库进行备份，得到第一备份数据库；

第二备份模块，用于根据所述二级备份进程数对所述第一备份数据库进行备份，得到第二备份数据库；

其中，所述第一备份进程数和所述第二备份进程数相同且至少为一；所述第二备份数据库的缓存时间大于所述第一备份数据库。

9.一种计算机设备，其特征在于，所述计算机设备包括一个或多个处理器和一个或多个存储器，所述一个或多个存储器中存储有至少一条程序代码，所述程序代码由所述一个或多个处理器加载并执行时，实现如权利要求1-7所述的数据库备份方法。

10.一种存储介质，其特征在于，所述存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行时，实现如权利要求1-7所述的数据库备份方法。

Images