CN115202929A - 数据库集群备份系统 - Google Patents

数据库集群备份系统 Download PDF

Info

Publication number
CN115202929A
CN115202929A CN202210711071.7A CN202210711071A CN115202929A CN 115202929 A CN115202929 A CN 115202929A CN 202210711071 A CN202210711071 A CN 202210711071A CN 115202929 A CN115202929 A CN 115202929A
Authority
CN
China
Prior art keywords
backup
node
data
log
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210711071.7A
Other languages
English (en)
Other versions
CN115202929B (zh
Inventor
曾涛
范佳
王子骏
马立珂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Dingjia Computer Technology Co ltd
Original Assignee
Guangzhou Dingjia Computer Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Dingjia Computer Technology Co ltd filed Critical Guangzhou Dingjia Computer Technology Co ltd
Priority to CN202210711071.7A priority Critical patent/CN115202929B/zh
Publication of CN115202929A publication Critical patent/CN115202929A/zh
Application granted granted Critical
Publication of CN115202929B publication Critical patent/CN115202929B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/273—Asynchronous replication or reconciliation
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种数据库集群备份系统。本申请能够在数据库集群备份时保证数据的同步备份，从而保证数据的一致性。该系统包括：主节点、从节点、目录服务器、存储服务器和客户端；其中，主节点，用于响应于数据备份命令，将主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使多个从节点将从节点备份数据发送到存储服务器中；存储服务器，用于将主节点备份数据和从节点备份数据作为备份集存储于本地，并返回存储结果；主节点，用于响应于备份集的存储结果，将主节点执行指令写入存储服务器中形成归档日志；目录服务器，用于返回日志记录状态；主节点，用于根据日志记录状态向客户端返回数据备份执行结果。

Description

数据库集群备份系统
技术领域
本申请涉及数据库技术领域，特别是涉及一种数据库集群备份系统。
背景技术
随着大数据在各行各业的渗透和发展，企业在面临互联网应用的布局以及互联网或物联网的数据存储时，需要使用数据库服务技术存储海量数据。
传统技术中，普遍采用单数据服务器进行数据存储，但单数据服务器已经无法满足目前大型企业的数据应用，因此出现了数据库集群的应用。
然而，目前的数据库集群在实现数据备份或恢复时无法保证数据同步，当数据库集群中的不同数据库上存储有对同一份文件的不同更新数据时，例如A节点上存储有用户2点钟产生的数据，而B节点上也有一份上述用户的数据，但B节点上的数据正在更新，当需要备份该用户的数据时，数据库集群无法判断需要以哪个节点上的数据为准，导致数据不同步，也会进一步影响多个数据库节点的存储的数据一致性。
发明内容
基于此，有必要针对上述技术问题，提供一种数据库集群备份系统。
本申请提供了一种数据库集群备份系统。所述系统包括主节点、从节点、目录服务器、存储服务器和客户端；其中，
所述主节点，用于响应于数据备份命令，将与所述数据备份命令相应的主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使所述多个从节点将与所述主节点备份数据对应的从节点备份数据发送到存储服务器中；
所述存储服务器，用于将所述主节点备份数据和所述从节点备份数据作为备份集存储于本地，并返回针对所述备份集的存储结果；
所述主节点，用于响应于所述备份集的存储结果，将与所述数据备份命令对应的主节点执行指令写入所述存储目录服务器中形成归档日志；
所述主节点，还用于响应于所述备份集的存储结果，将所述主节点备份数据对应的主节点作业日志发送至所述目录服务器；以及，所述多个从节点，分别用于响应于所述备份集的存储结果，将所述从节点备份数据对应的从业点作业日志发送至所述目录服务器；
所述目录服务器，用于返回针对所述主节点作业日志的日志记录状态和所述从节点作业日志的日志记录状态；
所述主节点，用于根据所述主节点日志记录状态向所述客户端返回数据备份执行结果；
所述从节点，用于根据所述从节点日志记录状态向所述客户端返回数据备份执行结果。
在其中一个实施例中，
所述主节点，还用于响应于所述备份集的存储结果，向所述从节点发送日志存储子命令，以使所述从节点将与所述数据备份子命令对应的从节点执行指令写入所述目录服务器中。
在其中一个实施例中，
所述主节点，进一步用于响应于所述数据备份命令，检测配置信息，在所述配置信息满足预设条件的情况下将与所述数据备份命令相应的主节点备份数据发送到所述存储服务器中。
在其中一个实施例中，
所述主节点，还用于响应于数据恢复命令，向所述目录服务器发送备份集地址查找请求；
所述目录服务器，用于查找并返回备份集地址；
所述主节点，用于根据所述备份集地址从存储服务器上读取备份集以恢复数据。
在其中一个实施例中，
所述主节点，还用于响应于所述数据恢复命令，向所述目录服务器发送归档日志地址查找请求；
所述目录服务器，用于查找并返回满足预设条件的归档日志地址；
所述主节点，还用于根据所述归档日志地址从所述存储服务器下载归档日志，并结合所述归档日志基于所述备份集恢复本地存储数据。
在其中一个实施例中，所述主节点，还用于在恢复本地存储数据之后，向客户端返回恢复状态。
在其中一个实施例中，所述归档日志包括独立日志和综合日志。
在其中一个实施例中，所述系统还包括支持节点；
所述支持节点用于从所述客户端接收任务请求，并根据所述任务请求向相应的主节点发送所述数据备份命令。
在其中一个实施例中，所述系统还包括集群管理节点；所述集群管理节点用于收集并存储所述主节点和所述从节点的节点标识。
在其中一个实施例中，所述系统的类别为单备份集集群或多备份集集群。
上述数据库集群备份系统，包括主节点、从节点、目录服务器、存储服务器和客户端；其中，主节点，用于响应于数据备份命令，将与数据备份命令相应的主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使多个从节点将与主节点备份数据对应的从节点备份数据发送到存储服务器中；存储服务器，用于将主节点备份数据和从节点备份数据作为备份集存储于本地，并返回针对备份集的存储结果；主节点，用于响应于备份集的存储结果，将与数据备份命令对应的主节点执行指令写入存储服务器中形成归档日志；主节点，还用于响应于备份集的存储结果，将主节点备份数据对应的主节点作业日志发送至目录服务器；以及，多个从节点，分别用于响应于备份集的存储结果，将从节点备份数据对应的从业点作业日志发送至目录服务器；目录服务器，用于返回针对主节点作业日志的日志记录状态和针对从节点作业日志的日志记录状态；主节点，用于根据主节点的日志记录状态向客户端返回数据备份执行结果。本申请通过整个数据库集群系统中各个节点之间的协同合作机制，能够在数据库集群备份时保证数据的同步备份，从而保证数据的一致性。
附图说明
图1为一个实施例中数据库集群备份系统的应用环境图；
图2为一个实施例中数据库集群备份系统的备份流程时序图；
图3为一个实施例中数据库集群备份系统的数据恢复流程时序图；
图4为一个实施例中计算机设备的内部结构图；
图5为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请实施例提供的数据库集群备份系统，可以应用于如图1所示的应用环境中。其中，该系统包括多个主节点，每个主节点又可以包括多个从节点。存储服务器用于存储各个节点的数据备份文件；目录服务器用于存储每次备份产生的归档日志。每个节点(包括主节点和从节点)可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备，物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。存储服务器或目录服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中，如图2所示，提供了一种数据库集群备份系统的时序流程图，上述数据库集群备份系统包括主节点、从节点、目录服务器、存储服务器和客户端，其中，包括如下步骤：
主节点，用于响应于数据备份命令，将与数据备份命令相应的主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使多个从节点将与主节点备份数据对应的从节点备份数据发送到存储服务器中；
其中，数据备份子命令是与数据备份命令的对应的子命令。
具体地，主节点如图2中的agent-ep1或agent-ep1所示，主节点从客户端(UI，UserInterface，用户界面)接收数据备份命令，将与该数据备份命令对应的主节点备份数据发送到存储服务器，同时，向多个从节点发送数据备份子命令，以使多个从节点将与主节点备份数据对应的从节点备份数据发送到存储服务器中。其中，各个从节点发送的从节点备份数据与主节点备份数据可以各不相同，例如，在MPP(Massively Parallel Processing，大规模并行处理)系统中，每个节点存储的数据都是不一样的，在整个MPP集群系统进行数据备份时，需要所有节点同时协同工作，获取MPP集群系统的完整数据备份，缺一不可。
存储服务器，用于将主节点备份数据和从节点备份数据作为备份集存储于本地，并返回针对备份集的存储结果；
其中，备份集是针对同一时间点的备份数据，例如针对上述主节点和从节点在同一时间点的各个备份数据，形成备份集，备份集是指一个时间点的上的备份。
具体地，存储服务器将主节点备份数据和从节点备份数据作为备份集存储于本地，并返回针对备份集的存储结果(例如存储成功或存储失败)。
主节点，用于响应于备份集的存储结果，将与数据备份命令对应的主节点执行指令写入存储目录服务器中形成归档日志；
其中，归档日志是指一段时间内的执行记录，例如增删改查指令等。
具体地，主节点收到存储成功结果后，将执行上述备份过程的增删改查指令写入存储目录服务器中形成归档日志。
进一步地，主节点，还用于响应于备份集的存储结果，向从节点发送日志存储子命令，以使从节点将与数据备份子命令对应的从节点执行指令写入存储目录服务器中。
相应地，从节点也会将执行备份过程的增删改查指令写入存储目录服务器中形成从节点的归档日志。
主节点，还用于响应于备份集的存储结果，将主节点备份数据对应的主节点作业日志发送至目录服务器；以及，多个从节点，分别用于响应于备份集的存储结果，将从节点备份数据对应的从业点作业日志发送至目录服务器；
其中，作业日志是一个包含作业执行情况的详细记录的文件，将收集来自批处理容器的系统消息和作业可执行文件的输出。通过检查作业日志，可以查看批处理作业的生命周期，其中包括批处理应用程序本身的输出。由于本申请是针对数据库集群的备份方法，各个节点之间需要协同合作才能完成一项备份任务，因此每次备份需要对整个任务的备份执行情况进行记录，例如，作业日志中包括节点上的数据大小、数据源、作业的开始和结束、批处理数据流的打开、关闭和检查点，检查点的开始和结束等信息。
具体地，各个节点(包括各个主节点、从节点)分别在本地数据备份完成后，将备份过程产生的作业日志(作业日志包括主节点作业日志和从节点作业日志)发送至目录服务器(目录服务器如图2中的catalog服务器)进行存储。
目录服务器，用于返回针对主节点作业日志的日志记录状态和针对从节点作业日志的日志记录状态；
其中，目录服务器如图2中的catalog服务器，主要用于存储作业日志。
具体地，目录服务器在存储上述各个节点的作业日志后返回日志记录状态至相应的各个节点，即汇报作业日志写入成功或失败。
主节点，用于根据主节点的日志记录状态向客户端返回数据备份执行结果。
其中，数据备份执行结果是指数据备份执行成功或失败。具体地，主节点，根据主节点的日志记录状态向客户端返回数据备份执行成功或失败的结果；从节点则根据从节点的日志记录状态想客户端返回数据备份执行结果。
可选地，本实施例还包括backup服务器(支持服务器，在本申请中也称支持节点)，该backup服务器位于后端，主要用于接收客户端的备份任务，并根据该备份任务为各个相关的主节点或从节点分配任务。
上述实施例，提供了一种数据库集群备份系统，包括主节点、从节点、目录服务器、存储服务器和客户端；其中，主节点，用于响应于数据备份命令，将与数据备份命令相应的主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使多个从节点将与主节点备份数据对应的从节点备份数据发送到存储服务器中；存储服务器，用于将主节点备份数据和从节点备份数据作为备份集存储于本地，并返回针对备份集的存储结果；主节点，用于响应于备份集的存储结果，将与数据备份命令对应的主节点执行指令写入存储服务器中形成归档日志；主节点，还用于响应于备份集的存储结果，将主节点备份数据对应的主节点作业日志发送至目录服务器；以及，多个从节点，分别用于响应于备份集的存储结果，将从节点备份数据对应的从业点作业日志发送至目录服务器；目录服务器，用于返回针对主节点作业日志的日志记录状态和针对从节点作业日志的日志记录状态；主节点，用于根据主节点的日志记录状态向客户端返回数据备份执行结果。本实施例通过整个数据库集群系统中各个节点之间的协同合作机制，能够在数据库集群备份时保证数据的同步备份，从而保证数据的一致性。
在一实施例中，上述主节点，进一步用于响应于数据备份命令，检测配置信息，在配置信息满足预设条件的情况下将与数据备份命令相应的主节点备份数据发送到所述存储服务器中。
其中，配置信息是指数据库的接口信息。
具体地，主节点，进一步用于响应于数据备份命令，检测配置信息(例如相关的本地接口与存储服务器的接口状态)，在接口状态匹配正确的情况下将与数据备份命令相应的主节点备份数据发送到存储服务器中。
上述实施例，通过检测配置信息后开始发送备份数据，避免数据发送至错误的接口。
在一实施例中，上述主节点，还用于响应于数据恢复命令，向目录服务器发送备份集查找请求；上述目录服务器，用于查找并返回备份集地址；上述主节点，用于根据所述备份集地址从存储服务器上读取备份集以恢复数据。
具体地，如图3所示的数据恢复流程示意图中，主节点接收客户端发送的数据恢复命令，向目录服务器发送备份集查找请求，目录服务器，在本地(即目录服务器本地)查找得到备份集地址，并将该备份集地址返回至各个节点，其中，每个节点都有自己对应的备份集地址；各个节点，根据各自的备份集地址从存储服务器上下载得到备份集。
上述实施例，通过先在目录服务器上查找备份集地址，再从与备份集地址对应的存储服务器上下载备份数据，完成数据恢复工作。
在一实施例中，上述主节点，还用于响应于数据恢复命令，向目录服务器发送归档日志地址查找请求；目录服务器，用于查找并返回满足预设条件的归档日志地址；主节点，还用于根据归档日志地址从存储服务器下载归档日志，并结合归档日志和备份集恢复本地存储数据，具体地，从存储服务器下载指定归档日志到主节点本地，根据归档日志从存储服务器远程读取备份集从而恢复本地数据。
具体地，如图3所示，上述主节点，还在接收到客户端发送的数据恢复命令后，向目录服务器发送归档日志地址查找请求，目录服务器，在本地查找得到满足预设条件的归档日志地址，例如当有多个主节点的备份数据集时，目录服务器可根据备份时间先后顺序选择最近时间点的备份数据所对应的归档日志地址返回给主节点，主节点，可根据该地址从存储服务器下载归档日志，并结合归档日志以及上述存储服务器中的备份集恢复本地存储数据，具体地，从存储服务器下载指定归档日志到主节点本地，根据归档日志从存储服务器远程读取备份集从而恢复本地数据。
上述实施例，通过结合归档日志和备份集恢复本地数据，能够保证各个节点上的数据一致性。
在一实施例中，上述主节点，还用于在恢复本地存储数据之后，向客户端方返回恢复状态。
具体地，主节点在恢复本地数据之后，向客户端汇报恢复情况。
上述实施例，通过主节点向客户端汇报数据恢复情况完成数据恢复工作的闭环。
在一实施例中，上述归档日志包括独立日志和综合日志。
具体地，独立日志是指集群中的每个节点有自己单独的归档日志，本节点的归档日志只能结合本节点产生的数据库备份集使用，从而实现任意时间点的恢复。例如主备集群、读写分离集群、MPP(Massively Parallel Processing，大规模并行处理)等。综合日志是指集群中各节点的归档日志不能单独使用，需要各个节点日志结合起来使用，或者集群存在单独的目录服务器，在集群恢复时可根据集群类别智能下载所需的归档日志。例如DSC(DSC集群，也称为RAC集群)、TDD(Transparent Distributed Database，透明分布式数据库)等。本申请所提供的数据备份恢复系统支持独立日志或综合日志。
上述实施例，通过不同日志类型，能够为系统提供多种备份恢复方式，适用于不同的应用情景。
在一实施例中，如图2和图3所示，上述系统还包括支持节点，用于从客户端接收任务请求，并根据任务请求向相应的主节点发送数据备份命令。
具体地，上述支持节点为位于后端侧的服务节点，用于从客户端接收任务请求，并根据任务请求向相应的主节点发送数据备份命令。
上述实施例，通过在后端提供支持节点，有利于集中管理客户端发送的请求。
在一实施例中，上述系统还包括集群管理节点；上述集群管理节点用于收集并存储所述主节点和所述从节点的节点标识。
具体地，集群管理节点用于集群信息收集，其中，集群信息主要是指各个主节点和从节点的节点标识，节点标识用于唯一表示每个节点服务器。
上述实施例，通过集群管理节点统一收集各个节点服务器的节点标识，有利于维护整个数据库集群。
在一实施例中，上述系统的类别为单备份集集群或多备份集集群。
其中，单备份集集群是指无论从集群中哪个节点进行数据库的备份，后台只会产生一个备份集，可以使用这个备份集进行数据库集群的恢复或还原。例如主备集群、读写分离集群、DSC(RAC)等；多备份集集群是指无论从集群中哪个节点对数据库进行备份，后台会根据集群中节点的数量产生相同数量的多个备份集(备份集的数据不交叉)，可以分别利用自己节点的备份集进行数据恢复或还原，从而实现数据库集群的恢复或还原。例如MPP等。
上述实施例，通过对不同类型的集群利用标识或参数区分，使得本系统能够在进行集群恢复或克隆时，根据集群类别智能选择系统已备份的归档日志进行下载。
应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，，用于作为上述主节点、从节点或目录服务器、存储服务器，其内部结构图可以如图4所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储各类备份数据。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，用于作为上述主节点或从节点，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图4至5中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
需要说明的是，本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。

Claims (10)

1.一种数据库集群备份系统，其特征在于，所述系统包括主节点、从节点、目录服务器、存储服务器和客户端；其中，
所述主节点，用于响应于数据备份命令，将与所述数据备份命令相应的主节点备份数据发送到存储服务器中；同时，向多个从节点发送数据备份子命令，以使所述多个从节点将与所述主节点备份数据对应的从节点备份数据发送到存储服务器中；
所述存储服务器，用于将所述主节点备份数据和所述从节点备份数据作为备份集存储于本地，并返回针对所述备份集的存储结果；
所述主节点，用于响应于所述备份集的存储结果，将与所述数据备份命令对应的主节点执行指令写入所述存储服务器中形成归档日志；
所述主节点，还用于响应于所述备份集的存储结果，将所述主节点备份数据对应的主节点作业日志发送至所述目录服务器；以及，所述多个从节点，分别用于响应于所述备份集的存储结果，将所述从节点备份数据对应的从业点作业日志发送至所述目录服务器；
所述目录服务器，用于返回针对所述主节点作业日志的日志记录状态和针对所述从节点作业日志的日志记录状态；
所述主节点，用于根据所述主节点的日志记录状态向所述客户端返回数据备份执行结果；
所述从节点，用于根据所述从节点的日志记录状态向所述客户端返回数据备份执行结果。
2.根据权利要求1所述的系统，其特征在于，
所述主节点，还用于响应于所述备份集的存储结果，向所述从节点发送日志存储子命令，以使所述从节点将与所述数据备份子命令对应的从节点执行指令写入所述目录服务器中。
3.根据权利要求1所述的系统，其特征在于，
所述主节点，进一步用于响应于所述数据备份命令，检测配置信息，在所述配置信息满足预设条件的情况下将与所述数据备份命令相应的主节点备份数据发送到所述存储服务器中。
4.根据权利要求1所述的系统，其特征在于，
所述主节点，还用于响应于数据恢复命令，向所述目录服务器发送备份集地址查找请求；
所述目录服务器，用于查找并返回备份集地址；
所述主节点，用于根据所述备份集地址从存储服务器上读取备份集以恢复数据。
5.根据权利要求4所述的系统，其特征在于，
所述主节点，还用于响应于所述数据恢复命令，向所述目录服务器发送归档日志地址查找请求；
所述目录服务器，用于查找并返回满足预设条件的归档日志地址；
所述主节点，还用于根据所述归档日志地址从所述存储服务器下载归档日志，并结合所述归档日志基于所述备份集恢复本地存储数据。
6.根据权利要求5所述的系统，其特征在于，所述主节点，还用于在恢复本地存储数据之后，向客户端返回恢复状态。
7.根据权利要求1所述的系统，其特征在于，所述归档日志包括独立日志和综合日志。
8.根据权利要求1所述的系统，其特征在于，所述系统还包括支持节点；
所述支持节点用于从所述客户端接收任务请求，并根据所述任务请求向相应的主节点发送所述数据备份命令。
9.根据权利要求1所述的系统，其特征在于，所述系统还包括集群管理节点；所述集群管理节点用于收集并存储所述主节点和所述从节点的节点标识。
10.根据权利要求1至9任一项所述的系统，其特征在于，所述系统的类别为单备份集集群或多备份集集群。
CN202210711071.7A 2022-06-22 2022-06-22 数据库集群备份系统 Active CN115202929B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210711071.7A CN115202929B (zh) 2022-06-22 2022-06-22 数据库集群备份系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210711071.7A CN115202929B (zh) 2022-06-22 2022-06-22 数据库集群备份系统

Publications (2)

Publication Number Publication Date
CN115202929A true CN115202929A (zh) 2022-10-18
CN115202929B CN115202929B (zh) 2023-04-07

Family

ID=83575846

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210711071.7A Active CN115202929B (zh) 2022-06-22 2022-06-22 数据库集群备份系统

Country Status (1)

Country Link
CN (1) CN115202929B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117493075A (zh) * 2023-11-08 2024-02-02 广州鼎甲计算机科技有限公司 数据回切方法、装置、计算机设备和存储介质
CN117667515A (zh) * 2023-12-08 2024-03-08 广州鼎甲计算机科技有限公司 主备集群的备份管理方法、装置、计算机设备及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106452836A (zh) * 2016-08-31 2017-02-22 北京小米移动软件有限公司 主节点设置方法及装置
CN108241555A (zh) * 2016-12-26 2018-07-03 阿里巴巴集团控股有限公司 一种分布式数据库的备份、恢复方法、装置和服务器
CN108964948A (zh) * 2017-05-19 2018-12-07 北京金山云网络技术有限公司 主从服务系统、主节点故障恢复方法及装置
US20180367610A1 (en) * 2017-06-19 2018-12-20 Beijing Baidu Netcom Science And Technology Co., Ltd. Data storage method and server applicable to distributed server cluster
CN112214358A (zh) * 2020-10-30 2021-01-12 上海爱数信息技术股份有限公司 一种GaussDB分布式数据库的备份恢复系统及其方法
CN112579363A (zh) * 2020-12-30 2021-03-30 上海爱数信息技术股份有限公司 一种MySQL数据保护系统及其备份和恢复方法
CN112910694A (zh) * 2021-01-22 2021-06-04 苏州浪潮智能科技有限公司 一种归档日志传输的方法、系统及介质
CN113609107A (zh) * 2021-09-30 2021-11-05 武汉四通信息服务有限公司 数据库管理方法、装置、电子设备及存储介质
US20220011938A1 (en) * 2020-07-10 2022-01-13 Druva Inc. System and method for selectively restoring data

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106452836A (zh) * 2016-08-31 2017-02-22 北京小米移动软件有限公司 主节点设置方法及装置
CN108241555A (zh) * 2016-12-26 2018-07-03 阿里巴巴集团控股有限公司 一种分布式数据库的备份、恢复方法、装置和服务器
CN108964948A (zh) * 2017-05-19 2018-12-07 北京金山云网络技术有限公司 主从服务系统、主节点故障恢复方法及装置
US20180367610A1 (en) * 2017-06-19 2018-12-20 Beijing Baidu Netcom Science And Technology Co., Ltd. Data storage method and server applicable to distributed server cluster
US20220011938A1 (en) * 2020-07-10 2022-01-13 Druva Inc. System and method for selectively restoring data
CN112214358A (zh) * 2020-10-30 2021-01-12 上海爱数信息技术股份有限公司 一种GaussDB分布式数据库的备份恢复系统及其方法
CN112579363A (zh) * 2020-12-30 2021-03-30 上海爱数信息技术股份有限公司 一种MySQL数据保护系统及其备份和恢复方法
CN112910694A (zh) * 2021-01-22 2021-06-04 苏州浪潮智能科技有限公司 一种归档日志传输的方法、系统及介质
CN113609107A (zh) * 2021-09-30 2021-11-05 武汉四通信息服务有限公司 数据库管理方法、装置、电子设备及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117493075A (zh) * 2023-11-08 2024-02-02 广州鼎甲计算机科技有限公司 数据回切方法、装置、计算机设备和存储介质
CN117667515A (zh) * 2023-12-08 2024-03-08 广州鼎甲计算机科技有限公司 主备集群的备份管理方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN115202929B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
US11757795B2 (en) Resolving mediator unavailability
US11263173B2 (en) Transaction log index generation in an enterprise backup system
US20220100613A1 (en) Information management cell health monitoring system
US20220206926A1 (en) Management of internet of things devices
US11016696B2 (en) Redundant distributed data storage system
US10061663B2 (en) Rebuilding deduplication data in a distributed deduplication data storage system
CN115202929B (zh) 数据库集群备份系统
US20200210313A1 (en) Management of internet of things devices
US20190243547A1 (en) Distributed object replication architecture
US20200192899A1 (en) Query caching during backup within an enterprise information management system
US8250033B1 (en) Replication of a data set using differential snapshots
CN102317938B (zh) 用于复制内容可寻址存储集群的异步分布式去重
US20150213100A1 (en) Data synchronization method and system
US20180004607A1 (en) Data backup using metadata mapping
US11093387B1 (en) Garbage collection based on transmission object models
Mundkur et al. Disco: a computing platform for large-scale data analytics
US8762347B1 (en) Method and apparatus for processing transactional file system operations to enable point in time consistent file data recreation
CN103460197A (zh) 计算机系统、文件管理方法以及元数据服务器
US11032156B1 (en) Crash-consistent multi-volume backup generation
US20230137525A1 (en) Coordinated Checkpoints Among Storage Systems Implementing Checkpoint-Based Replication
US11327676B1 (en) Predictive data streaming in a virtual storage system
US11422721B2 (en) Data storage scheme switching in a distributed data storage system
US11914867B2 (en) Coordinated snapshots among storage systems implementing a promotion/demotion model
CN104583966A (zh) 用于去重复文件系统的备份和恢复系统以及对应的服务器和方法
US8726147B1 (en) Systems and methods for restoring web parts in content management systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant