CN113672436A - 一种容灾备份方法、装置、设备及存储介质 - Google Patents
一种容灾备份方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113672436A CN113672436A CN202110875863.3A CN202110875863A CN113672436A CN 113672436 A CN113672436 A CN 113672436A CN 202110875863 A CN202110875863 A CN 202110875863A CN 113672436 A CN113672436 A CN 113672436A
- Authority
- CN
- China
- Prior art keywords
- snapshot
- cluster
- disaster recovery
- backed
- slave
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000011084 recovery Methods 0.000 title claims abstract description 130
- 238000000034 method Methods 0.000 title claims abstract description 68
- 230000006870 function Effects 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 10
- 230000010076 replication Effects 0.000 claims description 9
- 230000003213 activating effect Effects 0.000 claims 1
- 238000007726 management method Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/128—Details of file system snapshots on the file-level, e.g. snapshot creation, administration, deletion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/273—Asynchronous replication or reconciliation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种容灾备份方法、装置、设备及存储介质,该方法包括:确定主集群下需进行容灾备份的目录为均指定目录;定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应。本申请在主集群发生故障时,不仅可以通过上述文件获取到对应目录最新的快照数据,还可以通过在上述文件下创建的快照获取到对应目录历史上其他时刻的快照数据,进而正常使用所需的快照数据,从而极大的提高了数据稳定性。
Description
技术领域
本发明涉及数据存储技术领域,更具体地说,涉及一种容灾备份方法、装置、设备及存储介质。
背景技术
随着互联网技术和数字技术的发展,数据已成为是企事业单位(比如银行、金融公司等)的运营核心,现有技术中通常会在文件系统集群中存储相应的数据,但是如果文件存储系统发生故障,则会导致相应的数据丢失,进而使得数据稳定性很差。
发明内容
本发明的目的是提供一种容灾备份方法、装置、设备及存储介质,能够极大的提高数据稳定性。
为了实现上述目的,本发明提供如下技术方案:
一种容灾备份方法,包括:
确定主集群下需进行容灾备份的目录为均指定目录;
定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应;
在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用。
优选的,确定主集群下需进行容灾备份的目录为均指定目录,包括:
确定所述主集群下目录列表中的全部目录均为指定目录;
相应的,所述容灾备份方法还包括:
如果所述主集群下存在需要进行容灾备份的新的目录,则将该新的目录加入至所述目录列表中;
如果所述目录列表下存在不需要进行容灾备份的目录,则将该不需要进行容灾备份的目录从所述目录列表中删除。
优选的,确定需要存储所述待备份快照的从集群,包括:
确定所述主集群下存储的从集群信息对应从集群,为需要存储所述待备份快照的从集群;
相应的,所述容灾备份方法还包括:
如果存在需要存储所述待备份快照的新的从集群,则将该新的从集群的从集群信息加入至所述主集群下;
如果所述主集群下存在不需要存储所述待备份快照的从集群对应从集群信息,则将该不需要存储所述待备份快照的从集群对应从集群信息从所述主集群下删除。
优选的,将该新的从集群的从集群信息加入至所述主集群下之后,还包括:
连接该新的从集群,对该新的从集群执行mount操作,并在所述主集群中创建与该新的从集群对应的实现备份快照异步复制的数据同步线程;
将该不需要存储所述待备份快照的从集群对应从集群信息从所述主集群下删除之后,还包括:
回收该不需要存储所述待备份快照的从集群对应数据同步线程,并对该将该不需要存储所述待备份快照的从集群执行umount操作。
优选的,还包括:
如果所述主集群的容灾备份功能为开启,则执行确定主集群下需进行容灾备份的目录为均指定目录的步骤,如果所述主集群的容灾备份功能为关闭,确定无需对所述主集群下的任意目录进行容灾备份。
优选的,开启所述主集群的容灾备份功能,包括:
连接所述主集群,并对所述主集群执行mount操作;
关闭所述主集群的容灾备份功能,包括:
回收所述主集群中的全部数据同步线程,对所述主集群下全部从集群信息对应从集群执行umount操作,并删除所述主集群下全部的从集群信息。
优选的,还包括:
定时查询所述主集群中用于存储待备份快照的本地快照集合,及需要存储所述待备份快照的从集群中的远端快照集合;
如果任意待备份快照的快照ID不存在于所述本地快照集合但存在于所述远端快照集合,则将该任意待备份快照从所述远端快照集合中删除;
如果任意待备份快照的快照ID同时存在于所述本地快照集合及所述远端快照集合但是快照名不同,则将所述远端快照集合中的该任意待备份快照的快照名修改为与所述本地快照集合中的相应快照名一致;
如果任意待备份快照的快照ID存在于所述本地快照集合但不存在于所述远端快照集合,则将该任意待备份快照复制至所述远端快照集合中。
一种容灾备份装置,包括:
确定模块,用于:确定主集群下需进行容灾备份的目录为均指定目录;
复制模块,用于:定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应;
快照模块,用于:在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用。
一种容灾备份设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上任一项所述容灾备份方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上任一项容灾备份方法的步骤。
本发明提供了一种容灾备份方法、装置、设备及存储介质,该方法包括:确定主集群下需进行容灾备份的目录为均指定目录;定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应。本申请对于主集群下需要容灾备份的目录,则定时在该目录下创建快照,并将创建的快照以覆盖已有数据的方式存储至从集群与该目录对应的文件中,并在与该目录对应的文件下创建快照,从而在主集群发生故障时,不仅可以通过上述文件获取到对应目录最新的快照数据,还可以通过在上述文件下创建的快照获取到对应目录历史上其他时刻的快照数据,进而正常使用所需的快照数据,从而极大的提高了数据稳定性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种容灾备份方法的流程图;
图2为本发明实施例提供的一种容灾备份装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例提供的一种容灾备份方法的流程图,具体可以包括:
S11:确定主集群下需进行容灾备份的目录为均指定目录。
本发明实施例提供的容灾备份方法的执行主体可以为对应的容灾备份装置,而该容灾备份装置可以设置于主集群下,因此该容灾备份方法的执行主体可以为主集群,以下以该容灾备份方法的执行主体为主集群进行具体说明。另外,本申请实施例中的主集群及从集群均可以为文件系统集群,当然根据实际需要进行的其他设定也均在本发明的保护范围之内。
主集群下可能包含有多个目录,这些目录下的数据可能比较重要,需要进行容灾备份,也可能并不重要,不需要进行容灾备份;相应的,本申请实施例中可以确定需要进行容灾备份的目录为指定目录,指定目录的数量可以为一个也可以为多个,进而仅对该指定目录下的数据及元数据进行容灾备份,从而保证进行容灾备份的均为比较重要的数据,避免容灾备份的无用实现。
S12:定时在指定目录下创建快照得到待备份快照,并将待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,任意从集群中包含的单个从集群中包含的指定文件与指定目录一一对应。
定时创建相应快照即每隔根据实际需要设置的时间间隔则创建相应快照;本申请实施例中对于需要实现容灾备份的每个指定目录,可以对每个指定目录下的数据及元数据进行快照操作得到相应的待备份快照,且单个待备份快照为对单个指定目录下的数据及元数据进行快照操作得到的;然后将待备份快照异步复制到用于实现容灾备份的从集群的指定文件中。具体来说,与主集群对应的从集群可能有多个,本申请实施例中可以仅选取其中的一个或者多个从集群用于实现容灾备份,且每个用于实现容灾备份的从集群中均预先创建有与每个指定目录对应的指定文件,也即对于单个从集群中,该单个从集群中包含的指定文件与指定目录是一一对应的,进而在将待备份快照存储至任意单个从集群中,可以将该待备份快照存储至该任意单个从集群中与该待备份快照所属指定目录对应的指定文件中,并且每次将待备份快照存储至对应指定文件时,如果对应指定文件中已经存在数据,则将待备份快照覆盖对应指定文件中已经存在的数据,也即指定文件中仅保存在对应指定目录下最新创建的快照。
S13:在存储有待备份快照的指定文件下创建快照得到重备份快照,以供主集群发生故障时使用。
为了能够查询任意的快照,本申请实施例在将待备份快照复制至相应的指定文件中之后,还会对该相应的指定文件中全部数据进行快照操作得到当前时刻该相应的指定文件的快照,进而在需要时不仅能够从指定文件中获取最新的快照数据,还可以通过指定文件的快照获取历史上其他时刻的快照数据,供主集群发生故障时使用。
本发明提供了一种容灾备份方法、装置、设备及存储介质,该方法包括:确定主集群下需进行容灾备份的目录为均指定目录;定时在指定目录下创建快照得到待备份快照,并将待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;在存储有待备份快照的指定文件下创建快照得到重备份快照,以供主集群发生故障时使用;其中,单个从集群中包含的指定文件与指定目录一一对应。
本申请对于主集群下需要容灾备份的目录,则定时在该目录下创建快照,并将创建的快照以覆盖已有数据的方式存储至从集群与该目录对应的文件中,并在与该目录对应的文件下创建快照,从而在主集群发生故障时,不仅可以通过上述文件获取到对应目录最新的快照数据,还可以通过在上述文件下创建的快照获取到对应目录历史上其他时刻的快照数据,进而正常使用所需的快照数据,从而极大的提高了数据稳定性。
需要说明的是,本申请实施例中的主集群可以设置有mirror进程、mon模块及mgr模块;mirror进程负责实现容灾备份方法,mon模块及mgr模块负责在mirror进程的调用下分别实现快照相关功能及目录管理相关功能,具体实现方式在下列实施例中进行具体说明。
本发明实施例提供的一种容灾备份方法,确定主集群下需进行容灾备份的目录为均指定目录,可以包括:
确定主集群下目录列表中的全部目录均为指定目录;
相应的,容灾备份方法还可以包括:
如果主集群下存在需要进行容灾备份的新的目录,则将该新的目录加入至目录列表中;
如果目录列表下存在不需要进行容灾备份的目录,则将该不需要进行容灾备份的目录从目录列表中删除。
为了便于对主集群下目录的管理,本申请实施例可以在主集群下维护有相应的目录列表,进而将需要容灾备份的目录均加入至目录列表中;相应的,如果在后期增加新的目录需要进行容灾备份,则将该新的目录加入至目录列表中,如果在后期目录列表中的任意目录不再需要进行容灾备份,则将该任意目录从目录列表中删除。针对利用主集群中mirror进程、mon模块及mgr模块实现容灾备份的情况,mirror进程可以将mgr模块发送的目录管理消息进行解析,得到目录管理消息对应操作的模式(acquire添加路径操作、release删除路径操作)和路径,当操作的模式为acquire添加路径操作时,将相应路径对应的目录添加到目录列表中,当操作的模式为release删除路径操作时,将相应路径对应的目录从目录列表中删除;当然根据实际需要进行的其他设定也均在本发明的保护范围之内。
本发明实施例提供的一种容灾备份方法,确定需要存储待备份快照的从集群,可以包括:
确定主集群下存储的从集群信息对应从集群,为需要存储待备份快照的从集群;
相应的,容灾备份方法还可以包括:
如果存在需要存储待备份快照的新的从集群,则将该新的从集群的从集群信息加入至主集群下;
如果主集群下存在不需要存储待备份快照的从集群对应从集群信息,则将该不需要存储待备份快照的从集群对应从集群信息从主集群下删除。
为了便于对主集群对应从集群的管理,本申请可以在主集群中维护用于实现容灾备份的从集群信息(如从集群标识),从集群与从集群信息是一一对应的,进而在需要实现容灾备份时,则将该需要容灾备份的从集群对应从集群信息加入至主集群中,在主集群中任意从集群信息对应从集群不再需要实现容灾备份时,则将该任意从集群信息从主集群中删除;其中,还可以利用信息列表对主集群中的从集群信息进行维护;当然根据实际需要进行的其他设置也均在本发明的保护范围之内。
本发明实施例提供的一种容灾备份方法,将该新的从集群的从集群信息加入至主集群下之后,还可以包括:
连接该新的从集群,对该新的从集群执行mount操作,并在主集群中创建与该新的从集群对应的实现备份快照异步复制的数据同步线程;
将该不需要存储待备份快照的从集群对应从集群信息从主集群下删除之后,还可以包括:
回收该不需要存储待备份快照的从集群对应数据同步线程,并对该将该不需要存储待备份快照的从集群执行umount操作。
需要说明的是,为了有效实现主集群指定目录下快照至相应从集群的异步复制,本申请实施例可以连接用于容灾备份的从集群,对从集群执行mount操作,并在主集群中创建与从集群对应的数据同步线程,以利用该数据同步线程实现主集群中快照至从集群中的异步复制;而在从集群不再需要用于容灾备份时,可以回收主集群中从集群对应的数据同步线程,并对该从集群执行umount操作,避免线程浪费及无用异步复制操作的发生;其中,用于容灾备份的从线程与数据同步线程是一一对应的,从而能够通过多个数据同步线程以并行的方式实现相应快照的异步复制,提高容灾备份效率。针对利用主集群中mirror进程、mon模块及mgr模块实现容灾备份的情况,可以由mon模块通过发送相应消息触发,由mirror进程响应消息实现上述从集群管理等操作。
本发明实施例提供的一种容灾备份方法,还可以包括:
如果主集群的容灾备份功能为开启,则执行确定主集群下需进行容灾备份的目录为均指定目录的步骤,如果主集群的容灾备份功能为关闭,确定无需对主集群下的任意目录进行容灾备份。
本申请实施例可以根据实际需要设置主集群容灾备份功能的开启或者关闭,如果主集群需要的数据可靠性较低,则可以开启主集群的容灾备份功能,进而按照本申请实施例的容灾备份方法实现主集群的容灾备份,否则,关闭主集群的容灾备份功能,进而确定无需对主集群进行容灾备份;从而使得对于主集群的容灾备份方案与实际需要相符,更加灵活。
本发明实施例提供的一种容灾备份方法,开启主集群的容灾备份功能,可以包括:连接主集群,并对主集群执行mount操作;
关闭主集群的容灾备份功能,可以包括:
回收主集群中的全部数据同步线程,对主集群下全部从集群信息对应从集群执行umount操作,并删除主集群下全部的从集群信息。
本申请实施例为了实现主集群容灾备份功能的开启,可以先连接主集群,然后对主集群执行mount操作;为了实现主集群容灾备份功能的关闭,可以回收主集群中所有的数据同步线程,清空需要同步的从集群信息的信息列表,对所有的从集群进行umount操作。而针对利用主集群中mirror进程、mon模块及mgr模块实现容灾备份的情况,可以由mon模块通过发送相应消息触发,由mirror进程响应该消息进而实现主集群的上述管理等操作。
本发明实施例提供的一种容灾备份方法,还可以包括:
定时查询主集群中用于存储待备份快照的本地快照集合,及需要存储待备份快照的从集群中的远端快照集合;
如果任意待备份快照的快照ID不存在于本地快照集合但存在于远端快照集合,则将该任意待备份快照从远端快照集合中删除;
如果任意待备份快照的快照ID同时存在于本地快照集合及远端快照集合但是快照名不同,则将远端快照集合中的该任意待备份快照的快照名修改为与本地快照集合中的相应快照名一致;
如果任意待备份快照的快照ID存在于本地快照集合但不存在于远端快照集合,则将该任意待备份快照复制至远端快照集合中。
为了保证主集群至相应从集群的数据同步,本申请可以每经过根据实际需要设定的时间间隔则执行一次主集群至从集群的数据同步,也可以是在将创建的快照异步复制至相应从集群时按照本申请实施例中的数据同步方式实现,具体来说,针对单个从集群的数据同步可以包括:获取主集群及用于实现容灾备份的从集群下与指定目录对应的所有快照名以及对应的快照元数据信息(包括快照ID);根据快照名和快照元数据信息,分别在主集群建立本地快照集合local_snap_map、在从集群建立远端快照集合remote_snap_map;遍历remote_snap_map的快照ID,如果快照ID不在local_snap_map中,则将快照名加入删除集合中;如果快照名不在local_snap_map中但是快照ID在local_snap_map中,则将远端的快照名和本地的快照名均加入rename集合中;在从集群对删除集合的快照执行删除操作,在从集群中对rename集合的快照执行重命名操作,即将从集群的快照名修改为主集群的快照名;如果local_snap_map与remote_snap_map中的内容一样,则不需要同步;如果local_snap_map中的快照数量比remote_snap_map多,则需要将主集群中多余的快照同步到从集群中,并创建快照。另外,本申请实施例在主集群下创建的任意快照异步复制至相应从集群中之后,还可以将该任意快照从主集群中删除,以避免存储空间的浪费。
需要说明的是,本申请实施例在使用mirror进程前还可以先对mirror进程进行初始化,然后根据预设的策略创建、查询及删除快照,添加、删除用于容灾备份的从集群,以及开启或者关闭主集群的容灾备份功能。具体来说,本申请实施例提供mgr模块对应的mgr命令控制接口,进而在外界调用该接口时可以在主集群的任意目录上指定快照的策略,让mgr模块自动创建快照、查询快照、删除过期的快照等;此外,mgr模块对快照的创建、查询及删除等信息均通过消息发送到mirror进程使其获知并进行相应处理。本申请实施例还可以提供mon命令控制接口,进而在外界调用该接口时mon模块能够开启主集群的容灾备份功能、关闭主集群的容灾备份功能、将从集群信息添加到主集群中以及将从集群信息从主集群中去除;且上述四种操作mon模块均通过消息发送到mirror进程使其获知并进行相应处理。
本申请在主集群下指定某个目录,定时在该目录下创建快照,将快照下的数据异步复制到单个或多个从集群中,并在从集群下创建快照,保证当主集群发生故障时,可以正常使用从集群中的数据,极大的提高了产品的稳定性,增加产品的竞争力。
本发明实施例还提供了一种容灾备份装置,如图2所示,可以包括:
确定模块11,用于:确定主集群下需进行容灾备份的目录为均指定目录;
复制模块12,用于:定时在指定目录下创建快照得到待备份快照,并将待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,单个从集群中包含的指定文件与指定目录一一对应;
快照模块13,用于:在存储有待备份快照的指定文件下创建快照得到重备份快照,以供主集群发生故障时使用。
本发明实施例还提供了一种容灾备份设备,可以包括:
存储器,用于存储计算机程序;
处理器,用于执行计算机程序时实现如上任一项容灾备份方法的步骤。
本发明实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时可以实现如上任一项容灾备份方法的步骤。
需要说明的是,本发明实施例提供的一种容灾备份装置、设备及存储介质中相关部分的说明请参见本发明实施例提供的一种容灾备份方法中对应部分的详细说明,在此不再赘述。另外本发明实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明,以免过多赘述。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种容灾备份方法,其特征在于,包括:
确定主集群下需进行容灾备份的目录为均指定目录;
定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应;
在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用。
2.根据权利要求1所述的方法,其特征在于,确定主集群下需进行容灾备份的目录为均指定目录,包括:
确定所述主集群下目录列表中的全部目录均为指定目录;
相应的,所述容灾备份方法还包括:
如果所述主集群下存在需要进行容灾备份的新的目录,则将该新的目录加入至所述目录列表中;
如果所述目录列表下存在不需要进行容灾备份的目录,则将该不需要进行容灾备份的目录从所述目录列表中删除。
3.根据权利要求2所述的方法,其特征在于,确定需要存储所述待备份快照的从集群,包括:
确定所述主集群下存储的从集群信息对应从集群,为需要存储所述待备份快照的从集群;
相应的,所述容灾备份方法还包括:
如果存在需要存储所述待备份快照的新的从集群,则将该新的从集群的从集群信息加入至所述主集群下;
如果所述主集群下存在不需要存储所述待备份快照的从集群对应从集群信息,则将该不需要存储所述待备份快照的从集群对应从集群信息从所述主集群下删除。
4.根据权利要求3所述的方法,其特征在于,将该新的从集群的从集群信息加入至所述主集群下之后,还包括:
连接该新的从集群,对该新的从集群执行mount操作,并在所述主集群中创建与该新的从集群对应的实现备份快照异步复制的数据同步线程;
将该不需要存储所述待备份快照的从集群对应从集群信息从所述主集群下删除之后,还包括:
回收该不需要存储所述待备份快照的从集群对应数据同步线程,并对该将该不需要存储所述待备份快照的从集群执行umount操作。
5.根据权利要求4所述的方法,其特征在于,还包括:
如果所述主集群的容灾备份功能为开启,则执行确定主集群下需进行容灾备份的目录为均指定目录的步骤,如果所述主集群的容灾备份功能为关闭,确定无需对所述主集群下的任意目录进行容灾备份。
6.根据权利要求5所述的方法,其特征在于,开启所述主集群的容灾备份功能,包括:
连接所述主集群,并对所述主集群执行mount操作;
关闭所述主集群的容灾备份功能,包括:
回收所述主集群中的全部数据同步线程,对所述主集群下全部从集群信息对应从集群执行umount操作,并删除所述主集群下全部的从集群信息。
7.根据权利要求6所述的方法,其特征在于,还包括:
定时查询所述主集群中用于存储待备份快照的本地快照集合,及需要存储所述待备份快照的从集群中的远端快照集合;
如果任意待备份快照的快照ID不存在于所述本地快照集合但存在于所述远端快照集合,则将该任意待备份快照从所述远端快照集合中删除;
如果任意待备份快照的快照ID同时存在于所述本地快照集合及所述远端快照集合但是快照名不同,则将所述远端快照集合中的该任意待备份快照的快照名修改为与所述本地快照集合中的相应快照名一致;
如果任意待备份快照的快照ID存在于所述本地快照集合但不存在于所述远端快照集合,则将该任意待备份快照复制至所述远端快照集合中。
8.一种容灾备份装置,其特征在于,包括:
确定模块,用于:确定主集群下需进行容灾备份的目录为均指定目录;
复制模块,用于:定时在所述指定目录下创建快照得到待备份快照,并将所述待备份快照以覆盖已存储数据的方式异步复制至从集群的对应指定文件中;其中,单个从集群中包含的所述指定文件与所述指定目录一一对应;
快照模块,用于:在存储有所述待备份快照的指定文件下创建快照得到重备份快照,以供所述主集群发生故障时使用。
9.一种容灾备份设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至7任一项所述容灾备份方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述容灾备份方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110875863.3A CN113672436B (zh) | 2021-07-30 | 2021-07-30 | 一种容灾备份方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110875863.3A CN113672436B (zh) | 2021-07-30 | 2021-07-30 | 一种容灾备份方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113672436A true CN113672436A (zh) | 2021-11-19 |
CN113672436B CN113672436B (zh) | 2024-08-23 |
Family
ID=78540944
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110875863.3A Active CN113672436B (zh) | 2021-07-30 | 2021-07-30 | 一种容灾备份方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113672436B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114996054A (zh) * | 2022-05-31 | 2022-09-02 | 济南浪潮数据技术有限公司 | 一种存储集群数据备份方法、装置、设备及存储介质 |
CN115437849A (zh) * | 2022-09-21 | 2022-12-06 | 梁力 | 数据处理方法、装置、设备及计算机可读存储介质 |
WO2024188047A1 (zh) * | 2023-03-10 | 2024-09-19 | 杭州阿里云飞天信息技术有限公司 | 一种快照存储方法、系统、设备及存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102904949A (zh) * | 2012-10-08 | 2013-01-30 | 华中科技大学 | 一种基于副本的动态元数据集群系统 |
CN103793296A (zh) * | 2014-01-07 | 2014-05-14 | 浪潮电子信息产业股份有限公司 | 一种在集群中用于辅助备份复制计算机系统的方法 |
US9183208B1 (en) * | 2010-12-24 | 2015-11-10 | Netapp, Inc. | Fileshot management |
CN108512693A (zh) * | 2018-02-24 | 2018-09-07 | 国家计算机网络与信息安全管理中心 | 一种跨区域容灾方法和装置 |
US20190042372A1 (en) * | 2018-06-19 | 2019-02-07 | Intel Corporation | Method and apparatus to recover data stored in persistent memory in a failed node of a computer cluster |
CN109669637A (zh) * | 2018-12-21 | 2019-04-23 | 北京百度网讯科技有限公司 | 用于提供容器服务的系统、方法和装置 |
CN109753380A (zh) * | 2017-11-08 | 2019-05-14 | 阿里巴巴集团控股有限公司 | 快照数据备份方法、装置及系统 |
CN110769062A (zh) * | 2019-10-29 | 2020-02-07 | 广东睿江云计算股份有限公司 | 一种分布式存储的异地灾备方法 |
CN111611109A (zh) * | 2020-05-22 | 2020-09-01 | 苏州浪潮智能科技有限公司 | 一种分布式集群的备份方法、系统、设备以及介质 |
CN112527567A (zh) * | 2020-12-24 | 2021-03-19 | 北京百度网讯科技有限公司 | 系统容灾方法、装置、设备以及存储介质 |
-
2021
- 2021-07-30 CN CN202110875863.3A patent/CN113672436B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9183208B1 (en) * | 2010-12-24 | 2015-11-10 | Netapp, Inc. | Fileshot management |
CN102904949A (zh) * | 2012-10-08 | 2013-01-30 | 华中科技大学 | 一种基于副本的动态元数据集群系统 |
CN103793296A (zh) * | 2014-01-07 | 2014-05-14 | 浪潮电子信息产业股份有限公司 | 一种在集群中用于辅助备份复制计算机系统的方法 |
CN109753380A (zh) * | 2017-11-08 | 2019-05-14 | 阿里巴巴集团控股有限公司 | 快照数据备份方法、装置及系统 |
CN108512693A (zh) * | 2018-02-24 | 2018-09-07 | 国家计算机网络与信息安全管理中心 | 一种跨区域容灾方法和装置 |
US20190042372A1 (en) * | 2018-06-19 | 2019-02-07 | Intel Corporation | Method and apparatus to recover data stored in persistent memory in a failed node of a computer cluster |
CN109669637A (zh) * | 2018-12-21 | 2019-04-23 | 北京百度网讯科技有限公司 | 用于提供容器服务的系统、方法和装置 |
CN110769062A (zh) * | 2019-10-29 | 2020-02-07 | 广东睿江云计算股份有限公司 | 一种分布式存储的异地灾备方法 |
CN111611109A (zh) * | 2020-05-22 | 2020-09-01 | 苏州浪潮智能科技有限公司 | 一种分布式集群的备份方法、系统、设备以及介质 |
CN112527567A (zh) * | 2020-12-24 | 2021-03-19 | 北京百度网讯科技有限公司 | 系统容灾方法、装置、设备以及存储介质 |
Non-Patent Citations (3)
Title |
---|
WEI ZHANG.ETC: "VM-centric snapshot deduplication for cloud data backup", IEEE, 31 December 2015 (2015-12-31) * |
尚春红;: "云存储环境下的档案异地备份", 智能城市, no. 16, 28 August 2018 (2018-08-28) * |
阙志兴;许雄凌;陈飞;: "云存储下的容灾备份技术研究与部署", 科技创新与应用, no. 21, 28 July 2017 (2017-07-28) * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114996054A (zh) * | 2022-05-31 | 2022-09-02 | 济南浪潮数据技术有限公司 | 一种存储集群数据备份方法、装置、设备及存储介质 |
CN115437849A (zh) * | 2022-09-21 | 2022-12-06 | 梁力 | 数据处理方法、装置、设备及计算机可读存储介质 |
WO2024188047A1 (zh) * | 2023-03-10 | 2024-09-19 | 杭州阿里云飞天信息技术有限公司 | 一种快照存储方法、系统、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113672436B (zh) | 2024-08-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10997035B2 (en) | Using a snapshot as a data source | |
CN113672436B (zh) | 一种容灾备份方法、装置、设备及存储介质 | |
US10747719B2 (en) | File system point-in-time restore using recycle bin and version history | |
CN108416040B (zh) | 一种数据库修复方法、装置、终端设备及存储介质 | |
WO2016180160A1 (zh) | 数据快照的恢复方法和装置 | |
US7861049B2 (en) | Methods and apparatus for archiving digital data | |
GB2564923A (en) | Managing digital assets stored as components and packaged files | |
US20160048427A1 (en) | Virtual subdirectory management | |
EP3796174B1 (en) | Restoring a database using a fully hydrated backup | |
CN111427898A (zh) | 一种基于解析Oracle日志的持续数据保护系统及方法 | |
WO2015101084A1 (zh) | 恢复数据的方法、服务器及系统 | |
US10628298B1 (en) | Resumable garbage collection | |
CN107038091B (zh) | 一种基于异步远程镜像的数据安全性保护系统与电力应用系统数据保护方法 | |
CN103336728A (zh) | 一种磁盘数据恢复方法 | |
WO2021208400A1 (zh) | 现代应用的备份恢复系统及方法 | |
EP2542976B1 (en) | Method and apparatus of backing-up subversion repository | |
WO2013170702A1 (zh) | 基于快照的文件处理方法及具有快照功能的固态硬盘 | |
CN115729749A (zh) | 一种数据备份方法及系统 | |
CN112380067A (zh) | 一种Hadoop环境下基于元数据的大数据备份系统及方法 | |
US11163799B2 (en) | Automatic rollback to target for synchronous replication | |
US10671567B2 (en) | System and method for optimized lock detection | |
CN108829813A (zh) | 一种基于分布式存储系统的文件快照方法及系统 | |
WO2023240995A1 (zh) | 一种双机热备系统的数据恢复方法、装置及介质 | |
CN111522688A (zh) | 分布式系统的数据备份方法及装置 | |
WO2021208402A1 (zh) | 现代应用的副本数据管理系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |