CN117667521A - 数据备份方法、装置、设备及计算机可读存储介质 - Google Patents
数据备份方法、装置、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN117667521A CN117667521A CN202311744347.2A CN202311744347A CN117667521A CN 117667521 A CN117667521 A CN 117667521A CN 202311744347 A CN202311744347 A CN 202311744347A CN 117667521 A CN117667521 A CN 117667521A
- Authority
- CN
- China
- Prior art keywords
- full
- data
- snapshot
- target
- data block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000008859 change Effects 0.000 claims description 7
- 230000008569 process Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000008676 import Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
- G06F11/1451—Management of the data involved in backup or backup restore by selection of backup contents
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1461—Backup scheduling policy
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种数据备份方法、装置、设备及计算机可读存储介质。该方法包括:获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;在业务空闲时段,基于所述目标存储位置读取目标数据;对所述目标数据进行备份。通过本申请,大大降低了导出阶段占用的存储集群的带宽,且缩短了导出动作执行时间、降低了导出结果的空间占用;另外,在业务空闲时段,基于目标存储位置读取目标数据以及对目标数据进行备份,可大大降低对正常读写业务的影响。
Description
技术领域
本申请涉及数据存储技术领域,具体涉及一种数据备份方法、装置、设备及计算机可读存储介质。
背景技术
现有技术中,进行数据备份包括导出和导入两个阶段。其中,导出阶段是将相邻两个快照之间发生变化的数据从存储集群中读出来;导入阶段是将读取的数据写入归档存储。
其中,当相邻两个快照之间发生变化的数据的数据量较大时,从存储集群中读数据时,会大量占用存储集群的带宽,可能影响现有业务的IO性能。
发明内容
本申请提供一种数据备份方法、装置、设备及计算机可读存储介质,可以解决现有技术中存在的数据备份的导出阶段大量占用存储集群带宽的技术问题。
第一方面,本申请实施例提供一种数据备份方法,所述数据备份方法包括:
获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
在业务空闲时段,基于所述目标存储位置读取目标数据;
对所述目标数据进行备份。
结合第一方面,在一种实施方式中,所述第一全量快照包括N个数据块,N为正整数,所述获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块的步骤包括:
获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
确定差异位图中的目标二进制数对应的目标数据块;
获取第一全量快照中目标数据块对应的目标存储位置。
结合第一方面,在一种实施方式中,在所述获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块的步骤之前,还包括:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
结合第一方面,在一种实施方式中,所述检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致的步骤包括:
检测在第二全量快照的生成时刻到第一全量快照的生成时刻的时段内是否存在所述存储卷中第i个数据块对应的变更记录;
若不存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致;
若存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致。
结合第一方面,在一种实施方式中,所述对所述目标数据进行备份的步骤包括:
将所述目标数据写入备份卷中的目标备份数据块,所述目标备份数据块为所述目标数据所属目标数据块对应的备份数据块,所述备份卷包括N个备份数据块。
第二方面,本申请实施例提供了一种数据备份装置,所述数据备份装置包括:
获取模块,用于获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
读取模块,用于在业务空闲时段,基于所述目标存储位置读取目标数据;
备份模块,用于对所述目标数据进行备份。
结合第二方面,在一种实施方式中,所述第一全量快照包括N个数据块,N为正整数,所述获取模块用于:
获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
确定差异位图中的目标二进制数对应的目标数据块;
获取第一全量快照中目标数据块对应的目标存储位置。
结合第二方面,在一种实施方式中,所述数据备份装置还包括创建模块,用于:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
第三方面,本申请实施例提供了一种数据备份设备,所述数据备份设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的数据备份程序,其中所述数据备份程序被所述处理器执行时,实现如第一方面所述的数据备份方法的步骤。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有数据备份程序,其中所述数据备份程序被处理器执行时,实现如第一方面所述的数据备份方法的步骤。
本申请实施例提供的技术方案带来的有益效果包括:
本申请实施例中,获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;在业务空闲时段,基于所述目标存储位置读取目标数据;对所述目标数据进行备份。通过本申请实施例,获取的是数据发生变化的数据块的位置,相较于直接读取发生变化的数据,大大减少了需要读取的数据量,大大降低了导出阶段占用的存储集群的带宽,且缩短了导出动作执行时间、降低了导出结果的空间占用;另外,在业务空闲时段,基于目标存储位置读取目标数据以及对目标数据进行备份,可大大降低对正常读写业务的影响。
附图说明
图1为本申请数据备份方法一实施例的流程示意图;
图2为本申请数据备份方法一实施例中一存储卷对应的全量快照的示意图;
图3为本申请数据备份装置一实施例的功能模块示意图;
图4为本申请实施例方案中涉及的数据备份设备的硬件结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
第一方面,本申请实施例提供一种数据备份方法。
一实施例中,参照图1,图1为本申请数据备份方法一实施例的流程示意图。如图1所示,数据备份方法包括:
步骤S10,获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
本实施例中,针对一存储卷,可定期生成其对应的全量快照,例如,当存储卷刚创建时,生成第一个全量快照,需要说明的是,存储卷刚创建时为空卷,则第一个全量快照也为空卷;之后,可每隔预设时长,或在预设时间点,依次生成各个全量快照。
其中,存储卷包括N个数据块,则该存储卷对应的各个全量快照同样包括N个数据块。在数据库系统中,数据块是一个非常重要的概念,它是存储数据的基本单位,也是最小的物理存储单位。
为便于说明,以存储卷包括4个数据块为例,则该存储卷对应的各个全量快照同样包括4个数据块。参照图2,图2为本申请数据备份方法一实施例中一存储卷对应的全量快照的示意图。如图2所示,存储卷在t1时刻为空卷,则t1时刻生成的全量快照1也为空卷;在t1至t2时段内,存储卷上的第一个数据块和第二个数据块分别写入了数据1和数据2,则t2时刻生成的全量快照2中第一个数据块和第二个数据块分别包括数据1和数据2,第三个数据块和第四个数据块均为空;在t2至t3时段内,存储卷上的第一个数据块中的数据由数据1变更为数据3,第二个数据块中的数据2被删除,第三个数据块写入数据4,则t3时刻生成的全量快照3中第一个数据块包括数据3,第二个数据块为空,第三个数据块包括数据4,第四个数据块为空;在t3至t4时段内,存储卷上的第二个数据块写入了数据5,则t4时刻生成的全量快照4中第一个数据块包括数据3,第二个数据块包括数据5,第三个数据块包括数据4,第四个数据块为空。
参照上述例子,若第二全量快照为t1时刻生成的全量快照1,则第一全量快照为t2时刻生成的全量快照2,则目标数据块为第一全量快照中的数据块1和数据块2。同理,若第二全量快照为t2时刻生成的全量快照2,则第一全量快照为t3时刻生成的全量快照3,则目标数据块为第一全量快照中的数据块1、数据块2以及数据块3。
步骤S20,在业务空闲时段,基于所述目标存储位置读取目标数据;
本实施例中,业务空闲时段为基于实际需要自定义的时段。在业务空闲时段基于目标存储位置读取目标数据,能有效避免目标数据读取动作对正常读写业务的不良影响。
需要说明的是,目标数据块对应的目标存储位置可以是逻辑地址或物理地址,其中,当为逻辑地址时,需要在读取目标数据时,需要基于逻辑地址与物理地址的转换关系,将逻辑地址转换为物理地址,从而实现对目标数据的读取。当为物理地址时,则直接基于物理地址实现对目标数据的读取。
步骤S30,对所述目标数据进行备份。
本实施例中,存储卷及其全量快照均存储于实现业务的存储集群中,目标数据备份在于业务无关的第三方存储系统中。对目标数据进行备份即将目标数据存储到该第三方存储系统中。
本申请实施例中,获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;在业务空闲时段,基于所述目标存储位置读取目标数据;对所述目标数据进行备份。通过本申请实施例,获取的是数据发生变化的数据块的位置,相较于直接读取发生变化的数据,大大减少了需要读取的数据量,大大降低了导出阶段占用的存储集群的带宽,且缩短了导出动作执行时间、降低了导出结果的空间占用;另外,在业务空闲时段,基于目标存储位置读取目标数据以及对目标数据进行备份,可大大降低对正常读写业务的影响。
进一步地,一实施例中,所述第一全量快照包括N个数据块,N为正整数,步骤S10包括:
步骤S101,获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
步骤S102,确定差异位图中的目标二进制数对应的目标数据块;
步骤S103,获取第一全量快照中目标数据块对应的目标存储位置。
本实施例中,通过差异位图表征第一全量快照与第二全量快照间数据块的差异。
参照图2,目标二进制数以1为例。当第一全量快照为全量快照2,第二全量快照为全量快照1时,差异位图为(1,1,0,0),则获取差异位图后,即可基于差异位图确定目标数据块为第一全量快照中第一个数据块和第二个数据块;当第一全量快照为全量快照3,第二全量快照为全量快照2时,差异位图为(1,1,1,0),则获取差异位图后,即可基于差异位图确定目标数据块为第一全量快照中第一个数据块、第二个数据块以及第三个数据块。
在确定目标数据后,即可获取第一全量快照中目标数据块对应的目标存储位置。
进一步地,一实施例中,在步骤S10之前,还包括:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
本实施例中,可分别计算第一全量快照中第i个数据块对应的数据的哈希值以及第二全量快照中第i个数据块对应的数据的哈希值;若两个哈希值相等,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致;若两个哈希值不相等,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致。
其中,目标二进制数为1时,非目标二进制数为0;目标二进制数为0时,非目标二进制数为1。
按照上述方式,即可确定差异位图中每个二进制数的数值,从而得到差异位图。
进一步地,一实施例中,所述检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致的步骤包括:
检测在第二全量快照的生成时刻到第一全量快照的生成时刻的时段内是否存在所述存储卷中第i个数据块对应的变更记录;若不存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致;若存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致。
本实施例中,确定两个全量快照间存在差异的数据块可以变相转换为查询存储卷在指定快照范围内哪些dkey发生了变化。
在当前系统的打散布局中,默认配置下卷先按照512MB拆分成一个个object,接着object会按照4MB进一步拆分成dkey。每个dkey经过Hash后可以得到一个唯一的布局策略group。其中,dkey即存储块。
具体的,在集群中基于快照范围(即在第二全量快照的生成时刻到第一全量快照的生成时刻的时段内)遍历该存储卷的所有dkey的变更记录。
当dkey_i存在变更记录时则认为第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致,在位图中对该dkey_i进行标记,即将差异位图中该dkey_i对应的第i个二进制数置为目标二进制数;
当dkey_i不存在变更记录时则认为第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致,在位图中对该dkey_i进行标记,即将差异位图中该dkey_i对应的第i个二进制数置为非目标二进制数。
遍历完成后,即可得到完整的差异位图。
进一步地,一实施例中,步骤S30包括:
将所述目标数据写入备份卷中的目标备份数据块,所述目标备份数据块为所述目标数据所属目标数据块对应的备份数据块,所述备份卷包括N个备份数据块。
本实施例中,参照图2,若第二全量快照为t1时刻生成的全量快照1,则第一全量快照为t2时刻生成的全量快照2,则目标数据块为第一全量快照中的数据块1和数据块2。则目标数据块对应的备份数据块为备份数据块1和备份数据块2,则将数据1写入备份数据块1,将数据2写入备份数据块2。
容易理解的是,本次得到的备份卷的备份数据块1包括数据1、备份数据块2包括数据2,备份数据块3和4均为空。基于该备份卷即可将存储卷恢复到t2时刻的状态。
同理,若第二全量快照为t2时刻生成的全量快照2,则第一全量快照为t3时刻生成的全量快照3,则目标数据块为第一全量快照中的数据块1、数据块2以及数据块3。则目标数据块对应的备份数据块为备份数据块1、备份数据块2和备份数据块3,则将数据3写入备份数据块1,将空数据写入备份数据块2,将数据4写入备份数据块3。
容易理解的是,本次得到的备份卷的备份数据块1包括数据3、备份数据块2为空,备份数据块3包括数据4,备份数据块4为空。基于该备份卷即可将存储卷恢复到t3时刻的状态。
第二方面,本申请实施例还提供一种数据备份装置。
一实施例中,参照图3,图3为本申请数据备份装置一实施例的功能模块示意图。如图3所示,数据备份装置包括:
获取模块10,用于获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
读取模块20,用于在业务空闲时段,基于所述目标存储位置读取目标数据;
备份模块30,用于对所述目标数据进行备份。
进一步地,一实施例中,所述第一全量快照包括N个数据块,N为正整数,所述获取模块10用于:
获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
确定差异位图中的目标二进制数对应的目标数据块;
获取第一全量快照中目标数据块对应的目标存储位置。
进一步地,一实施例中,所述数据备份装置还包括创建模块,用于:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
进一步地,一实施例中,创建模块,用于:
检测在第二全量快照的生成时刻到第一全量快照的生成时刻的时段内是否存在所述存储卷中第i个数据块对应的变更记录;
若不存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致;
若存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致。
进一步地,一实施例中,备份模块30,用于:
将所述目标数据写入备份卷中的目标备份数据块,所述目标备份数据块为所述目标数据所属目标数据块对应的备份数据块,所述备份卷包括N个备份数据块。
其中,上述数据备份装置中各个模块的功能实现与上述数据备份方法实施例中各步骤相对应,其功能和实现过程在此处不再一一赘述。
第三方面,本申请实施例提供一种数据备份设备,数据备份设备可以是个人计算机(personal computer,PC)、笔记本电脑、服务器等具有数据处理功能的设备。
参照图4,图4为本申请实施例方案中涉及的数据备份设备的硬件结构示意图。本申请实施例中,数据备份设备可以包括处理器、存储器、通信接口以及通信总线。
其中,通信总线可以是任何类型的,用于实现处理器、存储器以及通信接口互连。
通信接口包括输入/输出(input/output,I/O)接口、物理接口和逻辑接口等用于实现数据备份设备内部的器件互连的接口,以及用于实现数据备份设备与其他设备(例如其他计算设备或用户设备)互连的接口。物理接口可以是以太网接口、光纤接口、ATM接口等;用户设备可以是显示屏(Display)、键盘(Keyboard)等。
存储器可以是各种类型的存储介质,例如随机存取存储器(randomaccessmemory,RAM)、只读存储器(read-only memory,ROM)、非易失性RAM(non-volatileRAM,NVRAM)、闪存、光存储器、硬盘、可编程ROM(programmable ROM,PROM)、可擦除PROM(erasable PROM,EPROM)、电可擦除PROM(electrically erasable PROM,EEPROM)等。
处理器可以是通用处理器,通用处理器可以调用存储器中存储的数据备份程序,并执行本申请实施例提供的数据备份方法。例如,通用处理器可以是中央处理器(centralprocessing unit,CPU)。其中,数据备份程序被调用时所执行的方法可参照本申请数据备份方法的各个实施例,此处不再赘述。
本领域技术人员可以理解,图4中示出的硬件结构并不构成对本申请的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
第四方面,本申请实施例还提供一种计算机可读存储介质。
本申请计算机可读存储介质上存储有数据备份程序,其中所述数据备份程序被处理器执行时,实现如上述的数据备份方法的步骤。
其中,数据备份程序被执行时所实现的方法可参照本申请数据备份方法的各个实施例,此处不再赘述。
需要说明的是,上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。术语“第一”、“第二”和“第三”等描述,是用于区分不同的对象等,其不代表先后顺序,也不限定“第一”、“第二”和“第三”是不同的类型。
在本申请实施例的描述中,“示例性的”、“例如”或者“举例来说”等用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”、“例如”或者“举例来说”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”、“例如”或者“举例来说”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
在本申请实施例描述的一些流程中,包含了按照特定顺序出现的多个操作或步骤,但是应该理解,这些操作或步骤可以不按照其在本申请实施例中出现的顺序来执行或并行执行,操作的序号仅用于区分开各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作或步骤可以按顺序执行或并行执行,并且这些操作或步骤可以进行组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备执行本申请各个实施例所述的方法。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种数据备份方法,其特征在于,所述数据备份方法包括:
获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
在业务空闲时段,基于所述目标存储位置读取目标数据;
对所述目标数据进行备份。
2.如权利要求1所述的数据备份方法,其特征在于,所述第一全量快照包括N个数据块,N为正整数,所述获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块的步骤包括:
获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
确定差异位图中的目标二进制数对应的目标数据块;
获取第一全量快照中目标数据块对应的目标存储位置。
3.如权利要求2所述的数据备份方法,其特征在于,在所述获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块的步骤之前,还包括:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
4.如权利要求3所述的数据备份方法,其特征在于,所述检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致的步骤包括:
检测在第二全量快照的生成时刻到第一全量快照的生成时刻的时段内是否存在所述存储卷中第i个数据块对应的变更记录;
若不存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据一致;
若存在,则确定第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据不一致。
5.如权利要求2所述的数据备份方法,其特征在于,所述对所述目标数据进行备份的步骤包括:
将所述目标数据写入备份卷中的目标备份数据块,所述目标备份数据块为所述目标数据所属目标数据块对应的备份数据块,所述备份卷包括N个备份数据块。
6.一种数据备份装置,其特征在于,所述数据备份装置包括:
获取模块,用于获取第一全量快照中目标数据块对应的目标存储位置,所述目标数据块为第一全量快照相较于第二全量快照存在数据差异的数据块,第一全量快照与第二全量快照为针对同一个存储卷相邻两次生成的全量快照,且第二全量快照的生成时刻早于第一全量快照的生成时刻;
读取模块,用于在业务空闲时段,基于所述目标存储位置读取目标数据;
备份模块,用于对所述目标数据进行备份。
7.如权利要求6所述的数据备份装置,其特征在于,所述第一全量快照包括N个数据块,N为正整数,所述获取模块用于:
获取差异位图,所述差异位图为包括N个二进制数的数组,其中,第i个二进制数对应第一全量快照中第i个数据块,i∈[1,N];
确定差异位图中的目标二进制数对应的目标数据块;
获取第一全量快照中目标数据块对应的目标存储位置。
8.如权利要求7所述的数据备份装置,其特征在于,所述数据备份装置还包括创建模块,用于:
检测第一全量快照中第i个数据块对应的数据与第二全量快照中第i个数据块对应的数据是否一致;
若一致,则将差异位图中第i个二进制数置为非目标二进制数;
若不一致,则将差异位图中第i个二进制数置为目标二进制数。
9.一种数据备份设备,其特征在于,所述数据备份设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的数据备份程序,其中所述数据备份程序被所述处理器执行时,实现如权利要求1至5中任一项所述的数据备份方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有数据备份程序,其中所述数据备份程序被处理器执行时,实现如权利要求1至5中任一项所述的数据备份方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311744347.2A CN117667521A (zh) | 2023-12-15 | 2023-12-15 | 数据备份方法、装置、设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311744347.2A CN117667521A (zh) | 2023-12-15 | 2023-12-15 | 数据备份方法、装置、设备及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117667521A true CN117667521A (zh) | 2024-03-08 |
Family
ID=90066043
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311744347.2A Pending CN117667521A (zh) | 2023-12-15 | 2023-12-15 | 数据备份方法、装置、设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117667521A (zh) |
-
2023
- 2023-12-15 CN CN202311744347.2A patent/CN117667521A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112597153B (zh) | 一种基于区块链的数据存储方法、装置及存储介质 | |
CN111414362A (zh) | 数据读取方法、装置、设备及存储介质 | |
CN109033365B (zh) | 一种数据处理方法及相关设备 | |
CN115328704A (zh) | 文件备份方法、文件恢复方法、装置、设备和存储介质 | |
CN113177021B (zh) | 一种不同数据源的数据导出方法及装置 | |
CN116302455B (zh) | 定时任务的处理方法及装置、存储介质、计算机设备 | |
CN117667521A (zh) | 数据备份方法、装置、设备及计算机可读存储介质 | |
CN115658683A (zh) | 元数据处理方法、装置、设备、介质和程序产品 | |
CN113760237A (zh) | 编译地址的更新方法、装置、终端设备及可读存储介质 | |
CN118193032B (zh) | 消除无效依赖库的方法、装置、设备、介质和程序产品 | |
CN117539690B (zh) | 多磁盘数据的合并恢复方法、装置、设备、介质和产品 | |
US20240231778A1 (en) | Microservice termination while maintaining high availability | |
CN118519583A (zh) | 数据处理方法、装置、设备、可读存储介质和程序产品 | |
CN112579605A (zh) | 一种数据存储方法、装置、存储介质及服务器 | |
CN117852818A (zh) | 项目编码生成方法、装置、计算机设备和存储介质 | |
CN117075951A (zh) | 程序维护方法、装置、计算机设备和存储介质 | |
CN117196602A (zh) | 缴费数据处理方法、装置、计算机设备和存储介质 | |
CN117555487A (zh) | 数据拆分方法、装置、计算机设备、存储介质 | |
CN117271445A (zh) | 日志数据处理方法、装置、服务器、存储介质和程序产品 | |
CN118860477A (zh) | 元数据版本控制方法、装置、计算机设备、可读存储介质和程序产品 | |
CN118585435A (zh) | 自动化测试方法、装置、计算机设备和可读存储介质 | |
CN103577565A (zh) | 一种将文件导出到磁带的方法和装置 | |
CN115858533A (zh) | 一种基于哈希表的积点信息溯源方法、装置、设备及介质 | |
CN118467095A (zh) | 数据校验方法、装置、计算机设备和存储介质 | |
CN116909876A (zh) | 调试方法、装置、计算机设备、存储介质和程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |