CN111831472B - 快照创建方法和装置以及电子设备 - Google Patents
快照创建方法和装置以及电子设备 Download PDFInfo
- Publication number
- CN111831472B CN111831472B CN201910314509.6A CN201910314509A CN111831472B CN 111831472 B CN111831472 B CN 111831472B CN 201910314509 A CN201910314509 A CN 201910314509A CN 111831472 B CN111831472 B CN 111831472B
- Authority
- CN
- China
- Prior art keywords
- backed
- data block
- snapshot
- target object
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000002360 preparation method Methods 0.000 claims abstract description 29
- 230000005540 biological transmission Effects 0.000 claims abstract description 24
- 230000004048 modification Effects 0.000 claims description 54
- 238000012986 modification Methods 0.000 claims description 54
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/128—Details of file system snapshots on the file-level, e.g. snapshot creation, administration, deletion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
Abstract
本发明实施例提供了一种快照创建方法和装置以及电子设备。该方法包括:根据目标对象的元数据,在数据块中确定至少一个待备份数据块;在至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;在接收到用于指示创建快照的快照创建指令后,将至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态;将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。本发明实施例通过将被修改过的待备份数据块进行划分,从中选出部分数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种快照创建方法和装置以及电子设备。
背景技术
磁盘快照,作为磁盘数据在某个时间点的完整拷贝,可用于进行磁盘数据恢复,将磁盘数据回滚到磁盘快照上的数据内容。在实际的容灾备份应用场景中,一般会对磁盘创建多份快照,如,定时创建磁盘快照,以在需要时选择适合的快照进行回滚。
在现有技术中,为了节省存储空间,快照存储系统一般采用去重存储的方式进行快照存储。即,将磁盘数据按区间划分,形成多个数据块,在每次创建快照时,只备份发生变化的那些数据块。
发明人在实现本发明的过程中,发现现有技术至少存在如下问题:在现有技术中,只有在创建快照的时候才能够最终确定发生变化的数据块,当磁盘数据的总变化量较大时,从开始创建快照到最终将发生变化的数据块进行备份以完成快照创建,将耗费非常长的时间。
发明内容
本发明实施例提供一种快照创建方法和装置以及电子设备,以解决现有技术中创建快照耗费较长时间的缺陷。
为达到上述目的,本发明实施例提供了一种快照创建方法,包括:
根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;
在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储。
本发明实施例还提供了一种快照创建装置,包括:
确定模块,用于根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;
第一发送模块,用于在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
第一状态位标记模块,用于在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
第二发送模块,用于将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储。
本发明实施例还提供一种电子设备,包括:
存储器,用于存储程序;
处理器,用于运行所述存储器中存储的所述程序,以用于:
根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;
在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储。
本发明实施例提供的快照创建方法和装置以及电子设备,通过将被修改过的待备份数据块进行划分,从中选出部分数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本发明实施例提供的业务系统的系统框图;
图2为本发明提供的快照创建方法一个实施例的流程图;
图3为本发明提供的快照创建方法另一个实施例的流程图;
图4a为本发明提供的快照创建方法又一个实施例的流程图;
图4b为本发明实施例中待备份数据块的状态位的示意图;
图5为本发明提供的快照创建方法再一个实施例的流程图;
图6为本发明提供的快照创建装置一个实施例的结构示意图;
图7为本发明提供的快照创建装置另一个实施例的结构示意图;
图8为本发明提供的电子设备实施例的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
在现有技术中,通常将磁盘数据按照区间进行划分,以形成多个数据块。在每次创建快照时,只备份发生变化的那些数据块。但是,当磁盘数据的总变化量较大时,由于只有在创建快照的时候才能够最终确定发生变化的数据块,使得从开始创建快照到最终将发生变化的数据块进行备份以完成快照创建所耗费的时间非常长。因此,本申请提出了一种快照创建方案,其主要原理是:对目标对象(例如,磁盘)的元数据进行分析,确定目标对象的所有数据快中被修改过的待备份数据块;然后,在这些待备份数据快中选出一部分满足预设条件的作为预备份数据块,在进行快照创建之前,便预先将这些预备份数据块发送至快照存储系统进行存储(即,进行预备份)。这样,在开始创建快照时只需传输剩余的待备份数据块,能够减少在快照创建时的数据传输量,从而极大地缩短快照创建的时间。
本发明实施例提供的方法可应用于任何具有快照创建能力的业务系统。图1为本发明实施例提供的业务系统的系统框图,图1所示的结构仅仅是本发明的技术方案可以应用的业务系统的示例之一。如图1所示,该业务系统中包括快照创建装置。该装置包括:确定模块、第一发送模块、第一状态位标记模块和第二发送模块,可以用来执行下述图2至图5所示的处理流程。在该业务系统中,首先,获取目标对象(例如,磁盘)的元数据,根据对目标对象的元数据进行分析,获取目标对象的各数据块的修改情况,从中确定至少一个在上一次创建快照之后被修改过的数据块(即,待备份数据块),这些待备份数据块将构成针对该目标对象下一次创建的快照;然后,根据预设条件,在这些待备份数据块中选出预备份数据块,以发送至快照存储系统进行存储;在接收到新的快照创建指令后,则在目标对象的元数据中,将除上述预备份数据块之外的其余待备份数据块的状态位标记为待备份状态;然后,将这些被标记为待备份状态的待备份数据块发送至快照存储系统以进行存储。从而将被修改过的待备份数据块进行划分,根据一定的规则将其中的一部分数据块预先进行传输及存储,使得在开始创建快照时只需传输剩余的待备份数据块,能够减少在快照创建时的数据传输量,以极大地缩短快照创建的时间。
上述实施例是对本发明实施例的技术原理和示例性的应用框架的说明,下面通过多个实施例来进一步对本发明实施例具体技术方案进行详细描述。
实施例一
图2为本发明提供的快照创建方法一个实施例的流程图,该方法的执行主体可以为上述业务系统,也可以为具有快照创建能力的各种服务器或终端设备,也可以为集成在这些设备上的装置或芯片。如图2所示,该快照创建方法包括如下步骤:
S201,根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块。
在本发明实施例中,目标对象的待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成该目标对象的快照。本发明实施例中的目标对象可以为磁盘,每个磁盘都有相应的元数据,用于描述磁盘数据。因此,可以对磁盘的元数据进行分析,以获取磁盘中各数据块的修改情况,并将在上一次创建快照后被修改过的数据块确定为待备份数据块。
S202,在至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储。
在本发明实施例中,在确定了目标对象的待备份数据块后,选择满足一定条件的待备份数据块作为预备份数据块发送至快照存储系统进行存储,即,进行预备份。该步骤可以定时进行,即,可以设置定时任务,定时遍历目标对象的数据块,寻找满足预设条件的待备份数据块,将其进行预备份。
S203,在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将上述至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态。
S204,将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
在创建新的快照时,将产生用于指示创建快照的快照创建指令。因此,在本发明实施例中,当接收到快照创建指令后,可以在目标对象的元数据中对除上述预备份数据块以外的待备份数据块的状态位进行标记,将其标记为待备份状态。然后,将这些待备份状态的待备份数据块发送到快照存储系统进行存储,即,进行正式的备份,从而完成快照创建。另外,在快照存储系统中设置有快照切片列表,用于记录目标对象的数据块的快照来源,因此,对于已经预先备份的数据,在数据传输过程中,不必再次传输数据,但是需要在快照存储系统中,将被发送至快照存储系统进行存储的待备份数据块,在快照切片列表中对应的快照来源标记为当前快照。
本发明实施例提供的快照创建方法,通过将被修改过的待备份数据块进行划分,从中选出部分数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例二
图3为本发明提供的快照创建方法另一个实施例的流程图。如图3所示,在上述图2所示实施例的基础上,本实施例提供的快照创建方法还可以包括以下步骤:
S301,根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块。
S302,在至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储。
S303,在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将上述至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态。
在本发明实施例中,步骤S301至S303与上述图2所示实施例中的步骤S201至S203相同,详见图2所示实施例中的具体描述,在此不再赘述。
另外,在本发明实施例中,当执行完上述步骤S301,还可以执行下述步骤S304和S305。
S304,在目标对象的元数据中,将满足预设条件的待备份数据块的状态位标记为预备份状态。
S305,当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将该待备份数据块的状态位修改为待备份状态。
在本发明实施例中,在根据目标对象的元数据确定了至少一个待备份数据块后,可以将满足预设条件的待备份数据在目标对象的元数据中的状态位标记为预备份状态。然后,当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,也就是说,当一个待备份数据块被标记为预备份状态,且被发送至快照存储系统进行预备份后,该待备份数据块又被修改,则已预备份到快照存储系统中的数据块已失效,需要将该待备份数据块的状态位由预备份状态修改为待备份状态,以再次进行备份。具体地,可以在目标对象的元数据中设置预备份列表和待备份列表,其中,预备份列表可以用于记录状态位为预备份状态的待备份数据块,待备份列表可以用于记录状态位为待备份状态的待备份数据块。
本发明实施例中的步骤S304至S305与上述步骤S301至S303的执行顺序不分先后。
S306,将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
在本发明实施例中,步骤S306与上述图2所示实施例中的步骤S204相同,详见图2所示实施例中的具体描述,在此不再赘述。
本发明实施例提供的快照创建方法,通过将被修改过的待备份数据块进行划分,从中选出不常被修改的数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例三
图4a为本发明提供的快照创建方法又一个实施例的流程图。在上述图2和图3所示实施例的基础上,上述步骤202或步骤302可以具体采用比较待备份数据块的最晚修改时刻与当前时刻之间的时间间隔与预设时间阈值之间的大小的方式,来确定预备份数据。图4a仅示出了以图3所示实施例为基础的示例,如图4a所示,本实施例提供的快照创建方法还可以包括以下步骤:
S401,根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块。
在本发明实施例中,步骤S401与上述图3所示实施例中的步骤S301相同,详见图3所示实施例中的具体描述,在此不再赘述。
S402,在目标对象的元数据中,获取至少一个待备份数据块的最晚修改时刻。
S403,将最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值的待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
在本发明实施例中,可以从目标对象的元数据中获取各待备份数据块的最晚修改时刻,若待备份数据块的最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值,则说明该待备份数据块为不常被修改的待备份数据块,因此,可以将其确定为预备份数据块。
S404,在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将上述至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态。
S405,在目标对象的元数据中,将满足预设条件的待备份数据块的状态位标记为预备份状态。
S406,当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将该待备份数据块的状态位修改为待备份状态。
图4b为本发明实施例中待备份数据块的状态位的示意图。如图4b所示,以目标对象的4个数据块(数据块A:0~1MB,数据块B:2~3MB,数据块C:4~5MB,数据块D:6~7MB)为例,假设,在进行完第2次快照创建之后,各数据块的状态如(1)所示。然后,在12:00:02时刻数据块A被修改,在12:01:05时刻数据块B被修改,在12:08:30时刻数据块D被修改,则数据块A、B和D为待备份数据块,其最晚修改时刻如图4b中的(2)所示。根据步骤S403的筛选条件,假设待备份数据块A和B的最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值,则将待备份数据块A和B确定为预备份数据块,并将待备份数据块A和B的状态标记为预备份状态,如(3)所示。当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,例如,当接收到针对待备份数据块A的修改请求时,则需要将该待备份数据块A的状态位修改为待备份状态。另外,在接收到用于指示创建快照3的快照创建指令后,需要将待备份数据块中除预备份数据块之外的待备份数据块(即,图4b中的数据块D)的状态位标记为待备份状态,如(4)所示。此时,可以执行下述步骤S407,将(4)中的被标记为待备份状态的数据块A和D发送至快照存储系统进行存储。
S407,将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
进一步地,在完成创建快照3后,可以将数据块A、B和D的状态更新为“沿用快照3”,如图4b中的(5)所示。
在本发明实施例中,步骤S404至S407与上述图3所示实施例中的步骤S303至S306相同,详见图3所示实施例中的具体描述。
本发明实施例提供的快照创建方法,通过将被修改过的待备份数据块进行划分,从中选出不常被修改的数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例四
图5为本发明提供的快照创建方法再一个实施例的流程图。在上述图2和图3所示实施例的基础上,上述步骤202或步骤302可以具体采用比较待备份数据块在预定时间间隔范围内的修改次数与预设次数阈值之间的大小的方式,来确定预备份数据。图5仅示出了以图2所示实施例为基础的示例,如图5所示,本实施例提供的快照创建方法还可以包括以下步骤:
S501,根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块。
在本发明实施例中,步骤S501与上述图2所示实施例中的步骤S201相同,详见图2所示实施例中的具体描述,在此不再赘述。
S502,在目标对象的元数据中,获取至少一个待备份数据块的历次修改时刻。
S503,在以当前时刻为终点的预设时间间隔范围内,获取至少一个待备份数据块的修改次数。
S504,将修改次数小于预设次数阈值的待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
在本发明实施例中,可以从目标对象的元数据中获取各待备份数据块的历史修改时刻,然后,以当前时刻为终点设置预设时间间隔范围,获取各待备份数据块在该预设时间间隔范围内的修改次数,若待备份数据块的修改次数小于预设次数阈值,则说明该待备份数据块为不常被修改的待备份数据块,因此,可以将其确定为预备份数据块。
S505,在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将上述至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态。
S506,将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
在本发明实施例中,步骤S505至S506与上述图2所示实施例中的步骤S203至S204相同,详见图2所示实施例中的具体描述,在此不再赘述。
本发明实施例提供的快照创建方法,通过将被修改过的待备份数据块进行划分,从中选出在一定时间间隔范围内修改次数较少的数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例五
图6为本发明提供的快照创建装置一个实施例的结构示意图,可用于执行如图2所示的方法步骤。如图5所示,该快照创建装置可以包括:确定模块61、第一发送模块62、第一状态位标记模块63和第二发送模块64。
其中,确定模块61用于根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块,待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成该目标对象的快照;第一发送模块62用于在至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;第一状态位标记模块63用于在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将至少一个待备份数据块中除预备份数据块之外的待备份数据块的状态位标记为待备份状态;第二发送模块64用于将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
在本发明实施例中,目标对象的待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成该目标对象的快照。本发明实施例中的目标对象可以为磁盘,每个磁盘都有相应的元数据,用于描述磁盘数据。因此,确定模块61可以对磁盘的元数据进行分析,以获取磁盘中各数据块的修改情况,并将在上一次创建快照后被修改过的数据块确定为待备份数据块。在确定模块61确定了目标对象的待备份数据块后,第一发送模块62选择满足一定条件的待备份数据块作为预备份数据块发送至快照存储系统进行存储,即,进行预备份。第一发送模块62可以定时定时遍历目标对象的数据块,寻找满足预设条件的待备份数据块,将其进行预备份。在创建新的快照时,将产生用于指示创建快照的快照创建指令。因此,在本发明实施例中,当接收到快照创建指令后,第一状态位标记模块63可以在目标对象的元数据中对除上述预备份数据块以外的待备份数据块的状态位进行标记,将其标记为待备份状态。然后,第二发送模块64将这些待备份状态的待备份数据块发送到快照存储系统进行存储,即,进行正式的备份,从而完成快照创建。
本发明实施例提供的快照创建装置,通过将被修改过的待备份数据块进行划分,从中选出部分数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例六
图7为本发明提供的快照创建装置另一个实施例的结构示意图,可以用于执行如图3、图4a和图5所示的方法步骤。如图7所示,在上述图6所示实施例的基础上,在快照存储系统中设置有快照切片列表,用于记录目标对象的数据块的快照来源,因此,本发明实施例提供的快照创建装置还可以包括:来源标记模块73。该来源标记模块73可以用于将被发送至快照存储系统进行存储的待备份数据块,在快照切片列表中对应的快照来源标记为当前快照。
另外,本发明实施例提供的快照创建装置还可以包括:第二状态位标记模块71和状态位修改模块72。
其中,第二状态位标记模块71可以用于在目标对象的元数据中,将满足预设条件的待备份数据块的状态位标记为预备份状态。状态位修改模块72可以用于在接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将待备份数据块的状态位修改为待备份状态。
在本发明实施例中,在确定模块61根据目标对象的元数据确定了至少一个待备份数据块后,第二状态位标记模块71可以将满足预设条件的待备份数据在目标对象的元数据中的状态位标记为预备份状态。然后,当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,也就是说,当一个待备份数据块被标记为预备份状态,且被发送至快照存储系统进行预备份后,该待备份数据块又被修改,则已预备份到快照存储系统中的数据块已失效,需要由状态位修改模块72将该待备份数据块的状态位由预备份状态修改为待备份状态,以再次进行备份。具体地,可以在目标对象的元数据中设置预备份列表和待备份列表,其中,预备份列表可以用于记录状态位为预备份状态的待备份数据块,待备份列表可以用于记录状态位为待备份状态的待备份数据块。
进一步地,在本发明实施例提供的快照创建装置中,第一发送模块62可以包括:第一获取单元621和第一发送单元622。
其中,第一获取单元621可以用于在目标对象的元数据中,获取至少一个待备份数据块的最晚修改时刻;第一发送单元622可以用于将最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值的待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
在本发明实施例中,第一获取单元621可以从目标对象的元数据中获取各待备份数据块的最晚修改时刻,若待备份数据块的最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值,则说明该待备份数据块为不常被修改的待备份数据块,因此,第一发送单元622可以将其确定为预备份数据块,并发送至快照存储系统进行存储。
更进一步地,在本发明实施例提供的快照创建装置中,第一发送模块62还可以包括:第二获取单元623、第三获取单元624和第二发送单元625。
其中,第二获取单元623可以用于在目标对象的元数据中,获取至少一个待备份数据块的历次修改时刻;第三获取单元624可以用于在以当前时刻为终点的预设时间间隔范围内,获取至少一个待备份数据块的修改次数;第二发送单元625可以用于将修改次数小于预设次数阈值的待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
在本发明实施例中,第二获取单元623可以从目标对象的元数据中获取各待备份数据块的历史修改时刻,然后,第三获取单元624以当前时刻为终点设置预设时间间隔范围,获取各待备份数据块在该预设时间间隔范围内的修改次数,若待备份数据块的修改次数小于预设次数阈值,则说明该待备份数据块为不常被修改的待备份数据块,因此,第二发送单元625可以将其确定为预备份数据块,并发送至快照存储系统进行存储。
本发明实施例提供的快照创建装置,通过将被修改过的待备份数据块进行划分,从中选出不常被修改的数据块预先进行传输,使得在开始创建快照时只需传输剩余的待备份数据块,以减少在快照创建时的数据传输量,极大地缩短了快照创建的时间。
实施例七
以上描述了快照创建装置的内部功能和结构,该装置可实现为一种电子设备。图8为本发明提供的电子设备实施例的结构示意图。如图8所示,该电子设备包括存储器81和处理器82。
存储器81,用于存储程序。除上述程序之外,存储器81还可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。
存储器81可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
处理器82,与存储器81耦合,执行存储器81所存储的程序,以用于:
根据目标对象的元数据,在目标对象的数据块中确定至少一个待备份数据块,待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成该目标对象的快照;
在至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
在接收到用于指示创建快照的快照创建指令后,在目标对象的元数据中,将至少一个待备份数据块中除上述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
将被标记为待备份状态的待备份数据块发送至快照存储系统进行存储。
进一步,如图8所示,电子设备还可以包括:通信组件83、电源组件84、音频组件85、显示器86等其它组件。图8中仅示意性给出部分组件,并不意味着电子设备只包括图8所示组件。
通信组件83被配置为便于电子设备和其他设备之间有线或无线方式的通信。电子设备可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件83经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件83还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
电源组件84,为电子设备的各种组件提供电力。电源组件84可以包括电源管理系统,一个或多个电源,及其他与为电子设备生成、管理和分配电力相关联的组件。
音频组件85被配置为输出和/或输入音频信号。例如,音频组件85包括一个麦克风(MIC),当电子设备处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器81或经由通信组件83发送。在一些实施例中,音频组件85还包括一个扬声器,用于输出音频信号。
显示器86包括屏幕,其屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (11)
1.一种快照创建方法,其特征在于,包括:
根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;
在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将所述待备份数据块的状态位修改为待备份状态;
将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储;
其中,所述在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储,包括:在所述目标对象的元数据中,获取所述至少一个待备份数据块的最晚修改时刻;将所述最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值的所述待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
2.根据权利要求1所述的快照创建方法,其特征在于,在所述快照存储系统中设置有快照切片列表,用于记录所述目标对象的数据块的快照来源,所述方法还包括:
将被发送至快照存储系统进行存储的所述待备份数据块,在所述快照切片列表中对应的快照来源标记为当前快照。
3.根据权利要求1所述的快照创建方法,其特征在于,还包括:
在所述目标对象的元数据中,将满足预设条件的待备份数据块的状态位标记为预备份状态。
4.根据权利要求1或3所述的快照创建方法,其特征在于,在所述目标对象的元数据中设置有预备份列表和待备份列表,所述预备份列表用于记录状态位为预备份状态的待备份数据块,所述待备份列表用于记录状态位为待备份状态的待备份数据块。
5.根据权利要求1至3中任一权利要求所述的快照创建方法,其特征在于,所述在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储,包括:
在所述目标对象的元数据中,获取所述至少一个待备份数据块的历次修改时刻;
在以当前时刻为终点的预设时间间隔范围内,获取所述至少一个待备份数据块的修改次数;
将所述修改次数小于预设次数阈值的所述待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
6.一种快照创建装置,其特征在于,包括:
确定模块,用于根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;
第一发送模块,用于在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
第一状态位标记模块,用于在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
状态位修改模块,用于在接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将所述待备份数据块的状态位修改为待备份状态;
第二发送模块,用于将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储;
其中,所述第一发送模块包括:第一获取单元,用于在所述目标对象的元数据中,获取所述至少一个待备份数据块的最晚修改时刻;第一发送单元,用于将所述最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值的所述待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
7.根据权利要求6所述的快照创建装置,其特征在于,在所述快照存储系统中设置有快照切片列表,用于记录所述目标对象的数据块的快照来源,所述装置还包括:
来源标记模块,用于将被发送至快照存储系统进行存储的所述待备份数据块,在所述快照切片列表中对应的快照来源标记为当前快照。
8.根据权利要求6所述的快照创建装置,其特征在于,还包括:
第二状态位标记模块,用于在所述目标对象的元数据中,将满足预设条件的待备份数据块的状态位标记为预备份状态。
9.根据权利要求6或8所述的快照创建装置,其特征在于,在所述目标对象的元数据中设置有预备份列表和待备份列表,所述预备份列表用于记录状态位为预备份状态的待备份数据块,所述待备份列表用于记录状态位为待备份状态的待备份数据块。
10.根据权利要求6至8中任一项所述的快照创建装置,其特征在于,所述第一发送模块包括:
第二获取单元,用于在所述目标对象的元数据中,获取所述至少一个待备份数据块的历次修改时刻;
第三获取单元,用于在以当前时刻为终点的预设时间间隔范围内,获取所述至少一个待备份数据块的修改次数;
第二发送单元,用于将所述修改次数小于预设次数阈值的所述待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
11.一种电子设备,其特征在于,包括:
存储器,用于存储程序;
处理器,用于运行所述存储器中存储的所述程序,以用于:
根据目标对象的元数据,在所述目标对象的数据块中确定至少一个待备份数据块,所述待备份数据块为在上一次创建快照之后被修改过的数据块,用于构成所述目标对象的快照;当接收到针对状态位被标记为预备份状态的待备份数据块的修改请求时,将所述待备份数据块的状态位修改为待备份状态;
在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储;
在接收到用于指示创建快照的快照创建指令后,在所述目标对象的元数据中,将所述至少一个待备份数据块中除所述预备份数据块之外的待备份数据块的状态位标记为待备份状态;
将被标记为待备份状态的所述待备份数据块发送至所述快照存储系统进行存储;
其中,所述在所述至少一个待备份数据块中选择满足预设条件的待备份数据块,作为预备份数据块发送至快照存储系统进行存储,包括:在所述目标对象的元数据中,获取所述至少一个待备份数据块的最晚修改时刻;将所述最晚修改时刻与当前时刻之间的时间间隔大于预设时间阈值的所述待备份数据块,确定为预备份数据块发送至快照存储系统进行存储。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910314509.6A CN111831472B (zh) | 2019-04-18 | 2019-04-18 | 快照创建方法和装置以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910314509.6A CN111831472B (zh) | 2019-04-18 | 2019-04-18 | 快照创建方法和装置以及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111831472A CN111831472A (zh) | 2020-10-27 |
CN111831472B true CN111831472B (zh) | 2023-12-22 |
Family
ID=72914920
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910314509.6A Active CN111831472B (zh) | 2019-04-18 | 2019-04-18 | 快照创建方法和装置以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111831472B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114416885A (zh) * | 2022-04-01 | 2022-04-29 | 广东睿江云计算股份有限公司 | 基于drbd的数据同步方法、装置、计算机设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0767431A1 (en) * | 1995-10-04 | 1997-04-09 | Stac, Inc. | System for backing up computer disk volumes |
EP0945800A1 (en) * | 1998-03-02 | 1999-09-29 | Hewlett-Packard Company | Data backup system |
US6981114B1 (en) * | 2002-10-16 | 2005-12-27 | Veritas Operating Corporation | Snapshot reconstruction from an existing snapshot and one or more modification logs |
CN107391312A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 数据云备份方法及系统 |
WO2018153251A1 (zh) * | 2017-02-21 | 2018-08-30 | 中兴通讯股份有限公司 | 一种快照的处理方法及分布式块存储系统 |
CN109284205A (zh) * | 2018-09-21 | 2019-01-29 | 平安科技(深圳)有限公司 | 快照备份方法、装置、计算机设备及存储介质 |
CN109298971A (zh) * | 2018-08-28 | 2019-02-01 | 维沃移动通信有限公司 | 一种图片备份方法及终端 |
-
2019
- 2019-04-18 CN CN201910314509.6A patent/CN111831472B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0767431A1 (en) * | 1995-10-04 | 1997-04-09 | Stac, Inc. | System for backing up computer disk volumes |
EP0945800A1 (en) * | 1998-03-02 | 1999-09-29 | Hewlett-Packard Company | Data backup system |
US6981114B1 (en) * | 2002-10-16 | 2005-12-27 | Veritas Operating Corporation | Snapshot reconstruction from an existing snapshot and one or more modification logs |
WO2018153251A1 (zh) * | 2017-02-21 | 2018-08-30 | 中兴通讯股份有限公司 | 一种快照的处理方法及分布式块存储系统 |
CN107391312A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 数据云备份方法及系统 |
CN109298971A (zh) * | 2018-08-28 | 2019-02-01 | 维沃移动通信有限公司 | 一种图片备份方法及终端 |
CN109284205A (zh) * | 2018-09-21 | 2019-01-29 | 平安科技(深圳)有限公司 | 快照备份方法、装置、计算机设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
面向OpenStack/Ceph的虚拟机备份系统研究;杨皓森;胡晓勤;黄传波;;计算机系统应用(11);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111831472A (zh) | 2020-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9361309B2 (en) | File synchronization method, electronic device and synchronization system | |
CN108572789B (zh) | 磁盘存储方法和装置、消息推送方法和装置及电子设备 | |
US20130297563A1 (en) | Timestamp management method for data synchronization and terminal therefor | |
CN106874281B (zh) | 实现数据库读写分离的方法和装置 | |
EP2378437A1 (en) | Data synchronization methods in communication systems | |
CN103886059A (zh) | 文件的清理方法及装置 | |
CN109391647B (zh) | 存储资源回收方法、装置及系统 | |
CN108965383B (zh) | 文件同步方法、装置、计算机设备和存储介质 | |
CN112764663B (zh) | 云存储空间的空间管理方法、装置和系统、电子设备以及计算机可读存储介质 | |
CN106649654A (zh) | 一种数据更新的方法和装置 | |
CN111831472B (zh) | 快照创建方法和装置以及电子设备 | |
CN113961510A (zh) | 一种文件处理方法、装置、设备及存储介质 | |
CN109947842B (zh) | 分布式存储系统中的数据存储方法、装置及系统 | |
CN109213431B (zh) | 多副本数据的一致性检测方法和装置以及电子设备 | |
CN108205559B (zh) | 一种数据管理方法及其设备 | |
CN111291112B (zh) | 分布式数据库的读写控制方法和装置以及电子设备 | |
CN110851398B (zh) | 垃圾数据的回收处理方法、装置及电子设备 | |
CN110795318B (zh) | 数据处理方法和装置以及电子设备 | |
CN109656936A (zh) | 数据同步方法、装置、计算机设备和存储介质 | |
CN112486979B (zh) | 数据处理方法、装置和系统、电子设备以及计算机可读存储介质 | |
CN111147226A (zh) | 数据存储方法、装置及存储介质 | |
CN110555075A (zh) | 数据处理方法、装置、电子设备以及计算机可读存储介质 | |
CN110968557B (zh) | 分布式文件系统中的数据处理方法、装置及电子设备 | |
CN111124721B (zh) | 网页处理方法、装置及电子设备 | |
CN110866003B (zh) | 索引值数目的估算方法和装置以及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20231127 Address after: Room 1-2-A06, Yungu Park, No. 1008 Dengcai Street, Sandun Town, Xihu District, Hangzhou City, Zhejiang Province, 310030 Applicant after: Aliyun Computing Co.,Ltd. Address before: Box 847, four, Grand Cayman capital, Cayman Islands, UK Applicant before: ALIBABA GROUP HOLDING Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |