CN110737546B - 一致性快照的检验方法、装置、设备及存储介质 - Google Patents
一致性快照的检验方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN110737546B CN110737546B CN201910990936.6A CN201910990936A CN110737546B CN 110737546 B CN110737546 B CN 110737546B CN 201910990936 A CN201910990936 A CN 201910990936A CN 110737546 B CN110737546 B CN 110737546B
- Authority
- CN
- China
- Prior art keywords
- data
- sub
- inspection
- storage area
- inspection data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000013500 data storage Methods 0.000 claims abstract description 182
- 238000007689 inspection Methods 0.000 claims abstract description 161
- 238000012795 verification Methods 0.000 claims description 116
- 230000011218 segmentation Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 5
- 230000005856 abnormality Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008014 freezing Effects 0.000 description 4
- 238000007710 freezing Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 230000001788 irregular Effects 0.000 description 2
- 241000700605 Viruses Species 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/82—Solving problems relating to consistency
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/84—Using snapshots, i.e. a logical point-in-time copy of the data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种一致性快照的检验方法、装置、设备及存储介质。该方法包括:对生成的检验数据进行切分,得到多个第一子检验数据;将各第一子检验数据分别存储到对应的原始数据存储区域;当根据原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,将获取到的多个第二子检验数据进行组合,得到待验证数据;将待验证数据与检验数据进行对比,根据对比结果进行一致性快照检验。通过上述方式,保障了快照操作的有效性,从而有效避免了一致性快照数据受损。
Description
技术领域
本发明涉及数据备份技术领域,尤其涉及一种一致性快照的检验方法、装置、设备及存储介质。
背景技术
数据备份是容灾的基础,是指为防止系统出现操作失误或系统故障导致数据丢失,而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。
目前,为了对数据进行备份,通常会通过对虚拟机进行快照的操作来保存当前完整数据,从而即便后续由于操作不当或病毒入侵导致数据损坏或丢失,也可以通过恢复快照的方式,将数据恢复到之前保存的快照点。
但是,在实际应用中,通常会存在依赖写的情况,即写入某一磁盘或数据存储区域的数据A,通常会依赖写入另一个磁盘或数据存储区域的数据B,因此为了尽可能避免数据的丢失,保证一致性快照数据不受损,就需要对一致性快照进行合理的检验。
然而,目前对数据的检验通常是针对单个磁盘进行的,并没有针对一致性快照数据是否受损的检验方案。所以,亟需提供一种一致性快照的检验方案,以保证快照操作的有效性,进而避免一致性快照数据受损,保障数据的完整性。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种一致性快照的检验方法、装置、设备及存储介质,旨在通过对一致性快照操作的检验,保障快照操作的有效性,进而避免一致性快照数据受损,保障数据的完整性。
为实现上述目的,本发明提供了一种一致性快照的检验方法,所述方法包括以下步骤:
对生成的检验数据进行切分,得到多个第一子检验数据;
将各第一子检验数据分别存储到对应的原始数据存储区域;
当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,对获取到的多个第二子检验数据进行组合,得到待验证数据;
将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验。
优选地,所述对生成的检验数据进行切分,得到多个第一子检验数据的步骤,包括:
确定用于存储第一子检验数据的原始数据存储区域的个数N,N为大于等于1的整数;
根据个数N确定第一子检验数据的个数M,M为N的整数倍;
对所述检验数据进行切分,得到M个第一子检验数目。
优选地,所述对所述检验数据进行切分,得到M个第一子检验数目的步骤之后,所述方法还包括:
为各第一子检验数据分别分配序列号,所述序列号用于标识所述第一子检验数据在所述检验数据中的位置;
相应地,所述将各第一子检验数据分别存储到对应的原始数据存储区域的步骤,包括:
根据各第一子检验数据对应的序列号,将各第一子检验数据分别存储到对应的原始数据存储区域。
优选地,获取各备份数据存储区域中存储的第二子检验数据,对获取到的多个第二子检验数据进行组合,得到待验证数据的步骤,包括:
获取各备份数据存储区域中存储的第二子检验数据,并统计获取到的第二子检验数据的个数;
在所述个数等于M时,根据各第二子检验数据对应的序列号,将获取到的M个第二子检验数据进行组合,得到所述待验证数据;
其中,各第二子检验数据对应的序列号预先分配。
优选地,所述将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验的步骤,包括:
将所述待验证数据与所述检验数据进行对比,得到对比结果;
若所述对比结果为所述待验证数据与所述检验数据不一致,则重新根据所述原始数据存储区域进行数据一致性快照操作;
若所述对比结果为所述待验证数据与所述检验数据一致,则确定数据一致性快照正常。
优选地,所述确定数据一致性快照正常的步骤之后,所述方法还包括:
对所述备份数据存储区域进行数据一致性回滚操作。
优选地,所述对所述备份数据存储区域进行数据一致性回滚操作的步骤,包括:
获取各备份数据存储区域中存储的第二子检验数据,根据各第二子检验数据对应的序列号,将获取到的多个第二子检验数据进行组合,得到回滚验证数据;
将所述回滚待验证数据与所述检验数据进行对比,根据对比结果决定是否需要重新执行一次数据一致性快照操作。
此外,为实现上述目的,本发明还提出一种一致性快照的检验装置,所述装置包括:
切分模块,用于对生成的检验数据进行切分,得到多个第一子检验数据;
数据写模块,用于将各第一子检验数据分别存储到对应的原始数据存储区域;
数据读模块,用于当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,将获取到的多个第二子检验数据进行组合,得到待验证数据;
验证模块,用于将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验。
此外,为实现上述目的,本发明还提出一种一致性快照的检验设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的一致性快照的检验程序,所述一致性快照的检验程序配置为实现如上文所述的一致性快照的检验方法的步骤。
此外,为实现上述目的,本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有一致性快照的检验程序,所述一致性快照的检验程序被处理器执行时实现如上文所述的一致性快照的检验方法的步骤。
本发明提供的一致性快照的检验方案,在对原始数据存储区域进行数据一致性快照操作之前,通过生成检验数据,并对生成的检验数据进行切分,进而得到多个相互之间具有关联性的第一子检验数据,接着在根据原始数据存储区域进行数据一致性快照操作,生成与原始数据存储区域存在一一对应的映射关系的备份数据存储区域后,从生成的各备份数据存储区域中获取与第一子检验数据对应的第二子检验数据,然后将获取到的多个第二子检验数据进行组合,得到待验证数据,最终将进行数据一致性快照操作后的待验证数据与进行数据一致性快照操作前的检验数据进行对比,根据对比结果便可以实现对一致性快照的检验。通过这种检验方式尽可能的保障了快照操作的有效性,进而避免了一致性快照数据受损,保障了进行一致性快照后的数据的完整性。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的一致性快照的检验设备的结构示意图;
图2为本发明一致性快照的检验方法第一实施例的流程示意图;
图3为本发明一致性快照的检验方法第一实施例中冻结原始数据存储区域的示意图;
图4为本发明一致性快照的检验方法第一实施例中,向原始数据存储区域存储第一子检验数据的示意图;
图5为本发明一致性快照的检验方法第一实施例中生成备份数据存储区域的示意图;
图6为本发明一致性快照的检验方法第一实施例中,从备份数据存储区域获取第二子检验数据的示意图;
图7为本发明一致性快照的检验方法第一实施例中完成一致性数据快照的示意图;
图8为本发明一致性快照的检验方法第二实施例的流程示意图;
图9为本发明一致性快照的检验装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的一致性快照的检验设备结构示意图。
如图1所示,该一致性快照的检验设备可以包括:处理器1001,例如中央处理器(Central Processing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity,WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM)存储器,也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对一致性快照的检验设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及一致性快照的检验程序。
在图1所示的一致性快照的检验设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明一致性快照的检验设备中的处理器1001、存储器1005可以设置在一致性快照的检验设备中,所述一致性快照的检验设备通过处理器1001调用存储器1005中存储的一致性快照的检验程序,并执行本发明实施例提供的一致性快照的检验方法。
本发明实施例提供了一种一致性快照的检验方法,参照图2,图2为本发明一种一致性快照的检验方法第一实施例的流程示意图。
本实施例中,所述一致性快照的检验方法包括以下步骤:
步骤S10,对生成的检验数据进行切分,得到多个第一子检验数据。
具体的说,为了实现一致性快照的检验,需要预先在需要进行一致性快照的终端设备,如客户端、服务器等设备中安装用于执行本实施例中提供的一致性快照的检验方法的一致性检验工具(软件或应用程序)。
相应地,本实施例中的执行主体即为该一致性检验工具。
此外,应当理解的是,由于本实施例中的执行主体为一致性检验工具,故而上述所说的检验数据可以是该一致性检验工具根据预设规则生成的。
当然,在实际应用中,上述所说的检验数据也可以是由其他设备预先生成,然后存储在一致性检验工具可以访问的数据存储区域的,本实例对此不做限制。
此外,需要说明的是,由于在实际应用中,一致性快照操作实质是对原始数据存储区域中数据的备份,并且备份的过程具体是生成与原始数据存储区域(即目前已有的数据存储区域)一一对应的备份数据存储区域,然后将原始数据存储区域中存储的数据全部备份到新生成的备份数据存储区域中,并由新生成的备份数据存储区域进行后续数据的存储操作。故而,为了实现对每一个原始数据存储区域,以及每一个备份数据存储区域的检验,在本实施例中,对生成的检验数据进行切分,得到的第一子检验数据至少需要与原始数据存储区域的个数相同。
为了便于理解,本实施例给出一种切分检验数据,获得第一子检验数据的具体实现方式,大致如下:
首先,确定用于存储第一子检验数据的原始数据存储区域的个数N;
然后,根据个数N确定第一子检验数据的个数M;
最后,对所述检验数据进行切分,得到M个第一子检验数目。
应当理解的是,上述所说的原始数据存储区域的个数N具体为大于等于1的整数,即在实际应用中,用于存储数据的原始数据存储区域至少为1个。
相应地,上述所说的确定的第一子检验数据的个数M具体为N的整数倍,即在N为3时,M可以是3、6、9等。
应当理解的是,以上给出的仅为一种具体的实现方式,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
此外,值得一提的是,在实际应用中,为了方便续数据读取操作完成后能够按照序列号进行组合,还原检验数据,以保证本实施例提供的一致性快照的检验方案的顺利进行,在完成上述步骤S10之后,还可以为切分得到的各第一子检验数据分别分配的序列号。
具体的说,上述为各第一子检验数据分别分配的序列号主要是为了标识所述第一子检验数据在所述检验数据中的位置,从而方便后续数据读取操作完成后能够按照序列号进行组合,还原检验数据,以保证本实施例提供的一致性快照的检验方案的顺利进行。
步骤S20,将各第一子检验数据分别存储到对应的原始数据存储区域。
具体的说,上述所说的原始数据存储区域,即为进行一致性快照操作之前,用于存储数据的地方。
并且,为了便于后期从所述原始数据存储区域中获取不同序列号的第一子检验数据,上述步骤S20中的操作,具体可以是根据各第一子检验数据对应的序列号,将各第一子检验数据分别存储到对应的原始数据存储区域。
为了便于理解,以下结合图3和图4对上述步骤S10和步骤S20中的操作进行具体说明:
如图3所示,本实施例以传输数据的虚拟机为2个,分别为虚拟机1和虚拟机2。
相应地,在进行一致性快照操作之前,用于存储这两个虚拟机传输的数据的原始数据存储区域(在实际应用中可以是虚拟磁盘)可以为3个,其中一个是仅用于存储虚拟机1传输的数据的原始数据存储区域1,一个是仅用于存储虚拟机2传输的数据的原始数据存储区域2,还有一个是既可以存储虚拟机1传输的数据,又可以存储虚拟机2传输的数据的共享原始数据存储区域。
相应地,在执行步骤S10中所说的操作时,需要先执行冻结原始数据存储区域的操作,即冻结图3中虚拟机1与原始数据存储区域1和共享原始数据存储区域之间的传输通道,同时冻结虚拟机2与原始数据存储区域2和共享原始数据存储区域之间的传输通道,以暂停虚拟机1和虚拟机2向原始数据存储区域1、共享原始数据存储区域和原始数据存储区域2中存储数据的操作。
接着,按照步骤S10中给出的对所述检验数据进行切分的具体切分方式
对所述检验数据进行切分,然后如图4所示,为切分得到的各第一子检验数据分配用于标识各第一子检验数据在所述检验数据中位置的序列号,如图4中的第一子检验数据D1_1,第一子检验数据D1_2,第一子检验数据D1_3等。其中D1_1即标识第一子检验数据D1_1在所述检验数据中处于第一位,D1_2即标识第一子检验数据D1_2在所述检验数据中处于第二位,D1_3即标识第一子检验数据D1_3在所述检验数据中处于第三位。
接着,根据预设的数据存储规则和上述各第一子检验数据对应的序列号,将各第一子检验数据分别存储到对应的原始数据存储区域中。
应当理解的是,上述所说的数据存储规则主要是用于记载各第一子检验数据对应的序列号与各原始数据存储区域之间对应关系的。
以图4所示为例,比如说,在预设的数据存储规则中记录的对应关系为:D1_1对应原始数据存储区域1,D1_2对应共享原始数据存储区域,D1_3对应原始数据存储区域2,则在将得到的上述三个第一子检验数据存储到上述三个原始数据存储区域时,具体是将第一子检验数据D1_1存储到原始数据存储区域1,第一子检验数据D1_2存储到共享原始数据存储区域,第一子检验数据D1_3存储到原始数据存储区域2。
应当理解的是,以上仅为举例说明,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
步骤S30,当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,将获取到的多个第二子检验数据进行组合,得到待验证数据。
应当理解的是,由于备份数据存储区域是根据原始数据存储区域生成的,故而备份数据存储区域与原始数据存储区域之间是存在一一对应的映射关系的。
并且,在生成备份数据存储区域后,需要将原始数据存储区域中存储的数据(包括第一子检验数据)复制到对应的备份数据存储区域中。
为了便于理解,以下结合如5进行说明。
如图5所示,备份数据存储区域1是与原始数据存储区域1对应的,共享备份数据存储区域是与共享原始数据存储区域对应的,备份数据存储区域2是与原始数据存储区域2对应的。
相应地,存储在原始数据存储区域1中的数据(包括第一子检验数据D1_1)就需要复制到备份数据存储区域1中,存储在共享原始数据存储区域中的数据(包括第一子检验数据D1_2)就需要复制到共享备份数据存储区域中,存储在原始数据存储区域2中的数据(包括第一子检验数据D1_3)就需要复制到备份数据存储区域2中。
以图6所示为例,步骤S30中所说的“获取各备份数据存储区域中存储的第二子检验数据”的操作,即为从备份数据存储区域1中获取第二子检验数据D2_1,从共享备份数据存储区域中获取第二子检验数据D2_2,从备份数据存储区域2中获取第二子检验数据D2_3。
应当理解的是,理论上第二子检验数据应该与第一子检验数据相同,这样就可以保证一致性。但是,在实际应用中,可能会存在一些突发情况,导致数据一致性快照操作后的数据发生丢失,或破损,进而导致添加到原始数据存储区域中的第一子检验数据和备份到备份数据存储区域中的第二子检验数据不相同,这也就是本案所要解决的问题。
故而,在本实施例中为了区分存储在原始数据存储区域中的子检验数据和存储在备份数据存储区域中的子检验数据,才将存储在原始数据存储区域中的子检验数据称为第一子检验数据,将存储在备份数据存储区域中的子检验数据称为第二子检验数据。
此外,应当理解的是,以上仅为举例说明,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
进一步地,在实际应用中,为了保证组合得到的待验证数据与所述检验数据的长度(即包含的子检验数据的个数)相同,从而使两者具备可对比性,本实施例给出一种步骤S30的具体实现方式,大致如下:
首先,获取各备份数据存储区域中存储的第二子检验数据,并统计获取到的第二子检验数据的个数;
然后,在所述个数等于M,即对检验数据进行切分后得到的第一子检验数据的个数时,根据各第二子检验数据对应的序列号,将获取到的M个第二子检验数据进行组合,得到所述待验证数据。
应当理解的是,上述所说的个第二子检验数据对应的序列号在具体实现中是预先分配好的,具体的分配规则与为各第一子检验数据分配对应的序列号的方式大致相同,本领域技术人员可以根据需要设置,此处不再赘述。
进一步地,在实际应用中,可能会存在备份数据存储区域刚刚生成,但是还没有将对应的原始数据存储区域中存储的全部数据复制过来,特别是携带有序列号的第一子检验数据。因此,在执行获取各备份数据存储区域中存储的第二子检验数据的步骤之前,需要先确定所述备份数据存储区域中是否存在携带有序列号的第二子检验数据(即根据第一子检验数据映射到备份数据存储区域中的检验数据)。
相应地,在确定所述备份数据存储区域中存在携带有序列号的第二子检验数据时,再执行所述获取各备份数据存储区域中存储的第二子检验数据的操作。
应当理解的是,以上给出的仅为一种具体的实现方式,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
步骤S40,将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验。
具体的说,通过将所述待验证数据与所述检验数据进行对比,得到的对比结果通常会有两种,一种是所述待验证数据与所述检验数据不一致,一种是所述待验证数据与所述检验数据一致。
故而,为了使得本实施例提供的一致性快照的检验方案尽可能的完备,在所述对比结果为所述待验证数据与所述检验数据不一致时,可以设置中的重新根据所述原始数据存储区域进行数据一致性快照操作,或者向管理人员发出预警提示。
相应地,在若所述对比结果为所述待验证数据与所述检验数据一致时,可以直接确定数据一致性快照正常。此时,可以解冻原始数据存储区域,并建立虚拟机与备份数据存储区域之间的传输通道,以便虚拟机将后续获取到的数据传输至备份数据存储区域中,详见图7所示。
通过上述描述不难发现,本实施例中提供的一致性快照的检验方法,在对原始数据存储区域进行数据一致性快照操作之前,通过生成检验数据,并对生成的检验数据进行切分,进而得到多个相互之间具有关联性的第一子检验数据,接着为得到的各第一子检验数据分配用于标识其在检验数据中位置的序列号,从而可以方便后续数据读取操作完成后能够按照序列号进行组合,还原检验数据,接着在根据原始数据存储区域进行数据一致性快照操作,生成与原始数据存储区域存在一一对应的映射关系的备份数据存储区域后,从生成的各备份数据存储区域中获取与第一子检验数据对应的第二子检验数据,然后根据各第二子检验数据对应的序列号将获取到的多个第二子检验数据进行组合,得到待验证数据,最终将进行数据一致性快照操作后的待验证数据与进行数据一致性快照操作前的检验数据进行对比,根据对比结果便可以实现对一致性快照的检验。通过这种检验方式尽可能的保障了快照操作的有效性,进而避免了一致性快照数据受损,保障了进行一致性快照后的数据的完整性。
参考图8,图8为本发明一种一致性快照的检验方法第二实施例的流程示意图。
基于上述第一实施例,本实施例一致性快照的检验方法在所述步骤S40之后,还包括:
步骤S50,在确定数据一致性快照正常后,对所述备份数据存储区域进行数据一致性回滚操作。
具体的说,上述所说的“回滚”并非指软件编程中将代码从当前版本恢复到前一个版本,而是指对已经完成一致性快照操作,生成的备份数据存储区域中存储的数据重新进行一次检验,以确保之前正常的备份数据存储区域中存储的数据是否仍然正常。
故而,此处所说的对所述备份数据存储区域进行的数据一致性回滚操作实质与步骤S30和步骤S40中执行的操作类似,具体为:
首先,获取各备份数据存储区域中存储的第二子检验数据,根据各第二子检验数据对应的序列号,将获取到的多个第二子检验数据进行组合,得到回滚验证数据;
然后,将所述回滚待验证数据与所述检验数据进行对比,根据对比结果决定是否需要重新执行一次数据一致性快照操作。
具体的,若对比结果为所述回滚待验证数据与所述检验数据不一致,则重新执行一次数据一致性快照操作;否则,继续不定期对所述备份数据存储区域进行数据一致性回滚操作。
通过上述描述不难发现,本实施例中提供的一致性快照的检验方法,在对某一次一致性快照操作完成验证,证明该一致性快照操作正常后,通过不定期的形式对进行一致性快照操作后生成的备份数据存储区域进行数据一致性回滚操作,从而可以及早发现异常,并在发现异常后重新进行一次数据一致性快照操作,进一步保障了进行一致性快照后的数据的完整性。
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有一致性快照的检验程序,所述一致性快照的检验程序被处理器执行时实现如上文所述的一致性快照的检验方法的步骤。
参照图9,图9为本发明一致性快照的检验装置第一实施例的结构框图。
如图9所示,本发明实施例提出的一致性快照的检验装置包括:切分模块9001、数据写模块9002、数据读模块9003和验证模块9004。
其中,切分模块9001,用于对生成的检验数据进行切分,得到多个第一子检验数据;数据写模块9002,用于将各第一子检验数据分别存储到对应的原始数据存储区域;数据读模块9003,用于当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,将获取到的多个第二子检验数据进行组合,得到待验证数据;验证模块9004,用于将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验。
此外,值得一提的是,在实际应用中,为了方便续数据读取操作完成后能够按照序列号进行组合,还原检验数据,以保证本实施例提供的一致性快照的检验方案的顺利进行,所述切分模块9001在对生成的检验数据进行切分,得到多个第一子检验数据之后,还可以为切分得到的各第一子检验数据分别分配的序列号。
具体的说,上述为第一子检验数据分配的序列号,具体是用于标识所述第一子检验数据在所述检验数据中的位置,从而使得后续数据读取操作完成后能够按照序列号进行组合,还原检验数据。
此外,关于切分模块9001执行的操作,具体可以如下:
首先,确定用于存储第一子检验数据的原始数据存储区域的个数N;
然后,根据个数N确定第一子检验数据的个数M;
最后,对所述检验数据进行切分,得到M个第一子检验数目。
应当理解的是,上述所说的原始数据存储区域的个数N具体为大于等于1的整数,即在实际应用中,用于存储数据的原始数据存储区域至少为1个。
相应地,上述所说的确定的第一子检验数据的个数M具体为N的整数倍,即在N为3时,M可以是3、6、9等。
应当理解的是,以上给出的仅为一种具体的实现方式,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
此外,为了便于后期从所述原始数据存储区域中获取不同序列号的第一子检验数据,所述数据写模块9002执行的操作,具体可以是根据各第一子检验数据对应的序列号,将各第一子检验数据分别存储到对应的原始数据存储区域。
相应地,数据读模块9003执行的操作,具体可以如下:
首先,获取各备份数据存储区域中存储的第二子检验数据,并统计获取到的第二子检验数据的个数;
然后,在所述个数等于M,即对检验数据进行切分后得到的第一子检验数据的个数时,根据各第二子检验数据对应的序列号,将获取到的M个第二子检验数据进行组合,得到所述待验证数据。
应当理解的是,上述所说的个第二子检验数据对应的序列号在具体实现中是预先分配好的,具体的分配规则与为各第一子检验数据分配对应的序列号的方式大致相同,本领域技术人员可以根据需要设置,此处不再赘述。
进一步地,在实际应用中,可能会存在备份数据存储区域刚刚生成,但是还没有将对应的原始数据存储区域中存储的全部数据复制过来,特别是携带有序列号的第一子检验数据。因此,在执行获取各备份数据存储区域中存储的第二子检验数据的步骤之前,需要先确定所述备份数据存储区域中是否存在携带有序列号的第二子检验数据(即根据第一子检验数据映射到备份数据存储区域中的检验数据)。
相应地,在确定所述备份数据存储区域中存在携带有序列号的第二子检验数据时,再执行所述获取各备份数据存储区域中存储的第二子检验数据的操作。
应当理解的是,以上给出的仅为一种具体的实现方式,对本发明的技术方案不构成任何限定,在实际应用中,本领域的技术人员可以根据需要进行设置,此处不做限制。
此外,由于在实际应用中,通过将所述待验证数据与所述检验数据进行对比,得到的对比结果通常会有两种,一种是所述待验证数据与所述检验数据不一致,一种是所述待验证数据与所述检验数据一致。
故而,为了使得本实施例提供的一致性快照的检验方案尽可能的完备,在所述对比结果为所述待验证数据与所述检验数据不一致时,可以设置中的重新根据所述原始数据存储区域进行数据一致性快照操作,或者向管理人员发出预警提示。
相应地,在若所述对比结果为所述待验证数据与所述检验数据一致时,可以直接确定数据一致性快照正常。此时,可以解冻原始数据存储区域,并建立虚拟机与备份数据存储区域之间的传输通道,以便虚拟机将后续获取到的数据传输至备份数据存储区域中,详见图7所示。
应当理解的是,以上仅为举例说明,对本发明的技术方案并不构成任何限定,在具体应用中,本领域的技术人员可以根据需要进行设置,本发明对此不做限制。
此外,本实施例中所涉及到的各模块均为逻辑模块,在实际应用中,一个逻辑单元可以是一个物理单元,也可以是一个物理单元的一部分,还可以以多个物理单元的组合实现。此外,为了突出本发明的创新部分,本实施例中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入,但这并不表明本实施方式中不存在其它的单元。
通过上述描述不难发现,本实施例中提供的一致性快照的检验装置,在对原始数据存储区域进行数据一致性快照操作之前,通过生成检验数据,并对生成的检验数据进行切分,进而得到多个相互之间具有关联性的第一子检验数据,接着为得到的各第一子检验数据分配用于标识其在检验数据中位置的序列号,从而可以方便后续数据读取操作完成后能够按照序列号进行组合,还原检验数据,接着在根据原始数据存储区域进行数据一致性快照操作,生成与原始数据存储区域存在一一对应的映射关系的备份数据存储区域后,从生成的各备份数据存储区域中获取与第一子检验数据对应的第二子检验数据,然后根据各第二子检验数据对应的序列号将获取到的多个第二子检验数据进行组合,得到待验证数据,最终将进行数据一致性快照操作后的待验证数据与进行数据一致性快照操作前的检验数据进行对比,根据对比结果便可以实现对一致性快照的检验。通过这种检验方式尽可能的保障了快照操作的有效性,进而避免了一致性快照数据受损,保障了进行一致性快照后的数据的完整性。
需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的一致性快照的检验方法,此处不再赘述。
基于上述一致性快照的检验装置的第一实施例,提出本发明一致性快照的检验装置第二实施例。
在本实施例中,所述一致性快照的检验装置还包括回滚验证模块。
其中,所述回滚验证模块,用于对所述备份数据存储区域进行数据一致性回滚操作。
需要说明的是,上述所说的“回滚”并非指软件编程中将代码从当前版本恢复到前一个版本,而是指对已经完成一致性快照操作,生成的备份数据存储区域中存储的数据重新进行一次检验,以确保之前正常的备份数据存储区域中存储的数据是否仍然正常。
故而,回滚验证模块对所述备份数据存储区域进行的数据一致性回滚操作实质与数据读模块和验证模块中执行的操作类似,具体为:
首先,获取各备份数据存储区域中存储的第二子检验数据,根据各第二子检验数据对应的序列号,将获取到的多个第二子检验数据进行组合,得到回滚验证数据;
然后,将所述回滚待验证数据与所述检验数据进行对比,根据对比结果决定是否需要重新执行一次数据一致性快照操作。
具体的,若对比结果为所述回滚待验证数据与所述检验数据不一致,则重新执行一次数据一致性快照操作;否则,继续不定期对所述备份数据存储区域进行数据一致性回滚操作。
应当理解的是,以上仅为举例说明,对本发明的技术方案并不构成任何限定,在具体应用中,本领域的技术人员可以根据需要进行设置,本发明对此不做限制。
此外,本实施例中所涉及到的各模块均为逻辑模块,在实际应用中,一个逻辑单元可以是一个物理单元,也可以是一个物理单元的一部分,还可以以多个物理单元的组合实现。此外,为了突出本发明的创新部分,本实施例中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入,但这并不表明本实施方式中不存在其它的单元。
通过上述描述不难发现,本实施例中提供的一致性快照的检验装置,在对某一次一致性快照操作完成验证,证明该一致性快照操作正常后,通过不定期的形式对进行一致性快照操作后生成的备份数据存储区域进行数据一致性回滚操作,从而可以及早发现异常,并在发现异常后重新进行一次数据一致性快照操作,进一步保障了进行一致性快照后的数据的完整性。
需要说明的是,以上所描述的工作流程仅仅是示意性的,并不对本发明的保护范围构成限定,在实际应用中,本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的,此处不做限制。
另外,未在本实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的一致性快照的检验方法,此处不再赘述。
此外,需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器(Read Only Memory,ROM)/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (9)
1.一种一致性快照的检验方法,其特征在于,所述方法包括以下步骤:
对生成的检验数据进行切分,得到M个第一子检验数据;
将各第一子检验数据分别存储到对应的原始数据存储区域;
当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,对获取到的多个第二子检验数据进行组合,得到待验证数据,所述第二子检验数据为所述第一子检验数据对应的备份;
将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验;
其中,所述将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验的步骤,包括:
将所述待验证数据与所述检验数据进行对比,得到对比结果;
若所述对比结果为所述待验证数据与所述检验数据不一致,则重新根据所述原始数据存储区域进行数据一致性快照操作;
若所述对比结果为所述待验证数据与所述检验数据一致,则确定数据一致性快照正常。
2.如权利要求1所述的方法,其特征在于,所述对生成的检验数据进行切分,得到M个第一子检验数据的步骤,包括:
确定用于存储第一子检验数据的原始数据存储区域的个数N,N为大于等于1的整数;
根据个数N确定第一子检验数据的个数M,M为N的整数倍;
对所述检验数据进行切分,得到M个第一子检验数目。
3.如权利要求2所述的方法,其特征在于,所述对所述检验数据进行切分,得到M个第一子检验数目的步骤之后,所述方法还包括:
为各第一子检验数据分别分配序列号,所述序列号用于标识所述第一子检验数据在所述检验数据中的位置;
相应地,所述将各第一子检验数据分别存储到对应的原始数据存储区域的步骤,包括:
根据各第一子检验数据对应的序列号,将各第一子检验数据分别存储到对应的原始数据存储区域。
4.如权利要求1所述的方法,其特征在于,所述获取各备份数据存储区域中存储的第二子检验数据,对获取到的多个第二子检验数据进行组合,得到待验证数据的步骤,包括:
获取各备份数据存储区域中存储的第二子检验数据,并统计获取到的第二子检验数据的个数;
在所述个数等于M时,根据各第二子检验数据对应的序列号,将获取到的M个第二子检验数据进行组合,得到所述待验证数据;
其中,各第二子检验数据对应的序列号预先分配。
5.如权利要求1所述的方法,其特征在于,所述确定数据一致性快照正常的步骤之后,所述方法还包括:
对所述备份数据存储区域进行数据一致性回滚操作。
6.如权利要求5所述的方法,其特征在于,所述对所述备份数据存储区域进行数据一致性回滚操作的步骤,包括:
获取各备份数据存储区域中存储的第二子检验数据,根据各第二子检验数据对应的序列号,将获取到的多个第二子检验数据进行组合,得到回滚验证数据;
将所述回滚待验证数据与所述检验数据进行对比,根据对比结果决定是否需要重新执行一次数据一致性快照操作。
7.一种一致性快照的检验装置,其特征在于,所述装置包括:
切分模块,用于对生成的检验数据进行切分,得到M个第一子检验数据;
数据写模块,用于将各第一子检验数据分别存储到对应的原始数据存储区域;
数据读模块,用于当根据所述原始数据存储区域进行数据一致性快照操作,生成备份数据存储区域后,获取各备份数据存储区域中存储的第二子检验数据,将获取到的多个第二子检验数据进行组合,得到待验证数据,所述第二子检验数据为所述第一子检验数据对应的备份;
验证模块,用于将所述待验证数据与所述检验数据进行对比,根据对比结果进行一致性快照检验;
所述验证模块,还用于将所述待验证数据与所述检验数据进行对比,得到对比结果;
所述验证模块,还用于若所述对比结果为所述待验证数据与所述检验数据不一致,则重新根据所述原始数据存储区域进行数据一致性快照操作;
所述验证模块,还用于若所述对比结果为所述待验证数据与所述检验数据一致,则确定数据一致性快照正常。
8.一种一致性快照的检验设备,其特征在于,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的一致性快照的检验程序,所述一致性快照的检验程序配置为实现如权利要求1至6中任一项所述的一致性快照的检验方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有一致性快照的检验程序,所述一致性快照的检验程序被处理器执行时实现如权利要求1至6任一项所述的一致性快照的检验方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910990936.6A CN110737546B (zh) | 2019-10-17 | 2019-10-17 | 一致性快照的检验方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910990936.6A CN110737546B (zh) | 2019-10-17 | 2019-10-17 | 一致性快照的检验方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110737546A CN110737546A (zh) | 2020-01-31 |
CN110737546B true CN110737546B (zh) | 2022-04-29 |
Family
ID=69269301
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910990936.6A Active CN110737546B (zh) | 2019-10-17 | 2019-10-17 | 一致性快照的检验方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110737546B (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013235317A (ja) * | 2012-05-07 | 2013-11-21 | Mitsubishi Electric Corp | 仮想計算機システム |
CN102790801B (zh) * | 2012-06-20 | 2015-02-18 | 浪潮(北京)电子信息产业有限公司 | 异步远程复制系统及其维护数据一致性的方法 |
CN104375904A (zh) * | 2014-10-30 | 2015-02-25 | 浪潮电子信息产业股份有限公司 | 一种基于快照差异化数据传输的容灾备份方法 |
CN104965771A (zh) * | 2015-07-29 | 2015-10-07 | 浪潮(北京)电子信息产业有限公司 | 一种验证异地容灾数据一致性的方法和系统 |
US9983947B2 (en) * | 2016-07-19 | 2018-05-29 | International Business Machines Corporation | Snapshots at real time intervals on asynchronous data replication system |
CN107391307A (zh) * | 2017-07-27 | 2017-11-24 | 郑州云海信息技术有限公司 | 存储区域网络存储设备快照功能的测试方法及装置 |
CN109460187B (zh) * | 2018-11-09 | 2022-05-03 | 郑州云海信息技术有限公司 | 一种qcow2文件数据一致性验证方法及验证终端 |
-
2019
- 2019-10-17 CN CN201910990936.6A patent/CN110737546B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN110737546A (zh) | 2020-01-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6788178B2 (ja) | 設定支援プログラム、設定支援方法及び設定支援装置 | |
CN109753418B (zh) | 性能测试方法、装置、计算机设备和存储介质 | |
CN104216793A (zh) | 应用程序备份、恢复的方法及设备 | |
EP3474143B1 (en) | Method and apparatus for incremental recovery of data | |
CN114706661B (zh) | 虚拟机的容灾备份方法、系统、计算机设备及存储介质 | |
CN107506295B (zh) | 虚拟机备份的测试方法、设备及计算机可读存储介质 | |
CN108255576B (zh) | 虚拟机热迁移异常处理方法、装置和存储介质 | |
CN105022678A (zh) | 虚拟机数据备份的方法和装置 | |
CN108228308B (zh) | 虚拟机的监控方法以及装置 | |
CN108292342A (zh) | 向固件中的侵入的通知 | |
CN110727547A (zh) | 一种保护Docker应用容器的系统及方法 | |
CN106681865B (zh) | 业务恢复方法及装置 | |
WO2017162049A1 (zh) | 驱动模块内存数据监测方法及装置 | |
CN114020527A (zh) | 快照恢复方法、装置、计算机设备及存储介质 | |
CN116737466B (zh) | 备份处理方法、装置、系统、电子设备及可读存储介质 | |
CN113485755A (zh) | 设备驱动程序验证方法、装置、设备及存储介质 | |
CN110737546B (zh) | 一致性快照的检验方法、装置、设备及存储介质 | |
CN109032762B (zh) | 虚拟机回溯方法及相关设备 | |
US8959061B1 (en) | Rapid restore from a prepared system image | |
US10678618B2 (en) | Managing node failures in a computing environment | |
CN112882871B (zh) | 主机冲突检测方法、装置、设备及存储介质 | |
CN111782336A (zh) | 混合云的云迁移方法及装置、计算机可存储介质 | |
US20230088318A1 (en) | Remotely healing crashed processes | |
CN115269252A (zh) | 应用程序故障处理方法、装置、设备及存储介质 | |
US8676761B1 (en) | Preparation of a system image for rapid restore |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Verification methods, devices, devices, and storage media for consistency snapshots Effective date of registration: 20231212 Granted publication date: 20220429 Pledgee: Shenzhen Branch of China Merchants Bank Co.,Ltd. Pledgor: SANGFOR TECHNOLOGIES Inc. Registration number: Y2023980070863 |