CN110704239A - 数据复制方法、装置、电子设备 - Google Patents
数据复制方法、装置、电子设备 Download PDFInfo
- Publication number
- CN110704239A CN110704239A CN201910827461.9A CN201910827461A CN110704239A CN 110704239 A CN110704239 A CN 110704239A CN 201910827461 A CN201910827461 A CN 201910827461A CN 110704239 A CN110704239 A CN 110704239A
- Authority
- CN
- China
- Prior art keywords
- snapshot
- volume
- data
- copy
- replica
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
- G06F11/1453—Management of the data involved in backup or backup restore using de-duplication of the data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1461—Backup scheduling policy
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供一种数据复制方法、装置、电子设备及机器可读存储介质。在本申请中,将所述若干主卷快照中的目标快照的数据复制到所述副本卷;确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。一方面,减少了用于复制的差异数据的数据量,提高了数据复制效率;另一方面,减少了副本卷快照的重复数据冗余,提高了存储效率。
Description
技术领域
本申请涉及存储技术领域,尤其涉及数据复制方法、装置、电子设备及机器可读存储介质。
背景技术
信息系统越来越成为社会生产能力的枢纽和重要支柱。企业的业务运转越来越高度依赖数据,这使得数据成为了支撑企业运作的重要基石。大部分企业用户已经充分认识到数据的重要性,纷纷采取必要的保护措施,提高数据的安全性和可用性,由此容灾技术应运而生。
目前常见的容灾技术,总体上可以包括离线式容灾和在线容灾;其中,离线式容灾主要依靠备份技术来实现;而在线式容灾主要依靠存储复制技术来实现,在实现时,生产中心和灾备中心同时工作,生产中心和灾备中心之间有传输链路连接。数据从生产中心实时复制到灾备中心。当生产中心遭受灾难、出现故障时,可由灾备中心自动接管并继续提供数据服务。
发明内容
本申请提供一种数据复制方法,所述方法应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照,所述方法包括:
将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
可选的,所述将所述若干主卷快照中的目标快照的数据复制到所述副本卷,包括:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
可选的,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照;所述基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷,包括:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
可选的,所述将所述待复制差异数据从所述指定快照中复制到所述副本卷中,包括:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
可选的,所述构建与所述指定快照对应的所述副本卷的第三副本卷快照,包括:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
可选的,所述存储系统为支持存储复制技术的存储系统。
本申请还提供一种数据复制装置,所述装置应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照,所述装置包括:
第一复制模块,将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
第二复制模块,确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
所述第二复制模块,在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
可选的,所述第一复制模块进一步:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
可选的,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照;所述第二复制模块进一步:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
可选的,所述第二复制模块进一步:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
可选的,所述第二复制模块进一步:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
本申请还提供一种电子设备,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;
所述存储器中存储机器可读指令,所述处理器通过调用所述机器可读指令,执行上述的方法。
本申请还提供一种机器可读存储介质,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现上述方法。
通过以上实施例,基于主卷指定快照;以及,与所述主卷指定快照对应的相邻两个副本卷快照,确定用于复制的差异数据,并将用于复制的差异数据从主卷指定快照复制到副本卷快照。一方面,减少了用于复制的差异数据的数据量,提高了数据复制效率;另一方面,减少了副本卷快照的重复数据冗余,提高了存储效率。
附图说明
图1是一示例性实施例提供的一种支持存储复制技术的存储系统的架构示意图;
图2是一示例性实施例提供的现有存储复制技术的一种主卷及其对应快照的数据分布的示意图;
图3是一示例性实施例提供的现有存储复制技术的一种副本卷及其对应快照的数据分布的示意图;
图4是一示例性实施例提供的现有存储复制技术的另一种副本卷及其对应快照的数据分布的示意图;
图5是一示例性实施例提供的一种数据复制方法的流程图;
图6是一示例性实施例提供的改进存储复制技术的一种副本卷及其对应快照的数据分布的示意图;
图7是一示例性实施例提供的一种电子设备的硬件结构图;
图8是一示例性实施例提供的一种数据复制装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了使本技术领域的人员更好地理解本申请实施例中的技术方案,下面先对本申请实施例涉及的数据复制的相关技术,进行简要说明。
请参见图1,图1是本申请一实施例提供的一种支持存储复制技术的存储系统的架构示意图。
如图1所示的支持存储复制技术的存储系统包括:位于生产中心的主卷、位于灾备中心的副本卷;其中,主卷与副本卷经网络相连通信。
如图1所示,生产中心与灾备中心通常位于不同的城市,存储系统可将将位于生产中心的主卷的数据,通过网络并基于存储复制技术拷贝到位于灾备中心的副本卷中。
通常情况下,在存储系统中执行存储复制的过程中,为了保证主卷与副本卷的数据一致性,就必须保证复制过程中主卷的数据不能发生改变;而如果主卷的数据不能改变,就意味着针对主卷的数据读写必须中断。在实际应用中,针对主卷的数据读写的生产业务是连续无法中断的,由此,在存储复制技术应用的过程中,通常需要存储系统在主卷上启用快照技术,生成主卷一个时间点对应主卷快照,用于指示复制前时刻的主卷数据状态,并将该主卷快照的数据复制到副本卷中,从而实现在不影响主卷生产业务下,同时将数据基于存储复制技术,复制到副本卷中。
为了方便理解,这里简单介绍下快照技术。在大数据时代,数据量越来越大,数据也越来越重要,把数据保存在专门的存储系统中,并通过存储系统的数据保护特性提高数据可靠性已经成为主流方式。快照是存储系统的数据保护特性之一,也是应对“软灾难”的常用方案。软灾难,故名思议,指“软”的灾难,通常指由于误操作、软件Bug、病毒等导致生产数据逻辑上损坏或者不能读取。通过快照技术,在写入新数据前,可以把旧数据备份起来,这样当数据发生软灾难时,可以采用之前备份的旧数据来恢复,使数据回滚到一个可用的时间平面。
在通常情况下,为了进一步保证副本卷的数据可靠性,存储系统针对副本卷也会启用快照技术,使得在副本卷也可以很方便的通过快照时间点回滚到指定时刻的数据状态。
为了方便理解,基于如图1所示的存储系统架构,以主卷及副本已启用COW(CopyOn Write)快照为例情况下,这里具体说明下现有存储复制技术的复制过程。
请参见图2,图2是本申请一实施例提供的现有存储复制技术的一种主卷及其对应快照的数据分布的示意图。
如图2所示,针对主卷,存储系统已启用COW快照配置,主卷发生变化的数据会作为被保存到快照资源;其中,快照资源包括若干时刻对应快照管理数据(如图2所示的用于不同时刻对应快照管理元数据,通过该快照管理元数据,可以访问不同时刻对应快照数据)及COW首写拷贝数据数据(如图2所示的不同时刻对应快照管理数据对应的若干数据块)。
如图2所示,T0时刻数据平面,是指对应T0时刻主卷对应存储空间的数据块(为了描述方面,后续将“数据平面”简称为“数据”)包括:A0、B0、C0、D0、E0、F0。
如图2所示,在T0时刻之后的T1时刻,当主卷的数据:A0、B0、D0发生变化,分别对应变为A1、B1、D1(如图2所示斜线矩形格所示)时,存储系统在快照资源中创建“T0时刻对应快照管理数据”及对应保存T0时刻的旧数据(A0、B0、D0),也即,相对T1时刻数据平面(A1、B1、C0、D1、E0、F0)而言,主卷的T0时刻快照(A0、B0、C0、D0、E0、F0)由位于主卷的数据(C0、E0、F0)、位于快照资源的数据(A0、B0、D0)组成;主卷的T0时刻快照的数据的映射关系由T0时刻对应快照管理数据所指示。
如图2所示,在T1时刻之后的T2时刻,当主卷的数据:A1、C0、F0发生变化,分别对应变为A2、C2、F2(如图2所示竖线矩形格所示)时,存储系统在快照资源中创建“T1时刻对应快照管理数据”及对应保存T1时刻的旧数据(A1、C0、F0)。
如图2所示,同理,在T2时刻之后的时刻,当主卷的数据若发生变化,则存储系统在快照资源中创建“T2时刻对应快照管理数据”及对应保存T2时刻的旧数据,具体过程与以上类似,不再详述。
综上针对图2的描述,总体描述了复制前的主卷及各个时刻对应快照的数据分布状态。
请参见图3,图3是本申请一实施例提供的现有存储复制技术的一种副本卷及其对应快照的数据分布的示意图。
需要说明的是,图3所示的副本卷与图2所示的主卷相对应,用于保存图2所示主卷中,基于存储复制技术拷贝的数据。
如图3所示,针对副本卷,存储系统已启用COW快照配置,副本卷发生变化的数据会作为被保存到快照资源;其中,快照资源包括若干时刻对应快照管理数据(如图3所示的不同时刻对应快照管理数据)及COW首写拷贝数据数据(如图3所示的不同时刻对应快照管理数据对应的若干数据块)。
如图3所示的“T0时刻主卷数据复制到副本卷”,是指,执行一次存储复制过程,该存储复制过程将T0时刻主卷数据复制到副本卷中。
如图3所示,将T0时刻主卷数据,也即,主卷的T0时刻快照(A0、B0、C0、D0、E0、F0),基于存储复制技术复制到副本卷中。在完成本次复制后,副本卷在如图3所示的“T0时刻数据平面”的数据包括:A0、B0、C0、D0、E0、F0。
如图3所示的“T2时刻主卷数据复制到副本卷”,是指,执行一次存储复制过程,该存储复制过程将T2时刻主卷数据复制到副本卷中。
如图3所示,将T2时刻主卷数据,也即,主卷的T2时刻快照(A2、B1、C2、D1、E0、F2),基于存储复制技术,仅将主卷的T2时刻快照(A2、B1、C2、D1、E0、F2)与副本卷对应“T0时刻数据平面”的数据(A0、B0、C0、D0、E0、F0)的差异数据(A2、B1、C2、D1、F2),复制到副本卷中。在完成本次复制后,副本卷在如图3所示的“T2时刻数据平面”的数据包括:A2、B1、C2、D1、E0、F2。
如图3所示,存储系统针对副本卷已启动ROW快照,当副本卷的数据平面由“T0时刻数据平面”变化为“T2时刻数据平面”时(对应图3箭头所指示的“复制主资源T0-T2之间的差异数据,最终副本数据处于主卷T2时刻数据平面”),则存储系统在副本卷对应的快照资源中创建“T0时刻对应快照管理数据”及对应保存T0时刻的旧数据(A0、B0、C0、D0、E0、F0);以及,复制主资源T0与T2数据平面之间的差异数据(A2、B1、C2、D1、F2),最终副本数据处于主卷T2时刻数据平面。
如图3所示,同理,在T2时刻之后的时刻,当副本卷的数据若发生变化,则存储系统在快照资源中创建“T2时刻对应快照管理数据”及对应保存T2时刻的旧数据,具体过程与以上类似,不再详述。
综上针对图3的描述,总体描述了复制后的副本卷及各个时刻对应快照的数据分布状态。
请参见图4,图4是本申请一实施例提供的现有存储复制技术的另一种副本卷及其对应快照的数据分布的示意图。
需要说明的是,图4所示的副本卷与图3所示的副本卷相同,图4是在图3基础之上进一步展示,将如图2所示的主卷的“T1时刻数据平面”数据复制到副本卷后的副本卷及其对应快照的数据分布状态。
如图4所示的白色箭头以上的图示部分,与图3所示的“T2时刻主卷数据复制到副本卷”对应描述相同,在前文以详细描述,这里不再赘述。
如图4所示的“T1时刻主卷数据复制到副本卷”,是指,执行一次存储复制过程,该存储复制过程将T1时刻主卷数据复制到副本卷中。
如图4所示,将T1时刻主卷数据,也即,主卷的T1时刻快照(A1、B1、C0、D1、E0、F0),基于存储复制技术,仅将主卷的T1时刻快照(A1、B1、C0、D1、E0、F0)与副本卷对应“T2时刻数据平面”的数据(A2、B1、C2、D1、E0、F2)的差异数据(A1、C0、F0),复制到副本卷中。在完成本次复制后,副本卷在如图4所示的“T1时刻数据平面”的数据包括:A1、B1、C0、D1、E0、F0。
如图4所示,当副本卷的数据平面由“T2时刻数据平面”变化为“T1时刻数据平面”时(对应图4箭头所指示的“复制主卷T2与T1之间的差异数据,最终副本卷处于主卷T1时刻数据平面”),则存储系统在副本卷对应的快照资源中创建“T2时刻对应快照管理数据”及保存对应的旧数据(A2、C2、F2);以及,复制主资源T2与T1数据平面之间的差异数据(A1、C0、F0),副本卷的数据最终处于主卷T1时刻数据平面。
综上针对图4的描述,总体描述了在执行完如图3所示的一次复制后,存储系统又执行一次复制后的副本卷及各个时刻对应快照的数据分布状态。
综上基于图3及图4所示例的两次复制过程可见,针对主卷对应两个时刻的数据平面的复制过程中,如果先复制了主卷快照中的目标快照(比如:主卷T2时刻对应快照)后,再复制早于该目标快照创建时刻的指定快照(比如:主卷T1时刻对应快照),基于现有存储复制技术实现,一方面,用于复制的差异数据的数据量多(比如,差异数据包括A1、C0、F0,共3个数据块),另一方面,在副本卷也启用快照情况下,导致占用快照资源的存储空间浪费(比如,如图4所示快照资源,副本卷对应快照资源的存储空间占用包括:数据块组1(A0、B0、C0、D0、E0、F0)、数据块组2(A2、C2、F2),共9个数据块)。
基于如图1所示的支持存储复制技术的存储系统的架构,本申请旨在提出一种,基于改进存储复制技术的数据复制的技术方案。
在实现时,存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照。
进一步地,存储系统将所述若干主卷快照中的目标快照的数据复制到所述副本卷;确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
在以上方案中,基于主卷指定快照;以及,与所述主卷指定快照对应的相邻两个副本卷快照,确定用于复制的差异数据,并将用于复制的差异数据从主卷指定快照复制到副本卷快照。一方面,减少了用于复制的差异数据的数据量,提高了数据复制效率;另一方面,减少了副本卷快照的重复数据冗余,提高了存储效率。
下面通过具体实施例并结合具体的应用场景对本申请进行描述。
请参考图5,图5是本申请一实施例提供的一种数据复制方法的流程图,所述方法应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照,上述方法执行以下步骤:
步骤502、将所述若干主卷快照中的目标快照的数据复制到所述副本卷。
步骤504、确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间。
步骤506、在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照。
步骤508、基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
在本说明书中,上述存储系统,可以包括基于任何存储介质的若干存储卷的存储系统。
例如,在实际应用中,上述存储系统可以是包括存储介质为固态硬盘的若干存储卷的存储系统,也还可以是包括基于存储介质为SAS(Serial Attached SCSI,串行连接SCSI)硬盘或SATA(Serial Advanced Technology Attachment,串行高级技术附件)硬盘,或者多种存储介质混合的若干存储卷的存储系统。
在示出的一种实施方式中,上述存储系统可以包括支持存储复制技术的存储系统。例如,上述存储系统为图1所示的支持存储复制技术的存储系统。
在本说明书中,上述主卷是指,上述存储系统中的作为数据的复制源的存储卷。例如,上述主卷为如图1所示的主卷。
在本说明书中,上述副本卷是指,与上述主卷对应的上述存储系统中的作为数据的复制目的的存储卷。例如,上述主卷为如图1所示的副本卷。
在本说明书中,上述若干主卷快照是指,上述存储系统基于快照技术,针对上述主卷在对应快照创建时间,创建的从先到后且紧密相邻的若干快照。
例如,请参见图2所示,上述若干主卷快照可以包括主卷在T1时刻创建的对应快照,也即,主卷对应T0时刻数据;还可以包括主卷在T2时刻创建的对应快照,也即,主卷对应T1时刻数据。
在本说明书中,上述若干副本卷快照是指,上述存储系统基于快照技术,针对上述副本卷在对应快照创建时间,创建的从先到后且紧密相邻的若干快照。
例如,请参见图3所示,上述若干副本卷快照可以包括副本卷在T2时刻创建的对应快照,该快照的数据与主卷对应T0时刻数据相同;还可以包括副本卷在T2之后相邻的快照时刻所创建的对应快照,该快照的数据与主卷对应T2时刻数据相同。
需要说明的是,上述若干副本卷快照分别对应的数据与上述若干主卷快照分别对应的数据,根据复制时刻存在对应一致关系。
例如,请参见图3所示的“T0时刻主卷数据复制到副本卷”,也即,首先,上述存储系统将T0时刻主卷快照数据复制到副本卷;其次,当副本卷数据变化时,上述存储系统对副本卷执行快照,获得与T0时刻主卷快照数据一致的副本卷快照(如图3所示的“T0时刻对应快照管理数据”所管理的副本卷快照,该副本卷快照所包括的数据与T0时刻主卷快照数据一致)。
在本说明书中,上述目标快照是指,一次存储复制过程对应的上述若干主卷快照中的指定快照创建时刻的对应快照。
例如,请参见图3所示,上述目标快照可以是T0时刻主卷快照,也可以是T1时刻主卷快照,还可以T2时刻主卷快照。
在本说明书中,上述存储系统将上述目标快照的数据复制到上述副本卷。
例如,请参见图3所示,上述目标快照为T0时刻主卷快照上述存储系统将上述目标快照(T0时刻主卷快照)的数据(A0、B0、C0、D0、E0、F0)复制到上述副本卷。
又例如,请参见图3所示,上述目标快照为T2时刻主卷快照上述存储系统将上述目标快照(T2时刻主卷快照)的数据(A2、B1、C2、D1、E0、F2)复制到上述副本卷。
在示出的一种实施方式中,在上述存储系统将上述目标快照复制到上述副本卷的过程中,上述存储系统将上述副本卷的数据与上述若干主卷的数据,执行数据初始同步。
例如,请参见图3所示,在“T0时刻主卷数据复制到副本卷”前,上述存储系统将上述副本卷的数据与上述主卷的数据执行初始同步,使得上述副本卷的数据与上述主卷的数据相同,由此可以保证在后续复制过程中,仅将主卷快照与副本卷的差异数据,从主卷复制到副本卷。
在本说明书中,进一步地,上述存储系统将上述目标快照与上述副本卷的差异数据,增量复制到上述副本卷。
例如,请参见图2及图3所示,在“T0时刻主卷数据复制到副本卷”后,上述副本卷的“T0时刻数据平面”所包括的数据,也即,上述副本卷的数据FD(与T0时刻主卷快照的数据一致)包括A0、B0、C0、D0、E0、F0;以上述目标快照为T2时刻主卷数据MD(包括A2、B1、C2、D1、E0、F2),则在执行“T2时刻主卷数据复制到副本卷”复制过程中,上述存储系统仅将主卷的数据MD与副本卷的数据FD的差异数据(A2、B1、C2、D、1F2),从上述主卷增量复制到上述副本卷;在该差异数据复制后,上述副本卷的数据对应为如图3所示的“T2时刻数据平面”,也即,上述副本卷的数据与T2时刻主卷快照的数据一致。
在本说明书中,上述指定快照,是指上述若干主卷快照中的、快照创建时间早于上述目标快照的、指定快照创建时刻的对应快照;其中,上述指定快照待被复制到上述副本卷。
例如,请参见图2及图3所示,当上述目标快照是T2时刻主卷快照时,上述指定快照可以T1时刻主卷快照,也可以T0时刻主卷快照。
在本说明书中,上述存储系统确定上述指定快照。
例如,在实际应用中,上述目标快照是T2时刻主卷快照,上述存储系统可以基于用户设置或者预设配置,确定上述指定快照为T1时刻主卷快照。
在本说明书中,上述两个副本卷快照是指,在上述若干副本卷快照中的与上述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
其中,上述两个副本卷快照包括快照创建时间早于上述指定快照的第一副本卷快照、快照创建时间晚于上述指定快照的第二副本卷快照。
例如,请参见图2及图3所示,上述若干副本卷快照包括“T0时刻对应快照管理数据”所对应的副本快照,该副本快照的数据(包括A0、B0、C0、D0、E0、F0)与T0时刻主卷快照数据相同。上述若干副本卷快照还包括“T2时刻对应快照管理数据”所对应的副本快照,该副本快照的数据与T2时刻主卷快照数据相同,该副本快照的数据(包括A2、B1、C2、D1、E0、F2)。当上述指定快照为T1时刻主卷快照,则上述第一副本卷快照为“T0时刻对应快照管理数据”所对应的副本快照,上述第二副本卷快照为“T2时刻对应快照管理数据”所对应的副本快照;也即,上述指定快照的快照创建时间T1时刻,早于且最靠近上述第一副本卷快照对应的T0时刻,晚于且最靠近上述第二副本卷快照对应的T2时刻。
在本说明书中,上述存储系统在上述若干副本卷快照中,确定与上述指定快照的快照创建时间前后紧密相邻的上述两个副本卷快照。
例如,在实际应用中,上述存储系统可以记录及保存在上述若干主卷快照(包括上述指定快照)的快照创建时间;上述存储系统还可以记录及保存上述若干副本卷快照(包括上述两个副本卷快照)对应的若干主卷快照创建时间,进一步地,可以通过比较上述指定快照的快照创建时间在该若干主卷快照创建时间范围,从而确定上述两个副本卷快照。
请参见图6,图6是本申请一实施例提供的改进存储复制技术的一种副本卷及其对应快照的数据分布的示意图。
需要说明的是,图6与图4基本相同,图6也是在图3基础之上变化而来,图6与图4的区别主要在于:在“T2时刻主卷数据复制到副本卷”后,针对图4所示的“T1时刻主卷数据复制到副本卷”的复制过程,图6相比图4存在改进。
如图6所示,在将T1时刻主卷数据,也即,主卷的T1时刻快照(A1、B1、C0、D1、E0、F0),基于改进存储复制技术执行数据复制时,仅将主卷的T1时刻快照(A1、B1、C0、D1、E0、F0)与副本卷对应“T2时刻数据平面”的数据(A2、B1、C2、D1、E0、F2)的差异数据(A1、C0、F0)中的部分数据A1,复制到副本卷中。在完成本次复制后,副本卷的数据依然为如图6所示的“T2时刻数据平面”的数据包括:A2、B1、C2、D1、E0、F0。
如图6所示,当副本卷的数据平面保持“T2时刻数据平面”时,则存储系统在副本卷对应的快照资源中构建“T1时刻对应快照管理数据”及保存对应的数据(A1、C0、F0);以及,复制主资源T2与T1数据平面之间的差异数据(A1、C0、F0)中的部分数据A1到副本资源的快照资源中,并通过“T1时刻对应快照管理数据”进行管理,副本卷的数据最终依然处于主卷T2时刻数据平面,而在图4中,副本卷的数据最终已处于主卷T1时刻数据平面。
综上针对图6的描述,总体描述了在执行完如图3所示的一次复制后,存储系统又执行一次改进存储复制后的副本卷及各个时刻对应快照的数据分布状态。
在本说明书中,在与上述指定快照的快照创建时间前后紧密相邻的上述两个副本卷快照确定后,进一步地,上述存储系统基于上述两个副本卷快照以及上述指定快照,将上述指定快照的数据复制到上述副本卷。
例如,请参见图2及图3所示,上述指定快照为T1时刻主卷快照(如图2所示的主卷“T1时刻数据平面”所包括的数据,包括A1、B1、C0、D1、E0、F0);上述两个副本卷快照包括:上述第一副本卷快照(“T0时刻对应快照管理数据”所对应的副本快照该副本快照的数据包括A0、B0、C0、D0、E0、F0,与T0时刻主卷快照数据相同)、上述第二副本卷快照(“T2时刻对应快照管理数据”所对应的副本快照,该副本快照的数据与T2时刻主卷快照数据相同,该副本快照的数据包括A2、B1、C2、D1、E0、F2)。请参见图6所示,上述存储系统基于上述两个副本卷快照(上述第一副本卷快照的数据与T0时刻主卷快照相同、上述第二副本卷快照的数据与T2时刻主卷快照相同)以及上述指定快照(对应T1时刻的主卷快照),将上述指定快照的数据A1复制到上述副本卷。
在本说明书中,上述第一差异数据是指,上述第二副本卷快照与上述指定快照之间的差异数据;其中,该差异数据是以从上述指定快照角度看,相比上述第二副本卷快照的不同数据。
接着以上示例继续举例,请参见图6所示,上述第二副本卷快照的数据与T2时刻主卷快照数据相同,包括A2、B1、C2、D1、E0、F2。上述指定快照为T1时刻主卷快照(如图2所示的主卷“T1时刻数据平面”所包括的数据,包括A1、B1、C0、D1、E0、F0),则上述第一差异数据包括A1、C0、F0。
在本说明书中,进一步地,上述存储系统确定上述第二副本卷快照与上述指定快照之间的上述第一差异数据。
接着以上示例继续举例,上述第一差异数据包括A1、C0、F0。
在本说明书中,上述第二差异数据是指,上述第二副本卷快照与上述第一副本卷快照之间的差异数据;其中,该差异数据是以从上述第一副本卷快照角度看,相比上述第二副本卷快照的不同数据。
接着以上示例继续举例,上述第二副本卷快照的数据包括:A2、B1、C2、D1、E0、F2,与T2时刻主卷快照相同;上述第一副本卷快照的数据包括:A0、B0、C0、D0、E0、F0,与T0时刻主卷快照相同;则上述第二差异数据包括A0、B0、C0、D0、F0。
在本说明书中,进一步地,上述存储系统确定上述第二副本卷快照与上述第一副本卷快照之间的上述第二差异数据。
接着以上示例继续举例,上述第二差异数据包括A0、B0、C0、D0、F0。
在本说明书中,上述第三差异数据,是指上述第一差异数据与上述第二差异数据之间的差异数据。
在实现时,上述第三差异数据的获得方法,可以基于如下步骤:由上述存储系统遍历检查上述第一差异数据中的每个数据,是否属于以上述第二差异数据的若干数据构成的集合;若不属于,则将该不属于该集合的成员数据作为上述第三差异数据的成员数据,直至遍历完成上述第一差异数据中的所有数据。
接着以上示例继续举例,上述第一差异数据包括A1、C0、F0;上述第二差异数据包括A0、B0、C0、D0、F0。根据上述第三差异数据的获得方法,可以计算获得:上述第一差异数据中的A1,不属于上述第二差异数据的若干数据构成的集合(A0、B0、C0、D0、F0),则将不属于上述第二差异数据的若干数据构成的集合的上述第一差异数据中的A1作为上述第三差异数据的成员数据;遍历完成上述第一差异数据中的所有数据,其中,上述第一差异数据中的C0、F0属于上述第二差异数据的若干数据构成的集合(A0、B0、C0、D0、F0),则上述第一差异数据中的C0、F0不能作为上述第三差异数据的成员数据。由此,最终获得的上述第三差异数据包括A1。
在本说明书中,进一步地,上述存储系统确定上述第一差异数据与上述第二差异数据之间的上述第三差异数据,将上述第三差异数据确定为与上述指定快照对应的待复制差异数据。
接着以上示例继续举例,上述第三差异数据包括A1;上述存储系统A1确定为与上述指定快照(如图2所示T1时刻主卷快照)对应的待复制差异数据。
在本说明书中,上述待复制差异数据是指,与上述指定快照对应的待复制差异数据;其中,上述待复制差异数据也即上述第三差异数据。
接着以上示例继续举例,上述第三差异数据包括A1,则上述待复制差异数据包括A1。
在本说明书中,进一步地,上述存储系统将上述待复制差异数据从上述指定快照中复制到上述副本卷中。
接着以上示例继续举例,请参见图6所示,上述存储系统上述待复制差异数据(包括A1)从上述指定快照(如图2所示T1时刻主卷快照)中复制到副本卷中。
在本说明书中,上述第三副本卷快照是指,与上述指定快照对应的上述第二副本卷中的副本卷快照;其中,该副本卷快照的对应主卷快照创建时间晚于上述第一副本卷快照对应主卷快照创建时间,早于上述第二副本卷快照对应主卷快照创建时间。
接着以上示例继续举例,上述第三副本卷快照可以是由如图所示的“T1时刻对应快照管理数据”所管理副本卷快照;该副本卷快照的对应主卷快照创建时间-T1时刻晚于上述第一副本卷快照对应主卷快照创建时间-T0时刻,早于上述第二副本卷快照对应主卷快照创建时间-T2时刻。
在示出的一种实施方式中,在将上述待复制差异数据从上述指定快照中复制到上述副本卷的过程中,上述存储系统构建与上述指定快照对应的上述副本卷的上述第三副本卷快照。
接着以上示例继续举例,上述存储系统构建与上述指定快照(如图2所示T1时刻主卷快照)对应的上述副本卷的上述第三副本卷快照(如图6所示中的“构建T1时刻快照”所示,在副本卷中构建与T1时刻的主卷快照数据相同的副本快照)。
在本说明书中,上述副本快照构建数据,是指上述第一副本卷快照与上述第一差异数据的数据交集。
接着以上示例继续举例,上述第一差异数据包括A1、C0、F0;如图6所示,上述第一副本卷快照的数据(由副本卷中的数据E0及快照资源中的A0、B0、C0、D0、F0构成)包括:A0、B0、C0、D0、E0、F0;则上述副本快照构建数据为(A1、C0、F0)与(A0、B0、C0、D0、E0、F0)的数据交集,也即,上述副本快照构建数据包括C0、F0。
在示出的一种实施方式中,在构建与上述指定快照对应的上述第三副本卷快照过程中,上述存储系统确定与上述第三副本卷快照对应的上述副本快照构建数据。
接着以上示例继续举例,在构建与上述指定快照对应的上述第三副本卷快照过程中,上述存储系统确定与上述第三副本卷快照对应的上述副本快照构建数据,上述副本快照构建数据包括C0、F0。
在本说明书中,进一步地,上述存储系统将上述副本快照构建数据从上述第一副本卷快照中复制到上述第三副本卷快照中.
接着以上示例继续举例,请参见图6中的“构建T1时刻快照”所示,上述存储系统将上述副本快照构建数据(如图6所示的对应网格指示的C0、F0)从上述第一副本卷快照(由图6所示的“T0时刻对应快照管理数据”所管理,对应数据包括A0、B0、C0、D0、E0、F0)中的C0、F0,复制(如图6中所示“复制”箭头)到由图6所示的“T1时刻对应快照管理数据”所管理快照中。
在本说明书中,在上述副本快照构建数据从上述第一副本卷快照中复制到上述第三副本卷快照后,上述存储系统将上述副本快照构建数据从上述第一副本卷快照中删除。
接着以上示例继续举例,请参见图6中的“构建T1时刻快照”所示,上述存储系统将上述副本快照构建数据(包括C0、F0)从上述第一副本卷快照(由图6所示的“T0时刻对应快照管理数据”对应管理)中删除(请参见图6中的“构建T1时刻快照”所示的最右侧的“T0时刻对应快照管理数据”对应管理的数据中,C0、F0已被删除)。
在本说明书中,在上述第三副本卷快照构建完成后,上述存储系统将上述待复制差异数据从上述指定快照中复制到上述第三副本卷快照中。
接着以上示例继续举例,在上述第三副本卷快照(对应如图6所示中的“构建T1时刻快照”所示的最右侧的“T1时刻对应快照管理数据”)构建完成后,上述存储系统将上述待复制差异数据(包括A1),上述指定快照中复制到上述第三副本卷快照中,最终上述第三副本卷快照的数据包括A1、C0、F0。
当然,在实际应用中,上述存储系统也可以先将上述待复制差异数据,复制到上述副本卷的预设的存储空间后,再执行上述第三副本卷快照的构建。
基于以上的改进存储复制技术的具体过程的描述(结合图1、图2、图3及图6所示),与以上的现有存储复制技术的具体过程的描述(结合图1、图2、图3及图4所示)相比较可以清晰发现,改进存储复制技术相比现有存储复制技术,减少了用于复制的差异数据的数据量(改进存储复制技术:仅复制A1;现有存储复制技术:复制A1、C0、F0),以及,减少了副本卷快照的重复数据(改进存储复制技术:副本卷快照仅占用6个数据块;现有存储复制技术:占用8个数据块),提高存储效率。
需要说明的是,为了方便描述和理解,在本说明书中,主卷及副本卷的数据及快照仅为少量个数的示例,而通常在实际应用中,复制的差异数据量会比较大;以及,快照个数也会比较多。
由此,在以上技术方案中,基于主卷指定快照;以及,与所述主卷指定快照对应的相邻两个副本卷快照,确定用于复制的差异数据,并将用于复制的差异数据从主卷指定快照复制到副本卷快照。一方面,减少了用于复制的差异数据的数据量,提高了数据复制效率;另一方面,减少了副本卷快照的重复数据冗余,提高了存储效率。
与上述方法实施例相对应,本申请还提供了数据复制装置的实施例。
与上述方法实施例相对应,本说明书还提供了一种数据复制装置的实施例。本说明书的数据复制装置的实施例可以应用在电子设备上。装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。以软件实现为例,作为一个逻辑意义上的装置,是通过其所在电子设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言,如图7所示,为本说明书的数据复制装置所在电子设备的一种硬件结构图,除了图7所示的处理器、内存、网络接口、以及非易失性存储器之外,实施例中装置所在的电子设备通常根据该电子设备的实际功能,还可以包括其他硬件,对此不再赘述。
图8是本说明书一实施例示出的一种数据复制装置的框图。
请参考图8,所述数据复制装置80可以应用在前述图7所示的电子设备中,所述装置应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照;所述装置包括:
第一复制模块801,将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
第二复制模块802,确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
所述第二复制模块802,在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
在本实施例中,所述第一复制模块801进一步:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
在本实施例中,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照;所述第二复制模块802进一步:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
在本实施例中,所述第二复制模块802进一步:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
在本实施例中,所述第二复制模块802进一步:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述实施例阐明的装置、装置、模块或模块,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
与上述方法实施例相对应,本说明书还提供了一种电子设备的实施例。所述电子设备可以应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照;该电子设备包括:处理器以及用于存储机器可执行指令的存储器;其中,处理器和存储器通常通过内部总线相互连接。在其他可能的实现方式中,所述设备还可能包括外部接口,以能够与其他设备或者部件进行通信。
在本实施例中,通过读取并执行所述存储器存储的与数据复制逻辑对应的机器可执行指令,所述处理器被促使:
将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
在本实施例中,通过读取并执行所述存储器存储的与数据复制逻辑对应的机器可执行指令,所述处理器被促使:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
在本实施例中,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照,通过读取并执行所述存储器存储的与数据复制逻辑对应的机器可执行指令,所述处理器被促使:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
在本实施例中,通过读取并执行所述存储器存储的与数据复制逻辑对应的机器可执行指令,所述处理器被促使:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
在本实施例中,通过读取并执行所述存储器存储的与数据复制逻辑对应的机器可执行指令,所述处理器被促使:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
在本实施例中,所述存储系统为支持存储复制技术的存储系统。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本说明书的真正范围和精神由下面的权利要求指出。
应当理解的是,本说明书并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。
以上所述仅为本说明书的较佳实施例而已,并不用以限制本说明书,凡在本说明书的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本说明书保护的范围之内。
Claims (14)
1.一种数据复制方法,其特征在于,所述方法应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照,所述方法包括:
将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
2.根据权利要求1所述的方法,其特征在于,所述将所述若干主卷快照中的目标快照的数据复制到所述副本卷,包括:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
3.根据权利要求1所述的方法,其特征在于,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照;所述基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷,包括:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
4.根据权利要求3所述的方法,其特征在于,所述将所述待复制差异数据从所述指定快照中复制到所述副本卷中,包括:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
5.根据权利要求4所述的方法,其特征在于,所述构建与所述指定快照对应的所述副本卷的第三副本卷快照,包括:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
6.根据权利要求1所述的方法,其特征在于,所述存储系统为支持存储复制技术的存储系统。
7.一种数据复制装置,其特征在于,所述装置应用于存储系统,所述存储系统包括主卷、与所述主卷对应的副本卷;所述存储系统预设有所述主卷对应快照创建时间从先到后且紧密相邻的若干主卷快照;所述存储系统预设有所述副本卷对应快照创建时间从先到后且紧密相邻的若干副本卷快照,所述装置包括:
第一复制模块,将所述若干主卷快照中的目标快照的数据复制到所述副本卷;
第二复制模块,确定针对所述若干主卷快照中待被复制到所述副本卷的指定快照;其中,所述指定快照的快照创建时间早于所述目标快照的快照创建时间;
所述第二复制模块,在所述若干副本卷快照中,确定与所述指定快照的快照创建时间前后紧密相邻的两个副本卷快照;
基于所述两个副本卷快照以及所述指定快照,将所述指定快照的数据复制到所述副本卷。
8.根据权利要求7所述的装置,其特征在于,所述第一复制模块进一步:
将所述副本卷的数据与所述若干主卷的数据,执行数据初始同步;
将所述目标快照与所述副本卷的差异数据,增量复制到所述副本卷。
9.根据权利要求7所述的装置,其特征在于,所述两个副本卷快照包括快照创建时间早于所述指定快照的第一副本卷快照、快照创建时间晚于所述指定快照的第二副本卷快照;所述第二复制模块进一步:
确定所述第二副本卷快照与所述指定快照之间的第一差异数据;
确定所述第二副本卷快照与所述第一副本卷快照之间的第二差异数据;
确定所述第一差异数据与所述第二差异数据之间的第三差异数据,将所述第三差异数据确定为与所述指定快照对应的待复制差异数据;
将所述待复制差异数据从所述指定快照中复制到所述副本卷中。
10.根据权利要求9所述的装置,其特征在于,所述第二复制模块进一步:
构建与所述指定快照对应的所述副本卷的第三副本卷快照;其中,所述第三副本卷快照对应主卷快照创建时间晚于所述第一副本卷快照对应主卷快照创建时间,早于所述第二副本卷快照对应主卷快照创建时间;
将所述待复制差异数据从所述指定快照中复制到所述第三副本卷快照中。
11.根据权利要求10所述的装置,其特征在于,所述第二复制模块进一步:
确定所述第一副本卷快照与所述第一差异数据的数据交集作为副本快照构建数据;
将所述副本快照构建数据从所述第一副本卷快照中复制到所述第三副本卷快照中;
将所述副本快照构建数据从所述第一副本卷快照中删除。
12.根据权利要求7所述的装置,其特征在于,所述存储系统为支持存储复制技术的存储系统。
13.一种电子设备,其特征在于,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;
所述存储器中存储机器可读指令,所述处理器通过调用所述机器可读指令,执行如权利要求1至6任一项所述的方法。
14.一种机器可读存储介质,其特征在于,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现权利要求1至6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910827461.9A CN110704239B (zh) | 2019-09-03 | 2019-09-03 | 数据复制方法、装置、电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910827461.9A CN110704239B (zh) | 2019-09-03 | 2019-09-03 | 数据复制方法、装置、电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110704239A true CN110704239A (zh) | 2020-01-17 |
CN110704239B CN110704239B (zh) | 2022-05-27 |
Family
ID=69193992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910827461.9A Active CN110704239B (zh) | 2019-09-03 | 2019-09-03 | 数据复制方法、装置、电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110704239B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111367856A (zh) * | 2020-02-28 | 2020-07-03 | 杭州宏杉科技股份有限公司 | 数据复制方法、装置、电子设备及机器可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005293469A (ja) * | 2004-04-05 | 2005-10-20 | Nippon Telegr & Teleph Corp <Ntt> | データコピーシステムおよびデータコピー方法 |
CN103019888A (zh) * | 2012-12-21 | 2013-04-03 | 华为技术有限公司 | 备份方法与装置 |
CN103617096A (zh) * | 2013-11-04 | 2014-03-05 | 华为技术有限公司 | 一种存储数据的复制方法、设备及系统 |
CN106537353A (zh) * | 2014-07-15 | 2017-03-22 | 华为技术有限公司 | 一种数据复制方法、装置以及系统 |
CN109614055A (zh) * | 2018-12-21 | 2019-04-12 | 杭州宏杉科技股份有限公司 | 快照创建方法、装置、电子设备及机器可读存储介质 |
CN110018983A (zh) * | 2017-09-27 | 2019-07-16 | 华为技术有限公司 | 一种元数据查询方法及装置 |
-
2019
- 2019-09-03 CN CN201910827461.9A patent/CN110704239B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005293469A (ja) * | 2004-04-05 | 2005-10-20 | Nippon Telegr & Teleph Corp <Ntt> | データコピーシステムおよびデータコピー方法 |
CN103019888A (zh) * | 2012-12-21 | 2013-04-03 | 华为技术有限公司 | 备份方法与装置 |
CN103617096A (zh) * | 2013-11-04 | 2014-03-05 | 华为技术有限公司 | 一种存储数据的复制方法、设备及系统 |
CN106537353A (zh) * | 2014-07-15 | 2017-03-22 | 华为技术有限公司 | 一种数据复制方法、装置以及系统 |
CN110018983A (zh) * | 2017-09-27 | 2019-07-16 | 华为技术有限公司 | 一种元数据查询方法及装置 |
CN109614055A (zh) * | 2018-12-21 | 2019-04-12 | 杭州宏杉科技股份有限公司 | 快照创建方法、装置、电子设备及机器可读存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111367856A (zh) * | 2020-02-28 | 2020-07-03 | 杭州宏杉科技股份有限公司 | 数据复制方法、装置、电子设备及机器可读存储介质 |
CN111367856B (zh) * | 2020-02-28 | 2024-03-29 | 杭州宏杉科技股份有限公司 | 数据复制方法、装置、电子设备及机器可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110704239B (zh) | 2022-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106201338B (zh) | 数据存储方法及装置 | |
US7987158B2 (en) | Method, system and article of manufacture for metadata replication and restoration | |
TWI514249B (zh) | 遠端非同步資料卷複製的方法及執行該方法的儲存系統 | |
US7707373B2 (en) | Storage system and backup method | |
US9569314B2 (en) | Flash copy for disaster recovery (DR) testing | |
US8214685B2 (en) | Recovering from a backup copy of data in a multi-site storage system | |
CN105302667B (zh) | 基于集群架构的高可靠性数据备份与恢复方法 | |
WO2018098972A1 (zh) | 一种日志恢复方法、存储装置和存储节点 | |
KR20120140652A (ko) | 플래시카피 캐스케이드내의 버퍼 디스크 | |
US10114703B2 (en) | Flash copy for disaster recovery (DR) testing | |
US20070033361A1 (en) | Apparatus, system, and method for fastcopy target creation | |
CN106528338A (zh) | 一种远程数据复制方法、存储设备及存储系统 | |
CN111367856B (zh) | 数据复制方法、装置、电子设备及机器可读存储介质 | |
CN112181723A (zh) | 一种金融灾备方法、装置、存储介质及电子设备 | |
CN105938446B (zh) | 基于rdma和硬件事务性内存支持的数据复制容错方法 | |
CN110704239B (zh) | 数据复制方法、装置、电子设备 | |
CN110531925B (zh) | 数据读取方法、装置、电子设备及机器可读存储介质 | |
US8918364B1 (en) | Online mirror state transitioning in databases | |
CN115955488A (zh) | 基于副本冗余的分布式存储副本跨机房放置方法与装置 | |
CN111399774B (zh) | 分布式存储系统下基于快照的数据处理方法和装置 | |
KR102089710B1 (ko) | 연속 데이터 관리 시스템 및 방법 | |
US9672118B2 (en) | Collision avoidance using dynamic target volume allocation | |
US20090271579A1 (en) | Storage subsystem and storage system | |
CN114442942B (zh) | 一种数据迁移方法、系统、设备及存储介质 | |
CN116225711A (zh) | 云计算环境中使得虚拟磁盘的分配空间一致的方法及应用 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |