CN114138182A - 一种分布式云硬盘的跨存储在线克隆方法、系统及装置 - Google Patents
一种分布式云硬盘的跨存储在线克隆方法、系统及装置 Download PDFInfo
- Publication number
- CN114138182A CN114138182A CN202111256583.0A CN202111256583A CN114138182A CN 114138182 A CN114138182 A CN 114138182A CN 202111256583 A CN202111256583 A CN 202111256583A CN 114138182 A CN114138182 A CN 114138182A
- Authority
- CN
- China
- Prior art keywords
- hard disk
- cloud hard
- consistency group
- storage
- snapshot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000010367 cloning Methods 0.000 title claims abstract description 57
- 238000000034 method Methods 0.000 title claims abstract description 53
- 230000005012 migration Effects 0.000 claims description 20
- 238000013508 migration Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 11
- 238000013507 mapping Methods 0.000 claims description 10
- 230000006872 improvement Effects 0.000 abstract description 5
- 230000000875 corresponding effect Effects 0.000 description 17
- 238000004891 communication Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
- G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提出的一种分布式云硬盘的跨存储在线克隆方法、系统及装置，所述方法包括：将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组；对一致性组创建一致性组快照；根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷；将临时卷迁移至目标存储后端；将创建的一致性组快照删除。本发明通过将多个云硬盘加入到一个一致性组中，所有的云硬盘在同一个时间点创建快照，再依次对每个云硬盘执行创建备份的后续步骤，保证了多个克隆卷之间的数据一致性，实现了对多个在线云硬盘创建备份方法的改进。
Description
技术领域
本发明涉及云存储技术领域，更具体的说是涉及一种分布式云硬盘的跨存储在线克隆方法、系统及装置。
背景技术
当前在一些重要的应用场景，例如大中型的数据库应用中，数据库的表、日志和配置文件分别存放在多个不同的云硬盘中，各个云硬盘中的数据相互关联相互依赖。当需要对所有处于在线状态的云硬盘创建克隆卷的时候，如果各个云硬盘创建克隆卷的时间不一致，将可能导致克隆卷中的数据状态不一致。在使用克隆卷的时候很可能引发错误，从而导致无法正常使用。
当前的云硬盘在线克隆技术主要是在同一个存储后端进行克隆，不能实现跨存储后端在线克隆云硬盘。并且是针对单个云硬盘创建克隆卷的场景，当多个云硬盘需要同时创建克隆卷时，并不能保证多个云硬盘在同一个时间点进行克隆操作，从而无法保证克隆卷中的数据一致性。另外，在线状态的云硬盘创建克隆卷是以云硬盘在线快照为基础，对云硬盘创建在线快照可以将当前时刻的云硬盘数据保存到云硬盘快照中，再从云硬盘快照中拷贝数据进行克隆。云硬盘创建克隆卷的主要步骤为：1)云硬盘创建在线快照，将云硬盘的数据保存到云硬盘快照。2)通过在线快照创建克隆卷。3)删除步骤1中创建的云硬盘快照。但是，直接从源卷拷贝数据到目标卷需要一定的时间，这个时间段内源卷可能会存在IO写入，导致目标卷与源卷中数据不一致。
发明内容
针对以上问题，本发明的目的在于提供一种分布式云硬盘的跨存储在线克隆方法、系统及装置，能够有效的解决多个云硬盘创建快照时的时间不一致问题。
本发明为实现上述目的，通过以下技术方案实现：一种分布式云硬盘的跨存储在线克隆方法，包括：
将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组；
对一致性组创建一致性组快照；
根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷；
将临时卷迁移至目标存储后端；
将创建的一致性组快照删除。
进一步，所述将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组包括：
调用创建一致性组的接口，将待克隆的云硬盘均添加到接口入参中，调用数据库并在一致性组表中新增一条一致性组的详细信息；
添加完成后，调用更新一致性组的接口，将待克隆的云硬盘id添加到接口入参中，调用数据库的volumes表，将一致性组id添加到对应的云硬盘上。
进一步，所述对一致性组创建一致性组快照，包括：
调用创建一致性组快照的接口，并在驱动层调用存储后端；
在存储后端创建一个一致性组，组名为一致性组快照的id；
将待克隆的云硬盘与一致性组关联；
在同一时刻为一致性组中待克隆的云硬盘创建对应的云硬盘快照；
执行删除一致性组的接口，在存储后端删除一致性组。
进一步，所述将待克隆的云硬盘与一致性组关联，具体包括：
查看待克隆的云硬盘的虚拟硬盘，并返回待克隆的云硬盘的属性信息；
创建一个虚拟硬盘，虚拟硬盘的名称为待克隆的云硬盘快照的id，虚拟硬盘的空间大小与待克隆的云硬盘相同；
创建一个映射关系，建立待克隆的云硬盘与虚拟硬盘的连接，并与一致性组相关联。
进一步，所述根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷，具体为：
调用创建云硬盘接口，为待克隆的云硬盘快照创建一个临时卷；
将临时卷的存储后端设置为待克隆的云硬盘的存储后端。
进一步，所述将临时卷迁移至目标存储后端，具体为：
调用迁移云硬盘的接口，通过将临时卷的卷类型更改为属于目标存储后端的克隆目标卷的卷类型，以创建克隆目标卷，完成临时卷的迁移操作。
进一步，所述将临时卷迁移至目标存储后端，还包括：
在迁移过程中进行迁移操作检测，当检测到迁移操作执行失败时，删除已经创建完成的克隆目标卷，并终止克隆目标卷的创建流程。
进一步，所述待克隆的云硬盘的属性信息为待克隆的云硬盘的磁盘空间大小。
相应的，本发明还公开了一种分布式云硬盘的跨存储在线克隆系统，包括：添加单元，用于将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组；
快照创建单元，用于对一致性组创建一致性组快照；
临时卷创建单元，用于根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷；
临时卷迁移单元，用于将临时卷迁移至目标存储后端；
快照删除单元，用于将创建的一致性组快照删除。
相应的，本发明公开了一种分布式云硬盘的跨存储在线克隆装置，包括：
存储器，用于存储分布式云硬盘的跨存储在线克隆程序；
处理器，用于执行所述分布式云硬盘的跨存储在线克隆程序时实现如上文任一项所述分布式云硬盘的跨存储在线克隆方法的步骤。
对比现有技术，本发明有益效果在于：本发明提供了一种分布式云硬盘的跨存储在线克隆方法、系统及装置，通过将多个云硬盘加入到一个一致性组中，所有的云硬盘在同一个时间点创建快照，再依次对每个云硬盘执行创建备份的后续步骤，实现了对多个在线云硬盘创建备份方法的改进。
本发明将多个云硬盘加入到一个一致性组中，直接对一致性组进行克隆卷的操作，不再需要对每一个云硬盘分别进行克隆操作，操作更加方便。本发明实现了一个一致性组中的云硬盘在同一时刻创建克隆卷，保证了多个克隆卷之间的数据一致性。在大中型数据库应用等对多个云硬盘之间数据一致性有严格要求的场景下，由于多个云硬盘克隆卷之间数据不一致造成的克隆卷无法正常使用的情况将会被避免。
本发明同时支持云硬盘在线状态并跨存储后端进行克隆，拓宽了克隆云硬盘的应用场景。
由此可见，本发明与现有技术相比，具有突出的实质性特点和显著的进步，其实施的有益效果也是显而易见的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
附图1是本发明具体实施方式的方法流程图。
附图2是本发明具体实施方式的系统结构图。
图中，1为添加单元；2为快照创建单元；3为临时卷创建单元；4为临时卷迁移单元；5为快照删除单元。
具体实施方式
本发明的核心是提供一种分布式云硬盘的跨存储在线克隆方法，现有技术中，当前的云硬盘在线克隆技术主要是在同一个存储后端进行克隆，不能实现跨存储后端在线克隆云硬盘。并且是针对单个云硬盘创建克隆卷的场景，当多个云硬盘需要同时创建克隆卷时，并不能保证多个云硬盘在同一个时间点进行克隆操作，从而无法保证克隆卷中的数据一致性。
而本发明提供的分布式云硬盘的跨存储在线克隆方法，首先，将多个同属于一个存储后端的云硬盘添加到一致性组，对一致性组执行创建快照，多个云硬盘在同一个时刻创建完成快照，再依次对每一个云硬盘快照创建临时卷，调用修改卷类型的接口，将临时卷的卷类型修改成为克隆目标卷的卷类型，最后将云硬盘快照删除。由此可见，本发明引入了一致性组快照技术，可以将多个同属于一个存储后端的云硬盘添加到一个一致性组中，然后对该一致性组创建快照，一致性组中的所有云硬盘在同一个时间点创建快照。本发明可以很好的解决多个云硬盘创建快照时的时间不一致问题。
为了使本技术领域的人员更好地理解本发明方案，将本发明涉及的专有名字解释如下：
云计算平台：也称为云平台，是指基于硬件资源和软件资源的服务，提供计算、网络和存储能力。OpenStack是一个开源的云计算管理平台项目，同时也是目前市场上应用最为广泛的云计算平台之一，具有很大的商业潜力，当前国内多家云平台服务商使用OpenStack架构开发云平台。
云硬盘：这是OpenStack云平台对块设备的统称，云硬盘可以挂载到云主机上并且和物理硬盘一样使用。
一致性组：(Consistency groups)可以将一个应用使用的所有云硬盘在逻辑上划分成一个组，用户可以非常方便的对组进行操作，而不需要依次对组内的云硬盘分别进行操作。
云硬盘在线克隆：云硬盘处于挂载到OpenStack平台云主机的状态，对云硬盘中的数据进行全量的复制，从而得到某一时刻精确的副本。在当前的灾备数据备份产品中，克隆作为一项基本的功能存在，一般以卷为单位进行克隆。
下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一：
如图1所示，本实施例提供了一种分布式云硬盘的跨存储在线克隆方法，包括如下步骤：
S1：将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组。
首先，调用创建一致性组的接口，将待克隆的云硬盘均添加到接口入参中，调用数据库并在一致性组表中新增一条一致性组的详细信息。添加完成后，调用更新一致性组的接口，将待克隆的云硬盘id添加到接口入参中，调用数据库的volumes表，将一致性组id添加到对应的云硬盘上。需要说明的是，由于存储后端对一致性组的个数有限制。因此，上述操作仅仅在数据库中添加数据，虽然调用了存储后端，但是并没有在存储后端实际创建一致性组。
S2：对一致性组创建一致性组快照。
首先，调用创建一致性组快照的接口，并在驱动(driver)层调用存储后端。然后，在存储后端创建一个一致性组，组名为一致性组快照的id，创建完成后，依次将待克隆的云硬盘与一致性组关联。接着，在同一时刻为一致性组中待克隆的云硬盘创建对应的云硬盘快照。最后，执行删除一致性组的接口，在存储后端删除一致性组。
其中，将待克隆的云硬盘与一致性组关联具体包括如下三步：
1、查看待克隆的云硬盘的虚拟硬盘，并返回待克隆的云硬盘的属性信息，该属性信息具体为待克隆的云硬盘的磁盘空间大小。
2、创建一个虚拟硬盘，虚拟硬盘的名称为待克隆的云硬盘快照的id，虚拟硬盘的空间大小与待克隆的云硬盘相同。
3、创建一个映射关系，建立待克隆的云硬盘与虚拟硬盘的连接，并与一致性组相关联。
S3：根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷。
首先，调用创建云硬盘接口，为待克隆的云硬盘快照创建一个临时卷；然后将临时卷的存储后端设置为待克隆的云硬盘的存储后端。
S4：将临时卷迁移至目标存储后端。
调用迁移云硬盘的接口，通过将临时卷的卷类型更改为属于目标存储后端的克隆目标卷的卷类型，以创建克隆目标卷，完成临时卷的迁移操作。
另外，本步骤还包括一种回退机制，具体为在迁移过程中进行迁移操作检测，当检测到迁移操作执行失败时，删除已经创建完成的克隆目标卷，并终止克隆目标卷的创建流程。
S5：将创建的一致性组快照删除。
调用删除一致性组快照的接口，将步骤S2中创建的一致性组快照删除，即所有待克隆的云硬盘对应的快照均被删除。
本实施例提供了一种分布式云硬盘的跨存储在线克隆方法，该方法在创建克隆卷之前，需要先将多个准备进行克隆的云硬盘添加到同一个一致性组。需要说明的是，一致性组内所有的云硬盘需要属于同一个存储后端，并且目前只有部分存储后端支持一致性组功能。然后调用创建一致性组快照的接口，一致性组内所有的云硬盘会在同一时刻分别创建对应的云硬盘快照。由于云硬盘在创建克隆卷的时候，需要创建云硬盘快照，将云硬盘当前时刻的数据保存在快照中，再从该快照中获取数据进行云硬盘的克隆的下一步操作。所以当多个云硬盘创建克隆卷的时候，只需要保证多个云硬盘能够在同一时刻创建快照，就可以实现创建克隆卷的时间一致性，从而实现云硬盘克隆的数据一致性。
接下来依次对每个云硬盘快照创建临时卷，然后再调用修改卷类型的接口，将临时卷的卷类型更改为克隆目标卷的卷类型，修改完成卷类型的临时卷即为云硬盘克隆完成的目标卷。在执行创建临时卷和修改临时卷的过程中，当系统检测到出现云硬盘操作失败的时候，会启用回退机制，将已经创建完成的目标卷进行删除并终止克隆操作，即克隆失败。最后，将会调用删除一致性组快照的接口，将云硬盘快照全部删除。
由此可见，本实施例通过将多个云硬盘加入到一个一致性组中，所有的云硬盘在同一个时间点创建快照，再依次对每个云硬盘执行创建备份的后续步骤，实现了对多个在线云硬盘创建备份方法的改进。
实施例二：
基于实施例一，本实施例还提供了一种分布式云硬盘的跨存储在线克隆方法，包括如下步骤：
步骤1：调用创建一致性组的接口，接口入参中的卷类型需要将所有云硬盘的卷类型均添加进去，调用数据库并在groups表中新增一条一致性组的详细信息。一致性组创建成功后，继续调用更新一致性组的接口，接口入参中的添加云硬盘需要将所有的云硬盘id添加进去。调用数据库的volumes表，将一致性组id添加到对应的云硬盘上。需要说明的是，由于存储后端对一致性组的个数有限制。因此，上述操作仅仅在数据库中添加数据，虽然调用了存储后端，但是并没有在存储后端实际创建一致性组。
步骤2：调用创建一致性组快照的接口，driver层调用存储后端，在存储后端实际创建一个一致性组，组名为一致性组快照的id。在本实施例中，所有的存储后端均采用G2存储后端，基于此，依次对一致性组中的云硬盘执行如下操作：1.查看云硬盘的vdisk并返回该云硬盘的属性信息，包含云硬盘的磁盘空间大小。2.创建一个vdisk，名称为该云硬盘对应快照的id，大小与云硬盘空间一样。3.创建一个映射关系，将云硬盘与云硬盘快照的vdisk建立连接，并与一致性组相关联。需要说明的是，vdisk是存储后端G2里面的概念，指代云硬盘或者云硬盘快照对应的虚拟磁盘。
接着，执行创建一致性组快照的准备工作，开始执行一致性组快照的创建，操作对象为一致性组的id。由于每个云硬盘的映射关系均与该一致性组快照相关联，因此可以触发所有的映射关系在同一个时刻执行。
最后，执行删除一致性组的接口，在存储后端删除一致性组。
步骤3，依次对所有的云硬盘快照执行如下操作：
1.调用创建云硬盘接口，创建一个临时卷。改临时卷的存储后端为源云硬盘的存储后端。创建方式为根据云硬盘快照创建，磁盘容量与源卷大小一致，卷的名称为创建的克隆目标卷名称。
2.调用迁移云硬盘的接口，将临时卷迁移至目标存储后端。更改后的卷即为创建成功的克隆目标卷，其存储后端为克隆卷的存储后端。
另外，本步骤中还添加了检测和回退机制，当检测到上述操作执行的过程中执行失败时，已经创建完成的克隆目标卷也会被删除，并终止创建克隆卷的流程。
步骤4：调用删除一致性组快照的接口，将步骤2中创建的一致性组快照删除，即所有云硬盘对应的快照均被删除。
本实施例提供了一种分布式云硬盘的跨存储在线克隆方法，将多个云硬盘加入到一个一致性组中，直接对一致性组进行克隆卷的操作，不再需要对每一个云硬盘分别进行克隆操作，操作更加方便。本实施例实现了一个一致性组中的云硬盘在同一时刻创建克隆卷，保证了多个克隆卷之间的数据一致性。在大中型数据库应用等对多个云硬盘之间数据一致性有严格要求的场景下，由于多个云硬盘克隆卷之间数据不一致造成的克隆卷无法正常使用的情况将会被避免。
实施例三：
如图2所示，本发明还公开了一种分布式云硬盘的跨存储在线克隆系统，包括：添加单元1、快照创建单元2、临时卷创建单元3、临时卷迁移单元4和快照删除单元5。
添加单元1，用于将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组。
快照创建单元2，用于对一致性组创建一致性组快照。
临时卷创建单元3，用于根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷。
临时卷迁移单元4，用于将临时卷迁移至目标存储后端。
快照删除单元5，用于将创建的一致性组快照删除。
本实施例提供了一种分布式云硬盘的跨存储在线克隆系统，通过将多个云硬盘加入到一个一致性组中，所有的云硬盘在同一个时间点创建快照，再依次对每个云硬盘执行创建备份的后续步骤，实现了对多个在线云硬盘创建备份方法的改进。
实施例四：
本实施例公开了一种分布式云硬盘的跨存储在线克隆装置，包括处理器和存储器；其中，所述处理器执行所述存储器中保存的分布式云硬盘的跨存储在线克隆程序时实现以下步骤：
1、将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组。
2、对一致性组创建一致性组快照。
3、根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷。
4、将临时卷迁移至目标存储后端。
5、将创建的一致性组快照删除。
进一步的，本实施例中的分布式云硬盘的跨存储在线克隆装置，还可以包括：
输入接口，用于获取外界导入的分布式云硬盘的跨存储在线克隆程序，并将获取到的分布式云硬盘的跨存储在线克隆程序保存至所述存储器中，还可以用于获取外界终端设备传输的各种指令和参数，并传输至处理器中，以便处理器利用上述各种指令和参数展开相应的处理。本实施例中，所述输入接口具体可以包括但不限于USB接口、串行接口、语音输入接口、指纹输入接口、硬盘读取接口等。
输出接口，用于将处理器产生的各种数据输出至与其相连的终端设备，以便于与输出接口相连的其他终端设备能够获取到处理器产生的各种数据。本实施例中，所述输出接口具体可以包括但不限于USB接口、串行接口等。
通讯单元，用于在分布式云硬盘的跨存储在线克隆装置和外部服务器之间建立远程通讯连接，以便于分布式云硬盘的跨存储在线克隆装置能够将镜像文件挂载到外部服务器中。本实施例中，通讯单元具体可以包括但不限于基于无线通讯技术或有线通讯技术的远程通讯单元。
键盘，用于获取用户通过实时敲击键帽而输入的各种参数数据或指令。
显示器，用于运行服务器供电线路短路定位过程的相关信息进行实时显示。
鼠标，可以用于协助用户输入数据并简化用户的操作。
本实施例提供了一种分布式云硬盘的跨存储在线克隆装置，该装置可以将多个云硬盘添加到一个一致性组中，对一致性组执行创建克隆的操作，一致性组内所有的云硬盘在同一时刻创建快照，再通过快照完成创建克隆卷。本装置可以在同一时刻创建克隆卷，实现多个克隆卷之间的数据一致性，有效避免了由于多个云硬盘克隆卷之间数据不一致造成的克隆卷无法正常使用的情况。
综上所述，本发明能够有效的解决多个云硬盘创建快照时的时间不一致问题。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的方法而言，由于其与实施例公开的系统相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的系统、系统和方法，可以通过其它的方式实现。例如，以上所描述的系统实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，系统或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个单元中。
同理，在本发明各个实施例中的各处理单元可以集成在一个功能模块中，也可以是各个处理单元物理存在，也可以两个或两个以上处理单元集成在一个功能模块中。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的分布式云硬盘的跨存储在线克隆方法、系统级装置进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (10)
1.一种分布式云硬盘的跨存储在线克隆方法，其特征在于，包括：
将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组；
对一致性组创建一致性组快照；
根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷；
将临时卷迁移至目标存储后端；
将创建的一致性组快照删除。
2.根据权利要求1所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组包括：调用创建一致性组的接口，将待克隆的云硬盘均添加到接口入参中，调用数据库并在一致性组表中新增一条一致性组的详细信息；
添加完成后，调用更新一致性组的接口，将待克隆的云硬盘id添加到接口入参中，调用数据库的volumes表，将一致性组id添加到对应的云硬盘上。
3.根据权利要求1所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述对一致性组创建一致性组快照，包括：
调用创建一致性组快照的接口，并在驱动层调用存储后端；
在存储后端创建一个一致性组，组名为一致性组快照的id；
将待克隆的云硬盘与一致性组关联；
在同一时刻为一致性组中待克隆的云硬盘创建对应的云硬盘快照；
执行删除一致性组的接口，在存储后端删除一致性组。
4.根据权利要求3所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述将待克隆的云硬盘与一致性组关联，具体包括：
查看待克隆的云硬盘的虚拟硬盘，并返回待克隆的云硬盘的属性信息；
创建一个虚拟硬盘，虚拟硬盘的名称为待克隆的云硬盘快照的id，虚拟硬盘的空间大小与待克隆的云硬盘相同；
创建一个映射关系，建立待克隆的云硬盘与虚拟硬盘的连接，并与一致性组相关联。
5.根据权利要求1所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷，具体为：
调用创建云硬盘接口，为待克隆的云硬盘快照创建一个临时卷；
将临时卷的存储后端设置为待克隆的云硬盘的存储后端。
6.根据权利要求5所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述将临时卷迁移至目标存储后端，具体为：
调用迁移云硬盘的接口，通过将临时卷的卷类型更改为属于目标存储后端的克隆目标卷的卷类型，以创建克隆目标卷，完成临时卷的迁移操作。
7.根据权利要求6所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述将临时卷迁移至目标存储后端，还包括：
在迁移过程中进行迁移操作检测，当检测到迁移操作执行失败时，删除已经创建完成的克隆目标卷，并终止克隆目标卷的创建流程。
8.根据权利要求4所述的分布式云硬盘的跨存储在线克隆方法，其特征在于，所述待克隆的云硬盘的属性信息为待克隆的云硬盘的磁盘空间大小。
9.一种分布式云硬盘的跨存储在线克隆系统，其特征在于，包括：
添加单元，用于将同属于一个存储后端的待克隆的云硬盘添加到同一个一致性组；
快照创建单元，用于对一致性组创建一致性组快照；
临时卷创建单元，用于根据一致性组快照内为每个待克隆的云硬盘快照创建对应的临时卷；
临时卷迁移单元，用于将临时卷迁移至目标存储后端；
快照删除单元，用于将创建的一致性组快照删除。
10.一种分布式云硬盘的跨存储在线克隆装置，其特征在于，包括：
存储器，用于存储分布式云硬盘的跨存储在线克隆程序；
处理器，用于执行所述分布式云硬盘的跨存储在线克隆程序时实现如权利要求1至8任一项权利要求所述的分布式云硬盘的跨存储在线克隆方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111256583.0A CN114138182B (zh) | 2021-10-27 | 2021-10-27 | 一种分布式云硬盘的跨存储在线克隆方法、系统及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111256583.0A CN114138182B (zh) | 2021-10-27 | 2021-10-27 | 一种分布式云硬盘的跨存储在线克隆方法、系统及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114138182A true CN114138182A (zh) | 2022-03-04 |
| CN114138182B CN114138182B (zh) | 2023-12-22 |
Family
ID=80394574
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111256583.0A Active CN114138182B (zh) | 2021-10-27 | 2021-10-27 | 一种分布式云硬盘的跨存储在线克隆方法、系统及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114138182B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115098297A (zh) * | 2022-06-20 | 2022-09-23 | 上海道客网络科技有限公司 | 一种云原生存储数据卷的一致性快照生成方法和系统 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7725669B1 (en) * | 2006-09-28 | 2010-05-25 | Emc Corporation | Backup and restore operations using coherency groups for ISB protocol systems |
| US8819369B1 (en) * | 2012-06-26 | 2014-08-26 | Netapp, Inc. | Restoring a virtual machine |
| US9652333B1 (en) * | 2014-09-30 | 2017-05-16 | EMC IP Holding Company LLC | Maintaining stored data consistency of a plurality of related virtual machines across a plurality of sites during migration |
| US20170318089A1 (en) * | 2016-04-29 | 2017-11-02 | Netapp Inc. | Cross-platform replication |
| CN107391314A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种支持双活的数据一致性保持方法与装置 |
| CN107566150A (zh) * | 2016-07-01 | 2018-01-09 | 华为技术有限公司 | 处理云资源的方法和物理节点 |
| CN109582496A (zh) * | 2018-10-25 | 2019-04-05 | 平安科技（深圳）有限公司 | 一致性快照组的创建方法、装置及计算机可读存储介质 |
| CN110008065A (zh) * | 2019-04-11 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种一致性组快照管理方法及相关装置 |
| CN111078368A (zh) * | 2019-12-26 | 2020-04-28 | 浪潮电子信息产业股份有限公司 | 云计算平台虚拟机的内存快照方法、装置及可读存储介质 |
| US11055017B1 (en) * | 2020-01-27 | 2021-07-06 | International Business Machines Corporation | Throttling a point-in-time snapshot copy operation within a data consistency application |
-
2021
- 2021-10-27 CN CN202111256583.0A patent/CN114138182B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7725669B1 (en) * | 2006-09-28 | 2010-05-25 | Emc Corporation | Backup and restore operations using coherency groups for ISB protocol systems |
| US8819369B1 (en) * | 2012-06-26 | 2014-08-26 | Netapp, Inc. | Restoring a virtual machine |
| US9652333B1 (en) * | 2014-09-30 | 2017-05-16 | EMC IP Holding Company LLC | Maintaining stored data consistency of a plurality of related virtual machines across a plurality of sites during migration |
| US20170318089A1 (en) * | 2016-04-29 | 2017-11-02 | Netapp Inc. | Cross-platform replication |
| CN107566150A (zh) * | 2016-07-01 | 2018-01-09 | 华为技术有限公司 | 处理云资源的方法和物理节点 |
| US20190124018A1 (en) * | 2016-07-01 | 2019-04-25 | Huawei Technologies Co., Ltd. | Cloud resource processing method and physical node |
| CN107391314A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种支持双活的数据一致性保持方法与装置 |
| CN109582496A (zh) * | 2018-10-25 | 2019-04-05 | 平安科技（深圳）有限公司 | 一致性快照组的创建方法、装置及计算机可读存储介质 |
| CN110008065A (zh) * | 2019-04-11 | 2019-07-12 | 苏州浪潮智能科技有限公司 | 一种一致性组快照管理方法及相关装置 |
| CN111078368A (zh) * | 2019-12-26 | 2020-04-28 | 浪潮电子信息产业股份有限公司 | 云计算平台虚拟机的内存快照方法、装置及可读存储介质 |
| US11055017B1 (en) * | 2020-01-27 | 2021-07-06 | International Business Machines Corporation | Throttling a point-in-time snapshot copy operation within a data consistency application |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115098297A (zh) * | 2022-06-20 | 2022-09-23 | 上海道客网络科技有限公司 | 一种云原生存储数据卷的一致性快照生成方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114138182B (zh) | 2023-12-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3435235B1 (en) | Method and device for executing data recovery operation | |
| CN110309218B (zh) | 一种数据交换系统和数据写入方法 | |
| EP3477914B1 (en) | Data recovery method and device, and cloud storage system | |
| US10852996B2 (en) | System and method for provisioning slave storage including copying a master reference to slave storage and updating a slave reference | |
| US11132126B1 (en) | Backup services for distributed file systems in cloud computing environments | |
| US20190227888A1 (en) | Handling node failure in multi-node data storage systems | |
| US11150981B2 (en) | Fast recovery from failures in a chronologically ordered log-structured key-value storage system | |
| CN112596951A (zh) | 一种nas数据容灾方法、装置、设备及存储介质 | |
| CN111159227B (zh) | 数据查询方法、装置、设备及存储介质 | |
| CN114138182B (zh) | 一种分布式云硬盘的跨存储在线克隆方法、系统及装置 | |
| CN115757616A (zh) | 一种基于二进制日志的数据一致性校验方法、装置及介质 | |
| US11341159B2 (en) | In-stream data load in a replication environment | |
| CN115640280A (zh) | 数据迁移方法及装置 | |
| CN113076086B (zh) | 元数据管理系统和使用其对模型对象进行建模的方法 | |
| US10685046B2 (en) | Data processing system and data processing method | |
| CN111880996B (zh) | 一种裸机数据采集方法、装置、设备及可读存储介质 | |
| CN113110846A (zh) | 一种环境变量的获取方法及装置 | |
| JP2021515301A (ja) | システムにおけるガベージ・コレクション処理中の障害からのリカバリのための方法、システムにおけるガベージ・コレクション処理中の障害からのリカバリのためのコンピュータ・プログラム、および装置 | |
| CN113094367A (zh) | 数据处理方法、装置和服务器 | |
| CN114722261A (zh) | 一种资源的处理方法、装置、电子设备及存储介质 | |
| US9489271B1 (en) | User interface for restoring databases | |
| CN108733514A (zh) | 一种异构存储间快照实现的方法、系统及设备 | |
| CN117130980B (zh) | 一种虚拟机快照管理方法及装置 | |
| CN112740639B (zh) | 计算环境中的备份组合计算系统、方法和程序产品 | |
| CN113434359B (zh) | 数据溯源系统构建方法、装置、电子设备及可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |