CN110134330B - 一种多云环境下的云盘迁移系统及方法 - Google Patents

一种多云环境下的云盘迁移系统及方法 Download PDF

Info

Publication number
CN110134330B
CN110134330B CN201910324134.1A CN201910324134A CN110134330B CN 110134330 B CN110134330 B CN 110134330B CN 201910324134 A CN201910324134 A CN 201910324134A CN 110134330 B CN110134330 B CN 110134330B
Authority
CN
China
Prior art keywords
cloud
disk
platform
partition
cloud platform
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910324134.1A
Other languages
English (en)
Other versions
CN110134330A (zh
Inventor
张瑜科
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201910324134.1A priority Critical patent/CN110134330B/zh
Publication of CN110134330A publication Critical patent/CN110134330A/zh
Application granted granted Critical
Publication of CN110134330B publication Critical patent/CN110134330B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及云计算技术领域，尤其是一种多云环境下的云盘迁移系统及方法。本发明的系统包括多云管理组件和接入组件；多云管理组件具有多云管理功能，实现统一管理多个云提供商的云平台；接入组件，在每个云平台单独提供接入虚拟机运行服务；接入组件提供服务给多云管理组件调用完成具体迁移任务，多云管理组件实现每个云平台接入组件的添加。本发明结合多云管理功能实现云盘在多个云平台间的迁移。

Description

一种多云环境下的云盘迁移系统及方法
技术领域
本发明涉及云计算技术领域，尤其是一种多云环境下的云盘迁移系统及方法。
背景技术
多云是一种使用云的方式，由多个云平台的服务组合而成。多云不仅可以是公有云，也可以是私有云。使用多云的最大好处是故障切换；多云可以帮助企业避免业务中断，能让关键服务在主云不可用或可能不可用时随时有一个备份，避免更大的损失。
云盘也是云服务的一种类型，提供弹性的块存储服务，企业云应用的关键数据通常放在云盘之上。多云环境下需要实现云应用的迁移，那么实现云盘的迁移是必要的条件。
但是，目前云盘的迁移技术主要有一下缺陷：
1)把云盘迁移到备份服务器，如果需要恢复还需要重新导入，在第三方云平台或者公有云恢复非常麻烦。
2)公有云的提供商提供的云盘迁移方案只能迁移到自家的公有云，而不能在不同的公有云之间相互迁移。
3)云盘的迁移方案需要在每个云盘挂着的虚拟机上部署一个代理程序，使用复杂，不方便大规模的云盘迁移。
发明内容
本发明解决的技术问题在于提供一种多云环境下的云盘迁移系统及方法，结合多云管理功能实现云盘在多个云平台间的迁移。
本发明解决上述技术问题的技术方案是：
所述的系统包括多云管理组件和接入组件；
所述多云管理组件具有多云管理功能，实现统一管理多个云提供商的云平台；
所述接入组件，在每个云平台单独提供接入虚拟机运行服务；
接入组件提供服务给多云管理组件调用完成具体迁移任务，多云管理组件实现每个云平台接入组件的添加。
所述的多云管理功能是可以在多云管理组件的统一管理页面对云资源进行管理。
所述的方法包括以下步骤：
S10、第一云平台创建云盘快照挂载接入虚拟机，并获取云盘的磁盘信息；
S20、第二云平台创建云盘并挂载到接入虚拟机或者选择已有云盘挂载到接入虚拟机，然后初始化云盘；
S30、把第一云平台云盘的数据迁移到第二云平台云盘；
S40、云盘数据迁移完，清理迁移环境。
S50、在第二云平台把云盘挂载应用虚拟机，实现云盘第一云平台到第二云平台的迁移。
所述第一云平台和第二云平台为实现多云之间云盘迁移的任意2个云平台。
所述的接入虚拟机是指在多云管理的每个云平台创建一台虚拟机运行接入组件，完成迁移云盘的任务。
所述的初始化云盘是在第二云平台进行初始化云盘，第二云平台根据获取的磁盘大小创建云盘或者选择已有的云盘，挂载到接入虚拟机；
所述第二云平台进行初始化云盘是检测到第一云平台的云盘有文件系统时进行。
所述初始化云盘步骤如下：
S21、根据S10获取磁盘信息，确认第二云平台云盘的容量大小至少大于第一云平台云盘的大小；
S22、如果第二云平台云盘不存在分区，而待迁移云盘存在分区；那么根据第一云平台云盘的分区类型，把主引导记录和分区表数据写入第二云平台云盘；
S23、如果第二云平台云盘存在分区，那么确认分区大小；文件系统格式和分区uuid与第一云平台云盘一致；uuid是通用唯一识别码，为系统中的磁盘设备提供唯一的标识字符串；
S24、格式化第二云平台云盘分区，并把分区挂载到固定目录。
所述的主引导记录和分区表数据通过接入虚拟机远程复制的方式写入到第二云平台的云盘；
所述格式化第二云平台云盘分区，是根据第一云平台云盘的分区列表中的文件系统格式进行格式化，并且保持第二云平台云盘分区的uuid与第一云平台云盘分区的uuid一致；即第一云盘分区的uuid和第二云盘分区的uuid相等的，确保2个云盘使用起来是等效透明的。
所述把第一云平台云盘的数据迁移到第二云平台云盘；具体步骤如下：
S31、根据云盘硬盘信息分别将第一云平台和第二云平台的接入虚拟机挂载到固定目录；
S32、如果确认有挂载到固定目录，那么进行增量文件系统拷贝；
S33、如果没有分区和文件系统，那么进行远程块设备拷贝。
所述清理迁移环境是接入虚拟机内部把卸载云盘文件系统挂载，把云盘从接入虚拟机卸载，把第一云平台云盘的快照删除。
本发明提供了一种多云之间云盘迁移的系统和实现方法，区别传统的云盘在单一云平台或者单一数据中心迁移备份。本发明可以在多个公有云之间实现云盘快速的迁移；节省网络传输流量，无需人工干预，减少运维人员的工作量。
附图说明
下面结合附图对本发明进一步说明：
图1是实现本发明方法的架构图；
图2是本发明方法实现流程图。
具体实施方式
图1是本发明一种多云环境云盘迁移方法的架构图，多云云盘迁移主要涉及到2个组件，多云管理组件和接入组件。
所述的多云管理组件能够统一管理多个云提供商的云平台，本发明提供了结合多云管理功能实现云盘在多个云间的迁移。
所述多云管理功能指的是可以在统一管理页面对云资源进行管理。
所述第一云平台和第二云平台，只是为了解释本申请实现多云之间云盘迁移的方法，本方法不限于2个云平台，可以任意个云平台(多云)相互的迁移。
所述的接入组件，需要在每个云平台单独提供接入虚拟机运行服务。接入组件提供服务给多云管理组件调用完成具体迁移任务，多云管理组件实现每个云平台的接入组件的添加。
图2是本发明多云环境下云盘迁移方法的流程图，包括方法如下：
S10、第一云平台创建云盘快照挂载接入虚拟机，并获取云盘的磁盘信息；
所述的接入虚拟机是指在多云管理的每个云平台创建一台虚拟机运行接入组件，完成迁移云盘的任务。
所述的云盘的磁盘信息定义如下：
Figure BDA0002035746710000051
S20、第二云平台创建云盘并挂载到接入虚拟机或者选择已有云盘挂载到接入虚拟机，然后初始化云盘。
所述的初始化云盘是在第二云平台进行初始化云盘，第二云平台根据S10获取的磁盘大小创建云盘或者选择已有的云盘，挂载到接入虚拟机。
所述第二云平台进行初始化云盘是根据第一云平台的云盘信息进行云盘初始化，假如检测到第一云平台的云盘有文件系统，那么需要对第二云平台挂载到接入虚拟机的云盘进行初始化，可以有效的节省网络流量费用。
所述的节省网络流量费用是指多云环境下进行数据迁移需要公网流量，而公网流量是需要收费的。
初始化云盘有如下步骤：
S21、根据S10获取磁盘信息，确认第二云平台云盘的容量大小至少大于第一云平台云盘的大小；
S22、如果第二云平台云盘不存在分区，待迁移云盘存在分区那么根据第一云平台云盘云盘的分区类型，把主引导记录和分区表数据写入第二云平台云盘；
所述的主引导记录和分区表的数据，是通过接入虚拟机远程复制的方式把主引导记录和分区表数据写入到第二云平台的云盘。
S23、如果第二云平台云盘存在分区，那么需要确认分区大小，文件系统格式和分区uuid跟第一云平台云盘一致；
S24、格式化第二云平台云盘分区，并把分区挂载到固定目录；
所述格式化第二云平台云盘分区，是根据第一云平台云盘的分区列表中的文件系统格式进行格式化，并且保持第二云平台云盘分区的uuid跟第一云平台云盘分区的uuid一致的。
所述第二云平台云盘分区的uuid跟第一云平台云盘分区的uuid一致的是指第一云盘的分区的uuid和第二云盘的uuid是相等的，确保2个云盘使用起来的是等效透明的。
所述固定目录，具体挂载目录格式为:/rsync/分区的uuid；
S30、把第一云平台云盘的数据迁移到第二云平台云盘；
所述的把第一云平台云盘数据迁移到第二云平台云盘，有如下步骤：
S31、根据上述的云盘硬盘信息分别在第一云平台和第二云平台的接入虚拟机挂载到固定目录；
S32、如果确认有挂载到固定目录的，那么进行增量文件系统拷贝
S33、如果没有分区和文件系统，那么进行远程块设备拷贝。
S40、云盘数据迁移完，清理迁移环境。
所述的清理迁移环境，接入虚拟机内部把卸载云盘文件系统挂载，把云盘从接入虚拟机卸载，把第一云平台云盘的快照删除。
S41、在第二云平台把云盘挂载应用虚拟机，实现云盘第一云平台到第二云平台的迁移。

Claims (7)

1.一种多云环境下的云盘迁移方法，其特征在于：所述云环境包括云盘迁移系统，该云盘迁移系统包括多云管理组件和接入组件；
所述多云管理组件具有多云管理功能，实现统一管理多个云提供商的云平台；
所述接入组件，在每个云平台单独提供接入虚拟机运行服务；
接入组件提供服务给多云管理组件调用完成具体迁移任务，多云管理组件实现每个云平台接入组件的添加；
所述的方法包括以下步骤：
S10、第一云平台创建云盘快照挂载接入虚拟机，并获取云盘的磁盘信息；
S20、第二云平台创建云盘并挂载到接入虚拟机或者选择已有云盘挂载到接入虚拟机，然后初始化云盘；
S30、把第一云平台云盘的数据迁移到第二云平台云盘；
S40、云盘数据迁移完，清理迁移环境；
S50、在第二云平台把云盘挂载应用虚拟机，实现云盘第一云平台到第二云平台的迁移；
所述的初始化云盘是在第二云平台进行初始化云盘，第二云平台根据获取的磁盘大小创建云盘或者选择已有的云盘，挂载到接入虚拟机；
所述第二云平台进行初始化云盘是检测到第一云平台的云盘有文件系统时进行；
所述初始化云盘步骤如下：
S21、根据S10获取磁盘信息，确认第二云平台云盘的容量大小至少大于第一云平台云盘的大小；
S22、如果第二云平台云盘不存在分区，而待迁移云盘存在分区；那么根据第一云平台云盘的分区类型，把主引导记录和分区表数据写入第二云平台云盘；
S23、如果第二云平台云盘存在分区，那么确认分区大小；文件系统格式和分区uuid与第一云平台云盘一致；
S24、格式化第二云平台云盘分区，并把分区挂载到固定目录。
2.根据权利要求1所述的方法，其特征在于：所述的多云管理功能在多云管理组件的统一管理页面对云资源进行管理。
3.根据权利要求1所述的方法，其特征在于：所述第一云平台和第二云平台为实现多云之间云盘迁移的任意两个云平台。
4.根据权利要求1-3任一所述的方法，其特征在于：
所述的接入虚拟机是指在多云管理的每个云平台创建一台虚拟机运行接入组件，完成迁移云盘的任务。
5.根据权利要求4所述的方法，其特征在于：
所述的主引导记录和分区表数据通过接入虚拟机远程复制的方式写入到第二云平台的云盘；
所述格式化第二云平台云盘分区，是根据第一云平台云盘的分区列表中的文件系统格式进行格式化，并且保持第二云平台云盘分区的uuid与第一云平台云盘分区的uuid一致；即第一云盘分区的uuid和第二云盘分区的uuid相等的，确保两个云盘使用起来是等效透明的。
6.根据权利要求1-3任一所述的方法，其特征在于：所述把第一云平台云盘的数据迁移到第二云平台云盘；具体步骤如下：
S31、根据云盘硬盘信息分别将第一云平台和第二云平台的接入虚拟机挂载到固定目录；
S32、如果确认有挂载到固定目录，那么进行增量文件系统拷贝；
S33、如果没有分区和文件系统，那么进行远程块设备拷贝。
7.根据权利要求1-3任一所述的方法，其特征在于：所述清理迁移环境是接入虚拟机内部把卸载云盘文件系统挂载，把云盘从接入虚拟机卸载，把第一云平台云盘的快照删除。
CN201910324134.1A 2019-04-22 2019-04-22 一种多云环境下的云盘迁移系统及方法 Active CN110134330B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910324134.1A CN110134330B (zh) 2019-04-22 2019-04-22 一种多云环境下的云盘迁移系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910324134.1A CN110134330B (zh) 2019-04-22 2019-04-22 一种多云环境下的云盘迁移系统及方法

Publications (2)

Publication Number Publication Date
CN110134330A CN110134330A (zh) 2019-08-16
CN110134330B true CN110134330B (zh) 2022-07-12

Family

ID=67570612

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910324134.1A Active CN110134330B (zh) 2019-04-22 2019-04-22 一种多云环境下的云盘迁移系统及方法

Country Status (1)

Country Link
CN (1) CN110134330B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11727464B2 (en) 2020-08-31 2023-08-15 Accenture Global Solutions Limited Utilizing machine learning models to determine and recommend new releases from cloud providers to customers
CN115562570B (zh) * 2022-04-27 2023-09-12 荣耀终端有限公司 数据迁移方法、系统及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880515A (zh) * 2012-09-07 2013-01-16 浪潮电子信息产业股份有限公司 一种云海os中虚拟机快速部署方法
CN107566150A (zh) * 2016-07-01 2018-01-09 华为技术有限公司 处理云资源的方法和物理节点
CN108076156A (zh) * 2017-12-27 2018-05-25 北京航空航天大学 一种基于中国云产品的混合云系统
CN108200022A (zh) * 2017-12-22 2018-06-22 新华三云计算技术有限公司 一种云平台接入方法、装置及多云平台管理系统
CN108763405A (zh) * 2018-05-22 2018-11-06 深信服网络科技（深圳）有限公司 一种业务数据迁移方法、装置、系统及可读存储介质
CN109547553A (zh) * 2018-11-29 2019-03-29 国电南瑞科技股份有限公司 基于私有云的区域变电站管理系统及管理方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8799413B2 (en) * 2010-05-03 2014-08-05 Panzura, Inc. Distributing data for a distributed filesystem across multiple cloud storage systems
US9461969B2 (en) * 2013-10-01 2016-10-04 Racemi, Inc. Migration of complex applications within a hybrid cloud environment

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880515A (zh) * 2012-09-07 2013-01-16 浪潮电子信息产业股份有限公司 一种云海os中虚拟机快速部署方法
CN107566150A (zh) * 2016-07-01 2018-01-09 华为技术有限公司 处理云资源的方法和物理节点
CN108200022A (zh) * 2017-12-22 2018-06-22 新华三云计算技术有限公司 一种云平台接入方法、装置及多云平台管理系统
CN108076156A (zh) * 2017-12-27 2018-05-25 北京航空航天大学 一种基于中国云产品的混合云系统
CN108763405A (zh) * 2018-05-22 2018-11-06 深信服网络科技（深圳）有限公司 一种业务数据迁移方法、装置、系统及可读存储介质
CN109547553A (zh) * 2018-11-29 2019-03-29 国电南瑞科技股份有限公司 基于私有云的区域变电站管理系统及管理方法

Also Published As

Publication number Publication date
CN110134330A (zh) 2019-08-16

Similar Documents

Publication Publication Date Title
US10073747B2 (en) Reducing recovery time in disaster recovery/replication setup with multitier backend storage
US10169173B2 (en) Preserving management services with distributed metadata through the disaster recovery life cycle
US11461034B2 (en) Envoy for multi-tenant compute infrastructure
US11829263B2 (en) In-place cloud instance restore
US11663085B2 (en) Application backup and management
US9858322B2 (en) Data stream ingestion and persistence techniques
US9652326B1 (en) Instance migration for rapid recovery from correlated failures
US10158579B2 (en) Resource silos at network-accessible services
US10754741B1 (en) Event-driven replication for migrating computing resources
US10061665B2 (en) Preserving management services with self-contained metadata through the disaster recovery life cycle
US10922283B2 (en) File synchronization
US11366682B1 (en) Automatic snapshotting for recovery of instances with local storage
US11663093B2 (en) Automated development of recovery plans
US20170235587A1 (en) Transitioning volumes between storage virtual machines
CN110134330B (zh) 一种多云环境下的云盘迁移系统及方法
US20200092286A1 (en) Multiple domain authentication using data management and storage node
US20200265008A1 (en) Converting storage objects between formats in a copy-free transition
US10628055B2 (en) Management of storage replication consistency groups using automatic replication group identifiers
CN105988898A (zh) 系统的备份装置以及备份方法
CN117992283A (zh) 云主机备份方法、装置、计算机设备及存储介质
US11662928B1 (en) Snapshot management across cloud provider network extension security boundaries
CN110058963B (zh) 用于管理存储系统的方法、设备和计算机程序产品
US12001872B2 (en) Object tiering from local store to cloud store
US11809735B1 (en) Snapshot management for cloud provider network extensions
CN113626251A (zh) 用于迁移备份系统的方法、设备和计算机程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant