CN106469117B - 一种用于虚拟机存储迁移的存储资源管理方法及装置 - Google Patents

一种用于虚拟机存储迁移的存储资源管理方法及装置 Download PDF

Info

Publication number
CN106469117B
CN106469117B CN201510501568.6A CN201510501568A CN106469117B CN 106469117 B CN106469117 B CN 106469117B CN 201510501568 A CN201510501568 A CN 201510501568A CN 106469117 B CN106469117 B CN 106469117B
Authority
CN
China
Prior art keywords
virtual machine
storage
migration
disk
space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510501568.6A
Other languages
English (en)
Other versions
CN106469117A (zh
Inventor
赖培源
刘艺
樊勇兵
马卫民
金华敏
陈楠
丁圣勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN201510501568.6A priority Critical patent/CN106469117B/zh
Publication of CN106469117A publication Critical patent/CN106469117A/zh
Application granted granted Critical
Publication of CN106469117B publication Critical patent/CN106469117B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种用于虚拟机存储迁移的存储资源管理方法及装置,其方法包括:接收虚拟机代理收集的虚拟机的磁盘使用信息;根据磁盘使用信息确定虚拟机的存储融合策略;对虚拟机进行存储迁移,在存储迁移的过程中基于存储融合策略进行磁盘融合和空间回收。本发明的用于虚拟机存储迁移的存储资源管理方法及装置,能够在存储迁移过程中对可释放的空间进行检测并回收,能提高资源利用率,并有利于虚拟机操作系统性能的提升,通过多虚拟机的数据融合能有效减少存储资源的占用,提升资源的利用率。

Description

一种用于虚拟机存储迁移的存储资源管理方法及装置
技术领域
本发明涉及云存储技术领域,尤其涉及一种用于虚拟机存储迁移的存储资源管理方法及装置。
背景技术
随着虚拟化技术的广泛应用,IT资源将成为像水电一样可运营的基础设施,云数据中心作为重要的云基础设施的承载体,其资源管理成为重要的研究课题。虚拟机的实时迁移是大多数虚拟机管理器不可或缺的工具,被广泛地应用在数据中心的容错、灾备及负载均衡中。目前虚拟机实时迁移主要有三种方式,包括计算迁移、存储迁移和全系统迁移(存储和计算同时迁移),除了实时在线迁移外,离线迁移也是虚拟机管理的一种方式。
虚拟机存储迁移是指在虚拟机运行时将虚拟机的磁盘文件从一个数据存储迁移到另一个数据存储,并进行维护和重新配置,也称为虚拟机的数据迁移。在线存储迁移的应用非常多,例如,无需虚拟机停机即可将虚拟机从某一存储设备上移开,进而对存储设备进行维护和重新配置。此外,也可以通过在线存储迁移,将虚拟机的存储位置进行调整,实现存储资源的重新分配,从而平衡容量或提高性能。通过现在的存储迁移机制将虚拟机的磁盘文件搬迁到另外一个存储空间内,资源占用上没有实质性改善;随着虚拟机的运行数据不断增大,磁盘规格持续增长,仅靠数据搬迁难以从根本上解决容量管理问题。
发明内容
有鉴于此,本发明要解决的一个技术问题是提供一种用于虚拟机存储迁移的存储资源管理方法和装置,能够在存储迁移的过程中进行磁盘融合和空间回收。
一种用于虚拟机存储迁移的存储资源管理方法,包括:接收虚拟机代理收集的虚拟机的磁盘使用信息;根据所述磁盘使用信息确定所述虚拟机的存储融合策略;对所述虚拟机进行存储迁移,在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收。
根据本发明的一个实施例,进一步的,所述对所述虚拟机进行存储迁移,在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收包括:通知物理主机所述多台虚拟机的基本信息和目标存储器信息;在所述目标存储器上部署多台所述虚拟机共用的镜像模板;接收所述虚拟机代理获取多台所述虚拟机中实际运行的第一系统镜像相对于所述镜像模板的增量镜像文件;在迁移过程中,基于所述增量镜像文件和所述镜像模板的数据在所述目标存储器上分别生成多个所述虚拟机的第二系统镜像。
根据本发明的一个实施例,进一步的,在迁移完成后,多个所述虚拟机的系统数据和用户数据分离存储,通过所述第二系统镜像启动所述虚拟机,并将用户数据以磁盘形式挂载。
根据本发明的一个实施例,进一步的,所述根据所述磁盘使用信息确定所述虚拟机的存储融合策略包括:在迁移之前通知虚拟机代理进行磁盘整理;所述虚拟机代理对所述虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理;根据所述虚拟机代理返回的可回收的磁盘空间大小以及所述虚拟机占用的磁盘空间,确定所述虚拟机在目标存储器上被分配的存储空间的大小。
根据本发明的一个实施例,进一步的,采用瘦供给策略分配所述虚拟机的存储空间;当所述虚拟机写入数据时,新分配给所述虚拟机用于存储此数据的增量存储空间;当此数据被删除时,基于此瘦供给策略对所述增量存储空间不能进行磁盘空间回收;所述虚拟机代理在存储迁移时,对可释放的增量存储空间进行置零操作,并不对该可释放的增量存储空间的磁盘数据进行迁移传输。
根据本发明的一个实施例,进一步的,在迁移过程中,接收所述虚拟机代理发送的所述虚拟机中需要迁移的文件,并复制到所述虚拟机在目标存储器上被分配的存储空间中。
根据本发明的一个实施例,进一步的,按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给所述虚拟机实际占用的存储空间。
根据本发明的一个实施例,进一步的,当判断所述虚拟机处于空闲状态时,进行存储迁移操作。
一种用于存储迁移的资源管理装置,包括:磁盘信息接收单元,用于接收虚拟机代理收集的虚拟机的磁盘使用信息;融合策略单元,用于根据所述磁盘使用信息确定所述虚拟机的存储融合策略;迁移控制单元,用于对所述虚拟机进行存储迁移,在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收。
根据本发明的一个实施例,进一步的,所述迁移控制单元,包括:存储信息发送子模块,用于通知物理主机所述多台虚拟机的基本信息和目标存储器信息;镜像模板建立子模块,用于在所述目标存储器上部署多台所述虚拟机共用的镜像模板;增量文件接收子模块,用于接收所述虚拟机代理获取多台所述虚拟机中实际运行的第一系统镜像相对于所述镜像模板的增量镜像文件;系统镜像创建子模块,用于在迁移过程中,基于所述增量镜像文件和所述镜像模板的数据在所述目标存储器上分别生成多个所述虚拟机的第二系统镜像。
根据本发明的一个实施例,进一步的,在迁移完成后,多个所述虚拟机的系统数据和用户数据分离存储,通过所述第二系统镜像启动所述虚拟机,并将用户数据以磁盘形式挂载。
根据本发明的一个实施例,进一步的,所述融合策略单元,包括:磁盘整理通知子模块,用于在迁移之前通知虚拟机代理进行磁盘整理;其中,所述虚拟机代理对所述虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理;存储空间确定子模块,用于根据所述虚拟机代理返回的可回收的磁盘空间大小以及所述虚拟机占用的磁盘空间,确定所述虚拟机在目标存储器上被分配的存储空间的大小。
根据本发明的一个实施例,进一步的,采用瘦供给策略分配所述虚拟机的存储空间;当所述虚拟机写入数据时,新分配给所述虚拟机用于存储此数据的增量存储空间;当此数据被删除时,基于此瘦供给策略对所述增量存储空间不能进行磁盘空间回收;所述虚拟机代理在存储迁移时,对可释放的增量存储空间进行置零操作,并不对该可释放的增量存储空间的磁盘数据进行迁移传输。
根据本发明的一个实施例,进一步的,所述迁移控制单元,包括:用户数据迁移子模块,用于在迁移过程中,接收所述虚拟机代理发送的所述虚拟机中需要迁移的文件,并复制到所述虚拟机在目标存储器上被分配的存储空间中。
根据本发明的一个实施例,进一步的,所述迁移控制单元,还包括:存储空间分配子模块,用于按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给所述虚拟机实际占用的存储空间。
根据本发明的一个实施例,进一步的,所述迁移控制单元,还用于当判断所述虚拟机处于空闲状态时,进行存储迁移操作。
本发明的用于虚拟机存储迁移的存储资源管理方法及装置,能够在存储迁移过程中对可释放的空间进行检测并回收,能提高资源利用率,多虚拟机的数据融合能有效减少存储资源的占用,提升资源的利用率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为根据本发明的用于虚拟机存储迁移的存储资源管理方法的一个实施例的流程图;
图2为现有技术中的存储迁移的一个应用场景示意图;
图3为本发明的存储资源管理方法应用于存储迁移的一个应用场景示意图;
图4为本发明的用于虚拟机存储迁移的存储资源管理方法中建立系统镜像的示意图;
图5为根据本发明的用于虚拟机存储迁移的存储资源管理装置的一个实施例的模块示意图;
图6为根据本发明的用于虚拟机存储迁移的存储资源管理装置的一个实施例中的迁移控制单元的模块示意图;
图7为根据本发明的用于虚拟机存储迁移的存储资源管理装置的一个实施例中的融合策略单元的模块示意图。
具体实施方式
下面参照附图对本发明进行更全面的描述,其中说明本发明的示例性实施例。下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。下面结合各个图和实施例对本发明的技术方案进行多方面的描述。
下文中的“第一”、“第二”等为描述上进行区别,并没有其它特殊的含义。
图1为根据本发明的用于虚拟机存储迁移的存储资源管理方法的一个实施例的流程图,如图1所示:
步骤101,接收虚拟机代理收集的虚拟机的磁盘使用信息。
步骤102,根据磁盘使用信息确定虚拟机的存储融合策略。
步骤103,对虚拟机进行存储迁移,在存储迁移的过程中基于存储融合策略进行磁盘融合和空间回收。
在一个实施例中,通知物理主机多台虚拟机的基本信息和目标存储器信息,在目标存储器上部署多台虚拟机共用的镜像模板。接收虚拟机代理获取多台虚拟机中实际运行的第一系统镜像相对于镜像模板的增量镜像文件。
在迁移过程中,基于增量镜像文件和镜像模板的数据在目标存储器上分别生成多个虚拟机的第二系统镜像。在迁移完成后,多个虚拟机的系统数据和用户数据分离存储,通过第二系统镜像启动虚拟机,并将用户数据以磁盘形式挂载。
目前,实现在线存储迁移的产品主要有VMWare公司的vsphere产品,该功能名称为Storage VMotion。Storage VMotion通过磁盘快照、REDO log、父/子磁盘关系和快照整合等核心技术,支持在虚拟机运行时进行独立于LUN的虚拟机磁盘文件迁移,如图2所示。
移动磁盘文件之前,Storage VMotion会在目标数据存储中为虚拟机创建一个新的虚拟机主目录。接着,将会创建一个新的虚拟机实例,其配置保留在新的数据存储中。然后,Storage VMotion会为每个要移动的虚拟机磁盘创建一个子磁盘,用于在父磁盘处于只读模式的同时捕获写活动的副本。跟着Storage VMotion会将原始父磁盘复制到新的存储位置。子磁盘重新成为新位置中新复制的父磁盘的父磁盘。当完成到新虚拟机副本的转移后,原始实例将关闭。最后,从VMware vStorage原存储中删除源位置的原始虚拟机主目录。
目前的Storage Vmotion虽然能实现虚拟机的数据搬迁,但只是通过将虚拟机的磁盘文件搬迁到另外一个存储空间内,资源占用上没有实质性改善。随着虚拟机的运行数据不断增大,磁盘规格持续增长,仅靠数据搬迁难以从根本上解决容量管理问题。同时,目前虚拟机的磁盘空间回收方面,也没有有效地解决方案,如虚拟机的客户操作系统(GuestOS)中删除的一些大文件空间,通常仍会继续占用实际的物理存储,而没有得到实际的释放。
在空间回收方面,有一种离线的方法,镜像文件管理工具先通过中断虚拟机服务,手动扫描虚拟磁盘或记录文件,才能回收废弃数据。对于在线的空间回收方面,虚拟机镜像文件的废弃空间回收系统VMcol(Garbage Collector for Virtual Machine Image)可在保证用户透明性和虚拟机可用性的前提下,自动回收虚拟机镜像文件的废弃空间。该系统由用户删除操作监控和废弃空间处理两个部分组成。
当用户在虚拟机内进行删除操作时,用户删除操作监控实时捕获删除操作和解析删除节点的信息,从而获取有效信息,然后利用信息传递模型及时把信息传递给废弃空间处理层。废弃空间处理根据传来的信息,通过信息转换解析镜像文件格式,无需扫描镜像文件就可以确定对应在虚拟机镜像文件中废弃数据的位置,然后在保持虚拟机可用性情况下,删除文件中的废弃数据。
微软基于其一体化的windows操作系统的Windows Kernel和基于windows的虚拟化Windows Hypervisor,曾提出了一些回收的方法,但是基于删除操作的监控,严重影响虚拟机的运行性能且管理开销较大。
在虚拟桌面领域,也有一些磁盘回收的方法,如在vSphere 5.1和更高版本中,可以启用View的磁盘空间回收功能。从vSphere 5.1开始,View能够以高效的磁盘格式创建链接克隆虚拟机,这种磁盘格式允许ESXi主机回收链接克隆中未使用的磁盘空间,从而减少链接克隆所需的总存储空间。通过磁盘空间回收,View可以将链接克隆的大小保持在接近于这些克隆初次部署后启动时的较小大小,类似于系统还原场景。但其要求虚拟机之间是一种基于同一磁盘模板进行链接式创建的模式,且是针对相同内容上的未使用空间,在应用上仍存有一定的局限性,如对于非虚拟桌面的常规使用模式下,虚拟机中大文件的删除场景等。
在本发明的一个实施例中,根据磁盘使用信息确定虚拟机的存储融合策略包括:通知虚拟机代理进行磁盘整理。虚拟机代理对虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理。根据虚拟机代理返回的可回收的磁盘空间大小以及虚拟机占用的磁盘空间,确定虚拟机在目标存储器上被分配的存储空间的大小。
采用瘦供给策略分配所述虚拟机的存储空间;当虚拟机写入数据时,新分配给虚拟机用于存储此数据的增量存储空间;当此数据被删除时,由于采用瘦供给策略,资源管理系统对增量存储空间不能进行磁盘空间回收。虚拟机代理在存储迁移时,对可释放的增量存储空间进行置零操作,并无需对该可释放的增量存储空间的磁盘数据进行迁移传输。
如图3所示,利用虚拟机做存储迁移的过程,将客户机操作系统中已删除的文件空间进行释放,在多虚拟机迁移时进行数据的融合,有效降低存储资源的占用。虚拟机中被遗忘的数据对象可能会引起虚拟化存储的性能下降,清理这些数据对象并回收存储空间,对可存储空间进行重复使用。
在迁移过程中,接收虚拟机代理发送的虚拟机中需要迁移的文件,并复制到虚拟机在目标存储器上被分配的存储空间中。按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给虚拟机实际占用的存储空间。当判断虚拟机处于空闲状态时,进行存储迁移操作。
上述实施例提供的用于虚拟机存储迁移的存储资源管理方法,解决了如何在虚拟机资源管理中对存储资源进行高效的回收问题,提出了基于虚拟机的存储迁移机制,在数据搬迁过程中,基于虚拟机代理的方式对虚拟机的空闲资源空间进行有效的回收,从而可以将集中化的存储资源池进行更加高效的分配管理。
在一个实施例中,由虚拟机内安装的虚拟机代理软件收集虚拟机的磁盘使用情况,并上报给资源管理系统(也可以为其它的装置或系统)。资源管理系统决定对哪些虚拟机进行存储整理及融合策略,例如,对其中相同镜像且IO需求不高的虚拟机,可设定磁盘融合策略,对于有较大的可回收空间,可在存储迁移时进行磁盘文件的整理和空间的回收。在业务系统处于较为空闲时,资源管理系统发起存储资源整理命令。
针对与虚拟机的磁盘融合:为了节约存储空间和方便系统升级,将虚拟机镜像中的系统数据和用户数据分离存储是云资源池内常见的做法,目前主流的使用方法是以系统镜像启动虚拟机,再将用户数据以磁盘形式挂载。因此,对于相同镜像模板构建的虚拟机具有基本一致的系统盘,可以通过虚拟机的存储迁移中,进行磁盘镜像的合并。
由于被资源管理平台(也可以为其它的装置或系统)设定为可融合的虚拟机都具有相同的镜像模板,因此其系统盘的数据具有很强的一致性。首先,迁移控制器(也可以为其它的装置或系统)通知物理主机要迁移的多台虚拟机的基本信息和目标存储器信息,并在目标存储上部署虚拟机的镜像模板。然后,资源管理平台通知虚拟机中的虚拟化代理模块,对差异化的镜像内容进行增量提取,形成一个增量的虚拟机镜像。这个增量内容为虚拟机相对镜像文件已有的变化,以及常用的文件。
接着,迁移控制器进行虚拟机的存储迁移,在迁移过程中,主要迁移增量镜像,并建立增量镜像和目标存储器上的镜像文件的数据关系。最后,按照迁移后虚拟机的实际存储空间和系统的存储“瘦供给”策略分配虚拟机的实际占用存储空间,该存储“瘦供给”策略可以是10%的预留、50%的预留,或更加复杂的系统策略。完成一次虚拟机融合过程。
在一个实施例中,假设系统中有虚拟机A和虚拟机B、虚拟机C共三台虚拟机,其虚拟机镜像中的系统数据和用户数据都是分离存储,即以系统镜像启动虚拟机,再将用户数据以磁盘形式挂载。如图4所示,因此,三台虚拟机具有基本一致的系统盘,可以通过虚拟机的存储迁移中,进行磁盘镜像的合并。同时,三台虚拟机都安装了可以和资源管理平台直接通信的代理模块,且能有效获取虚拟机对系统镜像的修改情况。
首先,迁移控制器在目标存储上部署三台虚拟机共同的镜像模板。然后,资源管理平台分别通知三台虚拟机中的虚拟化代理模块,对三台虚拟机的差异化的镜像内容进行增量提取,形成一个增量的虚拟机镜像。这个增量内容为虚拟机相对镜像文件已有的变化,以及镜像中的常用的文件。
为了提升迁移后虚拟机的运行性能,只是对镜像文件中的“冷数据”进行融合,而经常使用的系统文件仍保留在虚拟机的增量镜像文件中。接着,迁移控制器进行虚拟机的存储迁移,在迁移过程中,主要迁移增量镜像,并建立增量镜像和目标存储器上的镜像文件的数据关系,如附图3所示。
最后,按照迁移后虚拟机的实际存储空间和系统的存储“瘦供给”策略分配虚拟机的实际占用存储空间,该存储“瘦供给”策略可以是10%的预留、50%的预留,或更加复杂的系统策略。完成一次虚拟机融合过程。
针对于空间回收:在虚拟机的存储使用中,现有的云资源池大多使用了瘦供给(也称为“精简配置”)的存储空间模式,例如资源管理系统给虚拟机创建一个20GB的磁盘,但实际创建时只占用底层存储的很少一部分空间,如1GB,之后只有在数据写入时才逐步增加分配实际空间。
而当虚拟机写入后进行擦除时,如删除虚拟机中的文件,则资源管理系统不能进行磁盘空间的有效回收,这种无效的占用空间也通常也被称为“僵死”空间。因此,以资源管理平台根据系统的负荷情况,选择一个合适的轻负载时机,在虚拟机的存储迁移中,对可释放的存储空间进行回收。
首先,资源管理平台通知虚拟机的代理进行系统内部的磁盘整理,对可释放的存储空间进行置零操作,并对小碎片进行合并化处理。然后将可回收的空间大小上报给资源管理平台,资源管理平台决定在目标存储上给虚拟机分配的迁移后空间,并启动虚拟机的存储迁移。
接着,由虚拟机的代理和迁移控制器配合,将虚拟机中需要迁移的文件进行复制到目标存储上,而已置零的空间则得到有效的释放,合并后的碎片文件可加速存储迁移过程和迁移后虚拟机的系统运行效率。
最后,迁移控制器按照一般的存储迁移流程完成虚拟机的存储迁移数据检查和增量数据同步,并由资源管理平台开始重实施存储的“瘦供给”过程,即有实际写入需求时,才进行虚拟机的空间分配。
在一个实施例中,首先,资源管理平台通知虚拟机的代理进行系统内部的磁盘整理,对可释放的存储空间进行置零操作,并对小碎片进行合并化处理,如对虚拟机A中已删除的电影文件空间进行全部置零,对小于5kB的小文件进行合并整理在一个连续的存储空间内。
然后将可回收的空间大小上报给资源管理平台,资源管理平台决定在目标存储上给虚拟机分配的迁移后空间,并启动虚拟机的存储迁移。接着,由虚拟机的代理和迁移控制器配合,将虚拟机中需要迁移的文件进行复制到目标存储上,而已置零的空间则得到有效的释放,合并后的碎片文件可加速存储迁移过程和迁移后虚拟机的系统运行效率。
最后,迁移控制器按照一般的存储迁移流程完成虚拟机的存储迁移数据检查和增量数据同步,并由资源管理平台开始重实施存储的“瘦供给”过程,即有实际写入需求时,才进行虚拟机的空间分配。
本发明提供一种用于存储迁移的资源管理装置,如图5所示,磁盘信息接收单元41接收虚拟机代理收集的虚拟机的磁盘使用信息。融合策略单元42根据磁盘使用信息确定虚拟机的存储融合策略。迁移控制单元43对虚拟机进行存储迁移,在存储迁移的过程中基于存储融合策略进行磁盘融合和空间回收。迁移控制单元43当判断虚拟机处于空闲状态时,进行存储迁移操作。
如图6所示,迁移控制单元43包括多个子模块。存储信息发送子模块431通知物理主机多台虚拟机的基本信息和目标存储器信息。镜像模板建立子模块432在目标存储器上部署多台虚拟机共用的镜像模板。增量文件接收子模块433接收虚拟机代理获取多台虚拟机中实际运行的第一系统镜像相对于镜像模板的增量镜像文件。
系统镜像创建子模块434在迁移过程中,基于增量镜像文件和镜像模板的数据在目标存储器上分别生成多个虚拟机的第二系统镜像。在迁移完成后,多个虚拟机的系统数据和用户数据分离存储,通过第二系统镜像启动虚拟机,并将用户数据以磁盘形式挂载。
用户数据迁移子模块435在迁移过程中,接收虚拟机代理发送的虚拟机中需要迁移的文件,并复制到虚拟机在目标存储器上被分配的存储空间中。存储空间分配子模块436按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给虚拟机实际占用的存储空间。
如图7所示,融合策略单元42包括多个子模块。磁盘整理通知子模块421通知虚拟机代理进行磁盘整理。虚拟机代理对虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理。存储空间确定子模块422根据虚拟机代理返回的可回收的磁盘空间大小以及虚拟机占用的磁盘空间,确定虚拟机在目标存储器上被分配的存储空间的大小。
上述实施例提供的用于虚拟机存储迁移的存储资源管理方法及装置,能够在存储迁移过程中对可释放的空间进行检测并回收,能提高资源利用率,并有利于虚拟机操作系统性能的提升,通过多虚拟机的数据融合能有效减少存储资源的占用,提升资源的利用率。
可能以许多方式来实现本发明的方法和系统。例如,可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本发明的方法和系统。用于方法的步骤的上述顺序仅是为了进行说明,本发明的方法的步骤不限于以上具体描述的顺序,除非以其它方式特别说明。此外,在一些实施例中,还可将本发明实施为记录在记录介质中的程序,这些程序包括用于实现根据本发明的方法的机器可读指令。因而,本发明还覆盖存储用于执行根据本发明的方法的程序的记录介质。
本发明的描述是为了示例和描述起见而给出的,而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用,并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。

Claims (14)

1.一种用于虚拟机存储迁移的存储资源管理方法,其特征在于,包括:
接收虚拟机代理收集的虚拟机的磁盘使用信息;
根据所述磁盘使用信息确定所述虚拟机的存储融合策略;
对所述虚拟机进行存储迁移,在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收;
其中,接收所述虚拟机代理获取多台所述虚拟机中实际运行的第一系统镜像相对于镜像模板的增量镜像文件;在迁移过程中,基于所述增量镜像文件和所述镜像模板的数据在目标存储器上分别生成多个所述虚拟机的第二系统镜像;
所述虚拟机代理在存储迁移时,对可释放的增量存储空间进行置零操作,并不对该可释放的增量存储空间的磁盘数据进行迁移传输;在迁移完成后,多个所述虚拟机的系统数据和用户数据分离存储,通过所述第二系统镜像启动所述虚拟机,并将用户数据以磁盘形式挂载。
2.如权利要求1所述的存储资源管理方法,其特征在于,所述对所述虚拟机进行存储迁移、在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收包括:
通知物理主机多台虚拟机的基本信息和目标存储器信息;
在所述目标存储器上部署多台所述虚拟机共用的镜像模板。
3.如权利要求2所述的存储资源管理方法,其特征在于,所述根据所述磁盘使用信息确定所述虚拟机的存储融合策略包括:
在迁移之前通知所述虚拟机代理进行磁盘整理;
所述虚拟机代理对所述虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理;
根据所述虚拟机代理返回的可回收的磁盘空间大小以及所述虚拟机占用的磁盘空间,确定所述虚拟机在目标存储器上被分配的存储空间的大小。
4.如权利要求3所述的存储资源管理方法,其特征在于,包括:
采用瘦供给策略分配所述虚拟机的存储空间;
当所述虚拟机写入数据时,新分配给所述虚拟机用于存储此数据的增量存储空间;当此数据被删除时,基于此瘦供给策略对所述增量存储空间不能进行磁盘空间回收。
5.如权利要求3所述的存储资源管理方法,其特征在于:
在迁移过程中,接收所述虚拟机代理发送的所述虚拟机中需要迁移的文件,并复制到所述虚拟机在目标存储器上被分配的存储空间中。
6.如权利要求3所述的存储资源管理方法,其特征在于:
按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给所述虚拟机实际占用的存储空间。
7.如权利要求1所述的存储资源管理方法,其特征在于:
当判断所述虚拟机处于空闲状态时,进行存储迁移操作。
8.一种用于存储迁移的资源管理装置,其特征在于,包括:
磁盘信息接收单元,用于接收虚拟机代理收集的虚拟机的磁盘使用信息;
融合策略单元,用于根据所述磁盘使用信息确定所述虚拟机的存储融合策略;
迁移控制单元,用于对所述虚拟机进行存储迁移,在存储迁移的过程中基于所述存储融合策略进行磁盘融合和空间回收;
所述迁移控制单元,包括:
增量文件接收子模块,用于接收所述虚拟机代理获取多台所述虚拟机中实际运行的第一系统镜像相对于镜像模板的增量镜像文件;
系统镜像创建子模块,用于在迁移过程中,基于所述增量镜像文件和所述镜像模板的数据在目标存储器上分别生成多个所述虚拟机的第二系统镜像;
所述虚拟机代理在存储迁移时,对可释放的增量存储空间进行置零操作,并不对该可释放的增量存储空间的磁盘数据进行迁移传输;在迁移完成后,多个所述虚拟机的系统数据和用户数据分离存储,通过所述第二系统镜像启动所述虚拟机,并将用户数据以磁盘形式挂载。
9.如权利要求8所述的资源管理装置,其特征在于:
所述迁移控制单元,包括:
存储信息发送子模块,用于通知物理主机多台虚拟机的基本信息和目标存储器信息;
镜像模板建立子模块,用于在所述目标存储器上部署多台所述虚拟机共用的镜像模板。
10.如权利要求9所述的资源管理装置,其特征在于:
所述融合策略单元,包括:
磁盘整理通知子模块,用于在迁移之前通知虚拟机代理进行磁盘整理;其中,所述虚拟机代理对所述虚拟机的可释放存储空间进行置零操作,并对存储空间的小碎片进行合并化处理;
存储空间确定子模块,用于根据所述虚拟机代理返回的可回收的磁盘空间大小以及所述虚拟机占用的磁盘空间,确定所述虚拟机在目标存储器上被分配的存储空间的大小。
11.如权利要求10所述的资源管理装置,其特征在于:
采用瘦供给策略分配所述虚拟机的存储空间;当所述虚拟机写入数据时,新分配给所述虚拟机用于存储此数据的增量存储空间;当此数据被删除时,基于此瘦供给策略对所述增量存储空间不能进行磁盘空间回收。
12.如权利要求10所述的资源管理装置,其特征在于:
用户数据迁移子模块,用于在迁移过程中,接收所述虚拟机代理发送的所述虚拟机中需要迁移的文件,并复制到所述虚拟机在目标存储器上被分配的存储空间中。
13.如权利要求10所述的资源管理装置,其特征在于:
所述迁移控制单元,还包括:
存储空间分配子模块,用于按照迁移后虚拟机的实际存储空间以及瘦供给策略分配给所述虚拟机实际占用的存储空间。
14.如权利要求9所述的资源管理装置,其特征在于:
所述迁移控制单元,还用于当判断所述虚拟机处于空闲状态时,进行存储迁移操作。
CN201510501568.6A 2015-08-14 2015-08-14 一种用于虚拟机存储迁移的存储资源管理方法及装置 Active CN106469117B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510501568.6A CN106469117B (zh) 2015-08-14 2015-08-14 一种用于虚拟机存储迁移的存储资源管理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510501568.6A CN106469117B (zh) 2015-08-14 2015-08-14 一种用于虚拟机存储迁移的存储资源管理方法及装置

Publications (2)

Publication Number Publication Date
CN106469117A CN106469117A (zh) 2017-03-01
CN106469117B true CN106469117B (zh) 2020-07-31

Family

ID=58214125

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510501568.6A Active CN106469117B (zh) 2015-08-14 2015-08-14 一种用于虚拟机存储迁移的存储资源管理方法及装置

Country Status (1)

Country Link
CN (1) CN106469117B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110399248B (zh) * 2018-04-25 2023-08-15 阿里巴巴集团控股有限公司 一种镜像文件创建、获取方法、装置及服务器
CN109408115B (zh) * 2018-09-12 2022-03-04 上海华云互越数据技术有限公司 一种基于容器环境中迁移对象的方法及计算系统
CN109597671B (zh) * 2018-12-11 2022-06-10 国云科技股份有限公司 一种兼容集中式和分布式运行的桌面云实现方法
CN110413378A (zh) * 2019-07-30 2019-11-05 上海金融期货信息技术有限公司 一种云计算下的计算资源创建方法和系统
CN112667148A (zh) * 2020-11-30 2021-04-16 上海七牛信息技术有限公司 一种集群存储数据在线迁移的方法及系统
CN113553142B (zh) * 2021-09-18 2022-01-25 云宏信息科技股份有限公司 云平台的存储空间整理方法、配置方法及可读存储介质
CN115016901B (zh) * 2022-08-09 2022-10-14 中航金网(北京)电子商务有限公司 一种虚拟机的迁移方法、装置、介质、及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103092678A (zh) * 2013-01-22 2013-05-08 华中科技大学 一种多增量虚拟机内存管理系统和方法
CN103810016A (zh) * 2012-11-09 2014-05-21 北京华胜天成科技股份有限公司 实现虚拟机迁移的方法、装置和集群系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8429630B2 (en) * 2005-09-15 2013-04-23 Ca, Inc. Globally distributed utility computing cloud
US8176486B2 (en) * 2007-02-15 2012-05-08 Clearcube Technology, Inc. Maintaining a pool of free virtual machines on a server computer
US8490092B2 (en) * 2011-07-06 2013-07-16 Microsoft Corporation Combined live migration and storage migration using file shares and mirroring
US9378255B2 (en) * 2012-05-11 2016-06-28 Sap Se Cloud logistics
US10007533B2 (en) * 2012-08-22 2018-06-26 V3 Systems Holdings, Inc. Virtual machine migration

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103810016A (zh) * 2012-11-09 2014-05-21 北京华胜天成科技股份有限公司 实现虚拟机迁移的方法、装置和集群系统
CN103092678A (zh) * 2013-01-22 2013-05-08 华中科技大学 一种多增量虚拟机内存管理系统和方法

Also Published As

Publication number Publication date
CN106469117A (zh) 2017-03-01

Similar Documents

Publication Publication Date Title
CN106469117B (zh) 一种用于虚拟机存储迁移的存储资源管理方法及装置
US9672075B2 (en) Method, apparatus, and system for implementing hot migration of virtual machine
CN111488241B (zh) 在容器编排平台实现无代理备份与恢复操作的方法和系统
US10338966B2 (en) Instantiating containers with a unified data volume
US9870291B2 (en) Snapshotting shared disk resources for checkpointing a virtual machine cluster
US8307363B2 (en) Virtual machine system, restarting method of virtual machine and system
US9477683B2 (en) Techniques for enabling coarse-grained volume snapshots for virtual machine backup and restore
US9552405B1 (en) Methods and apparatus for recovery of complex assets in distributed information processing systems
CN104050045B (zh) 基于磁盘io的虚拟资源分配方法及装置
US9201736B1 (en) Methods and apparatus for recovery of complex assets in distributed information processing systems
US8843717B2 (en) Maintaining consistency of storage in a mirrored virtual environment
CN104461744A (zh) 一种资源分配方法及装置
US20140344810A1 (en) Resource management method and apparatus for virtual machine system, and virtual machine system
WO2021018267A1 (zh) 虚拟机热迁移方法和通信设备
JP6316895B2 (ja) ホスト側フラッシュストレージデバイスの容量を仮想マシンに利用可能にする技術
CN107656797A (zh) 跨虚拟化平台迁移虚拟机的方法和装置
JP2008033500A (ja) 計算機、計算機システム、及びディスクイメージ配布方法
CN106815067A (zh) 带i/o虚拟化的虚拟机在线迁移方法、装置
CN107402839A (zh) 一种备份数据的方法及系统
CN111381933A (zh) 一种Docker热迁移实现方法
CN109376036A (zh) 一种用于备份虚拟机的方法和装置
CN112181601A (zh) 基于脏化速率预测的内存预拷贝及虚拟机迁移方法及系统
JP6879960B2 (ja) バックアップ制御方法及びシステム
US20140380089A1 (en) Method and apparatus for recovering failed disk in virtual machine
CN109947704B (zh) 一种锁类型切换方法、装置及集群文件系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant