CN106095527A - 一种适用于云平台虚拟机的存储池实现方法 - Google Patents

一种适用于云平台虚拟机的存储池实现方法 Download PDF

Info

Publication number
CN106095527A
CN106095527A CN201610402376.4A CN201610402376A CN106095527A CN 106095527 A CN106095527 A CN 106095527A CN 201610402376 A CN201610402376 A CN 201610402376A CN 106095527 A CN106095527 A CN 106095527A
Authority
CN
China
Prior art keywords
virtual machine
storage pool
rbd
file
block device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610402376.4A
Other languages
English (en)
Inventor
熊梦
杨松
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201610402376.4A priority Critical patent/CN106095527A/zh
Publication of CN106095527A publication Critical patent/CN106095527A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45583—Memory management, e.g. access or allocation

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及云计算技术领域，特别是一种适用于云平台虚拟机的存储池实现方法。所述方法包括：搭建ceph集群，创建rbd作为存储池的后端，服务节点向rbd上传虚拟机所需文件，计算节点上将rbd映射本地设备，继续将映射后的本地设备热插拔给虚拟机，虚拟机激活存储池并下载文件。本发明可以用于搭建云平台虚拟机的存储池；实现在虚拟机没有网络通信的情况下，云平台用户也可以方便的向虚拟机传送文件。

Description

一种适用于云平台虚拟机的存储池实现方法
技术领域
本发明涉及云计算技术领域，特别是一种适用于云平台虚拟机的存储池实现方法。
背景技术
用户在使用虚拟机的过程中，总是希望能够往虚拟机里面拷贝一些所需要的文件，目前通用的做法都是通过网络下载或者网络拷贝的形式来实现。这种方式有如下弊端：
(1)虚拟机必须配置网络，有时候云平台里面的虚拟机并不一定都是有网络配置的。即使给虚拟机配置了IP等网络信息，也不能保证网络可达。
(2)没有一个统一的存储池提供给所有的虚拟机使用，会存在同一个文件或软件包在一台虚拟机里下载后在另外一台虚拟机里面需要重新下载的问题。并且网络下载速度会比较慢。
Ceph及RBD
Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。它集三种存储于一身，可以对外提供文件存储、块存储和对象对象存储。
发明内容
本发明解决的技术问题在于提供一种适用于云平台虚拟机的存储池实现方法。在深入分析heat的基础上，提出了一种简单快速新增heat组件服务的流程框架，保证云平台开发者可以快速实现自定义扩展服务。
本发明解决上述技术问题的技术方案是，
所述的方法是搭建ceph集群，创建rbd卷作为存储池的后端；然后,服务节点向rbd卷上传虚拟机所需文件；计算节点将rbd卷映射本地设备；继续将映射后的本地设备热插拔给虚拟机；最后，虚拟机激活存储池，并下载文件使用。
所述的虚拟机是指云平台上所有的Linux类型虚拟机和Windows类型虚拟机；
所述的存储池是指一个存储空间，里面存放所有虚拟机所需的文件；
所述的ceph集群是一个利用云平台里所有计算节点的块设备或者逻辑卷搭建起来的分布式存储，对外提供文件存储、块存储和对象存储；该ceph存储可以被所有的计算节点访问到；
所述的rbd是ceph分布式存储提供的块存储，一个rbd卷对外表现为一个块设备。
所述的服务节点映射rbd卷并上传虚拟机所需文件进一步包括：
服务节点上映射rbd卷到本地块设备；
对块设备进行格式化；
将格式化后的块设备挂载到某个目录；
将虚拟机所需文件拷贝到该挂载目录；
所述的服务节点是指存储池服务运行所在的节点，其接受外部用户的api请求将文件上传到存储池；
所述的映射rbd卷是利用rbd map命令将ceph rbd上的一个卷挂载到服务节点的一个块设备；
所述的格式化采用的是ntfs-3g工具将块设备格式化成Linux系统和windows系统都识别的NTFS或者FAT文件系统。
所述的在计算节点上将块设备热插拔给虚拟机，是指在虚拟机不用关机的条件下将块设备挂载给虚拟机作为其新的磁盘；
所述的挂载以只读的形式，即虚拟机里面不能对存储池进行写。
所述的激活存储池是linux中的mount只读挂载，windows中的磁盘管理给磁盘分配盘符并变成活跃可使用状态。
本发明方案的有益效果如下：
1、提供一个统一的存储池供云平台上所有的虚拟机进行使用，避免虚拟机里面重复下载相同的文件或软件包。
2、提供一种方法实现在虚拟机没有网络通信的情况下，云平台使用者也可以向虚拟机传送文件。
3、本发明方法具有通用性，能够同时满足windows虚拟机和Linux虚拟机。
附图说明
下面结合附图对本发明进一步说明：
图1为本发明的流程图.
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出实质性创造的类似方法实施例，都属于本发明保护的范围。
请参见图1，为本发明实施例提供的一种适用于云平台虚拟机的存储池实现方法的流程示意图，本实施类以Linux虚拟机使用存储池为例进行描述，Windows虚拟机类似。
首先我们需要在云平台的物理节点上搭建一个ceph集群，通常情况下由于云平台的存储资源需要，ceph集群都处于正常运行状态。利用如下命令创建一个ceph rbd卷作为所有虚拟机使用的存储池后端存储：
rbd create volumes/software_base–size 100000
其中，volumes为ceph池名，software_base为卷名，100000为卷大小，单位是MB。实际使用时，用户根据自己的需要创建即可。
之后在云平台的服务节点上映射rbd，如下命令：
rbd map volumes/software_base
该过程会返回一个映射的物理设备路径，如/dev/rbd12，并在/dev/rbd/volumes/目录下生成一个软链接文件software_base。然后对该物理设备进行格式化，格式化后的文件系统要保证被linux和windows虚拟机所识别。这里我们采用了最常用的NTFS文件格式，格式化命令如下：
mkfs.ntfs-f/dev/rbd12
特别注意的是这个格式化的命令只需要执行一次，后面如果再次执行则会损坏里面已有的虚拟机文件。
将格式化后的rbd卷以读写形式挂载到服务节点并上传虚拟机所需要的文件或软件包，挂载实现如下：
mkdir/software_base_rbd
mount–t ntfs-3g/dev/rbd12/software_base_rbd
服务节点上将虚拟机所需要的文件上传到rbd存储池后，就可以在虚拟机宿节点，也即计算节点上面做如下操作，完成虚拟机挂载使用存储池。
首先在计算节点上将ceph rbd卷映射成本地块设备：
rbd map volumes/software_base
该命令执行成功后跟服务节点一样会在计算节点上面返回一个映射的块设备，如/dev/rbd6，并在/dev/rbd/volumes/下生成该设备的连接文件。
继续利用此连接文件挂载给虚拟机使用，准备虚拟机块设备xml文件如下：
执行如下命令对虚拟机的块设备进行热插，将ceph rbd卷的存储池添加到虚拟机：
virsh attach-device i-xxxxxxxx rbd-file.xml
最后可以通过VNC的方式登录虚拟机，在虚拟机里面执行挂载命令：
mkdir/software_base
mount–o ro/dev/vdb/software_base
如上以只读形式将存储池挂载到了虚拟机的/software_base目录下，虚拟机就可以从/software_base下拷贝所需要的文件和软件包等，实现了无网络配置情况下对cephrbd卷存储池的使用。

Claims (7)

1.一种适用于云平台虚拟机的存储池实现方法，其特征在于，所述的方法是搭建ceph集群，创建rbd卷作为存储池的后端；然后，服务节点向rbd卷上传虚拟机所需文件；计算节点将rbd卷映射本地设备；继续将映射后的本地设备热插拔给虚拟机；最后，虚拟机激活存储池，并下载文件使用。
2.根据权利要求1所述的存储池实现方法，其特征在于：
所述的虚拟机是指云平台上所有的Linux类型虚拟机和Windows类型虚拟机；
所述的存储池是指一个存储空间，里面存放所有虚拟机所需的文件；
所述的ceph集群是一个利用云平台里所有计算节点的块设备或者逻辑卷搭建起来的分布式存储，对外提供文件存储、块存储和对象存储；该ceph存储可以被所有的计算节点访问到；
所述的rbd是ceph分布式存储提供的块存储，一个rbd卷对外表现为一个块设备。
3.根据权利要求1所述的存储池实现方法，其特征在于，所述的服务节点映射rbd卷并上传虚拟机所需文件进一步包括：
服务节点上映射rbd卷到本地块设备；
对块设备进行格式化；
将格式化后的块设备挂载到某个目录；
将虚拟机所需文件拷贝到该挂载目录；
所述的服务节点是指存储池服务运行所在的节点，其接受外部用户的api请求将文件上传到存储池；
所述的映射rbd卷是利用rbd map命令将ceph rbd上的一个卷挂载到服务节点的一个块设备；
所述的格式化采用的是ntfs-3g工具将块设备格式化成Linux系统和windows系统都识别的NTFS或者FAT文件系统。
4.根据权利要求2所述的存储池实现方法，其特征在于，所述的服务节点映射rbd卷并上传虚拟机所需文件进一步包括：
服务节点上映射rbd卷到本地块设备；
对块设备进行格式化；
将格式化后的块设备挂载到某个目录；
将虚拟机所需文件拷贝到该挂载目录；
所述的服务节点是指存储池服务运行所在的节点，其接受外部用户的api请求将文件上传到存储池；
所述的映射rbd卷是利用rbd map命令将ceph rbd上的一个卷挂载到服务节点的一个块设备；
所述的格式化采用的是ntfs-3g工具将块设备格式化成Linux系统和windows系统都识别的NTFS或者FAT文件系统。
5.根据权利要求1至4任一项所述的存储池实现方法，其特征在于，所述的在计算节点上将块设备热插拔给虚拟机，是指在虚拟机不用关机的条件下将块设备挂载给虚拟机作为其新的磁盘；
所述的挂载以只读的形式，即虚拟机里面不能对存储池进行写。
6.根据权利要求1至4任一项所述的存储池实现方法，其特征在于，所述的激活存储池是linux中的mount只读挂载，windows中的磁盘管理给磁盘分配盘符并变成活跃可使用状态。
7.根据权利要求5所述的存储池实现方法，其特征在于，所述的激活存储池是linux中的mount只读挂载，windows中的磁盘管理给磁盘分配盘符并变成活跃可使用状态。
CN201610402376.4A 2016-06-07 2016-06-07 一种适用于云平台虚拟机的存储池实现方法 Pending CN106095527A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610402376.4A CN106095527A (zh) 2016-06-07 2016-06-07 一种适用于云平台虚拟机的存储池实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610402376.4A CN106095527A (zh) 2016-06-07 2016-06-07 一种适用于云平台虚拟机的存储池实现方法

Publications (1)

Publication Number Publication Date
CN106095527A true CN106095527A (zh) 2016-11-09

Family

ID=57228299

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610402376.4A Pending CN106095527A (zh) 2016-06-07 2016-06-07 一种适用于云平台虚拟机的存储池实现方法

Country Status (1)

Country Link
CN (1) CN106095527A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107197022A (zh) * 2017-06-02 2017-09-22 华南理工大学 OpenStack存储优化方法及系统
CN107729020A (zh) * 2017-10-11 2018-02-23 北京航空航天大学 一种实现大规模容器快速部署的方法
CN107797766A (zh) * 2017-09-27 2018-03-13 郑州云海信息技术有限公司 一种创建卷的方法和装置
CN108551481A (zh) * 2018-04-16 2018-09-18 武汉斗鱼网络科技有限公司 一种文件上传方法、装置、服务器及存储介质
CN108845900A (zh) * 2018-06-07 2018-11-20 郑州云海信息技术有限公司 一种测试bbu数据保护一致性的方法及装置
CN109033328A (zh) * 2018-07-19 2018-12-18 郑州云海信息技术有限公司 一种访问请求处理方法、装置、设备及可读存储介质
CN110058813A (zh) * 2019-03-15 2019-07-26 启迪云计算有限公司 一种基于云平台块存储的本地存储管理方法
CN110333931A (zh) * 2019-05-27 2019-10-15 北京迈格威科技有限公司 用于训练模型的共享存储的系统
CN110750334A (zh) * 2019-10-25 2020-02-04 北京计算机技术及应用研究所 一种基于Ceph的网络靶场后端存储系统设计方法
CN111427666A (zh) * 2020-04-01 2020-07-17 山东汇贸电子口岸有限公司 一种OpenStack环境下虚拟机镜像快速导入方法及系统
CN111770158A (zh) * 2020-06-24 2020-10-13 腾讯科技（深圳）有限公司 云平台恢复方法、装置、电子设备及计算机可读存储介质
CN111988409A (zh) * 2020-08-20 2020-11-24 深圳市瑞驰信息技术有限公司 一种实现云手机挂载外部存储启动的方法及系统
WO2022141922A1 (zh) * 2020-12-30 2022-07-07 国云科技股份有限公司 批量ISO创建CephX认证虚拟机的实现方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103561101A (zh) * 2013-11-06 2014-02-05 中国联合网络通信集团有限公司 一种网络文件系统
CN105389230A (zh) * 2015-10-21 2016-03-09 上海爱数信息技术股份有限公司 一种结合快照技术的持续数据保护系统及方法
CN105589657A (zh) * 2014-10-23 2016-05-18 中兴通讯股份有限公司 一种实现移动存储挂载的方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103561101A (zh) * 2013-11-06 2014-02-05 中国联合网络通信集团有限公司 一种网络文件系统
CN105589657A (zh) * 2014-10-23 2016-05-18 中兴通讯股份有限公司 一种实现移动存储挂载的方法及装置
CN105389230A (zh) * 2015-10-21 2016-03-09 上海爱数信息技术股份有限公司 一种结合快照技术的持续数据保护系统及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孙洁: ""云计算环境下基于云存储的块设备动态管理系统的研究"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107197022B (zh) * 2017-06-02 2020-01-10 华南理工大学 OpenStack存储优化方法及系统
CN107197022A (zh) * 2017-06-02 2017-09-22 华南理工大学 OpenStack存储优化方法及系统
CN107797766A (zh) * 2017-09-27 2018-03-13 郑州云海信息技术有限公司 一种创建卷的方法和装置
CN107729020A (zh) * 2017-10-11 2018-02-23 北京航空航天大学 一种实现大规模容器快速部署的方法
CN108551481A (zh) * 2018-04-16 2018-09-18 武汉斗鱼网络科技有限公司 一种文件上传方法、装置、服务器及存储介质
CN108551481B (zh) * 2018-04-16 2021-02-02 武汉斗鱼网络科技有限公司 一种文件上传方法、装置、服务器及存储介质
CN108845900A (zh) * 2018-06-07 2018-11-20 郑州云海信息技术有限公司 一种测试bbu数据保护一致性的方法及装置
CN109033328A (zh) * 2018-07-19 2018-12-18 郑州云海信息技术有限公司 一种访问请求处理方法、装置、设备及可读存储介质
CN110058813A (zh) * 2019-03-15 2019-07-26 启迪云计算有限公司 一种基于云平台块存储的本地存储管理方法
CN110333931A (zh) * 2019-05-27 2019-10-15 北京迈格威科技有限公司 用于训练模型的共享存储的系统
CN110750334A (zh) * 2019-10-25 2020-02-04 北京计算机技术及应用研究所 一种基于Ceph的网络靶场后端存储系统设计方法
CN110750334B (zh) * 2019-10-25 2024-02-02 北京计算机技术及应用研究所 一种基于Ceph的网络靶场后端存储系统设计方法
CN111427666A (zh) * 2020-04-01 2020-07-17 山东汇贸电子口岸有限公司 一种OpenStack环境下虚拟机镜像快速导入方法及系统
CN111427666B (zh) * 2020-04-01 2022-04-12 浪潮云信息技术股份公司 一种OpenStack环境下虚拟机镜像快速导入方法及系统
CN111770158A (zh) * 2020-06-24 2020-10-13 腾讯科技（深圳）有限公司 云平台恢复方法、装置、电子设备及计算机可读存储介质
CN111770158B (zh) * 2020-06-24 2023-09-19 腾讯科技（深圳）有限公司 云平台恢复方法、装置、电子设备及计算机可读存储介质
CN111988409A (zh) * 2020-08-20 2020-11-24 深圳市瑞驰信息技术有限公司 一种实现云手机挂载外部存储启动的方法及系统
CN111988409B (zh) * 2020-08-20 2023-06-13 深圳市臂云科技有限公司 一种实现云手机挂载外部存储启动的方法及系统
WO2022141922A1 (zh) * 2020-12-30 2022-07-07 国云科技股份有限公司 批量ISO创建CephX认证虚拟机的实现方法及装置

Similar Documents

Publication Publication Date Title
CN106095527A (zh) 一种适用于云平台虚拟机的存储池实现方法
US10430397B2 (en) Peer to peer ownership negotiation
US9858001B2 (en) System and method for hijacking inodes based on replication operations received in an arbitrary order
US8364638B2 (en) Automated filer technique for use in virtualized appliances and applications
US7197490B1 (en) System and method for lazy-copy sub-volume load balancing in a network attached storage pool
US8510524B1 (en) File system capable of generating snapshots and providing fast sequential read access
US20170329524A1 (en) Preallocating storage space for an application operation in a space efficient volume
US20140325157A1 (en) Data access request monitoring to reduce system resource use for background operations
US7424497B1 (en) Technique for accelerating the creation of a point in time prepresentation of a virtual file system
CN103389884A (zh) 处理输入/输出请求的方法、宿主机、服务器和虚拟机
CN106055388A (zh) 一种云平台应用自动部署框架
CN104182257B (zh) 应用软件的安装方法和应用软件的安装装置
US20190034087A1 (en) Reducing data amplification when replicating objects across different sites
JP2006195712A (ja) ストレージ制御装置、論理ボリューム管理方法及びストレージ装置
US10049117B2 (en) Defragmentation-less deduplication
CN107111452A (zh) 应用于计算机系统的数据迁移方法和装置、计算机系统
US7231409B1 (en) System and method for reallocating blocks in checkpointing bitmap-based file systems
US11314639B2 (en) Protecting against data loss during garbage collection
US9122689B1 (en) Recovering performance of a file system post-migration
JP6941173B2 (ja) ストレージ・コントローラを介するオブジェクト・ストレージ・クラウドへのポイント・イン・タイム・バックアップ
CN106484820A (zh) 一种重命名方法、访问方法及装置
CN107885580A (zh) 一种云迁移方法、装置、设备及存储介质
WO2009149416A1 (en) Automated filer technique for use in virtualized appliances and applications
CN105607869A (zh) 一种快速格式化与使用虚拟机磁盘的方法
US20170139779A1 (en) Controller, storage system, and non-transitory computer-readable storage medium having control program stored therein

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20161109

RJ01 Rejection of invention patent application after publication