CN106603632A - 一种降低云平台启动风暴的虚拟机管理方法 - Google Patents
一种降低云平台启动风暴的虚拟机管理方法 Download PDFInfo
- Publication number
- CN106603632A CN106603632A CN201611049728.9A CN201611049728A CN106603632A CN 106603632 A CN106603632 A CN 106603632A CN 201611049728 A CN201611049728 A CN 201611049728A CN 106603632 A CN106603632 A CN 106603632A
- Authority
- CN
- China
- Prior art keywords
- virtual machine
- cloud platform
- cluster
- host
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45533—Hypervisors; Virtual machine monitors
- G06F9/45558—Hypervisor-specific management and integration aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
- G06F9/45533—Hypervisors; Virtual machine monitors
- G06F9/45558—Hypervisor-specific management and integration aspects
- G06F2009/45562—Creating, deleting, cloning virtual machine instances
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及云计算技术领域,特别是一种降低云平台启动风暴的虚拟机管理方法。本发明的方法以分区域的形式搭建云平台的后端存储;将云平台后端存储划分成多个存储池;针对每个存储池单独创建宿主机集群,并将宿主机纳入集群;最后以宿主机集群为单位对虚拟机进行管理。采用本发明提供的方法可以实现对云平台的虚拟机进行逻辑和物理上双层的隔离管理,有效的降低了云平台批量虚拟机同时启动时所出现的开机风暴。
Description
技术领域
本发明涉及云计算技术领域,特别是一种降低云平台启动风暴的虚拟机管理方法。
背景技术
随着云计算技术的普及,越来越多的用户选择将自己的业务系统部署到各家云平台的云服务器上,随着而来的是云平台在云服务器的管理规模上变得越来越大,尤其是提供桌面云的云平台。桌面云平台面向的客户一般都具有一个共同点:就是多个桌面终端存在瞬间开关机相关操作。特别的,当某一时刻桌面云平台上几百甚至成千上万云桌面同时开机启动时,瞬间出现非常高的磁盘读写IO操作而出现云平台虚拟机的开机风暴,如果云平台管理不善,比较轻的后果是很多桌面终端出现黑屏或者蓝屏现象,严重的会造成整个云平台瘫痪。
ISCSI
ISCSI是一种基于TCP/IP的协议,用来建立和管理IP存储设备、主机和客户机等之间的相互连接,并创建存储区域网络(SAN)。SAN使得SCSI协议应用于高速数据传输网络成为可能,这种传输以数据块级别(block-level)在多个数据存储网络间进行。云平台采用ISCSI协议的后端存储,可以保证存储被所有的宿主机共享,从而保证了虚拟机的迁移。
CEPH RBD
CEPH是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。CEPH利用低价的服务器磁盘构建一个多副本、高安全及高性能的分布式存储,对外提供文件存储、块存储和对象存储。CEPH RBD即CEPH对外对供的块存储,利用CEPH RBD提供的块设备作为虚拟机的磁盘存储,保证虚拟机能够很容易的在物理节点之间进行迁移操作。
发明内容
本发明解决的技术问题在于提出了一种可有效降低云平台启动风暴的虚拟机管理方法。
本发明解决上述技术问题的技术方案是:
所述的方法包括:
以分区域的形式搭建云平台的后端存储;
将云平台后端存储划分成多个存储池;
针对每个存储池单独创建宿主机集群,并将宿主机纳入集群;
最后以宿主机集群为单位对虚拟机进行管理。
所述的分区域是指将所述后端存储的存储介质进行多种组合,每个组合代表一个区域;存储介质可以是磁盘;
所述的后端存储包括:
以网络协议提供的网络集中存储,所述网络协议包括ISCSI协议;
以CEPH RBD提供的分布式块存储;
所述的存储池包括:
LVM逻辑卷管理所提供的逻辑卷组;
CEPH RBD所提供的块设备存储池。
所述的宿主机集群是一个逻辑上的宿主机组合,每个集群都配置有最大虚拟机数量;
所述的最大虚拟机数量是指该集群所有宿主机所能管理的虚拟机数量;
所述的虚拟机包括多种状态的虚拟机;
所述的状态包括正在运行,正在创建,正在迁移,关机,暂停,重启。
所述的虚拟机管理包括:
云平台选择宿主机集群进行虚拟机的创建;
云平台选择宿主机集群进行虚拟机的迁移。
所述的虚拟机创建和迁移步骤如下:
选择宿主机集群进行判断,当前宿主机集群所管理的虚拟机是否已达上限;
若是,则重新选择宿主机集群创建和迁移虚拟机;
如不是,则在当前选中的宿主机集群内选择宿主机进行虚拟机的创建和迁移。
所述的虚拟机创建和迁移具体包括:
在宿主机集群对应的后端存储池上创建一个块设备;
对虚拟机所选用的系统盘镜像所在的块设备做快照到上述创建的块设备;
利用所创建块设备启动虚拟机。
本发明方案的有益效果如下:
1、提供一种可有效降低云平台启动风暴的虚拟机管理方法,实现对云平台大量虚拟机的有效管理,降低批量虚拟机启动时所引起的开机风暴。
2、本发明将虚拟机的系统磁盘建立在宿主机集群共享的后端块存储设备上,从而保证了虚拟机的在线迁移。
3、本发明方法可以降低虚拟机出现蓝屏和黑屏等现象的概率,提高云平台的稳定性。
附图说明
下面结合附图对本发明进一步说明:
图1为本发明的流程图;
图2为本发明的模块图;
图3为本发明存储架构图。
具体实施方式
如图1、2、3所示,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述。本发明以CEPH RBD块设备作为虚拟机后端存储池为例进行描述。
首先利用云平台宿主机的磁盘存储设备搭建一个分布式的CEPH存储系统,对外提供CEPH RBD块存储,这里选择搭建一个3副本的CEPH存储集群,当云平台服务器所提供的存储磁盘多余3个时,存储后端自动按3个磁盘一个组合的形式进行副本备份。
建立一个CEPH RBD存储池S1:volumes_clusterA,具体命令为:
rados mkpool volumes_clusterA#创建pool
rados lspools#查看所有pool
创建虚拟机的宿主机集群clusterA,设置其对应的后端存储池为S1,并根据具体情况设定集群clusterA所能管理的虚拟机数量上限位N。
将云平台宿主机A1,宿主机A2,宿主机A3进行逻辑组合,纳入宿主机进去clusterA进行管理。
云平台创建虚拟机时,选择虚拟机所在的集群clusterA,云平判断当前集群所管理的虚拟机数量是否已经大于等于N,如果已经等于N,则报出异常,提示用户需另外选择其他宿主机集群进行创建虚拟机。如果当前集群clusterA所管理的虚拟机数量小于N,则进一步在当前集群进行虚拟机创建。
具体的虚拟机创建过程为:
在当前宿主机集群clusterA所对应的后端存储池创建一个块设备,这里以CEPHRBD进行描述,具体的块设备创建命令如下:
#创建rbd卷
#rbd create volumes_clusterA/volumes_clusterA_vm1--size 10000
volumes_cluterA后端存储池名,与宿主机集群对应
volumes_clusterA_vm1卷名,即块设备名
10000卷大小,单位是MB
判断待创建虚拟机所选用的系统镜像是否存在于该后端存储池volumes_clusterA中,如果没有,则继续创建一个块设备,经将镜像注入到该块设备。当虚拟机所使用的系统镜像存在于此存储池里,则在创建虚拟机的时候仅需要做一次快照即可。
最后利用虚拟机块设备配置虚拟机配置文件,启动虚拟机即可。相应的当进行虚拟机迁移时,也必须先判断宿主机集群的虚拟机数量,后端存储是否一致。
通过将云平台的后端存储池与虚拟机的宿主机集群进行绑定,一个集群对应后端的一个存储池,存储池与存储池之间进行IO读写隔离;同时通过设置宿主机集群管理规模,实现虚拟机的合理分配,从而有效降低云平台虚拟机批量启动时所引起的开机风暴。
以上所揭露的仅仅是针对云平台进行虚拟机的创建,其仅为本发明其中一个实施例而已,其他实施例类似。当然不能以此实施例来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (7)
1.一种降低云平台启动风暴的虚拟机管理方法,其特征在于,所述的方法包括:
以分区域的形式搭建云平台的后端存储;
将云平台后端存储划分成多个存储池;
针对每个存储池单独创建宿主机集群,并将宿主机纳入集群;
最后以宿主机集群为单位对虚拟机进行管理。
2.根据权利要求1所述的虚拟机管理方法,其特征在于,
所述的分区域是指将所述后端存储的存储介质进行多种组合,每个组合代表一个区域;存储介质可以是磁盘;
所述的后端存储包括:
以网络协议提供的网络集中存储,所述网络协议包括ISCSI协议;
以CEPH RBD提供的分布式块存储。
3.根据权利要求1所述的虚拟机管理方法,其特征在于,
所述的存储池包括:
LVM逻辑卷管理所提供的逻辑卷组;
CEPH RBD所提供的块设备存储池。
4.根据权利要求1所述的虚拟机管理方法,其特征在于,所述的宿主机集群是一个逻辑上的宿主机组合,每个集群都配置有最大虚拟机数量;
所述的最大虚拟机数量是指该集群所有宿主机所能管理的虚拟机数量;
所述的虚拟机包括多种状态的虚拟机;
所述的状态包括正在运行,正在创建,正在迁移,关机,暂停,重启。
5.根据权利要求1所述的虚拟机管理方法,其特征在于,所述的虚拟机管理包括:
云平台选择宿主机集群进行虚拟机的创建;
云平台选择宿主机集群进行虚拟机的迁移。
6.根据权利要求5所述的虚拟机管理方法,其特征在于,所述的虚拟机创建和迁移步骤如下:
选择宿主机集群进行判断,当前宿主机集群所管理的虚拟机是否已达上限;
若是,则重新选择宿主机集群创建和迁移虚拟机;
如不是,则在当前选中的宿主机集群内选择宿主机进行虚拟机的创建和迁移。
7.根据权利要求6所述的虚拟机管理方法,其特征在于,所述的虚拟机创建和迁移具体包括:
在宿主机集群对应的后端存储池上创建一个块设备;
对虚拟机所选用的系统盘镜像所在的块设备做快照到上述创建的块设备;
利用所创建块设备启动虚拟机。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611049728.9A CN106603632A (zh) | 2016-11-25 | 2016-11-25 | 一种降低云平台启动风暴的虚拟机管理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611049728.9A CN106603632A (zh) | 2016-11-25 | 2016-11-25 | 一种降低云平台启动风暴的虚拟机管理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106603632A true CN106603632A (zh) | 2017-04-26 |
Family
ID=58593174
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611049728.9A Pending CN106603632A (zh) | 2016-11-25 | 2016-11-25 | 一种降低云平台启动风暴的虚拟机管理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106603632A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107181808A (zh) * | 2017-06-01 | 2017-09-19 | 安徽祥云科技有限公司 | 一种私有云系统及运行方法 |
CN107688484A (zh) * | 2017-09-06 | 2018-02-13 | 郑州云海信息技术有限公司 | 一种虚拟机迁移的方法及系统 |
CN108762683A (zh) * | 2018-06-02 | 2018-11-06 | 王梅 | 在分布式大数据存储系统内进行数据传输的方法及系统 |
CN109246198A (zh) * | 2018-08-16 | 2019-01-18 | 杭州数梦工场科技有限公司 | 一种基于分布式存储集群的云主机启动控制方法和系统 |
CN109271112A (zh) * | 2018-09-27 | 2019-01-25 | 郑州云海信息技术有限公司 | 一种存储池挂载主机的调整方法、装置和计算机设备 |
CN112527193A (zh) * | 2020-12-04 | 2021-03-19 | 北京浪潮数据技术有限公司 | 一种云硬盘数据迁移方法、装置、设备及存储介质 |
CN115904635A (zh) * | 2023-02-16 | 2023-04-04 | 江西联创精密机电有限公司 | 一种基于服务器的虚拟机管理方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102185897A (zh) * | 2011-04-14 | 2011-09-14 | 上海交通大学 | 安全分散式虚拟存储池系统 |
CN102594861A (zh) * | 2011-12-15 | 2012-07-18 | 杭州电子科技大学 | 一种多服务器负载均衡的云存储系统 |
CN103731508A (zh) * | 2014-01-23 | 2014-04-16 | 易桂先 | 一种基于云存储的网络硬盘装置及其管理方法 |
CN103973478A (zh) * | 2014-01-28 | 2014-08-06 | 国网信通亿力科技有限责任公司 | 基于资源池技术的电网信息灾备系统及灾备方法 |
CN105631316A (zh) * | 2015-12-25 | 2016-06-01 | 曙光信息产业(北京)有限公司 | 一种虚拟化资源的管理方法和装置 |
-
2016
- 2016-11-25 CN CN201611049728.9A patent/CN106603632A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102185897A (zh) * | 2011-04-14 | 2011-09-14 | 上海交通大学 | 安全分散式虚拟存储池系统 |
CN102594861A (zh) * | 2011-12-15 | 2012-07-18 | 杭州电子科技大学 | 一种多服务器负载均衡的云存储系统 |
CN103731508A (zh) * | 2014-01-23 | 2014-04-16 | 易桂先 | 一种基于云存储的网络硬盘装置及其管理方法 |
CN103973478A (zh) * | 2014-01-28 | 2014-08-06 | 国网信通亿力科技有限责任公司 | 基于资源池技术的电网信息灾备系统及灾备方法 |
CN105631316A (zh) * | 2015-12-25 | 2016-06-01 | 曙光信息产业(北京)有限公司 | 一种虚拟化资源的管理方法和装置 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107181808A (zh) * | 2017-06-01 | 2017-09-19 | 安徽祥云科技有限公司 | 一种私有云系统及运行方法 |
CN107181808B (zh) * | 2017-06-01 | 2020-05-08 | 安徽祥云科技有限公司 | 一种私有云系统及运行方法 |
CN107688484A (zh) * | 2017-09-06 | 2018-02-13 | 郑州云海信息技术有限公司 | 一种虚拟机迁移的方法及系统 |
CN108762683A (zh) * | 2018-06-02 | 2018-11-06 | 王梅 | 在分布式大数据存储系统内进行数据传输的方法及系统 |
CN108762683B (zh) * | 2018-06-02 | 2021-06-01 | 深圳市天天来玩科技有限公司 | 在分布式大数据存储系统内进行数据传输的方法及系统 |
CN109246198A (zh) * | 2018-08-16 | 2019-01-18 | 杭州数梦工场科技有限公司 | 一种基于分布式存储集群的云主机启动控制方法和系统 |
CN109246198B (zh) * | 2018-08-16 | 2022-01-07 | 杭州数梦工场科技有限公司 | 一种基于分布式存储集群的云主机启动控制方法和系统 |
CN109271112A (zh) * | 2018-09-27 | 2019-01-25 | 郑州云海信息技术有限公司 | 一种存储池挂载主机的调整方法、装置和计算机设备 |
CN112527193A (zh) * | 2020-12-04 | 2021-03-19 | 北京浪潮数据技术有限公司 | 一种云硬盘数据迁移方法、装置、设备及存储介质 |
CN112527193B (zh) * | 2020-12-04 | 2023-12-22 | 北京浪潮数据技术有限公司 | 一种云硬盘数据迁移方法、装置、设备及存储介质 |
CN115904635A (zh) * | 2023-02-16 | 2023-04-04 | 江西联创精密机电有限公司 | 一种基于服务器的虚拟机管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106603632A (zh) | 一种降低云平台启动风暴的虚拟机管理方法 | |
US11698844B2 (en) | Managing storage systems that are synchronously replicating a dataset | |
US10628043B1 (en) | Systems and methods for implementing a horizontally federated heterogeneous cluster | |
US9262097B2 (en) | System and method for non-volatile random access memory emulation | |
CN102955675B (zh) | 用于改进数据中心中的资源使用效率的方法及装置 | |
US9229749B2 (en) | Compute and storage provisioning in a cloud environment | |
US11609884B2 (en) | Intelligent file system with transparent storage tiering | |
US8850152B2 (en) | Method of data migration and information storage system | |
CN103765372B (zh) | 配置用于输入/输出操作的对象存储系统 | |
EP2302500A2 (en) | Application and tier configuration management in dynamic page realloction storage system | |
CN105975210A (zh) | 数据存储系统和数据存储控制方法 | |
US20150347047A1 (en) | Multilayered data storage methods and apparatus | |
CN102123176B (zh) | 一种网络存储系统空间分配管理方法及装置 | |
CN103620580A (zh) | 用于数据副本的迁移的系统和方法 | |
CN104270409B (zh) | 一种云平台中高效利用集中存储的方法 | |
WO2015029133A1 (ja) | ストレージシステム及びストレージシステム管理方法 | |
US11842051B2 (en) | Intelligent defragmentation in a storage system | |
JP2019537774A (ja) | マルチサイト複製をサポートする一貫性ハッシュ構成 | |
US10552342B1 (en) | Application level coordination for automated multi-tiering system in a federated environment | |
CN112162886B (zh) | 一种后端存储设备切换方法、装置、设备和介质 | |
CN113868679B (zh) | 一种集群的加密方法及装置 | |
US20240184610A1 (en) | Path selection method based on an active-active configuration for a hyperconverged infrastructure storage environment | |
CN108153484A (zh) | 一种虚拟化环境下的共享式存储系统及其管理方法 | |
CN103765370B (zh) | 访问对象存储系统的计算机系统 | |
CN116069494A (zh) | 一种异构资源管理方法以及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170426 |
|
WD01 | Invention patent application deemed withdrawn after publication |