CN104484279A - 一种适用于云计算的集中存储超额分配使用的方法 - Google Patents
一种适用于云计算的集中存储超额分配使用的方法 Download PDFInfo
- Publication number
- CN104484279A CN104484279A CN201410737235.9A CN201410737235A CN104484279A CN 104484279 A CN104484279 A CN 104484279A CN 201410737235 A CN201410737235 A CN 201410737235A CN 104484279 A CN104484279 A CN 104484279A
- Authority
- CN
- China
- Prior art keywords
- logical volume
- lun
- virtual machine
- storage
- cloud computing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
本发明涉及云计算管理技术领域，特别是指一种适用于云计算的集中存储超额分配使用的方法。本发明先对集中存储设备划分成一个大的LUN，并以SAN方式对外提供存储资源；然后发现并登录LUN设备；选择一台服务器作为存储管理节点，创建逻辑卷组；创建虚拟机时，先在本地逻辑卷组中创建指定大小的逻辑卷；然后将虚拟机磁盘文件注入逻辑卷，并把虚拟机磁盘文件的分配方式设置成动态分配；获取所有虚拟机磁盘文件的实际占用空间，计算总和，并以此计算整个集中存储的剩余空间，并按此来估算集中存储的使用趋势并规划集中存储的扩容方案。本发明的方法能对整个集中存储设备进行统一分配和管理；可用于云计算的集中存储。
Description
技术领域
本发明涉及云计算管理技术领域，特别是指一种适用于云计算的集中存储超额分配使用的方法。
背景技术
在云计算的大背景下，作为虚拟机载体的服务器对于大空间和高性能存储的要求越来越高。集中存储是一种比较理想的选择，一般对集中存储的使用策略如下：
1、将集中存储的大空间划分成不同大小的LUN；
2、将每一个LUN分别挂载给每一个节点；
3、节点获取各自的LUN后格式化并挂载使用；
4、在使用过程中，根据每个LUN下虚拟机实例文件大小的总和计算LUN的已用空间，再把各个LUN的已用空间大小相加得到总的已用空间，并按此来估算集中存储的使用趋势并规划集中存储的扩容方案。
然而，此方案存在以下的弊端：
1、存储空间使用的规划不精确，划分LUN时由于不知道节点需要多大的空间而只能按主观估计进行容量划分，使用过程中容易出现部分存储空间不足而部分节点存储空间过剩的问题。
2、存储空间的使用率低，在实际使用的使用，由于划分了LUN导致剩余存储空间的分布比较分散，容易产生存储空间的碎片，导致剩余空间充足可大存储空间虚拟机不能创建的现象。
3、剩余存储空间的统计不精确，虚拟机磁盘文件有两种分配方式，动态分配与固定大小；在选择动态分配模式时，虚拟机磁盘文件的大小只是其配额使用的空间，通常都大于虚拟机磁盘文件实际占用的空间，按此来计算集中存储的已用空间不准确，造成昂贵的集中存储空间的浪费。
发明内容
本发明解决的技术问题在于提供一种适用于云计算的集中存储超额分配使用的方法，解决传统方法存在的不足，合理的规划存储空间使用，提高存储空间利用率，精确的统计剩余存储空间的解决方案。
本发明解决上述技术问题的技术方案是：
包括如下步骤：
步骤1：登录集中存储设备，对其划分成一个大的LUN，并将LUN以SAN方式对外提供存储资源；
步骤2：在各台需要使用存储资源的服务器上发现并登录LUN设备；
步骤3：选择一台服务器作为存储管理节点，在挂载的LUN设备上创建逻辑卷组，所有服务器上LUN设备都被格式化为逻辑卷组并且可用存储空间等于集中存储设备的总存储空间；
步骤4：创建虚拟机时，服务器先在本地逻辑卷组中创建指定大小的逻辑卷；然后将虚拟机磁盘文件注入逻辑卷，并把虚拟机磁盘文件的分配方式设置成动态分配，使用逻辑卷的形式创建虚拟机；
步骤5：在存储管理节点上获取所有虚拟机磁盘文件的实际占用空间，计算总和作为虚拟机的已用空间，并以此计算整个集中存储的剩余空间，并按此来估算集中存储的使用趋势并规划集中存储的扩容方案。
所述的集中存储设备是外部存储设备；
所述的LUN是逻辑单元号(Logical Unit Number)，用来描述由各个专用存储设备划分的逻辑卷；
所述的SAN即存储区域网络，是一种高速专用网络或者子网，用以在数据服务器和不同种类的数据存储设备之间提供连接；
所述的卷组(Volume Group，VG)是由一个或多个物理卷所组成的存储池，在卷组上能创建一个或多个逻辑卷；
所述的逻辑卷(Logical Volume，LV)建立在卷组之上，是一个标准的块设备，在逻辑卷之上可以建立文件系统。
所述的步骤2中，服务器上发现并登录LUN设备，使其本地化；
所述的本地化的过程是存储设备创建逻辑卷组的基础，当LUN通过SAN方式挂载到物理服务器之后，先将挂载过来的LUN本地化。
所述的步骤3中，在其中一台服务器上利用本地化的存储设备创建逻辑卷组，使本节点和其他节点共享该卷组。
所述的动态分配，即逻辑卷大小按照虚拟机实际已用空间大小进行动态的扩展，弹性使用存储资源。
本发明的方法能对整个集中存储设备进行统一分配和管理，最大程度的利用剩余空间，提高存储资源利用率；能对集中存储空间的使用进行超额分配，由于整个LUN被所有的服务器共享，因此，每台服务器都拥有相当于拥有整个集中存储空间的分配能力，同时又能精确计算已用空间，打破传统存储使用方式，能分配的存储空间可远远大于集中存储设备划分的存储空间；打破了计算资源与存储资源的内在约束，提高了单个节点上存储空间的可扩展性。
附图说明
下面结合附图对本发明进一步说明：
图1为本发明的流程图；
图2为本发明的模型架构图；
具体实施方式
本发明的实施方式有多种，这里将外部存储LUN以IP-SAN挂载给物理服务器的方式为例说明其中一种实现方法，如图1、2所示，具体实施过程如下：
1、登录集中存储设备，对其划分成一个大的LUN，并将LUN以SAN方式对外提供存储资源；
这里通过存储设备客户端将LUN挂载到指定的多个物理服务器上。
2、在各个待使用集中存储资源的服务器上发现并登录LUN设备，使其本地化；发现LUN，底层命令如下：
#iscsiadm-m discovery-t sendtargets-p 10.10.10.3：3260--发现IQN
#iscsiadm-m node-p 10.10.10.3：3260-T iqn.2lun.com-l--根据IQN，查找LUN设备号
#ll/dev/disk/by-path|grep″iqn.2lun.com″--列出LUN数量
#fdisk-l|grep设备号--查找LUN大小
参数解释：
-p 10.10.10.3：3260存储池服务器IP及端口，IP为集中存储对外提供存储网卡接口的IP，端口一般为3260不变。
登录LUN设备：
#iscsiadm-m node-T[装置]-o update--namenode.session.auth.authmethod--value＝CHAP
#iscsiadm-m node-T[装置]-o update--name node.session.auth.username--value＝[用户名]
#iscsiadm-m node-T[装置]-o update--name node.session.auth.password--value＝[密码]
3、在其中一台服务器上利用本地化的存储设备创建逻辑卷组，使本节点和其他节点共享该卷组；
#pvcreate/dev/sdd--将LUN做成物理卷
#vgcreate VG_XenStorage-3bd23141/dev/sdd--在物理机卷基础上制作VG卷组
4、在卷组上面创建指定大小的逻辑卷；
#lvcreate-L 20G-n lv_kvm vg_name--创建逻辑卷大小
参数解释：
vg_name--要创建的卷组名称
lv_kvm-要创建的逻辑卷名称
5、将虚拟机磁盘文件注入逻辑卷，并把虚拟机磁盘文件的分配方式设置成动态分配，使用逻辑卷的形式创建虚拟机；。
#dd if＝/root/win2008-R2-64bit-20G-original.qcow2of＝/dev/vg_name/lv_kvm bs＝5M
--将虚拟机的镜像注入到已创建的逻辑卷lv_kvm中。
6、在其中一台服务器上获取所有虚拟机磁盘文件的实际占用空间，计算总和作为虚拟机的已用空间，并以此计算整个集中存储的剩余空间，并按此来估算集中存储的使用趋势并规划集中存储的扩容方案。
获取所有虚拟机磁盘文件的实际占用空间命令：
#lvscan|grep vg-name
参数解释：
vg-name--逻辑卷组名称
命令得出的结果是卷组内所有逻辑卷已用空间列表，及等于虚拟机磁盘文件实际占用空间大小。
Claims (7)
1.一种适用于云计算的集中存储超额分配使用的方法，其特征在于：包括如下步骤：
步骤1：登录集中存储设备，对其划分成一个大的LUN，并将LUN以SAN方式对外提供存储资源；
步骤2：在各台需要使用存储资源的服务器上发现并登录LUN设备；
步骤3：选择一台服务器作为存储管理节点，在挂载的LUN设备上创建逻辑卷组，所有服务器上LUN设备都被格式化为逻辑卷组并且可用存储空间等于集中存储设备的总存储空间；
步骤4：创建虚拟机时，服务器先在本地逻辑卷组中创建指定大小的逻辑卷；然后将虚拟机磁盘文件注入逻辑卷，并把虚拟机磁盘文件的分配方式设置成动态分配，使用逻辑卷的形式创建虚拟机；
步骤5：在存储管理节点上获取所有虚拟机磁盘文件的实际占用空间，计算总和作为虚拟机的已用空间，并以此计算整个集中存储的剩余空间，并按此来估算集中存储的使用趋势并规划集中存储的扩容方案。
2.根据权利要求1所述的适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的集中存储设备是外部存储设备；
所述的LUN是逻辑单元号(Logical Unit Number)，用来描述由各个专用存储设备划分的逻辑卷；
所述的SAN即存储区域网络，是一种高速专用网络或者子网，用以在数据服务器和不同种类的数据存储设备之间提供连接；
所述的卷组(Volume Group，VG)是由一个或多个物理卷所组成的存储池，在卷组上能创建一个或多个逻辑卷；
所述的逻辑卷(Logical Volume，LV)建立在卷组之上，是一个标准的块设备，在逻辑卷之上可以建立文件系统。
3.根据权利要求1所述的适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的步骤2中，服务器上发现并登录LUN设备，使其本地化；
所述的本地化的过程是存储设备创建逻辑卷组的基础，当LUN通过SAN方式挂载到物理服务器之后，先将挂载过来的LUN本地化。
4.根据权利要求2所述的适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的步骤2中，服务器上发现并登录LUN设备，使其本地化；
所述的本地化的过程是存储设备创建逻辑卷组的基础，当LUN通过SAN方式挂载到物理服务器之后，先将挂载过来的LUN本地化。
5.根据权利要求1至4任一项所述的适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的步骤3中，在其中一台服务器上利用本地化的存储设备创建逻辑卷组，使本节点和其他节点共享该卷组。
6.根据权利要求1至4任一项所述的一种适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的动态分配，即逻辑卷大小按照虚拟机实际已用空间大小进行动态的扩展，弹性使用存储资源。
7.根据权利要求5所述的一种适用于云计算的集中存储超额分配使用的方法，其特征在于：所述的动态分配，即逻辑卷大小按照虚拟机实际已用空间大小进行动态的扩展，弹性使用存储资源。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410737235.9A CN104484279B (zh) | 2014-12-05 | 2014-12-05 | 一种适用于云计算的集中存储超额分配使用的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410737235.9A CN104484279B (zh) | 2014-12-05 | 2014-12-05 | 一种适用于云计算的集中存储超额分配使用的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104484279A true CN104484279A (zh) | 2015-04-01 |
| CN104484279B CN104484279B (zh) | 2017-12-15 |
Family
ID=52758823
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410737235.9A Active CN104484279B (zh) | 2014-12-05 | 2014-12-05 | 一种适用于云计算的集中存储超额分配使用的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104484279B (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105487826A (zh) * | 2015-12-22 | 2016-04-13 | 国云科技股份有限公司 | 一种云存储资源超量分配使用的方法 |
| CN105607869A (zh) * | 2015-12-15 | 2016-05-25 | 国云科技股份有限公司 | 一种快速格式化与使用虚拟机磁盘的方法 |
| CN105635276A (zh) * | 2015-12-28 | 2016-06-01 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
| CN105677237A (zh) * | 2015-12-28 | 2016-06-15 | 国云科技股份有限公司 | 平台非分布式存储物理卷迁移到分布式存储系统的方法 |
| CN107168793A (zh) * | 2017-05-10 | 2017-09-15 | 郑州云海信息技术有限公司 | 一种虚拟存储空间的动态流动方法 |
| CN107688492A (zh) * | 2016-08-05 | 2018-02-13 | 阿里巴巴集团控股有限公司 | 资源的控制方法、装置和集群资源管理系统 |
| CN107832093A (zh) * | 2017-10-16 | 2018-03-23 | 北京易讯通信息技术股份有限公司 | 一种在私有云中免驱动对接标准iscsi/fc存储的方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110047340A1 (en) * | 2009-08-21 | 2011-02-24 | James Robert Olson | Proxy Backup of Virtual Disk Image Files on NAS Devices |
| CN102147770A (zh) * | 2011-03-28 | 2011-08-10 | 杭州电子科技大学 | 一种存储资源管理系统及方法 |
| CN102713825A (zh) * | 2009-12-16 | 2012-10-03 | 赛门铁克公司 | 在虚拟环境中的存储可视化 |
-
2014
- 2014-12-05 CN CN201410737235.9A patent/CN104484279B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110047340A1 (en) * | 2009-08-21 | 2011-02-24 | James Robert Olson | Proxy Backup of Virtual Disk Image Files on NAS Devices |
| CN102713825A (zh) * | 2009-12-16 | 2012-10-03 | 赛门铁克公司 | 在虚拟环境中的存储可视化 |
| CN102147770A (zh) * | 2011-03-28 | 2011-08-10 | 杭州电子科技大学 | 一种存储资源管理系统及方法 |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105607869A (zh) * | 2015-12-15 | 2016-05-25 | 国云科技股份有限公司 | 一种快速格式化与使用虚拟机磁盘的方法 |
| CN105607869B (zh) * | 2015-12-15 | 2019-02-01 | 国云科技股份有限公司 | 一种快速格式化与使用虚拟机磁盘的方法 |
| CN105487826A (zh) * | 2015-12-22 | 2016-04-13 | 国云科技股份有限公司 | 一种云存储资源超量分配使用的方法 |
| CN105487826B (zh) * | 2015-12-22 | 2019-04-26 | 国云科技股份有限公司 | 一种云存储资源超量分配使用的方法 |
| CN105635276A (zh) * | 2015-12-28 | 2016-06-01 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
| CN105677237A (zh) * | 2015-12-28 | 2016-06-15 | 国云科技股份有限公司 | 平台非分布式存储物理卷迁移到分布式存储系统的方法 |
| CN105677237B (zh) * | 2015-12-28 | 2018-10-19 | 国云科技股份有限公司 | 平台非分布式存储物理卷迁移到分布式存储系统的方法 |
| CN105635276B (zh) * | 2015-12-28 | 2019-05-21 | 国云科技股份有限公司 | 云平台分布式物理卷对象迁移到非分布式存储的方法 |
| CN107688492A (zh) * | 2016-08-05 | 2018-02-13 | 阿里巴巴集团控股有限公司 | 资源的控制方法、装置和集群资源管理系统 |
| CN107688492B (zh) * | 2016-08-05 | 2021-11-09 | 阿里巴巴集团控股有限公司 | 资源的控制方法、装置和集群资源管理系统 |
| CN107168793A (zh) * | 2017-05-10 | 2017-09-15 | 郑州云海信息技术有限公司 | 一种虚拟存储空间的动态流动方法 |
| CN107832093A (zh) * | 2017-10-16 | 2018-03-23 | 北京易讯通信息技术股份有限公司 | 一种在私有云中免驱动对接标准iscsi/fc存储的方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104484279B (zh) | 2017-12-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104484279A (zh) | 一种适用于云计算的集中存储超额分配使用的方法 | |
| WO2015143983A1 (zh) | 一种对vnf实现加速处理的方法及装置 | |
| CN103873505B (zh) | 向云存储服务器离线上传的方法、系统与装置 | |
| CN105391568A (zh) | 一种软件定义网络sdn的实现方法、装置和系统 | |
| CN107710196B (zh) | 一种管理资源对象的方法和系统 | |
| Moghaddam et al. | Cloud computing: Vision, architecture and Characteristics | |
| CN104156216A (zh) | 一种面向云计算的异构存储管理系统及方法 | |
| KR102022441B1 (ko) | 하드웨어 가속 방법 및 관련 장치 | |
| Cerroni | Multiple virtual machine live migration in federated cloud systems | |
| CN103118130A (zh) | 一种用于分布式服务的集群管理方法和系统 | |
| CN103152200B (zh) | 虚拟机迁移方法、交换机、网络管理设备和网络系统 | |
| CN103078965A (zh) | 虚拟机的ip地址管理方法 | |
| CN110071965A (zh) | 一种基于云平台的数据中心管理系统 | |
| CN105162623B (zh) | 一种云处理方法及云服务器 | |
| CN105162897A (zh) | 一种虚拟机ip地址分配的系统、方法及网络虚拟机 | |
| CN104537045A (zh) | 一种基于分布式系统的业务分配方法及装置 | |
| CN104901999B (zh) | 一种可靠性感知的虚拟数据中心跨域映射方法 | |
| CN104468223A (zh) | 一种数据中心计算、存储、网络设备自动管理分配方法 | |
| CN110868435B (zh) | 一种裸金属服务器调度方法、装置及存储介质 | |
| CN103812672A (zh) | 一种新增网元设备的发现方法、相关设备及系统 | |
| Abbasov | Cloud computing: State of the art reseach issues | |
| CN108833570A (zh) | 一种基于云存储的集群存储及均衡传输系统 | |
| Shelar et al. | Efficient virtual machine placement with energy saving in cloud data center | |
| CN105227666A (zh) | 一种面向云计算的整机柜管理架构 | |
| CN112910796B (zh) | 流量管理方法、装置、设备、存储介质以及程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP02 | Change in the address of a patent holder |
Address after: 523808 19th Floor, Cloud Computing Center, Chinese Academy of Sciences, No. 1 Kehui Road, Songshan Lake Hi-tech Industrial Development Zone, Dongguan City, Guangdong Province Patentee after: G-Cloud Technology Co., Ltd. Address before: 523808 No. 14 Building, Songke Garden, Songshan Lake Science and Technology Industrial Park, Dongguan City, Guangdong Province Patentee before: G-Cloud Technology Co., Ltd. |
|
| CP02 | Change in the address of a patent holder |