CN112667166A - 一种基于云平台的云硬盘动态QoS设置方法及工具 - Google Patents

一种基于云平台的云硬盘动态QoS设置方法及工具 Download PDF

Info

Publication number
CN112667166A
CN112667166A CN202011619411.0A CN202011619411A CN112667166A CN 112667166 A CN112667166 A CN 112667166A CN 202011619411 A CN202011619411 A CN 202011619411A CN 112667166 A CN112667166 A CN 112667166A
Authority
CN
China
Prior art keywords
cloud
hard disk
qos
cloud hard
capacity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011619411.0A
Other languages
English (en)
Inventor
李凯
徐伟涛
高传集
张晖
李超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Cloud Information Technology Co Ltd
Original Assignee
Inspur Cloud Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Cloud Information Technology Co Ltd filed Critical Inspur Cloud Information Technology Co Ltd
Priority to CN202011619411.0A priority Critical patent/CN112667166A/zh
Publication of CN112667166A publication Critical patent/CN112667166A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开一种基于云平台的云硬盘动态QoS设置方法及工具,涉及云硬盘技术领域,其实现内容包括:建立云平台存储集群;根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;创建云硬盘类型并绑定QoS规格;选择云硬盘类型及容量大小进行创建云硬盘;创建完成,在云服务器上挂载并使用云硬盘。本发明可以使相同类型的云硬盘性能能够根据云硬盘类型以及容量大小动态设置云硬盘读、写IOPS以及读、写吞吐量等QoS,来合理的平衡云硬盘类型、容量与性能的关系。

Description

一种基于云平台的云硬盘动态QoS设置方法及工具
技术领域
本发明涉及云硬盘技术领域,具体的说是一种基于云平台的云硬盘动态QoS设置方法及工具。
背景技术
随着云计算技术的推广和普及,其运维成本低、按需计费、可靠性高等优势已越发显露出来,越来越来的政府、企业及个人选择将业务迁移到云端。
云硬盘作云平台的块存储服务,如何向用户提供更加合理的性能与容量大小平衡的存储服务,已然成为一个亟待解决的问题。传统的做法,是根据不同成本的物理磁盘介质,定义不同的QoS(Quality of Service,服务质量),而该值仅仅物理磁盘介质决定,这就造成了用户购买20GiB的云硬盘容量,与购买200GiB的云硬盘容量所享受的性能是一样的,而云硬盘的容量越大,意味着预期要读、写的数据越多,性能仍然固定不变显然已不再适合。
发明内容
本发明针对目前技术发展的需求和不足之处,合理的平衡云硬盘类型、容量与性能的关系,在同一种物理存储介质的基础上,提供一种基于云平台的云硬盘动态QoS设置方法及工具,使容量越大的云硬盘持有相对更高的读、写IOPS以及读、写吞吐量。
首先,本发明公开一种基于云平台的云硬盘动态QoS设置方法,解决上述技术问题采用的技术方案如下:
一种基于云平台的云硬盘动态QoS设置方法,其实现步骤包括:
步骤S1、建立云平台存储集群;
步骤S2、根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;
步骤S3、定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;
步骤S4、创建云硬盘类型并绑定QoS规格;
步骤S5、选择云硬盘类型及容量大小进行创建云硬盘;
步骤S6、创建完成,在云服务器上挂载并使用云硬盘。
进一步的,执行步骤S2过程中,结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
进一步的,定义QoS规格时,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减。
优选的,云硬盘类型为SATA或SSD,SATA云硬盘绑定name为QOS_SATA的QoS,SSD云硬盘绑定name为QOS_SSD的QoS。
进一步的,创建云硬盘后,当云硬盘容量无法满足当前业务增长的需求时,对云硬盘进行扩容操作,此时,QoS将自动按照新容量下的IOPS和吞吐量数值进行调整。
进一步的,挂载使用云硬盘时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可;
挂载使用云硬盘后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看,并通过测试工具进一步验证实际效果。
其次,本发明公开一种基于云平台的云硬盘动态QoS设置工具,解决上述技术问题采用的技术方案如下:
一种基于云平台的云硬盘动态QoS设置工具,其包括:
建立模块,用于建立云平台存储集群;
计算模块,用于根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;
定义模块,用于定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;
创建绑定模块,用于创建云硬盘类型并绑定QoS规格;
选择创建模块,用于选择云硬盘类型及容量大小进行创建云硬盘;
挂载模块,用于将云硬盘挂载到云服务器。
进一步的,计算模块结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
进一步的,定义模块定义QoS规格时,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减。
进一步的,挂载模块将云硬盘挂载到云服务器时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可;
挂载模块将云硬盘挂载到云服务器后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看。
本发明的一种基于云平台的云硬盘动态QoS设置方法及工具,与现有技术相比具有的有益效果是:
本发明在传统通过云硬盘物理存储介质设定固定IOPS和吞吐量的基础上,融入了基数值、增长因子、容量和阀值等影响因子,使相同类型的云硬盘性能能够根据云硬盘类型以及容量大小动态设置云硬盘读、写IOPS以及读、写吞吐量等QoS,来合理的平衡云硬盘类型、容量与性能的关系。
附图说明
附图1是本发明实施例一的方法流程图;
附图2是本发明实施例二的连接框图。
附图中各标号信息表示:
1、建立模块,2、计算模块,3、定义模块,4、创建绑定模块,
5、选择创建模块,6、挂载模块。
具体实施方式
为使本发明的技术方案、解决的技术问题和技术效果更加清楚明白,以下结合具体实施例,对本发明的技术方案进行清楚、完整的描述。
实施例一:
参考附图1,本实施例提出一种基于云平台的云硬盘动态QoS设置方法,其实现步骤包括:
步骤S1、建立云平台存储集群,云平台存储集群可以是分布式存储集群。
步骤S2、根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力。此时,结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
步骤S3、定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值。这一步骤中,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减,即保证限制QoS无限增长,避免占用过多资源,影响其他云硬盘的正常读写,又能保证QoS在一个最低水平之上,并随容量大小呈线性增长。如定义name为QOS_SATA的IOPS为:min{1800+10*容量,3000},吞吐量为:min{60+0.15*容量,120}MBps。当容量为20GiB时,IOPS即为2000,吞吐量为63MBps,而当容量为200GiB时,IOPS则为3000,吞吐量为90MBps。而对于SSD类型,因磁盘固有性能较高,可定义性能数值较高的QoS公式,如IOPS:min{2000+30*容量,25000},吞吐量:min{120+0.5*容量,300}MBps,此时一个容量为20GiB的云硬盘,该云硬盘的IOPS为2600,吞吐量为130MBps。
步骤S4、创建云硬盘类型并绑定QoS规格。云硬盘类型为SATA或SSD,SATA云硬盘绑定name为QOS_SATA的QoS,SSD云硬盘绑定name为QOS_SSD的QoS。
创建云硬盘后,当云硬盘容量无法满足当前业务增长的需求时,对云硬盘进行扩容操作,此时,QoS将自动按照新容量下的IOPS和吞吐量数值进行调整。
步骤S5、选择云硬盘类型及容量大小进行创建云硬盘。
步骤S6、创建完成,在云服务器上挂载并使用云硬盘。
挂载使用云硬盘时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可。
挂载使用云硬盘后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看,并通过测试工具进一步验证实际效果。
实施例二:
参考附图2,本实施例提出一种基于云平台的云硬盘动态QoS设置工具,其包括:
建立模块1,用于建立云平台存储集群;
计算模块2,用于根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;
定义模块3,用于定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;
创建绑定模块4,用于创建云硬盘类型并绑定QoS规格;
选择创建模块5,用于选择云硬盘类型及容量大小进行创建云硬盘;
挂载模块6,用于将云硬盘挂载到云服务器。
本实施例中,计算模块2结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
本实施例中,定义模块3定义QoS规格时,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减。
本实施例中,挂载模块6将云硬盘挂载到云服务器时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可;挂载模块6将云硬盘挂载到云服务器后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看。
综上可知,采用本发明的一种基于云平台的云硬盘动态QoS设置方法及工具,可以使相同类型的云硬盘性能能够根据云硬盘类型以及容量大小动态设置云硬盘读、写IOPS以及读、写吞吐量等QoS,来合理的平衡云硬盘类型、容量与性能的关系。
以上应用具体个例对本发明的原理及实施方式进行了详细阐述,这些实施例只是用于帮助理解本发明的核心技术内容。基于本发明的上述具体实施例,本技术领域的技术人员在不脱离本发明原理的前提下,对本发明所作出的任何改进和修饰,皆应落入本发明的专利保护范围。

Claims (10)

1.一种基于云平台的云硬盘动态QoS设置方法,其特征在于,其实现步骤包括:
步骤S1、建立云平台存储集群;
步骤S2、根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;
步骤S3、定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;
步骤S4、创建云硬盘类型并绑定QoS规格;
步骤S5、选择云硬盘类型及容量大小进行创建云硬盘;
步骤S6、创建完成,在云服务器上挂载并使用云硬盘。
2.根据权利要求1所述的一种基于云平台的云硬盘动态QoS设置方法,其特征在于,执行步骤S2过程中,结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
3.根据权利要求1所述的一种基于云平台的云硬盘动态QoS设置方法,其特征在于,定义QoS规格时,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减。
4.根据权利要求1所述的一种基于云平台的云硬盘动态QoS设置方法,其特征在于,云硬盘类型为SATA或SSD,SATA云硬盘绑定name为QOS_SATA的QoS,SSD云硬盘绑定name为QOS_SSD的QoS。
5.根据权利要求1所述的一种基于云平台的云硬盘动态QoS设置方法,其特征在于,创建云硬盘后,当云硬盘容量无法满足当前业务增长的需求时,对云硬盘进行扩容操作,此时,QoS将自动按照新容量下的IOPS和吞吐量数值进行调整。
6.根据权利要求1所述的一种基于云平台的云硬盘动态QoS设置方法,其特征在于,挂载使用云硬盘时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可;
挂载使用云硬盘后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看,并通过测试工具进一步验证实际效果。
7.一种基于云平台的云硬盘动态QoS设置工具,其特征在于,其包括:
建立模块,用于建立云平台存储集群;
计算模块,用于根据存储集群规模的大小计算出能够提供的读、写IOPS及读、写吞吐量总值,该值即为整个存储集群能够提供的最大能力;
定义模块,用于定义QoS规格,QoS规格的影响因子包含基础值、增长因子、容量和阀值;
创建绑定模块,用于创建云硬盘类型并绑定QoS规格;
选择创建模块,用于选择云硬盘类型及容量大小进行创建云硬盘;
挂载模块,用于将云硬盘挂载到云服务器。
8.根据权利要求7所述的一种基于云平台的云硬盘动态QoS设置工具,其特征在于,所述计算模块结合单块云硬盘的读、写IOPS及读、写吞吐性能,根据存储集群总值和来规划该集群能够承载的云硬盘总数,或者,通过需要的云硬盘总数来倒推存储集群的规模。
9.根据权利要求7所述的一种基于云平台的云硬盘动态QoS设置工具,其特征在于,所述定义模块定义QoS规格时,需要定义单个云硬盘的性能分配计算公式:min{基础值+增长因子*容量,阀值},使单个云硬盘的性能值在一个相对稳定的范围内根据容量大小上下增减。
10.根据权利要求7所述的一种基于云平台的云硬盘动态QoS设置工具,其特征在于,所述挂载模块将云硬盘挂载到云服务器时,QoS将作用在虚拟化层Hypervisor端,在计算节点上对云服务器设置QoS即可;
所述挂载模块将云硬盘挂载到云服务器后,可以进入云服务器所在计算节点,通过virsh dumpxml<serverid>|grep sec进行QoS的查看。
CN202011619411.0A 2020-12-30 2020-12-30 一种基于云平台的云硬盘动态QoS设置方法及工具 Pending CN112667166A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011619411.0A CN112667166A (zh) 2020-12-30 2020-12-30 一种基于云平台的云硬盘动态QoS设置方法及工具

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011619411.0A CN112667166A (zh) 2020-12-30 2020-12-30 一种基于云平台的云硬盘动态QoS设置方法及工具

Publications (1)

Publication Number Publication Date
CN112667166A true CN112667166A (zh) 2021-04-16

Family

ID=75411569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011619411.0A Pending CN112667166A (zh) 2020-12-30 2020-12-30 一种基于云平台的云硬盘动态QoS设置方法及工具

Country Status (1)

Country Link
CN (1) CN112667166A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117195316A (zh) * 2023-08-21 2023-12-08 深圳市云存宝技术有限公司 一种基于云技术的云硬盘管理方法、装置、服务器及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107357530A (zh) * 2017-07-12 2017-11-17 郑州云海信息技术有限公司 一种针对OpenStack云硬盘的设置方法及装置
CN107404523A (zh) * 2017-07-21 2017-11-28 中国石油大学(华东) 云平台自适应资源调度系统和方法
CN109802976A (zh) * 2017-11-16 2019-05-24 航天信息股份有限公司 Open Stack云平台的云硬盘动态调度方法、装置以及电子系统
CN109951506A (zh) * 2017-12-20 2019-06-28 中移(苏州)软件技术有限公司 一种存储集群性能的评估方法及设备
CN111078152A (zh) * 2019-12-20 2020-04-28 浪潮云信息技术有限公司 一种基于云平台的云硬盘创建方法和装置
CN111901385A (zh) * 2020-06-30 2020-11-06 广东浪潮大数据研究有限公司 一种云硬盘限速方法、系统、装置及计算机可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107357530A (zh) * 2017-07-12 2017-11-17 郑州云海信息技术有限公司 一种针对OpenStack云硬盘的设置方法及装置
CN107404523A (zh) * 2017-07-21 2017-11-28 中国石油大学(华东) 云平台自适应资源调度系统和方法
CN109802976A (zh) * 2017-11-16 2019-05-24 航天信息股份有限公司 Open Stack云平台的云硬盘动态调度方法、装置以及电子系统
CN109951506A (zh) * 2017-12-20 2019-06-28 中移(苏州)软件技术有限公司 一种存储集群性能的评估方法及设备
CN111078152A (zh) * 2019-12-20 2020-04-28 浪潮云信息技术有限公司 一种基于云平台的云硬盘创建方法和装置
CN111901385A (zh) * 2020-06-30 2020-11-06 广东浪潮大数据研究有限公司 一种云硬盘限速方法、系统、装置及计算机可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Z荒野求生: "华为-公有云-云硬盘-磁盘类型及性能介绍", 《CSDN》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117195316A (zh) * 2023-08-21 2023-12-08 深圳市云存宝技术有限公司 一种基于云技术的云硬盘管理方法、装置、服务器及介质

Similar Documents

Publication Publication Date Title
US8590050B2 (en) Security compliant data storage management
CN101477444B (zh) 一种虚拟存储方法和设备
CN101510145B (zh) 一种存储系统管理方法和装置
CN102096557B (zh) 一种独立磁盘冗余阵列的扩容方法、装置及系统
CN102129434B (zh) 读写分离数据库的方法及系统
CN105224237A (zh) 一种数据存储方法及装置
US20050223168A1 (en) Storage control device, control method and storage medium recording a control program
CN107506145B (zh) 一种物理存储调度方法及云主机创建方法
US11385823B2 (en) Method, electronic device and computer program product for rebuilding disk array
CN103116542B (zh) 设备扩容稳定性测试方法
CN107515827A (zh) Pcie ssd自定义日志的存储方法、装置及ssd
CN107291392A (zh) 一种固态硬盘及其读写方法
CN111163149B (zh) 一种基于区块链的智能合约平台方法
US20060248015A1 (en) Adjusting billing rates based on resource use
CN112667166A (zh) 一种基于云平台的云硬盘动态QoS设置方法及工具
CN111367856A (zh) 数据复制方法、装置、电子设备及机器可读存储介质
CN111880748B (zh) 一种用于分布式存储系统的固态硬盘磨损均衡方法
CN114442937A (zh) 文件缓存方法、装置、计算机设备及存储介质
CN105373339A (zh) 一种硬盘数据的拷贝方法及系统
CN113835625B (zh) 一种基于子路径的数据存储方法、装置、设备及存储介质
CN113805812B (zh) 一种缓存管理方法、装置、设备及存储介质
CN103530240A (zh) 数据块缓存方法和装置
CN103064926A (zh) 数据处理方法和装置
CN109783032A (zh) 一种基于异构计算的分布式存储加速方法及装置
CN109918355A (zh) 实现基于对象存储服务的nas的虚拟元数据映射系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210416