CN104317726A - 一种存储io性能的测试方法 - Google Patents

一种存储io性能的测试方法 Download PDF

Info

Publication number
CN104317726A
CN104317726A CN201410662217.9A CN201410662217A CN104317726A CN 104317726 A CN104317726 A CN 104317726A CN 201410662217 A CN201410662217 A CN 201410662217A CN 104317726 A CN104317726 A CN 104317726A
Authority
CN
China
Prior art keywords
iscsi
testing
configuration
pressing machine
performance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410662217.9A
Other languages
English (en)
Inventor
翟院华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN201410662217.9A priority Critical patent/CN104317726A/zh
Publication of CN104317726A publication Critical patent/CN104317726A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Test And Diagnosis Of Digital Computers (AREA)

Abstract

本发明公开一种存储IO性能的测试方法,属于存储IO性能的测试领域,具体步骤为:①配置存储,搭建存储服务环境;②配置压力机环境,搭建压力机测试环境;③各个压力机上分别安装测试软件vdbench,根据测试内容设置vdbench参数;④运行vdbench,输出测试结果;本发明通过这种测试方法能有效客观的模拟存储在各种具体的应用环境下的IO情形进行测试,能真实的反应在具体应用时存储IO的性能,总结其IO特性,合理分配存储,使存储性能得到最大限度的利用。

Description

一种存储IO性能的测试方法
技术领域
本发明公开一种测试方法,属于存储IO性能的测试领域,具体地说是一种存储IO性能的测试方法。
背景技术
存储IO性能是目前用户关注的一个重要参数,其中存储IO的测试主要集中在测试存储读写压力,但目前的测试方法得到的测试结果数据一般不够真实,无法反应存储IO操作在真实应用时应对各种不同数据场景时的压力数据,导致了现有的存储IO性能的测试无法与实际的应用相符合,不能简洁有效的反应存储的IO性能,而现实中存储的IO性能同时面对不同应用环境不同数据请求时的情况比比皆是。因此针对上述问题,本发明提供一种存储IO性能的测试方法,能简洁有效的测试存储在面对不同数据请求时的IO性能,使存储IO的测试基于不同应用场景下的不同数据类型的请求,均能进行测试,并得到客观真实的测试结果数据。
发明内容
本发明针对现有技术存在的不足和问题,提供一种存储IO性能的测试方法,通过该方法可以指导存储IO性能适应在用户实际环境中不同数据请求的压力测试,了解存储IO性能的真实测试数据,进而最大程度的合理利用存储IO。本发明一种存储IO性能的测试方法,提出的具体方案是:
一种存储IO性能的测试方法,具体步骤为:
①配置存储,搭建存储服务环境:创建RAID组,建立资源池,划LUN;创建iscsi主机组,建立iscsi主机,建立iscsi主机时,iscsi主机名从压力机端获得;配置存储iscsi网络;将LUN映射给主机组;
②配置压力机环境,搭建压力机测试环境:安装操作系统,配置压力机数量;更改主机名;配置压力机IP;修改/etc/hosts配置文件,将压力机IP,主机名加入/etc/hosts文件中;关闭防火墙,selinux;配置无密码登陆;配置iscsi服务,在压力机端,启动ISCSI服务,查询ISCSI设备target的iqn号码,登陆到ISCSI存储设备;编辑multipath多路径软件的etc/multipath.conf配置文件;
③各个压力机上分别安装测试软件vdbench,根据测试内容设置vdbench参数;
④运行vdbench,输出测试结果。
所述的步骤②中配置压力机IP包括配置压力机连接iscsi口的IP,与存储iscsi口相通和配置压力机互联通信口IP。
所述的步骤②中配置无密码登陆是配置ssh通信无密码登陆或者配置rsh通信无密码登陆。
所述的步骤②中编辑multipath多路径软件的etc/multipath.conf配置文件,保存etc/multipath.conf备用,然后新建一个multipath.conf 文件,编辑新的配置文件:
保留以下参数:其余参数注释掉:
defaults {
user_friendly_names yes
udev_dir /dev
path_grouping_policy multibus
failback immediate
no_path_retry fail
}
,保存退出。
所述的步骤③中vdbench参数包括hd:指定压力机,sd:指定测试LUN,wd:压力模型。
本发明的有益之处是:本发明提供一种存储IO性能的测试方法,通过这种测试方法能有效客观的模拟存储在各种具体的应用环境下的IO情形进行测试,能真实的反应在具体应用时存储IO的性能,总结其IO特性,合理分配存储,使存储性能能得到最大限度的利用,这种测试方法能够找存储在实际应用中时各种不同环境的IO瓶颈,能使客户在存储提供不同场景服务时对不同应用场景的选择有依据,使存储得到最大的利用,到达最大的性价比。
具体实施方式
以浪潮AS500H,IP-SAN环境为例,说明本发明一种存储IO性能的测试方法,具体步骤为:
①配置存储,搭建存储服务环境:
创建RAID组,建立资源池,划LUN;
创建iscsi主机组,建立iscsi主机,建立iscsi主机时,iscsi主机名从压力机端获得;
配置存储iscsi网络;将LUN映射给主机组;
②配置压力机环境:
以两台压力机为例,给两台压力机host1,host2安装redhat6.4操作系统。
更改主机名,进入/etc/sysconfig/network中分别将两压力机主机名分别改为host1,host2;
配置压力机IP,配置两台压力机连接iscsi口的IP,与存储iscsi口相通和配置两台压力机互联通信口IP;
修改/etc/hosts配置文件,将两台压力机IP,主机名加入/etc/hosts文件中;
关闭防火墙,selinux;
配置ssh无密码登陆,在host1上:
cd  /root/.ssh
ssh-keygen -t rsa 
cp id_rsa.pub authorized_keys
这步完成后,正常情况下无密码登录本机;
scp authorized_keys host2 IP:/root/.ssh/authorized_keys,第一次仍需要密码;
这时,host1可以无密码访问host2;
配置iscsi服务,在压力机端,启动ISCSI服务:rootbhnfs1.baihui.com~>service iscsi start
查询ISCSI设备(HP storageworks mpx100)target的iqn号码:
rootbhnfs1.baihui.com~>iscsiadm -m discovery -t sendtargets -p 192.168.14.1
192.168.14.1:3260,0 iqn.1986-03.com.hp:fcgw.mpx100.0.50014380025bad30.50014380025bad38
登陆到ISCSI存储设备:
[rootlocalhost~]#Iscsiadm –m node –T iqn.1986-03.com.hp:fcgw.mpx100.0.50014380025bad30.50014380025bad38- p 192.168.14.1:3260 –l
编辑multipath多路径软件的etc/multipath.conf配置文件,保存etc/multipath.conf备用,然后新建一个multipath.conf 文件,编辑新的配置文件:
保留以下参数:其余参数注释掉:
defaults {
user_friendly_names yes
udev_dir /dev
path_grouping_policy multibus
failback immediate
no_path_retry fail
}
,保存退出。
启动服务:
Service multipathd restart
启动成功后,我们会在dev目录下看到下面的目录:
/dev/mapper/mpathn,
/dev/mpath/mpathn,
/dev/dm-n.
说明: 其中/dev/mapper/mpathn 是软件虚拟出来的多路径设备,这个可以被我们用来挂载使用。
/dev/mpath/mpathn 这个是udev设备管理器创建的,不能用来挂载。
/dev/dm-n 这个是软件自身使用的,不能被软件以外使用。不可挂载。
③各个压力机上分别安装测试软件vdbench,根据测试内容设置vdbench参数:
将测试软件VDbench5.0.2分别拷至host1,host2的同一路径下,如:
host1中
[roothost1 vdbench502]# pwd
/home/vdbench/vdbench502
host2中
[roothost2 vdbench502]# pwd
/home/vdbench/vdbench502
编写测试的文件
此文件参数一般按具体应用环境的不同读写IO来进行设置,以达到真实反映存储IO性能的结果。hd:指定压力机  sd:指定测试LUN   wd:压力模型
可以依据具体的应用环境编写不同的wd加入测试脚本,不同的压力环境同时对存储IO加压,能更客观直接的反应存储的IO性能。
如下:
hd=default,vdbench=/home/vdbench/vdbench502,user=root,shell=ssh
hd=hd1,system=host1 
hd=hd2,system=host2
sd=sd1,host=hd1,lun=/dev/dm-2,openflags=o_direct,threads=128
sd=sd2,host=hd1,lun=/dev/dm-3,openflags=o_direct,threads=128
sd=sd3,host=hd2,lun=/dev/dm-2,openflags=o_direct,threads=128
sd=sd4,host=hd2,lun=/dev/dm-3,openflags=o_direct,threads=128
wd=wd1,sd=sd*,seekpct=100,rdpct=100,xfersize=4K,skew=90,rhpct=100
#wd=wd2,sd=sd*,seekpct=100,rdpct=100,xfersize=4K,skew=0
wd=wd3,sd=sd*,seekpct=100,rdpct=0,xfersize=4K,skew=5
wd=wd4,sd=sd*,seekpct=0.001,rdpct=100,xfersize=64K,skew=5
#wd=wd5,sd=sd*,seekpct=0.001,rdpct=0,xfersize=64K,skew=0
rd=rd1,wd=wd*,iorate=1500,elapsed=300,interval=1,warmup=60
各参数含义:
④运行vdbench,输出测试结果:
在host1端执行指令即可运行,
[roothost1 vdbench]# ./vdbench502/vdbench -f pf-iops-max.txt -o ./output/iops-max-result
Pf-iops-max.txt就是上面编写的测试文件,测试结果保存在/output/iops-max-result中。 
测试结果分析:测试结果为summary.html文件,最后的平均值为最终结果:
Oct 14, 2014  interval   i/o   MB/sec   bytes   read  resp  resp  resp  cpu%  cpu%
rate  1024**2          i/o    pct     time      max   stddev sys+usr   sys
15:40:59.051avg_61-960  2467.26  41.88  17800  74.98  155.371  10758.602  334.227  1.7  1.5
第一个为测试时间,第二个为Iops,第三个为带宽。
通过最终结果,我们可以查看存储IO性能的具体结果。

Claims (5)

1.一种存储IO性能的测试方法,其特征是具体步骤为:
①配置存储,搭建存储服务环境:创建RAID组,建立资源池,划LUN;创建iscsi主机组,建立iscsi主机,建立iscsi主机时,iscsi主机名从压力机端获得;配置存储iscsi网络;将LUN映射给主机组;
②配置压力机环境,搭建压力机测试环境:安装操作系统,配置压力机数量;更改主机名;配置压力机IP;修改/etc/hosts配置文件,将压力机IP,主机名加入/etc/hosts文件中;关闭防火墙,selinux;配置无密码登陆;配置iscsi服务,在压力机端,启动ISCSI服务,查询ISCSI设备target的iqn号码,登陆到ISCSI存储设备;编辑multipath多路径软件的etc/multipath.conf配置文件;
③各个压力机上分别安装测试软件vdbench,根据测试内容设置vdbench参数;
④运行vdbench,输出测试结果。
2.根据权利要求1所述的一种存储IO性能的测试方法,其特征是所述的步骤②中配置压力机IP包括配置压力机连接iscsi口的IP,与存储iscsi口相通和配置压力机互联通信口IP。
3.根据权利要求1或2所述的一种存储IO性能的测试方法,其特征是所述的步骤②中配置无密码登陆是配置ssh通信无密码登陆或者配置rsh通信无密码登陆。
4.根据权利要求3所述的一种存储IO性能的测试方法,其特征是所述的步骤②中编辑multipath多路径软件的etc/multipath.conf配置文件,保存etc/multipath.conf备用,然后新建一个multipath.conf 文件,编辑新的配置文件:
保留以下参数:其余参数注释掉:
defaults {
user_friendly_names yes
udev_dir /dev
path_grouping_policy multibus
failback immediate
no_path_retry fail
}
,保存退出。
5.根据权利要求4所述的一种存储IO性能的测试方法,其特征是所述的步骤③中vdbench参数包括hd:指定压力机,sd:指定测试LUN,wd:压力模型。
CN201410662217.9A 2014-11-19 2014-11-19 一种存储io性能的测试方法 Pending CN104317726A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410662217.9A CN104317726A (zh) 2014-11-19 2014-11-19 一种存储io性能的测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410662217.9A CN104317726A (zh) 2014-11-19 2014-11-19 一种存储io性能的测试方法

Publications (1)

Publication Number Publication Date
CN104317726A true CN104317726A (zh) 2015-01-28

Family

ID=52372961

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410662217.9A Pending CN104317726A (zh) 2014-11-19 2014-11-19 一种存储io性能的测试方法

Country Status (1)

Country Link
CN (1) CN104317726A (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104794058A (zh) * 2015-05-07 2015-07-22 合肥云中信息科技有限公司 一种云桌面虚拟环境性能的测试方法
CN105022648A (zh) * 2015-07-23 2015-11-04 浪潮电子信息产业股份有限公司 一种基于expect命令的HCA卡性能和压力测试的测试方法
CN105607975A (zh) * 2015-12-16 2016-05-25 深圳市迪菲特科技股份有限公司 一种测试磁盘阵列的方法、装置及系统
CN106055441A (zh) * 2016-05-31 2016-10-26 深圳市国鑫恒宇科技有限公司 一种linux系统下服务器的网口性能测试方法及系统
CN106534373A (zh) * 2016-12-27 2017-03-22 郑州云海信息技术有限公司 San存储设备的io性能测试方法及装置
CN106850352A (zh) * 2017-02-10 2017-06-13 郑州云海信息技术有限公司 一种配置vdbench集群测试方法
CN106897181A (zh) * 2017-03-01 2017-06-27 郑州云海信息技术有限公司 一种Vdbench测试装置
CN106998468A (zh) * 2017-04-25 2017-08-01 郑州云海信息技术有限公司 一种视频服务器性能测试的方法及系统
CN107315667A (zh) * 2017-06-26 2017-11-03 郑州云海信息技术有限公司 一种存储系统二级缓存加速性能测试方法及系统
CN107357697A (zh) * 2017-07-07 2017-11-17 郑州云海信息技术有限公司 一种自动进行存储产品压力测试的方法及系统
CN107515803A (zh) * 2017-08-25 2017-12-26 郑州云海信息技术有限公司 一种存储性能测试方法和装置
CN107608867A (zh) * 2017-08-31 2018-01-19 郑州云海信息技术有限公司 一种在集群存储上配置mdtest的元数据性能测试方法及系统
CN107992403A (zh) * 2017-12-26 2018-05-04 郑州云海信息技术有限公司 Io性能测试方法、装置、设备及计算机可读存储介质
CN108897651A (zh) * 2018-07-02 2018-11-27 郑州云海信息技术有限公司 一种san存储设备的测试方法及其系统
CN110018939A (zh) * 2019-03-28 2019-07-16 山东超越数控电子股份有限公司 一种基于scsi协议的硬盘在线故障诊断方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101883019A (zh) * 2010-03-15 2010-11-10 浪潮电子信息产业股份有限公司 一种验证存储服务器是否满足视频应用的测试方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101883019A (zh) * 2010-03-15 2010-11-10 浪潮电子信息产业股份有限公司 一种验证存储服务器是否满足视频应用的测试方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
MARIANO AMMIRABILE等: ""使用vdbench评估短暂存储I/O性能"", 《HTTP://WWW.IBM.COM/DEVELOPERWORKS/CN/CLOUD/LIBRARY/CLVDBENCH/》 *
NONGMIN9366: ""中国移动存储磁盘阵列性能测试规范v1.0.0"", 《HTTP://WENKU.BAIDU.COM/VIEW/418590D2B9F3F90F76C61B89.HTML》 *
PAIKE: ""LINUX下多路径(multi-path)介绍及使用"", 《HTTP://BLOG.SINA.COM.CN/S/BLOG_64864E3A0101CX1Y.HTML》 *

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104794058A (zh) * 2015-05-07 2015-07-22 合肥云中信息科技有限公司 一种云桌面虚拟环境性能的测试方法
CN104794058B (zh) * 2015-05-07 2017-10-10 合肥中科云巢科技有限公司 一种云桌面虚拟环境性能的测试方法
CN105022648A (zh) * 2015-07-23 2015-11-04 浪潮电子信息产业股份有限公司 一种基于expect命令的HCA卡性能和压力测试的测试方法
CN105607975A (zh) * 2015-12-16 2016-05-25 深圳市迪菲特科技股份有限公司 一种测试磁盘阵列的方法、装置及系统
CN106055441A (zh) * 2016-05-31 2016-10-26 深圳市国鑫恒宇科技有限公司 一种linux系统下服务器的网口性能测试方法及系统
CN106055441B (zh) * 2016-05-31 2019-06-14 深圳市同泰怡信息技术有限公司 一种linux系统下服务器的网口性能测试方法及系统
CN106534373A (zh) * 2016-12-27 2017-03-22 郑州云海信息技术有限公司 San存储设备的io性能测试方法及装置
CN106534373B (zh) * 2016-12-27 2020-01-03 苏州浪潮智能科技有限公司 San存储设备的io性能测试方法及装置
CN106850352A (zh) * 2017-02-10 2017-06-13 郑州云海信息技术有限公司 一种配置vdbench集群测试方法
CN106897181A (zh) * 2017-03-01 2017-06-27 郑州云海信息技术有限公司 一种Vdbench测试装置
CN106897181B (zh) * 2017-03-01 2020-03-20 郑州云海信息技术有限公司 一种Vdbench测试装置
CN106998468A (zh) * 2017-04-25 2017-08-01 郑州云海信息技术有限公司 一种视频服务器性能测试的方法及系统
CN106998468B (zh) * 2017-04-25 2018-11-16 郑州云海信息技术有限公司 一种视频服务器性能测试的方法及系统
CN107315667A (zh) * 2017-06-26 2017-11-03 郑州云海信息技术有限公司 一种存储系统二级缓存加速性能测试方法及系统
CN107315667B (zh) * 2017-06-26 2020-10-23 苏州浪潮智能科技有限公司 一种存储系统二级缓存加速性能测试方法及系统
CN107357697A (zh) * 2017-07-07 2017-11-17 郑州云海信息技术有限公司 一种自动进行存储产品压力测试的方法及系统
CN107515803A (zh) * 2017-08-25 2017-12-26 郑州云海信息技术有限公司 一种存储性能测试方法和装置
CN107608867A (zh) * 2017-08-31 2018-01-19 郑州云海信息技术有限公司 一种在集群存储上配置mdtest的元数据性能测试方法及系统
CN107992403A (zh) * 2017-12-26 2018-05-04 郑州云海信息技术有限公司 Io性能测试方法、装置、设备及计算机可读存储介质
CN107992403B (zh) * 2017-12-26 2021-07-02 郑州云海信息技术有限公司 Io性能测试方法、装置、设备及计算机可读存储介质
CN108897651A (zh) * 2018-07-02 2018-11-27 郑州云海信息技术有限公司 一种san存储设备的测试方法及其系统
CN110018939A (zh) * 2019-03-28 2019-07-16 山东超越数控电子股份有限公司 一种基于scsi协议的硬盘在线故障诊断方法

Similar Documents

Publication Publication Date Title
CN104317726A (zh) 一种存储io性能的测试方法
US10929275B2 (en) Automatic test stack creation via production system replication
US8201149B1 (en) System and method for remote execution of a debugging utility using a remote management module
US20100153482A1 (en) Cloud-Based Automation of Resources
CN107315667B (zh) 一种存储系统二级缓存加速性能测试方法及系统
CN105988688A (zh) 一种截图的方法及装置
CN101149665B (zh) 将iSCSI目标名称映射到存储资源的方法和计算系统
CN105573955A (zh) 多协议系统管理方法与系统以及计算机可读媒体
CN106534373B (zh) San存储设备的io性能测试方法及装置
Liu et al. Modeling a leadership-scale storage system
US9021008B1 (en) Managing targeted scripts
CN109274537B (zh) 一种连续性网络虚拟化平台系统
CN107370622A (zh) 一种虚拟机复用宿主机mac和ip的方法及系统
CN102915270B (zh) 用于存储i/o需求录制与压力模拟验证的方法
Shu et al. Design and implementation of an SAN system based on the fiber channel protocol
CN110224879A (zh) 一种整机柜服务器及其节点配置方法、装置和cmc
CN106202220A (zh) 一种读取对象存储系统中数据的方法以及装置
US8880952B1 (en) Generic and extensible provider debug interface
US20210124510A1 (en) Using telemetry data from different storage systems to predict response time
CN102833334A (zh) 一种逻辑卷管理方法
CN103179162B (zh) 一种输出日志的方法及系统
JP5439435B2 (ja) 計算機システムおよびその計算機システムにおけるディスク共有方法
US7526558B1 (en) System and method for supporting a plurality of levels of acceleration in a single protocol session
WO2021217870A1 (zh) 基于excel文件安装集群的方法、装置、设备及存储介质
CN106055441B (zh) 一种linux系统下服务器的网口性能测试方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150128