CN107315667B

CN107315667B - 一种存储系统二级缓存加速性能测试方法及系统

Info

Publication number: CN107315667B
Application number: CN201710493673.9A
Authority: CN
Inventors: 张超凡
Original assignee: Suzhou Inspur Intelligent Technology Co Ltd
Current assignee: Suzhou Inspur Intelligent Technology Co Ltd
Priority date: 2017-06-26
Filing date: 2017-06-26
Publication date: 2020-10-23
Anticipated expiration: 2037-06-26
Also published as: CN107315667A

Abstract

本发明涉及存储技术领域，提供一种存储系统二级缓存加速性能测试方法及系统，方法包括：在存储端执行添加主机和卷映射的动作，并创建基于固态硬盘的缓存加速卷，并将创建的基于固态硬盘的缓存加速卷映射到服务器；在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射，同时，执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；控制在vdbench工具里引用所述盘符，并利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果，从而实现对测试用例通过与否的判断，提高了测试用例的执行效率。

Description

一种存储系统二级缓存加速性能测试方法及系统

技术领域

本发明属于存储技术领域，尤其涉及一种存储系统二级缓存加速性能测试方法及系统。

背景技术

随着IT领域技术的不断发展和大数据时代的到来，对数据的存储和处理也随之越来越重要。统一存储系统的优势在于规划整体存储容量的能力，即通过部署一个统一存储系统可以省去对文件存储容量以及数据块存储容量分别进行规划的程序步骤。统一存储系统的存在，具有明显的技术优势，具体为：

(1)使存储系统容量的利用率大大提升，容量本身并没有标准限制，统一存储系统可以避免与分别对数据块及文件存储支持相关的容量利用率方面的问题，用户不必担心买多了支持其中一种协议的存储而少买了支持另外一种协议的存储设备。

(2)存储资源池的灵活性，用户可以在无需知道应用是否需要数据块或者文件数据访问的情况下，而自由分配存储来满足应用环境的需要。

(3)积极支持服务器虚拟化，用户在部署服务器虚拟化环境时，都会因为性能方面的要求而对基于数据块的裸设备映射(RDM)提出要求，统一存储为用户如何存储他们的虚拟机提供了选择，而无需像之前那样分别购买存储区域网络(SAN)和网络附件存储(NAS)设备。

但是，随着技术的不断发展，在现有的统一存储系统开发新功能模块成为一种需要，并且在开发的新功能模块上进行性能测试就成为一项重要的工作，例如关于存储系统二级缓存的加速性能的测试，目前对于这类的测试用例采用手动执行，测试效率较低。

发明内容

本发明的目的在于提供一种可快速对存储系统二级缓存加速性能进行自动测试的存储系统二级缓存加速性能测试方法。

本发明是这样实现的，一种存储系统二级缓存加速性能测试方法，所述方法包括下述步骤：

在存储端执行添加主机和卷映射的动作，并创建基于固态硬盘的缓存加速卷，并将创建的基于固态硬盘的缓存加速卷映射到服务器；

在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射，同时，执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；

控制在vdbench工具里引用所述盘符，并利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果。

作为一种改进的方案，所述在存储端执行添加主机和卷映射的动作的步骤之前还包括下述步骤：

在统一存储设备上灌装带有基于固态硬盘的高速缓存功能的存储系统，并在服务器端配置所述vdbench工具所需要的java环境。

作为一种改进的方案，所述在服务器端配置所述vdbench工具所需要的java环境的步骤之后还包括下述步骤：

在存储端，配置SSH接入所述存储端的IP地址和用户名及密码。

作为一种改进的方案，所述在存储端，配置SSH接入所述存储端的IP地址和用户名及密码的步骤之后还包括下述步骤：

在存储端，配置SSH接入所述服务器端的IP地址和用户名及密码。

作为一种改进的方案，所述缓存加速卷的大小为1tb。

本发明的另一目的在于提供一种存储系统二级缓存加速性能测试系统，所述系统包括：

添加动作执行模块，用于在存储端执行添加主机和卷映射的动作；

缓存加速卷创建模块，用于创建基于固态硬盘的缓存加速卷；

映射模块，用于将创建的基于固态硬盘的缓存加速卷映射到服务器；

扫描模块，用于在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷；

卷添加模块，用于添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射；

盘符提取模块，用于执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；

盘符引用模块，用于控制在vdbench工具里引用所述盘符；

性能测试模块，用于利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果。

作为一种改进的方案，所述系统还包括：

灌装模块，用于在统一存储设备上灌装带有基于固态硬盘的高速缓存功能的存储系统；

环境配置模块，用于在服务器端配置所述vdbench工具所需要的java环境。

作为一种改进的方案，所述系统还包括：

第一初始化配置模块，用于在存储端，配置SSH接入所述存储端的IP地址和用户名及密码。

作为一种改进的方案，所述系统还包括：

第二初始化配置模块，用于在存储端，配置SSH接入所述服务器端的IP地址和用户名及密码。

作为一种改进的方案，所述缓存加速卷的大小为1tb。

在本发明中，在存储端执行添加主机和卷映射的动作，并创建基于固态硬盘的缓存加速卷，并将创建的基于固态硬盘的缓存加速卷映射到服务器；在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射，同时，执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；控制在vdbench工具里引用所述盘符，并利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果，从而实现对测试用例通过与否的判断，提高了测试用例的执行效率。

附图说明

图1是本发明提供的存储系统二级缓存加速性能测试方法的实现流程图；

图2是本发明提供的存储系统二级缓存加速性能测试系统的结构框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

图1示出了本发明提供的存储系统二级缓存加速性能测试方法的实现流程图，其具体包括下述步骤：

在步骤S101中，在存储端执行添加主机和卷映射的动作，并创建基于固态硬盘的缓存加速卷，并将创建的基于固态硬盘的缓存加速卷映射到服务器，其中，该缓存加速卷的大小为1tb。

在该步骤中，在创建基于固态硬盘的缓存加速卷之前，需要执行添加主机和卷映射的操作，其中：

添加主机的操作程序为：

mkhost-fcwwpn****************:****************-force-iogrp0:1:2:3-name ssd-type generic；

其中，主机包含iscsi和fc两种方式，由于性能测试需要iops较大，因此，该实施例中选取fc方式进行测试性能；

添加卷映射的操作程序为：source/Script-repo/com1.conf

sshpass-p$Password ssh-p$Port$Username@$Service_Ip3<<EOF；

当添加卷映射完成后，执行映射动作，其映射程序为：mkvdiskhostmap-force-host 0 1

EOF。

在步骤S102中，在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射，同时，执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符。

在该步骤中，在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射的具体程序实现为：

source/Script-repo/com2.conf

sshpass-p$Password ssh-p$Port$Username@$Service_Ip<<EOF；

执行扫描新映射盘的脚本的程序实现为：

sh rescan-scsi-bus.sh；

提取所述缓存加速卷的盘符的程序实现为：

a＝`fdisk-l|grep-n mapper|grep 00000`

b＝${a#*}

echo$b

c＝${b％：*}

echo$c。

在步骤S103中，控制在vdbench工具里引用所述盘符，并利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果。

在该实施例中，该缓存加速卷进行加速性能测试的脚本是运用重定向编写的性能脚本，其具体程序实现为：

echo

“sd＝sd1,lun＝$c,size＝900G,openflags＝o_direct,threads＝64”>>vdpara_cache_100r_100rand_8hot_8k

echo

‘wd＝wd1,sd＝sd1,rang＝(0,8),xfersize＝8k,rdpct＝100,skew＝80,seekpct＝100’>>vdpara_cache_100r_100rand_8hot_8k

echo

‘wd＝wd2,sd＝sd1,rang＝(8,100),xfersize＝8k,rdpct＝100,skew＝20,seekpct＝100’>>vdpara_cache_100r_100rand_8hot_8k

echo‘rd＝rd1,wd＝wd*,iorate＝max,elapsed＝1800,interval＝1’>>vdpara_cache_100r_100rand_8hot_8k；

该脚本配置完成后，执行该vdbench，即：

./vdbench-f vdpara_cache_100r_100rand_8hot_8k

EOF。

在该实施例中，得到vdbench工具测出的性能统计结果(一般最后一行avg的平均数据即为统计结果)，再对比另一个在存储端未进行加速的卷的性能数据，从而验证了存储系统ssd cache对卷的加速效果。

其中，上述vdbench是一个I/O工作负载生成器，用于验证数据完整性和度量直接附加和网络连接的存储的性能，其是一个免费的工具，容易使用，而且常常用于测试和基准测试。

在本发明实施例中，在执行上述步骤S101之前还需要执行下述步骤：

在该实施例中，在执行测试前，需要预先确保统一存储设备上已经灌装带有该测试功能的软件程序，集群正常创建并使用，无报错信息；

而且，集群中有缓存池和资源池，缓存分区和服务器端配置好性能测试环境。

在本发明实施例中，在服务器端配置所述vdbench工具所需要的java环境的步骤之后还包括下述步骤：

在存储端，配置SSH接入所述存储端的IP地址和用户名及密码；

其中，该步骤为在存储端配置登录存储设备的用户名密文文件，即节点IP地址、用户名和对应密码，以及其他有关的网络配置信息，IP地址包括服务器端IP地址和客户端IP信息，具体的程序实现为：

#Node service ip

Service_Ip1＝100.2.32.171

Service_Ip2＝100.2.32.172

Service_Ip3＝100.2.32.234

#Cluster ip

ClusterIp＝XXXX

#Username and password

Username＝root

Password＝Passw0rd

#Network setup

Port＝26

Mask＝255.255.255.0

Gateway＝100.2.32.1

在本发明实施例中，在存储端，配置SSH接入所述存储端的IP地址和用户名及密码的步骤之后还包括下述步骤：

在存储端，配置SSH接入所述服务器端的IP地址和用户名及密码；

其中，该步骤为在服务器端配置登录服务器的用户名密文文件，即节点IP地址、用户名和对应密码，以及其他有关的网络配置信息，具体的程序实现为：

#Node service ip

Service_Ip1＝100.2.**.***

#Cluster ip

ClusterIp＝XXXX

#Username and password

Username＝root

Password＝Passw0rd

#Network setup

Port＝22

Mask＝255.255.255.0

Gateway＝100.2.32.1

在本发明实施例中，上述SSH为Secure Shell的缩写，由IETF的网络小组(NetworkWorking Group)所制定；SSH为建立在应用层基础上的安全协议。SSH是目前较可靠，专为远程登录会话和其他网络服务提供安全性的协议。利用SSH协议可以有效防止远程管理过程中的信息泄露问题。SSH最初是UNIX系统上的一个程序，后来又迅速扩展到其他操作平台。SSH在正确使用时可弥补网络中的漏洞。SSH客户端适用于多种平台。几乎所有UNIX平台—包括HP-UX、Linux、AIX、Solaris、Digital UNIX、Irix，以及其他平台，都可运行SSH。

其中，Shell是指“提供使用者使用界面”的软件。其类似于DOS下的command和后来的cmd.exe。其接收用户命令，然后调用相应的应用程序。同时它又是一种程序设计语言。作为命令语言，其交互式解释和执行用户输入的命令或者自动地解释和执行预先设定好的一连串的命令；作为程序设计语言，其定义了各种变量和参数，并提供了许多在高级语言中才具有的控制结构，包括循环和分支。

Shell脚本与Windows/Dos下的批处理相似，也就是用各类命令预先放入到一个文件中，方便一次性执行的一个程序文件，主要是方便管理员进行设置或者管理用的。但是其比Windows下的批处理更强大，比用其他编程程序编辑的程序效率更高。

图2示出了本发明提供的存储系统二级缓存加速性能测试系统的结构框图，为了便于说明，图中仅给出了与本发明实施例相关的部分。

添加动作执行模块11，用于在存储端执行添加主机和卷映射的动作；

缓存加速卷创建模块12，用于创建基于固态硬盘的缓存加速卷；

映射模块13，用于将创建的基于固态硬盘的缓存加速卷映射到服务器；

扫描模块14，用于在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷；

卷添加模块15，用于添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射；

盘符提取模块16，用于执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；

盘符引用模块17，用于控制在vdbench工具里引用所述盘符；

性能测试模块18，用于利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果。

在该实施例中，灌装模块19，用于在统一存储设备上灌装带有基于固态硬盘的高速缓存功能的存储系统；

环境配置模块20，用于在服务器端配置所述vdbench工具所需要的java环境。

在该实施例中，第一初始化配置模块21，用于在存储端，配置SSH接入所述存储端的IP地址和用户名及密码；

第二初始化配置模块22，用于在存储端，配置SSH接入所述服务器端的IP地址和用户名及密码。

其中，上述各个模块的功能如上述方法实施例所记载，在此不再赘述，但不用以限制本发明。

在本发明实施例中，在存储端执行添加主机和卷映射的动作，并创建基于固态硬盘的缓存加速卷，并将创建的基于固态硬盘的缓存加速卷映射到服务器；在服务器端执行扫描动作，获取所述存储端映射到的所述基于固态硬盘的缓存加速卷，并添加扫描到的基于固态硬盘的缓存加速卷所对应的卷映射，同时，执行扫描新映射盘的脚本，提取所述缓存加速卷的盘符；控制在vdbench工具里引用所述盘符，并利用所述vdbench工具对所述缓存加速卷进行加速性能测试，获取测试结果，从而实现对测试用例通过与否的判断，提高了测试用例的执行效率。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

以上所述为本发明最佳实施方式的举例，其中未详细述及的部分均为本领域普通技术人员的公知常识。本发明的保护范围以权利要求的内容为准，任何基于本发明的技术启示而进行的等效变换，也在本发明的保护范围之内。

Claims

1.一种存储系统二级缓存加速性能测试方法，其特征在于，所述方法包括下述步骤：

2.根据权利要求1所述的存储系统二级缓存加速性能测试方法，其特征在于，所述在存储端执行添加主机和卷映射的动作的步骤之前还包括下述步骤：

3.根据权利要求2所述的存储系统二级缓存加速性能测试方法，其特征在于，所述在服务器端配置所述vdbench工具所需要的java环境的步骤之后还包括下述步骤：

4.根据权利要求3所述的存储系统二级缓存加速性能测试方法，其特征在于，所述在存储端，配置SSH接入所述存储端的IP地址和用户名及密码的步骤之后还包括下述步骤：

5.根据权利要求1至4任一项所述的存储系统二级缓存加速性能测试方法，其特征在于，所述缓存加速卷的大小为1tb。

6.一种存储系统二级缓存加速性能测试系统，其特征在于，所述系统包括：

盘符引用模块，用于控制在vdbench工具里引用所述盘符；

7.根据权利要求6所述的存储系统二级缓存加速性能测试系统，其特征在于，所述系统还包括：

8.根据权利要求7所述的存储系统二级缓存加速性能测试系统，其特征在于，所述系统还包括：

9.根据权利要求8所述的存储系统二级缓存加速性能测试系统，其特征在于，所述系统还包括：

10.根据权利要求6至9任一项所述的存储系统二级缓存加速性能测试系统，其特征在于，所述缓存加速卷的大小为1tb。