CN112269697B - 一种设备存储性能测试方法、系统及相关装置 - Google Patents

Abstract

本申请提供一种设备存储性能测试方法，包括：获取测试指令，并与对应的待测试设备建立连接；若待测试设备的硬件环境符合硬件标准，生成硬件环境的测试配置信息；利用硬件环境对应的测试工具进行存储性能测试，得到测试结果；根据测试配置信息确定分析方案，并基于确定的分析分案分析测试结果，得到测试报告。本申请可以大大节省测试执行和结果分析的人力与时间。同时使得测试报告对待测试设备的性能测试更具针对性，所得测试结论更真实，便于用户有效了解待测试设备的实际性能。本申请还提供一种设备存储性能测试系统、计算机可读存储介质和测试终端，具有上述有益效果。

Description

一种设备存储性能测试方法、系统及相关装置

技术领域

本申请涉及产品测试领域，特别涉及一种设备存储性能测试方法、系统及相关装置。

背景技术

服务器每时每刻都需要对数据进行记录和读取，硬盘作为服务器的核心仓库，存储着服务器所有的数据，所以硬盘的读写性能直接决定着服务器的整体存储性能。由于现在网络的快速发展，用户对上网速度/文件下载速度/ 视频通话的质量要求越来越高，而这一系列操作都和服务器的性能有很大关系，服务器的性能指标直接影响用户体验。所以服务器存储性能的测试变得尤为重要。

又因为服务器所用主板/CPU/内存/控制器/硬盘背板/硬盘等型号众多，使得服务器有大量的不同存储配置，可能一种机框类型服务器就会有上百种存储配置，不同存储配置的性能是不同的，这就导致在服务器性能测试中涉及大量的测试场景，整个性能测试会需要非常多的人力和时间，测试结果的可靠性需要标准的配置测试环境和测试方法，执行人员在测试中很容易出现操作差异性导致测试结果不够准确。

发明内容

本申请的目的是提供一种设备存储性能测试方法、设备存储性能测试系统、计算机可读存储介质和测试终端，能够自动进行待测试设备的性能测试，节省人力资源。

为解决上述技术问题，本申请提供一种设备存储性能测试方法，具体技术方案如下：

获取测试指令，并与对应的待测试设备建立连接；

若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

可选的，与对应的待测试设备建立连接之后，还包括：

若所述待测试设备中硬盘的固件版本为旧版本，升级所述硬盘的固件版本至最新版本。

可选的，利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果包括：

基于所述硬件环境安装对应的测试工具；

在存储性能测试开始前抓取所述待测试设备的第一系统日志；

在存储性能测试结束后抓取所述待测试设备的第二系统日志；

根据所述第一系统日志和所述第二系统日志的区别信息得到测试结果；

其中，所述第一系统日志和所述第二系统日志均包括BMC日志、操作系统日志和SMART日志。

可选的，基于所述硬件环境安装对应的测试工具包括：

基于所述硬件环境中的硬盘型号安装对应的测试工具；

则基于所述硬件环境中的硬盘型号安装对应的测试工具前，还包括：

以映射关系存储所述硬盘型号对应的所述测试工具，所述测试工具包含测试条件配置和fio测试命令集。

可选的，根据所述测试配置信息确定分析方案包括：

根据所述测试配置信息中的硬盘性能是否受限确定分析方案；

若所述硬盘性能受链路控制器性能限制，对应的分析方案中满配单盘存储性能高于标准存储性能的第一预设百分比；

若所述硬盘性能受链路控制器性能限制，对应的分析方案中硬盘一致性小于第二预设百分比，且所述待测试设备的存储性能高于所述硬件环境下的最低标准性能。

可选的，还包括：

所述测试报告包括所述硬件环境、所述测试工具、所述测试结果、所述分析方案和最终测试结论；

所述最终测试结论包括通过和失败。

可选的，基于确定的分析分案分析所述测试结果，得到测试报告后，还包括：

将所述测试报告上传至系统数据库；

在所述系统数据库基于所述测试报告中所述硬件环境和所述测试结果进行不同硬件环境下的性能测试比对后，接收所述系统数据库发送的推荐配置参数。

本申请还提供一种设备存储性能测试系统，包括：

准备模块，用于获取测试指令，并与对应的待测试设备建立连接；

测试配置模块，用于若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

测试模块，用于利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

测试报告生成模块，用于根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

本申请还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的方法的步骤。

本申请还提供一种测试终端，包括存储器和处理器，所述存储器中存有计算机程序，所述处理器调用所述存储器中的计算机程序时实现如上所述的方法的步骤。

本申请提供一种设备存储性能测试方法，包括：获取测试指令，并与对应的待测试设备建立连接；若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

本申请在待测试设备的硬件环境搭建好，即可对待测试设备进行自动化测试，在测试过程中，选择与硬件环境对应的测试工具加以测试，更能满足测试需求，无需针对服务器的每一种存储配置逐一调试测试，大大节省测试执行和结果分析的人力与时间。同时在得到测试结果后，根据待测试设备的测试配置信息选择相应的分析方案加以分析，使得测试报告对待测试设备的性能测试更具针对性，所得测试结论更真实，便于用户有效了解待测试设备的实际性能。

本申请还提供一种设备存储性能测试系统、计算机可读存储介质和测试终端，具有上述有益效果，此处不再赘述。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请实施例所提供的一种设备存储性能测试方法的流程图；

图2为本申请实施例所提供的一种设备存储性能测试系统结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

现有测试方案由于服务器上硬盘类型以及数量较多，性能测试涉及 bs＝4k/8k/……/2018k等不同的测试参数导致每种硬盘的测试数据也很多，修改脚本，测试执行，以及结果分析均会浪费大量时间；例如一款盘的多盘(几十块到上百块硬盘)并行测试结果，包含随机读写、顺序读写、混合读写等几百条数据，一种盘的测试结果手工分析时间就需要7天/人。此外，传统的测试方法，测试过程中测试人员搭建的测试环境不可控，测试报告中的环境配置均由测试人员主观性填写，由于测试过程中不同的部件会造成不同的测试结果，不可控的测试环境测试结果不具有说服力。

为解决上述问题，请参考图1，图1为本申请实施例所提供的一种设备存储性能测试方法的流程图，该方法包括：

S101：获取测试指令，并与对应的待测试设备建立连接；

本步骤旨在获取测试指令，并在接收到测试指令后与待测试设备建立连接。本实施例默认执行本步骤前待测试设备的硬件物理环境已经搭建完毕，可以直接执行性能测试。

在此对于与待测试设备建立连接的具体过程不作限定，在该过程中可以包含登录测试设备或测试系统，以及获取待测试设备的IP地址和待测试设备的用户名及密码等过程，且与待测试设备的连接方式在此不作具体限定，例如若待测试设备为linux系统，则可以采用SSH指令连接至待测试设备。

S102：若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

本步骤默认存在对待测试设备的硬件环境监测，在此对于如何检测识别待测试设备的硬件环境不作限定，可以通过linux系统自带的命令工具(类似于smartctl–a/dev/sda等命令)或通过为其安装新的工具获取待测机上的软硬件环境信息，例如storcli/arcconf等工具。在此对于硬件环境包含的信息类型不作具体限定，可以包括但不限于如下信息：

①、硬盘

识别硬盘Device Model/固件版本/厂商/接口类型/转速/尺寸/容量/缓存等信息；

识别不同硬盘在位个数；

识别系统盘；

识别硬盘连接方式板载/RAID卡；

针对接RAID卡的硬盘，需要识别每个RAID卡接多少硬盘；

②、硬盘背板

识别背板型号/PN编码；

识别背板上SAS/NVME详细接口数量；

③、RAID卡

识别RAID型号；

识别RAID缓存开启状态，缓存大小；

识别RAID格式(1 10、5、50、6、60)；

④、CPU

识别cpu的PN编码型号、主频、核数；

以及BMC/BIOS版本信息等。

上述信息的部分或全部均可以作为记性硬件环境检测过程中所需识别的硬件参数。由于本实施例对于具体的硬件环境信息不作限定，对应的硬件标准也不做相应限定，但容易理解的是，该硬件标准应与检测的硬件环境内容相对应，且包含相应的标准，包含硬件的连接方式、是否存在故障异常等。即对待测试设备进行存储性能测试时，显然要求待测试设备的各硬件正常工作，不应出现故障，以免影响存储性能测试结果。

若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息，所谓测试配置信息，即该待测试设备包含的硬件信息，用于指示后续的测试结果以及测试报告。

S103：利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

本步骤旨在利用测试工具进行存储性能测试，并得到测试结果。需要注意的是，本步骤中，该测试工具与硬件环境相对应，具体的，可以基于硬件环境中的硬盘型号安装对应的测试工具，即满足不同的硬盘型号采用不同的测试工具。由于不用的硬盘型号存在不同的数据读写设定，则为了使得测试结果具备说服力，可以采用与硬盘型号对应的测试工具。

则基于硬件环境中的硬盘型号安装对应的测试工具前，可以以映射关系存储硬盘型号对应的测试工具，测试工具包含测试条件配置和fio测试命令集。即实现测试工具与硬盘型号的一一对应，则在上一步骤检测硬件环境得到硬盘型号后，即可适配相应的测试工具进行存储性能测试。

上述过程以硬盘型号作为一种优选的实施过程对测试工具的选取进行说明，容易理解的是，在上述过程的基础上，本领域技术人员还可以基于其他硬件进行硬件工具的选取，例如CPU等。当然，若测试工具能兼容不同类型的硬件，则可以不进行测试工具的选取。

本步骤中，具体可以包含如下步骤：

S1031：基于硬件环境安装对应的测试工具；

S1032：在存储性能测试开始前抓取待测试设备的第一系统日志；

S1033：在存储性能测试结束后抓取待测试设备的第二系统日志；

S1034：根据第一系统日志和第二系统日志的区别信息得到测试结果；

其中，第一系统日志和第二系统日志均包括BMC日志、操作系统日志和 SMART日志。

换句话说，测试结果基于测试前后待测试设备中的各种日志变化得到。

S104：根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

本步骤旨在确定分析方案，并对测试结果进行分析，以得到测试报告。在此对于如何基于测试配置信息确定相应的分析方案不作具体限定，优选的，本实施例在此提供一种基于测试配置信息确定相应的分析方案的具体过程，可以根据测试配置信息中的硬盘性能是否受限确定分析方案：

若硬盘性能受链路控制器性能限制，对应的分析方案中满配单盘存储性能高于标准存储性能的第一预设百分比；

若硬盘性能受链路控制器性能限制，对应的分析方案中硬盘一致性小于第二预设百分比，且待测试设备的存储性能高于硬件环境下的最低标准性能。

举例而言，当链路控制器性能不会限制硬盘性能时，要求满配单盘性能对比硬盘标准存储性能不可低于90％。当然，不同的硬盘型号不限于此值，可依据实际的百分比标准进行维护。

硬盘总体性能若受控制器性能限制，测试结果依据以下两个标准：

硬盘一致性不可相差5％(一致性＝(最大值-最小值)/最小值)；

系统总性能可达到硬件环境限制的最小瓶颈(硬件环境中主板控制器/外接控制器等所支持的带宽上限)，例如以当前主流RAID卡为例，最小瓶颈带宽在其pcie接口，带宽在6.4GB/S左右。

对比方式：依据硬盘标准存储性能*硬盘数量对比6.4GB/S。

上述过程中的硬盘标准存储性能可通过硬盘标准数据库得到，该库通常由硬盘生产厂商维护，即将硬盘的生产参数作为硬盘标准存储性能。

当然上述分析方案仅为基于硬盘性能所得到分析方案，还可以根据硬盘类型(区分为固态硬盘，普通硬盘和混合硬盘)等其他参数作分析。此外，还可以基于硬件环境中的CPU、主板与硬盘的接口等作为得到分析方案的区分点，在此不一一举例说明。

测试报告可以包括硬件环境、测试工具、测试结果、分析方案和最终测试结论，最终测试结论包括通过和失败，即pass或fail。

本申请实施例在待测试设备的硬件环境搭建好，即可对待测试设备进行自动化测试，在测试过程中，选择与硬件环境对应的测试工具加以测试，更能满足测试需求，无需针对服务器的每一种存储配置逐一调试测试，大大节省测试执行和结果分析的人力与时间。同时在得到测试结果后，根据待测试设备的测试配置信息选择相应的分析方案加以分析，使得测试报告对待测试设备的性能测试更具针对性，所得测试结论更真实，便于用户有效了解待测试设备的实际性能。

基于上述实施例，作为优选的实施例，与对应的待测试设备建立连接之后，还可以包括：

若待测试设备中硬盘的固件版本为旧版本，升级硬盘的固件版本至最新版本。

该过程可以在检测待测试设备的硬件环境时执行，也可以在该步骤之前执行，由于存储性能的最关键组件即为硬盘，而硬盘的不同固件版本直接影响了测试结果，厂商通过会不断推出新的固件版本，以降低硬盘的功耗或提高硬盘的读写性能，因此有必要将硬盘的固件版本升为最新版本后执行。

若在检测硬件环境之前执行上述步骤，则对应实施过程如下：

S201：获取测试指令，并与对应的待测试设备建立连接；

S202：若待测试设备中硬盘的固件版本为旧版本，升级硬盘的固件版本至最新版本；

S203：若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

S204：利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

S205：根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

基于上述实施例，作为优选的实施例，基于确定的分析分案分析测试结果，得到测试报告后，还可以包括：

将测试报告上传至系统数据库；

在系统数据库基于测试报告中硬件环境和测试结果进行不同硬件环境下的性能测试比对后，接收系统数据库发送的推荐配置参数。

本步骤旨在硬盘性能自动化测试过程中，将所有配置下的测试数据都保存于系统数据库中，系统可提供基于硬盘型号/不同配置等多种维度下的性能数据查询，不同项目配置间性能横向对比分析，可自动得到推荐配置参数，以便在最佳硬件环境下获得硬盘的最优性能。同时将测试报告上传至系统数据库后，性能测试数据不易丢失，更有利于后续的性能横向对比分析及查询。

下面对本申请实施例提供的一种设备存储性能测试系统进行介绍，下文描述的设备存储性能测试系统与上文描述的一种设备存储性能测试方法可相互对应参照。

参见图2，图2为本申请实施例所提供的一种设备存储性能测试系统结构示意图，本申请还提供一种设备存储性能测试系统，包括：

准备模块100，用于获取测试指令，并与对应的待测试设备建立连接；

测试配置模块200，用于若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

测试模块300，用于利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

测试报告生成模块400，用于根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告。

基于上述实施例，作为优选的实施例，还可以包括：

硬盘版本升级模块，用于若所述待测试设备中硬盘的固件版本为旧版本，升级所述硬盘的固件版本至最新版本。

基于上述实施例，作为优选的实施例，测试模块300包括：

工具安装单元，用于基于所述硬件环境安装对应的测试工具；

第一日志获取单元，用于在存储性能测试开始前抓取所述待测试设备的第一系统日志；

第二日志获取单元，用于在存储性能测试结束后抓取所述待测试设备的第二系统日志；

日志比对单元，用于根据所述第一系统日志和所述第二系统日志的区别信息得到测试结果；

其中，所述第一系统日志和所述第二系统日志均包括BMC日志、操作系统日志和SMART日志。

基于上述实施例，作为优选的实施例，测试报告生成模块400包括：

方案确定单元，用于根据所述测试配置信息中的硬盘性能是否受限确定分析方案；若所述硬盘性能受链路控制器性能限制，对应的分析方案中满配单盘存储性能高于标准存储性能的第一预设百分比；若所述硬盘性能受链路控制器性能限制，对应的分析方案中硬盘一致性小于第二预设百分比，且所述待测试设备的存储性能高于所述硬件环境下的最低标准性能。

基于上述实施例，作为优选的实施例，还可以包括：

报告存储模块，用于将所述测试报告上传至系统数据库；

配置推荐获取模块，用于在所述系统数据库基于所述测试报告中所述硬件环境和所述测试结果进行不同硬件环境下的性能测试比对后，接收所述系统数据库发送的推荐配置参数。

本申请还提供了一种计算机可读存储介质，其上存有计算机程序，该计算机程序被执行时可以实现上述实施例所提供的步骤。该存储介质可以包括： U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

本申请还提供了一种测试终端，可以包括存储器和处理器，所述存储器中存有计算机程序，所述处理器调用所述存储器中的计算机程序时，可以实现上述实施例所提供的步骤。当然所述测试终端还可以包括各种网络接口，电源等组件。

说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例提供的系统而言，由于其与实施例提供的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。

还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

Claims (9)

1.一种设备存储性能测试方法，其特征在于，包括：

获取测试指令，并与对应的待测试设备建立连接；

若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告；

其中，根据所述测试配置信息确定分析方案包括：

根据所述测试配置信息中的硬盘性能是否受限确定分析方案；

若所述硬盘性能受链路控制器性能限制，对应的分析方案中满配单盘存储性能高于标准存储性能的第一预设百分比；

若所述硬盘性能受链路控制器性能限制，对应的分析方案中硬盘一致性小于第二预设百分比，且所述待测试设备的存储性能高于所述硬件环境下的最低标准性能

其中，所述硬盘一致性=（硬盘性能最大值-硬盘性能最小值）/硬盘性能最小值。

2.根据权利要求1所述的设备存储性能测试方法，其特征在于，与对应的待测试设备建立连接之后，还包括：

若所述待测试设备中硬盘的固件版本为旧版本，升级所述硬盘的固件版本至最新版本。

3.根据权利要求1所述的设备存储性能测试方法，其特征在于，利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果包括：

基于所述硬件环境安装对应的测试工具；

在存储性能测试开始前抓取所述待测试设备的第一系统日志；

在存储性能测试结束后抓取所述待测试设备的第二系统日志；

根据所述第一系统日志和所述第二系统日志的区别信息得到测试结果；

其中，所述第一系统日志和所述第二系统日志均包括BMC日志、操作系统日志和SMART日志。

4.根据权利要求3所述的设备存储性能测试方法，其特征在于，基于所述硬件环境安装对应的测试工具包括：

基于所述硬件环境中的硬盘型号安装对应的测试工具；

则基于所述硬件环境中的硬盘型号安装对应的测试工具前，还包括：

以映射关系存储所述硬盘型号对应的所述测试工具，所述测试工具包含测试条件配置和fio测试命令集。

5.根据权利要求1所述的设备存储性能测试方法，其特征在于，还包括：

所述测试报告包括所述硬件环境、所述测试工具、所述测试结果、所述分析方案和最终测试结论；

所述最终测试结论包括通过和失败。

6.根据权利要求5所述的设备存储性能测试方法，其特征在于，基于确定的分析分案分析所述测试结果，得到测试报告后，还包括：

将所述测试报告上传至系统数据库；

在所述系统数据库基于所述测试报告中所述硬件环境和所述测试结果进行不同硬件环境下的性能测试比对后，接收所述系统数据库发送的推荐配置参数。

7.一种设备存储性能测试系统，其特征在于，包括：

准备模块，用于获取测试指令，并与对应的待测试设备建立连接；

测试配置模块，用于若所述待测试设备的硬件环境符合硬件标准，生成所述硬件环境的测试配置信息；

测试模块，用于利用所述硬件环境对应的测试工具进行存储性能测试，得到测试结果；

测试报告生成模块，用于根据所述测试配置信息确定分析方案，并基于确定的分析分案分析所述测试结果，得到测试报告；

其中，所述测试报告生成模块包括：

方案确定单元，用于根据所述测试配置信息中的硬盘性能是否受限确定分析方案；若所述硬盘性能受链路控制器性能限制，对应的分析方案中满配单盘存储性能高于标准存储性能的第一预设百分比；若所述硬盘性能受链路控制器性能限制，对应的分析方案中硬盘一致性小于第二预设百分比，且所述待测试设备的存储性能高于所述硬件环境下的最低标准性能；

其中，所述硬盘一致性=（硬盘性能最大值-硬盘性能最小值）/硬盘性能最小值。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的设备存储性能测试方法的步骤。

9.一种测试终端，其特征在于，包括存储器和处理器，所述存储器中存有计算机程序，所述处理器调用所述存储器中的计算机程序时实现如权利要求1-6任一项所述的设备存储性能测试方法的步骤。

Images