CN116069571A - 存储设备性能自动化测试方法、装置、设备和存储介质 - Google Patents

存储设备性能自动化测试方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN116069571A
CN116069571A CN202211155859.0A CN202211155859A CN116069571A CN 116069571 A CN116069571 A CN 116069571A CN 202211155859 A CN202211155859 A CN 202211155859A CN 116069571 A CN116069571 A CN 116069571A
Authority
CN
China
Prior art keywords
test
configuration
storage device
performance
automatic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211155859.0A
Other languages
English (en)
Inventor
房永昌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202211155859.0A priority Critical patent/CN116069571A/zh
Publication of CN116069571A publication Critical patent/CN116069571A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2205—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2273—Test methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2289—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing by configuration test
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Test And Diagnosis Of Digital Computers (AREA)

Abstract

本申请涉及一种存储设备性能自动化测试方法、装置、设备和存储介质，所述方法包括：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；将性能测试自动化程序部署在第一主机上，第一主机通过命令行控制存储设备，并与其他主机共同对存储设备进行性能测试：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。本申请通过实现存储性能自动化测试，节省人力，提高测试效率，且规避了人工配置出错问题，并将测试结果分析异常的测试条目输出进行自动化重测，保障测试结果的准确性。

Description

存储设备性能自动化测试方法、装置、设备和存储介质
技术领域
本申请涉及存储设备的技术领域，特别是涉及一种存储设备性能自动化测试方法、装置、设备和存储介质。
背景技术
在大数据时代，需要处理的数据量也在飞速增长，这时相关企业在数据存储方面就会面临很大的压力，即在多个应用的同时运行以及系统的并行处理能力方面提出更高的要求。为了满足大数据时代的数据需求，企业需要大容量、高性能、并能保证数据生命周期高性价比的存储系统或设备来满足大数据存储、数据保护和业务连续性的需求。不同领域对数据存储的要求不一样，不同的应用对存储服务器的磁盘性能要求也不一样，所以对不同应用的服务器选型测试也越来越多样化。当前存储设备性能测试多采用手动方式进行，测试配置繁琐，极易出现配置错误，且占用人力过多。
因此，亟需提出一种能够节省人力投入、且对测试结果进行自动分析，实现性能自动化测试的存储设备性能自动化测试方法、装置、设备和存储介质。
发明内容
基于此，有必要针对上述技术问题，提供一种能够节省人力投入、且对测试结果进行自动分析、实现性能自动化测试的存储设备性能自动化测试方法、装置、设备和存储介质。
一方面，提供一种存储设备性能自动化测试方法，所述方法包括：
步骤A：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
步骤B：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
步骤C：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
步骤D：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
在其中一个实施例中，还包括：所述根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化包括：根据存储设备性能测试输入需求，生成自动化测试工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小、输入输出读写方式、输入输出读写比例、读写命中/非命中、测试时间、预热时间和打印间隔时间；基于所述脚本配置参数生成不同的脚本配置参数组合，并以预设命名标准为所述脚本配置参数组合命名。
在其中一个实施例中，还包括：所述根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化还包括：清除当前存储设备上的现有配置；根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列、创建卷、创建主机并完成卷映射；通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
在其中一个实施例中，还包括：所述采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序包括：利用主机端配置所述存储多路径软件；基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；若正常读取到所述存储映射逻辑单元号，则生成性能测试自动化程序；若无法正常读取到所述存储映射逻辑单元号，则返回执行配置所述自动化测试工具步骤。
在其中一个实施例中，还包括：所述保存所述性能测试结果包括：采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置、软件配置和存储设备性能统计参数；采集所述主机端配置，所述配置包括以下至少一项：硬件配置、软件配置和主机端性能统计参数；采集输入输出模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：读写次数、带宽、时延、队列深度、读写比例；将上述信息汇总成一条具体测试记录并进行保存。
在其中一个实施例中，还包括：所述分析性能测试结果，输出测试结果异常的测试条目进行自动化重测包括：根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：单个数据值偏离均值大于或等于第一预设值，判断出现异常值；当所述异常值占所有数据量大于第二预设值，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
在其中一个实施例中，还包括：若所述性能测试自动化程序执行过程中测试中断，所述方法还包括：重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
另一方面，提供了一种存储设备性能自动化测试装置，所述装置包括：
脚本配置模块，用于根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
自动化程序生成模块，用于采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
性能测试模块，用于将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
结果分析模块，用于保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
再一方面，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
步骤A：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
步骤B：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
步骤C：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
步骤D：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
又一方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
步骤A：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
步骤B：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
步骤C：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
步骤D：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
上述存储设备性能自动化测试方法、装置、设备和存储介质，所述方法包括：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测，本申请通过实现存储性能自动化测试，节省人力，提高测试效率，且规避了人工配置出错问题，并将测试结果分析异常的测试条目输出进行自动化重测，保障测试结果的准确性。
附图说明
图1为一个实施例中存储设备性能自动化测试方法的应用环境图；
图2为一个实施例中存储设备性能自动化测试方法的流程示意图；
图3为一个实施例中存储设备性能自动化测试的主机压测存储设备流程示意图；
图4为一个实施例中存储设备性能自动化测试装置的结构框图；
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请提供的存储设备性能自动化测试方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与设置于服务器104上的数据处理平台进行通信。其中，终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑，服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
实施例1
在一个实施例中，如图2～3所示，提供了一种存储设备性能自动化测试方法，以该方法应用于图1中的终端为例进行说明，包括以下步骤：
S1：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化。
需要说明的是，配置自动化测试工具包括vdbench脚本(自动化测试脚本)配置、存储基础配置，具体为：
根据存储设备性能测试输入需求，生成vdbench工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小(4k、8k、16k、1M等)、输入输出(IO)读写方式(顺序或随机)、输入输出读写比例(100％读、100％写、70％读等)、读写命中/非命中、测试时间、预热时间和打印间隔时间；
基于所述脚本配置参数生成不同的脚本配置参数组合，例如选取测试模型大小为4k、读写方式为随机、读写比例为70％读、读写非命中等，以此为一个脚本配置参数组合，并以此类推组成不同的参数组合，以预设命名标准为所述脚本配置参数组合命名，其预设的命名标准为：xx(序号)，示例性的：_xxKB_random/sequence_read/write_cachehit/cachemiss(块大小)_xx(线程数)，该步骤方便对不同读写模型进行区分，并将所有脚本放置在固定目录中。
进一步的，存储基础配置是在获取脚本配置参数组合的基础上对应的进行存储设备的配置，具体为：
清除当前存储设备上的现有配置，例如，之前存储设备应用的是第一个脚本配置参数组合，那么清除该脚本配置参数组合，则可以对第二个脚本配置参数组合进行相应的存储设备的配置，以此类推；
根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列(RAID)、创建卷、创建主机并完成卷映射；
通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；
将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
S2：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序。
需要说明的是，利用主机端配置所述存储多路径软件；
基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；
若正常读取到所述存储映射逻辑单元号(LUN)，则生成性能测试自动化程序；
若无法正常读取到所述存储映射逻辑单元号(LUN)，则返回执行配置所述自动化测试工具步骤。
S3：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试。
需要说明的是，如图3所示，将所述性能测试自动化程序部署在第一主机上，即主机1，vdbench工具可以以主机1为master，其余主机为slave，n台主机共同对所述存储设备进行性能测试。
执行基于S1～S3步骤所生成的性能测试自动化脚本，一种存储配置测试完成后，再提取第二种脚本配置参数组合进行测试，依次执行。
进一步的，若所述性能测试自动化程序执行过程中因外力原因导致测试中断，则重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
S4：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
需要说明的是，所述保存所述性能测试结果包括：
采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置(CPU、内存、接口卡等)、软件配置(S1步骤中具体的软件配置参数)和存储设备性能统计参数(CPU利用率等)；
采集所述主机端配置，所述配置包括以下至少一项：硬件配置(CPU、内存、接口卡等)、软件配置(存储多路径策略)和主机端性能统计参数(CPU内存利用率等)；
采集具体的IO(输入输出)模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：IOPS(读写次数)、带宽、时延、队列深度、读写比例；
将上述信息汇总成一条具体测试记录，并以excel格式进行保存，方便查看。
进一步的，基于上述的测试记录分析性能测试结果，输出测试结果异常的测试条目进行自动化重测包括：
根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；
根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：
单个数据值偏离均值大于或等于第一预设值，优选的，第一预设值取20％，判断出现异常值；
当所述异常值占所有数据量大于第二预设值，优选的，第二预设值取10％，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
上述存储设备性能自动化测试方法中，所述方法包括：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测，本申请通过实现存储性能自动化测试，节省人力，提高测试效率，并且通过自动化配置规避了人工配置出错问题，且自动化工具可以将测试结果分析转化，输出为人们更方便查看的excel文档，并将测试结果分析异常的测试条目输出进行自动化重测，保障测试结果的准确性，而且外力原因导致测试中断，可以断点续传继续测试，避免重复测试，造成时间和资源的浪费。
应该理解的是，虽然图2的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
实施例2
在一个实施例中，如图4所示，提供了一种存储设备性能自动化测试装置，包括：脚本配置模块、自动化程序生成模块、性能测试模块和结果分析模块，其中：
脚本配置模块，用于根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
自动化程序生成模块，用于采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
性能测试模块，用于将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
结果分析模块，用于保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
所述装置还包括：中断重启模块，用于重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
作为一种较优的实施方式，本发明实施例中，所述脚本配置模块具体用于：
根据存储设备性能测试输入需求，生成自动化测试工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小、输入输出读写方式、输入输出读写比例、读写命中/非命中、测试时间、预热时间和打印间隔时间；
基于所述脚本配置参数生成不同的脚本配置参数组合，并以预设命名标准为所述脚本配置参数组合命名。
作为一种较优的实施方式，本发明实施例中，所述脚本配置模块具体还用于：
清除当前存储设备上的现有配置；
根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列、创建卷、创建主机并完成卷映射；
通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；
将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
作为一种较优的实施方式，本发明实施例中，所述自动化程序生成模块具体用于：
利用主机端配置所述存储多路径软件；
基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；
若正常读取到所述存储映射逻辑单元号，则生成性能测试自动化程序；
若无法正常读取到所述存储映射逻辑单元号，则返回执行配置所述自动化测试工具步骤。
作为一种较优的实施方式，本发明实施例中，所述结果分析模块具体用于：
采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置、软件配置和存储设备性能统计参数；
采集所述主机端配置，所述配置包括以下至少一项：硬件配置、软件配置和主机端性能统计参数；
采集输入输出模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：读写次数、带宽、时延、队列深度、读写比例；
将上述信息汇总成一条具体测试记录，并以excel格式进行保存。
作为一种较优的实施方式，本发明实施例中，所述结果分析模块具体还用于：
根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；
根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：
单个数据值偏离均值大于或等于20％，判断出现异常值；
当所述异常值占所有数据量大于10％，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
关于存储设备性能自动化测试装置的具体限定可以参见上文中对于存储设备性能自动化测试方法的限定，在此不再赘述。上述存储设备性能自动化测试装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
实施例3
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种存储设备性能自动化测试方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图5中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：
S1：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
S2：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
S3：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
S4：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
根据存储设备性能测试输入需求，生成自动化测试工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小、输入输出读写方式、输入输出读写比例、读写命中/非命中、测试时间、预热时间和打印间隔时间；
基于所述脚本配置参数生成不同的脚本配置参数组合，并以预设命名标准为所述脚本配置参数组合命名。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
清除当前存储设备上的现有配置；
根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列、创建卷、创建主机并完成卷映射；
通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；
将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
利用主机端配置所述存储多路径软件；
基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；
若正常读取到所述存储映射逻辑单元号，则生成性能测试自动化程序；
若无法正常读取到所述存储映射逻辑单元号，则返回执行配置所述自动化测试工具步骤。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置、软件配置和存储设备性能统计参数；
采集所述主机端配置，所述配置包括以下至少一项：硬件配置、软件配置和主机端性能统计参数；
采集输入输出模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：读写次数、带宽、时延、队列深度、读写比例；
将上述信息汇总成一条具体测试记录，并以excel格式进行保存。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；
根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：
单个数据值偏离均值大于或等于20％，判断出现异常值；
当所述异常值占所有数据量大于10％，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
实施例4
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
S1：根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
S2：采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
S3：将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
S4：保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
根据存储设备性能测试输入需求，生成自动化测试工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小、输入输出读写方式、输入输出读写比例、读写命中/非命中、测试时间、预热时间和打印间隔时间；
基于所述脚本配置参数生成不同的脚本配置参数组合，并以预设命名标准为所述脚本配置参数组合命名。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
清除当前存储设备上的现有配置；
根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列、创建卷、创建主机并完成卷映射；
通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；
将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
利用主机端配置所述存储多路径软件；
基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；
若正常读取到所述存储映射逻辑单元号，则生成性能测试自动化程序；
若无法正常读取到所述存储映射逻辑单元号，则返回执行配置所述自动化测试工具步骤。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置、软件配置和存储设备性能统计参数；
采集所述主机端配置，所述配置包括以下至少一项：硬件配置、软件配置和主机端性能统计参数；
采集输入输出模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：读写次数、带宽、时延、队列深度、读写比例；
将上述信息汇总成一条具体测试记录，并以excel格式进行保存。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；
根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：
单个数据值偏离均值大于或等于20％，判断出现异常值；
当所述异常值占所有数据量大于10％，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种存储设备性能自动化测试方法，其特征在于，所述方法包括：
根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
2.根据权利要求1所述的存储设备性能自动化测试方法，其特征在于，所述根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化包括：
根据存储设备性能测试输入需求，生成自动化测试工具脚本配置，所述脚本配置的参数包括以下至少一项：测试模型块大小、输入输出读写方式、输入输出读写比例、读写命中/非命中、测试时间、预热时间和打印间隔时间；
基于所述脚本配置参数生成不同的脚本配置参数组合，并以预设命名标准为所述脚本配置参数组合命名。
3.根据权利要求1或2所述的存储设备性能自动化测试方法，其特征在于，所述根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化还包括：
清除当前存储设备上的现有配置；
根据所述脚本配置参数组合在存储设备上配置存储池、添加磁盘阵列、创建卷、创建主机并完成卷映射；
通过后台命令执行上述操作并固化成对应具体配置的脚本，不同配置脚本根据具体配置命名进行区分；
将所述性能测试需求对应的不同配置脚本放置在预设目录下供后续使用。
4.根据权利要求1所述的存储设备性能自动化测试方法，其特征在于，所述采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序包括：
利用主机端配置所述存储多路径软件；
基于所述存储多路径软件完成对所述脚本化配置过程的磁盘扫描；
若正常读取到所述存储映射逻辑单元号，则生成性能测试自动化程序；
若无法正常读取到所述存储映射逻辑单元号，则返回执行配置所述自动化测试工具步骤。
5.根据权利要求1或4所述的存储设备性能自动化测试方法，其特征在于，所述保存所述性能测试结果包括：
采集所述存储设备的配置，所述配置包括以下至少一项：硬件配置、软件配置和存储设备性能统计参数；
采集所述主机端配置，所述配置包括以下至少一项：硬件配置、软件配置和主机端性能统计参数；
采集输入输出模型和每个测试项自动化测试的测试结果，具体包括以下至少一项：读写次数、带宽、时延、队列深度、读写比例；
将上述信息汇总成一条具体测试记录并进行保存。
6.根据权利要求5所述的存储设备性能自动化测试方法，其特征在于，所述分析性能测试结果，输出测试结果异常的测试条目进行自动化重测包括：
根据所述自动化测试工具中的测试条目，检查数据是否完整，若有遗漏则进行记录并进行重测；
根据所述自动化测试工具输出的每个测试项的测试结果分析筛选出低质量数据，所述低质量数据的判断标准如下：
单个数据值偏离均值大于或等于第一预设值，判断出现异常值；
当所述异常值占所有数据量大于第二预设值，判定所述性能测试输入需求异常，则对所述性能测试输入需求进行记录并重测。
7.根据权利要求1所述的存储设备性能自动化测试方法，其特征在于，若所述性能测试自动化程序执行过程中测试中断，所述方法还包括：
重新启动脚本，所述脚本根据所述自动化测试工具的配置进行比对，续接中断位置未完成条目继续测试。
8.一种存储设备性能自动化测试装置，其特征在于，所述装置包括：
脚本配置模块，用于根据存储设备性能测试输入需求，配置自动化测试工具，并将配置过程脚本化；
自动化程序生成模块，用于采用存储多路径软件扫描脚本化配置过程，若读取到存储映射逻辑单元号，则生成性能测试自动化程序；
性能测试模块，用于将所述性能测试自动化程序部署在第一主机上，所述第一主机通过命令行控制所述存储设备，并与其他主机共同对所述存储设备进行性能测试；
结果分析模块，用于保存并分析性能测试结果，输出测试结果异常的测试条目进行自动化重测。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202211155859.0A 2022-08-29 2022-08-29 存储设备性能自动化测试方法、装置、设备和存储介质 Pending CN116069571A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211155859.0A CN116069571A (zh) 2022-08-29 2022-08-29 存储设备性能自动化测试方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211155859.0A CN116069571A (zh) 2022-08-29 2022-08-29 存储设备性能自动化测试方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN116069571A true CN116069571A (zh) 2023-05-05

Family

ID=86172194

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211155859.0A Pending CN116069571A (zh) 2022-08-29 2022-08-29 存储设备性能自动化测试方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN116069571A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116340191A (zh) * 2023-05-31 2023-06-27 合肥康芯威存储技术有限公司 一种存储器固件的测试方法、装置、设备及介质
CN116825175A (zh) * 2023-05-29 2023-09-29 珠海妙存科技有限公司 一种eMMC一致性的测试方法、控制器及存储介质
CN117555812A (zh) * 2024-01-11 2024-02-13 北京捷科智诚科技有限公司 一种云平台自动化测试方法及系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116825175A (zh) * 2023-05-29 2023-09-29 珠海妙存科技有限公司 一种eMMC一致性的测试方法、控制器及存储介质
CN116825175B (zh) * 2023-05-29 2024-02-23 珠海妙存科技有限公司 一种eMMC一致性的测试方法、控制器及存储介质
CN116340191A (zh) * 2023-05-31 2023-06-27 合肥康芯威存储技术有限公司 一种存储器固件的测试方法、装置、设备及介质
CN116340191B (zh) * 2023-05-31 2023-08-08 合肥康芯威存储技术有限公司 一种存储器固件的测试方法、装置、设备及介质
CN117555812A (zh) * 2024-01-11 2024-02-13 北京捷科智诚科技有限公司 一种云平台自动化测试方法及系统
CN117555812B (zh) * 2024-01-11 2024-05-17 北京捷科智诚科技有限公司 一种云平台自动化测试方法及系统

Similar Documents

Publication Publication Date Title
CN116069571A (zh) 存储设备性能自动化测试方法、装置、设备和存储介质
US9262283B2 (en) Method for reading kernel log upon kernel panic in operating system
CN110768872A (zh) 巡检方法、系统、装置、计算机设备和存储介质
CN111881014B (zh) 一种系统测试方法、装置、存储介质及电子设备
CN116662214B (zh) 基于fio的硬盘垃圾回收方法、装置、系统及介质
CN115145777B (zh) 一种测试方法、系统、装置及存储介质
CN105589928A (zh) 用于分布式数据处理系统的模拟测试方法
CN101441592A (zh) 嵌入式系统的测试系统及方法
CN115101116A (zh) 固态硬盘存储颗粒焊接异常检测方法、装置、设备及介质
CN113900903B (zh) 日志存储装置、日志撷取方法及存储介质
CN109445691A (zh) 一种提高ftl算法开发和验证效率的方法及装置
CN116302743A (zh) 一种usb接口测试方法、系统、计算机设备和存储介质
CN111290942A (zh) 压力测试方法、装置以及计算机可读介质
CN111459796B (zh) 自动化测试方法、装置、计算机设备和存储介质
CN110928773A (zh) 项目测试结果管理方法、装置、计算机设备和存储介质
CN111966545A (zh) PCIe分线器热插拔测试方法、装置、设备及存储介质
CN116483639B (zh) eMMC信息获取方法和系统、电子设备和存储介质
CN110389724A (zh) 基于固态硬盘的parity page识别方法和装置
CN113176995B (zh) 基于测试场景的接口测试方法、装置、设备及介质
CN109992506B (zh) 调度测试方法、装置、计算机设备和存储介质
CN114791868B (zh) 故障类型检测方法、装置、计算机设备及可读存储介质
CN115374033B (zh) 一种跨板多路串口访问装置及方法
CN111008131B (zh) 自动化测试方法、装置、计算机设备和存储介质
CN117854580B (zh) 硬盘坏道快速检测方法、装置、检测设备及存储介质
CN117539697A (zh) 存储控制器测试方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination