CN105047207A - 一种存储系统的动态扩容的性能测试方法及系统 - Google Patents
一种存储系统的动态扩容的性能测试方法及系统 Download PDFInfo
- Publication number
- CN105047207A CN105047207A CN201510495638.1A CN201510495638A CN105047207A CN 105047207 A CN105047207 A CN 105047207A CN 201510495638 A CN201510495638 A CN 201510495638A CN 105047207 A CN105047207 A CN 105047207A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- test
- performance
- intelligent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 238000011056 performance test Methods 0.000 title claims abstract description 23
- 238000012360 testing method Methods 0.000 claims abstract description 85
- 238000013508 migration Methods 0.000 claims abstract description 12
- 230000005012 migration Effects 0.000 claims abstract description 12
- 238000004458 analytical method Methods 0.000 claims description 11
- 230000006399 behavior Effects 0.000 claims description 9
- 230000010339 dilation Effects 0.000 claims description 3
- 238000009499 grossing Methods 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000000275 quality assurance Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/18—Error detection or correction; Testing, e.g. of drop-outs
- G11B20/1816—Testing
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Test And Diagnosis Of Digital Computers (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开一种存储系统的动态扩容的性能测试方法及系统,属于存储系统性能测试领域；本发明利用智能化随机生成负载数据模块，数据迁移数据性能的测试模块，缓存数据命中测试模块和存储系统数据I/O性能的测试模块，可实现智能化的测试，节约测试成本并增加了测试平台的环境的普适性。提高存储系统动态扩容性能测试的效率，提高产品的质量保证。
Description
技术领域
本发明公开一种存储系统的动态扩容的性能测试方法及系统,属于存储系统性能测试领域。
背景技术
数据正在以爆炸式速度递增。McKinsey在其发表的2010年海量数据尖端研究报告中指出，它预计海量数据的零售营业利润率将增长60%，因此海量数据背后的在线动态扩容技术变得尤其重要，系统需要随时能够保证具有非常良好的扩容性，以便面对数据需求的挑战。动态扩容就是能够根据用户指定的扩容信息动态地进行自动精简配置存储池进行扩容。而动态扩容可以根据实际的情况，对存储系统进行扩容相较与一般的扩容更有优势，但完成动态扩容的过程需要进行性能测试才能确定其动态扩容参数等性能指标，然而现有的动态扩容的测试方法多集中在手动和借助在具体的应用生产环境中进行测试，需要人工代码的编写才能够实现测试，并且每次测试环境的改变需要对代码进行不同程度的修改，无法实现测试的多环境的适应性和智能化，测试的经济成本非常高，同时测试结果的信息的统计和分析方面处理也十分困难，导致测试的结果往往不能反应系统真实的状况。而本发明提供一种存储系统的动态扩容的性能测试方法及系统，利用智能化随机生成负载数据模块，数据迁移数据性能的测试模块，缓存数据命中测试模块和存储系统数据I/O性能的测试模块，可实现智能化的测试，节约测试成本并增加了测试平台的环境的普适性。提高存储系统动态扩容性能测试的效率，提高产品的质量保证。
发明内容
本发明针对现有的动态扩容的测试方法需要人工代码的编写才能够实现测试，无法实现测试的多环境的适应性和智能化，测试的经济成本非常高，同时测试结果的信息的统计和分析方面处理也十分困难，导致测试的结果往往不能反应系统真实的状况的问题，提供一种存储系统的动态扩容的性能测试方法及系统，可实现智能化的测试，节约测试成本并增加了测试平台的环境的普适性。提高存储系统动态扩容性能测试的效率，提高产品的质量保证。
本发明提出的具体方案是：
一种存储系统的动态扩容的性能测试系统，包括智能化随机生成负载数据模块，数据迁移数据性能的测试模块，数据跟踪模块，缓存数据命中测试模块，存储设备数据I/O性能的测试模块，智能性能检测调度模块，日志与分析模块，GUI接口模块；
智能化随机生成负载数据模块是系统的核心，负责根据各项测试的动态需要进行数据的动态的I/O数据生成，同时，生成实际应用数据；
数据迁移数据性能的测试模块负责存储系统在动态扩容过程中的数据I/O性能的测试；
数据跟踪模块负责跟踪整个I/O数据的生命周期信息；
缓存数据命中测试模块负责监测数据是否在缓存中已经命中；
存储系统数据I/O性能的测试模块负责对比扩容前的数据与扩容后数据的性能的变化；
智能性能检测调度模块是根据智能化随机生成负载数据模块中动态生成的数据，统计数据的性能指标；
日志与分析模块记录各个模块的详细信息以及操作；
GUI接口模块设有用户图形操作接口，负责协助用户操作本系统。
所述智能化随机生成负载数据模块生成实际应用数据包括实际数据库I/O、测试数据库I/O数据、流媒体I/O数据、大数据块I/O、碎片数据I/O。
所述数据的跟踪模块跟踪整个I/O数据的生命周期信息包括全周期范围内I/O数据的来源、数据的修改信息、数据的访问流程、数据的读写次数、读写访问路径、数据的存储位置信息。
一种存储系统的动态扩容的性能测试方法，利用所述的一种存储系统的动态扩容的性能测试系统；
根据GUI接口模块配置测试的内容和测试目的及测试脚本，定制记录和分析数据，由智能化随机生成负载数据模块根据测试内容生成测试的I/O数据，从数据的自动生成开始，数据的跟踪模块对数据进行跟踪，
负载读写正在扩容的逻辑设备及逻辑设备在线扩容的过程中，数据迁移数据性能的测试模块对比逻辑设备在扩容过程中相关的数据信息是否与扩容前一致，衡量逻辑设备扩容的稳定性，缓存数据命中测试模块负责对比数据由缓存写入在线扩容前后的数据一致性；设备数据I/O性能的测试模块对比扩容前的数据与扩容后数据的一致性；智能性能检测调度模块根据智能化随机生成负载数据模块中动态生成的数据，动态的统计数据的访问I/O带宽；完成设备容量动态平滑扩容的测试生命周期。
本发明的有益之处是：本发明利用智能化随机生成负载数据模块，数据迁移数据性能的测试模块，缓存数据命中测试模块和存储系统数据I/O性能的测试模块，实现智能化的测试，节约测试成本并增加了测试平台的环境的普适性。提高存储系统动态扩容性能测试的效率，提高产品的质量保证，增加测试的效率，减少成本。
附图说明
图1本发明系统框架示意图。
具体实施方式
结合附图对本发明做进一步说明。
一种存储系统的动态扩容的性能测试系统，包括智能化随机生成负载数据模块，数据迁移数据性能的测试模块，数据跟踪模块，缓存数据命中测试模块，存储设备数据I/O性能的测试模块，智能性能检测调度模块，日志与分析模块，GUI接口模块；
智能化随机生成负载数据模块是系统的核心，负责根据各项测试的动态需要进行数据的动态的I/O数据生成，同时，生成实际应用数据，包括实际数据库I/O、测试数据库I/O数据、流媒体I/O数据、大数据块I/O、碎片数据I/O等数据；
数据迁移数据性能的测试模块负责存储系统在动态扩容过程中的数据I/O性能的测试；
数据跟踪模块负责跟踪整个I/O数据的生命周期信息，包括全周期范围内I/O数据的来源、数据的修改信息、数据的访问流程、数据的读写次数、读写访问路径、数据的存储位置信息
缓存数据命中测试模块负责监测数据是否在缓存中已经命中；
存储系统数据I/O性能的测试模块负责对比扩容前的数据与扩容后数据的性能的变化；
智能性能检测调度模块是根据智能化随机生成负载数据模块中动态生成的数据，统计数据的性能指标；
日志与分析模块记录各个模块的详细信息以及操作；
GUI接口模块设有用户图形操作接口，负责协助用户操作本系统。
一种存储系统的动态扩容的性能测试方法，利用上述一种存储系统的动态扩容的性能测试系统；
根据GUI接口模块配置测试的内容和测试目的及配置好相关测试脚本，定制需要记录和分析数据，由智能化随机生成负载数据模块根据测试内容生成测试的I/O数据，比如需要测试数据库I/O数据、流媒体I/O数据、大数据块I/O、碎片数据I/O等，从数据的自动生成开始，数据的跟踪模块对数据进行跟踪，包括跟踪全周期范围内的数据动态，数据的修改，数据的访问流程，数据的读写次数，数据的存储位置信息等，以便日志与分析模块能够记录数据的生命周期和分析数据的可靠性。
负载读写正在扩容的逻辑设备及逻辑设备在线扩容的过程中，数据迁移数据性能的测试模块对比逻辑设备在扩容过程中相关的数据信息是否与扩容前一致，以此来衡量逻辑设备扩容的稳定性，缓存数据命中测试模块负责对比数据由缓存写入在线扩容前后的数据一致性，即对比缓存数据段与磁盘上的相对应的数据是否一致；设备数据I/O性能的测试模块对比扩容前的数据与扩容后数据的一致性；智能性能检测调度模块根据智能化随机生成负载数据模块中动态生成的数据，动态的统计数据的访问I/O带宽；完成设备容量动态平滑扩容的测试生命周期。
Claims (4)
1.一种存储系统的动态扩容的性能测试系统，其特征是包括智能化随机生成负载数据模块，数据迁移数据性能的测试模块，数据跟踪模块，缓存数据命中测试模块，存储设备数据I/O性能的测试模块，智能性能检测调度模块，日志与分析模块，GUI接口模块；
智能化随机生成负载数据模块是系统的核心，负责根据各项测试的动态需要进行数据的动态的I/O数据生成，同时，生成实际应用数据；
数据迁移数据性能的测试模块负责存储系统在动态扩容过程中的数据I/O性能的测试；
数据跟踪模块负责跟踪整个I/O数据的生命周期信息；
缓存数据命中测试模块负责监测数据是否在缓存中已经命中；
存储系统数据I/O性能的测试模块负责对比扩容前的数据与扩容后数据的性能的变化；
智能性能检测调度模块是根据智能化随机生成负载数据模块中动态生成的数据，统计数据的性能指标；
日志与分析模块记录各个模块的详细信息以及操作；
GUI接口模块设有用户图形操作接口，负责协助用户操作本系统。
2.根据权利要求1所述的一种存储系统的动态扩容的性能测试系统，其特征是所述智能化随机生成负载数据模块生成实际应用数据包括实际数据库I/O、测试数据库I/O数据、流媒体I/O数据、大数据块I/O、碎片数据I/O。
3.根据权利要求1或2所述的一种存储系统的动态扩容的性能测试系统，其特征是所述数据的跟踪模块跟踪整个I/O数据的生命周期信息包括全周期范围内I/O数据的来源、数据的修改信息、数据的访问流程、数据的读写次数、读写访问路径、数据的存储位置信息。
4.一种存储系统的动态扩容的性能测试方法，其特征是利用权利要求1-3任一项所述的一种存储系统的动态扩容的性能测试系统，
根据GUI接口模块配置测试的内容和测试目的及测试脚本，定制记录和分析数据，由智能化随机生成负载数据模块根据测试内容生成测试的I/O数据，从数据的自动生成开始，数据的跟踪模块对数据进行跟踪，
负载读写正在扩容的逻辑设备及逻辑设备在线扩容的过程中，数据迁移数据性能的测试模块对比逻辑设备在扩容过程中相关的数据信息是否与扩容前一致，衡量逻辑设备扩容的稳定性，缓存数据命中测试模块负责对比数据由缓存写入在线扩容前后的数据一致性；设备数据I/O性能的测试模块对比扩容前的数据与扩容后数据的一致性；智能性能检测调度模块根据智能化随机生成负载数据模块中动态生成的数据，动态的统计数据的访问I/O带宽；完成设备容量动态平滑扩容的测试生命周期。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510495638.1A CN105047207A (zh) | 2015-08-13 | 2015-08-13 | 一种存储系统的动态扩容的性能测试方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510495638.1A CN105047207A (zh) | 2015-08-13 | 2015-08-13 | 一种存储系统的动态扩容的性能测试方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105047207A true CN105047207A (zh) | 2015-11-11 |
Family
ID=54453692
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510495638.1A Pending CN105047207A (zh) | 2015-08-13 | 2015-08-13 | 一种存储系统的动态扩容的性能测试方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105047207A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106648931A (zh) * | 2016-12-12 | 2017-05-10 | 贵阳朗玛信息技术股份有限公司 | 一种日志信息记录的方法及装置 |
| CN109361540A (zh) * | 2018-10-19 | 2019-02-19 | 郑州云海信息技术有限公司 | 一种自精简功能的测试方法及相关装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102789410A (zh) * | 2012-06-29 | 2012-11-21 | 浪潮电子信息产业股份有限公司 | 一种存储系统性能的测试方法 |
| CN103000228A (zh) * | 2011-09-08 | 2013-03-27 | 上海宝信软件股份有限公司 | 存储设备的测试方法及系统 |
| CN103078763A (zh) * | 2012-12-18 | 2013-05-01 | 北京尊冠科技有限公司 | 一种信息存储系统的多协议并行测试方法及系统 |
| CN103116542A (zh) * | 2013-01-24 | 2013-05-22 | 浪潮(北京)电子信息产业有限公司 | 设备扩容稳定性测试方法 |
| US20130227178A1 (en) * | 2003-05-12 | 2013-08-29 | International Business Machines Corporation | Extended Input/Output Measurement Word Facility for Obtaining Measurement Data |
-
2015
- 2015-08-13 CN CN201510495638.1A patent/CN105047207A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130227178A1 (en) * | 2003-05-12 | 2013-08-29 | International Business Machines Corporation | Extended Input/Output Measurement Word Facility for Obtaining Measurement Data |
| CN103000228A (zh) * | 2011-09-08 | 2013-03-27 | 上海宝信软件股份有限公司 | 存储设备的测试方法及系统 |
| CN102789410A (zh) * | 2012-06-29 | 2012-11-21 | 浪潮电子信息产业股份有限公司 | 一种存储系统性能的测试方法 |
| CN103078763A (zh) * | 2012-12-18 | 2013-05-01 | 北京尊冠科技有限公司 | 一种信息存储系统的多协议并行测试方法及系统 |
| CN103116542A (zh) * | 2013-01-24 | 2013-05-22 | 浪潮(北京)电子信息产业有限公司 | 设备扩容稳定性测试方法 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106648931A (zh) * | 2016-12-12 | 2017-05-10 | 贵阳朗玛信息技术股份有限公司 | 一种日志信息记录的方法及装置 |
| CN109361540A (zh) * | 2018-10-19 | 2019-02-19 | 郑州云海信息技术有限公司 | 一种自精简功能的测试方法及相关装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103677654B (zh) | 一种存储数据的方法及电子设备 | |
| Kim et al. | HybridStore: A cost-efficient, high-performance storage system combining SSDs and HDDs | |
| CN103116542B (zh) | 设备扩容稳定性测试方法 | |
| CN109309596B (zh) | 一种压力测试方法、装置及服务器 | |
| CN103064792A (zh) | 数据写入方法及装置 | |
| CN103049354B (zh) | 数据修复方法、数据修复装置以及存储系统 | |
| CN105741883A (zh) | 测试方法和装置 | |
| CN102750221A (zh) | 一种针对Linux文件系统的性能测试方法 | |
| CN107678972B (zh) | 一种测试用例的评估方法及相关装置 | |
| CN104714753A (zh) | 一种数据访问存储方法及装置 | |
| CN102522123A (zh) | 利用数据产生器模块来提高存储设备读写测试效率的方法 | |
| CN101419844A (zh) | 一种闪存器件仿真设备以及闪存主控模块评测方法 | |
| CN202472635U (zh) | 闪存磨损均衡装置 | |
| CN102486748B (zh) | 一种性能测试的方法及装置 | |
| CN107068199A (zh) | 一种ssd硬盘的性能测试方法 | |
| CN106685747A (zh) | 一种云存储均衡性能测试系统 | |
| CN105047207A (zh) | 一种存储系统的动态扩容的性能测试方法及系统 | |
| CN102567351B (zh) | 一种数据库变更效果的测试方法及测试装置 | |
| CN103605833A (zh) | 一种对存储阵列系统的性能进行仿真的方法及装置 | |
| CN105487953A (zh) | 一种总线性能分析方法和装置 | |
| CN103368790B (zh) | 一种针对电子交易系统的性能延迟监测方法及其系统 | |
| CN108572914B (zh) | 一种生成用于压力测试的日志的方法及装置 | |
| Moreira et al. | A systematic mapping on energy efficiency testing in android applications | |
| CN115543702A (zh) | 一种多源固态硬盘协同故障诊断方法、系统、设备及介质 | |
| CN115169578A (zh) | 一种基于元宇宙数据标记的ai模型生产方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20151111 |