CN105446862B - 一种存储设备的io性能的测试系统及方法 - Google Patents

一种存储设备的io性能的测试系统及方法 Download PDF

Info

Publication number
CN105446862B
CN105446862B CN201510811413.2A CN201510811413A CN105446862B CN 105446862 B CN105446862 B CN 105446862B CN 201510811413 A CN201510811413 A CN 201510811413A CN 105446862 B CN105446862 B CN 105446862B
Authority
CN
China
Prior art keywords
server
data
data interaction
mds
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510811413.2A
Other languages
English (en)
Other versions
CN105446862A (zh
Inventor
李丽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Liyang Information Technology Co., Ltd
Original Assignee
SHENZHEN DATA FAULT TOLERANCE SYSTEM CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHENZHEN DATA FAULT TOLERANCE SYSTEM CO Ltd filed Critical SHENZHEN DATA FAULT TOLERANCE SYSTEM CO Ltd
Priority to CN201510811413.2A priority Critical patent/CN105446862B/zh
Publication of CN105446862A publication Critical patent/CN105446862A/zh
Application granted granted Critical
Publication of CN105446862B publication Critical patent/CN105446862B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G06F11/3485—Performance evaluation by tracing or monitoring for I/O devices

Abstract

本发明公开了一种存储设备的IO性能测试系统及方法。该测试系统包括存储设备、MDS服务器及多个客户端服务器，该存储设备与MDS服务器连接，客户端服务器通过以太网与MDS服务器进行数据交互；其中，存储设备用于作为MDS服务器的后端数据存储的设备，该客户端服务器用于向MDS服务器发送数据交互请求，该数据交互请求用于请求与存储设备进行数据交互，以进行IO性能测试，其中，MDS服务器用于处理数据交互请求，及统计在IO性能测试过程中的流量数据及带宽数据，以确定IO性能。通过同时由多个客户端服务器发起数据交互请求执行IO性能测试过程，能够有效的提高IO测试的效率，缩短IO测试的时间。

Description

一种存储设备的IO性能的测试系统及方法
技术领域
本发明涉及领域数据存储性能领域，特别是涉及一种存储设备的IO 性能的测试方法系统及方法。
背景技术
随着信息领域对数据处理速度和容量的要求，现在引入了大容量的存储设备和系统。SAS阵列利用其快速的传输速率和大宽带为企业提供了高效率后端数据存储。SAS阵列常用于视频流媒体播放的后端存储。大容量和高速率得到电视台的广泛使用。
现有技术中，一般利用Iometer测试IO性能时，是利用产品实际运行过程中的阵列的极限带宽和每秒进行读写(IO)操作的次数 (Input/Output Operations Per Second)进行测试的，且都是通过客户端服务器进行测试的，现有的测试方式测试能力弱，测试时间较长。
发明内容
本发明主要解决的技术问题是提供一种存储设备的IO性能的测试系统，能够解决现有技术中由客户端服务器直接进行测试带来的测试能力弱及测试时间较长等问题。
为解决上述技术问题，本发明提供了一种存储设备的输入输出IO 性能测试系统，包括：
存储设备、主数据服务MDS服务器、多个客户端服务器；
所述存储设备与所述MDS服务器直连，所述客户端服务器通过以太网与所述MDS服务器进行数据交互；
所述存储设备用于作为所述MDS服务器的后端数据存储的设备；
所述客户端服务器用于向所述MDS服务器发送数据交互请求，所述数据交互请求用于请求与所述存储设备进行数据交互，以进行IO性能测试；
所述MDS服务器用于处理所述数据交互请求，及统计流量数据及带宽数据，以确定IO性能。
优选的，所述MDS服务器上安装用于模拟视频播放及剪辑的测试应用程序。
优选的，所述测试应用程序为Store cube测试应用程序。
优选的，所述MDS服务器上安装Fishare共享文件管理系统服务器端。
优选的，所述客户端服务器安装所述Fishare客户端，用于配合所述 FIshare服务器端的使用。
优选的，所述客户端服务器上安装用于模拟视频播放及剪辑的运行应用程序。
优选的，所述运行应用程序为Store cube运行应用程序。
优选的，所述存储设备为SAS存储设备。
为了解决上述技术问题，本发明还提供一种存储设备的输入输出IO 性能测试方法，所述方法应用于上述的测试系统，该方法包括：
主数据服务MDS服务器接收多个客户端服务器发送的数据交互请求；
所述MDS服务器根据所述数据交互请求在所述存储设备中执行IO 操作；
所述MDS服务器根据所述IO操作统计流量数据及带宽数据。
优选的，所述MDS服务器根据所述数据交互请求在所述存储设备中执行IO操作，包括：
若所述数据交互请求为数据读取请求，则从所述存储设备中读取数据并反馈给发送所述数据交互请求的客户端服务器；
若所述数据交互请求为数据写入请求，则将所述数据交互请求中携带的数据存储在所述存储设备中。。
本发明的有益效果是：存储设备的IO性能测试系统包括存储设备、 MDS服务器及多个客户端服务器，该存储设备与MDS服务器连接，客户端服务器通过以太网与MDS服务器进行数据交互；其中，存储设备用于作为MDS服务器的后端数据存储的设备，该客户端服务器用于向 MDS服务器发送数据交互请求，该数据交互请求用于请求与存储设备进行数据交互，以进行IO性能测试，其中，MDS服务器用于处理数据交互请求，及统计在IO性能测试过程中的流量数据及带宽数据，以确定 IO性能。在上述测试系统中，可通过同时由多个客户端服务器发起数据交互请求，并由MDS服务器对该数据交互请求进行处理，并统计得到 IO测试性能，能够有效的提高IO测试的效率，缩短IO测试的时间。
附图说明
图1是本发明实施方式中一种存储设备的IO性能的测试方法的流程图；
图2是本发明实施方式一种存储设备的IO性能的测试方法的流程的示意图。
具体实施方式
为更进一步阐述本发明为实现预定发明目的所采取的技术手段及功效，下面结合附图及较佳实施例，对一句本发明的具体实施方式、结构、特征及其功效，详细说明如后。
请参阅图1，为本发明实施例中存储设备的IO性能测试系统的结构的示意图，包括：
存储设备101、主数据服务(Master Data Service，MDS)服务器102，多个客户端服务器103；
其中，存储设备101与MDS服务器102直连，客户端服务器103 通过以太网与MDS服务器102进行数据交互；
其中，存储设备101用于作为MDS服务器102的后端数据存储的数据库；
其中，客户端服务器103用于向MDS服务器102发送数据交互请求，数据交互请求用于请求访问存储设备101存储的数据；
其中，MDS服务器102用于处理数据交互请求，及统计流量数据及带宽数据，以确定IO性能。
在本发明实施例中，MDS服务器102上安装用于模拟视频播放及剪辑的测试应用程序。
优选的，上述的测试应用程序为Store cube测试应用程序。
在本发明实施例中，MDS服务器102与存储设备101的连接采用的是直连的方式，且该MDS服务器102是作为数据中心并通过以太网和客户服务器103进行数据交互的。
优选的，在本发明实施例中，存储设备101可以是SAS存储设备， SAS存储设备具有较大的数据存储空间，且可通过自身软件设计，达到快速高效 的数据访问和控制。
在实际的测试过程中，可根据具体的需要配置存储设备101的参数，例如，可将SAS存储设备的阵列磁盘满配16块，并支持独立磁盘冗余阵列(Redundant Arrays ofIndependent Disks，RAID)技术，且该阵列的型号可以RAID5、RAID1、RAID10或者RAID6。上述的仅为一种可行的配置方式，并不作为本发明技术方案的限定。
在本发明实施例中，MDS服务器102上安装Fishare(共享文件管理系统)服务器端。其中，该Fishare的文件系统是不同于MDS服务器 102的主机文件系统的。
为了与MDS服务器102上安装的Fishare匹配工作，客户端服务器 103安装Fishare客户端，以配合Fishare服务器端的使用。
在本发明实施例中，客户端S服务器102上安装用于模拟视频播放及剪辑的运行应用程序。
优选的，该运行应用程序为Store cube运行应用程序。
其中，客户端服务器103发送的数据访问请求可以是数据读取请求也可以是数据写入请求，且不同的客户端服务器103会以不同形式的数据流方式通过MDS服务器向存储设备发送数据访问请求。
需要说明的是，在本发明实施例中，通过在MDS服务器102上安装Fishare服务器端及Store cube测试应用程序，及在客户端服务器103 上安装Fishare客户端及Store cube运行应用程序，具有模拟现场实际运行稳定的带宽及IOPS的功能，使得能够实现模拟客户现场实际操作环境，具有更好的测试效果，且采用本发明实施例中的测试系统，使得可根据测试实验室搜集到的实时的流量数据及带宽数据进行统计，分析产品能否直接投入到实际应用场景中，及可在不同的配置下进行测试，根据不同的配置评估出更有效的使用方案。
在本发明实施例中，测试系统中包含多个客户端服务器103及一个 MDS服务器102，使得能够在该多个客户端服务器103运行测试程序，且由该MDS服务器102对该多个客户端服务器103的测试进行管理并统计测试数据，使得能够有效改善测试效率，缩短测试时间。
请参阅图2，为本发明实施例中一种存储设备的输入输出IO性能测试方法的实施例，该方法应用在图1所示实施例中描述的测试系统中，该方法包括：
步骤201、MDS服务器102接收多个客户端服务器103发送的数据交互请求；
步骤202、MDS服务器102根据数据交互请求在存储设备101中执行IO操作；
步骤203、MDS服务器102根据IO操作统计流量数据及带宽数据。
在本发明实施例中，在完成测试的参数配置之后，客户端服务器103 将同时运行测试脚本，向MDS服务器102发送数据交互请求，用于请求与MDS服务器102管理的存储设备103进行数据交互，MDS服务器 102接收到该数据交互请求之后，将根据数据交互请求在存储设备101 中执行IO操作。
其中，MDS服务器102根据数据交互请求在存储设备101中执行 IO操作具体可以是：
若该数据交互请求为数据读取请求，则从存储设备101中读取数据并反馈给发送数据交互请求的客户端服务器103；
若该数据交互请求为数据写入请求，则将数据交互请求中携带的数据存储在存储设备101中。
且，MDS服务器在执行上述的过程中，还将根据执行的IO操作统计流量数据及带宽数据，使得能够根据流量数据及带宽数据确定此次测试得到的IO性能。
在本发明实施例中，通过MDS服务器管理及控制多个客户端服务器的数据访问请求，使得MDS服务器能够有效的根据IO操作统计流量数据及带宽数据，能够有效的缩短测试时间及改善测试效率。
以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (6)

1.一种存储设备的输入输出IO性能测试系统，其特征在于，包括：
存储设备、主数据服务MDS服务器、多个客户端服务器；
所述存储设备与所述MDS服务器直连，所述客户端服务器通过以太网与所述MDS服务器进行数据交互；
所述存储设备用于作为所述MDS服务器的数据存储的设备，所述存储设备的参数根据具体的需要配置；
所述客户端服务器用于向所述MDS服务器发送数据交互请求，所述数据交互请求用于请求与所述存储设备进行数据交互，以进行IO性能测试；
所述数据交互请求包括数据读取请求和数据写入请求，且不同的客户端服务器会以不同形式的数据流方式通过MDS服务器向存储设备发送数据访问请求；
所述MDS服务器用于处理所述数据交互请求，及统计在所述IO性能测试过程中的数据流量及带宽数据，以确定IO性能；
所述MDS服务器上安装Fishare共享文件管理系统服务器端；
所述MDS服务器上安装用于模拟视频播放及剪辑的测试应用程序；
所述客户端服务器安装Fishare客户端，用于配合所述Fishare服务器端的使用；
所述客户端服务器上安装用于模拟视频播放及剪辑的运行应用程序。
2.根据权利要求1所述的测试系统，其特征在于，所述测试应用程序为Store cube测试应用程序。
3.根据权利要求1所述的测试系统，其特征在于，所述运行应用程序为Store cube运行应用程序。
4.根据权利要求1至3任意一项所述的测试系统，其特征在于，所述存储设备为SAS存储设备。
5.一种存储设备的输入输出IO性能测试方法，其特征在于，所述方法应用于权利要求1至4任意一项所述的测试系统，该方法包括：
主数据服务MDS服务器接收多个客户端服务器发送的数据交互请求；
所述MDS服务器根据所述数据交互请求在所述存储设备中执行IO操作；
所述MDS服务器根据所述IO操作统计流量数据及带宽数据。
6.根据权利要求5所述的方法，其特征在于，所述MDS服务器根据所述数据交互请求在所述存储设备中执行IO操作，包括：
若所述数据交互请求为数据读取请求，则从所述存储设备中读取数据并反馈给发送所述数据交互请求的客户端服务器；
若所述数据交互请求为数据写入请求，则将所述数据交互请求中携带的数据存储在所述存储设备中。
CN201510811413.2A 2015-11-20 2015-11-20 一种存储设备的io性能的测试系统及方法 Active CN105446862B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510811413.2A CN105446862B (zh) 2015-11-20 2015-11-20 一种存储设备的io性能的测试系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510811413.2A CN105446862B (zh) 2015-11-20 2015-11-20 一种存储设备的io性能的测试系统及方法

Publications (2)

Publication Number Publication Date
CN105446862A CN105446862A (zh) 2016-03-30
CN105446862B true CN105446862B (zh) 2019-04-23

Family

ID=55557094

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510811413.2A Active CN105446862B (zh) 2015-11-20 2015-11-20 一种存储设备的io性能的测试系统及方法

Country Status (1)

Country Link
CN (1) CN105446862B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106021045B (zh) * 2016-05-11 2019-07-23 深圳市同泰怡信息技术有限公司 一种linux系统下服务器硬盘IO性能的测试方法
CN108848007A (zh) * 2018-08-28 2018-11-20 郑州云海信息技术有限公司 一种存储设备共享最大连接数的测试方法及装置
CN109120478A (zh) * 2018-08-28 2019-01-01 郑州云海信息技术有限公司 Cifs共享最大连接数的测试方法、装置、设备及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033796A (zh) * 2009-09-25 2011-04-27 中国移动通信集团公司 测试系统和方法
CN103984619A (zh) * 2014-06-06 2014-08-13 山东超越数控电子有限公司 一种网络存储系统性能监测方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8561021B2 (en) * 2010-02-08 2013-10-15 Microsoft Corporation Test code qualitative evaluation
CN101873342A (zh) * 2010-06-02 2010-10-27 深圳市迪菲特科技股份有限公司 数据访问方法、数据访问系统及磁盘阵列存储系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102033796A (zh) * 2009-09-25 2011-04-27 中国移动通信集团公司 测试系统和方法
CN103984619A (zh) * 2014-06-06 2014-08-13 山东超越数控电子有限公司 一种网络存储系统性能监测方法

Also Published As

Publication number Publication date
CN105446862A (zh) 2016-03-30

Similar Documents

Publication Publication Date Title
Klimovic et al. Understanding ephemeral storage for serverless analytics
JP5926864B2 (ja) クラウドコンピューティングシステムをコンフィギュアするためのシステム及び方法
JP6373840B2 (ja) クラウドコンピューティングシステムをチューニングするためのシステム及び方法
CN104850480B (zh) 高密度存储服务器硬盘性能测试的方法及装置
US10977561B2 (en) Methods and systems for processing software traces
CN111737127B (zh) 用于测试地图服务的方法和装置
US20150082094A1 (en) Test Execution Spanning Cloud and Local Devices
CN105446862B (zh) 一种存储设备的io性能的测试系统及方法
CN107092541A (zh) 一种运用虚拟机进行存储性能测试的方法
US11086752B2 (en) Methods, systems, and computer readable media for vendor-neutral testing and scoring of systems under test
US11036608B2 (en) Identifying differences in resource usage across different versions of a software application
US11151141B2 (en) Data processing device and data processing method
CN108984332A (zh) 一种定位服务器宕机故障的装置及方法
CN102929769A (zh) 一种基于代理服务的虚拟机内部数据采集方法
Itoh et al. Data flow and high level trigger of Belle II DAQ system
CN109379305A (zh) 一种数据下发方法、装置、服务器及存储介质
WO2019178957A1 (zh) 分布式系统的测试方法、装置、计算机设备及存储介质
CN103401727A (zh) 一种基于虚拟dvr测试流媒体服务器性能的方法、装置和系统
CN104866402A (zh) 一种测试服务器的方法及装置
Bahga et al. Performance evaluation approach for multi-tier cloud applications
US9779004B2 (en) Methods and systems for real-time activity tracing in a storage environment
CN102710458A (zh) 测试过程的监控方法、测试管理服务器和测试服务器
CN107395456A (zh) 分布式文件系统流直存测试方法及平台
Xu et al. LIOProf: Exposing Lustre file system behavior for I/O middleware
KR101138302B1 (ko) 온라인 게임 서버-테스트 통합 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200528

Address after: No. 601, unit 1, building 1, No. 88, Tianchen Road, hi tech Zone, Chengdu, Sichuan 610000

Patentee after: Chengdu Liyang Information Technology Co., Ltd

Address before: 518000 Guangdong city of Shenzhen province Nanshan District two road crossing Industrial Park Building 5 floor 30 forward hot electrons

Patentee before: DATA FAULT TOLERANCE SYSTEM Co.,Ltd.