CN104461848A - 一种文件系统评估方法及系统 - Google Patents

Abstract

本发明提供一种文件系统评估方法及系统，上述方法包括以下步骤：运行选择的测试工具，获取预设时段内的文件系统评估参数；根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别；本发明采用多种测试工具对文件系统进行测试并且综合各种测试结果进行分析的方案，实现了对文件系统的准确、高效评估。

Description

一种文件系统评估方法及系统

技术领域

本发明属于测试评估领域，尤其涉及一种文件系统评估方法及系统。

背景技术

分布式文件系统(Distributed File System)是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连，现有的各种分布式文件系统各具特色，各有各的优势和侧重点，著名的分布式文件系统有NFS(Network File System；网络文件系统)、GPFS(GeneralParallel File System；共享文件系统)、Google文件系统等，对于被测系统以及所要测试的指标来说，选择合适的测试工具很关键。

目前存在很多性能测试工具，最基本的测试工具如dd命令测试工具，比较成熟的测试工具有iozone测试工具、IOR测试工具、mdtest测试工具等；其中，iozone测试工具用于测试聚合带宽；IOR测试工具是一款基于mpi(Multi Point Interface；多点接口)的输入输出I/O基准测试工具；可用IOR测试工具的测试结果与iozone测试工具的测试结果进行对比，若两种结果相差较大，则检查问题所在。dd命令测试工具是系统自带的一个I/O性能测试工具，dd命令测试工具只能提供一个大概的测试结果，而且是连续I/O而不是随机I/O，且只能进行单节点测试；mdtest测试工具用于测试文件系统IOPS的测试工具，能够测试文件的创建，删除，目录的创建，删除性能，但是不能给出系统的聚合带宽，如果需要测试多个节点的IOPS，则需要使用多点接口mpi；通过配置mpi也可以实现单个节点上多进程测试。

使用单个测试工具对文件系统进行测试，造成不能对文件系统进行准确的评估；即使使用多个测试工具进行评估，结果往往是分别独立的，没有一个综合的评估方案，也很难准确的对文件系统进行综合评估。

发明内容

本发明提供一种文件系统评估方法及系统，以解决上述问题。

本发明提供一种文件系统评估方法。上述方法包括以下步骤：

运行选择的测试工具，获取预设时段内的文件系统评估参数；

根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。

本发明还提供一种文件系统评估系统，包括文件系统评估参数获取模块、文件系统分级模块；其中，所述文件系统评估参数获取模块与所述文件系统分级模块相连；

所述文件系统评估参数获取模块，用于运行选择的测试工具，获取预设时段内的文件系统评估参数并将预设时段内的文件系统评估参数发送至所述文件系统分级模块；

所述文件系统分级模块，用于根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。

本发明提供一种文件系统评估方法及系统，采用多种测试工具对文件系统进行测试并且综合各种测试结果进行分析的方案，实现了对文件系统的准确、高效评估。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1所示为本发明实施例1的文件系统评估方法处理流程图；

图2所示为本发明实施例2的文件系统评估系统结构图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

图1所示为本发明实施例1的文件系统评估方法处理流程图，包括以下步骤：

步骤101：运行选择的测试工具，获取预设时段内的文件系统评估参数；

测试工具包括：netperf测试工具、iozone测试工具、mdtest测试工具、atop测试工具。

文件系统评估参数包括：网络连接中断次数、数据包丢包次数、数据包平均数、平均顺序读写带宽、平均IOPS、文件系统平均操作数、输入输出出错次数、CPU资源平均占用率、内存平均占用率。

运行选择的测试工具，获取文件系统评估参数的过程为：运行netperf测试工具获取预设时段内网络连接中断次数、数据包丢包次数、数据包平均数。

运行选择的测试工具，获取文件系统评估参数的过程为：运行iozone测试工具获取预设时段内平均顺序读写带宽、平均IOPS即平均每秒进行读写(I/O)操作的次数。

运行选择的测试工具，获取文件系统评估参数的过程为：运行mdtest测试工具获取预设时段内文件系统平均操作数、输入输出出错次数。

运行选择的测试工具，获取文件系统评估参数的过程为：运行atop测试工具获取CPU资源平均占用率、内存平均占用率。

运行netperf测试工具获取预设时段内网络连接中断次数、数据包丢包次数；运行iozone测试工具获取预设时段内平均顺序读写带宽(例如：386MB/S和310MB/S)；运行iozone测试工具获取预设时段内平均IOPS(Input/Output Operations Per Second)即平均每秒进行读写(I/O)操作的次数。

运行dd测试工具，对iozone测试工具获取评估参数进行验证(平均顺序读写带宽、平均IOPS)。

运行mdtest测试工具获取预设时段内文件系统平均操作数；其中，所述文件系统平均操作数包括：文件系统平均创建数、文件系统平均查询数。

例如：A文件系统预设时段内(例如：2秒内)文件平均创建数为30000个文件，B文件系统预设时段内(例如：2秒内)文件平均创建数为30个文件。

若进行海量文件的创建，B文件系统明显要吃力很多而且直接影响到带宽性能的发挥，而A文件系统就可完全发挥出文件系统的性能。

运行test测试工具，在预设时段内，进行单客户端、多客户端的混合循环输入输出，获取输入输出出错次数。

运行netperf测试工具获取预设时段内任意两个节点之间发送的数据包平均数；运行atop测试工具获取CPU资源平均占用率、内存平均占用率。

步骤102：根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。

根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别的过程为：

根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值，若所述文件系统评估参数分级值大于预设值，则确定所述文件系统级别为第二等级；若所述文件系统评估参数分级值小于或等于预设值，则确定所述文件系统级别为第一等级；其中，等级越高，文件系统越稳定。

根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值的过程为：

文件系统评估参数分级值＝(数据包平均数+平均每秒进行读写操作的次数+文件系统平均操作数)/(CPU资源平均占用率+内存平均占用率)

根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值的过程为：

文件系统评估参数分级值＝(平均顺序读写带宽)/(网络连接中断次数+数据包丢包次数+输入输出出错次数)。

图2所示为本发明实施例2的文件系统评估系统结构图，包括文件系统评估参数获取模块、文件系统分级模块；其中，所述文件系统评估参数获取模块与所述文件系统分级模块相连；

所述文件系统评估参数获取模块，用于运行选择的测试工具，获取预设时段内的文件系统评估参数并将预设时段内的文件系统评估参数发送至所述文件系统分级模块；

所述文件系统分级模块，用于根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。

本发明提供一种文件系统评估方法及系统，采用多种测试工具对文件系统进行测试并且综合各种测试结果进行分析的方案，实现了对文件系统的准确、高效评估。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种文件系统评估方法，其特征在于，包括以下步骤：

运行选择的测试工具，获取预设时段内的文件系统评估参数；

根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。

2.根据权利要求1所述的方法，其特征在于，测试工具包括：netperf测试工具、iozone测试工具、mdtest测试工具、atop测试工具；文件系统评估参数包括：网络连接中断次数、数据包丢包次数、数据包平均数、平均顺序读写带宽、平均每秒进行读写操作的次数、文件系统平均操作数、输入输出出错次数、CPU资源平均占用率、内存平均占用率。

3.根据权利要求2所述的方法，其特征在于，运行选择的测试工具，获取预设时段内的文件系统评估参数的过程为：运行netperf测试工具获取预设时段内网络连接中断次数、数据包丢包次数、数据包平均数。

4.根据权利要求2所述的方法，其特征在于，运行选择的测试工具，获取预设时段内的文件系统评估参数的过程为：运行iozone测试工具获取预设时段内平均顺序读写带宽、平均每秒进行读写操作的次数。

5.根据权利要求2所述的方法，其特征在于，运行选择的测试工具，获取预设时段内的文件系统评估参数的过程为：运行mdtest测试工具获取预设时段内文件系统平均操作数、输入输出出错次数。

6.根据权利要求2所述的方法，其特征在于，运行选择的测试工具，获取预设时段内的文件系统评估参数的过程为：运行atop测试工具获取CPU资源平均占用率、内存平均占用率。

7.根据权利要求1所述的方法，其特征在于，根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值，若所述文件系统评估参数分级值大于预设值，则确定所述文件系统级别为第二等级；若所述文件系统评估参数分级值小于或等于预设值，则确定所述文件系统级别为第一等级；其中，等级越高，文件系统越稳定。

8.根据权利要求7所述的方法，其特征在于，根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值的过程为：

文件系统评估参数分级值＝(数据包平均数+平均每秒进行读写操作的次数+文件系统平均操作数)/(CPU资源平均占用率+内存平均占用率)。

9.根据权利要求7所述的方法，其特征在于，根据获得的预设时段内的所述文件系统评估参数，获取文件系统评估参数分级值的过程还可以为：

文件系统评估参数分级值＝(平均顺序读写带宽)/(网络连接中断次数+数据包丢包次数+输入输出出错次数)。

10.一种文件系统评估系统，其特征在于，包括文件系统评估参数获取模块、文件系统分级模块；其中，所述文件系统评估参数获取模块与所述文件系统分级模块相连；

所述文件系统评估参数获取模块，用于运行选择的测试工具，获取预设时段内的文件系统评估参数并将预设时段内的文件系统评估参数发送至所述文件系统分级模块；

所述文件系统分级模块，用于根据获得的预设时段内的所述文件系统评估参数，按照预设评估分级策略，确定对应的文件系统级别。