CN101246446A - 一种测试pc服务器性能表现的方法 - Google Patents

一种测试pc服务器性能表现的方法 Download PDF

Info

Publication number
CN101246446A
CN101246446A CNA2008100151275A CN200810015127A CN101246446A CN 101246446 A CN101246446 A CN 101246446A CN A2008100151275 A CNA2008100151275 A CN A2008100151275A CN 200810015127 A CN200810015127 A CN 200810015127A CN 101246446 A CN101246446 A CN 101246446A
Authority
CN
China
Prior art keywords
test
server
performance
testing
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2008100151275A
Other languages
English (en)
Inventor
胡海坤
乔鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Langchao Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Langchao Electronic Information Industry Co Ltd filed Critical Langchao Electronic Information Industry Co Ltd
Priority to CNA2008100151275A priority Critical patent/CN101246446A/zh
Publication of CN101246446A publication Critical patent/CN101246446A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

一种测试PC服务器性能表现的方法,是以服务器部件性能测试和应用性能测试为核心,通过对测试方法的整理和规范,有利于进行标准化的操作,将问题尽早发现,从而保证产品性能测试结果的有效性。这种测试方法能够保证测试工作的质量和效率,并且对产品研发、采购,方案开发等工作提供数据支持。该方法不仅能确认服务器本身的硬件性能指标,还能通过各项测试,评估服务器在文件服务器应用、Web服务器应用、数据库服务器应用等方面的应用性能,评估服务器运行的稳定性。该方法体系由三个大项组成:服务器部件性能测试、服务器应用性能测试、服务器稳定性测试。

Description

一种测试PC服务器性能表现的方法
1、技术领域
本发明涉及服务器应用测试领域,具体涉及一种服务器部件性能测试和应用性能测试方法。
2、技术背景
服务器产品在方案开发、采购应用时,需要对服务器进行评估测试,确保其运行良好、稳定可靠。这样就必须进行测试确认工作。本方法就是为了保证服务器整机应用性能,通过3个维度的测试,全面考察服务器的各项指标。
3、发明内容
本发明的目的是提供一种测试PC服务器性能表现的方法,通过该方法对服务器作部件性能和应用性能进行评估,需要通过以下服务器部件性能测试、服务器应用性能测试和服务器稳定性测试3个测试,以服务器部件性能测试和应用性能测试为核心,通过对测试方法的整理和规范,进行标准化的操作,保证产品性能测试结果的有效性,三种方法缺一不可。
在各项测试中,若发现异常情况,需暂停测试,及时通知研发部工程师,待问题解决后再继续其余测试。根据服务器特点及产品情况,如有必要,进行高低温、电磁兼容、跌落、振动等测试。
4、具体实施方式
A服务器部件性能测试
1)处理器性能测试:使用通用测试工具SPEC CPU2006测试处理器的整数运算、浮点运算等方面的能力。
在整数运算性能测试中,测试软件模拟12项应用,包括数据压缩、电路布线、C编译器、最低成本网络流解算机、象棋模拟程序、自然语言处理、光线追踪、Per1应用、计算机群论、面向对象的数据库应用等应用,最后将每项应用测试结果值加权平均得到处理器整数运算性能测试值。通常,四核处理器的整数运算SPEC值都在30以上。
在浮点运算性能测试中,测试软件模拟14项应用,包括量子色动力学、浅水模型、3D势场多栅格解算器、抛物/椭圆偏微分方程、3D图形库、流体动力学、神经元网络、有限元模拟:地震模型、面部识别、计算化学、数论、有限元模拟:碰撞、粒子加速器、污染物扩散等应用,最后将每项应用测试结果值加权平均得到处理器浮点运算性能测试值,四核处理器的浮点运算SPEC值都在20以上。
2)内存缓存性能测试:使用通用测试工具Sisoftware获得内存带宽、内存缓存延迟等性能指标。Sisoftware通过向内存缓存发送足够多的数据来获得内存带宽;通过记录传输数据块所消耗的时间作为内存缓存延迟。
3)系统IO性能测试:使用通用测试工具IOMeter测试获得系统IO的带宽、延迟等性能指标。在测试中,我们分别选择了不同的测试脚本,全面测试被测服务器的IO性能。
(1)Max_throughput(read):文件尺寸为64KB,100%读取操作,随机率为0%,用于检测磁盘系统的最大读取吞吐量;
(2)Max_IO(read):文件尺寸为512B,100%读取操作,随机率为0%,用于检测磁盘系统的最大读取操作IO处理能力;
(3)Max_throughput(write):文件尺寸为64KB,0%读取操作,随机率为0%,用于检测磁盘系统的最大写入吞吐量;
(4)Max_IO(write):文件尺寸为512B,0%读取操作,随机率为0%,用于检测磁盘系统的最大写入操作IO处理能力;
B、服务器应用性能测试:
1)数据库应用性能测试:使用通用测试工具Benchmark Factory测试服务器数据库应用性能。测试在Windows 2003 server上进行,采用AS3AP基准,模拟800虚拟用户并行执行大量查询语句来测试数据库的在线查询性能。AS3AP测试基准构造的是一个简单的在线查询模型,类似于图书馆的图书查询系统,该基准在测试之前需要创建五个表,它们分别是:A_updates、A_uniquns、A_hundred、A_tenpct和A_tiny,数据库总共有763MB。测试主要使用A_updates表,该表有2000000行,每行100Byte。访问类型是多用户随机查询。通常,测试结果TPS值应在5000以上。
2)文件服务器应用性能测试:使用通用测试工具Benchmark Factory测试文件服务器应用性能。被测文件群组大约500MB,模拟用户访问类型有随机读、顺序读两种,详细测试脚本如下示,测试结果TPS值应在4000以上。
(1)大文件随机读1    64%    文件大小:500K  操作块大小:8K
(1)大文件随机读2    16%    文件大小:1M    操作块大小:8K
(1)大文件顺序读1    16%    文件大小:500K  操作块大小:8K
(1)大文件顺序读2    4%     文件大小:1M    操作块大小:8K
3)Web服务器应用性能测试:使用通用测试工具(如WebBench等)测试服务器动态Web应用性能。被测网页群组共6.4MB,包含从1KB到5MB的网页。
所有的Html文件都是由数据产生器产生的标准文件。
测试软件模拟多用户随机访问这些网页。动态访问使用的是多用户测试下的API-Light Mix,测试在Windows 2003 server上进行,测试结果TPS值应在2000以上。
C、服务器稳定性测试:测试被测服务器在大压力情况下的稳定性
1)Win2000/2003系统下运行压力软件(IO meter、Maxpower等)12小时以上,运行过程中服务器表现正常,没有出现掉盘、死机、重启等现象,系统日志没有报错信息。
2)系统重启600次;运行过程正常,没有出现掉盘、死机等现象,系统日志没有报错信息。
Web服务器上的测试文件组成如下,
  文件名称   文件大小   文件名称   文件大小   文件名称   文件大小
  File0k.html   0k   File10k.html   10k   File21k.html   21k
  File500.html   500   File11k.html   11k   File29k.html   29k
  File1k.html   1k   File12k.html   12k   File33k.html   33k
  File2k.html   2k   File13k.html   13k   File45k.html   45k
  File3k.html   3k   File14k.html   14k   File50k.html   50k
  File4k.html   4k   File15k.html   15k   File64k.html   64k
  File5k.html   5k   File16k.html   16k   File115k.html   115k
  File6k.html   6k   File17k.html   17k   File200k.html   200k
  File7k.html   7k   File18k.html   18k   File500k.html   500k
  File8k.html   8k   File19k.html   19k   File5m.html   5m
  File9k.html   9k   File20k.html   20k   WebStonelSAPI.dll   28k
  File0k.html   0k   File10k.html   10k   File21k.html   21k
  File500.html   500   File11k.html   11k   File29k.html   29k
访问组成如下:
  名称   比例   说明
  HTML_File_500   35%   访问1k的网页
  HTML_File_005k   50%   访问5k的网页
  API_Send_050k   14%   从服务器上返回50k的数据
  HTML_File_500k   0.9%   访问500k的网页
  HTML_File_5m   0.1%   访问5m的网页

Claims (1)

1、一种测试PC服务器性能表现的方法,其特征在于,包括:服务器部件性能测试、服务器应用性能测试和服务器稳定性测试,以服务器部件性能测试和应用性能测试为核心,通过对测试方法的整理和规范,进行标准化的操作,保证产品性能测试结果的有效性;具体测试步骤如下:
A、服务器部件性能测试:
1)处理器性能测试:使用通用测试工具SPEC CPU2006测试处理器的整数运算、浮点运算等方面的能力;
在整数运算性能测试中,测试软件模拟12项应用,包括数据压缩、电路布线、C编译器、最低成本网络流解算机、象棋模拟程序、自然语言处理、光线追踪、Perl应用、计算机群论、面向对象的数据库应用,最后将每项应用测试结果值加权平均得到处理器整数运算性能测试值,四核处理器的整数运算SPEC值应在30以上;
在浮点运算性能测试中,测试软件模拟14项应用,包括量子色动力学、浅水模型、3D势场多栅格解算器、抛物/椭圆偏微分方程、3D图形库、流体动力学、神经元网络、有限元模拟:地震模型、面部识别、计算化学、数论、有限元模拟:碰撞、粒子加速器、污染物扩散应用,最后将每项应用测试结果值加权平均得到处理器浮点运算性能测试值,四核处理器的浮点运算SPEC值应在20以上;
2)内存缓存性能测试:使用通用测试工具Sisoftware获得内存带宽、内存缓存延迟等性能指标,Sisoftware通过向内存缓存发送足够多的数据来获得内存带宽;通过记录传输数据块所消耗的时间作为内存缓存延迟;
3)系统IO性能测试:使用通用测试工具IOMeter测试获得系统IO的带宽、延迟等性能指标,在测试中,选择不同的测试脚本,全面测试被测服务器的IO性能;包括以下测试:
(1)Max_throughput(read):文件尺寸为64KB,100%读取操作,随机率为0%,用于检测磁盘系统的最大读取吞吐量;
(2)Max_IO(read):文件尺寸为512B,100%读取操作,随机率为0%,用于检测磁盘系统的最大读取操作IO处理能力;
(3)Max_throughput(write):文件尺寸为64KB,0%读取操作,随机率为0%,用于检测磁盘系统的最大写入吞吐量;
(4)Max_IO(write):文件尺寸为512B,0%读取操作,随机率为0%,用于检测磁盘系统的最大写入操作IO处理能力;
B、服务器应用性能测试:
1)数据库应用性能测试:使用通用测试工具Benchmark Factory测试服务器数据库应用性能,测试在Windows 2003 server上进行,采用AS3AP基准,模拟800虚拟用户并行执行大量查询语句来测试数据库的在线查询性能,AS3AP测试基准构造的是一个简单的在线查询模型,类似于图书馆的图书查询系统,该基准在测试之前需要创建五个表,它们分别是:A_updates、A_uniquns、A_hundred、A_tenpct和A_tiny,数据库总共有763MB;测试主要使用A_updates表,该表有2000000行,每行100Byte,访问类型是多用户随机查询,测试结果TPS值应在5000以上;
2)文件服务器应用性能测试:使用通用测试工具Benchmark Factory测试文件服务器应用性能,被测文件群组大约500MB,模拟用户访问类型有随机读、顺序读两种,测试结果TPS值应在4000以上,详细测试脚本如下示:
(1)大文件随机读1    64%    文件大小:500K  操作块大小:8K
(2)大文件随机读2    16%    文件大小:1M    操作块大小:8K
(3)大文件顺序读1    16%    文件大小:500K  操作块大小:8K
(4)大文件顺序读2    4%     文件大小:1M    操作块大小:8K
3)Web服务器应用性能测试:使用通用测试工具WebBench测试服务器动态Web应用性能,被测网页群组共6.4MB,包含从1KB到5MB的网页;所有的Html文件都是由数据产生器产生的标准文件;
测试软件模拟多用户随机访问这些网页,动态访问使用的是多用户测试下的API-Light Mix,测试在Windows 2003 server上进行,测试结果TPS值应在2000以上。
C、服务器稳定性测试:测试被测服务器在大压力情况下的稳定性
1)Win2000/2003系统下运行压力软件IO meter、Maxpower 12小时以上,运行过程中服务器表现正常,没有出现掉盘、死机、重启等现象,系统日志没有报错信息;
2)系统重启600次;运行过程正常,没有出现掉盘、死机等现象,系统日志没有报错信息。
CNA2008100151275A 2008-03-12 2008-03-12 一种测试pc服务器性能表现的方法 Pending CN101246446A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA2008100151275A CN101246446A (zh) 2008-03-12 2008-03-12 一种测试pc服务器性能表现的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA2008100151275A CN101246446A (zh) 2008-03-12 2008-03-12 一种测试pc服务器性能表现的方法

Publications (1)

Publication Number Publication Date
CN101246446A true CN101246446A (zh) 2008-08-20

Family

ID=39946911

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2008100151275A Pending CN101246446A (zh) 2008-03-12 2008-03-12 一种测试pc服务器性能表现的方法

Country Status (1)

Country Link
CN (1) CN101246446A (zh)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101883019A (zh) * 2010-03-15 2010-11-10 浪潮电子信息产业股份有限公司 一种验证存储服务器是否满足视频应用的测试方法
CN102253874A (zh) * 2011-08-09 2011-11-23 广东电网公司电力科学研究院 服务器测试方法及测试系统
CN101494654B (zh) * 2009-03-13 2012-09-12 阿里巴巴集团控股有限公司 一种确定服务器可访问性的方法及装置
CN103294593A (zh) * 2013-05-06 2013-09-11 北京赛思信安技术有限公司 一种应用于消冗文件系统的测试工具及方法
CN103440186A (zh) * 2013-07-22 2013-12-11 记忆科技(深圳)有限公司 测试缓存加速的方法及其系统
CN103473176A (zh) * 2013-09-25 2013-12-25 浪潮电子信息产业股份有限公司 一种基于四子星服务器的一体化服务器数据库应用测试方法
CN103729271A (zh) * 2012-10-11 2014-04-16 北京百度网讯科技有限公司 整机柜的稳定性测试方法、系统及测试服务器
CN104142874A (zh) * 2013-12-25 2014-11-12 中软信息系统工程有限公司 一种测试评估国产cpu事务处理能力的方法
CN104516799A (zh) * 2013-09-27 2015-04-15 上海宝信软件股份有限公司 服务器性能测试方法
CN105304140A (zh) * 2014-06-13 2016-02-03 北京安兔兔科技有限公司 电子设备的存储器性能的测试方法及装置
CN105446848A (zh) * 2014-06-13 2016-03-30 北京安兔兔科技有限公司 电子设备的数据处理性能的测试方法及装置
CN105573898A (zh) * 2015-12-11 2016-05-11 中国航空工业集团公司西安航空计算技术研究所 一种机载计算机综合性能自动测评方法
CN106445759A (zh) * 2016-10-28 2017-02-22 浪潮软件集团有限公司 一种通用的云服务器测试方法
CN106445766A (zh) * 2016-10-18 2017-02-22 郑州云海信息技术有限公司 一种运算性能测试方法及装置
CN106933715A (zh) * 2017-03-14 2017-07-07 郑州云海信息技术有限公司 一种基于不同测试场景的服务器性能测试方法
CN107451043A (zh) * 2017-08-17 2017-12-08 郑州云海信息技术有限公司 一种服务器稳定性的检测方法及装置
CN108874596A (zh) * 2017-05-08 2018-11-23 龙芯中科技术有限公司 服务器稳定性测试方法和服务器
CN108920348A (zh) * 2018-06-22 2018-11-30 郑州云海信息技术有限公司 一种服务器集群性能测试方法、装置及系统
CN108959012A (zh) * 2018-06-20 2018-12-07 郑州云海信息技术有限公司 一种基于Hadoop的服务器磁盘性能测试系统及方法
CN108959050A (zh) * 2018-06-29 2018-12-07 郑州云海信息技术有限公司 一种性能指标保存方法、系统、设备及计算机存储介质
CN109213666A (zh) * 2018-09-14 2019-01-15 郑州云海信息技术有限公司 一种分布式文件存储系统的性能测试方法
CN109783289A (zh) * 2019-01-02 2019-05-21 郑州云海信息技术有限公司 用于测试服务器bmc web界面中内存信息稳定性的方法及系统
CN110516194A (zh) * 2018-08-15 2019-11-29 北京航空航天大学 基于异构众核处理器的格点量子色动力学并行加速方法

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101494654B (zh) * 2009-03-13 2012-09-12 阿里巴巴集团控股有限公司 一种确定服务器可访问性的方法及装置
CN101883019A (zh) * 2010-03-15 2010-11-10 浪潮电子信息产业股份有限公司 一种验证存储服务器是否满足视频应用的测试方法
CN101883019B (zh) * 2010-03-15 2012-07-04 浪潮电子信息产业股份有限公司 一种验证存储服务器是否满足视频应用的测试方法
CN102253874A (zh) * 2011-08-09 2011-11-23 广东电网公司电力科学研究院 服务器测试方法及测试系统
CN103729271A (zh) * 2012-10-11 2014-04-16 北京百度网讯科技有限公司 整机柜的稳定性测试方法、系统及测试服务器
CN103294593A (zh) * 2013-05-06 2013-09-11 北京赛思信安技术有限公司 一种应用于消冗文件系统的测试工具及方法
CN103294593B (zh) * 2013-05-06 2017-04-05 北京赛思信安技术有限公司 一种应用于消冗文件系统的测试工具及方法
CN103440186A (zh) * 2013-07-22 2013-12-11 记忆科技(深圳)有限公司 测试缓存加速的方法及其系统
CN103440186B (zh) * 2013-07-22 2017-02-22 记忆科技(深圳)有限公司 测试缓存加速的方法及其系统
CN103473176A (zh) * 2013-09-25 2013-12-25 浪潮电子信息产业股份有限公司 一种基于四子星服务器的一体化服务器数据库应用测试方法
CN104516799A (zh) * 2013-09-27 2015-04-15 上海宝信软件股份有限公司 服务器性能测试方法
CN104142874A (zh) * 2013-12-25 2014-11-12 中软信息系统工程有限公司 一种测试评估国产cpu事务处理能力的方法
CN105304140B (zh) * 2014-06-13 2018-07-13 北京安兔兔科技有限公司 电子设备的存储器性能的测试方法及装置
CN105446848A (zh) * 2014-06-13 2016-03-30 北京安兔兔科技有限公司 电子设备的数据处理性能的测试方法及装置
CN105304140A (zh) * 2014-06-13 2016-02-03 北京安兔兔科技有限公司 电子设备的存储器性能的测试方法及装置
CN105573898A (zh) * 2015-12-11 2016-05-11 中国航空工业集团公司西安航空计算技术研究所 一种机载计算机综合性能自动测评方法
CN106445766A (zh) * 2016-10-18 2017-02-22 郑州云海信息技术有限公司 一种运算性能测试方法及装置
CN106445766B (zh) * 2016-10-18 2018-09-21 郑州云海信息技术有限公司 一种运算性能测试方法及装置
CN106445759A (zh) * 2016-10-28 2017-02-22 浪潮软件集团有限公司 一种通用的云服务器测试方法
CN106933715A (zh) * 2017-03-14 2017-07-07 郑州云海信息技术有限公司 一种基于不同测试场景的服务器性能测试方法
CN108874596A (zh) * 2017-05-08 2018-11-23 龙芯中科技术有限公司 服务器稳定性测试方法和服务器
CN107451043A (zh) * 2017-08-17 2017-12-08 郑州云海信息技术有限公司 一种服务器稳定性的检测方法及装置
CN108959012A (zh) * 2018-06-20 2018-12-07 郑州云海信息技术有限公司 一种基于Hadoop的服务器磁盘性能测试系统及方法
CN108920348A (zh) * 2018-06-22 2018-11-30 郑州云海信息技术有限公司 一种服务器集群性能测试方法、装置及系统
CN108959050A (zh) * 2018-06-29 2018-12-07 郑州云海信息技术有限公司 一种性能指标保存方法、系统、设备及计算机存储介质
CN110516194A (zh) * 2018-08-15 2019-11-29 北京航空航天大学 基于异构众核处理器的格点量子色动力学并行加速方法
CN110516194B (zh) * 2018-08-15 2021-03-09 北京航空航天大学 基于异构众核处理器的格点量子色动力学并行加速方法
CN109213666A (zh) * 2018-09-14 2019-01-15 郑州云海信息技术有限公司 一种分布式文件存储系统的性能测试方法
CN109783289A (zh) * 2019-01-02 2019-05-21 郑州云海信息技术有限公司 用于测试服务器bmc web界面中内存信息稳定性的方法及系统

Similar Documents

Publication Publication Date Title
CN101246446A (zh) 一种测试pc服务器性能表现的方法
Lu et al. A study of linux file system evolution
Kim et al. Androbench: Benchmarking the storage performance of android-based mobile devices
Singh et al. Memory centric characterization and analysis of spec cpu2017 suite
Zivanovic et al. Main memory in HPC: Do we need more or could we live with less?
Lu et al. A study of Linux file system evolution
Shi et al. Evaluating scalability bottlenecks by workload extrapolation
CN107533473B (zh) 用于仿真的高效波形生成
Zheng et al. Big data storage and management in SaaS applications
Zhang et al. A study of persistent memory bugs in the linux kernel
Katz et al. Application skeletons: Construction and use in eScience
Paulo et al. Dedisbench: A benchmark for deduplicated storage systems
CN104142874A (zh) 一种测试评估国产cpu事务处理能力的方法
Pfeiffer et al. Proposal for a Standard Time Series File Format in HDF5
Lim et al. Nvgraph: Enforcing crash consistency of evolving network analytics in nvmm systems
Chang et al. Assessing the impact of timing errors on HPC applications
Stewart et al. Empirical examination of a collaborative web application
Duwe et al. Using ceph's BlueStore as object storage in HPC storage framework
Yang et al. Memcache and MongoDB based GIS web service
Zaina et al. Relational or non-relational? a comparative evaluation of database solutions for energy consumption data
Wang et al. Execution-driven simulation of network storage systems
Zhu et al. IoTDataBench: Extending TPCx-IoT for Compression and Scalability
Sjaardema Enhancing the Performance and Scalability of Third Party Libraries in the Sandia I/O Software Stack.
Moise et al. Improving the Hadoop map/reduce framework to support concurrent appends through the BlobSeer BLOB management system
Feng Benchmarking the suitability of key-value stores for distributed scientific data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20080820