CN102521135A - 线性系统的测试方法和装置 - Google Patents

线性系统的测试方法和装置 Download PDF

Info

Publication number
CN102521135A
CN102521135A CN2011104600576A CN201110460057A CN102521135A CN 102521135 A CN102521135 A CN 102521135A CN 2011104600576 A CN2011104600576 A CN 2011104600576A CN 201110460057 A CN201110460057 A CN 201110460057A CN 102521135 A CN102521135 A CN 102521135A
Authority
CN
China
Prior art keywords
test
test result
test procedure
configuration
input parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011104600576A
Other languages
English (en)
Other versions
CN102521135B (zh
Inventor
许涛
戴荣
李程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhongke Tenglong Information Technology Co.,Ltd.
Original Assignee
Dawning Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dawning Information Industry Co Ltd filed Critical Dawning Information Industry Co Ltd
Priority to CN201110460057.6A priority Critical patent/CN102521135B/zh
Publication of CN102521135A publication Critical patent/CN102521135A/zh
Application granted granted Critical
Publication of CN102521135B publication Critical patent/CN102521135B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)
  • Test And Diagnosis Of Digital Computers (AREA)

Abstract

本发明公开了一种线性系统的测试方法和装置,其中,该方法包括:对待测试的系统进行检测,获取系统的测试环境信息;根据获取的测试环境信息配置测试程序的输入参数;根据配置的输入参数运行测试程序,对系统进行测试,并得到测试结果。本发明通过对测试环境信息进行收集,并以此配置测试程序的输入参数从而在特定的环境下准确运行测试程序得到正确的测试结果,使得测试的过程不必借助手工操作,因此,测试人员仅需要进行简单的操作来触发测试开始执行,就能够自动地完成对待测试系统的测试,从而减少了系统测试占用的时间,降低了工作量,提高了测试效率和准确度。

Description

线性系统的测试方法和装置
技术领域
本发明涉及计算机领域,并且特别地,涉及一种线性系统的测试方法和装置。
背景技术
线性系统软件包项目(Linear system package,简称为LINPACK)开始于1974年4月,是为了解决线性系统问题而提出的。
高性能(High Performance Linpack,简称为HPL)是针对现代并行计算机提出的测试方式。用户在不修改任何测试程序的基础上,可以调节问题规模大小N(矩阵大小)、使用到的CPU数目、使用的各种优化方法等来执行该测试程序,以获取最佳的性能。通常,HPL采用高斯消元法求解线性方程组,当求解问题规模为N时,浮点运算次数为(2/3*N^3-2*N^2)。因此,只要给出问题规模N,测得系统计算时间T,峰值=计算量(2/3*N^3-2*N^2)/计算时间T,测试结果以浮点运算每秒(Flops)给出。
但是,由于linpack测试应用在不同的环境中均需要编译源程序,现有的linpack测试均为手工操作,为了获得较高的峰值,需要手工设置并行环境,手工编译测试输入文件,手工修改各项参数。因此,测试准备占用的时间较长,测试的工作量大,对测试人员的技术要求较高,并且容易出错。
针对相关技术中LINPACK测试耗费大量人力和时间、容易出错的问题,目前尚未提出有效的解决方案。
发明内容
针对相关技术中测试耗费大量人力和时间、容易出错的问题,本发明提出一种线性系统的测试方法和装置,能够减少测试过程中的手工操作量,提高测试效率和准确度。
本发明的技术方案是这样实现的:
根据本发明的一个方面,提供了一种线性系统的测试方法。
根据本发明的线性系统的测试方法包括:对待测试的系统进行检测,获取系统的测试环境信息;根据获取的测试环境信息配置测试程序的输入参数;根据配置的输入参数运行测试程序,对系统进行测试,并得到测试结果。
该方法可以进一步包括:在运行测试程序之前,在系统中配置测试程序的运行环境,基于配置的运行环境在系统中安装测试程序。
此外,该方法可以进一步包括:在运行测试程序之前,根据系统的硬件平台调用用于进行测试的数学库。
其中,上述测试环境信息包括以下至少之一:CPU数量、内存数量、测试过程中进行矩阵分割时矩阵的大小。
可选地,上述输入参数包括以下至少之一:计算测试环境的内存数量、测试程序的运行次数、测试程序运行时的网格节点数量。
可选地,测试结果包括每次运行测试程序时每秒完成的运算量;并且,在得到测试结果之后,该方法可进一步包括:对测试结果进行分析,查找到每秒完成的运算量的峰值。
并且,在对测试结果进行分析之后,删除测试结果。
根据本发明的另一方面,提供了一种线性系统的测试装置。
根据本发明的线性系统的测试装置包括:环境检测模块,用于对待测试的系统进行检测,获取系统的测试环境信息;参数配置模块,用于根据获取的测试环境信息配置测试程序的输入参数;存储模块;测试管理模块,用于根据配置的输入参数运行测试程序,对系统进行测试,并得到测试结果,并将测试结果存储至存储模块。
其中,测试结果包括每次运行测试程序时每秒完成的运算量;
并且,该测试装置进一步包括:分析模块,用于对存储模块中保存的测试结果进行分析,查找到每秒完成的运算量的峰值。
并且,该装置可以进一步包括:删除处理模块,用于在分析模块对测试结果进行分析之后,从存储模块中删除测试结果。
本发明通过对测试环境信息进行收集,并以此配置测试程序的输入参数从而在特定的环境下准确运行测试程序得到正确的测试结果,使得测试的过程不必借助手工操作,因此,测试人员仅需要进行简单的操作来触发测试开始执行,就能够自动地完成对待测试系统的测试,从而减少了系统测试占用的时间,降低了工作量,提高了测试效率和准确度。
附图说明
图1是根据本发明实施例的线性系统的测试方法的流程图;
图2是根据本发明实施例的线性系统的测试方法的具体处理实例的流程图;
图3是根据本发明实施例的线性系统的测试装置的框图。
具体实施方式
图1是根据本发明实施例的线性系统的测试方法的流程图。如图1所示,根据本发明实施例的线性系统的测试方法包括;
步骤S101,对待测试的系统进行检测,获取系统的测试环境信息(该步骤可以由预先配置的测试脚本来执行);
步骤S103,根据获取的测试环境信息配置测试程序的输入参数(该步骤可以由预先配置的测试脚本来执行);
步骤S105,根据配置的输入参数运行测试程序,对系统进行测试,并得到测试结果。
借助于上述处理,通过对测试环境信息进行收集,并以此配置测试程序的输入参数从而在特定的环境下准确运行测试程序得到正确的测试结果,使得测试的过程不必借助手工操作,因此,测试人员仅需要进行简单的操作来触发测试开始执行,就能够自动地完成对待测试系统的测试,从而减少了系统测试占用的时间,降低了工作量,提高了测试效率和准确度
其中,在运行测试程序之前,在系统中配置测试程序的运行环境,基于配置的运行环境在系统中安装测试程序,保证测试程序所在的环境符合测试程序的运行条件要求。
另外,在运行测试程序之前,还可以根据系统的硬件平台调用用于进行测试的数学库,从而对测试程序完成编译,使得测试程序能够在测试过程中被正确运行。其中,对于数学库的调度仅仅是为了进一步改善测试的效率和准确度,即使不针对平台而是随意选择数学库,同样能够完成测试。
另外,在检测系统时,检测的测试环境信息可以包括以下至少之一:
CPU数量、内存数量、测试过程中进行矩阵分割时矩阵的大小。
另外,在配置测试程序的输入参数时,配置的输入参数可以包括:计算测试环境的内存数量(也可以认为是估算的测试用方程组规模)、测试程序的运行次数、测试程序运行时的网格节点数量。
其中,在检测时获取了测试用方程组规模之后,可以以一定的误差来进行规模调整,得到修正的测试用方程规模组,作为输入参数,例如,可以以正负1%、2%、3%、4%或其他误差范围估算内存。
程序运行的测试和测试时用的方程规模没有关系,而方程规模的大小决定了程序运行时内存占用情况,测试用的程序可以运行多次,从而获得较好的一次数据。
例如,另外,可以将内存占用量不超过内存总数量的80%(也可以是其他数值)为要求来配置根据方程规模的大小。
而测试程序运行时的网格节点数量则可以根据待测系统的CPU计算核心数进行配置,从而与CPU的数量相匹配。
可选地,在进行测试的过程中,可以实时显示测试得到的数据。
在最终得到的测试结果中,可以包括每次运行测试程序时每秒完成的运算量;并且,在得到测试结果之后,对测试结果进行分析,查找到每秒完成的运算量的峰值,该操作同样可以通过测试脚本来执行,从而避免在测试结束后通过手工统计和筛选运行结果,进一步降低工作量。
在对测试结果进行分析之后,可以删除测试结果,避免占用存储空间,同时能够消除测试对系统的污染,在测试版删除后不会留下任何垃圾文件。
图2是根据本发明实施例的线性系统的测试方法的具体处理实例的流程图。如图2所示,具体可以包括以下步骤:
首先,将测试软件包拷贝如需要测试的集群中,编译MPI,并设置MPI运行环境,其中,测试分为单机测试和集群测试两种,其中,在集群测试时需要提供测试节点的IP地址信息;
编译HPL测试程序,利用设置的MPI环境进行编译,并调用ACML或者MKL数学库,此过程可以针对不同的硬件平台自动选择,例如,对于AMD平台首选ACML,而对于Intel平台则可以选择MKL。
测试开始时,测试脚本自动检测测试环境信息,获得诸如CPU数量、内存数量等信息,修改测试输入程序参数(例如,修改HPL.dat参数文件),开始进行测试,测试中,可以在屏幕上显示此次测试的相关信息,直至测试结束。
在测试完成后会生成测试数据文件,进行分析之后可以删除文件,系统恢复原状,避免测试信息残留在存储空间中占用存储资源。
根据本发明的另一实施例,还提供了一种线性系统的测试装置。
如图3所示,根据本发明实施例的线性系统的测试装置包括:
环境检测模块31,用于对待测试的系统进行检测,获取系统的测试环境信息;
参数配置模块32,连接至环境检测模块31,用于根据获取的测试环境信息配置测试程序的输入参数;
存储模块34;
测试管理模块33,连接至参数配置模块32和存储模块34,用于根据配置的输入参数运行测试程序,对系统进行测试,并得到测试结果,并将测试结果存储至存储模块34。
其中,测试结果包括每次运行测试程序时每秒完成的运算量;
并且,测试装置进一步包括:分析模块(未示出),连接至存储模块34,用于对存储模块34中保存的测试结果进行分析,查找到每秒完成的运算量的峰值。
该装置还可以进一步包括:删除处理模块(未示出),连接至分析模块和存储模块,用于在分析模块对测试结果进行分析之后,从存储模块34中删除测试结果。
综上所述,根据本发明的测试方案在进行测试的过程中无需人工修改配置并行环境,一切所需的配置过程均自动完成;HPL测试过程自动化运行,软件自动收集测试平台信息,自动完成HPL.dat文件的参数修改;降低对测试人员的要求,只需要将测试软件包拷贝到被测试机器上,直接运行即可;测试结果自动显示,自动记录最高值和当前测试值等;并且,根据本发明的测试房案适用于AMD及Intel等多种平台,并且测试程序自身完全自解释,所有读写操作工程都限于软件包自身,删除之后将使系统恢复到测试前状态,不会影响系统的正常运行。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种线性系统的测试方法,其特征在于,包括:
对待测试的系统进行检测,获取所述系统的测试环境信息;
根据获取的所述测试环境信息配置测试程序的输入参数;
根据配置的所述输入参数运行所述测试程序,对所述系统进行测试,并得到测试结果。
2.根据权利要求1所述的测试方法,其特征在于,进一步包括:
在运行所述测试程序之前,在所述系统中配置所述测试程序的运行环境,基于配置的所述运行环境在所述系统中安装所述测试程序。
3.根据权利要求1所述的测试方法,其特征在于,进一步包括:
在运行所述测试程序之前,根据所述系统的硬件平台调用用于进行测试的数学库。
4.根据权利要求1所述的测试方法,其特征在于,所述测试环境信息包括以下至少之一:
CPU数量、内存数量、测试过程中进行矩阵分割时矩阵的大小。
5.根据权利要求1所述的测试方法,其特征在于,所述输入参数包括以下至少之一:计算测试环境的内存数量、所述测试程序的运行次数、所述测试程序运行时的网格节点数量。
6.根据权利要求1所述的测试方法,其特征在于,所述测试结果包括每次运行所述测试程序时每秒完成的运算量;
并且,在得到测试结果之后,所述方法进一步包括:
对所述测试结果进行分析,查找到每秒完成的运算量的峰值。
7.根据权利要求6所述的测试方法,其特征在于,在对所述测试结果进行分析之后,删除所述测试结果。
8.一种线性系统的测试装置,其特征在于,包括:
环境检测模块,用于对待测试的系统进行检测,获取所述系统的测试环境信息;
参数配置模块,用于根据获取的所述测试环境信息配置测试程序的输入参数;
存储模块;
测试管理模块,用于根据配置的所述输入参数运行所述测试程序,对所述系统进行测试,并得到测试结果,并将所述测试结果存储至所述存储模块。
9.根据权利要求8所述的装置,其特征在于,所述测试结果包括每次运行所述测试程序时每秒完成的运算量;
并且,所述测试装置进一步包括:
分析模块,用于对所述存储模块中保存的所述测试结果进行分析,查找到每秒完成的运算量的峰值。
10.根据权利要求9所述的装置,其特征在于,进一步包括:
删除处理模块,用于在所述分析模块对所述测试结果进行分析之后,从所述存储模块中删除所述测试结果。
CN201110460057.6A 2011-12-31 2011-12-31 线性系统的测试方法和装置 Active CN102521135B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110460057.6A CN102521135B (zh) 2011-12-31 2011-12-31 线性系统的测试方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110460057.6A CN102521135B (zh) 2011-12-31 2011-12-31 线性系统的测试方法和装置

Publications (2)

Publication Number Publication Date
CN102521135A true CN102521135A (zh) 2012-06-27
CN102521135B CN102521135B (zh) 2015-08-19

Family

ID=46292066

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110460057.6A Active CN102521135B (zh) 2011-12-31 2011-12-31 线性系统的测试方法和装置

Country Status (1)

Country Link
CN (1) CN102521135B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103150250A (zh) * 2013-02-25 2013-06-12 用友软件股份有限公司 应用程序性能检测系统和应用程序性能检测方法
CN103218277A (zh) * 2013-03-25 2013-07-24 北京百度网讯科技有限公司 服务器环境的自动检测方法与装置
CN104391792A (zh) * 2014-11-27 2015-03-04 北京国双科技有限公司 测试环境信息处理方法、装置和系统
CN109800138A (zh) * 2018-12-18 2019-05-24 平安科技(深圳)有限公司 一种cpu测试方法、电子装置及存储介质
CN110855520A (zh) * 2019-11-11 2020-02-28 苏州科达科技股份有限公司 网络性能的测试方法和测试装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070067606A1 (en) * 2005-08-18 2007-03-22 Hsin-Ying Lin Heterogeneous parallel processing based on processor performance
CN101770423A (zh) * 2009-12-25 2010-07-07 中兴通讯股份有限公司 一种测试数据生成方法及测试系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070067606A1 (en) * 2005-08-18 2007-03-22 Hsin-Ying Lin Heterogeneous parallel processing based on processor performance
CN101770423A (zh) * 2009-12-25 2010-07-07 中兴通讯股份有限公司 一种测试数据生成方法及测试系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DOMINIC DUNLOP等: "On the Use of a Gentic Algorithm in High Performance Computer Benchmark Tuning", 《PERFORMANCE EVALUATION OF COMPUTER & TELECOMMUNICATION SYSTEMS(SPECTS),2008 INTERNATIONAL SYMPOSIUM ON》 *
余江洪等: "基于Linpack的高性能计算机集群的并行性能测试", 《船电技术》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103150250A (zh) * 2013-02-25 2013-06-12 用友软件股份有限公司 应用程序性能检测系统和应用程序性能检测方法
CN103150250B (zh) * 2013-02-25 2016-01-20 用友网络科技股份有限公司 应用程序性能检测系统和应用程序性能检测方法
CN103218277A (zh) * 2013-03-25 2013-07-24 北京百度网讯科技有限公司 服务器环境的自动检测方法与装置
CN104391792A (zh) * 2014-11-27 2015-03-04 北京国双科技有限公司 测试环境信息处理方法、装置和系统
CN104391792B (zh) * 2014-11-27 2018-04-06 北京国双科技有限公司 测试环境信息处理方法、装置和系统
CN109800138A (zh) * 2018-12-18 2019-05-24 平安科技(深圳)有限公司 一种cpu测试方法、电子装置及存储介质
CN109800138B (zh) * 2018-12-18 2022-07-08 平安科技(深圳)有限公司 一种cpu测试方法、电子装置及存储介质
CN110855520A (zh) * 2019-11-11 2020-02-28 苏州科达科技股份有限公司 网络性能的测试方法和测试装置、电子设备及存储介质
CN110855520B (zh) * 2019-11-11 2022-03-04 苏州科达科技股份有限公司 网络性能的测试方法和测试装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN102521135B (zh) 2015-08-19

Similar Documents

Publication Publication Date Title
US9658936B2 (en) Optimization analysis using similar frequencies
US8839204B2 (en) Determination of function purity for memoization
EP2956858B1 (en) Periodicity optimization in an automated tracing system
US10394694B2 (en) Unexplored branch search in hybrid fuzz testing of software binaries
US8930918B2 (en) System and method for SQL performance assurance services
US20110276949A1 (en) Memory leak detection
WO2014074167A1 (en) Purity analysis using white list/black list analysis
EP2956867A1 (en) Deploying trace objectives using cost analyses
WO2014126602A1 (en) Cost analysis for selecting trace objectives
CN102521135B (zh) 线性系统的测试方法和装置
CN106529304B (zh) 一种安卓应用并发漏洞检测系统
US20160140025A1 (en) Method and apparatus for producing a benchmark application for performance testing
CN109271322B (zh) 一种软件测试范围确定方法、软件测试方法和装置
WO2017128952A1 (zh) 堆栈的保护方法及装置
CN114328213A (zh) 基于目标点任务划分的并行化模糊测试方法及系统
CN110309055A (zh) 基于Java虚拟机的黑盒测试方法、装置、终端及存储介质
Zhang et al. An empirical study of the impact of bad designs on defect proneness
CN102043720A (zh) 利用sql语句自动生成测试数据的方法和装置
Grambow et al. Using application benchmark call graphs to quantify and improve the practical relevance of microbenchmark suites
CN117009230B (zh) 一种基于代码覆盖率评测的精准测试方法及系统
CN108021495B (zh) 基于回放的代码调试方法
CN112181784A (zh) 基于字节码注入的代码故障分析方法及系统
CN103902445A (zh) 一种回归测试对象确定方法及装置
WO2022117038A1 (zh) 一种确定虚拟测试依赖对象的方法及装置
CN103559134A (zh) 基准测试组件的配置方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220324

Address after: Room 111-1, first floor, building 23, yard 8, Dongbeiwang West Road, Haidian District, Beijing 100089

Patentee after: Zhongke Tenglong Information Technology Co.,Ltd.

Address before: 300384 Xiqing District, Tianjin Huayuan Industrial Zone (outside the ring) 15 1-3, hahihuayu street.

Patentee before: DAWNING INFORMATION INDUSTRY Co.,Ltd.

TR01 Transfer of patent right