CN108073502B - 一种测试方法及其系统 - Google Patents

一种测试方法及其系统 Download PDF

Info

Publication number
CN108073502B
CN108073502B CN201611010028.9A CN201611010028A CN108073502B CN 108073502 B CN108073502 B CN 108073502B CN 201611010028 A CN201611010028 A CN 201611010028A CN 108073502 B CN108073502 B CN 108073502B
Authority
CN
China
Prior art keywords
target
parameter
target application
parameter value
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611010028.9A
Other languages
English (en)
Other versions
CN108073502A (zh
Inventor
张晓光
唐华斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Communications Ltd Research Institute filed Critical China Mobile Communications Group Co Ltd
Priority to CN201611010028.9A priority Critical patent/CN108073502B/zh
Publication of CN108073502A publication Critical patent/CN108073502A/zh
Application granted granted Critical
Publication of CN108073502B publication Critical patent/CN108073502B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Abstract

本发明实施例公开了一种测试方法,包括:确定待检测系统;所述待检测系统运行有至少两个目标应用;选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态。本发明实施例还公开了一种测试系统。

Description

一种测试方法及其系统
技术领域
本发明涉及测试技术,尤其涉及一种测试方法及其系统。
背景技术
互联网技术(IT,Internet Technology)系统平台的测试包括对服务器、存储、网络等硬件系统的测试,也包括对虚拟化软件等软件系统的测试,在实际测试中,通常会采用一些测试工具,模拟一些实际使用场景,然后通过观测IT系统的参数指标来评测出IT系统的性能。但是,现有的测试方法,只能反映出IT系统在某些模拟场景下的表现,并不能真实地反映出IT系统实际的运行情况,其原因或者是源于测试工具本身的局限性,比如各个测试工具有不同的模拟测试重点,或者是源于测试场景构建的局限性,无论哪种原因,均导致现有测试方法不能全面地反映IT系统完整的运行状态,而且,难以模拟多个应用同时运行的情况。
发明内容
为解决现有存在的技术问题,本发明实施例提供了一种测试方法及其系统。
本发明实施例的技术方案是这样实现的:
本发明实施例第一方面提供了一种测试方法,包括:
确定待检测系统;所述待检测系统运行有至少两个目标应用;
选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态。
上述方案中,所述方法还包括:
在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;
基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;
基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
对应地,所述每一所述目标应用的至少一个指标参数的参数值满足预设规则,包括:每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内。
上述方案中,所述方法还包括:
确定参考系统;所述参考系统运行有所述至少两个目标应用;
在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;
基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;
基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
对应地,所述每一所述目标应用的至少一个指标参数的参数值满足预设规则,包括:每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内。
上述方案中,所述获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值,包括:
基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型;
利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
上述方案中,所述选取出针对每一所述目标应用的至少一个指标参数,包括:
获取每一所述目标应用的应用特征;
基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
本发明实施例第二方面提供了一种测试系统,所述系统包括:
确定模块,用于确定待检测系统;所述待检测系统运行有至少两个目标应用;
处理模块,用于选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
获取模块,用于获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
控制模块,用于根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态。
上述方案中,所述处理模块,还用于在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
对应地,所述获取模块,还用于获取每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
上述方案中,所述确定模块,还用于确定参考系统;所述参考系统运行有所述至少两个目标应用;
所述处理模块,还用于在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
所述获取模块,还用于获取每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
上述方案中,所述获取模块,用于基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型;利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
上述方案中,所述处理模块,还用于获取每一所述目标应用的应用特征;基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
本发明实施例所述的测试方法及其系统,根据不同目标应用的不同特征有针对性地选取出指标参数以及模拟测试程序,并确定出指标参数的参数值满足预设规则时的、模拟测试程序对应的测试参数的参数值,这样,当控制所述待检测系统根据测试参数的参数值运行模拟测试程序时,即可模拟出所述待检测系统运行至少两个目标应用时的运行状态,因此,本发明实施例实现了不同模拟场景下对同一目标应用,以及不同模拟场景下对不同目标应用进行测试以模拟得到待检测系统的真实运行状态的目的。
附图说明
图1为本发明实施例测试方法的实现流程示意图;
图2为本发明实施例测试系统的结构示意图。
具体实施方式
为了能够更加详尽地了解本发明的特点与技术内容,下面结合附图对本发明的实现进行详细阐述,所附附图仅供参考说明之用,并非用来限定本发明。
实施例一
本实施例提供了一种测试方法,具体地,本专利提出了一种新的仿真测试方法,从测试工具和场景模拟两个角度增强了测试效果,使得测试效果更能真实反馈待检测系统的运行状态。具体地,图1为本发明实施例测试方法的实现流程示意图;如图1所示,所述方法包括:
步骤101:确定待检测系统;所述待检测系统运行有至少两个目标应用;
在实际应用中,所述待检测系统可以具体为IT系统平台。
步骤102:选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
在一具体实施例中,每个目标应用可以按照其特点,选取若干能够反映该目标应用的运行状态的指标参数,也就是说,通过所述指标参数的参数值能够体现出目标应用的运行状态;具体地,获取每一所述目标应用的应用特征,基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
在实际应用中,每一个目标应用运行时均存在不同的指标参数,常见的指标参数包括:中央处理器(CPU,Central Processing Unit)/内存利用率、每秒进行读写(I/O)操作的次数(IOPS,Input/Output Operations Per Second)、带宽、连接数、队列深度等。
步骤103:获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
在一具体实施例中,每个目标应用的运行通常有一定的周期性,周期内不同时段对资源的需求不同,比如忙闲时,对计算能力要求比较高,或者对I/O要求比较高,但在闲时则要求比较低;所以,基于上述情况,可以通过采样的方式,确定出所述待检测系统在运行所述至少两个目标应用的运行周期内时不同采样点的运行状态,进而基于不同采样点的运行状态确定出每一所述目标应用的至少一个指标参数的参数值需要满足的预设规则,进而为所述待检测系统运行模拟测试程序时能够反馈出真实的运行环境奠定基础。具体地,在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;进而确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值,这样,通过所述待检测系统根据该测试参数的参数值运行每一所述目标应用的至少两个模拟测试程序,即可模拟出所述待检测系统运行至少两个目标应用时的实际运行状态。
在另一具体实施例中,还可以根据其他系统运行所述至少两个目标应用的实际运行状态来确定每一所述目标应用的至少一个指标参数的目标参数值;具体地,确定参考系统;所述参考系统运行有所述至少两个目标应用;在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;进而确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值,这样,通过所述待检测系统根据该测试参数的参数值运行每一所述目标应用的至少两个模拟测试程序的运行状态,即可模拟出所述待检测系统运行至少两个目标应用时的实际运行状态。
在实际应用中,在确定出指标参数所期望达到的目标参数值后,还可以基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型,进而利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
步骤104:根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态。
这里,在实际应用中,由于不同的模拟测试程序具有不同的测试重点,所以,可以基于同一目标应用选取出能够体现该目标应用的指标参数的多个模拟测试程序,进而通过多个模拟测试程序来从多个角度反馈目标应用的实际应用情况,以便于最大化的模拟出待检测系统的实际运行状态。
以下通过应用场景对本发明实施例做进一步详细说明;具体地,以IT系统平台为例,假设IT系统平台运行有多个应用;
先将每个应用按照其应用特点,选取出若干能够反映该应用运行状态的指标项,基于确定出的指标项选取若干的模拟测试工具,并在该应用的运行周期内选取若干采样点;这里,假设B为模拟测试工具,A为模拟测试工具的参数,C为指标项,则有公式:
Ct=Func(At×B);
其中,Func为IT系统平台的函数描述,B=[b1,b2,…,bn]T,bi为模拟测试工具的标识,n为模拟测试工具的数量;t为周期内的采样点;所述At为模拟测试工具在采样点t的参数值,At=[a1,a2,…,an],ai为模拟测试工具bi在采样点t所对应的参数值;Ct为采样点t所对应的指标项的参数值;Ct=[c1,c2,...,cm],m为指标项的个数;i为大于等于1小于等于n的正整数;在实际应用中,每一模拟测试工具可以对应一个或多个指标项,且每一指标项也可以对应一个或多个模拟测试工具,也就是所,通过模拟测试工具可以反馈出一个或多个的指标项,且反馈出的指标项可以是一个或多个模拟测试工具同时反馈出的。
具体操作步骤如下:
对于某个特定应用的某个采样点,首先基于IT系统平台运行该特定应用的实际运行状态,确定出实际运行中的指标项Ct,或者,根据实际需求确定出指标项Ct所期望得到的目标值,即所述Ct为已知项,所述B也为已知项;
然后,基于上述公式,确定出针对该特定应用的各个模拟测试工具的参数At,这样,通过At即可模拟出该特定应用在采样点t的工作情况。再对周期内的所有采样点进行相同操作,就可通过模拟测试工具B模拟该特定应用的完整的实际的运行状态。
最后,对IT系统平台中所有应用进行上述操作,就可模拟出IT系统平台的整体的实际的运行状态。
这样,可以通过不同应用的不同特征有针对性地选取出指标项,选取出应用运行周期内的采样点,并确定出指标项在采样点的参数值,利用模拟测试工具建模出最佳模拟函数,进而利用最佳模拟函数模拟出整个系统的真实运行情况,从而便于测试人员对系统进行准确地测试和评估。
本发明实施例所述的方法,根据不同目标应用的不同特征有针对性地选取出指标参数以及模拟测试程序,并确定出指标参数的参数值满足预设规则时的、模拟测试程序对应的测试参数的参数值,这样,当控制所述待检测系统根据测试参数的参数值运行模拟测试程序时,即可模拟出所述待检测系统运行至少两个目标应用时的运行状态,因此,本发明实施例实现了不同模拟场景下对同一目标应用,以及不同模拟场景下对不同目标应用进行测试以模拟得到待检测系统的真实运行状态的目的。
实施例二
本实施例提供了一种测试系统,如图2所示,所述系统包括:
确定模块21,用于确定待检测系统;所述待检测系统运行有至少两个目标应用;
处理模块22,用于选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
获取模块23,用于获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
控制模块24,用于根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态。
在一实施例中,所述处理模块,还用于在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
对应地,所述获取模块,还用于获取每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
在另一实施例中,所述确定模块,还用于确定参考系统;所述参考系统运行有所述至少两个目标应用;
所述处理模块,还用于在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值;
所述获取模块,还用于获取每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
在一实施例中,所述获取模块,用于基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型;利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
在另一实施例中,所述处理模块,还用于获取每一所述目标应用的应用特征;基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
这里需要指出的是:以上系统实施例项的描述,与上述方法描述是类似的,具有同方法实施例相同的有益效果,因此不做赘述。对于本发明系统实施例中未披露的技术细节,本领域的技术人员请参照本发明方法实施例的描述而理解,为节约篇幅,这里不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种测试方法,其特征在于,所述方法包括:
确定待检测系统;所述待检测系统运行有至少两个目标应用;
选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态;
其中,所述方法还包括:
根据所述待检测系统或参考系统运行所述至少两个目标应用的实际运行状态来确定每一所述目标应用的至少一个指标参数的目标参数值;
所述每一所述目标应用的至少一个指标参数的参数值满足预设规则,包括:每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内。
2.根据权利要求1所述的方法,其特征在于,所述根据所述待检测系统运行所述至少两个目标应用的实际运行状态来确定每一所述目标应用的至少一个指标参数的目标参数值,包括:
在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;
基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;
基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值。
3.根据权利要求1所述的方法,其特征在于,所述根据参考系统运行所述至少两个目标应用的实际运行状态来确定每一所述目标应用的至少一个指标参数的目标参数值,包括:
确定参考系统;所述参考系统运行有所述至少两个目标应用;
在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;
基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;
基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值。
4.根据权利要求2或3所述的方法,其特征在于,所述获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值,包括:
基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型;
利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
5.根据权利要求1所述的方法,其特征在于,所述选取出针对每一所述目标应用的至少一个指标参数,包括:
获取每一所述目标应用的应用特征;
基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
6.一种测试系统,其特征在于,所述系统包括:
确定模块,用于确定待检测系统;所述待检测系统运行有至少两个目标应用;
处理模块,用于选取出针对每一所述目标应用的至少一个指标参数,基于每一所述目标应用的至少一个指标参数选取出每一所述目标应用的至少两个模拟测试程序;其中,通过调整所述模拟测试程序的测试参数的参数值能够调整所述指标参数的参数值;
获取模块,用于获取每一所述目标应用的至少一个指标参数的参数值满足预设规则时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值;
控制模块,用于根据测试参数的参数值,控制所述待检测系统运行每一所述目标应用的至少两个模拟测试程序,以便于模拟出所述待检测系统运行至少两个目标应用时的运行状态;
其中,所述处理模块,还用于根据所述待检测系统或参考系统运行所述至少两个目标应用的实际运行状态来确定每一所述目标应用的至少一个指标参数的目标参数值;
所述获取模块,还用于获取每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
7.根据权利要求6所述的系统,其特征在于,所述处理模块,还用于在所述待检测系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于每一所述目标应用在所述至少一个采样点的运行状态,确定出针对每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值。
8.根据权利要求6所述的系统,其特征在于,
所述确定模块,还用于确定参考系统;所述参考系统运行有所述至少两个目标应用;
所述处理模块,还用于在所述参考系统运行所述至少两个目标应用的运行周期内,采集至少一个采样点;基于所述参考系统的每一所述目标应用在所述至少一个采样点的运行状态,确定出针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值;基于针对所述参考系统的每一所述目标应用的至少一个指标参数在所述至少一个采样点所对应的参数值,确定出每一所述目标应用的至少一个指标参数的目标参数值。
9.根据权利要求7或8所述的系统,其特征在于,所述获取模块,用于基于每一所述目标应用对应的至少两个模拟测试程序,以及每一所述目标应用的至少一个指标参数所期望达到的目标参数值,建立针对模拟测试程序与指标参数的对应关系模型;利用所述对应关系模型,确定出每一所述目标应用的至少一个指标参数的参数值处于目标参数值范围内时的、每一所述目标应用的至少两个模拟测试程序对应的测试参数的参数值。
10.根据权利要求6所述的系统,其特征在于,所述处理模块,还用于获取每一所述目标应用的应用特征;基于应用特征,选取出能够反映所述目标应用的运行状态的至少一个指标参数。
CN201611010028.9A 2016-11-16 2016-11-16 一种测试方法及其系统 Active CN108073502B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611010028.9A CN108073502B (zh) 2016-11-16 2016-11-16 一种测试方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611010028.9A CN108073502B (zh) 2016-11-16 2016-11-16 一种测试方法及其系统

Publications (2)

Publication Number Publication Date
CN108073502A CN108073502A (zh) 2018-05-25
CN108073502B true CN108073502B (zh) 2021-06-08

Family

ID=62163313

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611010028.9A Active CN108073502B (zh) 2016-11-16 2016-11-16 一种测试方法及其系统

Country Status (1)

Country Link
CN (1) CN108073502B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110196805B (zh) * 2018-05-29 2021-09-28 腾讯科技(深圳)有限公司 数据处理方法、装置、存储介质和电子装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101211311A (zh) * 2006-12-25 2008-07-02 中国电信股份有限公司 应用软件在生产环境下的性能预测方法
CN101286131A (zh) * 2007-04-09 2008-10-15 国际商业机器公司 服务测试方法和服务测试系统
CN102750221A (zh) * 2012-05-29 2012-10-24 兰雨晴 一种针对Linux文件系统的性能测试方法
CN104598377A (zh) * 2014-12-29 2015-05-06 大唐移动通信设备有限公司 一种打桩测试方法和装置
CN105302721A (zh) * 2015-10-29 2016-02-03 普元信息技术股份有限公司 云计算平台中实现集中模拟服务器集成测试的系统及方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9075921B2 (en) * 2011-05-04 2015-07-07 Red Hat, Inc. Error simulation
FR3018118B1 (fr) * 2014-02-28 2016-04-29 Airbus Helicopters Procede de test d'un systeme electronique

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101211311A (zh) * 2006-12-25 2008-07-02 中国电信股份有限公司 应用软件在生产环境下的性能预测方法
CN101286131A (zh) * 2007-04-09 2008-10-15 国际商业机器公司 服务测试方法和服务测试系统
CN102750221A (zh) * 2012-05-29 2012-10-24 兰雨晴 一种针对Linux文件系统的性能测试方法
CN104598377A (zh) * 2014-12-29 2015-05-06 大唐移动通信设备有限公司 一种打桩测试方法和装置
CN105302721A (zh) * 2015-10-29 2016-02-03 普元信息技术股份有限公司 云计算平台中实现集中模拟服务器集成测试的系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Simulating tools and testing;USERTESTING;《https://www.usertesting.com/blog/simulating-tools-and-testing》;20121022;第1-7页 *
基于LoadRunner12的性能测试;赵金荣;《http://tech.it168.com/a2015/0909/1760/000001760623_all.shtml》;20150910;第1-18页 *

Also Published As

Publication number Publication date
CN108073502A (zh) 2018-05-25

Similar Documents

Publication Publication Date Title
Magalhães et al. Workload modeling for resource usage analysis and simulation in cloud computing
US9069890B2 (en) Ranking of computing equipment configurations for satisfying requirements of virtualized computing environments based on an overall performance efficiency
CN103150238B (zh) 一种服务请求处理方法、模拟性能测试方法及装置
US20120060167A1 (en) Method and system of simulating a data center
Bui et al. Adaptive replication management in HDFS based on supervised learning
CN105247493A (zh) 从静态收集的数据中标识受影响的测试
CN109309596B (zh) 一种压力测试方法、装置及服务器
CN111563014A (zh) 接口服务性能测试方法、装置、设备和存储介质
JP2008538642A5 (zh)
US7860700B2 (en) Hardware verification batch computing farm simulator
US10796038B2 (en) Estimating think times
US8832839B2 (en) Assessing system performance impact of security attacks
CN109359003A (zh) 游戏服务器压力测试方法、装置及设备
CN111984544B (zh) 设备性能测试方法、装置、电子设备及存储介质
KR20160056944A (ko) 캐싱된 플로우들에 기초한 가속
CN114564374A (zh) 算子性能评估方法、装置、电子设备及存储介质
US10248462B2 (en) Management server which constructs a request load model for an object system, load estimation method thereof and storage medium for storing program
CN110796591A (zh) 一种gpu卡的使用方法及相关设备
CN108073502B (zh) 一种测试方法及其系统
US9501321B1 (en) Weighted service requests throttling
US20070233449A1 (en) Simulation of hierarchical storage systems
CN113158435A (zh) 基于集成学习的复杂系统仿真运行时间预测方法与设备
CN116974874A (zh) 数据库的测试方法、装置、电子设备及可读存储介质
US9305068B1 (en) Methods and apparatus for database virtualization
CN108156054A (zh) 云桌面性能的测试方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant