CN105930220A - 业务系统性能测试方法和装置 - Google Patents
业务系统性能测试方法和装置 Download PDFInfo
- Publication number
- CN105930220A CN105930220A CN201610258426.6A CN201610258426A CN105930220A CN 105930220 A CN105930220 A CN 105930220A CN 201610258426 A CN201610258426 A CN 201610258426A CN 105930220 A CN105930220 A CN 105930220A
- Authority
- CN
- China
- Prior art keywords
- business
- single business
- test
- expectation
- system performance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/008—Reliability or availability analysis
Landscapes
- Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明涉及数据处理技术领域,提供了一种业务系统性能测试方法和装置。本发明根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔;根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试;判断测试结果是否符合测试要求,若符合则完成测试;否则根据测试数据重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求本发明不需要多次迭代和调整,降低了测试成本,提高了测试效率。
Description
【技术领域】
本发明涉及数据处理技术领域,特别是涉及一种业务系统性能测试方法和装置。
【背景技术】
目前,随着互联网的发展,各业务系统的形态层出不穷,例如单视频网站而言,就包括播放系统、评论系统、搜索系统、会员系统等多个业务系统,业务系统的用户数量也在飞速递增,业务系统的性能能否承受相应的压力是非常重要的,需要对业务系统进行性能测试。
在对业务系统进行性能测试时,通常要考虑不同业务对系统所造成的压力也不同,在对整个系统进行测试时,要模拟不同用户正在进行不同的业务,并且同时在使用该系统。这时通常要针对多用户和多业务场景对性能测试的场景进行建模,以达到真实模拟不同比例的多种业务同时访问系统时,系统所承受的负载压力。性能测试过程中,在增大或者减少对系统发起的压力时,对于整个系统来说,多种业务产生负载的比例要与线上(正在运营的系统)的实际情况相符合。这种性能测试时业务比例的模型,称为性能测试模型。
现有技术中,有的测试方式是测试人员根据线上监控得到的页面访问量数据(PV值,Page View值),计算出各个业务的访问比例。根据各个业务的访问比例调整性能测试中各个业务的并发比例(指在性能测试过程中,通过多线程的方式模拟多用户访问系统,测试人员模拟用户发起的各个业务的并发线程数,或者模拟的虚拟用户比例),通过反复迭代调整并发比例使测试模型接近实际模型。该方法能很好地模拟用户模型,但是由于PV统计各业务时间上有先后,处理能力有快慢,这种模型下,测试系统测试过程中处理的业务量与实际处理的业务量有较大偏差。同一时刻对服务器的压力模拟也有一定误差。
还有的测试方式中,测试人员通过统计业务流水数据量,按照业务量比例,计算出各个业务TPS(Transaction Per Second,每秒业务处理数量)比例,通过调整并发量和发送业务的时间间隔,来使测试结果的TPS比例与期望比例接近。这种方法通常需要多次迭代和调整,提高了测试成本。
如何使性能测试更接近真实业务场景,并准确快速地得出迭代间隔,减少模型调整的迭代次数,从而提高测试效率,是目前亟需解决的问题。
【发明内容】
本发明提供一种业务系统性能测试方法和装置,旨在解决现有技术的测试方法需要多次迭代和调整,测试成本较高,测试效率较低的技术问题。
根据本发明实施例的第一方面,提供一种业务系统性能测试方法,所述方法包括:
根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔;
根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试;
判断测试结果是否符合测试要求,若符合则完成测试;否则根据测试数据重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求。
在一些实施例中,所述根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试包括:
根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例和单个业务的实际平均响应时间。
在一些实施例中,所述根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例包括:
根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量的比值得到单个业务的测试压力比例。
在一些实施例中,比较所述单个业务的测试压力比例与单个业务的期望压力比例的误差;
若所述误差大于预设阈值,根据所述单个业务的实际平均响应时间,重新计算迭代间隔,直至根据重新计算的迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例的误差小于或等于所述预设阈值;
若所述误差小于或等于所述预设阈值,则完成测试。
在一些实施例中,所述根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔包括:
根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例,根据系统业务需求设定所有业务的期望每秒业务处理数量,基于所述单个业务的期望压力比例和所有业务的期望每秒业务处理数量确定单个业务的期望每秒业务处理数量,其中所述单个业务的期望压力比例为单个业务占总业务量的期望比例;
根据系统的连接配置,设定单个业务第一单个业务期望最终用户比,通过单个业务负载测试获取所述单个业务期望最终用户比下所述单个业务的平均响应时间,其中所述单个业务期望最终用户比为预设的单个业务同时访问的用户数量;
基于所述单个业务期望最终用户比下所述单个业务的平均响应时间,确定单个业务单用户的每秒业务处理数量;
基于单个业务的期望每秒业务处理数量、单个业务单用户的每秒业务处理数量、所有业务的期望每秒业务处理数量、单个业务的期望压力比例以及单个业务的平均响应时间,确定单个业务实际所需用户数;
基于单个业务期望最终用户比、单个业务实际所需用户数以及单个业务的平均响应时间,确定迭代间隔。
根据本发明实施例的第二方面,还提供一种业务系统性能测试装置,所述装置包括:
迭代间隔计算模块,用于根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔;
业务系统性能测试模块,用于根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试;
测试结果判断模块,用于判断测试结果是否符合测试要求,若符合则完成测试;
所述迭代间隔计算模块还用于当测试结果不符合测试要求时根据测试数据重新计算迭代间隔;
所述业务系统性能测试模块还用于在所述迭代间隔计算模块重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求。
在一些实施例中,所述业务系统性能测试模块具体用于:根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例和单个业务的实际平均响应时间。
在一些实施例中,所述业务系统性能测试模块具体用于:根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量的比值得到单个业务的测试压力比例。
在一些实施例中,所述测试结果判断模块具体用于:比较所述单个业务的测试压力比例与单个业务的期望压力比例的误差;
若所述误差大于预设阈值,所述迭代间隔计算模块具体用于:根据所述单个业务的实际平均响应时间,重新计算迭代间隔,直至根据重新计算的迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例的误差小于或等于所述预设阈值;
若所述误差小于或等于所述预设阈值,则完成测试。
在一些实施例中,所述迭代间隔计算模块包括:
第一确定单元,用于根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例,根据系统业务需求设定所有业务的期望每秒业务处理数量,基于所述单个业务的期望压力比例和所有业务的期望每秒业务处理数量确定单个业务的期望每秒业务处理数量,其中所述单个业务的期望压力比例为单个业务占总业务量的期望比例;
获取单元,用于根据系统的连接配置,设定单个业务期望最终用户比,通过单个业务负载测试获取所述单个业务期望最终用户比下所述单个业务的平均响应时间,其中所述单个业务期望最终用户比为预设的单个业务同时访问的用户数量;
第二确定单元,用于基于所述单个业务期望最终用户比下所述单个业务的平均响应时间,确定单个业务单用户的每秒业务处理数量;
第三确定单元,用于基于单个业务的期望每秒业务处理数量、单个业务单用户的每秒业务处理数量、所有业务的期望每秒业务处理数量、单个业务的期望压力比例以及单个业务的平均响应时间,确定单个业务实际所需用户数;
第四确定单元,用于基于单个业务期望最终用户比、单个业务实际所需用户数以及单个业务的平均响应时间,确定迭代间隔。
本发明实施例提供的技术方案可产生以下有益效果:本发明实施例通过采用业务流水的数据模型更准确地模拟对业务系统服务器的实时压力,通过单个业务的平均响应时间和每秒业务处理数量之间的关系,准确地获得业务的迭代间隔,最终使性能测试的数据模型更接近真实业务比例,使性能测试更真实地模拟多用户多业务场景,方便测试模型的建立,减少模型调整的迭代次数,降低了测试成本,提高了测试效率。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
【附图说明】
图1为本发明实施例的业务系统性能测试方法的流程图;
图2为本发明实施例的业务系统性能测试方法中迭代间隔的计算方法;
图3为本发明实施例的业务系统性能测试方法的具体应用流程图;
图4为本发明实施例的业务系统性能测试装置的框图;
图5为本发明实施例的业务系统性能测试装置中迭代间隔计算模块的框图。
【具体实施方式】
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
此外,下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
下文中各名字的字母定义如下:
所有业务的期望每秒业务处理数量T;
单个业务的期望每秒业务处理数量t1;
单个业务的期望压力比例p%;
单个业务单用户的每秒业务处理数量tv;
单个业务的平均响应时间rt;
单个业务期望最终用户比N;
单个业务实际所需用户数n;
迭代间隔k。
本发明实施例提供了一种业务系统性能测试方法,可应用于各业务系统的性能测试,特别是多业务多用户的互联网业务系统的性能测试。
如图1所示,该方法包括步骤S01-S03:
S01、根据系统的连接配置,设定单个业务期望最终用户比N,计算迭代间隔k。
其中,所述单个业务期望最终用户比N为预设的单个业务同时访问的用户数量,也即压力测试业务最终要模拟的单个业务线程并发数,或者说单个业务的虚拟用户数。具体的迭代间隔k的计算方式有多种,下文详细描述其中的一种优选计算方式。
S02、根据所述迭代间隔k和所述单个业务期望最终用户比N进行业务系统性能测试。
根据所述迭代间隔k和单个业务期望最终用户比N进行业务系统性能测试,可得到单个业务的测试压力比例和单个业务的实际平均响应时间。具体可根据迭代间隔k和单个业务期望最终用户比N进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量T的比值得到单个业务的测试压力比例。
S03、判断测试结果是否符合测试要求,若符合则完成测试;否则根据测试数据重新计算迭代间隔k进行业务系统性能测试直至测试结果符合测试要求。
具体实施时,可通过比较所述单个业务的测试压力比例与单个业务的期望压力比例p%的误差;若所述误差大于预设阈值,根据所述单个业务的实际平均响应时间,重新计算迭代间隔k,直至根据重新计算的迭代间隔k和所述单个业务期望最终用户比N进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例p%的所述误差小于或等于所述预设阈值;若所述误差小于或等于所述预设阈值,则完成测试。例如,测试后得到的单个业务的测试压力比例为24%,单个业务的期望压力比例p%为20%,则它们之间的误差为4%,误差的预设阈值为5%,因此测试误差在预设阈值范围内,测试所模拟的压力比例基本接近实际业务压力比例,测试结果符合测试要求。
如图2所示,S01中迭代间隔k的计算方式可通过如下方法,该方法包括步骤S11-S16:
在步骤S11中,根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例p%,根据系统业务需求设定所有业务的期望每秒业务处理数量T(一般用TPS表示每秒业务处理数量,Transaction Per Second),基于所述单个业务的期望压力比例p%和所有业务的期望每秒业务处理数量T确定单个业务的期望每秒业务处理数量t1,其中所述单个业务的期望压力比例p%为单个业务占总业务量的期望比例。
例如,某视频网站的会员系统,在高峰时段有两种业务,一种是赠送会员业务,另一种是购买会员业务。假设一段业务高峰时间中新增会员10万个,而这些会员信息记录在某张数据库表中,通过会员充值续费类型,在这个数据库表中可以查询到这10万个会员中通过赠送获得的有3万个会员,购买获得的有7万个会员,那么赠送会员业务和购买会员业务在高峰时间,共处理业务的比例是3:7。基于同种场景不同时间点的概率相同原理,可以推断这两个业务每秒业务处理数量比例就是3比7,也即赠送会员业务的压力比例为30%,购买会员业务的压力比例为70%
应理解,根据系统业务需求设定所有业务的期望每秒业务处理数量T可根据业务需求预测,例如根据往年业务流量以及今年的增速进行设定,比如某特定日期线上活动全流程要达到每秒10万单的处理速度,则所有业务的期望每秒业务处理数量T为10万。
可选地,作为一个实施例,可基于公式t1=T*p%确定单个业务的期望每秒业务处理数量t1。
在步骤S12中,根据系统的连接配置,设定单个业务期望最终用户比N,通过单个业务负载测试获取所述单个业务期望最终用户比N下所述单个业务的平均响应时间rt。
在步骤S13中,基于所述单个业务期望最终用户比N下所述单个业务的平均响应时间rt,确定单个业务单用户的每秒业务处理数量tv。
可选地,作为一个实施例,可基于公式确定单个业务单用户的每秒业务处理数量tv。
在步骤S14中,基于单个业务的期望每秒业务处理数量t1、单个业务单用户的每秒业务处理数量tv、所有业务的期望每秒业务处理数量T、单个业务的期望压力比例p%以及单个业务的平均响应时间rt,确定单个业务实际所需用户数n。
可选地,作为一个实施例,可基于公式确定单个业务实际所需用户数n。
在步骤S15中,基于单个业务期望最终用户比N、单个业务实际所需用户数n以及单个业务的平均响应时间rt,确定迭代间隔k。
可选地,作为一个实施例,由于添加迭代间隔k,等同于响应时间的延长,有以下相等关系:
因此,可基于公式确定迭代间隔k。
在具体应用时,可根据上述方法制作表1:
表1
表1中,为了方便描述,用了一些简称,其中,总TPS表示所有业务的期望每秒业务处理数量T,业务比例表示单个业务的期望压力比例p%,响应时间表示单个业务的平均响应时间rt,单用户TPS表示单个业务单用户的每秒业务处理数量tv,单业务期望TPS表示单个业务的期望每秒业务处理数量t1,所需用户数表示单个业务实际所需用户数n,最终用户比表示单个业务期望最终用户比N。
在业务系统性能测试过程中,设定单个业务期望最终用户比N,计算出单个业务实际所需用户数n,并计算出单个业务的平均响应时间rt,就可以快速利用表1准确得出迭代间隔k,从而方便快捷地进行性能测试。
如图3所示,在一具体应用中,可依据以下流程进行系统性能测试:
步骤S21、调用系统业务需求得出数据模型业务比例。
其中,业务比例为上述的单个业务的期望压力比例p%。
步骤S22、根据系统业务需求设置期望TPS。
其中,期望TPS为上述的所有业务的期望每秒业务处理数量T。
步骤S23、根据连接配置设置期望并发数。
其中,期望并发数为上述的单个业务期望最终用户比N。
步骤S24、根据期望并发数测试得出该并发下各个业务的平均响应时间。
其中,通过单个业务负载测试获取所述单个业务期望最终用户比N下所述单个业务的平均响应时间rt。
步骤S25、将测试结果和期望值填入表1得出迭代间隔k。
将单个业务期望最终用户比N、单个业务实际所需用户数n、单个业务的平均响应时间rt填入表1得出迭代间隔k。其中单个业务实际所需用户数由所有业务的期望每秒业务处理数量T、单个业务的期望压力比例p%和单个业务的平均响应时间rt得出。
步骤S26、根据迭代间隔k和期望并发数创建模型进行性能测试。
测试后,可得出单个业务的测试压力比例和此次测试的实际的单个业务的平均响应时间。其中通过测试直接得出的一般是单个业务的每秒业务处理数量t1以及此次测试的新的单个业务的平均响应时间rt,根据所有业务的期望每秒业务处理数量T和测试得出的单个业务的每秒业务处理数量可以计算出单个业务的测试压力比例。
步骤S27、判断是否符合测试要求?若是,则测试完成;若否,则执行步骤S28。
通过比较单个业务的测试压力比例与单个业务的期望压力比例p%的误差,如果误差在预设阈值范围内,则说明符合测试要求。
例如,所有业务的期望每秒业务处理数量T为1000,单个业务的期望每秒业务处理数量t1为200,单个业务的期望压力比例p%则为20%;测试后单个业务的每秒业务处理数量为250,则单个业务的测试压力比例为25%,相比20%的误差在5%,若误差的预设阈值为5%,则说明符合测试要求;若测试后单个业务的每秒业务处理数量为300,则单个业务的测试压力比例为30%,相比20%的误差在10%,若误差的预设阈值为5%,则说明不符合测试要求。
步骤S28、将该模型测试得出的响应时间重新填入表1,计算出新的迭代间隔k,返回执行步骤S26。直至完成测试。
不符合测试要求时,需要重新计算迭代间隔k,此时根据此次测试得出的单个业务的实际平均响应时间重新计算迭代间隔k再进行测试,直至根据重新计算的迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例误差小于或等于所述预设阈值,说明符合测试要求。
通过测试,上述方式可以使性能测试的数据模式更加接近真实业务比例,使性能测试更真实地模拟多用户多业务场景,反复测试误差均在5%以下(对于目前的业务情况,误差的预设阈值一般设置在5%为合理的值)。并且计算表格很大程度上方便了测试模型的建立,通过这种算法明显减少了模型调整的迭代次数,例如混合场景(多业务多用户)下,如果采用现有技术方案在最后的压力测试结果业务比例与实际情况相差5%的情况下,需要至少10次左右的调整和实验;本发明实施例方案基本通过一两次迭代就能完成,在5%的误差范围内提高了测试效率。
本发明实施例提供的上述方法,通过采用业务流水的数据模型更准确地模拟对业务系统服务器的实时压力,通过单个业务的平均响应时间和每秒业务处理数量之间的关系,准确地获得业务的迭代间隔k,最终使性能测试的数据模型更接近真实业务比例,使性能测试更真实地模拟多用户多业务场景,方便测试模型的建立,减少模型调整的迭代次数,降低了测试成本,提高了测试效率。
对应本发明上述实施例提供的业务系统性能测试方法,本发明还提供一种业务系统性能测试装置10,如图4所示,所述业务系统性能测试装置10包括:
迭代间隔k计算模块11,用于根据系统的连接配置,设定单个业务期望最终用户比N,计算迭代间隔k;
业务系统性能测试模块12,用于根据所述迭代间隔k和单个业务期望最终用户比N进行业务系统性能测试;
测试结果判断模块13,用于判断测试结果是否符合测试要求,若符合则完成测试;
所述迭代间隔k计算模块11还用于当测试结果不符合测试要求时根据测试数据重新计算迭代间隔k;
所述业务系统性能测试模块12还用于在所述迭代间隔k计算模块重新计算迭代间隔k进行业务系统性能测试直至测试结果符合测试要求。
进一步地,所述业务系统性能测试模块12具体用于:根据所述迭代间隔k和单个业务期望最终用户比N进行业务系统性能测试,得到单个业务的测试压力比例和单个业务的实际平均响应时间;具体地,所述业务系统性能测试模块12可根据所述迭代间隔k和单个业务期望最终用户比N进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量T的比值得到单个业务的测试压力比例。
所述测试结果判断模块13具体用于:比较所述单个业务的测试压力比例与单个业务的期望压力比例p%的误差;若所述误差大于预设阈值,所述迭代间隔k计算模块11具体用于:根据所述单个业务的实际平均响应时间,重新计算迭代间隔k,直至根据重新计算的迭代间隔k和所述单个业务期望最终用户比N进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例p%的误差小于或等于所述预设阈值;若所述误差小于或等于所述预设阈值,则完成测试。
如图5所示,迭代间隔k计算模块11具体包括:
第一确定单元111,用于根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例p%,根据系统业务需求设定所有业务的期望每秒业务处理数量T,基于所述单个业务的期望压力比例p%和所有业务的期望每秒业务处理数量T确定单个业务的期望每秒业务处理数量t1,其中所述单个业务的期望压力比例p%为单个业务占总业务量的期望比例。
获取单元112,用于根据系统的连接配置,设定单个业务期望最终用户比N,通过单个业务负载测试获取所述单个业务期望最终用户比N下所述单个业务的平均响应时间rt,其中所述单个业务期望最终用户比N为预设的单个业务同时访问的用户数量。
第二确定单元113,用于基于所述单个业务期望最终用户比N下所述单个业务的平均响应时间rt,确定单个业务单用户的每秒业务处理数量tv。
第三确定单元114,用于基于单个业务的期望每秒业务处理数量t1、单个业务单用户的每秒业务处理数量tv、所有业务的期望每秒业务处理数量T、单个业务的期望压力比例p%以及单个业务的平均响应时间rt,确定单个业务实际所需用户数n。
第四确定单元115,用于基于单个业务期望最终用户比N、单个业务实际所需用户数n以及单个业务的平均响应时间rt,确定迭代间隔k。
可选地,作为一个实施例,所述第一确定单元111具体用于基于公式t1=T*p%确定单个业务的期望每秒业务处理数量t1。
可选地,作为一个实施例,所述第二确定单元113具体用于基于公式确定单个业务单用户的每秒业务处理数量tv。
可选地,作为一个实施例,所述第三确定单元114具体用于基于公式确定单个业务实际所需用户数n。
可选地,作为一个实施例,所述第四确定单元115具体用于基于公式确定迭代间隔k。
本实施例的具体实现细节可参考上述的方法实施例,此处不再赘述。
本发明实施例提供的上述装置,通过采用业务流水的数据模型更准确地模拟对业务系统服务器的实时压力,通过单个业务的平均响应时间和每秒业务处理数量之间的关系,准确地获得业务的迭代间隔,最终使性能测试的数据模型更接近真实业务比例,使性能测试更真实地模拟多用户多业务场景,方便测试模型的建立,减少模型调整的迭代次数,降低了测试成本,提高了测试效率。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种业务系统性能测试方法,其特征在于,所述方法包括:
根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔;
根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试;
判断测试结果是否符合测试要求,若符合则完成测试;否则根据测试数据重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求。
2.如权利要求1所述的业务系统性能测试方法,其特征在于,所述根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试包括:
根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例和单个业务的实际平均响应时间。
3.如权利要求2所述的业务系统性能测试方法,其特征在于,所述根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例包括:
根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据所述测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量的比值得到单个业务的测试压力比例。
4.如权利要求2所述的业务系统性能测试方法,其特征在于,所述判断测试结果是否符合测试要求,若符合则完成测试;否则根据测试数据重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求包括:
比较所述单个业务的测试压力比例与单个业务的期望压力比例的误差;
若所述误差大于预设阈值,根据所述单个业务的实际平均响应时间,重新计算迭代间隔,直至根据重新计算的迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例的误差小于或等于所述预设阈值;
若所述误差小于或等于所述预设阈值,则完成测试。
5.如权利要求1所述的业务系统性能测试方法,其特征在于,所述根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔包括:
根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例,根据系统业务需求设定所有业务的期望每秒业务处理数量,基于所述单个业务的期望压力比例和所有业务的期望每秒业务处理数量确定单个业务的期望每秒业务处理数量,其中所述单个业务的期望压力比例为单个业务占总业务量的期望比例;
根据系统的连接配置,设定单个业务第一单个业务期望最终用户比,通过单个业务负载测试获取所述单个业务期望最终用户比下所述单个业务的平均响应时间,其中所述单个业务期望最终用户比为预设的单个业务同时访问的用户数量;
基于所述单个业务期望最终用户比下所述单个业务的平均响应时间,确定单个业务单用户的每秒业务处理数量;
基于单个业务的期望每秒业务处理数量、单个业务单用户的每秒业务处理数量、所有业务的期望每秒业务处理数量、单个业务的期望压力比例以及单个业务的平均响应时间,确定单个业务实际所需用户数;
基于单个业务期望最终用户比、单个业务实际所需用户数以及单个业务的平均响应时间,确定迭代间隔。
6.一种业务系统性能测试装置,其特征在于,所述装置包括:
迭代间隔计算模块,用于根据系统的连接配置,设定单个业务期望最终用户比,计算迭代间隔;
业务系统性能测试模块,用于根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试;
测试结果判断模块,用于判断测试结果是否符合测试要求,若符合则完成测试;
所述迭代间隔计算模块还用于当测试结果不符合测试要求时根据测试数据重新计算迭代间隔;
所述业务系统性能测试模块还用于在所述迭代间隔计算模块重新计算迭代间隔进行业务系统性能测试直至测试结果符合测试要求。
7.如权利要求6所述的业务系统性能测试装置,其特征在于,所述业务系统性能测试模块具体用于:根据所述迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到单个业务的测试压力比例和单个业务的实际平均响应时间。
8.如权利要求7所述的业务系统性能测试装置,其特征在于,所述业务系统性能测试模块具体用于:根据所述迭代间隔和单个业务期望最终用户比进行业务系统性能测试,得到测试后的单个业务的每秒业务处理数量,根据所述测试后的单个业务的每秒业务处理数量与所有业务的期望每秒业务处理数量的比值得到单个业务的测试压力比例。
9.如权利要求7所述的业务系统性能测试装置,其特征在于,所述测试结果判断模块具体用于:比较所述单个业务的测试压力比例与单个业务的期望压力比例的误差;
若所述误差大于预设阈值,所述迭代间隔计算模块具体用于:根据所述单个业务的实际平均响应时间,重新计算迭代间隔,直至根据重新计算的迭代间隔和所述单个业务期望最终用户比进行业务系统性能测试,得到的单个业务的测试压力比例与单个业务的期望压力比例的误差小于或等于所述预设阈值;
若所述误差小于或等于所述预设阈值,则完成测试。
10.如权利要求6所述的业务系统性能测试装置,其特征在于,所述迭代间隔计算模块包括:
第一确定单元,用于根据系统业务流水记录进行业务数据量统计,获取单个业务的期望压力比例,根据系统业务需求设定所有业务的期望每秒业务处理数量,基于所述单个业务的期望压力比例和所有业务的期望每秒业务处理数量确定单个业务的期望每秒业务处理数量,其中所述单个业务的期望压力比例为单个业务占总业务量的期望比例;
获取单元,用于根据系统的连接配置,设定单个业务期望最终用户比,通过单个业务负载测试获取所述单个业务期望最终用户比下所述单个业务的平均响应时间,其中所述单个业务期望最终用户比为预设的单个业务同时访问的用户数量;
第二确定单元,用于基于所述单个业务期望最终用户比下所述单个业务的平均响应时间,确定单个业务单用户的每秒业务处理数量;
第三确定单元,用于基于单个业务的期望每秒业务处理数量、单个业务单用户的每秒业务处理数量、所有业务的期望每秒业务处理数量、单个业务的期望压力比例以及单个业务的平均响应时间,确定单个业务实际所需用户数;
第四确定单元,用于基于单个业务期望最终用户比、单个业务实际所需用户数以及单个业务的平均响应时间,确定迭代间隔。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610258426.6A CN105930220A (zh) | 2016-04-22 | 2016-04-22 | 业务系统性能测试方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610258426.6A CN105930220A (zh) | 2016-04-22 | 2016-04-22 | 业务系统性能测试方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105930220A true CN105930220A (zh) | 2016-09-07 |
Family
ID=56837001
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610258426.6A Pending CN105930220A (zh) | 2016-04-22 | 2016-04-22 | 业务系统性能测试方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105930220A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108563544A (zh) * | 2018-03-26 | 2018-09-21 | 平安普惠企业管理有限公司 | 系统性能测试方法、装置、计算机设备和存储介质 |
CN109828892A (zh) * | 2018-12-17 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 异步接口的性能测试方法、装置、计算机设备和存储介质 |
CN110618922A (zh) * | 2019-08-15 | 2019-12-27 | 平安普惠企业管理有限公司 | 性能测试方法及相关设备 |
CN110659145A (zh) * | 2019-09-05 | 2020-01-07 | 北京达佳互联信息技术有限公司 | 数据检测的方法、装置、后台服务器及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6141647A (en) * | 1995-10-20 | 2000-10-31 | The Dow Chemical Company | System and method for integrating a business environment, a process control environment, and a laboratory environment |
CN101211311A (zh) * | 2006-12-25 | 2008-07-02 | 中国电信股份有限公司 | 应用软件在生产环境下的性能预测方法 |
CN101576844A (zh) * | 2008-05-09 | 2009-11-11 | 北京世纪拓远软件科技发展有限公司 | 软件系统性能测试方法和系统 |
CN105224432A (zh) * | 2015-11-11 | 2016-01-06 | 中国建设银行股份有限公司 | 一种性能测试参数配置方法、装置、压力机及系统 |
-
2016
- 2016-04-22 CN CN201610258426.6A patent/CN105930220A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6141647A (en) * | 1995-10-20 | 2000-10-31 | The Dow Chemical Company | System and method for integrating a business environment, a process control environment, and a laboratory environment |
CN101211311A (zh) * | 2006-12-25 | 2008-07-02 | 中国电信股份有限公司 | 应用软件在生产环境下的性能预测方法 |
CN101576844A (zh) * | 2008-05-09 | 2009-11-11 | 北京世纪拓远软件科技发展有限公司 | 软件系统性能测试方法和系统 |
CN105224432A (zh) * | 2015-11-11 | 2016-01-06 | 中国建设银行股份有限公司 | 一种性能测试参数配置方法、装置、压力机及系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108563544A (zh) * | 2018-03-26 | 2018-09-21 | 平安普惠企业管理有限公司 | 系统性能测试方法、装置、计算机设备和存储介质 |
CN109828892A (zh) * | 2018-12-17 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 异步接口的性能测试方法、装置、计算机设备和存储介质 |
CN109828892B (zh) * | 2018-12-17 | 2023-02-28 | 深圳壹账通智能科技有限公司 | 异步接口的性能测试方法、装置、计算机设备和存储介质 |
CN110618922A (zh) * | 2019-08-15 | 2019-12-27 | 平安普惠企业管理有限公司 | 性能测试方法及相关设备 |
CN110659145A (zh) * | 2019-09-05 | 2020-01-07 | 北京达佳互联信息技术有限公司 | 数据检测的方法、装置、后台服务器及存储介质 |
CN110659145B (zh) * | 2019-09-05 | 2023-03-21 | 北京达佳互联信息技术有限公司 | 数据检测的方法、装置、后台服务器及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11354594B2 (en) | Black-box optimization using neural networks | |
JP2019533257A (ja) | ニューラルアーキテクチャ検索 | |
US7266534B2 (en) | System and method and product of manufacture for automated test generation via constraint satisfaction with duplicated sub-problems | |
JP5313990B2 (ja) | 応答時間に基づいてサービスリソース消費を推定すること | |
CN105930220A (zh) | 业务系统性能测试方法和装置 | |
CN106959894B (zh) | 资源分配方法和装置 | |
AU2021240156B2 (en) | Quantum Control Pulse Generation Method And Apparatus, Device, And Storage Medium | |
CN112052958A (zh) | 模型训练的方法、装置、设备及计算机可读存储介质 | |
US20150378879A1 (en) | Methods, software, and systems for software testing | |
US20170024508A1 (en) | System and method for managing and composing verification engines | |
CN106161282A (zh) | 一种基于云计算环境的节约带宽资源租赁成本的方法 | |
CN110569190B (zh) | 交易压力测试方法和装置、以及电子设备和可读存储介质 | |
CN107220165A (zh) | 一种模拟线上压力测试的方法和装置 | |
CN106326102A (zh) | 测试方法和装置 | |
CN110502531A (zh) | 报表数据校验方法、装置、计算机设备和存储介质 | |
CN114297041A (zh) | 网络异构计算平台测试方法、装置和计算机设备 | |
Nasr et al. | An analytical approach to estimate the expected duration and variance for iterative product development projects | |
CN115202890B (zh) | 数据元件生产资源空间分配方法、系统及设备 | |
CN106648895A (zh) | 一种处理数据的方法、装置及终端 | |
CN112242959B (zh) | 微服务限流控制方法、装置、设备及计算机存储介质 | |
CN116009889A (zh) | 深度学习模型的部署方法、装置、电子设备及存储介质 | |
CN114238106A (zh) | 测试时间预测方法及装置、电子设备、存储介质 | |
CN113971495A (zh) | 日间批量处理方法及装置 | |
CN108804640B (zh) | 基于最大化iv的数据分组方法、装置、储存介质及设备 | |
CN111861426A (zh) | 用于信用审批的方法和装置、电子设备、及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160907 |
|
WD01 | Invention patent application deemed withdrawn after publication |