CN104765679A - 一种基于用户行为的业务在线测试方法与装置 - Google Patents
一种基于用户行为的业务在线测试方法与装置 Download PDFInfo
- Publication number
- CN104765679A CN104765679A CN201410008800.8A CN201410008800A CN104765679A CN 104765679 A CN104765679 A CN 104765679A CN 201410008800 A CN201410008800 A CN 201410008800A CN 104765679 A CN104765679 A CN 104765679A
- Authority
- CN
- China
- Prior art keywords
- test
- terminal
- business
- subscriber
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
本发明涉及一种基于用户行为的业务在线测试方法，包括：对待测试的业务的需求进行分析；根据对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；计算每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；对各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；向测试用户下发测试用例执行脚本；在测试用户的终端上自动执行测试脚本。
Description
技术领域
本发明涉及软件测试领域，特别涉及一种基于用户行为的业务在线测试方法与装置。
背景技术
对业务进行在线测试是目前最为有效的软件测试方法，不仅能保证测试结果的准确性，而且可以组织大规模的用户在线进行压力测试、业务在线服务质量测试。
测试业务和用户正常使用的业务往往存在资源冲突，用户怕影响正常业务的使用往往不参与业务测试，因此在多数情况下，很难有效地组织成规模的用户参与到在线测试中，从而影响整个测试的效果。如何保证测试业务不影响或尽量少影响用户的正常业务是业务在线测试能否推广的重要问题。
在现有技术中存在一些业务在线测试方法，如在申请号为201210058151的中国专利申请中公开了“一种自动化测试用例的开发系统及开发方法”，该申请涉及基于命令行SHELL的自动化测试技术，包括：编写测试脚本，然后运行脚本语言片段发送相应的SHELL命令给被测设备，并收集被测设备返回的执行结果。在另一授权号为ZL200710043589的中国专利中公开了“一种Web应用系统的自动化测试方法及装置”，该专利包括：将Web应用系统的业务流程分解成原子流程的组合；对应每个原子流程创建自动化测试构件；读取预配置的测试案例，测试案例中记录了原子流程序列；对应所述序列中的每个原子流程，调用相应的测试构件，对Web应用系统进行测试。
上述现有技术实现了对规模用户的自动在线测试，能够有效减少人工干预，但并未解决如何规避或减少测试终端资源消耗的问题。
发明内容
本发明的目的在于克服现有技术中的业务在线测试方法并未规避或减少测试终端资源消耗的缺陷，从而提供一种能够有效减少对用户终端的正常业务产生干扰的测试方法。
为了实现上述目的，本发明提供了一种基于用户行为的业务在线测试方法，包括：
步骤1）、对待测试的业务的需求进行分析；
步骤2）、根据步骤1）所得到的对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；
步骤3）、计算步骤2）预测得到的每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；
步骤4）、对步骤3）得到的各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；
步骤5）、向步骤4）所选择的测试用户下发测试用例执行脚本；
步骤6）、在测试用户的终端上自动执行测试脚本。
上述技术方案中，还包括：
步骤7）、对各个测试用户的终端上所执行的测试过程进行实时监测，对终端所要耗费的总资源达到预设置的终端资源消耗阈值的测试用户做测试迁移，即重新选择一个测试用户代替该测试用户。
上述技术方案中，在步骤1）中，对待测试的业务的需求进行分析的结果采用如下方式描述：
ST_Req=(L,Ts,Te,N)，其中，L代表测试该业务所需要终端资源消耗矩阵，Ts代表测试开始时间，Te代表测试结束时间，N代表参与测试的用户数。
上述技术方案中，所述步骤7）进一步包括：
步骤7-1）、测试监测，包括：收集终端测试状态并分析资源消耗情况；
步骤7-2）、判断测试用户的终端资源总消耗是否达到预设置的终端资源消耗阈值，如果达到，进行步骤7-3），否则，重新进行步骤7-1）；
步骤7-3）、通知该终端停止执行测试任务；
步骤7-4）、从差值较大且未被选为测试用户的用户中重新选择一个测试用户；
步骤7-5）、向该测试用户终端下发测试用例执行脚本和测试状态；
步骤7-6）、新选择的测试用户终端根据测试状态自动执行测试脚本，然后重新执行步骤7-1）。
上述技术方案中，所述终端资源消耗阈值的大小根据所对应的终端的配置预先设置。
本发明还提供了一种基于用户行为的业务在线测试装置，包括业务需求分析模块、终端资源消耗预测模块、差值计算模块、测试用户选择模块、测试用例执行脚本下发模块；其中，
所述业务需求分析模块用于对待测试的业务的需求进行分析；
所述终端资源消耗预测模块根据对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；
所述差值计算模块计算预测得到的每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；
所述测试用户选择模块对各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；
所述测试用例执行脚本下发模块向测试用户下发测试用例执行脚本；
测试用户的终端上自动执行测试脚本。
上述技术方案中，还包括测试迁移模块，所述测试迁移模块对各个测试用户的终端上所执行的测试过程进行实时监测，对终端所要耗费的总资源达到预设置的终端资源消耗阈值的测试用户做测试迁移，即重新选择一个测试用户代替该测试用户。
本发明的优点在于：
1.本发明能够有效规避测试业务和正常业务在终端的资源消耗，有效避免用户在参与业务测试时，对正常使用的业务产生干扰；
2.根据本发明的测试方法，如果用户在测试过程中，干扰正常业务使用时，将停止用户测试，重新选择用户代替该用户参与测试，能有效保证测试用户的规模。
附图说明
图1是本发明的基于用户行为的业务在线测试方法的流程图；
图2是本发明的基于用户行为的业务在线测试方法中的测试迁移过程的流程图。
具体实施方式
现结合附图对本发明作进一步的描述。
图1为本发明的基于用户行为的业务在线测试方法的流程图，该方法包括以下步骤：
步骤101、对所要测试的业务的需求进行分析，根据分析结果采用如下方式描述业务测试需求：ST_Req=(L,Ts,Te,N)，其中，L代表测试该业务所需要测试终端资源消耗矩阵，Ts代表测试开始时间，Te代表测试结束时间，N代表本次测试需要的用户规模，即参与测试的用户数；
步骤102、预测资源消耗，包括：根据用户行为，在测试开始时间到测试结束时间的期间内，预测每个用户参与此次测试的终端资源总消耗（TotalL）的最大值Max（TotalL），TotalL包括测试业务资源消耗和正常业务资源消耗；其中的用户行为包括用户的业务使用行为，用户的在线行为等；
步骤103、计算每个用户的终端资源总消耗的最大值Max（TotalL）与预设置的终端资源消耗阈值之间的差值；各个用户的终端所对应的终端资源消耗阈值的大小可以相同，也可以不同，作为一种优选实现方式，各个用户的终端所对应的终端资源消耗阈值不同。每一用户的终端所对应的终端资源消耗阈值与该终端的配置有关，若终端的配置较高，则所述阈值可以较大，若终端的配置较低，则所述阈值可以较小。终端资源消耗阈值一旦设置完成，在一段时间内都不需要改变。当然，在设置所述终端资源消耗阈值时，还应以不影响用户正常业务的使用为前提。
步骤104、选择测试用户，包括：对步骤103所得到的差值大小进行排序，形成差值队列，在队列中选择差值最大的N个用户作为本次测试的测试用户；
步骤105、向步骤104选择的测试用户下发测试用例执行脚本；
步骤106、在测试用户的终端上自动执行测试脚本；
步骤107、对测试过程进行监测，包括：收集终端测试状态（测试状态包括：测试开始、测试执行中、测试结束、测试异常等）及分析资源消耗情况，如某测试用户的终端资源总消耗达到预设置的终端资源消耗阈值，将进行测试迁移。在下面的图2中对测试迁移过程做了说明。
参考图2，所述测试迁移包括：
步骤201、测试监测，包括：收集终端测试状态并分析资源消耗情况；
步骤202、判断测试用户的终端资源总消耗是否达到预设置的终端资源消耗阈值，如果达到，进行步骤203，否则，重新进行步骤201；
步骤203、通知该终端停止执行测试任务；
步骤204、从差值队列中重新选择一个测试用户；
步骤205、向该测试用户终端下发测试用例执行脚本和测试状态；
步骤206、新选择的测试终端根据测试状态自动执行测试脚本，然后重新执行步骤201。
本发明还提供了一种基于用户行为的业务在线测试装置，包括业务需求分析模块、终端资源消耗预测模块、差值计算模块、测试用户选择模块、测试用例执行脚本下发模块；其中，
所述业务需求分析模块用于对待测试的业务的需求进行分析；
所述终端资源消耗预测模块根据对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；
所述差值计算模块计算预测得到的每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；
所述测试用户选择模块对各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；
所述测试用例执行脚本下发模块向测试用户下发测试用例执行脚本；
测试用户的终端上自动执行测试脚本。
在另一实施例中，该装置还包括测试迁移模块，所述测试迁移模块对各个测试用户的终端上所执行的测试过程进行实时监测，对终端所要耗费的总资源达到预设置的终端资源消耗阈值的测试用户做测试迁移，即重新选择一个测试用户代替该测试用户。
最后所应说明的是，以上实施例仅用以说明本发明的技术方案而非限制。尽管参照实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，对本发明的技术方案进行修改或者等同替换，都不脱离本发明技术方案的精神和范围，其均应涵盖在本发明的权利要求范围当中。
Claims (7)
1.一种基于用户行为的业务在线测试方法，包括：
步骤1）、对待测试的业务的需求进行分析；
步骤2）、根据步骤1）所得到的对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；
步骤3）、计算步骤2）预测得到的每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；
步骤4）、对步骤3）得到的各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；
步骤5）、向步骤4）所选择的测试用户下发测试用例执行脚本；
步骤6）、在测试用户的终端上自动执行测试脚本。
2.根据权利要求1所述的基于用户行为的业务在线测试方法，其特征在于，还包括：
步骤7）、对各个测试用户的终端上所执行的测试过程进行实时监测，对终端所要耗费的总资源达到预设置的终端资源消耗阈值的测试用户做测试迁移，即重新选择一个测试用户代替该测试用户。
3.根据权利要求1或2所述的基于用户行为的业务在线测试方法，其特征在于，在步骤1）中，对待测试的业务的需求进行分析的结果采用如下方式描述：
ST_Req=(L,Ts,Te,N)，其中，L代表测试该业务所需要终端资源消耗矩阵，Ts代表测试开始时间，Te代表测试结束时间，N代表参与测试的用户数。
4.根据权利要求2所述的基于用户行为的业务在线测试方法，其特征在于，所述步骤7）进一步包括：
步骤7-1）、测试监测，包括：收集终端测试状态并分析资源消耗情况；
步骤7-2）、判断测试用户的终端资源总消耗是否达到预设置的终端资源消耗阈值，如果达到，进行步骤7-3），否则，重新进行步骤7-1）；
步骤7-3）、通知该终端停止执行测试任务；
步骤7-4）、从差值较大且未被选为测试用户的用户中重新选择一个测试用户；
步骤7-5）、向该测试用户终端下发测试用例执行脚本和测试状态；
步骤7-6）、新选择的测试用户终端根据测试状态自动执行测试脚本，然后重新执行步骤7-1）。
5.根据权利要求1或2所述的基于用户行为的业务在线测试方法，其特征在于，所述终端资源消耗阈值的大小根据所对应的终端的配置预先设置。
6.一种基于用户行为的业务在线测试装置，其特征在于，包括业务需求分析模块、终端资源消耗预测模块、差值计算模块、测试用户选择模块、测试用例执行脚本下发模块；其中，
所述业务需求分析模块用于对待测试的业务的需求进行分析；
所述终端资源消耗预测模块根据对待测试业务的需求进行分析的结果预测该待测试业务在每个用户的终端上进行测试时，该终端所要耗费的总资源的最大值；其中，所述终端所要耗费的总资源包括测试业务资源消耗和正常业务资源消耗；
所述差值计算模块计算预测得到的每个用户的终端所要耗费的总资源的最大值与终端资源消耗阈值之间的差值；
所述测试用户选择模块对各个差值进行排序，将差值最大的若干个用户作为本次在线测试的测试用户；
所述测试用例执行脚本下发模块向测试用户下发测试用例执行脚本；
测试用户的终端上自动执行测试脚本。
7.根据权利要求6所述的基于用户行为的业务在线测试装置，其特征在于，还包括测试迁移模块，所述测试迁移模块对各个测试用户的终端上所执行的测试过程进行实时监测，对终端所要耗费的总资源达到预设置的终端资源消耗阈值的测试用户做测试迁移，即重新选择一个测试用户代替该测试用户。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410008800.8A CN104765679B (zh) | 2014-01-08 | 2014-01-08 | 一种基于用户行为的业务在线测试方法与装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410008800.8A CN104765679B (zh) | 2014-01-08 | 2014-01-08 | 一种基于用户行为的业务在线测试方法与装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104765679A true CN104765679A (zh) | 2015-07-08 |
| CN104765679B CN104765679B (zh) | 2017-07-07 |
Family
ID=53647523
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410008800.8A Expired - Fee Related CN104765679B (zh) | 2014-01-08 | 2014-01-08 | 一种基于用户行为的业务在线测试方法与装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104765679B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108255691A (zh) * | 2018-01-29 | 2018-07-06 | 百度在线网络技术（北京）有限公司 | 热力图展示方法及装置 |
| CN110059873A (zh) * | 2019-04-12 | 2019-07-26 | 广东电网有限责任公司信息中心 | 一种面向电网企业测试环境云资源的智能调度方法 |
| CN111325367A (zh) * | 2018-12-13 | 2020-06-23 | 英业达科技有限公司 | 测试时间预测系统及其方法 |
| CN112398707A (zh) * | 2020-11-03 | 2021-02-23 | 平安普惠企业管理有限公司 | 分布式自动化测试管理方法、装置、设备及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102541700A (zh) * | 2010-12-16 | 2012-07-04 | 卓望数码技术（深圳）有限公司 | 一种终端测试方法、测试设备及终端代理 |
| CN102572914A (zh) * | 2010-12-10 | 2012-07-11 | 中兴通讯股份有限公司 | 终端省电的方法、装置和系统 |
| CN102622234A (zh) * | 2012-03-07 | 2012-08-01 | 迈普通信技术股份有限公司 | 一种自动化测试用例的开发系统及开发方法 |
| CN102711070A (zh) * | 2011-12-20 | 2012-10-03 | 中国移动（深圳）有限公司 | 一种在线计费模拟测试系统和方法 |
-
2014
- 2014-01-08 CN CN201410008800.8A patent/CN104765679B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102572914A (zh) * | 2010-12-10 | 2012-07-11 | 中兴通讯股份有限公司 | 终端省电的方法、装置和系统 |
| CN102541700A (zh) * | 2010-12-16 | 2012-07-04 | 卓望数码技术（深圳）有限公司 | 一种终端测试方法、测试设备及终端代理 |
| CN102711070A (zh) * | 2011-12-20 | 2012-10-03 | 中国移动（深圳）有限公司 | 一种在线计费模拟测试系统和方法 |
| CN102622234A (zh) * | 2012-03-07 | 2012-08-01 | 迈普通信技术股份有限公司 | 一种自动化测试用例的开发系统及开发方法 |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108255691A (zh) * | 2018-01-29 | 2018-07-06 | 百度在线网络技术（北京）有限公司 | 热力图展示方法及装置 |
| CN108255691B (zh) * | 2018-01-29 | 2021-08-10 | 百度在线网络技术（北京）有限公司 | 热力图展示方法及装置 |
| CN111325367A (zh) * | 2018-12-13 | 2020-06-23 | 英业达科技有限公司 | 测试时间预测系统及其方法 |
| CN111325367B (zh) * | 2018-12-13 | 2023-04-07 | 英业达科技有限公司 | 测试时间预测系统及其方法 |
| CN110059873A (zh) * | 2019-04-12 | 2019-07-26 | 广东电网有限责任公司信息中心 | 一种面向电网企业测试环境云资源的智能调度方法 |
| CN112398707A (zh) * | 2020-11-03 | 2021-02-23 | 平安普惠企业管理有限公司 | 分布式自动化测试管理方法、装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104765679B (zh) | 2017-07-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106294120B (zh) | 测试代码的方法、设备和计算机程序产品 | |
| US8261266B2 (en) | Deploying a virtual machine having a virtual hardware configuration matching an improved hardware profile with respect to execution of an application | |
| CN106886485B (zh) | 系统容量分析预测方法及装置 | |
| CN104765679A (zh) | 一种基于用户行为的业务在线测试方法与装置 | |
| TW201636839A (zh) | 一種實現資源調度的方法與設備 | |
| CN110502366B (zh) | 案例执行方法、装置、设备及计算机可读存储介质 | |
| CN110768872A (zh) | 巡检方法、系统、装置、计算机设备和存储介质 | |
| CN112769810B (zh) | 防火墙测试方法、装置、非易失性存储介质和电子装置 | |
| US8832839B2 (en) | Assessing system performance impact of security attacks | |
| CN109408341A (zh) | 分布式存储系统性能监控方法、装置、设备及可读存储介质 | |
| CN103903312B (zh) | 自动巡检的执行方法和装置 | |
| JP5308098B2 (ja) | 情報処理装置試験プログラム及び方法 | |
| CN112115031A (zh) | 集群状态监控方法及装置 | |
| CN111881023A (zh) | 一种基于多模型对比的软件老化预测方法及装置 | |
| CN103645961A (zh) | 计算密集型并行任务的异常检测方法及系统 | |
| CN109634803A (zh) | 一种上报设备异常的方法和装置 | |
| CN112346962A (zh) | 一种应用于对照测试系统中的对照数据测试方法及装置 | |
| CN106874290B (zh) | 一种数据清洗方法及设备 | |
| CN104123397A (zh) | Web页面的自动化测试装置及方法 | |
| Gupta et al. | Detecting energy patterns in software development | |
| CN104967532A (zh) | Toc技术运维系统及应用方法 | |
| CN112948189B (zh) | 一种裕度测试方法、裕度测试系统及相关装置 | |
| CN113704129A (zh) | 一种回归测试方法、装置、存储介质和设备 | |
| Yue et al. | Microservice aging and rejuvenation | |
| Ouyang et al. | ML-NA: A machine learning based node performance analyzer utilizing straggler statistics |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170707 Termination date: 20210108 |