CN104717670A - 一种业务质量测试方法、装置及系统 - Google Patents
一种业务质量测试方法、装置及系统 Download PDFInfo
- Publication number
- CN104717670A CN104717670A CN201310687975.1A CN201310687975A CN104717670A CN 104717670 A CN104717670 A CN 104717670A CN 201310687975 A CN201310687975 A CN 201310687975A CN 104717670 A CN104717670 A CN 104717670A
- Authority
- CN
- China
- Prior art keywords
- test
- terminal
- strategy
- determined
- parameter values
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/02—Arrangements for optimising operational condition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明公开了一种业务质量测试方法、装置及系统,用以提供一种自动进行业务质量测试的方案。本发明实施例的业务质量测试方法,包括:终端确定场景相关参数值;针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,所述终端分别执行:所述终端在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
Description
技术领域
本发明涉及移动通信系统中的业务测试技术,尤其是涉及一种业务质量测试方法、装置及系统。
背景技术
在通信网络高速发展的今天,数据业务层出不穷,如何在保证网络建设的同时,迅速提升数据业务质量,成为运营商需要解决的问题。为了提高数据业务质量,需要在终端上对数据业务质量进行多个维度各种指标的测试。
当前运营商在测试领域主要的解决方案有如下三种方案:
方案一、测试领域中传统的“测试终端+路测软件”模式。在该模式下,测试人员预先确定测试场景,且根据测试规范确定在该测试场景下的测试用例;测试人员借助测量工具,寻找出地理环境和/或无线通信环境大致符合所述预先确定测试场景要求的区域,将安装有路测软件的测试终端置于该寻找出的区域(即,将该寻找出的区域作为测试发起场景)中,操作该安装有路测软件的测试终端,指示该路测软件按照确定出的该测试用例,进行业务测试,人工记录各种测试数据。
方案二、人工拨测模式。在该模式下,测试人员重复地使用终端进行业务使用测试,然后人工记录各种测试数据。
方案三、终端自动拨测模式。在该模式下,将诸如测试程序或者测试代理程序等的自动化拨测工具安装到终端中;测试人员预先确定测试场景,借助测量工具,寻找出地理环境和/或无线通信环境大致符合所述预先确定测试场景要求的区域,将安装有自动化拨测工具的终端置于该寻找出的区域中,运行该终端的自动化拨测工具,触发终端自动进行业务测试。
对于上述方案一,方案一中需要大量人工投入,因此测试效率较低;而且,很难保证预先确定的测试场景和测试发起场景的一致性,使得重复测试结果的对比性比较差。
对于上述方案二,方案二中需要大量人工投入,因此测试效率较低。
对于上述方案三,方案三中仍然需要人工投入,因此测试效率比较低;而且,很难保证预先确定的测试场景和测试发起场景的一致性,使得重复测试结果的对比性比较差。
综上可见,现有业务质量测试的方案中至少存在如下问题:
第一、上述方案均需要较多的人工投入,因此测试效率比较低;
第二、上述部分方案很难保证预先确定的测试场景和测试发起场景的一致性,使得重复测试结果的对比性比较差。
发明内容
本发明实施例提供一种业务质量测试方法、装置及系统,用以提供一种自动进行业务质量测试的方案,以减少人工投入、提高测试效率和准确度、以及降低测试成本。
本发明实施例提供一种业务质量测试方法、装置及系统,用以提供一种自动进行业务质量测试的方案,以增强重复测试结果的可对比性。
第一方面,本发明实施例提供一种业务质量测试方法,包括:
终端确定场景相关参数值;以及
针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,所述终端分别执行:
所述终端在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述得到表征业务质量的测试数据之后,还包括:
所述终端将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
第二方面,本发明实施例提供一种业务质量测试方法,包括:
后台服务器确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
所述后台服务器向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述后台服务器确定终端对应的测试策略,具体包括:
所述后台服务器根据测试规范,确定所述终端对应的测试策略;或者
根据其他终端对应的测试策略,确定所述终端对应的测试策略。
较佳地,所述方法还包括:
所述后台服务器接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
第三方面,本发明实施例提供一种业务质量测试装置,包括:
确定模块,用于确定场景相关参数值;
测试执行模块,用于针对由后台服务器确定的、且终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述装置还包括:
上报模块,用于将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
第四方面,本发明实施例提供一种业务质量测试装置,包括:
确定模块,用于确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
处理模块,用于向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述确定模块,还用于:接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
第五方面,本发明实施例提供一种业务质量测试系统,包括:
后台服务器,用于确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;以及,向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储,或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储;
终端,用于确定场景相关参数值;以及针对由所述后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
与现有技术相比,终端确定场景相关参数值,并在确定的场景相关参数值满足测试策略的测试条件时,自动按照测试策略的测试用例进行业务测试,可以实现在无人值守的情况下,终端自动进行业务质量测试,从而减少了人工投入、提高了测试效率和准确度、以及大大降低了测试成本。
与现有技术相比,终端确定场景相关参数值,将确定的场景相关参数值与测试策略的测试条件进行比较,在确定的场景相关参数值满足测试策略的测试条件时,按照测试策略的测试用例进行业务测试;在进行重复测试时,通过执行将确定的场景相关参数值与测试策略的测试条件进行比较的步骤,可以在一定程度上保证是在同一场景下得到多组测试数据,从而使得重复测试结果的可对比性比较强,使得根据得到的所述多组测试数据确定的分析结果更具有意义。
附图说明
图1为本发明实施例提供的业务质量测试系统的结构示意图;
图2为本发明实施例提供的业务质量测试方法的流程示意图;
图3为本发明实施例提供的业务质量测试方法的流程示意图;
图4为本发明实施例提供的业务质量测试装置的结构示意图;
图5为本发明实施例提供的业务质量测试装置的结构示意图。
具体实施方式
在本发明实施例中,终端确定场景相关参数值;针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,所述终端分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据;
由于终端在确定的场景相关参数值满足测试策略的测试条件时,就自动按照测试策略的测试用例进行业务测试;因此可以实现在无人值守的情况下,终端自动进行业务质量测试,从而减少了人工投入、提高了测试效率和准确度、以及大大降低了测试成本;
由于终端确定场景相关参数值,将确定的场景相关参数值与测试策略的测试条件进行比较,在确定的场景相关参数值满足测试策略的测试条件时,按照测试策略的测试用例进行业务测试;因此在进行重复测试时,通过执行将确定的场景相关参数值与测试策略的测试条件进行比较的步骤,可以在一定程度上保证是在同一场景下得到多组测试数据,从而使得重复测试结果的可对比性比较强,使得根据得到的所述多组测试数据确定的分析结果更具有意义。
下面对结合说明书附图对本发明实施例的技术方案进行详细说明。
在下面的说明过程中,先从后台服务器和终端的配合实施进行说明,最后分别对后台服务器和终端的实施进行说明,但这并不意味着二者必须配合实施,实际上,当后台服务器和终端分开实施时,也解决了分别在后台服务器和终端所存在的问题,只是二者结合使用时,会获得更好的技术效果。
如图1所示,本发明实施例提供的业务质量测试系统包括:后台服务器1和多个终端2;
后台服务器1,用于确定终端2对应的测试策略,其中每个测试策略包含测试条件和测试用例;以及,向终端2发送包含所述确定的终端2对应的测试策略的存储地址的指示消息,指示终端2到所述存储地址获取所述确定的终端2对应的测试策略,并进行本地存储,或者将所述确定的终端2对应的测试策略发送给终端2进行本地存储;
终端2,用于确定场景相关参数值;以及针对由后台服务器1确定的、且终端2本地存储的终端2对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
实施中,终端在确定的场景相关参数值满足测试策略的测试条件时,就自动按照测试策略的测试用例进行业务测试;可以实现在无人值守的情况下,终端自动进行业务质量测试,从而减少了人工投入、提高了测试效率、以及大大降低了测试成本;而且,可以减少由于人为因素造成的错误的发生概率,提高测试准确度;
另外,终端确定场景相关参数值,将确定的场景相关参数值与测试策略的测试条件进行比较,在确定的场景相关参数值满足测试策略的测试条件时,按照测试策略的测试用例进行业务测试;在进行重复测试时,通过执行将确定的场景相关参数值与测试策略的测试条件进行比较的步骤,可以在一定程度上保证是在同一场景下得到多组测试数据,从而使得重复测试结果的可对比性比较强,使得根据得到的所述多组测试数据确定的分析结果更具有意义。
需要说明的是,由于本发明实施例的业务质量测试系统中的每个终端2的实施方式类似,因此,在本发明实施例中以一个终端2的实施方式为例,对本发明实施例的业务质量测试系统的实施方式进行介绍。
较佳地,场景相关参数值为与终端2位于的场景相关的部分或全部参数值。
较佳地,场景相关参数值包括环境相关参数值、终端2属性和性能相关参数值和时间相关参数值中的一种或多种。
较佳地,环境相关参数值包括地理环境参数值和无线通信环境参数值中的一种或多种。
较佳地,地理环境参数值包括GPS位置、海拔高度值、以及与基站间距离值等用于表征终端2的地理位置的参数值中的一种或多种。
较佳地,无线通信环境参数值包括信号强度值、发送功率值、场强值和小区ID等用于表征终端2的无线通信环境状况的参数值中的一种或多种。
较佳地,终端2属性和性能相关参数值包括终端2的型号、终端2的CPU利用率值和终端的计算能力等用于表征终端2属性和性能的参数值中的一种或多种。
较佳地,本发明实施例中的终端2确定场景相关参数值的实施方式与现有技术中终端确定场景相关参数值的实施方式类似;比如,终端2通过自身包含的位置传感器感知到地理环境信号,并通过自身包含的处理器对感知到的地理环境信号进行处理,得到地理环境参数值;终端2通过自身包含的通信芯片确定无线通信环境参数值;终端2通过自身包含的配置芯片确定终端2属性和性能相关参数值;终端2通过自身包含的时钟确定时间相关参数值等。
较佳地,终端2对应的测试策略的测试条件为场景相关参数值的取值条件。
实施中,在终端2对应的测试策略的测试条件为场景相关参数值的取值条件时,可以保证通过重复测试,获得同一场景下的多组测试数据,使得重复测试结果的可对比性比较强。
较佳地,本发明实施例中的终端2对应的测试策略的测试用例的实施方式与现有技术中测试用例的实施方式类似。
较佳地,终端2对应的测试策略的测试用例包括测试业务类型和测试次数。
较佳地,测试业务类型包括TCP(Transmission Control Protocol,传输控制协议)业务、HTTP(Hypertext Transport Protocol,超文本传送协议)业务、FTP(File Transfer Protocal,文件传输协议)业务和ICMP(Internet ControlMessages Protocol,网间控制报文协议)业务中的一种或多种。
较佳地,后台服务器1确定终端2对应的测试策略,包括:
后台服务器1监控终端2是否心跳上线,以及在监控到终端2心跳上线后,确定终端2对应的测试策略。
较佳地,后台服务器1确定终端2对应的测试策略的方法有多种,下面将以三种较佳的方法为例,对本发明实施例的后台服务器1确定终端2对应的测试策略的方法进行介绍。
方法一、后台服务器1根据测试规范,确定终端2对应的测试策略。
比如,若在测试规范中规定,在测试场景为场景A时,测试用例为B;则后台服务器1根据场景A确定场景相关参数值的取值条件,即确定测试策略的测试条件,将测试用例B作为测试策略的测试用例,以及将包含所述确定的测试条件和测试用例的测试策略,作为终端2对应的测试策略;或者
若在测试规范中规定,在测试场景为场景A时,测试用例为B;则后台服务器1根据场景A确定测试策略的测试条件,将测试用例B更改为测试用例C,将测试用例C作为测试策略的测试用例,以及将包含所述确定的测试条件和测试用例的测试策略,作为终端2对应的测试策略。
方法二、后台服务器1根据其他终端对应的测试策略,确定终端2对应的测试策略。
较佳地,后台服务器1可以直接将其他终端对应的测试策略作为终端2对应的测试策略,也可以对其他终端对应的测试策略进行修改,并将修改后的其他终端对应的测试策略作为终端2对应的测试策略。
比如,若后台服务器1已经确定其他终端对应的测试策略为:测试策略的测试条件为场景相关参数值的取值不小于A,测试策略的测试用例为测试用例C;则后台服务器1将场景相关参数值的取值不小于A作为测试策略的测试条件,将测试用例C作为测试策略的测试用例,以及将包含所述确定的测试条件和测试用例的测试策略,作为终端2对应的测试策略;或者
若后台服务器1已经确定其他终端对应的测试策略为:测试策略的测试条件为场景相关参数值的取值不小于A,测试策略的测试用例为测试用例C;则后台服务器1将场景相关参数值的取值小于A作为测试策略的测试条件,将测试用例C作为测试策略的测试用例,以及将包含所述确定的测试条件和测试用例的测试策略,作为终端2对应的测试策略。
方法三、后台服务器1接收终端2上报的测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端2对应的测试策略。
具体实施中,后台服务器1在接收到终端2上报的所述测试数据和场景相关参数值后,可以直接根据终端2上报的测试数据和场景相关参数值,确定终端2对应的测试策略;也可以先进行是否根据终端2上报的测试数据和场景相关参数值确定终端2对应的测试策略的判断,并在判断结果为是时,根据终端2上报的测试数据和场景相关参数值,确定终端2对应的测试策略。
较佳地,后台服务器1在根据终端2上报的测试数据确定终端2的业务质量较差时,根据终端2上报的测试数据和场景相关参数值,确定终端2对应的测试策略。
较佳地,后台服务器1根据终端2上报的测试数据和场景相关参数值,确定终端2对应的测试策略,包括:
后台服务器1根据终端2上报的场景相关参数值,确定终端2对应的测试策略的测试条件;
后台服务器1根据终端2上报的场景相关参数值和测试数据,确定终端2对应的测试策略的测试用例;以及
后台服务器1将包含所述确定的测试条件和测试用例的测试策略,作为所述终端2对应的测试策略。
较佳地,后台服务器1可以根据测试需要或经验灵活确定终端2对应的测试策略的测试条件和测试用例。
比如,若终端2上报的测试数据为FTP业务下载速率A(若A表征FTP业务下载速率不理想),以及终端2上报的场景相关参数值为信号强度值等于B和GPS信息C,后台服务器1确定终端2的业务质量较差,并且根据终端2上报的测试数据和场景相关参数值确定终端2对应的测试策略,其步骤具体为:
步骤A、后台服务器1根据终端2上报的信号强度值等于B和GPS信息C,得到终端2对应的测试策略的测试条件,其中,终端2对应的测试策略的测试条件具体为信号强度值等于B以及GPS信息为C;
其中,终端2对应的测试策略的测试条件可以灵活设置,比如,设置为信号强度值大于B以及GPS信息为C;设置为信号强度值小于B以及GPS信息为C;或者信号强度值等于B等。
步骤B、后台服务器1根据终端2上报的FTP业务下载速率A、信号强度值B和GPS信息C,得到终端2对应的测试策略的测试用例,其中,终端2对应的测试策略的测试用例具体为测试HTTP业务下载速率;
其中,终端2对应的测试策略的测试用例可以灵活设置,比如,设置为测试FTP业务下载速率;设置为测试FTP业务和HTTP业务下载速率;设置为测试一次FTP业务、以及测试两次ICMP业务等。
步骤C、后台服务器1将包含得到的终端2对应的测试条件和测试用例的测试策略,作为终端2对应的测试策略,即,所述终端2对应的测试策略具体为在信号强度值为B、且GPS信息为C时,测试HTTP业务下载速率。
需要说明的是,针对本发明实施例中的所述方法一和方法二,其在实施时,无任何实施要求;针对本发明实施例中的所述方法三,其在实施时,需要终端2已经进行过至少一次业务测试,并向后台服务器1上报测试数据和场景相关参数值。
较佳地,后台服务器1确定终端2对应的测试策略之后,还包括:
对所述确定的终端2对应的测试策略进行本地存储。
较佳地,后台服务器1可以对本地存储的终端2对应的测试策略进行查看和删除等常规操作,并在对终端2对应的测试策略进行操作后,将操作结果通知给终端2,指示终端2根据通知更新终端2本地存储的终端2对应的测试策略。
较佳地,根据现有技术能够实现的任一种终端2得到后台服务器1确定的终端2对应的测试策略的方法均适用于本发明实施例,比如,后台服务器1主动将确定的终端2对应的测试策略推送给终端2;后台服务器1根据终端2的请求将确定的终端2对应的测试策略发送给终端2;后台服务器1通过现有技术中的心跳通信方式,将包含终端2对应的测试策略的通知发送给终端2,指示终端2获取通知中的终端2对应的测试策略;或者,后台服务器1向终端2发送包含所述确定的终端2对应的测试策略的存储地址的指示消息,指示终端2到所述存储地址获取所述确定的终端2对应的测试策略等。
较佳地,终端2在得到后台服务器1确定的终端2对应的测试策略后,还包括:
终端2将得到的后台服务器1确定的终端2对应的测试策略进行本地存储。
较佳地,终端2可以对本地存储的终端2对应的测试策略进行查看和删除等常规操作,并在对本地存储的终端2对应的测试策略进行操作后,将操作结果通知给后台服务器1,指示后台服务器1根据通知更新后台服务器1本地存储的终端2对应的测试策略。
较佳地,本发明实施例中的终端2按照所述测试策略的测试用例进行业务测试,以得到表征业务质量的测试数据的实施方式与现有技术中终端按照测试用例进行业务测试,得到表征业务质量的测试数据的实施方式类似,在此不再赘述。
较佳地,终端2得到表征业务质量的测试数据之后,还包括:
终端2将所述测试数据上报给后台服务器1,以使后台服务器1根据所述测试数据进行业务质量分析。
较佳地,终端2得到表征业务质量的测试数据之后,还包括:
终端2将所述测试数据和确定的场景相关参数值上报给后台服务器1,以使后台服务器1根据所述测试数据进行业务质量分析。
实施中,后台服务器可以根据场景相关参数值,对测试数据分类进行业务质量分析。
较佳地,终端2对应的每个测试策略还包含上报要求;终端2得到表征业务质量的测试数据之后,还包括:
终端2将所述测试数据和确定的场景相关参数值按照所述测试策略的上报要求,上报给后台服务器1。
较佳地,测试策略的上报要求包括测试数据和场景相关参数值的上报时间要求,比如,定时上报测试数据和场景相关参数值,或者,在业务测试结束后,立即上报测试数据和场景相关参数值。
实施例一
在本发明实施例一中,将以一个较佳的实施方式对本发明实施例中后台服务器1和终端2配合实现业务质量测试的方案进行详细说明,需要说明的是,本发明实施例一只用于解释本发明的实施方式,而不用于限制本发明的实施方式。
步骤A1、后台服务器1根据其他终端对应的测试策略,确定终端2对应的第一个测试策略;其中,终端2对应的第一个测试策略的测试条件为信号强度值等于A且GPS信息为B,终端2对应的第一个测试策略的测试用例为业务下载和上传测试;
步骤A2、后台服务器1将确定的终端2对应的第一个测试策略推送给终端2;
步骤A3、终端2接收后台服务器1推送的终端2对应的第一个测试策略,并进行本地存储;
步骤A4、终端2确定信号强度值和GPS信息等场景相关参数值;
步骤A5、终端2确定终端2对应一个测试策略,以及针对该测试策略,终端2确定终端2的场景相关参数值是(否)满足终端2对应的第一个测试策略的测试条件;
步骤A6、终端2确定终端2的场景相关参数值满足终端2对应的第一个测试策略的测试条件,并且按照终端2对应的第一个测试策略的测试用例,进行业务下载和上传测试,得到测试数据为业务下载速率C和业务上传速率D等;
其中,终端2在确定终端2的场景相关参数值不满足终端2对应的第一个测试策略的测试条件时,执行步骤A4。
步骤A7、终端2将业务下载速率C和业务上传速率D等测试数据、以及确定的信号强度值和GPS信息等场景相关参数值发送给后台服务器1;
其中,后台服务器1会根据接收到的测试数据和确定的场景相关参数值,进行业务质量分析。
步骤A8、后台服务器1根据业务下载速率C和业务上传速率D等测试数据、以及确定的信号强度值和GPS信息等场景相关参数值,确定测试条件为信号强度值等于A,以及确定测试条件对应的测试用例为业务下载和上传速率;将包含所述确定的测试条件和测试用例的测试策略,作为终端2对应的第二个测试策略;
步骤A9、终端2确定信号强度值和GPS信息等场景相关参数值;
步骤A10、终端2确定终端2对应两个测试策略;针对终端2对应的第一个测试策略,终端2确定终端2的GPS信息不满足终端2对应的第一个测试策略的测试条件,不根据终端2对应的第一个测试策略进行业务测试;以及针对终端2对应的第二个测试策略,终端2确定终端2的场景相关参数值满足终端2对应的第二个测试策略的测试条件,按照终端2对应的第二个测试策略的测试用例,进行业务测试,得到测试数据为业务下载速率E和业务上传速率F等,并且将业务下载速率C和业务上传速率D等测试数据、以及确定的信号强度值和GPS信息等场景相关参数值发送给后台服务器1;
步骤A11、后台服务器1根据接收到的业务下载速率E和业务上传速率F等测试数据、以及确定的信号强度值和GPS信息等场景相关参数值,进行业务质量分析。
实施例二
较佳地,为了实现上述业务质量测试,需要分别在终端2和后台服务器1设置多个组件,在本发明实施例二中将对终端2和后台服务器1可以设置的组件分别进行介绍。
一、终端2设置的组件包括:感知组件、策略组件、任务组件、日志组件、用例组件、报告组件和通信接口组件。
1、感知组件包括感知模块和感知数据处理模块。
感知模块,用于感知和采集终端2的测试信号,包括GPS地理信号、海拔信号、距离基站距离信号和强度信号等;
感知数据处理模块,用于将感知模块采集的信号进行初步处理,输出成为可保持、且可分析的场景相关参数值,并进行本地存储。
2、通信接口组件包括心跳模块、测试策略获得模块和结果上传模块。
心跳模块,用于建立与后台服务器1交互的通信连接,负责在终端2开启后,在后台服务器1注册和登录上线,其中只有在后台服务器1登录上线后,终端2才能够获得后台服务器1确定的测试策略;
测试策略获得模块,用于实现终端2获得后台服务器1确定的测试策略;
结果上传模块,用于实现终端2与后台服务器1建立通信连接,用于上传与测试数据和场景相关参数值相关的文件,如测试报告、测试日志和场景相关参数值。
3、策略组件包括策略分析模块。
策略分析模块,用于完成测试策略解析,解析出可以作为判定是否触发测试任务的条件的测试条件;以及解析出测试用例。
4、日志组件包括日志生成模块和日志管理模块。
日志生成模块,用于记录在测试过程中终端2的行为的日志信息,例如底层通信接口调用日志,终端2资源消耗情况等;
日志管理模块,用于对终端2的测试日志进行查看和删除等操作。
5、报告组件测试报告生成模块和测试报告查看模块。
测试报告生成模块,用于记录和保存被测业务的测试指标;
测试报告查看模块,用于对已经生成的测试报告进行查看和删除等操作。
6、测试策略组件包括测试策略管理模块。
测试策略管理模块,用于对终端2本地存储的测试策略进行管理,比如查看、同步和删除等。
7、任务组件包括策略匹配模块和执行引擎模块。
策略匹配模块,用于匹配解析得到的测试条件和场景相关参数值,通过匹配,可以判断终端2所处的场景是否满足测试条件或是否具备发起测试的条件;
执行引擎模块,用于按照解析得到的测试用例,进行业务测试。
二、后台服务器1的组件包括终端管理组件、策略组件、结果组件、用例组件和通信接口组件。
1、终端管理组件终端状态监控模块和终端状态统计模块。
终端状态监控模块,用于管理和监控终端2在线状态,以及配置终端2执行测试的范围;
终端状态统计模块,用于记录终端2活动的状态轨迹,统计和记录终端2测试测略同步历史。
2、策略组件包括策略管理模块和策略生成模块。
策略管理模块,用于维护本地存储的测试策略,提供测试策略查看和删除等功能,以及通过策略生成模块,可以进行测试策略的更新。
策略生成模块,用于生成测试策略。
3、结果组件包括报告管理模块和日志管理模块。
报告管理模块,用于管理终端2上传到后台服务器1的测试报告,提供报告查看等功能,通过结果上传接口可以同步更新测试报告。
日志管理模块,用于管理终端2上传到后台服务器1的测试报告,提供日志查看等功能,通过结果上传接口可以同步更新测试日志。
4、通信接口组件包括心跳模块、结果上传模块和测试策略同步模块。
心跳模块,用于建立后台服务器1与终端2交互的通信连接,提供终端2在线监控的接口;
测试策略同步模块,用于提供终端2与后台服务器1测试策略同步的接口;
结果上传模块,用于建立后台服务器1与终端2的通信连接,接收终端2上传的测试数据和场景相关参数值的相关文件,如测试报告、测试日志和场景相关参数值。
基于相同的发明构思,本发明实施例还提供了一种业务质量测试方法和装置,由于该方法和装置解决问题的原理与本发明实施例的系统相似,因此该方法和装置的实施可以参见系统的实施,重复之处不再赘述。
如图2所示,本发明实施例提供的业务质量测试方法,包括:
步骤201、终端确定场景相关参数值;
步骤202、针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,所述终端分别执行:
所述终端在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述得到表征业务质量的测试数据之后,还包括:
所述终端将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
如图3所示,本发明实施例提供的业务质量测试方法,包括:
步骤301、后台服务器确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
步骤302、所述后台服务器向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述后台服务器确定终端对应的测试策略,具体包括:
所述后台服务器根据测试规范,确定所述终端对应的测试策略;或者
根据其他终端对应的测试策略,确定所述终端对应的测试策略。
较佳地,所述方法还包括:
所述后台服务器接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
如图4所示,本发明实施例提供的业务质量测试装置,包括:
确定模块401,用于确定场景相关参数值;
测试执行模块402,用于针对由后台服务器确定的、且终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述装置还包括:
上报模块403,用于将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
如图5所示,本发明实施例提供的业务质量测试装置,包括:
确定模块501,用于确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
处理模块502,用于向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
较佳地,所述确定模块501,还用于:接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种业务质量测试方法,其特征在于,包括:
终端确定场景相关参数值;以及
针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,所述终端分别执行:
所述终端在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
2.如权利要求1所述的方法,其特征在于,所述得到表征业务质量的测试数据之后,还包括:
所述终端将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
3.一种业务质量测试方法,其特征在于,包括:
后台服务器确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
所述后台服务器向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
4.如权利要求3所述的方法,其特征在于,所述后台服务器确定终端对应的测试策略,具体包括:
所述后台服务器根据测试规范,确定所述终端对应的测试策略;或者
根据其他终端对应的测试策略,确定所述终端对应的测试策略。
5.如权利要求3所述的方法,其特征在于,所述方法还包括:
所述后台服务器接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
6.一种业务质量测试装置,其特征在于,包括:
确定模块,用于确定场景相关参数值;
测试执行模块,用于针对由后台服务器确定的、且终端本地存储的所述终端对应的每个测试策略,其中每个测试策略包含测试条件和测试用例,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
7.如权利要求6所述的装置,其特征在于,所述装置还包括:
上报模块,用于将所述测试数据和确定的所述场景相关参数值上报给所述后台服务器,以使所述后台服务器根据所述测试数据和所述场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
8.一种业务质量测试装置,其特征在于,包括:
确定模块,用于确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;
处理模块,用于向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储;或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储,以使所述终端在确定场景相关参数值后,针对由后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
9.如权利要求8所述的装置,其特征在于,所述确定模块,还用于:接收所述终端上报的所述测试数据和场景相关参数值,根据所述测试数据和场景相关参数值,确定测试条件和所述测试条件对应的测试用例,并且将包含所述确定的测试条件和测试用例的测试策略,作为所述终端对应的一个新的测试策略。
10.一种业务质量测试系统,其特征在于,包括:终端和后台服务器;
后台服务器,用于确定终端对应的测试策略,其中每个所述测试策略包含测试条件和测试用例;以及,向所述终端发送包含所述确定的终端对应的测试策略的存储地址的指示消息,指示所述终端到所述存储地址获取所述确定的终端对应的测试策略,并进行本地存储,或者将所述确定的终端对应的测试策略发送给所述终端进行本地存储;
终端,用于确定场景相关参数值;以及针对由所述后台服务器确定的、且所述终端本地存储的所述终端对应的每个测试策略,分别执行:在确定的场景相关参数值满足所述测试策略的测试条件时,按照所述测试策略的测试用例,进行业务测试,得到表征业务质量的测试数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310687975.1A CN104717670B (zh) | 2013-12-13 | 2013-12-13 | 一种业务质量测试方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310687975.1A CN104717670B (zh) | 2013-12-13 | 2013-12-13 | 一种业务质量测试方法、装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104717670A true CN104717670A (zh) | 2015-06-17 |
CN104717670B CN104717670B (zh) | 2019-09-13 |
Family
ID=53416527
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310687975.1A Active CN104717670B (zh) | 2013-12-13 | 2013-12-13 | 一种业务质量测试方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104717670B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106332163A (zh) * | 2015-06-30 | 2017-01-11 | 展讯通信(上海)有限公司 | 一种功能模块测试方法及系统 |
CN106937303A (zh) * | 2015-12-30 | 2017-07-07 | 中国移动通信集团河南有限公司 | 一种基站测试方法及系统、终端、云服务器 |
CN107888550A (zh) * | 2016-09-30 | 2018-04-06 | 腾讯科技(深圳)有限公司 | 性能指标数据采集方法和装置、策略发送方法和装置 |
CN110008117A (zh) * | 2019-03-12 | 2019-07-12 | 深圳壹账通智能科技有限公司 | 页面测试方法、装置、计算机设备和存储介质 |
CN111104341A (zh) * | 2019-12-30 | 2020-05-05 | 深圳Tcl新技术有限公司 | 智能家居设备自动化测试方法、装置、设备及存储介质 |
US11540154B2 (en) * | 2015-09-30 | 2022-12-27 | The Nielsen Company (Us), Llc | Methods and apparatus to measure wireless networks indoors |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101471819A (zh) * | 2007-12-29 | 2009-07-01 | 中国移动通信集团公司 | 测试系统、测试方法、管理域及操作域 |
CN101998425A (zh) * | 2009-08-13 | 2011-03-30 | 胡乐乐 | 一种无线网络优化测试方法和系统 |
CN102457892A (zh) * | 2010-10-26 | 2012-05-16 | 中国移动通信集团公司 | 一种测试方法和设备 |
CN102736567A (zh) * | 2011-04-11 | 2012-10-17 | 中国移动通信集团公司 | 集中式测试控制方法及系统 |
-
2013
- 2013-12-13 CN CN201310687975.1A patent/CN104717670B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101471819A (zh) * | 2007-12-29 | 2009-07-01 | 中国移动通信集团公司 | 测试系统、测试方法、管理域及操作域 |
CN101998425A (zh) * | 2009-08-13 | 2011-03-30 | 胡乐乐 | 一种无线网络优化测试方法和系统 |
CN102457892A (zh) * | 2010-10-26 | 2012-05-16 | 中国移动通信集团公司 | 一种测试方法和设备 |
CN102736567A (zh) * | 2011-04-11 | 2012-10-17 | 中国移动通信集团公司 | 集中式测试控制方法及系统 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106332163A (zh) * | 2015-06-30 | 2017-01-11 | 展讯通信(上海)有限公司 | 一种功能模块测试方法及系统 |
US11540154B2 (en) * | 2015-09-30 | 2022-12-27 | The Nielsen Company (Us), Llc | Methods and apparatus to measure wireless networks indoors |
CN106937303A (zh) * | 2015-12-30 | 2017-07-07 | 中国移动通信集团河南有限公司 | 一种基站测试方法及系统、终端、云服务器 |
CN106937303B (zh) * | 2015-12-30 | 2020-07-07 | 中国移动通信集团河南有限公司 | 一种基站测试方法及系统、终端、云服务器 |
CN107888550A (zh) * | 2016-09-30 | 2018-04-06 | 腾讯科技(深圳)有限公司 | 性能指标数据采集方法和装置、策略发送方法和装置 |
CN110008117A (zh) * | 2019-03-12 | 2019-07-12 | 深圳壹账通智能科技有限公司 | 页面测试方法、装置、计算机设备和存储介质 |
CN111104341A (zh) * | 2019-12-30 | 2020-05-05 | 深圳Tcl新技术有限公司 | 智能家居设备自动化测试方法、装置、设备及存储介质 |
CN111104341B (zh) * | 2019-12-30 | 2024-01-19 | 深圳Tcl新技术有限公司 | 智能家居设备自动化测试方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN104717670B (zh) | 2019-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102880535B (zh) | 一种用于移动设备的无线自动化测试装置及方法 | |
CN104717670A (zh) | 一种业务质量测试方法、装置及系统 | |
CN102420712B (zh) | 一种测试方法和设备 | |
US8737980B2 (en) | End to end application automatic testing | |
CN106776294B (zh) | 安卓手机自动化测试方法和系统 | |
CN104022902A (zh) | 一种监控服务器集群的方法和系统 | |
CN111181801A (zh) | 节点集群测试方法、装置、电子设备及存储介质 | |
CN111937006B (zh) | 基于熵值来确定性能的系统 | |
CN104113870B (zh) | 网络测试方法和移动终端 | |
CN111400127B (zh) | 业务日志的监控方法及装置、存储介质、计算机设备 | |
CN103916283A (zh) | 服务器压力测试系统和方法 | |
CN104978262A (zh) | 一种终端测试方法和装置 | |
CN105354042A (zh) | 应用安装的处理方法及装置 | |
CN104427547A (zh) | 业务和网络关联测试方法、装置及系统 | |
CN106792784B (zh) | 一种在服务器侧进行数据校验的方法、服务器和系统 | |
CN104468288A (zh) | 终端网络数据测试方法及装置 | |
CN104301916B (zh) | 基于移动智能终端通用插件的测试优化方法、装置及系统 | |
CN103095882B (zh) | 一种智能移动终端外场自动化测试方法和测试系统 | |
CN105786694A (zh) | 一种自动化测试系统及方法以及移动终端 | |
CN110334385B (zh) | 综合能源系统中央控制器的测试方法、装置及设备 | |
RU2532714C2 (ru) | Способ получения данных при оценке ресурсов сети и устройство для осуществления способа | |
CN107979174B (zh) | 一种基于电网运行管理系统的工作流运行方法 | |
CN114124727B (zh) | 一种网管通信压力测试方法及系统 | |
CN108040345B (zh) | 一种4g移动终端lte传导发射功率自动化检测系统 | |
CN103052098A (zh) | 一种北向性能测试的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |