WO2023202037A1 - 业务测试方法、装置及相关设备 - Google Patents
业务测试方法、装置及相关设备 Download PDFInfo
- Publication number
- WO2023202037A1 WO2023202037A1 PCT/CN2022/130323 CN2022130323W WO2023202037A1 WO 2023202037 A1 WO2023202037 A1 WO 2023202037A1 CN 2022130323 W CN2022130323 W CN 2022130323W WO 2023202037 A1 WO2023202037 A1 WO 2023202037A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- business
- service
- data
- target
- test
- Prior art date
Links
- 238000010998 test method Methods 0.000 title abstract 2
- 238000012360 testing method Methods 0.000 claims abstract description 200
- 238000004088 simulation Methods 0.000 claims abstract description 53
- 238000000034 method Methods 0.000 claims description 64
- 230000008569 process Effects 0.000 claims description 40
- 230000005540 biological transmission Effects 0.000 claims description 28
- 238000012545 processing Methods 0.000 claims description 22
- 230000002159 abnormal effect Effects 0.000 claims description 20
- 238000011156 evaluation Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 238000012937 correction Methods 0.000 claims description 7
- 230000005856 abnormality Effects 0.000 claims description 6
- 238000001303 quality assessment method Methods 0.000 claims description 5
- 238000013441 quality evaluation Methods 0.000 claims description 5
- 238000005538 encapsulation Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000012512 characterization method Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 239000013078 crystal Substances 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 238000010972 statistical evaluation Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000010835 comparative analysis Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000009662 stress testing Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
Abstract
公开了一种业务测试方法，包括：根据业务测试指令确定业务类型和业务参数；根据业务类型确定目标业务，并根据业务参数模拟目标业务；统计目标业务在模拟过程中的运行数据；以及根据运行数据确定业务测试结果。还公开了一种业务测试装置、设备及计算机可读存储介质。
Description
相关申请的交叉引用
本公开要求享有2022年04月20日提交的名称为“一种业务测试方法、装置及相关设备”的中国专利申请CN202210418820.7的优先权，其全部内容通过引用并入本公开中。
本公开涉及测试技术领域，特别涉及一种业务测试方法，还涉及一种业务测试装置、设备及计算机可读存储介质。
随着计算机技术的快速发展，基于计算机网络实现各种业务的测试更加方便快捷。在相关技术中，一般都是针对不同的业务，构造不同的测试架构或研发不同的测试设备进行业务测试；又或者采用第三方测试工具，如ping工具(一种测试工具)等实现业务测试。
发明内容
本公开提供了一种业务测试方法，还提供了一种业务测试装置、设备以及计算机可读存储介质。
第一方面，本公开提供了一种业务测试方法，包括：根据业务测试指令确定业务类型和业务参数；根据所述业务类型确定目标业务，并根据所述业务参数模拟所述目标业务；统计所述目标业务在模拟过程中的运行数据；以及根据所述运行数据确定业务测试结果。
第二方面，本公开提供了一种业务测试装置，包括：业务测试启动模块，被配置为根据业务测试指令确定业务类型和业务参数；目标业务模拟模块，被配置为根据所述业务类型确定目标业务，并根据所述业务参数模拟所述目标业务；运行数据统计模块，被配置为统计所述目标业务在模拟过程中的运行数据；以及测试结果确定模块，被配置为根据所述运行数据确定业务测试结果。
第三方面，本公开提供了一种业务测试设备，包括：存储器，被配置为存储计算机程序；以及处理器，被配置为执行所述计算机程序时实现如上所述的任一种业务测试方法的步骤。
第四方面，本公开还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的任一种业务测试方法的步骤。
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
为了更清楚地说明相关技术和本公开实施例中的技术方案，下面将对相关技术和本公开实施例描述中需要使用的附图作简要的介绍。当然，下面有关本公开实施例的附图描述的仅仅是本公开中的一部分实施例，对于本领域普通技术人员来说，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图，所获得的其他附图也属于本公开的保护范围。
图1为本公开实施例提供的一种业务测试方法的流程示意图；
图2为本公开实施例提供的一种业务模拟方法的流程示意图；
图3为本公开实施例提供的一种业务测试系统的结构示意图；
图4为本公开实施例提供的一种基于业务测试设备实现业务测试方法的流程图；
图5为本公开实施例提供的一种业务测试装置的结构示意图；以及
图6为本公开实施例提供的一种业务测试设备的结构示意图。
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开的一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
在相关技术中，由于一般都是针对不同的业务，构造不同的测试架构或研发不同的测试设备进行业务测试，导致通用性较差，且成本较高；又或者采用第三方测试工具，如ping工具(一种测试工具)等实现业务测试，但该种实现方式仅能够获得测试结果，无法进行业务表征，那么，当测试结果不通过时，亦无法有效定位问题所在。
因此，如何有效满足不同业务测试的需求，同时实现业务表征，以便于实现异常定位是本领域技术人员亟待解决的问题。
本公开实施例提供了一种业务测试方法。
请参考图1，图1为本公开所提供的一种业务测试方法的流程示意图，该业务测试方法可以包括步骤S101至S104。
S101：根据业务测试指令确定业务类型和业务参数。
本步骤旨在启动业务测试，确定业务类型和业务参数。当需要进行业务测试时，可以先通过交互界面显示业务测试设备可支持的所有行业业务，用户则可以通过交互界面进行业务类型 的选择和业务参数的配置，并通过点击“开始测试”选项/按钮生成包含有业务类型和业务参数的业务测试指令。进一步，对于业务测试设备而言，其在接收到业务测试指令之后，即可通过解析该业务测试指令确定业务类型和业务参数。其中，业务类型用于确定用户所需测试的目标业务，即待测试业务；业务参数则是指用于实现目标业务运行的参数信息。
其中，业务测试设备可支持的行业业务包括但不限于视频类业务、控制类业务等，控制类业务如PLC(Programmable logic Controller，可编程控制器)控制、AGV(Automatic Guided Vehicle，自动导航机器人小车)控制等。可以理解的是，业务参数由业务类型所决定，不同类型的待测试业务，需要进行不同种类的业务参数的配置。以视频传输业务为例，相应的业务参数可以包括视频协议类型、传输视频流分辨率/帧率/码率/时长、视频流数、视频流之间的传输偏移等。
S102：根据业务类型确定目标业务，并根据业务参数模拟目标业务。
本步骤旨在实现目标业务模拟。在确定业务类型和业务参数之后，即可根据业务类型确定目标业务，该目标业务即为需要进行测试的业务，并根据业务参数运行目标业务，从而实现目标业务的模拟。
S103：统计目标业务在模拟过程中的运行数据。
本步骤旨在实现运行数据的统计，该运行数据即为目标业务在模拟过程中所产生的各类数据信息，在目标业务的模拟过程中，直接进行各类运行数据的采集即可。同样的，运行数据的内容由目标业务所决定，模拟不同的目标业务，对应产生的运行数据各不相同，同样以视频传输业务为例，运行数据可以包括但不限于数据发送端发送的各个数据的序号以及发送时刻，数据接收端接收到各个数据的序号以及接收时刻，发送端发送的数据，接收端接收到的数据，数据传输过程中的网络信息、传输协议以及控制指令等。
S104：根据运行数据确定业务测试结果。
本步骤旨在实现业务测试结果的确定。在获得运行数据之后，即可根据该运行数据分析确定最终的业务测试结果，其中，业务测试结果为测试通过或测试不通过。在实际实现过程中，可以直接对某些运行数据进行阈值分析，也可以根据某些运行数据进一步计算传输时延、丢包率、数据包乱序等，进而通过判断各分析结果和/或计算结果是否处于相应的阈值范围内来确定业务测试是否通过，得到最终的业务测试结果。
可见，本公开实施例所提供的业务测试方法，将多种不同的行业业务集成于一体，当需要进行业务测试时，则可以根据实际需求选择待测试业务(即目标业务)进行模拟，从而基于待测试业务在模拟过程中的运行数据实现业务测试，获得业务测试结果，显然，该种实现方式可以有效满足不同业务测试的需求，通用性较高，且降低了测试成本；此外，通过业务模拟进行 业务测试，实现了业务表征，更加有助于实现异常定位。
在上述实施例的基础上，在一些实施例中，请参考图2，图2为本公开实施例提供的一种业务模拟方法的流程示意图，该业务模拟方法可以包括步骤S201至S204。
S201：根据业务参数确定业务协议。
S202：调取目标业务的业务数据。
S203：利用业务协议对业务数据进行封装，获得封装包。
S204：将封装包发送至服务端，以使服务端对封装包进行解封处理，获得解封后数据。
本公开实施例提供了一种业务模拟方法。首先，业务参数中包含有业务协议，该业务协议用于市县数据封装与传输，在基于业务参数确定业务协议之后，即可利用该业务协议对目标业务的业务数据进行封装，得到封装包，当然，该封装包的数量并不唯一；进一步，将各个封装包依次发送至服务端；最后，服务端即可对接收到的各个封装包进行解封处理，得到相应的解封后数据。由此，基于本地和服务端实现了业务模拟。
其中，目标业务的业务数据可以预存于本地，便于直接调取，也可通过直连第三方存储设备调取得到，业务数据的获取方式并不影响本技术方案的实施，本公开对此不做限定。
在一些实施例中，上述统计目标业务在模拟过程中的运行数据，可以包括：接收服务端反馈的解封后数据和服务端业务接收信息；统计业务数据、本地业务发送信息、解封后数据、服务端业务接收信息作为运行数据。
基于上一实施例的业务模拟过程，可以对上述业务模拟过程进行目标业务运行数据的统计，该运行数据可以包括被传输数据本身和数据传输信息，其中，被传输数据包括业务数据和解封后数据，数据传输信息包括本地业务发送信息(如上所述的数据发送端发送的各个数据的序号以及发送时刻)和服务端业务接收信息(如上所述的数据接收端接收到各个数据的序号以及接收时刻)。其中，解封后数据和服务端业务接收信息均由服务端反馈得到。
需要说明的是，上述运行数据的类型仅为本公开实施例所提供的的一种实现方式，并不唯一，还可以包括其他类别的数据信息，均可以由技术人员根据实际需求进行设置，本公开对此不做限定。
在一些实施例中，上述根据运行数据确定业务测试结果，可以包括：根据本地业务发送信息和服务端业务接收信息计算获得网络质量评估结果；根据业务数据和解封后数据计算获得业务处理评估结果；根据网络质量评估结果和业务处理评估结果确定业务测试结果。
本公开实施例提供了一种根据运行数据确定业务测试结果的实现方法。如上所述，运行数据可以包括业务数据、本地业务发送信息、解封后数据以及服务端业务接收信息，在此基础上，可以根据本地业务发送信息和服务端业务接收信息进行网络质量评估，例如，可以根据二者计 算传输时延、数据传输速率、传输可靠率、抖动等，从而获得网络质量评估结果；可以根据本地发送的业务数据和服务端反馈的解封后数据进行业务处理评估，例如，可以通过对二者进行对比分析确定丢包率、乱序等，从而获得业务处理评估结果；最后，综合网络质量评估结果和业务处理评估结果即可得到最终的业务测试结果，以确定目标业务测试是否通过。
在一些实施例中，上述根据运行数据确定业务测试结果之后，还可以包括：统计目标业务在模拟过程中的本地日志、服务端日志以及网络日志；根据本地日志、服务端日志、网络日志以及运行数据生成业务处理日志；将业务处理日志上传至云端。
为便于后续进行信息查询与溯源，可以在完成业务测试得到业务测试结果之后，统计业务处理日志并上传至云端进行保存。其中，业务处理日志可以包括目标业务在模拟过程中的本地日志、服务端日志、网络日志以及统计到的运行数据，本地日志为目标业务模拟过程中在业务测试装置中所产生的的日志信息，服务端日志为目标业务模拟过程中在服务端中所产生的日志信息、网络日志则是目标业务模拟过程中在本地与服务端之间进行网络传输时所产生的的日志信息。由此，即可统计本地日志、服务端日志、网络日志以及运行数据生成完整的业务处理日志，并将其上传至云端。
其中，将业务处理日志可以为主动上传，也可以为被动上传，例如，可以采用云端请求综测仪表应答方式实现日志上传，本公开对此不作限定。
在一些实施例中，上述根据运行数据确定业务测试结果之后，还可以包括：当业务测试结果为测试不通过时，构造业务异常场景；在业务异常场景下模拟目标业务，并统计目标业务在模拟过程中的异常运行数据；结合运行数据和异常运行数据确定异常信息。
本公开实施例所提供的业务测试方法，可以进一步实现异常定位功能。在实现过程中，当最终获得的业务测试结果为测试不通过时，则可以通过构造业务异常场景重新进行目标业务模拟，并重新统计目标业务在模拟过程中的异常运行数据，由此，则可以结合初始的运行数据和该异常运行数据得到异常信息，该异常信息包括但不限于发生异常的位置、时间、原因等，由此，实现异常定位。
其中，业务异常场景可以在目标业务进入网络传输的出口侧进行主动构造，可以包括丢包、时延、抖动等场景，例如，可以根据配置参数在数据包出口处主动添加指定时延后发包，以构造时延场景；可以根据配置的抖动参数，在数据出口处插入抖动，以构造抖动场景；可以根据配置的丢包率，在数据出口处按配置规则丢包，以构造丢包场景。
在一些实施例中，上述根据业务测试指令确定业务类型和业务参数之前，还可以包括：获取世界标准时间；利用世界标准时间进行时钟校正。
本公开实施例所提供的业务测试方法，可以进一步实现时钟校正功能。在根据业务测试指 令确定业务类型和业务参数之前，可以通过内置的时钟芯片，如GPS(Global Positioning System，全球定位系统)芯片获取世界标准时间(UTC，Universal Time Coordinated)，由此，即可利用该世界标准时间实现时钟校正，以有效保证网络、业务、终端的时间一致性，进而为业务测试结果的准确性提供有效保障。其中，该时钟校正过程可以在系统初始化时执行。
基于以上各实施例，本公开实施例以5G行业业务测试为例，提供了一种业务测试方法。
首先，本公开实施例所提供的业务测试方法基于业务测试设备实现，该业务测试设备体积小、便于携带，可应用于室内和室外；集成度高，可有效满足各种业务测试场景。设备主要包括如下器件。
1、5G终端PCIE卡(peripheral component interconnect express，高速串行计算机扩展总线标准)：直接插入板载5G终端的PCI卡内置设备内部，也可插入PCIE转USB(Universal Serial Bus，通用串行总线)卡接USB口的5G终端，负责进行5G网络的连接。
2、千兆网口：可以连接网口的CPE(Customer Premise Equipment，客户终端设备)等5G终端，如连接真实的网口摄像头获取视频数据。
3、USB口：连接USB WIFI模块及外置存储设备。
4、GPIO口(General-purpose input/output，通用输入/输出口)：如控制类行业业务，在进行PLC业务测试时，可用于模拟PLC对下游设备的控制动作。
5、天线射频接口：为内置板子5G终端提供射频信号。
6、CPU主控：运行设备系统及软件平台。
7、GPS时钟芯片：提供高精度的系统时间的GPS输入。
8、高精度晶振：集成GPS时钟和高精度晶振，能提供高精度授时，保证系统时钟稳定，可以满足行业SLA(Service-Level Agreement，服务登等级协议)网络验收及业务测试要求。
9、WIFI模块：提供进行远程无线控制设备的功能。
10、EPLD芯片(Erasable Programmable Logic Device，可擦除可编辑逻辑器件)：解码GPS数据，计算TOD(同步时钟)时间并通过485输出，以及给第三方的行业终端授时。
进一步，参考图3，图3为本公开实施例提供的一种业务测试系统的结构示意图，该业务测试系统主要包括如下功能模块。
1、业务模拟模块：主要包括客户端业务模拟模块和服务端业务模拟模块，可以针对行业应用，如PLC/AGV控制类业务、视频类业务、XR/AR/VR/MR类业务等各类行业终端的实际业务进行软件模拟，也可以对各类业务模型化/抽象化后进行模拟，可以通过在各业务模块的业务传输协议中嵌入发送包/帧时间戳，接收包/帧时间戳及其他统计参数实现。此外，所模拟的业务还可以通过外部模型进行扩展，比如协议、报文特征(大小，周期，时间等)等，与相 关的ping包测试相比，实现了采用真实业务表征业务，业务测试和验收不再依赖于第三方行业终端进行业务加载，可有效判断业务验收逻辑和问题。
2、网络评价模块：被配置为实现网络质量评估，即完成行业业务测试过程中网络质量数据的统计评价，如时延、抖动、流量、丢包、超时包、乱序包、乱序率、分段时延统计等。
3、业务评价模块：被配置为把实现业务处理评估，即完成业务层的质量数量的统计评价，如视频业务的帧率、丢帧率、视频卡顿率、MOS值(Mean Opinion Score，平均意见值)、平均卡顿时长、卡顿次数、初缓时长、通道异常等。
4、网络维测模块：可以采集终端相关的日志，并进行本地化分析；也可以通过日志数据上云实现多测试装置的维测协同定位。其中，云端处理模块可位于公有云或私有云，可通过5G空口或者有线网口连接上云，上云数据可采用如下格式：
(1)报文协议：UDP(User Datagram Protocol，用户数据报协议)，TCP(Transmission Control Protocol，传输控制协议)，私有协议或其他；
(2)报文终端号：Device ID；
(3)报文版本号：Ver；
(4)报文时间：Timestamp；
(5)报文类型：维测报文，统计报文，终端日志，硬件环境信息报文；
(6)报文长度：Length；
(7)报文序号：SN；
(8)报文校验：CheckSum。
5、终端管理模块：被配置为实现5G通信链路的建立，可承载业务数据和业务控制数据等；还被配置为负责对终端进行各种管理功能，包括终端上下电、终端识别、终端状态及AT命令通讯等。
6、时钟计量模块：被配置为完成对系统时钟的配置，可以基于GPS 1pps+TOD时间的输出给第三方设备授时，也可以接入第三方被测设备，如行业CPE设备时钟可以由时钟计量模块对输入时钟进行计量，基准时钟为GPS授时的本地授时模块。
7、网络损伤模块：被配置为主动构造丢包、时延、抖动等功能，可以在网络侧和终端侧进行压力测试，替代网络损伤仪，以便于进行网络问题/终端问题/环境问题的定界。
8、综合管理模块：被配置为通过传统B/S模式或者前后台UI界面的模式进行设备管理，或者通过web方式进行设备管理；被配置为通过以太网、WIFI、4G/5G等无线或者有线方式进行通讯；被配置为进行装置启动参数/业务类型/业务参数的配置，以及记录测试过程中的业务数据和网络质量数据，并且，关键的业务数据和网络数据可通过WEB页面进行实时呈现。 如：
(1)web前台功能：负责与web UI通讯；
(2)制订测试任务功能：根据用户配置参数制订测试计划并执行测试计划；
(3)收集和传递测试过程中关键数据，并由WEB界面负责实时显示；
(4)收集和传递测试过程中终端和装置的状态信息，由WEB界面负责实时显示。
最后，基于上述业务测试设备和业务测试系统实现业务测试方法的实现流程可以包括如下过程。
1、系统初始化
(1)GPS芯片对接收到的卫星数据进行实时解码，输出UTC标准时间及位置信息，利用UTC标准时间对整个装置的系统时间进行校正(系统时钟精确度达到百纳秒级别)，利用位置信息结合5G终端的信号强度进行5G移动性覆盖选点。
(2)EPLD解码GPS数据，计算TOD时间并通过485输出，可给第三方的行业终端授时，保持各设备间的时钟准确性。
(3)软件识别并打开内置/外置5G终端的AT命令/LOG日志端口，用于获取终端状态/日志信息。
(4)启动Web后台，等待接收配置信息。
2、前端配置
(1)手机或电脑通过WIFI连接本装置，通过WEB界面选择行业业务类型，并进行业务参数配置。以视频业务为例，可配置参数可以包括视频协议类型、传输视频流分辨率/帧率/码率/时长、视频流数、视频流之间的传输偏移等。
(2)进行5G终端的信令跟踪配置。
3、业务测试
请参考图4，图4为本公开实施例提供的一种基于业务测试设备实现业务测试方法的流程图，其实现过程主要包括如下(1)至(5)。
(1)时钟校正：时钟计量模块在系统初始化过程中，已经将整个装置的系统时间严格对齐到国际标准的UTC时间，满足了网络/业务/终端的时间一致性。
(2)5G网络连接：发起数据承载建立请求，控制本装置的5G终端与5G基站建立网络传输链路。
(3)业务管理：
RecvWebConfigure：接收Web设置的业务协议类型和对应协议的配置参数。
TaskStart：
a、在服务端的业务接收侧，根据Web配置调用业务模拟模块的业务协议，启动数据侦测，等待业务数据的获取。
b、在客户端的业务发送侧，调用业务模拟模块存储在装置上的真实业务数据集，并封装成指定行业业务的协议包，通过5G链路传输至接收端。
c、在真实业务数据发送到协议层时，获取每一数据包的序号/发送时刻，嵌入业务数据；在接收端解包时，获取解包时刻。进一步，将数据包发送和接收的精确时间输入到网络评价模块，可准确计算得出数据包在5G网络中传输的时延/丢包/抖动/乱序/传输可靠率等网络指标(详细计算公式参照图4所示网络评价模块)。
d、以视频业务为例，业务接收端将解包后得到实时的视频帧数据输入到业务评价模块，根据装置存储的真实视频数据源进行对比，进行实时帧率时延/帧抖动/丢帧率/帧传输超时等业务统计的计算(详细计算公式参照图4所示业务评价模块)。
(4)日志上报：测试结束后，可输出业务统计指标、网络统计指标、5G终端的过程信令、装置测试过程的移动路径等数据，并将所有统计数据上传至云端。
(5)业务联动分析：在测试完成后，若发现统计数据中存在某些数据包时延异常或存在丢包等问题，可以根据统计数据确认丢包时刻，可以根据问题包的UTC绝对时间查询到对应时间的5G终端日志和网络侧日志，并通过抓取的5G终端日志和网络侧日志进行联合分析，即可快速排查分析异常问题的原因。
可见，本公开实施例所提供的业务测试方法，将多种不同的行业业务集成于一体，当需要进行业务测试时，则可以根据实际需求选择待测试业务进行模拟，从而基于待测试业务在模拟过程中的运行数据实现业务测试，获得业务测试结果，显然，该种实现方式可以有效满足不同业务测试的需求，通用性较高，且降低了测试成本；此外，通过业务模拟进行业务测试，实现了业务表征，更加有助于实现异常定位。
请参考图5，图5为本公开实施例提供的一种业务测试装置的结构示意图，该业务测试装置可包括：业务测试启动模块1，被配置为根据业务测试指令确定业务类型和业务参数；目标业务模拟模块2，被配置为根据业务类型确定目标业务，并根据业务参数模拟目标业务；运行数据统计模块3，被配置为统计目标业务在模拟过程中的运行数据；以及测试结果确定模块4，被配置为根据运行数据确定业务测试结果。
可见，本公开实施例所提供的业务测试装置，将多种不同的行业业务集成于一体，当需要进行业务测试时，则可以根据实际需求选择待测试业务(即目标业务)进行模拟，从而基于待测试业务在模拟过程中的运行数据实现业务测试，获得业务测试结果，显然，该种实现方式可以有效满足不同业务测试的需求，通用性较高，且降低了测试成本；此外，通过业务模拟进行 业务测试，实现了业务表征，更加有助于实现异常定位。
在一些实施例中，上述目标业务模拟模块2可被配置为根据业务参数确定业务协议；调取目标业务的业务数据；利用业务协议对业务数据进行封装，获得封装包；将封装包发送至服务端，以使服务端对封装包进行解封处理，获得解封后数据。
在一些实施例中，上述运行数据统计模块3可被配置为接收服务端反馈的解封后数据和服务端业务接收信息；统计业务数据、本地业务发送信息、解封后数据、服务端业务接收信息作为运行数据。
在一些实施例中，上述测试结果确定模块4可被配置为根据本地业务发送信息和服务端业务接收信息计算获得网络质量评估结果；根据业务数据和解封后数据计算获得业务处理评估结果；根据网络质量评估结果和业务处理评估结果确定业务测试结果。
在一些实施例中，该业务测试装置还可以包括日志生成与上传模块，被配置为在上述根据运行数据确定业务测试结果之后，统计目标业务在模拟过程中的本地日志、服务端日志以及网络日志；根据本地日志、服务端日志、网络日志以及运行数据生成业务处理日志；将业务处理日志上传至云端。
在一些实施例中，该业务测试装置还可以包括异常定位模块，被配置为在上述根据运行数据确定业务测试结果之后，当业务测试结果为测试不通过时，构造业务异常场景；在业务异常场景下模拟目标业务，并统计目标业务在模拟过程中的异常运行数据；结合运行数据和异常运行数据确定异常信息。
在一些实施例中，该业务测试装置还可以包括时间校准模块，被配置为在上述根据业务测试指令确定业务类型和业务参数之前，获取世界标准时间；利用世界标准时间进行时钟校正。
对于本公开提供的装置的介绍请参照上述方法实施例，本公开在此不做赘述。
本公开实施例提供了一种业务测试设备。
请参考图6，图6为本公开所提供的一种业务测试设备的结构示意图，该业务测试设备可包括：存储器，被配置为存储计算机程序；以及处理器，被配置为执行计算机程序时可实现如上述任意一种业务测试方法的步骤。
如图6所示，为业务测试设备的组成结构示意图，业务测试设备可以包括：处理器10、存储器11、通信接口12和通信总线13。处理器10、存储器11、通信接口12均通过通信总线13完成相互间的通信。
在本公开实施例中，处理器10可以为中央处理器(Central Processing Unit，CPU)、特定应用集成电路、数字信号处理器、现场可编程门阵列或者其他可编程逻辑器件等。处理器10可以调用存储器11中存储的程序，处理器10可以执行业务测试方法的实施例中的操作。
存储器11被配置为存放一个或者一个以上程序，程序可以包括程序代码，程序代码包括计算机操作指令，在本公开实施例中，存储器11中至少存储有用于实现以下功能的程序：根据业务测试指令确定业务类型和业务参数；根据业务类型确定目标业务，并根据业务参数模拟目标业务；统计目标业务在模拟过程中的运行数据；以及根据运行数据确定业务测试结果。
在一种可能的实现方式中，存储器11可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统，以及至少一个功能所需的应用程序等；存储数据区可存储使用过程中所创建的数据。
此外，存储器11可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件或其他易失性固态存储器件。
通信接口12可以为通信模块的接口，用于与其他设备或者系统连接。
当然，需要说明的是，图6所示的结构并不构成对本公开实施例中业务测试设备的限定，在实际应用中业务测试设备可以包括比图6所示的更多或更少的部件，或者组合某些部件。
本公开实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现如上述任意一种业务测试方法的步骤。
该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
对于本公开实施例提供的计算机可读存储介质的介绍请参照上述方法实施例，本公开实施例在此不做赘述。
本公开所提供的一种业务测试方法，包括根据业务测试指令确定业务类型和业务参数；根据业务类型确定目标业务，并根据业务参数模拟目标业务；统计目标业务在模拟过程中的运行数据；根据运行数据确定业务测试结果。应用本公开所提供的技术方案，将多种不同的行业业务集成于一体，当需要进行业务测试时，则可以根据实际需求选择待测试业务(即目标业务)进行模拟，从而基于待测试业务在模拟过程中的运行数据实现业务测试，获得业务测试结果，显然，该种实现方式可以有效满足不同业务测试的需求，通用性较高，且降低了测试成本；此外，通过业务模拟进行业务测试，实现了业务表征，更加有助于实现异常定位。
本公开所提供的一种业务测试装置、设备及计算机可读存储介质，均具有上述有益效果，在此不再赘述。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本公开的范围。
以上对本公开所提供的技术方案进行了详细介绍。本文中应用了具体个例对本公开的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本公开的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本公开原理的前提下，还可以对本公开进行若干改进和修饰，这些改进和修饰也落入本公开的保护范围内。
Claims (10)
- 一种业务测试方法，包括：根据业务测试指令确定业务类型和业务参数；根据所述业务类型确定目标业务，并根据所述业务参数模拟所述目标业务；统计所述目标业务在模拟过程中的运行数据；以及根据所述运行数据确定业务测试结果。
- 根据权利要求1所述的业务测试方法，其中，所述根据所述业务参数模拟所述目标业务，包括：根据所述业务参数确定业务协议；调取所述目标业务的业务数据；利用所述业务协议对所述业务数据进行封装，获得封装包；以及将所述封装包发送至服务端，以使所述服务端对所述封装包进行解封处理，获得解封后数据。
- 根据权利要求2所述的业务测试方法，其中，所述统计所述目标业务在模拟过程中的运行数据，包括：接收所述服务端反馈的所述解封后数据和服务端业务接收信息；以及统计所述业务数据、本地业务发送信息、所述解封后数据、所述服务端业务接收信息作为所述运行数据。
- 根据权利要求3所述的业务测试方法，其中，所述根据所述运行数据确定业务测试结果，包括：根据所述本地业务发送信息和所述服务端业务接收信息计算获得网络质量评估结果；根据所述业务数据和所述解封后数据计算获得业务处理评估结果；以及根据所述网络质量评估结果和所述业务处理评估结果确定所述业务测试结果。
- 根据权利要求4所述的业务测试方法，其中，所述根据所述运行数据确定业务测试结果之后，还包括：统计所述目标业务在模拟过程中的本地日志、服务端日志以及网络日志；根据所述本地日志、所述服务端日志、所述网络日志以及所述运行数据生成业务处理日志；以及将所述业务处理日志上传至云端。
- 根据权利要求1至5任一项所述的业务测试方法，其中，所述根据所述运行数据确定业务测试结果之后，还包括：在所述业务测试结果为测试不通过的情况下，构造业务异常场景；在所述业务异常场景下模拟所述目标业务，并统计所述目标业务在模拟过程中的异常运行数据；以及结合所述运行数据和所述异常运行数据确定异常信息。
- 根据权利要求1述的业务测试方法，其中，所述根据业务测试指令确定业务类型和业务参数之前，还包括：获取世界标准时间；以及利用所述世界标准时间进行时钟校正。
- 一种业务测试装置，包括：业务测试启动模块，被配置为根据业务测试指令确定业务类型和业务参数；目标业务模拟模块，被配置为根据所述业务类型确定目标业务，并根据所述业务参数模拟所述目标业务；运行数据统计模块，被配置为统计所述目标业务在模拟过程中的运行数据；以及测试结果确定模块，被配置为根据所述运行数据确定业务测试结果。
- 一种业务测试设备，包括：存储器，被配置为存储计算机程序；以及处理器，被配置为执行所述计算机程序时，实现如权利要求1至7中任一项所述的业务测试方法的步骤。
- 一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的业务测试方法的步骤。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210418820.7 | 2022-04-20 | ||
| CN202210418820.7A CN116962267A (zh) | 2022-04-20 | 2022-04-20 | 一种业务测试方法、装置及相关设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2023202037A1 true WO2023202037A1 (zh) | 2023-10-26 |
Family
ID=88419020
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/CN2022/130323 WO2023202037A1 (zh) | 2022-04-20 | 2022-11-07 | 业务测试方法、装置及相关设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN116962267A (zh) |
| WO (1) | WO2023202037A1 (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017142393A1 (en) * | 2016-02-17 | 2017-08-24 | Mimos Berhad | System for managing user experience test in controlled test environment and method thereof |
| CN110765024A (zh) * | 2019-10-29 | 2020-02-07 | 百度在线网络技术（北京）有限公司 | 模拟测试方法、装置、电子设备和计算机可读存储介质 |
| CN110896547A (zh) * | 2018-09-13 | 2020-03-20 | 中国移动通信集团山东有限公司 | 一种nb-iot网络问题的定位方法及装置 |
| CN114240031A (zh) * | 2021-11-05 | 2022-03-25 | 国网浙江省电力有限公司嘉兴供电公司 | 一种面向电力业务的5g网络承载质量评估方法 |
| CN114253864A (zh) * | 2022-01-07 | 2022-03-29 | 挂号网（杭州）科技有限公司 | 一种业务测试方法、装置、电子设备及存储介质 |
| CN114297062A (zh) * | 2021-12-28 | 2022-04-08 | 中国农业银行股份有限公司 | 业务测试方法、装置、电子设备及存储介质 |
-
2022
- 2022-04-20 CN CN202210418820.7A patent/CN116962267A/zh active Pending
- 2022-11-07 WO PCT/CN2022/130323 patent/WO2023202037A1/zh unknown
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017142393A1 (en) * | 2016-02-17 | 2017-08-24 | Mimos Berhad | System for managing user experience test in controlled test environment and method thereof |
| CN110896547A (zh) * | 2018-09-13 | 2020-03-20 | 中国移动通信集团山东有限公司 | 一种nb-iot网络问题的定位方法及装置 |
| CN110765024A (zh) * | 2019-10-29 | 2020-02-07 | 百度在线网络技术（北京）有限公司 | 模拟测试方法、装置、电子设备和计算机可读存储介质 |
| CN114240031A (zh) * | 2021-11-05 | 2022-03-25 | 国网浙江省电力有限公司嘉兴供电公司 | 一种面向电力业务的5g网络承载质量评估方法 |
| CN114297062A (zh) * | 2021-12-28 | 2022-04-08 | 中国农业银行股份有限公司 | 业务测试方法、装置、电子设备及存储介质 |
| CN114253864A (zh) * | 2022-01-07 | 2022-03-29 | 挂号网（杭州）科技有限公司 | 一种业务测试方法、装置、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116962267A (zh) | 2023-10-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7561559B2 (en) | Hardware time stamping and processor synchronization | |
| US20080039070A1 (en) | Remote mobile testing probe | |
| US10433195B2 (en) | Technique for testing wireless network load produced by mobile app-carrying devices | |
| CN112804121B (zh) | 一种tte网络传输时延测试系统、方法 | |
| CN103117900B (zh) | 一种可配置式工业以太网数据解析系统及解析方法 | |
| CN107148009B (zh) | 多制式移动通信网络上网数据流量测量装置及其方法 | |
| CN105827476A (zh) | 高速PING实现方法和Ping测试方法 | |
| US11956128B2 (en) | Test method and device for simulating customer series deployment environment | |
| CN113141281B (zh) | 一种fpga加速器、网络参数测量系统、方法及介质 | |
| US10320650B2 (en) | Testing a network using a communication device | |
| WO2012062108A1 (zh) | 一种测试系统及测试方法 | |
| CN108282381A (zh) | 网络丢包率监控方法、装置及测试服务器 | |
| CN102868566A (zh) | 网络设备远端测速的方法 | |
| CN103096363A (zh) | 模拟弱无线网络的方法和装置 | |
| WO2016188189A1 (zh) | 网络测速的方法及装置 | |
| CN111385163A (zh) | 流量的分析、检测方法及装置 | |
| CN103139014A (zh) | 基于旁路的网络质量评测方法及装置 | |
| CN109617763B (zh) | 一种用于fc-ae总线的压力测试方法及装置 | |
| CN107425995A (zh) | 双向测量控制方法、发送业务设备及接收业务设备 | |
| CN105117344A (zh) | 一种基于pb的接口集成测试方法和系统 | |
| WO2023202037A1 (zh) | 业务测试方法、装置及相关设备 | |
| US20190044830A1 (en) | Calculating Service Performance Indicators | |
| WO2023221547A1 (zh) | 设备的故障检测方法、设备及存储介质 | |
| KR100347183B1 (ko) | 이동통신망용 무선데이타 성능분석 시스템 | |
| WO2011115625A1 (en) | Method and apparatus pertaining to assessing ordinary end-to-end performance of a mobile data network |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 22938256 Country of ref document: EP Kind code of ref document: A1 |