CN114691530A

CN114691530A - 一种通信端到端自动测试方法及平台

Info

Publication number: CN114691530A
Application number: CN202210611321.XA
Authority: CN
Inventors: 孙文一
Original assignee: Guangzhou Shiju Network Technology Co Ltd
Current assignee: Guangzhou Shiju Network Technology Co Ltd
Priority date: 2022-06-01
Filing date: 2022-06-01
Publication date: 2022-07-01

Abstract

本申请提供一种通信端到端自动测试方法及平台，用以解决迭代测试中的重复性人工测试占用人力且易错、测试效率低的技术问题。其中，一种通信端到端自动测试平台，包括：测试脚本管理模块；参数解析模块；测试命令解析模块；步骤执行器模块；测试结果分析模块。基于web技术，从网页端口上获取测试用例脚本，可以实现多线程，多系统。通过采用SQLite数据库存储测试参数，使资源占用低，减少了内存。通过预定的约定接口，实现模块与模块之间的交互，扩展对其他控制协议的支持，降低了测试人员的编程能力要求，减少了主观性失误，加快了迭代开发的速度。

Description

一种通信端到端自动测试方法及平台

技术领域

本申请涉及测试技术领域，尤其涉及一种通信端到端自动测试方法及平台。

背景技术

在通信行业中，快速迭代是一种常见的开发模型。快速迭代是指产品与服务快速地适应不断变化的需求，不断推出新的版本满足或引领需求。迭代模型要求迭代版本出来后，立即进行一次迭代测试，然后进入下一轮迭代，及时地应对客户的需求变化，使得产品能更加贴近用户的实际需求，优化用户的体验感。

在实现现有技术的过程中，发明人发现现有迭代测试使用人工测试，人工测试存在以下问题：

1.迭代测试大多为重复性人工测试，存在不客观因素；

2.占用人力，测试效率低。

因此，需要提供一种端到端自动测试方法及平台，用以解决迭代测试中的人工测试重复性高、占用人力且易错误、测试效率低的技术问题。

发明内容

本申请实施例提供一种通信端到端自动测试方法，用以解决迭代测试中的人工测试重复性高、占用人力且易错误、测试效率低的技术问题。

具体的，一种通信端到端自动测试方法，包括以下步骤：

自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本；

第一测试用例脚本载入第一测试参数，生成第一设备套接字对象；

第一测试用例脚本载入第一测试命令文件，生成第一命令对象；

输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果；

汇总测试用例脚本集合中所有元素的测试步骤结果，生成测试步骤结果集合。

进一步的，所述自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本，具体包括：

自动测试平台从BS架构的待测网页web端口上获取测试用例脚本。

进一步的，所述第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体步骤包括：

第一测试用例脚本从SQLite数据库读取第一测试参数，并将测试参数实例化，生成第一设备套接字对象。

进一步的，所述第一测试用例脚本载入第一测试命令文件，生成第一命令对象，具体步骤包括：

第一测试用例脚本读取对应测试用例脚本的命令配置xml文件；

解析待测脚本的第一测试命令，并将测试命令实例化，生成命令对象。

进一步的，所述步骤执行器设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。

本申请还提供一种通信端到端自动测试平台。

具体的，一种通信端到端自动测试平台，包括：

测试脚本管理模块，用于调用测试用例脚本集合中作为元素的第一测试用例脚本；

参数解析模块，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象；

测试命令解析模块，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象；

步骤执行器模块，用于输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果；

测试结果分析模块，用于汇总测试用例脚本集合中所有元素的测试步骤结果，生成测试步骤结果集合。

进一步的，所述测试脚本管理模块，用于调用测试用例脚本集合中作为元素的第一测试用例脚本，具体用于:

进一步的，所述参数解析模块，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体用于：

供第一测试用例脚本从SQLite数据库读取第一测试参数，并将测试参数实例化，生成第一设备套接字对象。

进一步的，所述测试命令解析模块，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象具体用于：

供第一测试用例脚本读取对应测试用例脚本的命令配置xml文件；

进一步的，所述步骤执行器模块设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。

本申请提供的技术方案，至少具有如下有益效果：

通过从BS架构的待测网页web端口上获取测试用例脚本，实现了测试脚本的快速开发，可以实现多线程，多系统。测试人员只需在web管理运行界面上选择测试用例脚本，填写网页上的配置参数，即可运行。通过采用SQLite数据库存储测试参数，使资源占用低，减少了内存，提高了测试效率。通过预定的约定接口，实现模块与模块之间的交互，扩展了对其他控制协议的支持，降低了测试人员的编程能力要求，减少了测试中的主观性失误，减少了测试对人力的占用，加快了迭代开发的速度。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本申请实施例提供的一种通信端到端自动测试方法的流程图。

图2为本申请实施例提供的一种通信端到端自动测试平台的结构示意图。

图3为本申请实施例提供的自动化测试平台的脚本运行流程示意图。

100 通信端到端自动测试平台

11 测试脚本管理模块

12 参数解析模块

13 测试命令解析模块

14 步骤执行器模块

15 测试结果分析模块。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

请参照图1，本申请公开一种通信端到端自动测试方法，包括以下步骤：

S110：自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本；

S120：第一测试用例脚本载入第一测试参数，生成第一设备套接字对象；

S130：第一测试用例脚本载入第一测试命令文件，生成第一命令对象；

S140：输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果；

S150：汇总测试用例脚本集合中所有元素的测试步骤结果，生成测试步骤结果集合。

在具体实施例中，这里的自动测试平台可以选用python环境搭建测试框架进行开发。脚本，是一种特定的描述性语言，是依据一定的格式编写的可执行文件。脚本语言用来控制软件应用程序，在被调用时进行解释或者编译。

实施测试时，测试用例向被测试系统提供输入数据、操作或各种环境设置以及期望结果。测试脚本是为了进行自动化测试而编写的脚本。结合来说，测试脚本的编写必须对应测试用例。

这里的第一测试脚本是测试脚本集合中任意一个元素，不具备优先级。自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本。

进一步的，在本申请提供的一种具体实施方式中，步骤S110所述自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本，具体包括：

这里的BS架构即Browser/Server（浏览器/服务器）结构。BS架构中，只安装维护一个服务器（Server），而客户端选用浏览器（Browse）运行软件。C/S架构即Client/Server（客户端/服务器）结构。相较而言，BS架构应用程序比传统的C/S结构应用程序迈出了较大的进步。CS是典型的集中式机械化处理，交互性相对低，且严重依赖于固定的开发工具、开发语言、操作系统和数据库。软件服务商提供的只能是一个整体性的固化软件，对异构操作系统、数据库很难兼容。BS面向多种编程语言，可兼容于所有主流数据库和操作系统。

本申请的自动测试平台可以通过网页后端服务器来实现，测试客户端为网页前端的浏览器。通过从BS架构的待测网页web端口上获取测试用例脚本，测试人员只需在web管理运行界面上选择测试用例脚本，填写网页上的配置参数，即可运行。用户在客户机上无需安装任何软件，只需有网络、浏览器，通过添加网页就可以添加服务器功能，可以实现多线程，多系统，减少了重复性劳动，提高了测试效率，加快了开发进程。

S120：第一测试用例脚本载入第一测试参数，生成第一设备套接字对象。

这里的套接字就是对网络中不同主机上的应用进程之间进行双向通信的端点的抽象表达。套接字为通信的端点，每个套接字由一个IP地址和一个端口号组成。通过网络通信的每对进程需要使用一对套接字，即每个进程各有一个。一个套接字就是网络进程通信的一端，利用网络协议提供了应用层进程交换数据的机制。从所处的地位来讲，套接字上联应用进程，下联网络协议栈，是应用程序与网络协议栈进行交互的接口。

进一步的，在本申请提供的一种具体实施方式中，步骤S120所述第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体步骤包括：

从定义上看，数据库在数据库管理系统管理和控制之下，用来存放存储介质上的数据。根据数据大小，分为大型、中型和小型数据库。

这里的SQLite数据库是一款轻型的嵌入式数据库，遵守ACID的关系。ACID规则包括：原子性、一致性、独立性和持久性，支持主流的操作系统，同时能够跟多种程序语言相结合。对比Mysql、PostgreSQL这两款开源的世界著名数据库管理系统，SQLite处理数据的速度比他们更快。

由于SQLite数据库是嵌入式的，不需要网络配置，也不需要管理，权限只依赖于文件系统，没有用户账户的概念。所以通过采用SQLite数据库存储测试参数，占用资源低，处理速度快，减少了内存，提高了测试效率。

S130：第一测试用例脚本载入第一测试命令文件，生成第一命令对象。

常用的测试网络连通性命令是PING。测试时，将测试命令与脚本分割开来，测试命令解析模块解析相关脚本的测试命令xml文件，将这些测试命令实例化，生成命令对象。

根据一般定义，xml即可扩展标记语言，是互联网数据传输的重要工具。它可以跨越互联网任何的平台，不受编程语言和操作系统的限制，是一个拥有互联网最高级别通行证的数据携带者。xml用于标记电子文件使其具有结构性，用来标记数据、定义数据类型。xml是一种允许用户对自己的标记语言进行定义的源语言，提供统一的方法来描述和交换独立于应用程序或供应商的结构化数据，适合web传输。

进一步的，在本申请提供的一种具体实施方式中，步骤S130所述第一测试用例脚本载入第一测试命令文件，生成第一命令对象，具体步骤包括：

在一种具体通信平台吞吐量测试实施例中，第一测试用例脚本从SQLite数据库读取第一测试参数，并将测试参数实例化，生成通信基站的套接字对象和终端套接字对象。通过读取测试命令，将测试命令实例化，分配内存，可以避免硬编码，提高测试效率。

S140：输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果。

这里的步骤执行器是自动测试平台的模块之一。设备套接字对象和命令对象建立了端到端套接字。值得注意的是，本申请提供一种简单的脚本开发模式，无需关注操控设备以及单个测试动作执行的具体流程。

进一步的，在本申请的一种具体实施方式中，步骤S140所述步骤执行器设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。

这里的接口由一套陈述、功能、选项、其它表达程序结构的形式、以及程序师使用的程序或者程序语言提供的数据组成，是指对协定进行定义的引用类型。与类相似，接口成员可以包含方法、属性、索引器和事件。在实际应用中，程序内部的接口用于实现方法与方法、模块与模块之间的交互。

采用BS架构的web端和Service端的接口，遵循soap协议通过http传输，以xml格式交互请求报文和返回报文。在具体实施例中，soap协议是基于xml交换数据的一种协议规范。在具体实施例中，被设计成在web上交换结构化和固化的信息。soap协议采用了已经被广泛使用的两个协议：http和xml。http用于实现soap的风格传输，而xml用于编码。

本申请通过预定的约定接口，实现模块与模块之间的交互。在具体实施例中，本申请支持多种传输控制协议：SSH、Telnet、FTP、串口，也可以扩展对其他控制协议的支持，降低了测试人员的编程能力要求，减少了测试中的主观性失误，加快了迭代开发的速度。

这里的测试用例脚本集合中包含多个测试用例脚本元素。基于web技术，用户既可以选择运行单个脚本，也可以选择多个脚本进行。测试管理模块会根据选择顺序依次运行，自动下载测试日志，同时将测试报告发往指定邮箱。通信迭代测试是一种常见开发模型，需要在迭代版本在出来后，立即进行一次迭代测试，以至于测试用例一般都是集合。

综上所述，本申请从BS架构的待测网页web端口上获取测试用例脚本，测试人员只需在web管理运行界面上选择测试用例脚本，填写网页上的配置参数，即可运行。用户在客户机上无需安装任何软件，通过添加网页就可以添加服务器功能，可以实现多线程，多系统，加快了开发进程。通过使用嵌入式的SQLite数据库，不需要网络配置，也不需要管理，权限只依赖于文件系统，没有用户账户的概念。所以SQLite数据库存储测试参数，占用资源低，处理速度快，减少了内存，提高了测试效率。通过预定的约定接口，实现模块与模块之间的交互。在具体实施例中，本申请支持多种传输控制协议：SSH、Telnet、FTP、串口，也可以扩展对其他控制协议的支持，降低了测试人员的编程能力要求，减少了测试中的主观性失误，加快了迭代开发的速度。

请参照图2，为支持新型通信端到端自动测试方法，本申请还提供一种通信端到端自动测试平台100，包括：

测试脚本管理模块11，用于调用测试用例脚本集合中作为元素的第一测试用例脚本；

参数解析模块12，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象；

测试命令解析模块13，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象；

步骤执行器模块14，用于输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果；

测试结果分析模块15，用于汇总测试用例脚本集合中所有元素的测试步骤结果，生成测试步骤结果集合。

测试脚本管理模块11，用于调用测试用例脚本集合中作为元素的第一测试用例脚本。

基于web技术实现，采用BS架构，允许用户通过浏览器访问管理网页，用户既可以选择运行单个脚本，也可以选择多个脚本进行测试。当选择多个脚本时，管理模块会根据选择顺序依次运行。运行完毕，会自动下载测试日志，同时将测试报告发往指定邮箱。

进一步的，在本申请的一种具体实施方式中，所述测试脚本管理模块11，用于调用测试用例脚本集合中作为元素的第一测试用例脚本，具体用于:

本申请的自动测试平台可以通过网页后端服务器来实现，测试客户端为网页前端的浏览器。通过从BS架构的待测网页web端口上获取测试用例脚本，测试人员只需在web管理运行界面上选择测试用例脚本，填写网页上的配置参数，即可运行，优化了测试脚本的管理。用户在客户机上无需安装任何软件，只需有网络、浏览器，通过添加网页就可以添加服务器功能，用可观的网页和自动下载日志满足了用户的测试要求可以实现多线程，多系统，减少了重复性劳动，提高了测试效率，加快了开发进程。

参数解析模块12，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象。

本申请提出的自动化测试平台优化了编码，将测试参数与测试脚本分割开来，测试参数由一个SQLite数据库来存储。每当运行时，都会使用参数解析模块，根据对应脚本的数据库内容对外参进行实例化，得到设备套接字对象。

进一步的，在本申请的一种具体实施方式中，所述参数解析模块12，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体用于：

测试命令解析模块13，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象。

本申请提出的自动化测试平台优化了编码，将测试命令与测试脚本分割开来。每当运行时，测试命令解析模块会解析相关测试用例脚本的测试命令xml文件，将这些测试命令实例化，获取第一命令对象。

进一步的，在本申请的一种具体实施方式中，所述测试命令解析模块13，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象具体用于：

在一种具体通信平台吞吐量测试实施例中，测试解析模块解析待测脚本的测试命令，将测试命令实例化，可以避免硬编码，提高测试效率，加快了迭代开发的速度。

步骤执行器模块14，用于输入第一设备套接字对象和第一命令对象至步骤执行器，获得第一测试步骤结果。

在具体实施例中，执行器模块接口一次只能传入一个命令对象和一个套接字对象，所以测试时需要多次调用脚本。

进一步的，在本申请的一种具体实施方式中，所述步骤执行器模块设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。

在具体实施例中，测试结果分析模块生成测试报告后，测试脚本管理模块自动下载测试日志，同时将测试报告发往指定邮箱。

综合来说，本申请提出的脚本运行流程如图3所示，本申请提出的自动化平台执行脚本过程中，将测试参数和测试脚本分开，同样的将测试命令和测试脚本分开，生成初始化命令对象和参数对象。接着将初始化命令对象和参数对象传入步骤执行器执行测试步骤，生成测试结果。然后传入下一测试用例脚本，多次调用接口，执行测试步骤。最后收集测试结果，并分析测试结果生成测试报告，脚本运行结束。

在具体实施例中，以某通信平台吞吐量测试为例，在web管理运行界面上选择吞吐量测试用例脚本，填写网页上的配置参数配置。点击运行后，网页上填写的参数会首先存入SQLite数据库数据库。接着参数解析模块读取数据库，初始化参数对象，生成通信基站的套接字对象和终端套接字对象；测试命令解析模块则读取对应测试用例脚本的命令配置xml文件，初始化命令对象。脚本获取这些套接字对象和命令对象后，依照用例步骤，调用步骤执行器模块，控制终端向基站发送数据包，搜集基站每秒收到多少数据包来获取吞吐量结果。最后生成报告，并在网页上自动下载测试报告，一轮测试步骤结束。由于步骤执行器模块接口一次只能传入一个命令对象和一个套接字对象，所以需要在脚本中多次调用，以至测试用例脚本全部测试完毕。

测试结果分析模块分析测试用例结果，解释测试失败原因，生成测试报告，并在网页上自动下载日志。

综上所述，本申请提供的一种通信端到端自动测试平台100从BS架构的待测网页web端口上获取测试用例脚本，测试人员只需在web管理运行界面上选择测试用例脚本，填写网页上的配置参数，即可运行。用户在客户机上无需安装任何软件，通过添加网页就可以添加服务器功能，可以实现多线程，多系统，加快了开发进程。通过使用嵌入式的SQLite数据库，不需要网络配置，也不需要管理，权限只依赖于文件系统，没有用户账户的概念。所以SQLite数据库存储测试参数，占用资源低，处理速度快，减少了内存，提高了测试效率。通过预定的约定接口，实现模块与模块之间的交互。在具体实施例中，本申请支持多种传输控制协议：SSH、Telnet、FTP、串口，也可以扩展对其他控制协议的支持，降低了测试人员的编程能力要求，减少了测试中的主观性失误，加快了迭代开发的速度。

需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，有语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims

1.一种通信端到端自动测试方法，其特征在于，包括以下步骤：

2.如权利要求1所述通信端到端自动测试方法，其特征在于，所述自动测试平台调用测试用例脚本集合中作为元素的第一测试用例脚本，具体包括：

3.如权利要求1所述通信端到端自动测试方法，其特征在于，所述第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体步骤包括：

4.如权利要求1所述的通信端到端自动测试方法，其特征在于，所述第一测试用例脚本载入第一测试命令文件，生成第一命令对象，具体步骤包括：

5.如权利要求1所述通信端到端自动测试方法，其特征在于，所述步骤执行器设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。

6.一种通信端到端自动测试平台，其特征在于，包括：

7.如权利要求6所述通信端到端自动测试平台，其特征在于，所述测试脚本管理模块，用于调用测试用例脚本集合中作为元素的第一测试用例脚本，具体用于:

8.如权利要求6所述通信端到端自动测试平台，其特征在于，所述参数解析模块，用于供第一测试用例脚本载入第一测试参数，生成第一设备套接字对象，具体用于：

9.如权利要求6所述通信端到端自动测试平台，其特征在于，所述测试命令解析模块，用于供第一测试用例脚本载入第一测试命令文件，生成第一命令对象具体用于：

10.如权利要求6所述通信端到端自动测试平台，其特征在于，所述步骤执行器模块设有一个预定的约定接口，用于输入第一设备套接字对象和第一命令对象。