CN111194046A - 一种wifi模块自动化测试系统及方法 - Google Patents
一种wifi模块自动化测试系统及方法 Download PDFInfo
- Publication number
- CN111194046A CN111194046A CN201811355628.8A CN201811355628A CN111194046A CN 111194046 A CN111194046 A CN 111194046A CN 201811355628 A CN201811355628 A CN 201811355628A CN 111194046 A CN111194046 A CN 111194046A
- Authority
- CN
- China
- Prior art keywords
- test
- automatic
- result
- unit
- test case
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 413
- 238000000034 method Methods 0.000 title abstract description 41
- 238000011161 development Methods 0.000 claims abstract description 39
- 238000002360 preparation method Methods 0.000 claims description 21
- 230000006870 function Effects 0.000 claims description 15
- 238000013515 script Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 8
- 238000007619 statistical method Methods 0.000 claims description 8
- 238000012986 modification Methods 0.000 claims description 6
- 230000004048 modification Effects 0.000 claims description 6
- 238000010200 validation analysis Methods 0.000 claims description 6
- 238000012216 screening Methods 0.000 claims description 4
- 238000012795 verification Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 abstract description 14
- 230000018109 developmental process Effects 0.000 description 31
- 238000012790 confirmation Methods 0.000 description 9
- 238000007639 printing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 238000011056 performance test Methods 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 238000010998 test method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
- 238000010977 unit operation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/14—Arrangements for monitoring or testing data switching networks using software, i.e. software packages
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明公开了一种WIFI模块自动化测试系统及方法，该系统包括：开发板组单元，包括多个带有WIFI模块的开发板；接口单元，连接开发板组单元与测试服务器单元，实现测试服务器同时控制所有开发板，实现多线程并发测试；无线路由器组单元，包括多个不同厂家、不同型号的无线路由器，与测试服务器单元组成局域网；测试服务器单元，连接并控制其他硬件设备，对SDK版本确认，按不同测试需求正确编译相应的内核程序，于测试实施前对测试板初始化操作，实现自动化测试，以及对测试结果进行处理反馈，本发明可快速完成SDK开发包的WIFI模块自动化测试的部署、实施和维护，同时通过支持多线程并发操作，在简单易操作同时提升了工作效率。
Description
技术领域
本发明涉及自动化测试技术领域，特别是涉及一种基于网络摄像机SDK的WIFI模块自动化测试系统及方法。
背景技术
随着物联网、智慧城市的建设和推动，安防行业正进入一个高速发展的时期，网络摄像机因其高清、智能、可联网的特点扮演着越来越重的角色。无线技术的发展与普及，使得原本只适合安装于固定位置的摄像机突破了空间的限制，大大扩充了网络摄像机的应用领域，特别是在当下火热的智能家居领域，无线网络摄像机已经成为了智能家居领域的关键设备之一。
目前的视频监控领域，无线网络摄像机中应用得最多的是WIFI(WIrelessFIdelity)技术。WIFI模块质量的优劣直接决定了无线网络摄像机产品质量。对于网络摄像机芯片供应商来说，在SDK发布阶段对WIFI模块进行详细而充分的测试显得尤为重要。SDK发布阶段的WIFI模块测试牵涉到测试平台的搭建、对不同厂商WIFI芯片的兼容测试、协议一致性测试、吞吐量测试、WIFI性能测试、不同接入方式测试、对主流WIFI路由器的兼容等测试，加上SDK版本迭代频繁，这些特点直接决定WIFI模块的测试量十分巨大。
目前，基于网络摄像机SDK的WIFI模块的测试基本以手动测试为主，使用手动测试的方法来进行WIFI模块的测试十分耗时、低效。也有部分企业实现了使用脚本来替代部分操作的方法，但其也只是实现了减少操作的执行，顶多算是半自动化，并不能从根本上解决解放人力、完全自动化的难题，同时还对测试人员提出了较强的脚本编辑能力。这些都给企业人力、财力带来了极大的挑战。
发明内容
为克服上述现有技术存在的不足，本发明之目的在于提供一种WIFI模块自动化测试系统及方法，以快速完成SDK开发包的WIFI模块自动化测试的部署、实施和维护，同时支持多线程并发操作，在简单易操作的同时极大提升了工作效率。
为达上述及其它目的，本发明提出一种WIFI模块自动化测试系统，包括：
开发板组单元，包括多个带有WIFI模块的开发板；
接口单元，用于连接所述开发板组单元与测试服务器单元，用于实现所述测试服务器同时控制所有开发板，实现多线程并发测试；
无线路由器组单元，包括多个不同厂家、不同型号的无线路由器，与测试服务器单元组成局域网；
测试服务器单元，连接并控制其他硬件设备，用于对SDK版本确认，按不同测试需求正确编译相应的内核程序，于测试实施前对测试板初始化操作，实现自动化测试，以及对测试结果进行处理反馈。
优选地，所述系统还包括千兆交换机单元，用于通过网线连接的方式将所述无线路由器组单元和测试服务器单元组成独立的局域网，实现所述测试服务器单元同时控制所有无线路由器。
优选地，所述系统还包括虚拟机单元，所述虚拟机单元运行在所述测试服务器单元上或使用一台运行Linux操作系统PC电脑实现，所述测试服务器单元通过SSH方式连接所述虚拟机单元，以通过虚拟机的方式实现SDK目标版本的获取、配置文件修改、编译功能。
为达到上述目的，本发明还提供一种WIFI模块自动化测试方法，包括如下步骤：
步骤S1，建立测试用例库；
步骤S2，对测试服务器、测试板以及测试程序进行准备工作；
步骤S3，利用自动化测试程序实现自动化测试；
步骤S4，对步骤S3的测试结果进行处理。
优选地，于步骤S2中，对测试服务器的准备包括但不限于自动化测试程序启动、测试用例库确认、硬件控制确认以及测试工具确认。
优选地，于步骤S2中，对测试程序的准备包括但不限于SDK版本确认、编译环境确认、配置文件修改以及内核程序编译。
优选地，于步骤S2中，对测试板的准备包括但不限于目标版本升级、测试工具准备以及测试板GPIO配置。
优选地，步骤S3进一步包括：
步骤S300，从预先建立的测试用例库中选择测试用例；
步骤S301，选择所要控制的目标测试板；
步骤S302，自动解析所选择的测试用例，以测试用例编号为索引，获取该条测试用例自动化判断信息，应用程序升级判断信息，WIFI路由器选择信息，测试步骤，测试数据信息；
步骤S303，根据解析结果提取每一条测试用例的自动化判断信息，筛选出需要进行自动化测试的测试用例；
步骤S304，根据筛选出的需要进行自动化测试的测试用例的解析结果提取WIFI路由器信息，自动连接对应路由器，开启WIFI功能，并按照测试需求进行配置；
步骤S305，根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试步骤信息，自动转化为可调用的测试脚本或者测试命令集；
步骤S306，根据筛选出的需要进行自动化测试的测试用例的解析结果判断是否需要更新应用程序，若判断结果为是，则优先完成内核程序的升级；
步骤S307，根据步骤S305转换后的测试脚本或者测试命令集，自动执行测试用例；
步骤S308，将测试结果输出，并将其与预期结果进行比较，判断测试是否通过；
步骤S309，执行下一条测试用例，返回步骤S302以保证所有的自动化测试用例都被执行。
优选地，于步骤S307之前，还包括如下步骤：
根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试数据相关信息。
优选地，步骤S4进一步包括：
步骤S400，记录测试结果，将步骤S308的判断结果写入步骤S302自动解析获得的测试用例编号对应的测试结果位置；
步骤S401，对测试结果进行统计分析，即按照设定的时间段，对已经执行完测试的内容进行简单的统计分析生成报表；
步骤S402，将测试结果反馈给相关人员。
与现有技术相比，本发明一种WIFI模块自动化测试系统及方法，可以帮助SDK发布企业快速实现WIFI模块自动化测试的实施，同时该方法还可以扩展应用到SDK开发包其他功能模块的测试，可以极大的缩短SDK发布周期。本发明具备实施难度小、维护成本极低、执行效率高等特点，可以帮助SDK发布企业大幅度提高工作效率，同时给企业节省了大量人力和时间成本。
附图说明
图1为本发明一种WIFI模块自动化测试系统的系统结构图；
图2为本发明一种WIFI模块自动化测试方法的步骤流程图；
图3为本发明具体实施例中步骤S3的细部流程图
图4为本发明具体实施例之自动化测试系统的架构图；
图5为本发明具体实施例中准备过程示意图；
图6为本发明具体实施例中自动化测试过程流程图。
具体实施方式
以下通过特定的具体实例并结合附图说明本发明的实施方式，本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其它优点与功效。本发明亦可通过其它不同的具体实例加以施行或应用，本说明书中的各项细节亦可基于不同观点与应用，在不背离本发明的精神下进行各种修饰与变更。
图1为本发明一种WIFI模块自动化测试系统的系统结构图。如图1所示，本发明一种WIFI模块自动化测试系统，包括：
开发板组单元10，包括多个带有WIFI模块的开发板，所述开发板(demoboard)是用来进行嵌入式系统开发的电路板，一般包括中央处理器、存储器、输入设备、输出设备、数据通路/总线和外部资源接口等一系列硬件组件，开发板上预留插槽(例如SD卡插槽)便于不同的WIFI模块的接入，在本发明具体实施例中，可实现多个测试板独立控制的多线程并发测试。
接口单元11，用于连接开发板组单元10与测试服务器单元13，用于实现测试服务器12同时控制所有开发板，实现多线程并发测试；在本发明具体实施例中，接口单元11为一串口转换器。
无线路由器组单元12，包括多个不同厂家、不同型号的无线路由器，便于主流无线路由器的兼容性测试。
测试服务器单元13，为系统的总控制台，也是连接、控制其他硬件设备的关键，所述测试服务器单元13用于对SDK版本确认，按不同测试需求正确编译相应的内核程序，于测试实施前对测试板初始化操作，实现自动化测试，以及对测试结果进行处理反馈。所述测试服务器单元13通过接口单元11(串口转换器)连接并控制开发板组单元10中所有测试板，实现测试板软件升级、命令控制以及打印信息获取等功能，其连接并控制无线路由器组单元12中所有的无线路由器，实现对无线路由器控制。
较佳地，本发明之一种WIFI模块自动化测试系统还包括千兆交换机单元14，用于通过网线连接的方式将无线路由器组单元12和测试服务器单元13组成一个独立的局域网，实现测试服务器13同时控制所有无线路由器。
较佳地，本发明之一种WIFI模块自动化测试系统还包括虚拟机单元15，通过虚拟机的方式实现SDK目标版本的获取、配置文件修改、编译等功能。在本发明具体实施例中，虚拟机单元15通过虚拟机的方式运行独立的linux系统，该虚拟机单元15可以运行在测试服务器单元13上，也可使用一台运行Linux操作系统的独立PC电脑来代替，测试服务器单元13通过SSH(Secure Shell Protocol，一种文字接口的加密传输技术)的方式连接虚拟机单元，实现SDK目标版本的获取、配置文件修改、编译等功能。
图2为本发明一种WIFI模块自动化测试方法的步骤流程图。如图2所示，本发明一种WIFI模块自动化测试方法，包括如下步骤：
步骤S1，建立测试用例库。
在本发明具体实施例中，测试用例库是指一系列测试用例的集合，测试用例库的建立是本发明的前提条件，测试用例库的完善也是一个持续集成的过程。
测试用例库内容，用于本发明的测试用例的内容没有特殊要求，可以直接在企业现有测试用例的基础上稍作修改。通常情况下，一个好的测试用例库应该完全覆盖网络摄像机SDK的WIFI模块的功能测试、性能测试和兼容性测试。
测试用例库载体，用于本发明的测试用例对载体没有特殊要求，可以是Word，Excel，Testlink等形式。
测试用例格式，用于本发明的测试用例至少要包含：测试用例的编号，自动化标志，预置条件，测试步骤，测试数据(也可以没有)，预期结果。具体地：
测试用例的编号：测试用例编号必须唯一，测试的执行以及结果的反馈都是基于用例的编号的；
自动化标志，用于判断是否当前测试用例是否进行自动化测试的依据，比如用“1”表示自动化测试，用“0”表示手动测试；
预置条件，介绍测试用例使用的场景，用于本发明中的用例可以在预置条件中标明WIFI路由器型号、应用场景等信息；
测试步骤，是本发明得以顺利实施的关键，尽可能用概要、简练的语言描述操作的过程，推荐对一些工具以及操作步骤做一些规范性描述，不严谨的用语可能会导致测试失败；
测试数据，是测试用例设计的核心，直接决定了测试用例质量的高低。通常情况下，测试数据由资深测试工程师设计，对于部分测试用例，允许没有测试数据；这里需说明的是，测试数据的质量不是本发明所要关注的重点，因此测试数据的来源不做考虑；
步骤S2，对测试服务器、测试板以及测试程序进行准备。
具体地，步骤S2进一步包括：
步骤S200，准备测试服务器，以保证整个自动化测试过程顺利实施的前期准备工作，包括自动化测试程序启动，测试用例库确认，硬件控制确认，测试工具确认。
1、自动化测试程序：是本发明的中枢系统，整个自动化测试过程均在该程序的控制下完成，其包括测试用例解析，虚拟机自动控制，WIFI路由器自动控制，测试板自动控制，测试用例自动执行，测试结果处理等；
2、测试用例库确认：在本发明具体实施例中，测试用例库需预先建立，准备工作中须确认预先建立的测试用例库中可以被自动化测试程序访问，并有读写权限；
3、硬件控制确认：确认测试系统中的相关设备可以被自动化测试程序连接和控制；
4、测试工具确认：确认实时SDK开发包WIFI模块测试的相关第三方工具已经在测试服务器中安装好，比如iperf。
步骤201，准备测试程序，测试程序的准备是测试启动前对虚拟机工作环境的确认工作，包括SDK版本确认，并可按不同测试需求正确编译相应的内核程序。一般地，步骤201中涉及内容在虚拟机中实现；
1、SDK版本确认：确认当前SDK版本是否与目标版本一致，如果不同则自动获取正确的SDK版本，解压到指定位置。一般情况下，SDK开发包中自带默认的内核引导程序、内核程序、文件系统等，用于测试板准备中的目标版本升级；
2、编译环境确认：如果检测到虚拟机中没有安装过交叉编译器，则运行脚本自动安装交叉编译环境；
3、参数可配确认：可按照不同测试需求修改相关配置文件，比如芯片选择，测试平台选择、无线设备配置、固件驱动组件配置等。
4、内核编译：在参数修改完成的基础上，根据不同的WIFI模块，选择对应的驱动，自动完成内核的编译。
步骤S202，准备测试板,于测试实施前对测试板初始化操作。通常包括目标版本升级，测试工具准备，测试板GPIO(General Purpose Input Output通用输入/输出)配置：
1、目标版本升级：通过tftp(Trivial File Transfer Protocol,简单文件传输协议)的方式分别完成内核引导程序、内核程序、文件系统的升级。相关升级程序从步骤S201测试程序准备中得到的目标SDK版本中获取；
2、测试工具准备：将步骤S201测试程序准备中得到的目标SDK开发包中提供的相关WIFI测试工具复制到测试板系统中，如iperf、iwlist、iwconfig、wpa_supplicant、wpa_cli、hostapd、hostapd_cli等；
3、GPIO(General Purpose Input Output)配置确认：一般情况下不同的WIFI模块使用的GPIO引脚不一样，因此在测试前需要先完成GPIO引脚配置，并确认配置正确。
步骤S3，利用自动化测试程序实现自动化测试。
具体地，如图3所示，步骤S3进一步包括：
步骤S300，从预先建立的测试用例库中选择测试用例。在本发明具体实施例中，测试用例库预先建立，其形式可以是excel、word或者网页形式。
步骤S301，选择所要控制的目标测试板。在本发明具体实施例中，可通过多线程并发控制多个测试板进行不同的测试
步骤S302，自动解析所选择的测试用例，以测试用例编号为索引，获取该条测试用例自动化判断信息，应用程序升级判断信息，WIFI路由器选择信息，测试步骤，测试数据等信息。
步骤S303，根据解析结果提取每一条测试用例的自动化判断信息，筛选出需要进行自动化测试的测试用例。
步骤S304，根据筛选出的需要进行自动化测试的测试用例的解析结果提取WIFI路由器信息，自动连接该路由器，开启WIFI功能，并按照测试需求进行配置，如Station/AP模式切换，信道切换，协议标准切换、频道带宽切换等
步骤S305，根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试步骤信息，自动转化为可调用的测试脚本，或者测试命令集；
步骤S306，根据筛选出的需要进行自动化测试的测试用例的解析结果判断是否需要更新应用程序，若判断结果为是，则必须优先完成内核程序的升级。按照步骤S201的测试程序准备中描述的方法编译新的内核程序，按照步骤S202的测试板准备中描述的方法完成新编译的内核程序升级；
步骤S307，根据步骤S305转换后的测试脚本或者测试命令集，自动执行测试用例；
步骤S308，将测试结果以打印信息的方式输出，通过实时提取打印信息与预期结果进行比较，自动判断测试是否通过；
步骤S309，执行下一条测试用例，返回步骤S302以保证所有的自动化测试用例都被执行。
优选地，步骤S3还包括如下步骤：
步骤S310，根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试数据相关信息。这里需说明的是，本步骤是作为步骤S205中测试步骤信息获取单元的补充，不是每个自动测试程序的必须步骤，对于一些存在大数据量测试的场景推荐使用。
步骤S4，对步骤S3的测试结果进行处理。
具体地，步骤S4进一步包括：
步骤S400，记录测试结果，即将步骤S307a的判断结果写入步骤S302自动解析获得的测试用例编号对应的测试结果位置，并保存；
步骤S401，对测试结果进行统计分析，即按照设定的时间段，对已经执行完测试的内容进行简单的统计分析生成报表，比如执行用例次数，用例数量，通过数量，失败数量，用例覆盖率，执行效率等。
步骤S402，对测试结果反馈，按照设定的时间段，定时以邮件的形式将测试结论发送给相关人员。
图4为本发明具体实施例之自动化测试系统的架构图。以下将通过具体实施例来进一步说明本发明：
在本发明具体实施例中，该自动化测试系统包括：
开发板组单元101，开发板(demoboard)是用来进行嵌入式系统开发的电路板，一般包括中央处理器、存储器、输入设备、输出设备、数据通路/总线和外部资源接口等一系列硬件组件。本发明使用的开发板组是由多个带有WIFI模块的开发板组成，开发板上预留SD卡插槽便于不同的WIFI模块的接入。本发明可实现多个测试板独立控制的多线程并发测试。
串口转换器102，同时连接开发板组单元101与测试服务器单元106，实现测试服务器同时控制所有开发板；
无线路由器组单元103，由不同厂家、不同型号的多个无线路由器组成(关闭WIFI功能)，便于主流无线路由器的兼容性测试；
千兆交换机单元104，通过网线连接的方式将无线路由器组单元103和测试服务器单元106组成一个独立的局域网，实现测试服务器同时控制所有无线路由器；
虚拟机单元105，通过虚拟机的方式运行独立的linux系统，本发明介绍的虚拟机可以运行在测试服务器单元106上，也可使用一台运行Linux操作系统的独立PC电脑来代替；
测试服务器单元106，即一台性能尚可的PC电脑，测试服务器单元是本发明总控制台，也是连接、控制其他硬件设备的关键。其功能如下：
1)连接测试板，通过串口转换器单元102连接并控制开发板组单元101中所有测试板，实现测试板软件升级、命令控制以及打印信息获取等功能；
2)连接无线路由器组，通过网线连接千兆交换机单元104的方式连接并控制无线路由器组单元103中所有无线路由器，实现对无线路由器控制；
3)连接虚拟机，通过SSH(Secure Shell Protocol，一种文字接口的加密传输技术)的方式连接虚拟机单元105，实现SDK目标版本的获取、配置文件修改、编译等功能。
在本发明具体实施例中，自动化测试过程如下：
步骤一，建立测试用例库。
步骤二，对测试服务器、测试板以及测试程序进行准备。如图5所示，准备过程如下：
一、测试服务器准备，保证整个自动化测试过程顺利实施的前期准备工作，包括自动化测试程序启动，测试用例库确认，硬件控制确认，测试工具确认：
1、自动化测试程序，是本发明的中枢系统，整个自动化测试过程均在该程序的控制下完成。包括测试用例解析，虚拟机自动控制，WIFI路由器自动控制，测试板自动控制，测试用例自动执行，测试结果处理等；
2、测试用例库确认，确认步骤一建立的测试用例库中可以被自动化测试程序访问，并有读写权限；
3、硬件控制确认，确认按照系统硬件平台中的相关设备可以被自动化测试程序连接和控制；
4、测试工具确认，确认实时SDK开发包WIFI模块测试的相关第三方工具已经在测试服务器中安装好，比如iperf。
二、测试程序准备，是测试启动前对虚拟机工作环境的确认工作，包括SDK版本确认，并可按不同测试需求正确编译相应的内核程序。此处涉及内容在虚拟机中实现：
1、SDK版本确认，确认当前SDK版本是否与目标版本一致，如果不同则自动获取正确的SDK版本，解压到指定位置。一般情况下，SDK开发包中自带默认的内核引导程序、内核程序、文件系统等，用于测试板准备中的目标版本升级。
2、编译环境确认，如果检测到虚拟机中没有安装过交叉编译器，则运行脚本自动安装交叉编译环境；
3、配置文件修改，可按照不同测试需求修改相关配置文件，比如芯片选择，测试平台选择、无线设备配置、固件驱动组件配置等。
4、内核程序编译，在参数修改完成的基础上，根据不同的WIFI模块，选择对应的驱动，自动完成内核的编译。
三、测试板准备，自动测试实施前对测试板初始化操作。通常包括目标版本升级，测试工具准备，测试板GPIO(General Purpose Input Output通用输入/输出)配置。
1、目标版本升级，通过tftp(Trivial File Transfer Protocol,简单文件传输协议)的方式分别完成内核引导程序、内核程序、文件系统的升级。相关升级程序从测试程序准备得到的目标SDK版本中获取；
2、测试工具准备，将测试程序准备得到的目标SDK开发包中提供的相关WIFI测试工具复制到测试板系统中，如iperf、iwlist、iwconfig、wpa_supplicant、wpa_cli、hostapd、hostapd_cli等；
3、GPIO(General Purpose Input Output)配置确认，一般情况下不同的WIFI模块使用的GPIO引脚不一样，因此在测试前需要先完成GPIO引脚配置，并确认配置正确。
步骤三，自动化测试。如图6所示，该自动化测试过程如下：
步骤3.1，测试用例选择，可通过对话框的方式让用户从测试用例库中选择测试用例。测试用例的形式可以是excel、word、或者网页形式。
步骤3.2，测试板选择，可通过对话框方式让用户选择要控制的目标测试板，本发明可实现多线程并发控制多个测试板进行不同的测试。
步骤3.3,硬件平台控制，确认自动化测试过程中可以正常连接并控制第二部分硬件平台搭建介绍的硬件设备，如测试板、虚拟机、无线路由器。
步骤3.4软件平台控制，确认自动化测试过程中可以正常执行相应程序，如控制测试程序准备中按需编译内核程序，控制测试板准备中实现测试板的内核程序升级、GPIO配置；
步骤3.5，测试用例解析，自动解析选择的测试用例，以测试用例编号为索引，获取该条用例自动化判断信息，应用程序升级判断信息，WIFI路由器选择信息，测试步骤，测试数据等信息；
步骤3.6，根据步骤3.5获取的结果提取每一条用例的自动化判断信息，筛选出需要进行自动化测试的用例；
步骤3.7，根据解析结果提取WIFI路由器信息，自动连接该路由器，开启WIFI功能，并按照测试需求进行配置，如Station/AP模式切换，信道切换，协议标准切换、频道带宽切换等。
步骤3.8，根据解析结果提取测试步骤信息，自动转化为可调用的测试脚本，或者测试命令集。
步骤3.9，根据解析结果提取测试数据相关信息，步骤3.9作为步骤3.8测试步骤信息获取单元的补充，不是必须步骤，对于一些存在大数据量测试的场景推荐使用；
步骤3.10，根据解析结果判断是否需要更新应用程序，如果判断结果为是，则必须优先完成内核程序的升级，按照前述测试程序准备中描述方法编译新的内核程序，按照前述测试板准备中描述方法完成新编译的内核程序升级；
步骤3.11，在完成步骤3.7,3.8,3.9,3.10各单元操作后，按照步骤3.8转换后的测试脚本或者测试命令集，自动执行测试用例；
步骤3.12，在测试用例自动执行过程中，会将测试结果以打印信息的方式输出，通过实时提取打印信息与预期结果进行比较，自动判断测试是否通过；
步骤3.13，测试循环，以保证所有的自动化测试用例都被执行。
步骤四，测试结果处理。主要包含三部分内容：测试结果记录，测试结果统计分析，测试结果反馈，具体如下：
1、测试结果记录，将步骤3.12判断的结果写入步骤3.5获取的测试用例编号对应的测试结果位置，并保存；
2、测试结果统计分析，按照设定的时间段，对已经执行完测试的内容进行简单的统计分析生成报表，比如执行用例次数，用例数量，通过数量，失败数量，用例覆盖率，执行效率等；
3、测试结果反馈，按照设定的时间段，定时以邮件的形式将测试结论发送给相关人员。
可见，通过本发明，测试人员无需精通linux操作系统，无需精通编程，只需通过编辑/修改测试用例的方式就能快速完成SDK开发包的WIFI模块自动化测试的部署、实施和维护，本发明同时支持多线程并发操作，简单易操作的同时极大提升工作效率。
综上所述，本发明一种WIFI模块自动化测试系统及方法，可以帮助SDK发布企业快速实现WIFI模块自动化测试的实施，同时该方法还可以扩展应用到SDK开发包其他功能模块的测试，可以极大的缩短SDK发布周期。本发明具备实施难度小、维护成本极低、执行效率高等特点，可以帮助SDK发布企业大幅度提高工作效率，同时给企业节省了大量人力和时间成本。
上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何本领域技术人员均可在不违背本发明的精神及范畴下，对上述实施例进行修饰与改变。因此，本发明的权利保护范围，应如权利要求书所列。
Claims (10)
1.一种WIFI模块自动化测试系统，包括：
开发板组单元，包括多个带有WIFI模块的开发板；
接口单元，用于连接所述开发板组单元与测试服务器单元，用于实现所述测试服务器同时控制所有开发板，实现多线程并发测试；
无线路由器组单元，包括多个不同厂家、不同型号的无线路由器，与测试服务器单元组成局域网；
测试服务器单元，连接并控制其他硬件设备，用于对SDK版本确认，按不同测试需求正确编译相应的内核程序，于测试实施前对测试板初始化操作，实现自动化测试，以及对测试结果进行处理反馈。
2.如权利要求1所述的一种WIFI模块自动化测试系统，其特征在于：所述系统还包括千兆交换机单元，用于通过网线连接的方式将所述无线路由器组单元和测试服务器单元组成独立的局域网，实现所述测试服务器单元同时控制所有无线路由器。
3.如权利要求1所述的一种WIFI模块自动化测试系统，其特征在于：所述系统还包括虚拟机单元，所述虚拟机单元运行在所述测试服务器单元上或使用一台运行Linux操作系统PC电脑实现，所述测试服务器单元通过SSH方式连接所述虚拟机单元，以通过虚拟机的方式实现SDK目标版本的获取、配置文件修改、编译功能。
4.一种WIFI模块自动化测试方法，包括如下步骤：
步骤S1，建立测试用例库；
步骤S2，对测试服务器、测试板以及测试程序进行准备工作；
步骤S3，利用自动化测试程序实现自动化测试；
步骤S4，对步骤S3的测试结果进行处理。
5.如权利要求4所述的一种WIFI模块自动化测试方法，其特征在于，于步骤S2中，对测试服务器的准备包括但不限于自动化测试程序启动、测试用例库确认、硬件控制确认以及测试工具确认。
6.如权利要求4所述的一种WIFI模块自动化测试方法，其特征在于：于步骤S2中，对测试程序的准备包括但不限于SDK版本确认、编译环境确认、配置文件修改以及内核程序编译。
7.如权利要求4所述的一种WIFI模块自动化测试方法，其特征在于：于步骤S2中，对测试板的准备包括但不限于目标版本升级、测试工具准备以及测试板GPIO配置。
8.如权利要求4所述的一种WIFI模块自动化测试方法，其特征在于，步骤S3进一步包括：
步骤S300，从预先建立的测试用例库中选择测试用例；
步骤S301，选择所要控制的目标测试板；
步骤S302，自动解析所选择的测试用例，以测试用例编号为索引，获取该条测试用例自动化判断信息，应用程序升级判断信息，WIFI路由器选择信息，测试步骤，测试数据信息；
步骤S303，根据解析结果提取每一条测试用例的自动化判断信息，筛选出需要进行自动化测试的测试用例；
步骤S304，根据筛选出的需要进行自动化测试的测试用例的解析结果提取WIFI路由器信息，自动连接对应的路由器，开启WIFI功能，并按照测试需求进行配置；
步骤S305，根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试步骤信息，自动转化为可调用的测试脚本或者测试命令集；
步骤S306，根据筛选出的需要进行自动化测试的测试用例的解析结果判断是否需要更新应用程序，若判断结果为是，则优先完成内核程序的升级；
步骤S307，根据步骤S305转换后的测试脚本或者测试命令集，自动执行测试用例；
步骤S308，将测试结果输出，并将其与预期结果进行比较，判断测试是否通过；
步骤S309，执行下一条测试用例，返回步骤S302以保证所有的自动化测试用例都被执行。
9.如权利要求8所述的一种WIFI模块自动化测试方法，其特征在于，于步骤S307之前，还包括如下步骤：
根据筛选出的需要进行自动化测试的测试用例的解析结果提取测试数据相关信息。
10.如权利要求8所述的一种WIFI模块自动化测试方法，其特征在于，步骤S4进一步包括：
步骤S400，记录测试结果，将步骤S308的判断结果写入步骤S302自动解析获得的测试用例编号对应的测试结果位置；
步骤S401，对测试结果进行统计分析，即按照设定的时间段，对已经执行完测试的内容进行简单的统计分析生成报表；
步骤S402，将测试结果反馈给相关人员。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811355628.8A CN111194046A (zh) | 2018-11-14 | 2018-11-14 | 一种wifi模块自动化测试系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811355628.8A CN111194046A (zh) | 2018-11-14 | 2018-11-14 | 一种wifi模块自动化测试系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111194046A true CN111194046A (zh) | 2020-05-22 |
Family
ID=70710473
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811355628.8A Pending CN111194046A (zh) | 2018-11-14 | 2018-11-14 | 一种wifi模块自动化测试系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111194046A (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111682979A (zh) * | 2020-05-28 | 2020-09-18 | 杭州迪普科技股份有限公司 | 高速信号测试板生成方法及装置 |
| CN112437462A (zh) * | 2020-11-23 | 2021-03-02 | 青岛海尔科技有限公司 | Wifi模块的质量确定方法及装置、存储介质及电子装置 |
| CN112783780A (zh) * | 2021-01-28 | 2021-05-11 | 开放智能机器（上海）有限公司 | 一种多环境多平台嵌入式系统的自动化测试方法及系统 |
| CN113075487A (zh) * | 2021-03-31 | 2021-07-06 | 读书郎教育科技有限公司 | 一种工厂控制老化测试时长的方法 |
| CN114443473A (zh) * | 2021-12-29 | 2022-05-06 | 山东有人物联网股份有限公司 | 一种自动化测试框架、方法、系统及计算机可读存储介质 |
| WO2022127575A1 (zh) * | 2020-12-18 | 2022-06-23 | 展讯半导体(成都)有限公司 | WiFi设备自动测试方法、系统及可读存储介质 |
| CN117215966A (zh) * | 2023-11-09 | 2023-12-12 | 成都爱旗科技有限公司 | 一种芯片sdk接口的测试方法、测试装置及电子设备 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103974312A (zh) * | 2013-02-05 | 2014-08-06 | 中国移动通信集团公司 | 一种无线局域网wlan设备测试方法、装置及系统 |
| CN104410986A (zh) * | 2014-11-10 | 2015-03-11 | 福建联迪商用设备有限公司 | 一种测试终端wifi兼容性的方法及装置 |
| CN104768177A (zh) * | 2015-04-22 | 2015-07-08 | 福州大学 | 一种安卓设备Wi-Fi模块功能自动化测试方法 |
| WO2016206505A1 (zh) * | 2015-06-26 | 2016-12-29 | 中兴通讯股份有限公司 | 自动化测试系统及测试方法 |
| CN106982448A (zh) * | 2017-05-27 | 2017-07-25 | 美的智慧家居科技有限公司 | Wi‑Fi模块测试方法及装置和计算机可读存储介质 |
| CN107018523A (zh) * | 2017-04-13 | 2017-08-04 | 美的智慧家居科技有限公司 | Wifi模块测试方法及装置 |
| CN107148031A (zh) * | 2017-03-17 | 2017-09-08 | 上海庆科信息技术有限公司 | 一种WiFi模块软件系统的测试方法、装置及系统 |
| CN107404731A (zh) * | 2016-05-20 | 2017-11-28 | 佛山市顺德区美的电热电器制造有限公司 | 无线通讯模块的测试系统及测试方法 |
-
2018
- 2018-11-14 CN CN201811355628.8A patent/CN111194046A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103974312A (zh) * | 2013-02-05 | 2014-08-06 | 中国移动通信集团公司 | 一种无线局域网wlan设备测试方法、装置及系统 |
| CN104410986A (zh) * | 2014-11-10 | 2015-03-11 | 福建联迪商用设备有限公司 | 一种测试终端wifi兼容性的方法及装置 |
| CN104768177A (zh) * | 2015-04-22 | 2015-07-08 | 福州大学 | 一种安卓设备Wi-Fi模块功能自动化测试方法 |
| WO2016206505A1 (zh) * | 2015-06-26 | 2016-12-29 | 中兴通讯股份有限公司 | 自动化测试系统及测试方法 |
| CN107404731A (zh) * | 2016-05-20 | 2017-11-28 | 佛山市顺德区美的电热电器制造有限公司 | 无线通讯模块的测试系统及测试方法 |
| CN107148031A (zh) * | 2017-03-17 | 2017-09-08 | 上海庆科信息技术有限公司 | 一种WiFi模块软件系统的测试方法、装置及系统 |
| CN107018523A (zh) * | 2017-04-13 | 2017-08-04 | 美的智慧家居科技有限公司 | Wifi模块测试方法及装置 |
| CN106982448A (zh) * | 2017-05-27 | 2017-07-25 | 美的智慧家居科技有限公司 | Wi‑Fi模块测试方法及装置和计算机可读存储介质 |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111682979A (zh) * | 2020-05-28 | 2020-09-18 | 杭州迪普科技股份有限公司 | 高速信号测试板生成方法及装置 |
| CN111682979B (zh) * | 2020-05-28 | 2021-12-07 | 杭州迪普科技股份有限公司 | 高速信号测试板生成方法及装置 |
| CN112437462A (zh) * | 2020-11-23 | 2021-03-02 | 青岛海尔科技有限公司 | Wifi模块的质量确定方法及装置、存储介质及电子装置 |
| WO2022127575A1 (zh) * | 2020-12-18 | 2022-06-23 | 展讯半导体(成都)有限公司 | WiFi设备自动测试方法、系统及可读存储介质 |
| CN112783780A (zh) * | 2021-01-28 | 2021-05-11 | 开放智能机器（上海）有限公司 | 一种多环境多平台嵌入式系统的自动化测试方法及系统 |
| CN113075487A (zh) * | 2021-03-31 | 2021-07-06 | 读书郎教育科技有限公司 | 一种工厂控制老化测试时长的方法 |
| CN114443473A (zh) * | 2021-12-29 | 2022-05-06 | 山东有人物联网股份有限公司 | 一种自动化测试框架、方法、系统及计算机可读存储介质 |
| CN117215966A (zh) * | 2023-11-09 | 2023-12-12 | 成都爱旗科技有限公司 | 一种芯片sdk接口的测试方法、测试装置及电子设备 |
| CN117215966B (zh) * | 2023-11-09 | 2024-02-02 | 成都爱旗科技有限公司 | 一种芯片sdk接口的测试方法、测试装置及电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111194046A (zh) | 一种wifi模块自动化测试系统及方法 | |
| US11281570B2 (en) | Software testing method, system, apparatus, device medium, and computer program product | |
| US7337432B2 (en) | System and method for generating automatic test plans for graphical user interface applications | |
| US10067863B1 (en) | Feature targeting of test automation lab machines | |
| CN106445811B (zh) | 一种基于SecureCRT的自动化测试系统及方法 | |
| CN101150463B (zh) | 测试方法和系统 | |
| CN109740222B (zh) | 一种针对汽车网联化场景的测试装置和系统 | |
| US8731896B2 (en) | Virtual testbed for system verification test | |
| CN109726061B (zh) | 一种SoC芯片的验证方法 | |
| US20070073836A1 (en) | Sensor node assistant apparatus, sensor node integrated development apparatus, and sensor network development system using the same | |
| US20170045865A1 (en) | Method for connecting an input/output interface of a tester equipped for control unit development | |
| CN101853173A (zh) | 一种分布式系统的可编程逻辑器件的软件升级方法和设备 | |
| CN104978271A (zh) | 一种Android系统的自动升级压测方法及系统 | |
| KR101185542B1 (ko) | 마이크로컨트롤러유닛 테스트 자동화 시스템 및 그 방법 | |
| CN113849419B (zh) | 芯片的测试向量生成方法、系统、设备及存储介质 | |
| CN103412817A (zh) | 自动化测试脚本脱机调试方法及系统 | |
| US11958511B2 (en) | Train signal system and linkage method therefor | |
| KR20200067474A (ko) | Autosar 기반 차량 소프트웨어의 결함 테스트 방법 및 결함 테스트 시스템 | |
| CA3144852A1 (en) | Automatic generation of integrated test procedures using system test procedures | |
| CN108009086B (zh) | 基于用例分解和功能学习的系统自动化测试方法 | |
| CN111444109B (zh) | 一种移动端ui自动化测试方法及系统 | |
| CN113434405A (zh) | 测试文件的确定方法及装置、存储介质及电子装置 | |
| US7478303B2 (en) | System and method for testing nodes in a network | |
| CN113934619A (zh) | 基于Robot Framework测试框架的音源测试方法、系统及存储介质 | |
| CN117762765A (zh) | 一种软件测试方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200522 |