CN103812726A - 一种数据通信设备的自动化测试方法及装置 - Google Patents

一种数据通信设备的自动化测试方法及装置 Download PDF

Info

Publication number
CN103812726A
CN103812726A CN201410037316.8A CN201410037316A CN103812726A CN 103812726 A CN103812726 A CN 103812726A CN 201410037316 A CN201410037316 A CN 201410037316A CN 103812726 A CN103812726 A CN 103812726A
Authority
CN
China
Prior art keywords
test
equipment
module
information
configuration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410037316.8A
Other languages
English (en)
Other versions
CN103812726B (zh
Inventor
吕栋
谭保军
王黎明
刘小红
樊海东
曹宗钦
夏泳鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fiberhome Telecommunication Technologies Co Ltd
Original Assignee
Fiberhome Telecommunication Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fiberhome Telecommunication Technologies Co Ltd filed Critical Fiberhome Telecommunication Technologies Co Ltd
Priority to CN201410037316.8A priority Critical patent/CN103812726B/zh
Publication of CN103812726A publication Critical patent/CN103812726A/zh
Application granted granted Critical
Publication of CN103812726B publication Critical patent/CN103812726B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Maintenance And Management Of Digital Transmission (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种数据通信设备的自动化测试方法及装置,涉及通信技术领域。方法包括以下步骤:设置参数文件,初始化被测数据通信设备;读取、修改并下发设备配置文件,控制测试仪表对数据通信设备进行测试;获取检测点结果,将检测点结果同预期结果进行比对,得出测试结论;清除被测数据通信设备的配置,释放测试仪表占用端口;判断是否需要执行下一个自动化测试用例,如是则重新读取设备配置文件,否则输出测试报告,结束测试。本发明能够对数据通信设备进行自动测试,不仅测试结果的一致性较好,而且工作效率较高,加快了自动化测试用例的开发速度,缩短了数据通信设备的测试周期。

Description

一种数据通信设备的自动化测试方法及装置
技术领域
本发明涉及通信技术领域,具体涉及一种数据通信设备的自动化测试方法及装置。
背景技术
随着通信技术的发展,数据通信设备的更新换代日趋频繁,人们对数据通信设备的开发周期要求越来越短。但是,数据通信设备在的开发过程中,测试数据通信设备所用的时间较长,进而延长了数据通信设备的开发周期。
目前,现有的数据通信设备一般通过CLI(Command LineInterface,命令行界面)和网管UI(User Interface,用户界面)进行测试。数据通信设备的测试方法一般为:1、测试员通过超级终端登录CLI下发配置命令行,对数据通信设备进行配置或通过网管UI配置;2、测试员然后通过数据分析仪等测试仪表模拟相关协议和数据流;3、测试员人工检测测试结果,得出测试结论。
但是,现有的数据通信设备的测试方法使用时,存在以下缺陷:
数据通信设备进行复杂功能的测试或者规格压力测试时,测试员配置的命令较多,而且数据通信设备中机盘板卡上的软件版本更新后,测试员需要对更新后的软件手动进行回归测试。因为数据通信设备的机盘板卡上的软件版本更新较快,所以测试员进行手动回归测试的次数较多。测试员手动配置较多的命令、测试员手动多次进行回归测试的过程均较长,不仅工作效率较低,延长了数据通信设备的测试周期,而且测试员因主观因素影响手动测试的一致性较差。
发明内容
针对现有技术中存在的缺陷,本发明的目的在于提供一种数据通信设备的自动化测试方法及装置,能够对数据通信设备进行自动测试,不仅测试结果的一致性较好,而且工作效率较高,加快了自动化测试用例的开发速度,缩短了数据通信设备的测试周期。
为达到以上目的,本发明采取的技术方案是:一种数据通信设备的自动化测试方法,包括以下步骤:
A、在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件;全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数;测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序;测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数;
B、模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置;
C、通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件,将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备;
D、通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试;
E、捕获数据通信设备的设备状态,对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取设备和测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息;将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败;
调用网络封包分析软件抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值;将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败;
F、读取预先设置好的清除配置文件,将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置;释放占用测试仪表的相关测试端口;
G、判断是否需要执行下一个自动化测试用例,若是,转到步骤C,否则输出测试报告;测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息。
在上述技术方案的基础上,步骤A之前,包括以下步骤:将服务器与测试仪表连接,将测试仪表与需测试的数据通信设备连接,将需测试的数据通信设备与服务器连接。
在上述技术方案的基础上,步骤B中所述网络协议采用telent协议或者安全外壳协议SSH。
在上述技术方案的基础上,步骤C中所述配置文件包括CONFIG.ZEBOS文件。
在上述技术方案的基础上,步骤D中所述控制测试仪表对数据通信设备进行测试包括以下步骤:通过模拟协议和数据流量,根据测试脚本控制测试仪表执行测试;
或者控制测试仪表导入配置好的仪表配置文件,然后控制测试仪表应用生效并根据测试脚本执行测试。
在上述技术方案的基础上,所述模拟协议包括开放式最短路径优先协议OSPF、中间系统到中间系统路由协议ISIS、边界网关协议BGP,所述仪表配置文件包括.xml文件。
在上述技术方案的基础上,步骤E中所述对测试用例的测试检测点进行定位包括以下流程:通过查找关键字或table(表格)方式对测试用例的测试检测点进行定位。
在上述技术方案的基础上,步骤E中所述网络封包分析软件采用Wireshark。
在上述技术方案的基础上,步骤G中所述测试报告的格式为excel格式、txt格式、word格式、html格式或pdf格式。
一种基于上述方法的数据通信设备的自动化测试装置,其特征在于:包括测试参数配置模块、设备初始化模块、设备配置模块、仪表控制模块、测试结果采集比较模块、设备清除释放模块、用例管理模块;
测试参数配置模块与设备初始化模块连接,设备初始化模块分别与设备配置模块、仪表控制模块连接;设备配置模块分别与测试结果采集比较模块、用例管理模块连接,仪表控制模块分别与测试结果采集比较模块、用例管理模块连接;测试结果采集比较模块通过设备清除释放模块与用例管理模块连接;
测试参数配置模块,用于:在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件;全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数;测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序;测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数;向设备初始化模块发送设备初始化信息;
设备初始化模块,用于:接收测试参数配置模块发送的设备初始化信息后,模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置;向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息;
设备配置模块,用于:接收设备配置信息后,通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件,将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备;
仪表控制模块,用于:接收仪表配置信息后,通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试;
测试结果采集比较模块,用于:捕获数据通信设备的设备状态,对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息;将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败;调用网络封包分析软件抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值;将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败;向设备清除释放模块发送设备清除释放信息;
设备清除释放模块,用于:接收测试结果采集比较模块发送的设备清除释放信息后,读取预先设置好的清除配置文件,将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置;释放占用测试仪表的相关测试端口;向用例管理模块发送用例管理信息;
用例管理模块,用于:接收设备清除释放模块发送的用例管理信息后,判断是否需要执行下一个自动化测试用例,若是,向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息;否则输出测试报告;测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息。
与现有技术相比,本发明的优点在于:
(1)本发明能够预先设置测试所需的各项参数,控制测试仪表自动测试数据通信设备,本发明涵盖了大部分的测试功能点,能够适用于数据通信设备的冒烟测试、功能测试、回归测试和压力测试,不仅测试效率较高,而且排除了人为因素的干扰,测试结果的一致性较好。
(2)本发明使用时,首先读取配置文件,然后根据测试用例的私有参数修改和下发配置文件,不仅能够避免将配置命令行固化在自动化测试脚本中,防止命令行改变后需重新修改自动化测试脚本;而且指定的数据通信设备测试用例的配置文件发生改变后,测试员只需对旧的设备配置文件进行替换,无需改变自动化测试脚本,其工作过程比较简单,提升了工作效率,不仅加快了自动化测试用例的开发速度,而且能够最大化降低因设备换代、软件更新等原因导致命令行变动后需重新适配自动化用例脚本的影响,减少维护成本。
(3)本发明能够充分利用时间和设备仪表资源,提升测试效率,释放测试人力。
附图说明
图1为本发明实施例中数据通信设备的自动化测试方法的流程图;
图2为本发明实施例中测试环境的连接框图;
图3为本发明实施例中数据通信设备的自动化测试装置的连接框图。
具体实施方式
以下结合附图及实施例对本发明作进一步详细说明。
参见图1所示,本发明实施例中的数据通信设备的自动化测试方法,包括以下步骤:
S1:参见图2所示,将服务器与测试仪表连接,将测试仪表与需测试的数据通信设备连接,将需测试的数据通信设备与服务器连接。
S2:根据实际的测试环境,在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件。全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数等。测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序等。测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数等。
S3:模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,网络协议可以采用telent协议或者SSH(Secure Shell,安全外壳协议)。对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置。
S4:通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件(例如CONFIG.ZEBOS文件),将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备。
S5:通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试。
控制测试仪表对数据通信设备进行测试的方法为以下2种:
(1)通过模拟协议和数据流量,根据测试脚本控制测试仪表执行测试。模拟协议包括OSPF(Open Shortest Path First,开放式最短路径优先协议)、ISIS(中间系统到中间系统路由协议)、BGP(边界网关协议)等,仪表配置文件包括.xml文件等。
(2)控制测试仪表导入配置好的仪表配置文件,然后控制测试仪表应用生效并根据测试脚本执行测试。
S6:捕获数据通信设备的设备状态(例如回显状态),通过查找关键字或table(表格)方式对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取设备和测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息等。将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败。
调用网络封包分析软件(例如Wireshark等)抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值,将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败。
S7:读取预先设置好的清除配置文件(如CLEAR.ZEBOS),将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置。释放占用测试仪表的相关测试端口。
S8:判断是否需要执行下一个自动化测试用例,若是,转到步骤S4,否则转到步骤S9。
S9:输出测试报告(测试报告的格式可以为excel格式、txt格式、word格式、html格式、pdf格式等),测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息等。
本发明实施例中的数据通信设备的自动化测试方法的工作原理如下:
设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,能够让自动化测试用例很方便的适应不同的测试环境,适用范围比较广泛。
初始化被测数据通信设备,清空被测数据通信设备中的残留配置一般在首次进行自动化测试时执行,被测数据通信设备中的残留配置清空后,能够保证测试环境处于初始状态,增加数据通信设备测试的一致性。
读取配置文件、根据测试用例的私有参数修改配置文件,下发配置文件能够避免将配置命令行固化在自动化测试脚本中,防止命令行改变后需重新修改自动化测试脚本。指定的数据通信设备测试用例的配置文件发生改变后,测试员只需对旧的设备配置文件进行替换,无需改变自动化测试脚本,其工作过程比较简单,提升了工作效率。
占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试。既能通过控制脚本或控制函数直接配置仪表进行测试,又能通过导入现有仪表配置文件应用生效后进行测试,增加了配置仪表的灵活性。
获取设备及测试仪表的检测点结果并调用网络封包分析软件(例如Wireshark等)抓取数据流量包分析关键字段,与预期结果进行比对得出测试结论,保证了测试检测点的全面完整。
清除被测数据通信设备的配置能够保证下一个自动化测试用例执行时设备无残留的配置,释放占用测试仪表的相关测试端口能够保证测试仪表的端口处于空闲状态。
测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息等详细信息,测试报告能够方便对自动化测试用例进行维护和问题定位。
本发明实施例中的数据通信设备的自动化测试方法执行时,若任意步骤出现异常(例如发生设备或者测试仪表通信中断、下发命令行超时、超过重试次数、占用仪表端口失败等情况),均能够根据参数文件中的标志位自动/手动选择是测试暂停还是继续执行。当测试用例中设置的检测点测试不通过时,能够自动/手动选择是暂停还是继续执行。测试暂停保留问题现场方便在调试阶段进行问题定位,有利于小概率问题的排查;继续执行则在无人值守的连续测试时应用,有利于保持数据通信设备测试的连贯性和压力性。
参见图3所示,本发明实施例中的数据通信设备的自动化测试装置,包括测试参数配置模块、设备初始化模块、设备配置模块、仪表控制模块、测试结果采集比较模块、设备清除释放模块、用例管理模块。
测试参数配置模块与设备初始化模块连接,设备初始化模块分别与设备配置模块、仪表控制模块连接;设备配置模块分别与测试结果采集比较模块、用例管理模块连接,仪表控制模块分别与测试结果采集比较模块、用例管理模块连接;测试结果采集比较模块通过设备清除释放模块与用例管理模块连接。
测试参数配置模块,用于:根据实际的测试环境,在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件。全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数等。测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序等。测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数等。向设备初始化模块发送设备初始化信息。
设备初始化模块,用于:接收测试参数配置模块发送的设备初始化信息后,模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,网络协议可以采用telent协议或者SSH。对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置。向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息。
设备配置模块,用于:接收设备配置信息后,通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件(例如CONFIG.ZEBOS文件),将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备。
仪表控制模块,用于:接收仪表配置信息后,通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试。控制测试仪表对数据通信设备进行测试的方法为:
(1)通过模拟协议和数据流量,根据测试脚本控制测试仪表执行测试。模拟协议包括OSPF、ISIS、BGP等,仪表配置文件包括.xml文件等。
(2)控制测试仪表导入配置好的仪表配置文件,然后控制测试仪表应用生效并根据测试脚本执行测试。
测试结果采集比较模块,用于:捕获数据通信设备的设备状态(例如回显状态),通过查找关键字或table方式对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取设备和测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息等。将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败。
调用网络封包分析软件(例如Wireshark等)抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值。将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败;向设备清除释放模块发送设备清除释放信息。
设备清除释放模块,用于:接收测试结果采集比较模块发送的设备清除释放信息后,读取预先设置好的清除配置文件,将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置。释放占用测试仪表的相关测试端口。向用例管理模块发送用例管理信息。
用例管理模块,用于:接收设备清除释放模块发送的用例管理信息后,判断是否需要执行下一个自动化测试用例,若是,向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息;否则输出测试报告,测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息等。
本发明不局限于上述实施方式,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围之内。本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种数据通信设备的自动化测试方法,其特征在于:包括以下步骤:
A、在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件;全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数;测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序;测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数;
B、模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置;
C、通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件,将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备;
D、通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试;
E、捕获数据通信设备的设备状态,对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取设备和测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息;将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败;
调用网络封包分析软件抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值;将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败;
F、读取预先设置好的清除配置文件,将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置;释放占用测试仪表的相关测试端口;
G、判断是否需要执行下一个自动化测试用例,若是,转到步骤C,否则输出测试报告;测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息。
2.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤A之前,包括以下步骤:将服务器与测试仪表连接,将测试仪表与需测试的数据通信设备连接,将需测试的数据通信设备与服务器连接。
3.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤B中所述网络协议采用telent协议或者安全外壳协议SSH。
4.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤C中所述配置文件包括CONFIG.ZEBOS文件。
5.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤D中所述控制测试仪表对数据通信设备进行测试包括以下步骤:通过模拟协议和数据流量,根据测试脚本控制测试仪表执行测试;
或者控制测试仪表导入配置好的仪表配置文件,然后控制测试仪表应用生效并根据测试脚本执行测试。
6.如权利要求5所述的数据通信设备的自动化测试方法,其特征在于:所述模拟协议包括开放式最短路径优先协议OSPF、中间系统到中间系统路由协议ISIS、边界网关协议BGP,所述仪表配置文件包括.xml文件。
7.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤E中所述对测试用例的测试检测点进行定位包括以下流程:通过查找关键字或table(表格)方式对测试用例的测试检测点进行定位。
8.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤E中所述网络封包分析软件采用Wireshark。
9.如权利要求1所述的数据通信设备的自动化测试方法,其特征在于:步骤G中所述测试报告的格式为excel格式、txt格式、word格式、html格式或pdf格式。
10.一种基于权利要求1至9任一项所述方法的数据通信设备的自动化测试装置,其特征在于:包括测试参数配置模块、设备初始化模块、设备配置模块、仪表控制模块、测试结果采集比较模块、设备清除释放模块、用例管理模块;
测试参数配置模块与设备初始化模块连接,设备初始化模块分别与设备配置模块、仪表控制模块连接;设备配置模块分别与测试结果采集比较模块、用例管理模块连接,仪表控制模块分别与测试结果采集比较模块、用例管理模块连接;测试结果采集比较模块通过设备清除释放模块与用例管理模块连接;
测试参数配置模块,用于:在服务器上设置测试环境全局参数、需要运行的测试套件的私有参数和需要运行的测试用例的私有参数,配置测试仪表的仪表配置文件;全局参数包括待测数据通信设备的系统内部设备的IP地址、各个待测数据通信设备之间的拓扑连接参数、测试仪表的IP地址、待测数据通信设备与测试仪表连接的端口参数;测试套件的私有参数包括循环次数、测试失败的暂停程序、测试失败的继续执行程序;测试用例的私有参数包括等待时间、测试的规格值、测试的执行次数;向设备初始化模块发送设备初始化信息;
设备初始化模块,用于:接收测试参数配置模块发送的设备初始化信息后,模拟超级终端,通过与数据通信设备对应的网络协议登陆被测通信设备,对被测数据通信设备进行初始化,清空被测数据通信设备中的残留配置;向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息;
设备配置模块,用于:接收设备配置信息后,通过自动化测试脚本或自动化测试函数读取指定的数据通信设备测试用例的配置文件,将该配置文件修改至与测试用例的私有参数匹配,将修改后的配置文件通过命令行下发至待测数据通信设备;
仪表控制模块,用于:接收仪表配置信息后,通过仪表控制脚本或仪表控制函数驱动测试仪表,占用测试仪表的相关测试端口,控制测试仪表对数据通信设备进行测试;
测试结果采集比较模块,用于:捕获数据通信设备的设备状态,对测试用例的测试检测点进行定位,通过获取测试脚本或者获取测试函数,获取设备和测试仪表的检测点结果,检测点结果包括协议状态信息、倒换时间信息、流量信息;将检测点结果与预期结果进行比对,若检测点结果与预期结果一致,则测试通过,若检测点结果与预期结果不一致,则测试失败;调用网络封包分析软件抓取数据流量包,对数据流量包进行分析,查找数据流量包中的关键字,获取关键字段的值;将关键字段的值与预期结果进行比对,若关键字段的值与预期结果一致,则测试通过,若关键字段的值与预期结果不一致,则测试失败;向设备清除释放模块发送设备清除释放信息;
设备清除释放模块,用于:接收测试结果采集比较模块发送的设备清除释放信息后,读取预先设置好的清除配置文件,将清除配置文件修改至与测试用例的私有参数匹配,生成清除命令行,下发命令行至被测数据通信设备,清除被测数据通信设备的配置;释放占用测试仪表的相关测试端口;向用例管理模块发送用例管理信息;
用例管理模块,用于:接收设备清除释放模块发送的用例管理信息后,判断是否需要执行下一个自动化测试用例,若是,向设备配置模块发送设备配置信息,向仪表控制模块发送仪表配置信息;否则输出测试报告;测试报告包括详细运行环境信息、测试步骤信息、测试结果信息、测试结论信息。
CN201410037316.8A 2014-01-26 2014-01-26 一种数据通信设备的自动化测试方法及装置 Active CN103812726B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410037316.8A CN103812726B (zh) 2014-01-26 2014-01-26 一种数据通信设备的自动化测试方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410037316.8A CN103812726B (zh) 2014-01-26 2014-01-26 一种数据通信设备的自动化测试方法及装置

Publications (2)

Publication Number Publication Date
CN103812726A true CN103812726A (zh) 2014-05-21
CN103812726B CN103812726B (zh) 2017-02-01

Family

ID=50708965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410037316.8A Active CN103812726B (zh) 2014-01-26 2014-01-26 一种数据通信设备的自动化测试方法及装置

Country Status (1)

Country Link
CN (1) CN103812726B (zh)

Cited By (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104503900A (zh) * 2014-11-21 2015-04-08 北京奇虎科技有限公司 测试用例生成方法及装置
CN104639400A (zh) * 2015-02-13 2015-05-20 盛科网络(苏州)有限公司 网络包处理芯片的自动检测方法及装置
CN104778179A (zh) * 2014-01-14 2015-07-15 阿里巴巴集团控股有限公司 一种数据迁移测试方法和系统
CN105183649A (zh) * 2015-09-08 2015-12-23 武汉虹信通信技术有限责任公司 一种用于自动化测试的自动telnet方法及系统
CN105228138A (zh) * 2015-08-28 2016-01-06 广东电网有限责任公司信息中心 一种无线网络设备的安全性检测方法及系统
CN105281970A (zh) * 2014-07-09 2016-01-27 珠海格力电器股份有限公司 通讯干扰测试方法、装置、电子设备及系统
CN105471680A (zh) * 2015-12-09 2016-04-06 上海斐讯数据通信技术有限公司 一种网络语音通信测试系统及方法
CN105827460A (zh) * 2016-05-11 2016-08-03 深圳市共进电子股份有限公司 一种网络设备自动化测试的方法、装置和系统
CN105893233A (zh) * 2014-12-19 2016-08-24 伊姆西公司 用于自动测试固件的方法和系统
CN105974297A (zh) * 2016-04-12 2016-09-28 烽火通信科技股份有限公司 一种实现高效测试的虚拟测试仪表及测试方法
CN106209503A (zh) * 2016-06-28 2016-12-07 武汉斗鱼网络科技有限公司 Rpc接口测试方法及系统
WO2016201997A1 (zh) * 2015-06-16 2016-12-22 中兴通讯股份有限公司 一种自动化测试的方法、装置及系统
CN106330591A (zh) * 2015-06-30 2017-01-11 中国移动通信集团公司 一种通信系统的oam测试方法及设备
CN106502895A (zh) * 2016-10-21 2017-03-15 郑州云海信息技术有限公司 一种自动化测试信息生成装置及方法
CN106503268A (zh) * 2016-12-07 2017-03-15 广东神马搜索科技有限公司 数据对比方法、装置和系统
CN106776346A (zh) * 2017-01-18 2017-05-31 鼎点视讯科技有限公司 Ccmts设备的测试方法和装置
CN107124335A (zh) * 2017-06-30 2017-09-01 郑州云海信息技术有限公司 一种基于云海操作系统平台测试方法及系统
CN107341099A (zh) * 2017-05-23 2017-11-10 烽火通信科技股份有限公司 一种仪表配置的自动化测试用例生成系统及生成方法
CN107547309A (zh) * 2017-08-21 2018-01-05 北京奇安信科技有限公司 一种安全网关性能的自动化测试方法及装置
WO2018006702A1 (zh) * 2016-07-05 2018-01-11 中兴通讯股份有限公司 自动化测试中的异常处理方法、装置及系统
CN107678962A (zh) * 2017-09-26 2018-02-09 郑州云海信息技术有限公司 一种cli接口的自动化测试方法及装置
CN107729242A (zh) * 2017-10-12 2018-02-23 郑州云海信息技术有限公司 一种自动化测试方法、系统、装置及计算机存储介质
CN107888459A (zh) * 2017-12-13 2018-04-06 北京卓越信通电子股份有限公司 一种工业交换机自动化测试平台及测试方法
CN108075938A (zh) * 2016-11-17 2018-05-25 迈普通信技术股份有限公司 一种自动化测试方法和装置
CN109188117A (zh) * 2018-07-26 2019-01-11 浙江中科领航汽车电子有限公司 一种基于Labview的仪表测试系统及测试方法
CN109195172A (zh) * 2018-07-27 2019-01-11 闻泰通讯股份有限公司 射频测试方法、装置、测试设备及存储介质
CN109361562A (zh) * 2018-10-31 2019-02-19 广东电网有限责任公司信息中心 一种基于关联网络设备接入的自动化测试方法
CN109408370A (zh) * 2018-09-18 2019-03-01 深圳壹账通智能科技有限公司 接口测试文件生成方法、装置、计算机设备和存储介质
CN109428783A (zh) * 2017-08-30 2019-03-05 迈普通信技术股份有限公司 网络设备测试方法及装置
CN110535725A (zh) * 2019-08-28 2019-12-03 网宿科技股份有限公司 一种企业网络测试方法及装置
CN111177728A (zh) * 2019-10-10 2020-05-19 腾讯科技(深圳)有限公司 一种虚拟设备漏洞挖掘方法、装置及介质
CN112019400A (zh) * 2020-07-31 2020-12-01 惠州高盛达科技有限公司 基于无线通信测试仪的射频测试方法及系统
CN112199297A (zh) * 2020-10-30 2021-01-08 久瓴(江苏)数字智能科技有限公司 数据测试方法、装置、非易失性存储介质和处理器
CN112311756A (zh) * 2019-07-24 2021-02-02 罗伯特·博世有限公司 用于对自动化系统进行加保险的配置的方法
CN112350879A (zh) * 2019-08-07 2021-02-09 北京京东尚科信息技术有限公司 数据通信设备测试管理方法、装置、系统及存储介质
CN112650670A (zh) * 2020-12-17 2021-04-13 京东数科海益信息科技有限公司 应用测试方法、装置、系统、电子设备和存储介质
CN112817859A (zh) * 2021-02-04 2021-05-18 深圳市吉祥腾达科技有限公司 智能连接平台的自动化测试方法与系统
CN113189943A (zh) * 2021-03-30 2021-07-30 中国人民解放军海军工程大学 一种工控系统现场测点模拟数据生成方法及系统
CN114443473A (zh) * 2021-12-29 2022-05-06 山东有人物联网股份有限公司 一种自动化测试框架、方法、系统及计算机可读存储介质
CN114553750A (zh) * 2022-02-24 2022-05-27 杭州迪普科技股份有限公司 基于网络配置协议的自动化测试方法及装置
CN115499070A (zh) * 2022-08-08 2022-12-20 成都万创科技股份有限公司 一种无线模组测试系统和方法
CN117931666A (zh) * 2024-01-26 2024-04-26 中国人民解放军军事科学院系统工程研究院 一种软件无线电通信设备核心框架测试系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0832649A (ja) * 1994-07-19 1996-02-02 Fujitsu Ltd 通信試験装置
CN1527509A (zh) * 2003-03-06 2004-09-08 华为技术有限公司 一种测试方法
CN101136798A (zh) * 2007-10-16 2008-03-05 中兴通讯股份有限公司 一种数据配置自动化测试系统和方法
CN101150454A (zh) * 2007-07-31 2008-03-26 中兴通讯股份有限公司 自动交换光网络的测试方法
US20090199047A1 (en) * 2008-01-31 2009-08-06 Yahoo! Inc. Executing software performance test jobs in a clustered system
CN101770423A (zh) * 2009-12-25 2010-07-07 中兴通讯股份有限公司 一种测试数据生成方法及测试系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0832649A (ja) * 1994-07-19 1996-02-02 Fujitsu Ltd 通信試験装置
CN1527509A (zh) * 2003-03-06 2004-09-08 华为技术有限公司 一种测试方法
CN101150454A (zh) * 2007-07-31 2008-03-26 中兴通讯股份有限公司 自动交换光网络的测试方法
CN101136798A (zh) * 2007-10-16 2008-03-05 中兴通讯股份有限公司 一种数据配置自动化测试系统和方法
US20090199047A1 (en) * 2008-01-31 2009-08-06 Yahoo! Inc. Executing software performance test jobs in a clustered system
CN101770423A (zh) * 2009-12-25 2010-07-07 中兴通讯股份有限公司 一种测试数据生成方法及测试系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李自明: "数据通信设备的自动化测试及实施方案", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104778179A (zh) * 2014-01-14 2015-07-15 阿里巴巴集团控股有限公司 一种数据迁移测试方法和系统
CN104778179B (zh) * 2014-01-14 2019-05-28 阿里巴巴集团控股有限公司 一种数据迁移测试方法和系统
CN105281970A (zh) * 2014-07-09 2016-01-27 珠海格力电器股份有限公司 通讯干扰测试方法、装置、电子设备及系统
CN105281970B (zh) * 2014-07-09 2019-03-12 珠海格力电器股份有限公司 通讯干扰测试方法、装置、电子设备及系统
CN104503900A (zh) * 2014-11-21 2015-04-08 北京奇虎科技有限公司 测试用例生成方法及装置
CN105893233A (zh) * 2014-12-19 2016-08-24 伊姆西公司 用于自动测试固件的方法和系统
CN104639400A (zh) * 2015-02-13 2015-05-20 盛科网络(苏州)有限公司 网络包处理芯片的自动检测方法及装置
WO2016201997A1 (zh) * 2015-06-16 2016-12-22 中兴通讯股份有限公司 一种自动化测试的方法、装置及系统
CN106330591A (zh) * 2015-06-30 2017-01-11 中国移动通信集团公司 一种通信系统的oam测试方法及设备
CN106330591B (zh) * 2015-06-30 2020-02-11 中国移动通信集团公司 一种通信系统的oam测试方法及设备
CN105228138A (zh) * 2015-08-28 2016-01-06 广东电网有限责任公司信息中心 一种无线网络设备的安全性检测方法及系统
CN105183649A (zh) * 2015-09-08 2015-12-23 武汉虹信通信技术有限责任公司 一种用于自动化测试的自动telnet方法及系统
CN105471680A (zh) * 2015-12-09 2016-04-06 上海斐讯数据通信技术有限公司 一种网络语音通信测试系统及方法
CN105974297B (zh) * 2016-04-12 2019-08-27 烽火通信科技股份有限公司 一种实现高效测试的虚拟测试仪表及测试方法
CN105974297A (zh) * 2016-04-12 2016-09-28 烽火通信科技股份有限公司 一种实现高效测试的虚拟测试仪表及测试方法
CN105827460A (zh) * 2016-05-11 2016-08-03 深圳市共进电子股份有限公司 一种网络设备自动化测试的方法、装置和系统
CN106209503A (zh) * 2016-06-28 2016-12-07 武汉斗鱼网络科技有限公司 Rpc接口测试方法及系统
CN106209503B (zh) * 2016-06-28 2019-07-09 武汉斗鱼网络科技有限公司 Rpc接口测试方法及系统
WO2018006702A1 (zh) * 2016-07-05 2018-01-11 中兴通讯股份有限公司 自动化测试中的异常处理方法、装置及系统
CN106502895A (zh) * 2016-10-21 2017-03-15 郑州云海信息技术有限公司 一种自动化测试信息生成装置及方法
CN108075938A (zh) * 2016-11-17 2018-05-25 迈普通信技术股份有限公司 一种自动化测试方法和装置
CN106503268A (zh) * 2016-12-07 2017-03-15 广东神马搜索科技有限公司 数据对比方法、装置和系统
CN106503268B (zh) * 2016-12-07 2019-08-23 广东神马搜索科技有限公司 数据对比方法、装置和系统
CN106776346A (zh) * 2017-01-18 2017-05-31 鼎点视讯科技有限公司 Ccmts设备的测试方法和装置
CN107341099A (zh) * 2017-05-23 2017-11-10 烽火通信科技股份有限公司 一种仪表配置的自动化测试用例生成系统及生成方法
CN107124335A (zh) * 2017-06-30 2017-09-01 郑州云海信息技术有限公司 一种基于云海操作系统平台测试方法及系统
CN107547309A (zh) * 2017-08-21 2018-01-05 北京奇安信科技有限公司 一种安全网关性能的自动化测试方法及装置
CN107547309B (zh) * 2017-08-21 2020-09-04 奇安信科技集团股份有限公司 一种安全网关性能的自动化测试方法及装置
CN109428783B (zh) * 2017-08-30 2022-02-25 迈普通信技术股份有限公司 网络设备测试方法及装置
CN109428783A (zh) * 2017-08-30 2019-03-05 迈普通信技术股份有限公司 网络设备测试方法及装置
CN107678962A (zh) * 2017-09-26 2018-02-09 郑州云海信息技术有限公司 一种cli接口的自动化测试方法及装置
CN107729242A (zh) * 2017-10-12 2018-02-23 郑州云海信息技术有限公司 一种自动化测试方法、系统、装置及计算机存储介质
CN107888459A (zh) * 2017-12-13 2018-04-06 北京卓越信通电子股份有限公司 一种工业交换机自动化测试平台及测试方法
CN109188117A (zh) * 2018-07-26 2019-01-11 浙江中科领航汽车电子有限公司 一种基于Labview的仪表测试系统及测试方法
CN109195172A (zh) * 2018-07-27 2019-01-11 闻泰通讯股份有限公司 射频测试方法、装置、测试设备及存储介质
CN109408370A (zh) * 2018-09-18 2019-03-01 深圳壹账通智能科技有限公司 接口测试文件生成方法、装置、计算机设备和存储介质
CN109361562A (zh) * 2018-10-31 2019-02-19 广东电网有限责任公司信息中心 一种基于关联网络设备接入的自动化测试方法
CN112311756A (zh) * 2019-07-24 2021-02-02 罗伯特·博世有限公司 用于对自动化系统进行加保险的配置的方法
CN112350879A (zh) * 2019-08-07 2021-02-09 北京京东尚科信息技术有限公司 数据通信设备测试管理方法、装置、系统及存储介质
CN112350879B (zh) * 2019-08-07 2023-06-27 北京京东尚科信息技术有限公司 数据通信设备测试管理方法、装置、系统及存储介质
CN110535725A (zh) * 2019-08-28 2019-12-03 网宿科技股份有限公司 一种企业网络测试方法及装置
CN111177728B (zh) * 2019-10-10 2022-06-17 腾讯科技(深圳)有限公司 一种虚拟设备漏洞挖掘方法、装置及介质
CN111177728A (zh) * 2019-10-10 2020-05-19 腾讯科技(深圳)有限公司 一种虚拟设备漏洞挖掘方法、装置及介质
CN112019400A (zh) * 2020-07-31 2020-12-01 惠州高盛达科技有限公司 基于无线通信测试仪的射频测试方法及系统
CN112199297A (zh) * 2020-10-30 2021-01-08 久瓴(江苏)数字智能科技有限公司 数据测试方法、装置、非易失性存储介质和处理器
CN112650670A (zh) * 2020-12-17 2021-04-13 京东数科海益信息科技有限公司 应用测试方法、装置、系统、电子设备和存储介质
CN112817859A (zh) * 2021-02-04 2021-05-18 深圳市吉祥腾达科技有限公司 智能连接平台的自动化测试方法与系统
CN113189943A (zh) * 2021-03-30 2021-07-30 中国人民解放军海军工程大学 一种工控系统现场测点模拟数据生成方法及系统
CN114443473A (zh) * 2021-12-29 2022-05-06 山东有人物联网股份有限公司 一种自动化测试框架、方法、系统及计算机可读存储介质
CN114553750A (zh) * 2022-02-24 2022-05-27 杭州迪普科技股份有限公司 基于网络配置协议的自动化测试方法及装置
CN114553750B (zh) * 2022-02-24 2023-09-22 杭州迪普科技股份有限公司 基于网络配置协议的自动化测试方法及装置
CN115499070A (zh) * 2022-08-08 2022-12-20 成都万创科技股份有限公司 一种无线模组测试系统和方法
CN117931666A (zh) * 2024-01-26 2024-04-26 中国人民解放军军事科学院系统工程研究院 一种软件无线电通信设备核心框架测试系统及方法

Also Published As

Publication number Publication date
CN103812726B (zh) 2017-02-01

Similar Documents

Publication Publication Date Title
CN103812726A (zh) 一种数据通信设备的自动化测试方法及装置
US10015072B2 (en) Consolidation of network test automation tools
CN109388530B (zh) 一种面向刀片式服务器的自动化测试平台以及测试方法
EP3886367B1 (en) Automating 5g slices using real-time analytics
US20120253728A1 (en) Method and system for intelligent automated testing in a multi-vendor, multi-protocol heterogeneous environment
US11675682B2 (en) Agent profiler to monitor activities and performance of software agents
CN106533724B (zh) 监控和优化网络功能虚拟化nfv网络的方法、装置及系统
CN102546266B (zh) 一种网络故障的诊断方法及平台
CN105052076B (zh) 一种基于云计算的网元管理系统及网元管理方法
WO2019051948A1 (zh) 监控数据的处理方法、设备、服务器及存储介质
US10341182B2 (en) Method and system for detecting network upgrades
CN111966465B (zh) 一种实时修改宿主机配置参数的方法、系统、设备及介质
WO2021120544A1 (zh) 用于调试设备的方法及装置
WO2017016386A1 (zh) 一种实现射频拉远单元故障分析的方法和装置
CN111769979A (zh) 一种云资源编排方法、系统、终端及存储介质
CN104468279A (zh) 一种路由协议交互的测试方法和测试工具
CN113407469A (zh) 一种参数配置方法及装置、存储介质及电子装置
CN116137603B (zh) 链路故障的检测方法和装置、存储介质及电子装置
CN111124828A (zh) 一种数据处理方法、装置、设备及存储介质
CN111103495A (zh) 一种现场调试跨间隔继电保护设备的自动测试系统及方法
CN102158374B (zh) 一种带宽限速测试方法和测试装置
CN114205789A (zh) 一种5g站点的开通方法、系统和存储介质
Yang et al. Implementation of VNFC monitoring driver in the NFV architecture
CN111984523A (zh) 消息处理任务测试方法、装置、系统、设备及介质
Díaz-Zayas et al. Remote control and instrumentation of Android devices

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant