CN1764131A - 一种协议测试系统及方法 - Google Patents
一种协议测试系统及方法 Download PDFInfo
- Publication number
- CN1764131A CN1764131A CN 200410085379 CN200410085379A CN1764131A CN 1764131 A CN1764131 A CN 1764131A CN 200410085379 CN200410085379 CN 200410085379 CN 200410085379 A CN200410085379 A CN 200410085379A CN 1764131 A CN1764131 A CN 1764131A
- Authority
- CN
- China
- Prior art keywords
- entity
- protocol
- test
- tested
- configuration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明涉及测试技术，特别涉及一种协议测试系统及方法，本发明首先公开了一种协议测试系统，在系统中引入虚拟连接控制台，模拟实际组网情况进行网络配置和协议报文的转发，从而不需要实际组网就可以实现对各被测试设备间协议实体正确性的测试，实现了适配器与执行器、编辑器的完全分离；本发明还公开了一种协议测试方法，包括A进行虚拟组网配置；B根据所述虚拟组网配置，启动各个被测实体和各实体的协议；C给被测实体下发测试信令；D对被测实体返回的测试结果进行分析比较，判断是否通过测试。从而提高了协议测试效率，降低了协议测试成本。
Description
技术领域
本发明涉及测试技术，特别涉及一种协议测试系统及方法。
背景技术
在现有的设备中，都会使用到各种各样的协议来完成各种功能业务，协议中的状态机是其重要的组成部分，保证状态机的正确性是维护该协议能否正确运行的关键。同时每个设备中的协议不是独立的，它必须与外界进行通讯，各设备之间协议的最后状态是协商出来的，从一个全网的角度看，在任何时刻，网上所有设备的协议状态机必须是正确的，这就对协议测试提出了更高的要求，在测试时不仅要关注单个设备协议状态机的正确性，还必须关注在不同组网方式下各设备的协议状态机的正确性。
现有方案一的整体架构如图1。在编辑器编辑好测试套以后通过树表结合的标记方法(TTCN：Tree and Tabular Combined Notation)执行器执行测试套，适配器的作用是与被测实体进行通讯，负责把从TTCN执行器发送过来的数据转发到被测试系统，同时把从被测试系统返回的结果提交给TTCN执行器，TTCN执行器根据返回的结果与设置的期望结果比较后，判断用例是否通过。在具体的设备中，被测试实体必然与其它模块发生关系，图中的桩模块作用是给被测试实体模拟各种需要的返回值；监视器的作用是对执行器下发到被测试系统中的各种信令以及返回值进行监控，可以显式的看到所下发的信令和返回信息。
在TTCN2(TTCN的新版本，目前最新的版本为TTCN3，还没有发布)中，编辑器功能是生成一个标准的测试套，而执行器一般来说是用户自己根据需要开发的，但其基本功能都是一样的，对测试套中的数据进行解释执行，并对最后的测试结果进行判断统计。
在测试中通过实际环境来测试费用、时间等都比较大，必须使用实现的组网情况测试设备中协议的状态，在这种情况下，会经常发生由于其他模块的问题而导致验证协议正确性的活动无法进行下去的情况；而且现有技术只能实现单个设备的协议测试，无法对多个被测设备中的协议之间配合正确性、协议状态变化的正确性等进行验证；无法在同一时刻同时对多个设备的协议状态进行监控和做出验证；而且所能支持的测试脚本类型有限，使用不够灵活。
发明内容
为了实现适配器与执行器、编辑器的完全分离、不需要实际组网就能实现对各被测试设备间协议实体正确性的测试、提高测试系统的灵活性等目的，本发明提出了如下的技术方案：
一种协议测试系统，包括编辑器、执行器和一个以上的被测实体，其中所述编辑器编辑测试套并传送至所述执行器，还包括虚拟连接控制台，其中，
所述虚拟连接控制台模拟实际组网情况，对执行器下发的信令处理后下发给被测实体，并对被测实体返回的结果进行处理后发回执行器。
较佳的，所述虚拟连接控制台统计各节点各端口发送/接收的报文数，修改报文内容或者插入自己构造的报文。
较佳的，所述虚拟连接控制台包括配置模块和报文转发模块，其中所述配置模块模拟实际网络的组网配置，所述报文转发模块读取所述配置模块中的组网配置数据，根据所述配置数据，完成对已经配置好的链路进行被测实体间的协议报文的转发。
较佳的，所述被测实体包括协议实体和配置接口。
较佳的，所述虚拟连接控制台的配置模块对所述协议实体的参数进行配置与查询。
较佳的，所述虚拟连接控制台允许用户自定义函数，所述自定义函数用来处理执行器发送的相应数据。
较佳的，所述虚拟连接控制台的配置模块处理执行器发来的信令，并将所述信令传送至所述测试实体的配置接口，并通过所述配置接口下发到所述协议实体。
一种协议测试方法，包括以下步骤：
A进行虚拟组网配置；
B根据所述虚拟组网配置，启动各个被测实体和各实体的协议；
C给被测实体下发测试信令；
D对被测实体返回的测试结果进行分析比较，观察测试结果。
较佳的，在所述步骤A之前还包括为被测实体配置参数并进行测试适配。
较佳的，所述步骤A进一步包括由用户下发配置信息进行虚拟组网配置。
较佳的，所述的配置信息是脚本形式或图形界面的形式。
较佳的，所述步骤C进一步包括，根据所述组网配置和所述测试信令，协议报文在各个被测实体间进行传递。
较佳的，所述步骤C和D之间进一步包括，修改被测试实体的参数值并查询各测试实体的状态以及相关的参数值；
对所述协议产生的报文进行统计或误码插入。
本发明在协议测试系统中引入了虚拟连接控制台，从而不需要实际组网就可以实现对各被测试设备间协议实体正确性的测试，在没有本发明的情况下，必须使用实现的组网情况测试设备中协议的状态，在这种情况下，会经常发生由于其他模块的问题而导致验证协议正确性的活动无法进行下去的情况，并且在使用实际设备组网进行协议测试费时费力，采用本发明提高了协议测试效率，降低了协议测试成本。
本发明中提供了多种灵活的手段，允许用户在虚拟连接控制台中自定义相应函数处理执行体发送过来的数据，所以用户可以选用自己熟悉的执行器和编辑器执行和编辑测试项目，也就说，虚拟连接控制台对执行器和编辑器无任何依赖性，这给用户提供极大的方便性，减低了用户的学习成本，提高了测试效率。
通过虚拟连接控制台与相应的执行器配合使用，可以实现协议测试的自动化，这样只需要一次把测试项目写完，就可以供后续多个版本的测试验证，大大缩短了测试时间，减低了测试成本。
附图说明
图1是现有技术的协议测试系统；
图2是本发明的协议测试系统；
图3是本发明的协议测试方法的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述。
本发明首先公开了一种协议测试系统，在本发明中的协议测试系统中引入了虚拟连接控制台(VCC：Virtual Connection Console)，通过它主要是为了模拟实现实际网络上的环型、链型等组网情况，并提供灵活多样的自定义函数与执行器适配，实现了适配器与执行器、编辑器的完全分离。
需要说明的是，在本文中，以“编号-副编号”的形式区分功能相同作为不同实体的模块，其中，编号相同的为功能相同的实体，编号相同副编号不同的为功能相同但作为不同实体的模块。
如附图2所示，为本发明中公开的一种协议测试系统，在测试端包括编辑器100和执行器101，它还包括VCC102、一个以上的被测实体108-1......108-n，其中，每个被测实体包含配置接口106-1......106-n和协议实体105-1......105-n，VCC102包括配置模块103和报文转发模块104。
编辑器100、执行器101和VCC102以及被测实体108-1......108-n都是独立的应用程序，在这里我们采用了分布式的组网方法，各应用程序间通过套接(socket)进行通讯，可以同时在一台计算机上运行所有程序，也可以在多台计算间运行这些程序，这种实现方案有利于在具体测试时根据实际资源情况进行有效的测试。
编辑器100和执行器101正如背景技术中所述，编辑器100根据测试要求编辑测试套，并将测试套传送给执行器101，这属于现有技术的范围，在此不作详述。
执行器101发来的信令都是配置模块103处理，如果是与转发模块104相关的，通过配置模块103下发到转发模块104，如果是与被测实体相关的信令，配置模块103下发到被测试实体的配置接口106-1......106-n，通过被测试实体的配置接口106-1......106-n下发到协议实体105-1.........105-n。
VCC102提供了与被测实体和执行器的通讯功能，其中把与被测实体的通讯接口按功能划分，分为与协议实体以及配置接口的socket连接。
配置模块103主要完成以下功能：
A)完成各被测试设备间的组网配置，为报文转发模块提供转发通路。一般情况下，被测试设备上都有若干个物理通讯口(如数据通讯设备的网口或者传输设备的光口等)，被测试设备间由于应用的需要会被组成各种各样的网络，如链型、环型等，被测试设备各物理端口上都可以传送与设备协议相关的各种状态信息等。在本模块中，通过下发相应的配置信令，可以模拟建立被测试设备间物理端口的链路，被测试设备可以通过该链路完成协议报文的收发，同时还完成了报文转发模块的辅助功能配置。
B)完成对被测试设备的协议实体相关参数的设置与查询。一般情况下，被测试设备的协议实体会处于一种系统默认的配置状态下，如协议默认情况下为停止状态，为了测试该协议必须通过信令把该协议启动起来，同时协议实体也有一些参数需要配置，通过该模块可以实现对这些协议参数的设置和查询。
C)允许用户在VCC自定义函数，这些函数可以用来处理执行器发送的相应数据或做其他用途。
报文转发模块104主要完成以下功能：负责完成对配置模块已经配置好的链路进行被测试设备间的协议报文的转发，在该模块中，可以检测链路的状态来实现一些辅助功能，如：定时发包(正常、异常包)、协议报文流量统计、误码插入等。
本发明同时还提供了一种协议测试的方法，本实施例以上面所述协议测试系统为本方法运行的载体和系统，需要说明的是，本方法发明所需载体并不以上述系统和模块为限。
在××产品的测试中，由于该产品中应用了弹性分组环(RPR：ResilientPacket Ring)特性，该特性必须在组成环的情况下才能完成验证该RPR协议的正确性，在现有技术中，为了验证RPR协议，必须搭建实际组网环境来实现，需要多套××产品，在每套产品中嵌入适配的测试代码，并进行实际的组网才能完成测试，测试过程费时费力，成本高昂，并且由于实际环境中其他特性的影响，还无法很完成的验证纯协议本身的正确性，对于协议的容错性也无法验证。
在本发明提供的协议测试方法中，采用如下步骤：
步骤302：进行虚拟组网配置。
本实施例以脚本的形式(当然也可以通过图形界面的方式进行配置)说明配置组网的情况。
| 源节点号 | 源端口号 | 目的节点号 | 目的端口号 |
| 1 | 1 | 1 | 1 |
| 2 | 1 | 1 | 1 |
| 1 | 2 | 3 | 2 |
| 3 | 2 | 1 | 2 |
| 2 | 2 | 3 | 1 |
| 3 | 1 | 2 | 2 |
表1
如表1的脚本所示，创建了一个3个设备(被测实体)组成的一个环，各参数的意义如下：
第一行：1121
第一个参数表示源节点号：1(可以根据需要定义)
第二个参数表示源端口号：1(可以根据需要定义)
第三个参数表示目的节点号：2(可以根据需要定义)
第四个参数表示目的端口号：1(可以根据需要定义)
如上的这一行配置表示，在节点1的端口1到节点2的端口1之间建立了一条通路，从节点1的端口1发出来的协议报文直接送到节点2的端口。
步骤303：根据虚拟组网情况，启动多个测试实体，通过配置启动各实体的协议。
如表1所示，配置了3个被测试实体组成的一个环，配置完成后，通过VCC自动启动这些测试实体，VCC可以根据配置脚本计算出被测试实体的个数，并启动这些测试实体，建立与测试实体的转发模块以及配置模块的SOCKET连接。
步骤304：通过执行器给被测试实体下发各种测试信令。
在测试的过程中，可能需要修改被测试实体的参数值并查询各测试实体的状态以及相关的参数值，VCC的配置模块读取执行器下发的信令，根据本身的自定义函数执行器下发的信令进行处理后下发给被测试实体的配置接口，再传至协议实体，对于需要转发的协议报文等信息，报文转发模块读取配置模块的组网配置情况，根据组网情况进行各个协议实体间的协议报文的转发。
步骤305：对被测试实体返回结果进行处理后发会执行器。
配置模块接受被测实体的执行结果，并根据用户的自定义函数，对执行结果进行分析处理后转发给执行器，从而得到测试结果。
在步骤302前，有时还需要根据实际情况对为测试实体配置参数并进行测试适配，即打桩并撰写测试适配代码即定义数据结构，在VCC中定义转发各测试实体间协议报文的数据结构。
在测试过程中还可以对协议报文进行各种统计、误码插入等辅助功能，验证协议实体的容错性。统计各节点各端口发送/接收的报文数，通过修改报文内容或者插入自己构造的报文测试被测试实体的容错性和稳定性。
本发明在协议测试系统中引入了VCC，从而不需要实际组网就可以实现对各被测试设备间协议实体正确性的测试，在没有本发明的情况下，必须使用实现的组网情况测试设备中协议的状态，在这种情况下，会经常发生由于其他模块的问题而导致验证协议正确性的活动无法进行下去的情况，并且在使用实际设备组网进行协议测试费时费力，采用本发明提高了协议测试效率，降低了协议测试成本。
本发明中提供了多种灵活的手段，允许用户在VCC中自定义相应函数处理执行体发送过来的数据，所以用户可以选用自己熟悉的执行器和编辑器执行和编辑测试项目，也就说，VCC对执行器和编辑器无任何依赖性，这给用户提供极大的方便性，减低了用户的学习成本，提高了测试效率。
通过VCC与相应的执行器配合使用，可以实现协议测试的自动化，这样只需要一次把测试项目写完，就可以供后续多个版本的测试验证，大大缩短了测试时间，减低了测试成本。
虽然通过参照本发明的某些优选实施例，已经对本发明进行了图示和描述，但本领域的普通技术人员应该明白，可以在形式上和细节上对其作各种各样的改变，而不偏离所附权利要求书所限定的本发明的精神和范围。
Claims (13)
1、一种协议测试系统，包括编辑器、执行器和一个以上的被测实体，其中所述编辑器编辑测试套并传送至所述执行器，执行器执行测试套，下发信令给被测实体，其特征在于还包括虚拟连接控制台，其中，
所述虚拟连接控制台模拟实际组网情况，对执行器下发的信令处理后下发给被测实体，并对被测实体返回的结果进行处理后发回执行器。
2.一种如权利要求1所述的协议测试系统，其特征在于所述虚拟连接控制台统计各被测实体发送或接收的报文数、修改报文内容或者插入自己构造的报文。
3、一种如权利要求1所述的协议测试系统，其特征在于所述虚拟连接控制台包括配置模块和报文转发模块，其中
所述配置模块模拟实际网络的组网配置；
所述报文转发模块读取所述配置模块中的组网配置数据，根据所述配置数据，完成对已经配置好的链路进行被测实体间的协议报文的转发。
4、如权利要求3所述的协议测试系统，其特征在于所述被测实体包括协议实体和配置接口。
5、如权利要求4所述的协议测试系统，其特征在于所述虚拟连接控制台的配置模块对所述协议实体的参数进行配置与查询。
6、如权利要求4所述的协议测试系统，其特征在于所述配置模块处理执行器发来的信令，并将所述信令传送至所述测试实体的配置接口，并通过所述配置接口下发到所述协议实体。
7、如权利要求1所述的协议测试系统，其特征在于所述虚拟连接控制台允许用户自定义函数，所述自定义函数用来处理执行器发送的相应数据。
8、一种协议测试方法，其特征在于，包括以下步骤：
A进行虚拟组网配置；
B根据所述虚拟组网配置，启动各个被测实体和各实体的协议；
C给所述被测实体下发测试信令；
D对所述被测实体返回的结果进行比较分析，判断是否通过测试。
9、如权利要求8所述的协议测试方法，其特征在于，在所述步骤A之前还包括为被测实体配置参数并进行测试适配。
10、如权利要求8所述的协议测试方法，其特征在于，所述步骤A进一步包括由用户下发配置信息进行虚拟组网配置。
11、如权利要求10所述的协议测试方法，其特征在于，所述的配置信息是脚本形式或图形界面的形式。
12、如权利要求8所述的协议测试方法，其特征在于，所述步骤C进一步包括，根据所述组网配置和所述测试信令，协议报文在各个被测实体间进行传递。
13、如权利要求8所述的协议测试方法，其特征在于，所述步骤C和D之间进一步包括：
修改被测试实体的参数值并查询各测试实体的状态以及相关的参数值；
对所述协议产生的报文进行统计或误码插入。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200410085379 CN1764131A (zh) | 2004-10-22 | 2004-10-22 | 一种协议测试系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200410085379 CN1764131A (zh) | 2004-10-22 | 2004-10-22 | 一种协议测试系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN1764131A true CN1764131A (zh) | 2006-04-26 |
Family
ID=36748093
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200410085379 Pending CN1764131A (zh) | 2004-10-22 | 2004-10-22 | 一种协议测试系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN1764131A (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100396031C (zh) * | 2006-08-07 | 2008-06-18 | 华为技术有限公司 | 一种对通信设备进行功能测试的系统及方法 |
| CN101316199B (zh) * | 2008-07-04 | 2011-01-05 | 中兴通讯股份有限公司 | Sdh设备模拟组网的方法及其装置 |
| CN102014016A (zh) * | 2010-08-31 | 2011-04-13 | 北京邮电大学 | 一种网络协议缺陷测试系统及方法 |
| CN102143414A (zh) * | 2011-05-20 | 2011-08-03 | 太仓市同维电子有限公司 | Epon中局端设备与终端设备间实现网络连接测试的方法 |
| CN101237454B (zh) * | 2008-01-30 | 2011-09-14 | 重庆重邮东电通信技术有限公司 | 协议消息编辑系统的设计方法及系统 |
| CN101577713B (zh) * | 2009-06-02 | 2012-07-04 | 中兴通讯股份有限公司 | 虚拟用户识别模块的实现方法、装置及测试系统 |
| CN103152216A (zh) * | 2011-12-07 | 2013-06-12 | 北京新媒传信科技有限公司 | 一种互联网中系统的测试方法和装置 |
| CN105227407A (zh) * | 2015-10-16 | 2016-01-06 | 邦讯技术股份有限公司 | 一种协议调试方法、装置及系统 |
| CN105577463A (zh) * | 2014-10-13 | 2016-05-11 | 阿里巴巴集团控股有限公司 | 一种基于通信协议的测试方法及其装置 |
-
2004
- 2004-10-22 CN CN 200410085379 patent/CN1764131A/zh active Pending
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100396031C (zh) * | 2006-08-07 | 2008-06-18 | 华为技术有限公司 | 一种对通信设备进行功能测试的系统及方法 |
| CN101237454B (zh) * | 2008-01-30 | 2011-09-14 | 重庆重邮东电通信技术有限公司 | 协议消息编辑系统的设计方法及系统 |
| CN101316199B (zh) * | 2008-07-04 | 2011-01-05 | 中兴通讯股份有限公司 | Sdh设备模拟组网的方法及其装置 |
| CN101577713B (zh) * | 2009-06-02 | 2012-07-04 | 中兴通讯股份有限公司 | 虚拟用户识别模块的实现方法、装置及测试系统 |
| CN102014016A (zh) * | 2010-08-31 | 2011-04-13 | 北京邮电大学 | 一种网络协议缺陷测试系统及方法 |
| CN102143414B (zh) * | 2011-05-20 | 2013-09-11 | 太仓市同维电子有限公司 | Epon中局端设备与终端设备间实现网络连接测试的方法 |
| CN102143414A (zh) * | 2011-05-20 | 2011-08-03 | 太仓市同维电子有限公司 | Epon中局端设备与终端设备间实现网络连接测试的方法 |
| CN103152216A (zh) * | 2011-12-07 | 2013-06-12 | 北京新媒传信科技有限公司 | 一种互联网中系统的测试方法和装置 |
| CN103152216B (zh) * | 2011-12-07 | 2016-08-10 | 北京新媒传信科技有限公司 | 一种互联网中系统的测试方法和装置 |
| CN105577463A (zh) * | 2014-10-13 | 2016-05-11 | 阿里巴巴集团控股有限公司 | 一种基于通信协议的测试方法及其装置 |
| CN105577463B (zh) * | 2014-10-13 | 2019-10-11 | 阿里巴巴集团控股有限公司 | 一种基于通信协议的测试方法及其装置 |
| CN105227407A (zh) * | 2015-10-16 | 2016-01-06 | 邦讯技术股份有限公司 | 一种协议调试方法、装置及系统 |
| CN105227407B (zh) * | 2015-10-16 | 2018-09-11 | 邦讯技术股份有限公司 | 一种协议调试方法、装置及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN100487664C (zh) | 在并行计算机数据通信网络中定位硬件故障的方法和设备 | |
| CN1859125A (zh) | 集中远程自动升级软件的系统及其方法 | |
| CN101055535A (zh) | 并行计算机和定位并行计算机中硬件故障的方法 | |
| CN1992635A (zh) | 模拟snmp网元及用该网元进行网管系统测试的方法 | |
| CN1173257A (zh) | 路由选择表信息的校验方法 | |
| CN1859327A (zh) | 一种消息传递的方法、装置和系统 | |
| CN1838011A (zh) | 基于can总线的分布式控制网络智能管理装置及管理方法 | |
| CN101034370A (zh) | 软件系统多用户特性测试方法和系统 | |
| CN101079757A (zh) | 一种宽带航空电子总线测试装置及其操作方法 | |
| CN1805381A (zh) | 一种多网元仿真测试系统及实现方法 | |
| CN1641601A (zh) | 一种软件的单元测试方法 | |
| CN1764131A (zh) | 一种协议测试系统及方法 | |
| CN107092559A (zh) | 基于Jmeter的测试平台中间件、测试系统及方法 | |
| CN101051918A (zh) | 实现业务请求的方法以及联机指令系统 | |
| CN115348126A (zh) | 一种网络靶场实体设备接入方法、装置及实现系统 | |
| CN1476191A (zh) | 一种基于分组数据业务流程的仿真实现方法及系统 | |
| CN100347990C (zh) | 基于存域网的海量存储系统的性能监控方法及系统 | |
| CN1490995A (zh) | 用于使无线网络与至少一个其他网络连接的设备 | |
| CN1780237A (zh) | 协议测试用逻辑拓扑网络及其实现协议测试的方法 | |
| CN101052194A (zh) | 一种实现本地维护终端维护远端射频终端的装置 | |
| CN113541929A (zh) | 基于配置的用于片上系统量子密钥分发控制系统的控制方法 | |
| CN1946035A (zh) | 一种网元数据配置管理的方法及网元 | |
| CN1138382C (zh) | 传输产品树状业务分配方法 | |
| CN101303706A (zh) | 一种建模工具和仿真工具间数据共享的方法及系统 | |
| CN114691513A (zh) | 自动化测试虚拟机技术实现多机跨平台自动化测试的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |