CN100356739C - 测试系统及方法 - Google Patents
测试系统及方法 Download PDFInfo
- Publication number
- CN100356739C CN100356739C CNB200510088630XA CN200510088630A CN100356739C CN 100356739 C CN100356739 C CN 100356739C CN B200510088630X A CNB200510088630X A CN B200510088630XA CN 200510088630 A CN200510088630 A CN 200510088630A CN 100356739 C CN100356739 C CN 100356739C
- Authority
- CN
- China
- Prior art keywords
- test
- automatization
- management system
- script
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 503
- 238000000034 method Methods 0.000 title claims abstract description 32
- 230000008569 process Effects 0.000 claims description 18
- 238000003860 storage Methods 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 4
- 238000010998 test method Methods 0.000 claims description 3
- 238000001914 filtration Methods 0.000 claims description 2
- 238000007726 management method Methods 0.000 description 108
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 239000000047 product Substances 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000006855 networking Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 238000011990 functional testing Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000013021 overheating Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明提供一种测试系统及其方法,该测试系统包括一个测试管理系统和至少一个自动化测试系统,其中测试管理系统和自动化测试系统通过网络相连接,其中所述测试管理系统包括自动化环境管理模块,用于接收或注销自动化测试系统中的包括自动化测试主机及被测试设备属性的相关信息;所述自动化测试系统包括启动注册模块,用来向所述测试管理系统发送本地的包括自动化测试主机及测试设备属性的信息。利用本发明所提供的系统,能实现自动化测试和手动测试的统一管理,及对分布式自动化环境的集中管理。
Description
技术领域
本发明涉及一种测试系统及方法,具体说涉及一种分布式自动化测试管理系统及方法。
背景技术
目前测试的发展中,测试流程管理和自动化测试是两大热点,前者解决了测试工作的规范性问题,后者则直接提升了测试效率。对于这两大方向,持续升温的热情直接导致众多工具和方法的涌现,测试流程管理的常用手段是测试管理系统,而自动化测试的常用工具则是自动化测试系统。
测试流程管理系统,是一个测试计划、测试例、测试结果的集中管理服务器,配备有强大的查询引擎,以满足用户对任意测试资料的查询和检索。
自动化测试系统,它与手动测试相比,最大的区别在于测试操作、预期测试结果都固化在测试脚本中。测试人员事先根据测试例定制好测试脚本,然后使用自动化测试系统自动将脚本下发到被测设备,并捕获设备侧的输出,通过将输出与固化在脚本中预期结果比较从而得出测试结论。考虑到整个测试过程无人值守,人力的释放导致了效率的提升。运行的测试脚本数越多,效率越高。
目前,业界主流的自动化测试管理体系通常由两部分组成,一部分是基于Web的测试流程管理系统,另一部分则是自动化测试系统。测试资料管理系统提供测试计划、自动测试例、测试执行结果的管理功能。自动化测试系统则是由标准配置的组网环境和测试脚本运行引擎组成。
该系统典型的操作流程如下:
1.用户先根据欲测试的功能从Web页面上选择适合的自动化环境;
2.指定需要执行的自动测试例集合;
3.系统将对应的测试脚本集下发到执行自动化测试的主机上;
4.自动化系统逐一运行脚本集中的每一脚本,并将运行结果填写到数据库中;
5.用户从Web页面查询到下发测试集的运行结果。
这种技术方案的缺点是:
●割裂了自动测试和手工测试,使测试管理不能成为闭环
这种自动化测试管理系统仅能管理测试工作中能够自动化的那部分,其它的手动测试部分被排除在外,所以无法根据其产生的结果给出产品版本评价。如测试经理在出版本测试报告时,必然要综合自动的功能测试结果和手动的系统测试结果,才能给出公正客观的评价。
●自动化测试系统采用标准组网,设备利用率不高
倘若待测的设备类型多,标准的自动化组网很难搭建,即便是硬搭建起来,环境的利用率也不会高,例如某公司有十种类型产品设备,则需要搭建十个标准自动化环境,而事实上对于一些设备的某些测试任务,环境是可以重复利用的,例如测试路由器和交换机的Ping功能,并不一定需要两个环境,或者说当测试多个型号的交换机时,某些空闲的环境本身也是可以利用的,但现有技术并没有考虑到这一点,更没有考虑到将这些环境统一管理,达到资源优化配置的目的。
●仅适合于专业自动化测试实验室集中管理
倘若公司的组织结构决定不能走专职自动化工程师集中测试的道路,本系统显然不能满足要求。
●不同的特性与不同的环境绑定,不够友好
●要求使用本系统测试的用户必须熟悉自动化系统的组网环境以及与之对应的特性集,否则无法顺利完成执行任务。
发明内容
本发明所要解决的技术问题是提供一种测试系统及其方法,能较好的解决了测试过程中的手动测试和自动化测试统一管理的问题。
为此,本发明提供一种测试系统,该系统包括一个测试管理系统和至少一个自动化测试系统,其中测试管理系统和自动化测试系统通过网络相连接,所述测试管理系统包括自动化环境管理模块,用于接收和注销自动化测试系统中的包括自动化测试主机及测试设备属性的相关信息;所述自动化测试系统包括
启动注册模块,用来向所述测试管理系统发送本地的包括自动化测试主机及测试设备属性的信息;
测试任务接收模块,用于接收从所述测试管理系统下发的任务信息;
测试脚本查询模块,用于根据所述接收的测试点编号信息筛选出需要执行的本地脚本对象集。
本发明的另一方面是提供一个通过网络连接自动化测试系统的测试管理系统,包括测试点、测试用例和脚本管理模块;测试任务管理模块,用于创建、管理测试任务;自动化环境管理模块,用于接收和注销所述自动化测试系统中的包括自动化测试主机及测试设备属性的信息。
进一步的,该系统还可以包括作状态查询模块,用于周期性的查询自动化测试系统的忙或闲状态;测试结果存储模块,用于接收自动化测试系统主机提交的测试结果并存储。
本发明的又一方面是提供一个通过网络连接测试管理系统的自动化测试系统,包括脚本执行模块,用来执行测试脚本;日志管理模块,用来记录每一测试脚本的详细执行过程;启动注册模块,用于向所述测试管理系统发送包括主机IP地址、忙闲信息注册消息。
另外,所述系统还可以包括
测试任务接收模块,用于在测试过程中从所述测试管理系统接收测试任务信息;测试脚本查询模块,用于按测试点编号检索自动化主机本地存储的测试脚本,筛选出本次执行的脚本对象集;结果回填模块,用于测试脚本执行完毕后,将测试结果信息回传给所述测试管理系统。
本发明的另一目的是提供一种测试方法,应用在包含测试管理系统服务器和与之相连接的至少一个自动化测试系统的测试环境中,所述自动化测试系统具有自动化测试系统主机和自动化环境,该方法包括如下步骤:
创建测试任务;
从自动化测试系统主机列表中选择设备类型适合的自动化测试主机;
下发测试任务到所述自动化测试系统主机;
所述自动化测试系统执行测试脚本;
回填测试结果给所述测试管理系统服务器。
其中,所述自动化测试系统主机启动时向所述测试管理系统服务器发送包括本机IP地址、所述自动化测试系统忙/闲信息和连接的自动化环境支持的被测设备类型相关信息;所述自动化测试系统主机注销时,所述测试管理系统服务器从本地数据库中删除所述主机的注册信息。
其中,所述自动化测试管理系统的用户端采用WEB界面。
本发明的另一目的是提供一种测试系统,其特征在于该系统包括:测试管理系统,用以管理测试系统,并提供人机交互接口;自动化测试系统,用以完成测试管理系统下发的至少一个测试任务,并向测试管理系统提供自身的资源信息;所述测试管理系统通过人机交互接口输出所述资源信息。
其中,所述自身的资源信息包括自动化测试系统主机的IP地址、所述自动化测试系统忙/闲信息和连接的自动化环境支持的被测设备类型相关信息;所述自动化测试系统周期性的发送所述自身资源信息。
另外,所述系统还包括报告生成模块,用于根据所述自动测试系统的测试结果和/或手动测试结果自动生成一份测试报告。
本发明提供的测试系统由于具有一个测试管理系统和至少一个自动化测试系统,所述测试管理系统中的自动化环境管理模块能够自动接收和注销自动化测试系统中的包括自动化测试主机及测试设备属性的相关信息;所述自动化测试系统中的启动注册模块,能够在自动化测试系统启动时,向所述测试管理系统发送本地的包括自动化测试主机及测试设备属性的信息,从而较好的将测试管理系统和自动化测试系统融合在一起,特别是可以同时管理多个自动化测试系统,协同工作。使得所提供的测试系统既具有自动化测试系统的自动化测试的方便,也能实现自动化测试和手动测试的统一管理。
另外,由于自动化环境的选择由系统自动完成,所以用户只需按自己的需要选择合适的测试例,完全不用关心自动化环境的组网,使用方便。由于自动化测试脚本集是部署在自动化测试系统主机上的,所以自动化测试系统本身可以脱离测试管理系统单独运行,从而提高了自动化测试环境的利用率。
本发明提供的测试方法中,由于测试管理系统能够将测试任务自动得下发到自动化测试系统中执行,自动化测试系统在测试脚本执行完毕后也能将测试结果回填到测试管理系统,因而能够将测试过程中的所有包括测试任务、测试用例、测试脚本及测试结果等统一管理,使得测试过程更加方便、快捷。
通过以下结合附图对本发明所进行的详细描述,本发明的优点将更加清楚。
附图说明
图1是本发明提供的测试系统的概要组成示意图。
图2是本发明的一个具体实施例中提供的测试管理系统结构的示意图。
图3是本发明的一个具体实施例中提供的自动化测试系统结构的示意图。
图4是本发明提供的测试方法的流程图。
具体实施方式
本发明的实质是将测试流程管理系统和自动化测试系统相组合成一个完整的测试系统,组合后的测试系统很好的融合了管理系统和自动化系统的各自优势,并使得测试过程的管理、测试结果的运用分析更加简便、快捷。进一步地说,本发明的精神在于,让自动化测试系统的把完成各种测试任务所需要的信息上传到测试管理系统上来,让测试人员直观地看到当前自动化测试系统的基本信息(如注册信息、脚本信息,主机忙闲信息,环境是否占用信息等),我们将这些基本信息定义为自动化测试系统的自身资源信息,根据这些资源信息,就能方便地选择自动化测试系统中的自动化测试主机和相应的测试环境;提高测试环境利用效率,另外由于本发明采用基于Web的管理方式,加上将脚本相关功能信息在管理系统中对测试人员是可见的;这大大降低了对测试人员专业知识的要求,实现的傻瓜化的操作,甚至普通的开发人员都可以胜任相应的测试任务。
需要说明的是,虽然本发明能有多种不同形式的实施方案,但是在了解本公开内容只是被用作发明原理的示范,而不意味着将本发明的广泛特征局限于在此说明的具体实施方案的基础上,本发明的优选实施方案将在图示中加以显示并对其进行具体描述。
通常,本申请说明书中的陈述不是必然限定任何不同的已要求权利的发明。而且,一些说明可以应用到某些发明特征而没有应用到其他特征。除非特别指出,否则为了不失通用性,通常模块可包含多个模块,反之亦然。
本发明将按照示范系统框图和程序流程图来进行适当描述。虽然这些项目足以指导本领域内普通技术人员领会本发明的意图,但它们不能被严格地解释为本发明范围的限制。本领域的普通技术人员会认识到系统框图可以在不失通用性的情况下可被重新组合和安排,并且程序步骤也可添加或删减并重新安排,以便在不失示教通用性的情况下达到相同的效果。因此,应该理解本领域内的技术人员可以根据想要达到的目的应用而对本发明所附示范系统框图和程序流程图进行修改。同时,本发明示范了可以达到所有发明目的的多种程序和流程,这些步骤可以同步或异步执行。因此,本发明的范围也就不只局限于已知流程的特定顺序。
图1示出了本发明的一个具体实施例中所提供的测试系统的概要组成示意图。在图1中,测试管理系统被部署在测试管理服务器2上,测试管理服务器2维护一个存储测试用例、测试脚本信息以及测试结果数据的数据库5,并和至少一个的自动化测试系统主机3通过网络进行了物理连接,每一个自动化测试主机连接到自己所属的自动化环境4,在这里自动化测试系统主机理论上可以是无限多。自动化测试系统(包括自动化测试系统主机3和相应的自动化环境4)可以只针对一个测试用例进行构建,也可以针对一个测试集进行构建。在本实施中,我们将每一个自动化测试系统分解对应最小的测试点,例如,自动化测试系统1用来测试交换机的性能而自动化测试系统2用来测试路由器的性能,这样使得系统的管理更加统一、方便。当然,本领域中的普通技术人员会毫无困难的知道,我们也可以将每一个自动化测试系统对应到N个测试点即N个测试例,组成一个测试集,从而完成一组功能,例如对交换机、路由器的同时测试。因此,不消说,这些简单的变化和组合都是包含在本发明保护范围之内的。
本领域中的普通技术人员已经对背景技术中所提到的测试管理系统非常熟悉。根据测试管理系统要实现的功能,常见的测试管理系统通常具备以下功能模块,即
●产品数据配置模块:用来配置需要被测试产品名称、产品各角色人员等。
●测试任务管理模块:即用来部署测试的任务,简单说来,其过程就是测试经理下发测试策略,测试工程师填写测试结果的过程。
●测试点、测试用例管理模块:用来管理实施要测试的目标和运用的测试手段的模块,这一般是测试管理系统的灵魂所在。
●度量分析模块:是以测试任务所产生的测试结果为依据进行评价,一般包含测试效率的衡量和测试质量分析两个方面。
参考图2,图2示出了本发明的一个具体实施例中所提供的测试管理系统的框架结构示意图。该系统除具备上述较为通用的功能模块如产品数据配置模块201、测试任务管理模块203及度量分析模块204外,最重要的是添加了自动化环境管理模块205以及对测试脚本的统一管理模块。可以得知,我们将测试脚本的统一管理纳入了测试点、测试用例管理模块形成了新的管理模块测试点、测试用例、测试脚本管理模块202,并增加了新的模块即自动化环境注册模块205、工作状态查询模块206和测试结果存储模块207。
自动化环境管理模块205的引入是很容易理解的,其主要作用就是系统启动时和自动化测试系统相联系并取得其注册信息以便纳入统一管理,以使得自动化测试系统所包含的各种信息在管理系统上是可见的,方便选择;同时在系统注销时取消已经注册的注册信息。
该模块的主要功能包括两个方面:
●接收自动化测试系统主机的注册信息
在自动化测试系统主机启动后,会主动向自动化管理模块发送注册消息,注册消息包含自动化测试系统主机IP地址、与主机直连的自动化测试环境支持的被测设备类型,这里通常用设备名称来命名。
例如:参数为(192.168.3.117,8040)注册消息表达的含义是IP为192.168.3.117的测试主机直连的环境是路由器测试环境,适合测试型号为8040的路由器产品。
自动化环境管理模块将接收到的注册消息存储在图1的数据库5中。
●接收自动化测试系统主机退出时发送的注销信息
这里的注销信息与前述的注册信息是成对出现的。但注销消息中仅包含自动化测试系统主机IP地址。自动化环境管理模块接收到的主机注销消息后,直接将其从图1的数据库5中删除。
工作状态查询模块206主要用来接收自动化测试系统主机周期性的忙/闲通告;
测试结果存储模块207主要用来接收自动化测试系统主机提交的测试结果,并将其存入数据库;
测试点、测试用例、测试脚本模块202中新增加了对测试脚本的统一管理功能。该功能的实现使得原来分散存放在各个不同自动化测试系统本地的测试脚本的信息能够被本系统所识别。其中的关键点是脚本版本的同步更新问题,在本发明的一个具体实施例中,每台自动化测试系统主机上都部署了与直连的自动化测试环境配套的自动化测试脚本。在本地的脚本更新后,测试主机会定期(例如每2个小时)向测试管理系统发送脚本更新消息,一个有效的更新消息可以是形如:
(192.168.3.117,8040,{脚本1,脚本2,脚本5,...})
其中,192.168.3.117为测试主机IP,8040是自动化测试环境支持的被测设备类型,{...}中记录则是测试主机上部署的、全部的脚本名称集合。
测试管理系统收到主机发送的脚本更新报文后,将其保存在图1的数据库5中,以主机IP和脚本名称作为关键字。
以上即是本发明所提供测试管理系统的概要阐述,总结上述测试管理系统的一般特征,可以得知,一般来说,本发明所提供的测试管理系统具备以下结构特征:
测试点、测试用例和脚本管理模块;测试任务管理模块,用于创建、管理测试任务;自动化环境管理模块,用于接收和注销所述自动化测试系统中的包括自动化测试主机及测试设备属性的信息。简单地说,测试人员在测试管理系统上就可以得知,自动化测试系统剩下哪些资源(这是自动化环境管理模块提供的),在这些资源上能做些什么(也就是说可以运行哪些脚本),更进一步地说,可以采用Web动态显示技术,让某些脚本的功能动态显示,让测试人员一目了然。需要说明的是,自动化环境管理模块和脚本管理模块只是逻辑上的划分,其完全可以集成在一个模块中,但逻辑上仍然是两个。
在背景技术中,我们也提到了自动化测试系统的一般组成及其原理。一般来说,自动化测试系统提供以下功能及其对应的模块,即
●脚本执行模块:用来执行测试脚本,一般是顺次执行自动化任务中指定的脚本对象集。
●日志管理模块:用来记录每一脚本的详细执行过程,包括但不限于测试例中每一步骤对设备的配置,设备侧终端响应等,它的主要作用在于脚本执行异常时的调试跟踪。
本发明所提供的自动化测试系统的概要组成结构可以参考图3。根据图3可以得知,该自动化测试系统(300)除包括脚本执行模块305和日志管理模块306外,为了和测试管理系统相协调,还增加了启动注册模块301和测试任务接收模块302、测试脚本查询模块303及结果回填模块304。
启动注册模块负责在系统启动时,向测试管理系统的自动化环境管理模块发送注册消息,告知测试管理系统有关本系统的自动化测试系统主机的信息,例如IP地址、连接的自动化环境支持的被测设备类型,以及环境是否已经被占用即本系统的忙/闲等信息。
测试任务接收模块302的主要功能是在测试过程中完成和测试管理系统的通讯,相关测试任务信息的收集,其主要功能可以概括先负责接收从测试管理系统下发的测试脚本执行任务信息,包括任务ID、待测的测试点编号等。
测试脚本查询模块303根据测试任务接收模块接收的测试任务信息,按测试点编号检索自动化主机本地存储的测试脚本,筛选出本次执行的脚本对象集。
结果回填模块304在每一特性的脚本执行完毕后,将结果信息回传给测试管理系统,以便让用户随时了解到自动化任务的进度。
总之,本领域中普通技术人员可以看出,一般来说,本发明所提供的自动化测试系统具备以下结构特征:
脚本执行模块,用来执行测试脚本;日志管理模块,用来记录每一测试脚本的详细执行过程;启动注册模块,用于向所述测试管理系统发送包括主机IP地址、忙闲信息注册消息。
以上我们简要介绍了本发明所提供的测试系统中的测试管理系统及自动化系统的概要组成及其结合的关键点和方法,由以上的描述可以看出,本发明所描述的测试系统由于融合了测试管理系统和自动化测试系统,因此实现了对测试的灵活、统一管理。
继续结合图1,本发明提供的测试系统的工作原理为,自动化测试系统启动后,会周期性的向测试管理系统发送注册消息,告知所在自动化测试系统的诸如主机IP、连接的环境支持的被测设备类型,以及环境是否已经被占用等信息。测试系统实施对测试任务的统一管理,用户先指定被测设备类型,然后按测试策略选择测试例集合(不区分自动还是手动),系统会根据用户提供的被测设备类型,选择一个空闲的、设备类型匹配的自动化环境,并将测试例集合下发到与环境相连的自动化测试主机上,自动化测试系统会从本地的测试脚本中筛选与下发测试例对应的形成本次任务的自动化测试脚本集,再下发到自动化环境中运行,并将运行结果回传给测试管理系统,由测试管理系统完成测试结果的入库工作。自动化测试完成后,再安排测试人员对没有填写结果的用例作一个覆盖,就圆满完成了一次产品版本测试工作。在此,本发明可选择提供一个报告生成模块,如果本次测试是全自动的,那报告直接自动生成;如果本次测试还需要加入手动的部分,只需要把结果填入测试管理系统(在Web页上即可),测试管理系统根据手动和自动的测试结果自动生成一份测试报告,从而省去了测试人员手动创建测试报告的过程。
需要提醒的是,本发明管理的自动化环境在地域上可以是分散的,只要测试管理系统服务器和自动化测试系统主机是连通的即可。
以下结合图4来简要描述本发明所提供的测试系统的具体工作流程。
在步骤S1,用户访问测试管理系统提供的测试任务管理界面,并创建一个产品测试任务。在本发明的一个实施例中,用户对测试管理系统服务器的访问是通过WEB页面进行的,也即是采用了较为流行的B/S结构。当然,此处用户对测试管理系统服务的访问也可以采用C/S结构,因此,不消说,这些变化是包含在本发明所要求保护的范围之内的。
在步骤S2,测试管理系统根据用户创建的测试任务的被测设备类型,从自动化测试系统主机列表中选择一个跟本测试任务相匹配的自动化测试系统。
在步骤S3,测试管理系统将创建的任务所属的测试用例全部下发到在步骤S2中筛选出的自动化测试系统所属的主机上。
在步骤S4,自动化测试系统的主机控制系统从本地存储的测试脚本集中筛选出欲测试的对象,下发到自动化环境中准备运行。
在步骤S5,自动化测试系统在自动化环境中执行测试脚本。
在步骤S6,自动化测试系统判断测试任务中的测试集是否执行完毕,若是则进入步骤S7,否则返回步骤S5,继续执行相应的测试脚本。
在步骤S7,自动化测试系统将测试脚本运行的测试结果回传给测试管理系统,由其存入数据库。
在步骤S8,用户在Web页面上访问该测试任务,能自动化的部分已经填写了测试结果,再手动测试任务中非自动化的部分,即完成一次产品测试任务。
综上所述,本发明所提供的测试系统和方法具有如下有益效果:
1.通过对所有测试资料的统一管理,实现了测试管理的闭环;
2.利用自动化测试系统启动时的注册机制,实现了对分布式自动化环境的集中管理;
3.自动化环境对应的测试集本地存放的策略,解决了测试脚本的更新问题。
Claims (11)
1.一种测试系统,包括一个测试管理系统和至少一个自动化测试系统,其中测试管理系统和自动化测试系统通过网络相连接,其特征在于:
所述测试管理系统包括自动化环境管理模块,用于接收或注销自动化测试系统中的包括自动化测试主机及被测试设备属性的相关信息;
所述自动化测试系统包括
启动注册模块,用来向所述测试管理系统发送本地的包括自动化测试主机及测试设备属性的信息;
测试任务接收模块,用于接收从所述测试管理系统下发的任务信息;
测试脚本查询模块,用于根据所述接收的测试点编号信息筛选出需要执行的本地脚本对象集。
2.如权利要求1所述的测试系统,其特征在于所述测试管理系统还包括:
工作状态查询模块,用于周期性的查询自动化测试系统的忙或闲状态;
测试结果接收模块,用于接收自动化测试系统主机提交的测试结果并存储。
3.如权利要求1所述的测试系统,其特征在于所述自动化测试系统还包括:
测试结果回填模块,用于将测试结果信息回传给所述测试管理系统。
4.如权利要求1所述的测试系统,其特征在于:所述任务信息包括任务编号、测试点编号信息。
5.一个通过网络连接自动化测试系统的测试管理系统,包括
测试点、测试用例和脚本管理模块;
测试任务管理模块,用于创建、管理测试任务;
其特征在于所述测试管理系统还包括
自动化环境管理模块,用于接收和注销所述自动化测试系统中的包括自动化测试主机及测试设备属性的信息。
6.如权利要求5所述的测试管理系统,其特征在于该系统还包括
工作状态查询模块,用于周期性的查询自动化测试系统的忙或闲状态;
测试结果存储模块,用于接收自动化测试系统主机提交的测试结果并存储。
7.一个通过网络连接测试管理系统的自动化测试系统,包括
脚本执行模块,用来执行测试脚本;
日志管理模块,用来记录每一测试脚本的详细执行过程;
其特征在于该系统还包括
启动注册模块,用于向所述测试管理系统发送包括主机IP地址、忙闲信息注册消息;
测试任务接收模块,用于在测试过程中从所述测试管理系统接收测试任务信息;
测试脚本查询模块,用于按测试点编号检索自动化主机本地存储的测试脚本,筛选出本次执行的脚本对象集。
8.如权利要求7所述的自动化测试系统,其特征在于所述系统还包括
结果回填模块,用于测试脚本执行完毕后,将测试结果信息回传给所述测试管理系统。
9.一种测试方法,应用在包含测试管理系统服务器和与之相连接的至少一个自动化测试系统的测试环境中,所述自动化测试系统具有自动化测试系统主机和自动化环境,其特征在于包括如下步骤:
创建测试任务;
从已经在测试管理系统服务器上注册的自动化测试系统主机列表中选择设备类型适合的自动化测试主机;
下发测试任务到所述自动化测试系统主机;
所述自动化测试系统执行测试脚本;
回填测试结果给所述测试管理系统服务器。
10.如权利要求9所述的方法,其特征在于所述自动化测试系统主机启动时向所述测试管理系统服务器发送包括本机IP地址、所述自动化测试系统忙/闲信息和连接的自动化环境支持的被测设备类型相关信息;所述自动化测试系统主机注销时,所述测试管理系统服务器从本地数据库中删除所述主机的注册信息。
11.如权利要求9或10所述的方法,其特征在于所述自动化测试管理系统的用户端采用WEB界面。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB200510088630XA CN100356739C (zh) | 2005-07-29 | 2005-07-29 | 测试系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB200510088630XA CN100356739C (zh) | 2005-07-29 | 2005-07-29 | 测试系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1731748A CN1731748A (zh) | 2006-02-08 |
CN100356739C true CN100356739C (zh) | 2007-12-19 |
Family
ID=35964056
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB200510088630XA Expired - Fee Related CN100356739C (zh) | 2005-07-29 | 2005-07-29 | 测试系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100356739C (zh) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100446473C (zh) * | 2006-05-26 | 2008-12-24 | 华为技术有限公司 | 一种网络维测方法 |
CN100450255C (zh) * | 2007-02-05 | 2009-01-07 | 浪潮乐金信息系统有限公司 | 无线网络集中监控业务中交叉测试验证可靠性的方法 |
CN102546300B (zh) * | 2007-12-29 | 2015-02-04 | 中国移动通信集团公司 | 测试系统及操作域设备 |
CN102098190B (zh) * | 2011-02-22 | 2013-05-15 | 浪潮(北京)电子信息产业有限公司 | 一种Web项目的自动开发测试系统及方法 |
CN102651700A (zh) * | 2011-02-28 | 2012-08-29 | Sap股份公司 | 管理测试自动化 |
CN102255748B (zh) * | 2011-06-27 | 2017-12-29 | 中兴通讯股份有限公司 | 自动化测试系统及方法、版本服务器、以及终端 |
CN102420714B (zh) * | 2011-08-29 | 2014-12-31 | 展讯通信(上海)有限公司 | 测试管理方法、测试管理系统总控制中心及测试管理系统 |
CN103298016B (zh) * | 2012-02-27 | 2016-12-14 | 展讯通信(上海)有限公司 | 移动终端的测试系统 |
CN103580907B (zh) * | 2012-08-06 | 2017-06-30 | 卓望数码技术(深圳)有限公司 | 一种对数字设备执行测试任务的管理方法 |
CN103678093B (zh) * | 2012-08-30 | 2017-12-22 | 腾讯科技(深圳)有限公司 | 一种自动化测试框架及测试方法 |
CN104660431B (zh) * | 2013-11-21 | 2019-01-15 | 中兴通讯股份有限公司 | 一种网络告警方法、设备及终端 |
CN103795707B (zh) * | 2013-12-20 | 2017-08-01 | 中国电建集团成都勘测设计研究院有限公司 | 企业网络安全自动化测试系统及方法 |
CN104778120A (zh) * | 2015-03-20 | 2015-07-15 | 四川长虹电器股份有限公司 | 基于任务类型与设备型号的综合调试方法及系统 |
CN105117311A (zh) * | 2015-08-07 | 2015-12-02 | 北京思特奇信息技术股份有限公司 | 一种系统部署环境检查方法及系统 |
CN106452937A (zh) * | 2015-08-17 | 2017-02-22 | 中兴通讯股份有限公司 | 路由器自动化测试方法和测试装置 |
CN105260297B (zh) * | 2015-09-14 | 2017-12-05 | 上海斐讯数据通信技术有限公司 | 一种测试数据管理系统及方法 |
CN105320600A (zh) * | 2015-11-26 | 2016-02-10 | 上海斐讯数据通信技术有限公司 | 一种基于自动化测试平台的测试用例执行监测方法及系统 |
CN110347584B (zh) * | 2019-05-27 | 2023-11-07 | 平安银行股份有限公司 | 信用卡策略包的测试调整方法、装置、电子设备及介质 |
CN113407400A (zh) * | 2021-06-17 | 2021-09-17 | 哲库科技(北京)有限公司 | 自动化测试的调度系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010012986A1 (en) * | 2000-02-04 | 2001-08-09 | Conan Chan Ming Yam Terence | Automated testing of computer system components |
CN1558615A (zh) * | 2004-01-14 | 2004-12-29 | 中国科学院计算技术研究所 | 一种物理网络拓扑发现系统及其方法 |
-
2005
- 2005-07-29 CN CNB200510088630XA patent/CN100356739C/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010012986A1 (en) * | 2000-02-04 | 2001-08-09 | Conan Chan Ming Yam Terence | Automated testing of computer system components |
CN1558615A (zh) * | 2004-01-14 | 2004-12-29 | 中国科学院计算技术研究所 | 一种物理网络拓扑发现系统及其方法 |
Non-Patent Citations (2)
Title |
---|
自动化功能测试之工具选择和实施 东方海外QA组.程序员,第11期 2003 * |
自动化功能测试的方法与实现 陈计喜,姜丽红.计算机工程,第30卷增刊卷 2004 * |
Also Published As
Publication number | Publication date |
---|---|
CN1731748A (zh) | 2006-02-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100356739C (zh) | 测试系统及方法 | |
Krylovskiy et al. | Designing a smart city internet of things platform with microservice architecture | |
CN102655532B (zh) | 分布式异构虚拟资源集成管理方法及系统 | |
CN101727389B (zh) | 一种分布式综合业务自动化测试系统及方法 | |
CN101178687B (zh) | 软件回归测试的方法 | |
CN102819557B (zh) | 数据查询处理装置和数据查询处理方法 | |
CN101826979A (zh) | 一种智能家电系统 | |
CN102821162A (zh) | 云计算网络环境下面向松散云节点新型服务平台的系统 | |
CN100512158C (zh) | 网络测量体系结构及其实现测量的方法 | |
CN102801812A (zh) | 松散网络环境下新型云服务组件管理的系统与方法 | |
CN104683164A (zh) | 简化的配置项关联模型生成监控拓扑图的方法 | |
CN101808356A (zh) | 用于td-scdma终端协议一致性测试的协议模拟系统 | |
CN101834750A (zh) | 一种通用业务监控方法 | |
CN101854343A (zh) | 提供节点信息的方法、获取节点信息的方法及设备 | |
CN102222112B (zh) | 资源管理装置和资源管理方法 | |
CN105446724A (zh) | 软件参数的管理方法及装置 | |
CN107896242B (zh) | 一种服务共享方法及装置 | |
CN117041179A (zh) | 算力网络开通方法、装置及存储介质 | |
CN102932825B (zh) | 网络运维的方法及装置 | |
CN102006181A (zh) | 一种智能家电在线升级的方法 | |
CN102111910A (zh) | 一种基于SOA的ZigBee无线传输网络系统构建方法及系统 | |
CN102461067A (zh) | 供通信网络的网络管理中使用的方法和系统 | |
Filippone et al. | Synthesis of context‐aware business‐to‐business processes for location‐based services through choreographies | |
CN104298795A (zh) | 一种通用的数据模型建模工具系统 | |
CN112698951A (zh) | 一种云计算环境下基于资源进行性能采集自动化配置的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address |
Address after: 310052 Binjiang District Changhe Road, Zhejiang, China, No. 466, No. Patentee after: NEW H3C TECHNOLOGIES Co.,Ltd. Address before: 310053, Zhejiang hi tech Industrial Development Zone, Hangzhou hi tech Industrial Park, No. six and No. 310 HUAWEI Hangzhou production base Patentee before: HANGZHOU H3C TECHNOLOGIES Co.,Ltd. |
|
CP03 | Change of name, title or address | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20071219 |
|
CF01 | Termination of patent right due to non-payment of annual fee |