CN114268569A - 一种可配置的网络运维验收测试方法及装置 - Google Patents
一种可配置的网络运维验收测试方法及装置 Download PDFInfo
- Publication number
- CN114268569A CN114268569A CN202010974213.XA CN202010974213A CN114268569A CN 114268569 A CN114268569 A CN 114268569A CN 202010974213 A CN202010974213 A CN 202010974213A CN 114268569 A CN114268569 A CN 114268569A
- Authority
- CN
- China
- Prior art keywords
- test
- login
- result
- log
- ping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012423 maintenance Methods 0.000 title claims abstract description 33
- 238000010998 test method Methods 0.000 title claims abstract description 24
- 238000012360 testing method Methods 0.000 claims abstract description 529
- 238000000034 method Methods 0.000 claims abstract description 29
- 238000004590 computer program Methods 0.000 claims abstract description 26
- 230000009471 action Effects 0.000 claims abstract description 7
- 238000004458 analytical method Methods 0.000 claims description 37
- 230000002159 abnormal effect Effects 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 8
- 230000000977 initiatory effect Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 abstract description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000013095 identification testing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开一种可配置的网络运维验收测试方法及装置,其中,该方法包括:导入测试对象,配置测试项,建立测试任务和执行测试动作这四个步骤。该方法及装置通过将验收测试对象和测试项进行提炼归类,再利用计算机程序的方式将验收测试任务进行实现,可用于处理运维人员日常所做的大部分验收测试工作,自动生成标准格式的报告,且比人工的方式准确率高,给运维人员提供了绝对的便利。
Description
技术领域
本发明涉及运维验收测试领域,尤其是一种可配置的网络运维验收测试方法及装置。
背景技术
对于运维人员来说,验收测试时由于服务器和设备的数量很多,再加上各项目要求的验收项可能不同,导致每一次手工的重复性操作量较大,结果分析时也容易出现失误需要再次确认的情况。
发明内容
为了克服上述技术问题,本发明提供一种可配置的网络运维验收测试方法及装置,将测试对象分类梳理,将测试项归类及拆分,将各项验收测试的零散的需求程序化。
为实现上述目的,本发明采用下述技术方案:
在本发明一实施例中,提出了一种可配置的网络运维验收测试方法,该方法包括:
步骤一,导入测试对象
测试对象分为三种类型:服务器、设备和IP地址;
步骤二,配置测试项
测试项分为四种类型:ping测试、登陆测试、执行命令集和执行命令集并分析;
步骤三,建立测试任务
测试对象和测试项进行任意组合,该测试对象支持多选,即可生成一个测试任务;
步骤四,执行测试动作
测试任务的实际执行通过计算机程序逻辑实现,得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准格式的验收测试报告。
进一步地,测试对象的表结构包含以下字段:
测试对象标识、测试对象类型、测试对象名称、测试对象IP、测试对象型号、登陆方式、登陆端口号、用户名称、密码、登陆后提示符和创建时间。
若测试对象类型为IP地址,则无登陆相关信息字段。
进一步地,ping测试是指对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
登陆测试是指对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
执行命令集是指在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
执行命令集并分析是指在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断。
进一步地,测试项的表结构包含以下字段:
测试项编码、测试项名称和测试类型。
更进一步地,测试项的表结构还包含以下字段:
测试项编码、测试对象型号、命令集、结果截取规则、结果判断规则和参考值。
进一步地,测试任务的表结构包含以下字段:
任务标识、测试项、测试对象标识和创建时间。
进一步地,计算机程序实现逻辑,包括:
(1)根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表;
(2)测试项若为ping测试
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址;
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型,从测试项扩展表中获取ping命令,然后循环执行ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,判定服务器操作系统,再得到相应的ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
(3)测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告;
(4)测试项若为执行命令集,先做登陆测试,登陆成功后再顺序执行命令集中的命令,将所有日志拼接在一起,记录日志和结果到日志表中,并生成测试报告;
(5)测试项若为执行命令集并分析,在执行命令集的基础上,根据结果截取规则和结果判定规则分析日志,得到正常或异常的结论,记录日志和结果到日志表中,并生成测试报告。
更进一步地,日志表的结构包含以下字段:
任务标识、执行时间、测试项、测试对象标识、测试对象名称、测试对象IP、源地址、执行日志、结果截取和结果状态。
在本发明一实施例中,还提出了一种可配置的网络运维验收测试装置,该装置包括:
测试对象导入模块,用于导入测试对象,该测试对象分为三种类型:服务器、设备和IP地址;
测试项配置模块,用于配置测试项,该测试项分为四种类型:ping测试、登陆测试、执行命令集和执行命令集并分析;
测试任务建立模块,用于将测试对象和测试项进行任意组合,该测试对象支持多选,即可生成一个测试任务;
测试动作执行模块,用于通过计算机程序逻辑实现测试任务的实际执行,得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准格式的验收测试报告。
进一步地,测试对象的表结构包含以下字段:
测试对象标识、测试对象类型、测试对象名称、测试对象IP、测试对象型号、登陆方式、登陆端口号、用户名称、密码、登陆后提示符和创建时间。
若测试对象类型为IP地址,则无登陆相关信息字段。
进一步地,ping测试是指对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
登陆测试是指对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
执行命令集是指在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
执行命令集并分析是指在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断。
进一步地,测试项的表结构包含以下字段:
测试项编码、测试项名称和测试类型。
更进一步地,测试项的表结构还包含以下字段:
测试项编码、测试对象型号、命令集、结果截取规则、结果判断规则和参考值。
进一步地,测试任务的表结构包含以下字段:
任务标识、测试项、测试对象标识和创建时间。
进一步地,计算机程序实现逻辑,包括:
(1)根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表;
(2)测试项若为ping测试
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址;
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型,从测试项扩展表中获取ping命令,然后循环执行ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,判定服务器操作系统,再得到相应的ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
(3)测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告;
(4)测试项若为执行命令集,先做登陆测试,登陆成功后再顺序执行命令集中的命令,将所有日志拼接在一起,记录日志和结果到日志表中,并生成测试报告;
(5)测试项若为执行命令集并分析,在执行命令集的基础上,根据结果截取规则和结果判定规则分析日志,得到正常或异常的结论,记录日志和结果到日志表中,并生成测试报告。
更进一步地,日志表的结构包含以下字段:
任务标识、执行时间、测试项、测试对象标识、测试对象名称、测试对象IP、源地址、执行日志、结果截取和结果状态。
在本发明一实施例中,还提出了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现前述可配置的网络运维验收测试方法。
在本发明一实施例中,还提出了一种计算机可读存储介质,计算机可读存储介质存储有执行可配置的网络运维验收测试方法的计算机程序。
有益效果:
本发明通过将验收测试对象和测试项进行提炼归类,再利用计算机程序的方式将验收测试任务进行实现,可用于处理运维人员日常所做的大部分验收测试工作,自动生成标准格式的报告,且比人工的方式准确率高,给运维人员提供了绝对的便利。
附图说明
图1是本发明一实施例的可配置的网络运维验收测试方法流程示意图;
图2是本发明一实施例的可配置的网络运维验收测试装置结构示意图;
图3是本发明一实施例的计算机设备结构示意图。
具体实施方式
下面将参考若干示例性实施方式来描述本发明的原理和精神,应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明,而并非以任何方式限制本发明的范围。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道,本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
根据本发明的实施方式,提出了一种可配置的网络运维验收测试方法及装置,在实现上主要分为三块:
1、测试对象,分为三类:服务器、设备、IP地址(无登陆信息);
2、测试项,分为四类:Ping测试、登陆测试(支持ssh/telnet两种登陆方式)、执行命令集但不判断内容、执行命令集并对结果做简单分析;
3、测试任务:测试对象和测试项进行任意组合(测试对象支持多选),生成一个需要的测试任务。点击执行任一测试任务,将得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准给是的验收测试报告。
另外,服务器支持多种unix操作系统,设备按照厂家(例如中兴、华为等)和型号等进行拆分,本发明可支持当前所有主流型号的设备。
下面参考本发明的若干代表性实施方式,详细阐释本发明的原理和精神。
图1是本发明一实施例的可配置的网络运维验收测试方法流程示意图。如图1所示,该流程包括:
开始,入参:任务标识,是否为ping测试,否则逐个尝试登陆测试对象,登陆是否成功;
登陆失败则记录日志,生成测试报告,结束;
登陆成功则是否需要执行命令集,不需要则记录日志,生成测试报告,结束;
需要则执行命令集,是否需要简易分析结果,不需要则记录日志,生成测试报告,结束;
需要则分析和判断结果,记录日志,生成测试报告,结束;
是则入参是否指定源地址,执行ping测试命令,记录日志,生成测试报告,结束;
指定源地址,登陆源地址对应的设备或服务器,登陆是否成功,登陆成功则执行ping测试命令,记录日志,生成测试报告,结束;
登陆失败则记录日志,生成测试报告,结束。
对于运维人员的验收测试需求而言,实际可分解为导入测试对象、配置测试项、建立测试任务和执行测试动作这四个步骤。
以下内容做出详细阐述:
1、测试对象
分析常见的验收测试对象时发现,主要可分为三种类型:
服务器:按照操作系统可进一步细分为Linux、SunOS等;
设备:可根据厂商和型号进一步细分;
IP地址:不用关心具体对象属性,只做ping测试时均可归为此类。
(1)测试对象表结构,见下表1:
表1验收测试对象表—check_target
备注:若测试对象类型为IP地址,则无需填写登陆相关信息字段(login_type到prompt)。
(2)测试对象举例如下表2:
表2测试对象表(举例)
A.服务器—host
HOS001和HOS002分别表示两种操作系统的服务器设备,服务器登录方式一般为ssh,缺省端口号为22,缺省登录后提示符为$,填写时用\$中反斜线表示转义,避免计算机程序将其当做特殊符号处理。
B.设备—device
DEV001和DEV002表示为不同的厂商和型号的两种设备,本专利中可支持当前所有主流型号的设备,此处仅举例两种进行说明。设备登录方式可以为telnet或ssh,根据实际登录信息进行填写即可。
C.IP地址—ip
IP地址不需要填写登录信息,仅作为测试项为PING的测试对象,具体IP可支持三种写法:IPv4地址、IPv4地址段、url(网址)。
2、测试项
验收测试项可以是确认硬件配置与设计是否一致,例如CPU、内存、硬盘、电源、风扇、端口等;也可以是确认设备状态(ping状态、登录状态等)、设备温度,状态灯颜色是否正常,是否有硬件异常告警信息等等。总之测试项五花八门,但从功能实现的角度区分大致可以分为下面这四种测试类型:
ping测试:对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
登陆测试:对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
执行命令集:在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
执行命令集并分析:在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断,例如判断其是否大于或小于某个阀值或者是否匹配某个关键字。
(1)测试项规则表结构如下表3和表4:
表3验收测试项表—check_item
表4验收测试项扩展表—check_item_ext
(2)测试项配置举例见下表5:
表5测试项表(举例)
A.ping测试
按照测试对象型号举例3种情况的扩展表填法如下表6:
表6三种情况的扩展表(举例)
命令集:ping测试一般只有一条命令,根据服务器的操作系统不同,或设备的型号不同,ping命令各不相同。但主要参数基本包括测试对象的ip地址,ping测试的包个数、包大小等,若需其他参数也可在命令行中按需进行调整。固定在命令中用{ip}表示测试对象的IP地址,在执行任务时会将{ip}替换成测试对象的真实IP后再执行。
结果截取规则:ping测试结果中一般会包含丢包率多少或者成功率多少的结论,例如:
----www.baidu.com PING Statistics----
5packets transmitted,0packets received,100%packet loss
以上结论表示发送了5个包,收到0个包,丢包率100%。我们用正则表达式“([\d\.]+)%packet loss”的写法做分析,将会得到丢包率的数值“100”。
结果判定规则:对于ping测试分析得到的丢包率或成功率,我们只需要再做大于等于,或小于等于某个阀值的判定即可得到结论,例如上面的丢包率100,我们使用判定规则“<=80”无法满足,即表示判定为失败,结论将为ping测试异常。
参考值:只用做验收测试报告的对比展示,不填不影响分析。
B.登陆测试
服务器或设备的登陆测试,只需用到登陆方式和用户名密码等,不用另外填写测试项扩展表。
C.执行命令集
按照测试对象型号举例几种情况的扩展表填法如下表7:
表7四种情况的扩展表(举例)
测试项编码 | 测试对象型号 | 命令集 |
DEVNAME | Linux | hostname |
DEVNAME | SunOS | hostname |
DEVNAME | M6000 | showhostname |
VERSION | M6000 | showversion |
由于不对结果做分析判断,所以扩展表中的结果截取规则和结果判定规则等均不用填写。
D.执行命令集并分析
分析的核心算法,与对ping测试结果的分析算法一致,支持正则表达式的截取规则。另外,结果判定规则是由带参数的算式组成,举例如下表8:
表8两种情况的扩展表(举例)
第一个例子,对应Linux的服务器,命令为free,执行结果例如:
-bash-4.1$free
total used free shared buffers cached
截取规则“Mem:\s+(\d+)\s+(\d+)”将得到上面的两个数值65957300和52151072,分别存入变量$1和$2中,表示内存的总大小和已使用大小。再替换到结果判定规则“sprintf("%.2f",$2/$1*100)<=90”中,算式左边得到的是内存的已使用百分比,跟右边的阀值90进行比较,若小于等于90则正常,否则判定为异常。
第二个例子,对应SunOS的服务器,需要执行的是两条命令,得到的结果类似再做相应的分析和判断。
3、测试任务
任意选择已配的测试对象(支持多选),再选择测试项,即可生成一个测试任务。
(1)测试任务表结构见下表9:
表9验收测试任务表—check_task
(2)测试任务举例:
A.ping测试
例如一个ping测试任务如下表10,测试对象可以选任意测试对象(测试对象表中任意记录):
表10ping测试任务表(举例)
任务标识 | 测试项 | 测试对象标识 |
TASK001 | PING | IP0001 |
TASK001 | PING | IP0002 |
TASK001 | PING | IP0003 |
若测试对象对应是一个IP地址段,在实际执行ping测试时计算机程序会将其分解成每个具体的IP地址进行ping测试。例如192.168.0.1-192.168.0.3将分解成3个IP地址:192.168.0.1、192.168.0.2、192.168.0.3。
B.登陆测试、执行命令集、执行命令集并分析
这三种测试只允许选择服务器或设备,因为测试对象表中IP地址类型的记录中不存在登陆信息,无法进行登陆以及更进一步的执行命令和结果分析。
一个登陆测试的任务举例如下表11,其他任务只是测试项不同,其他类似:
表11登陆测试的任务表(举例)
任务标识 | 测试项 | 测试对象标识 |
TASK002 | LOGIN | HOS001 |
TASK002 | LOGIN | HOS002 |
TASK002 | LOGIN | DEV001 |
TASK002 | LOGIN | DEV002 |
4、执行任务
测试任务的实际执行,通过计算机程序逻辑实现,每个测试任务按需点击即可立刻执行测试。
输入参数:任务标识(必填)、源地址(选填,主要为ping测试时使用,若填写需为测试对象表中的服务器或设备的IP地址)
计算机程序实现逻辑:
根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表。
测试项若为ping测试:
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址。
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型(服务器操作系统或设备类型),从测试项扩展表中获取ping命令,然后循环执行ping命令(执行命令前需替换{ip}为测试对象的实际ip地址),根据截取规则和判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告。
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,也需判定服务器的操作系统,再得到相应的ping命令,其他过程一样。
测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告。
测试项若为执行命令集,需先做登陆测试,登陆成功的前提下再顺序执行命令集中的命令,将所有日志拼接在一起,只要登录成功,执行命令一定成功。同样需记录日志和结果到日志表中,并生成测试报告。
测试项若为结果简易分析,需在执行命令集的基础上,再增加根据截取规则和判定规则分析日志的步骤,得到正常或异常的结论。记录日志和出报告的逻辑同前面一样。
(1)测试任务日志表结构见下表12:
表12验收测试任务日志表—check_task_log
(2)测试报告举例
以一个ping测试的结果报告为例说明,分为三个sheet:
第一个sheet为汇总信息(含总数、异常数、正常数)见下表13:
表13汇总信息表
总数 | 异常数 | 正常数 |
33 | 27 | 6 |
第二个sheet只显示结果状态为异常的记录(实际报告中的行数跟汇总表格中的异常数一致,以下表格的两行记录只做示意)见下表14:
表14结果状态为异常的记录表
第三个sheet显示全部测试记录情况:(实际报告中的行数跟汇总表格中的中数一致,以下表格的三行记录只做示意)见下表15:
表15全部测试记录表
需要说明的是,尽管在上述实施例及附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
为了对上述可配置的网络运维验收测试方法进行更为清楚的解释,下面结合一个具体的实施例来进行说明,然而值得注意的是该实施例仅是为了更好地说明本发明,并不构成对本发明不当的限定。
下面以一个具体实例来更加详细的对可配置的网络运维验收测试方法进一步说明:
实例:
1、测试对象
数据库表check_target中的内容(以下表格未体现无内容的字段)见下表16:
表16数据库表check_target
2、测试项
数据库表check_item中的内容见下表17:
表17数据库表check_item
item_code | item_name | check_type |
PING | ping测 | ping |
数据库表check_item_ext中的内容见下表18:
表18数据库表check_item_ext
3、测试任务
数据库表check_task中的内容见下表19:
表19数据库表check_task
task_id | item_code | target_id | create_time |
TASK0001 | PING | IP0003 | 2020-03-1810:02:35 |
TASK0001 | PING | IP0004 | 2020-03-1810:02:35 |
TASK0001 | PING | IP0005 | 2020-03-1810:02:35 |
TASK0001 | PING | IP0006 | 2020-03-1810:02:35 |
TASK0001 | PING | IP0007 | 2020-03-1810:02:35 |
TASK0001 | PING | IP0008 | 2020-03-1810:02:35 |
TASK0001 | PING | IP001 | 2020-03-1810:02:35 |
TASK0001 | PING | IP002 | 2020-03-1810:02:35 |
TASK0001 | PING | PINGTEST | 2020-03-1810:02:35 |
4、测试报告
第一个sheet见下表20:
表20汇总信息表
总数 | 异常数 | 正常数 |
33 | 27 | 6 |
第二个sheet(实际报告中的行数跟汇总表格中的异常数一致,以下表格的两行记录只做示意)见下表21:
表21结果状态为异常的记录表
第三个sheet(实际报告中的行数跟汇总表格中的中数一致,以下表格的三行记录只做示意)见下表22:
表22全部测试记录表
基于同一发明构思,本发明还提出一种可配置的网络运维验收测试装置。该装置的实施可以参见上述方法的实施,重复之处不再赘述。以下所使用的术语“模块”,可以是实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图2是本发明一实施例的可配置的网络运维验收测试装置结构示意图。如图2所示,该装置包括:
测试对象导入模块101,用于导入测试对象,该测试对象分为三种类型:服务器、设备和IP地址;
测试对象的表结构包含以下字段:
测试对象标识、测试对象类型、测试对象名称、测试对象IP、测试对象型号、登陆方式、登陆端口号、用户名称、密码、登陆后提示符和创建时间;
若测试对象类型为IP地址,则无登陆相关信息字段。
测试项配置模块102,用于配置测试项,该测试项分为四种类型:ping测试、登陆测试、执行命令集和执行命令集并分析;
ping测试是指对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
登陆测试是指对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
执行命令集是指在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
执行命令集并分析是指在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断。
测试项的表结构包含以下字段:
测试项编码、测试项名称和测试类型。
测试项的表结构还包含以下字段:
测试项编码、测试对象型号、命令集、结果截取规则、结果判断规则和参考值。
测试任务建立模块103,用于将测试对象和测试项进行任意组合,该测试对象支持多选,即可生成一个测试任务;
测试任务的表结构包含以下字段:
任务标识、测试项、测试对象标识和创建时间。
测试动作执行模块104,用于通过计算机程序逻辑实现测试任务的实际执行,得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准格式的验收测试报告;
计算机程序实现逻辑,包括:
(1)根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表;
(2)测试项若为ping测试
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址;
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型,从测试项扩展表中获取ping命令,然后循环执行ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,判定服务器操作系统,再得到相应的ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
(3)测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告;
(4)测试项若为执行命令集,先做登陆测试,登陆成功后再顺序执行命令集中的命令,将所有日志拼接在一起,记录日志和结果到日志表中,并生成测试报告;
(5)测试项若为执行命令集并分析,在执行命令集的基础上,根据结果截取规则和结果判定规则分析日志,得到正常或异常的结论,记录日志和结果到日志表中,并生成测试报告。
日志表的结构包含以下字段:
任务标识、执行时间、测试项、测试对象标识、测试对象名称、测试对象IP、源地址、执行日志、结果截取和结果状态。
应当注意,尽管在上文详细描述中提及了可配置的网络运维验收测试装置的若干模块,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多模块的特征和功能可以在一个模块中具体化。反之,上文描述的一个模块的特征和功能可以进一步划分为由多个模块来具体化。
基于前述发明构思,如图3所示,本发明还提出一种计算机设备200,包括存储器210、处理器220及存储在存储器210上并可在处理器220上运行的计算机程序230,处理器220执行计算机程序230时实现前述可配置的网络运维验收测试方法。
基于前述发明构思,本发明还提出一种计算机可读存储介质,计算机可读存储介质存储有执行前述可配置的网络运维验收测试方法的计算机程序。
本发明提出的可配置的网络运维验收测试方法及装置的优点如下:
1、通用模型
对于验收测试对象或验收测试项,均可支持扩展,本专利中列举出的类型仅为部分常见的类型。
2、分析规则配置化
结果截取规则,支持正则表达式可配;结果判定规则,支持算式可配。使得大部分的验收测试日志均可通过找规律进行配置化实现分析逻辑。同种类型的结果分析不用重复配置规则或分析处理,简单的阀值调整也很方便。
3、测试报告准确和清晰
通过程序逻辑实现的验收测试,对日志的存储和结果判定都是标准的,可避免手工出现的失误,且分析报告也是按照标准格式反馈,清晰明了。
虽然已经参考若干具体实施方式描述了本发明的精神和原理,但是应该理解,本发明并不限于所公开的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合以进行受益,这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包含的各种修改和等同布置。
对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。
Claims (18)
1.一种可配置的网络运维验收测试方法,其特征在于,该方法包括:
步骤一,导入测试对象
测试对象分为三种类型:服务器、设备和IP地址;
步骤二,配置测试项
测试项分为四种类型:ping测试、登陆测试、执行命令集和执行命令集并分析;
步骤三,建立测试任务
测试对象和测试项进行任意组合,该测试对象支持多选,即可生成一个测试任务;
步骤四,执行测试动作
测试任务的实际执行通过计算机程序逻辑实现,得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准格式的验收测试报告。
2.根据权利要求1所述的可配置的网络运维验收测试方法,其特征在于,所述测试对象的表结构包含以下字段:
测试对象标识、测试对象类型、测试对象名称、测试对象IP、测试对象型号、登陆方式、登陆端口号、用户名称、密码、登陆后提示符和创建时间;
若测试对象类型为IP地址,则无登陆相关信息字段。
3.根据权利要求1所述的可配置的网络运维验收测试方法,其特征在于,所述ping测试是指对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
所述登陆测试是指对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
所述执行命令集是指在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
所述执行命令集并分析是指在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断。
4.根据权利要求1所述的可配置的网络运维验收测试方法,其特征在于,所述测试项的表结构包含以下字段:
测试项编码、测试项名称和测试类型。
5.根据权利要求4所述的可配置的网络运维验收测试方法,其特征在于,所述测试项的表结构还包含以下字段:
测试项编码、测试对象型号、命令集、结果截取规则、结果判断规则和参考值。
6.根据权利要求1所述的可配置的网络运维验收测试方法,其特征在于,所述测试任务的表结构包含以下字段:
任务标识、测试项、测试对象标识和创建时间。
7.根据权利要求1所述的可配置的网络运维验收测试方法,其特征在于,所述计算机程序实现逻辑,包括:
(1)根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表;
(2)测试项若为ping测试
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址;
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型,从测试项扩展表中获取ping命令,然后循环执行ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,判定服务器操作系统,再得到相应的ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
(3)测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告;
(4)测试项若为执行命令集,先做登陆测试,登陆成功后再顺序执行命令集中的命令,将所有日志拼接在一起,记录日志和结果到日志表中,并生成测试报告;
(5)测试项若为执行命令集并分析,在执行命令集的基础上,根据结果截取规则和结果判定规则分析日志,得到正常或异常的结论,记录日志和结果到日志表中,并生成测试报告。
8.根据权利要求7所述的可配置的网络运维验收测试方法,其特征在于,所述日志表的结构包含以下字段:
任务标识、执行时间、测试项、测试对象标识、测试对象名称、测试对象IP、源地址、执行日志、结果截取和结果状态。
9.一种可配置的网络运维验收测试装置,其特征在于,该装置包括:
测试对象导入模块,用于导入测试对象,该测试对象分为三种类型:服务器、设备和IP地址;
测试项配置模块,用于配置测试项,该测试项分为四种类型:ping测试、登陆测试、执行命令集和执行命令集并分析;
测试任务建立模块,用于将测试对象和测试项进行任意组合,该测试对象支持多选,即可生成一个测试任务;
测试动作执行模块,用于通过计算机程序逻辑实现测试任务的实际执行,得到当下时间点的测试结果,并记录下测试过程中的日志,生成标准格式的验收测试报告。
10.根据权利要求9所述的可配置的网络运维验收测试装置,其特征在于,所述测试对象的表结构包含以下字段:
测试对象标识、测试对象类型、测试对象名称、测试对象IP、测试对象型号、登陆方式、登陆端口号、用户名称、密码、登陆后提示符和创建时间;
若测试对象类型为IP地址,则无登陆相关信息字段。
11.根据权利要求9所述的可配置的网络运维验收测试装置,其特征在于,所述ping测试是指对测试对象发起ping测试并得到结果,丢包率低于阀值或成功率达到阀值则判定为正常,否则为异常;
所述登陆测试是指对测试对象尝试进行ssh或telnet登陆,登录成功则正常,否则异常;
所述执行命令集是指在登陆成功测试对象后,顺序执行指定的命令集能得到返回结果则正常;
所述执行命令集并分析是指在得到的返回结果基础上,通过正则表达式获取关键信息,做简单的分析判断。
12.根据权利要求9所述的可配置的网络运维验收测试装置,其特征在于,所述测试项的表结构包含以下字段:
测试项编码、测试项名称和测试类型。
13.根据权利要求12所述的可配置的网络运维验收测试装置,其特征在于,所述测试项的表结构还包含以下字段:
测试项编码、测试对象型号、命令集、结果截取规则、结果判断规则和参考值。
14.根据权利要求9所述的可配置的网络运维验收测试装置,其特征在于,所述测试任务的表结构包含以下字段:
任务标识、测试项、测试对象标识和创建时间。
15.根据权利要求9所述的可配置的网络运维验收测试装置,其特征在于,所述计算机程序实现逻辑,包括:
(1)根据输入参数中的任务标识,查询测试任务表,得到相应的测试项和测试对象列表;
(2)测试项若为ping测试
若输入参数指定了源地址,需从测试对象表中匹配源地址得到其登陆信息,并尝试登陆该源地址;
若登陆失败则测试任务执行失败,并记录日志到日志表中;
若登陆成功,先判断源地址所属类型,从测试项扩展表中获取ping命令,然后循环执行ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
若输入参数未指定源地址,直接从程序所在的服务器发起ping测试,判定服务器操作系统,再得到相应的ping命令,根据结果截取规则和结果判定规则分析日志,得到正常或异常的测试结果,将ping测试日志和分析结果一并存入日志表中,并生成测试报告;
(3)测试项若为登陆测试,则循环尝试登陆各个测试对象,登陆上判定为成功,登陆不上判定为失败,记录日志和结果到日志表中,并生成测试报告;
(4)测试项若为执行命令集,先做登陆测试,登陆成功后再顺序执行命令集中的命令,将所有日志拼接在一起,记录日志和结果到日志表中,并生成测试报告;
(5)测试项若为执行命令集并分析,在执行命令集的基础上,根据结果截取规则和结果判定规则分析日志,得到正常或异常的结论,记录日志和结果到日志表中,并生成测试报告。
16.根据权利要求15所述的可配置的网络运维验收测试装置,其特征在于,所述日志表的结构包含以下字段:
任务标识、执行时间、测试项、测试对象标识、测试对象名称、测试对象IP、源地址、执行日志、结果截取和结果状态。
17.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1-8任一项所述方法。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有执行权利要求1-8任一项所述方法的计算机程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010974213.XA CN114268569B (zh) | 2020-09-16 | 2020-09-16 | 一种可配置的网络运维验收测试方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010974213.XA CN114268569B (zh) | 2020-09-16 | 2020-09-16 | 一种可配置的网络运维验收测试方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114268569A true CN114268569A (zh) | 2022-04-01 |
CN114268569B CN114268569B (zh) | 2023-10-31 |
Family
ID=80824295
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010974213.XA Active CN114268569B (zh) | 2020-09-16 | 2020-09-16 | 一种可配置的网络运维验收测试方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114268569B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115396336A (zh) * | 2022-08-01 | 2022-11-25 | 南京网元通信技术有限公司 | 一种基于软件仿真的mpls vpn集客专线主动测试方法 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070006037A1 (en) * | 2005-06-29 | 2007-01-04 | Microsoft Corporation | Automated test case result analyzer |
US20140181968A1 (en) * | 2012-12-20 | 2014-06-26 | At&T Intellectual Property I, L.P. | Monitoring Operational Activities In Networks And Detecting Potential Network Intrusions And Misuses |
CN104199767A (zh) * | 2014-08-19 | 2014-12-10 | 北京金山安全软件有限公司 | 测试方法和装置 |
CN104331373A (zh) * | 2014-11-28 | 2015-02-04 | 上海斐讯数据通信技术有限公司 | 一种Monkey测试系统及方法 |
CN105743707A (zh) * | 2016-04-01 | 2016-07-06 | 浪潮电子信息产业股份有限公司 | 一种基于Redhat系统测试BMC日志解析功能的方法 |
CN106059853A (zh) * | 2016-05-26 | 2016-10-26 | 中国建设银行股份有限公司 | 一种网络连通性测试方法及装置 |
CN106095673A (zh) * | 2016-06-07 | 2016-11-09 | 深圳市泰久信息系统股份有限公司 | 基于web接口的自动化测试方法及系统 |
US20190129833A1 (en) * | 2017-10-27 | 2019-05-02 | EMC IP Holding Company LLC | Method, device and computer program product for executing test cases |
CN109902012A (zh) * | 2019-02-28 | 2019-06-18 | 苏州浪潮智能科技有限公司 | 一种自动化生成服务器测试报告的方法及装置 |
CN109902009A (zh) * | 2019-02-27 | 2019-06-18 | 苏州浪潮智能科技有限公司 | 一种linux环境下自动测试的方法及系统 |
CN109976995A (zh) * | 2017-12-28 | 2019-07-05 | 百度在线网络技术(北京)有限公司 | 用于测试的方法和装置 |
CN110908903A (zh) * | 2019-11-14 | 2020-03-24 | 苏州浪潮智能科技有限公司 | 一种基于可编辑yaml文件的测试方法 |
CN110941546A (zh) * | 2019-10-12 | 2020-03-31 | 平安健康保险股份有限公司 | Web页面用例的自动化测试方法、装置、设备及存储介质 |
US20200151072A1 (en) * | 2018-11-14 | 2020-05-14 | Silicon Motion, Inc. | Method, computer apparatus, and user interface for performing automatic test upon storage devices |
CN111209218A (zh) * | 2020-04-01 | 2020-05-29 | 中电万维信息技术有限责任公司 | 一种基于Jmeter的性能自动化测试方法 |
CN111258881A (zh) * | 2019-12-31 | 2020-06-09 | 上海金仕达软件科技有限公司 | 一种用于工作流程测试的智能测试系统 |
CN111400186A (zh) * | 2020-03-19 | 2020-07-10 | 时时同云科技(成都)有限责任公司 | 性能测试方法及系统 |
CN111506511A (zh) * | 2020-04-21 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 一种测试用例生成方法、装置、电子设备及介质 |
-
2020
- 2020-09-16 CN CN202010974213.XA patent/CN114268569B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070006037A1 (en) * | 2005-06-29 | 2007-01-04 | Microsoft Corporation | Automated test case result analyzer |
US20140181968A1 (en) * | 2012-12-20 | 2014-06-26 | At&T Intellectual Property I, L.P. | Monitoring Operational Activities In Networks And Detecting Potential Network Intrusions And Misuses |
CN104199767A (zh) * | 2014-08-19 | 2014-12-10 | 北京金山安全软件有限公司 | 测试方法和装置 |
CN104331373A (zh) * | 2014-11-28 | 2015-02-04 | 上海斐讯数据通信技术有限公司 | 一种Monkey测试系统及方法 |
CN105743707A (zh) * | 2016-04-01 | 2016-07-06 | 浪潮电子信息产业股份有限公司 | 一种基于Redhat系统测试BMC日志解析功能的方法 |
CN106059853A (zh) * | 2016-05-26 | 2016-10-26 | 中国建设银行股份有限公司 | 一种网络连通性测试方法及装置 |
CN106095673A (zh) * | 2016-06-07 | 2016-11-09 | 深圳市泰久信息系统股份有限公司 | 基于web接口的自动化测试方法及系统 |
US20190129833A1 (en) * | 2017-10-27 | 2019-05-02 | EMC IP Holding Company LLC | Method, device and computer program product for executing test cases |
CN109976995A (zh) * | 2017-12-28 | 2019-07-05 | 百度在线网络技术(北京)有限公司 | 用于测试的方法和装置 |
US20200151072A1 (en) * | 2018-11-14 | 2020-05-14 | Silicon Motion, Inc. | Method, computer apparatus, and user interface for performing automatic test upon storage devices |
CN109902009A (zh) * | 2019-02-27 | 2019-06-18 | 苏州浪潮智能科技有限公司 | 一种linux环境下自动测试的方法及系统 |
CN109902012A (zh) * | 2019-02-28 | 2019-06-18 | 苏州浪潮智能科技有限公司 | 一种自动化生成服务器测试报告的方法及装置 |
CN110941546A (zh) * | 2019-10-12 | 2020-03-31 | 平安健康保险股份有限公司 | Web页面用例的自动化测试方法、装置、设备及存储介质 |
CN110908903A (zh) * | 2019-11-14 | 2020-03-24 | 苏州浪潮智能科技有限公司 | 一种基于可编辑yaml文件的测试方法 |
CN111258881A (zh) * | 2019-12-31 | 2020-06-09 | 上海金仕达软件科技有限公司 | 一种用于工作流程测试的智能测试系统 |
CN111400186A (zh) * | 2020-03-19 | 2020-07-10 | 时时同云科技(成都)有限责任公司 | 性能测试方法及系统 |
CN111209218A (zh) * | 2020-04-01 | 2020-05-29 | 中电万维信息技术有限责任公司 | 一种基于Jmeter的性能自动化测试方法 |
CN111506511A (zh) * | 2020-04-21 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 一种测试用例生成方法、装置、电子设备及介质 |
Non-Patent Citations (2)
Title |
---|
SHAHZADA ZEESHAN WAHEED; USMAN QAMAR: ""Data flow based test case generation algorithm for object oriented integration testing"", 《2015 6TH IEEE INTERNATIONAL CONFERENCE ON SOFTWARE ENGINEERING AND SERVICE SCIENCE (ICSESS)》 * |
张丹涛;张随良;杨东红;: "基于系统需求数据库的BIT自动测试技术", 系统仿真学报, no. 1 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115396336A (zh) * | 2022-08-01 | 2022-11-25 | 南京网元通信技术有限公司 | 一种基于软件仿真的mpls vpn集客专线主动测试方法 |
Also Published As
Publication number | Publication date |
---|---|
CN114268569B (zh) | 2023-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11792291B1 (en) | Proxying hypertext transfer protocol (HTTP) requests for microservices | |
US11803548B1 (en) | Automated generation of metrics from log data | |
US20140282027A1 (en) | Graphic user interface based network management system to define and execute troubleshooting procedure | |
US7870238B2 (en) | Vendor-independent network configuration tool | |
US7805510B2 (en) | Hierarchy for characterizing interactions with an application | |
US11216342B2 (en) | Methods for improved auditing of web sites and devices thereof | |
US8930964B2 (en) | Automatic event correlation in computing environments | |
US20070266148A1 (en) | Synthetic transactions based on system history and load | |
US11386113B2 (en) | Data source tokens | |
CN110650035B (zh) | 用于生成和管理工业网络中的虚拟工业设备的方法和系统 | |
CN112738230B (zh) | 一种自动化网闸测试系统及其工作方法 | |
US9836382B2 (en) | Cognitive platform for troubleshooting system events | |
CN107870850A (zh) | 一种高效的互联网应用日志系统 | |
CN112817857A (zh) | 基于JMeter和JenKins的自动监控网站异常方法及计算机设备 | |
CN110502558B (zh) | 数据导出方法、装置、计算机设备和存储介质 | |
US20070118644A1 (en) | Consensus testing of electronic system | |
CN114268569A (zh) | 一种可配置的网络运维验收测试方法及装置 | |
CN107544830A (zh) | 一种自动安装数据库的方法及装置 | |
US9354962B1 (en) | Memory dump file collection and analysis using analysis server and cloud knowledge base | |
CN115033639A (zh) | 一种生成集群间数据共享的关系图的方法和相关装置 | |
WO2016130337A1 (en) | System and method for automating network management tasks | |
CN107066538B (zh) | 一种数据统计的方法及装置 | |
CN114003479B (zh) | 一种故障日志推送方法、计算机及存储介质 | |
KR102403881B1 (ko) | 이벤트의 인과관계 가시화 장치 및 그 방법 | |
CN113609162B (zh) | 操作记录的查询方法、装置、服务器及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |