CN114661622B - 测试中间件及测试管理系统 - Google Patents

测试中间件及测试管理系统 Download PDF

Info

Publication number
CN114661622B
CN114661622B CN202210531675.3A CN202210531675A CN114661622B CN 114661622 B CN114661622 B CN 114661622B CN 202210531675 A CN202210531675 A CN 202210531675A CN 114661622 B CN114661622 B CN 114661622B
Authority
CN
China
Prior art keywords
test
management
environment
resources
middleware
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210531675.3A
Other languages
English (en)
Other versions
CN114661622A (zh
Inventor
陈西选
刘明哲
曲凯
冯金金
李帼伟
崔方迪
樊志强
董书瀚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Clp Taiji Group Co ltd
Original Assignee
Clp Taiji Group Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Clp Taiji Group Co ltd filed Critical Clp Taiji Group Co ltd
Priority to CN202210531675.3A priority Critical patent/CN114661622B/zh
Publication of CN114661622A publication Critical patent/CN114661622A/zh
Application granted granted Critical
Publication of CN114661622B publication Critical patent/CN114661622B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明涉及一种测试中间件及测试管理系统,该测试中间件包括:测试集成管控环境模块和测试基础服务平台模块,测试集成管控环境模块用于获取测试规划信息,并根据测试规划信息生成测试环境开设脚本;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;测试基础服务平台模块用于根据测试规划信息,确定与测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,测试资源通过测试开发集成接口集接入,在测试过程,对所测试结果进行判断,若出现故障,则对故障进行定位,通过增加多模混合架构的柔性通信中间件,根据不同类型测试数据的传输需求,灵活适配最高效的传输方式,提高资源间的互联互通能力。

Description

测试中间件及测试管理系统
技术领域
本发明涉及通信技术领域,尤其涉及一种测试中间件及测试管理系统。
背景技术
目前市面存在多种传输中间件,例如DDS中间件、COBAR中间件、MQ,但这些特定中间件仅针对某些特定类型的数据传输,在传输其它类型数据时效率很低。在复杂信息系统测试过程中,需要传输指令、数据、音频、视频等多种不同类型的数据,并且对时延要求较高,直接采用市面上的中间件很难满足效率方面的要求,如何根据不同的数据类型,动态灵活选取适配最优传输机制,是目前急需解决的问题,从而可以提高动态调整能力。
发明内容
本发明意在提供一种测试中间件及测试管理系统,以解决现有技术中存在的不足,本发明要解决的技术问题通过以下技术方案来实现。
第一方面,本发明实施例提供一种测试中间件,所述测试中间件至少包括:测试集成管控环境模块和测试基础服务平台模块,所述测试集成管控环境模块用于获取测试规划信息,并根据所述测试规划信息生成测试环境开设脚本;在已经确定的与所述测试环境开设脚本对应的测试环境下,获取各类测试资源,并对各个测试资源按照预设的调度规则进行调度,使得所述测试资源执行测试操作;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;
所述测试基础服务平台模块用于根据所述测试规划信息,确定与所述测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,以使所述测试资源通过测试开发集成接口集接入,还用于在测试过程,对所测试结果进行判断,若出现故障,则对所述故障进行定位。
可选地,所述测试集成管控环境模块至少包括测试开设准备单元、测试环境开设单元、测试执行调度单元、测试状态监视单元与指标综合展示单元;
所述测试开设准备单元用于接收试验管理控制系统下发的测试规划信息,并根据所述测试规划信息进行可视化建模,生成测试环境开设脚本;
所述测试环境开设单元用于根据测试环境开设脚本,确定测试环境的开设能力,以确定搭建所述测试环境的工作量;
所述测试执行调度单元用于根据预先设置的编排算法,控制各类测试资源按照顺序启动的方式运行;还用于在执行过程中,对测试资源进行协调调度;
所述测试状态监视单元用于在测试执行过程中,对不同粒度的测试资源的监控对象进行运行状态的检测,所述运行状态至少包括测试进度、执行状态、和异常告警中的一种或多种;
所述指标综合展示单元用于接收业务能力测试系统上报的测试结果,并根据所述测试结果确定展示方案的配置能力,并对不同类型的指标数据进行展示。
可选地,所述测试执行调度单元具体包括测试位置管控子单元和测试任务管控子单元,所述测试位置管控子单元展示包括中心集中管控模式和本地离线管控模式;所述测试任务管控子单元至少包括活动级精细调度模式和脚本级粗粒度调度模式。
可选地,所述测试基础服务平台模块包括测试基础通信支撑服务单元、测试公共构件单元、测试开发集成API接口集和测试运行支撑工具集;
所述测试基础通信支撑服务单元用于在测试过程中,根据测试数据、运行状态、管控命令、测试脚本不同类型数据的传输需求,确定测试基础通信支撑服务,所述测试基础通信支撑服务至少包括远程过程调用或消息队列中的一种;
所述测试公共构件单元用于根据文件传输、节点注册、资源部署、进程管理、日志服务、数据收集、状态监视的共性需求,确定预设的测试公共构件;
所述测试开发集成API接口集用于根据测试公共构件提供的公共服务,确定与所述测试资源对应的符合预设标准的开发集成API接口集;
所述测试运行支撑工具集用于对测试过程中的系统运行状态的诊断与故障定位;还用于根据不同的测试规划阶段,对各类测试脚本进行传输;还用于在离线测试条件下,进行测试数据的导入导出操作。
可选地,所述测试运行支撑工具集至少包括连通性测试工具、时统校验工具、文件传输工具和数据导入导出。
可选地,所述测试开发集成API接口集至少包括节点注册接口、资源部署接口、活动协调接口、状态监控接口和数据上报接口中的一种或多种;具体包括:
节点注册接口用于动态获取参与测试的各类仿真器、模拟器、数据采集器的运行平台信息,所述运行平台信息至少包括IP地址、平台类型和已部署的测试资源情况中的一种或多种;
脚本部署接口用于在测试过程中,确定与各类业务模拟器与仿真器对应的驱动脚本信息;
活动协调接口用于统一调度各类测试资源的测试活动;
状态监控接口用于监控各类测试资源的运行状态,所述运行状态至少包括测试的进展情况、模型的运行状态和资源的使用情况中的一种或多种;
数据上报接口用于接收测试过程中各类测试资源采集到的测试数据,所述测试数据用于各项规定测试指标的计算。
第二方面,本发明实施例提供一种测试管理系统,包括第一方面的任一所述的测试中间件,所述测试管理系统包括:基础设施层、支撑服务层、测试基础服务平台层和测试集成管控环境层,其中,所述测试中间件位于所述测试基础服务品台层和所述测试集成管控环境层。
可选地,所述基础设施层至少包括操作系统、数据库、云管理平台及虚拟化资源管理服务等方面内容,所述基础设施层用于基于统一构建的计算存储环境,依托云管理平台,确定与测试对应的虚拟化资源管理服务,且将与测试对应的资源进行存储。
可选地,所述支撑服务层至少包括为测试的开展提供数据分发中间件、数据统一访问服务器、时统服务器、Web服务器和应用服务器中的一种或多种。
可选地,所述测试管理系统为B/S架构。
本发明实施例包括以下优点:
本发明实施例提供的测试中间件及测试管理系统,该测试中间件包括:测试集成管控环境模块和测试基础服务平台模块,测试集成管控环境模块用于获取测试规划信息,并根据测试规划信息生成测试环境开设脚本;在已经确定的与测试环境开设脚本对应的测试环境下,获取各类测试资源,并对各个测试资源按照预设的调度规则进行调度,使得测试资源执行测试操作;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;测试基础服务平台模块用于根据测试规划信息,确定与测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,以使测试资源通过测试开发集成接口集接入,还用于在测试过程,对所测试结果进行判断,若出现故障,则对故障进行定位,通过增加多模混合架构的柔性通信中间件,支持根据不同类型测试数据的传输需求,灵活适配最高效的传输方式,提高资源间的互联互通能力。
附图说明
图1是本发明实施例提供的测试中间件的结构示意图;
图2是本发明实施例提供的测试管理工具系统的结构示意图;
图3是本发明实施例提供的又一测试管理工具体系的结构示意图;
图4是本发明实施例提供的系统典型部署方式的结构示意图;
图5是本发明实施例提供的中间件的典型使用模式的结构示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
参照图1,示出了本发明的一种测试中间件实施例的结构示意图,该测试中间件至少包括:测试集成管控环境模块101和测试基础服务平台模块102,测试集成管控环境模块101用于获取测试规划信息,并根据测试规划信息生成测试环境开设脚本;在已经确定的与测试环境开设脚本对应的测试环境下,获取各类测试资源,并对各个测试资源按照预设的调度规则进行调度,使得测试资源执行测试操作;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;
测试基础服务平台模块102用于根据测试规划信息,确定与测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,以使测试资源通过测试开发集成接口集接入,还用于在测试过程,对所测试结果进行判断,若出现故障,则对故障进行定位。
本发明实施例提供了多模混合架构的柔性通信中间件:中间件是解决异构资源接入、消除资源互联互通性能瓶颈的关键部分。该中间件以云测试平台为基础,基于多模混合的柔性架构设计,并提供先进的资源服务化建模封装方式,可有效提高各类LVC异构测试资源的互联、互通、互操作能力。
可选地,测试集成管控环境模块101至少包括测试开设准备单元、测试环境开设单元、测试执行调度单元、测试状态监视单元与指标综合展示单元;
测试开设准备单元用于接收试验管理控制系统下发的测试规划信息,并根据测试规划信息进行可视化建模,生成测试环境开设脚本;
测试环境开设单元用于根据测试环境开设脚本,确定测试环境的开设能力,以确定搭建测试环境的工作量;
测试执行调度单元用于根据预先设置的编排算法,控制各类测试资源按照顺序启动的方式运行;还用于在执行过程中,对测试资源进行协调调度;
具体地,测试执行调度单元具体包括测试位置管控子单元和测试任务管控子单元,测试位置管控子单元展示包括中心集中管控模式和本地离线管控模式;测试任务管控子单元至少包括活动级精细调度模式和脚本级粗粒度调度模式。
测试状态监视单元用于在测试执行过程中,对不同粒度的测试资源的监控对象进行运行状态的检测,运行状态至少包括测试进度、执行状态、和异常告警中的一种或多种;
指标综合展示单元用于接收业务能力测试系统上报的测试结果,并根据测试结果确定展示方案的配置能力,并对不同类型的指标数据进行展示。
可选地,测试基础服务平台模块包括测试基础通信支撑服务单元、测试公共构件单元、测试开发集成API接口集和测试运行支撑工具集;
测试基础通信支撑服务单元用于在测试过程中,根据测试数据、运行状态、管控命令、测试脚本不同类型数据的传输需求,确定测试基础通信支撑服务,测试基础通信支撑服务至少包括远程过程调用或消息队列中的一种;
测试公共构件单元用于根据文件传输、节点注册、资源部署、进程管理、日志服务、数据收集、状态监视的共性需求,确定预设的测试公共构件;
测试开发集成API接口集用于根据测试公共构件提供的公共服务,确定与测试资源对应的符合预设标准的开发集成API接口集;
具体地,测试开发集成API接口集至少包括节点注册接口、资源部署接口、活动协调接口、状态监控接口和数据上报接口中的一种或多种;具体包括:
节点注册接口用于动态获取参与测试的各类仿真器、模拟器、数据采集器的运行平台信息,运行平台信息至少包括IP地址、平台类型和已部署的测试资源情况中的一种或多种;
脚本部署接口用于在测试过程中,确定与各类业务模拟器与仿真器对应的驱动脚本信息;
活动协调接口用于统一调度各类测试资源的测试活动;
状态监控接口用于监控各类测试资源的运行状态,运行状态至少包括测试的进展情况、模型的运行状态和资源的使用情况中的一种或多种;
数据上报接口用于接收测试过程中各类测试资源采集到的测试数据,测试数据用于各项规定测试指标的计算。
测试运行支撑工具集用于对测试过程中的系统运行状态的诊断与故障定位;还用于根据不同的测试规划阶段,对各类测试脚本进行传输;还用于在离线测试条件下,进行测试数据的导入导出操作。
可选地,测试运行支撑工具集至少包括连通性测试工具、时统校验工具、文件传输工具和数据导入导出。
图2是本发明实施例提供的测试管理工具系统的结构示意图;多模混合柔性测试中间件由测试集成管控环境和测试基础服务平台两个组成部分,其中,测试集成管控环境主要由测试开设准备、测试环境开设、测试执行调度、测试状态监控和指标综合展示5项子功能组成,测试基础服务平台主要由基础通信支撑服务、测试公共构件、测试基础支撑工具集、开发集成API接口集4项子功能组成。
1、测试集成管控环境
测试集成管控环境作为测试开展的门户和助手,主要为测试管理人员提供相应的测试开设准备、测试环境开设、测试执行调度、测试状态监视与指标综合展示五部分主要功能。
a)测试开设准备
测试开设准备功能主要以试验管理控制系统下发的测试规划信息为输入,为测试规划人员提供可视化建模的方式,完成对测试环境开设方案的规划细化,并自动生成测试环境开设脚本,从而为测试环境的自动开设提供支撑。
b)测试环境开设
测试环境开设功能主要以测试环境开设脚本为依据,为测试人员提供测试环境的快速自动开设能力,以减少测试人员手工搭建测试环境的工作量,提高测试开展的效率。
c)测试执行调度
测试执行调度功能一方面提供资源启动编排算法,以确保各类参试资源能够按照恰当的顺序启动运行;另一方面,提供测试执行过程对参试资源的协调调度,以保证各参试资源间能够有序执行,从而协同完成测试的开展。
d)测试状态监视
测试状态监视功能主要在测试执行过程中,提供对各参试资源系统级、模型级等不同粒度监控对象测试进度、执行状态、异常告警等运行状态的统一监视。
e)指标综合展示
指标综合展示功能主要提供对业务能力测试系统上报的测试结果进行实时接收,在此基础上,提供展示方案配置能力,完成对不同类型指标数据的定制化实时展示。
2、测试基础服务平台
测试基础服务平台主要针对四个测试阶段的共性需求,提供测试基础通信支撑服务、公共构件以及标准的开发集成支撑环境,从而为各参试资源快速接入集成、互联互通提供基础支撑;此外,提供测试运行支撑工具集,包括文件传输工具、连通性测试工具、时统校验工具等,以支持完成测试过程中的系统运行诊断与故障定位等功能。
a)测试基础通信支撑服务
针对测试开展过程中,对测试数据、运行状态、管控命令、测试脚本等不同类型数据的传输需求,提供测试基础通信支撑服务,该服务集成了远程过程调用、消息队列等多种通信方式,能够有效支持同步方式调用和异步方式传输两种工作模式,以满足上述不同类型数据的传输需求。
b)测试公共构件
主要针对测试开展过程中,在文件传输、节点注册、资源部署、进程管理、日志服务、数据收集、状态监视等方面的共性需求,提供统一的测试公共构件,实现统一的文件传输、节点注册、资源部署、进程管理、日志服务、数据收集、状态监视等公共服务,以加快测试管理工具与各参试资源开发集成的效率。
c)测试开发集成API接口集
针对测试公共构件提供的公共服务,为各参试资源提供统一标准的开发集成API接口集。
d)测试运行支撑工具集
提供连通性测试工具、时统校验工具、文件传输工具、数据导入导出等测试运行支撑工具集,一方面支持完成测试过程中的系统运行诊断与故障定位;另一方面,有效支持测试规划阶段对各类测试脚本的传输,以及离线测试条件下测试数据的导入导出等操作。
图3是本发明实施例提供的又一测试管理工具体系的结构示意图,如图3所示,根据中间件的系统组成及各功能的定位,提供了如图3所示的系统体系结构,主要包括基础设施层、支撑服务层、测试基础服务平台层和测试集成管控环境层4个层次。
a)基础设施层
基础设施层主要包括操作系统、数据库、云管理平台及虚拟化资源管理服务等方面内容。一方面基于统一构建的计算存储环境,依托云管理平台,为测试提供虚拟化资源管理服务;另一方面基于在测试管理中心集中构建的数据中心,完成对测试相关模型、数据等资源的集中存储。
b)支撑服务层
支撑服务层主要为测试的开展提供数据分发中间件、数据统一访问服务和时统服务等基础支撑服务,以及Web服务器、应用服务器等服务器资源。
c)测试基础服务平台层
测试基础服务平台层采用了“平台即服务”的服务模式,一方面针对测试管理工具与各参试资源间不同类型数据的通信特点,提供测试基础通信支撑服务,包括远程过程调用和消息队列中间件,以支持测试管理工具与各参试资源间的互联互通;另一方面,以基础通信支撑服务为基础,采用后台驻守进程的方式提供命名服务、统一侦听服务、文件驻守服务、节点注册服务、资源部署服务、文件传输服务、进程管理服务、日志服务、连通性测试服务等平台核心服务,从而为测试规划细化、测试环境开设、测试执行控制和测试状态监控等各测试阶段的信息交换提供支撑;在此基础上,针对测试开展的共性需要,提供了文件传输工具、时钟校验工具和连通性测试工具等公共支撑工具集,并为各类参试资源封装了节点注册、资源部署、活动协调、状态监控和数据上报等应用程序接口,以方便各参试资源快速接入集成到测试环境。五类应用程序接口的具体功能如下:
1)节点注册接口:用于动态获取参与测试的各类仿真器、模拟器、数据采集器的运行平台信息,如IP地址、平台类型、已部署的测试资源情况等。
2)脚本部署接口:在测试中,各类业务模拟器与仿真器需要特定的脚本来驱动其执行。该接口用于完成各类业务模拟器与仿真器所需脚本的自动部署,以避免人工部署脚本的繁琐过程,提高测试效率。
3)活动协调接口:用于统一调度各类参试资源的测试活动,协同完成规定的测试内容。
4)状态监控接口:用于检查各类参试资源的运行状态,监控内容包括测试的进展情况、模型的运行状态、资源的使用情况等。
5)数据上报接口:用于收集测试中各类参试资源采集到的测试数据,这些数据主要用于各项规定测试指标的计算。
d)测试集成管控环境层
以测试基础服务平台为基础,测试集成管控环境层主要提供测试开设准备、测试环境自动开设、测试执行调度、测试状态监控及测试管理等核心功能。为了支持用户随时随地完成对执行过程的管控,该分系统采用了B/S架构设计。
1)测试开设准备:主要完成测试方案导入解析、部署方式设计、业务实体技术参数配置、参试软件自动匹配推荐与参数配置等不同视图的建模。
2)测试环境自动开设:该功能主要基于试验管理控制系统分配的虚拟与物理测试节点,提供测试节点信息注册与维护、资源远程部署、开设状态监控、运行诊断与故障定位、资源清理与环境恢复等功能,以支持测试环境的自动开设与维护。
3)测试执行调度:该功能一方面针对内场和外场两类测试的特点,提供中心集中管控和本地离线控制两种管控模式;另一方面,针对不同测试任务的特点,提供活动级精细调度和脚本级粗粒度调度两种调度模式;同时提供针对不同测试开展过程中资源的有效隔离机制,以支持多组测试的并行执行。
4)测试状态监控:该功能主要为测试人员提供各参试资源运行状态的统一监视管理,以完成对各参试资源系统、模型、模型运行实例三级运行状态的监控。
5)测试管理:主要提供测试任务管理、测试资源管理等基础管理功能,同时,提供接收测试管控命令、上报测试结果和测试状态功能,以支持接受试验管理控制系统的管控。
基于上述设计的体系结构,中间件具备以下特点:
1)提供了遵循PaaS云服务模式的测试基础服务平台:在该平台中,核心服务采用服务化技术体制实现,可保证平台的可扩展性;根据不同类型数据的传输要求,采用了不同的传输机制,可同时保证传输效率和高可靠性;核心功能节点采用冗余机制,以保证系统的高可用性;提供支持运行诊断的基础支撑工具,可支持对测试环境异常情况的快速诊断和故障定位;为参试资源封装了基础应用程序接口,可加速参试资源的快速开发与集成。
2)提供了基于B/S架构的测试集成管控环境:可支持测试人员随时随地的完成对测试的运维管理;为测试人员提供“所见即所得”的可视化建模方式,完成测试环境开设方案的规划,可极大提高工具易用性,提高规划效率。
3)测试开展的自动化程度高:通过提供软件自动匹配、远程安装、资源自动部署等功能,支持环境自动开设;支持参试软件远程自动启动执行、中心自动协调调度;支持测试结束后测试环境的自动清理与环境恢复。
4)具备按需定制能力:具备状态监控对象和监控内容的灵活定制能力;具备数据采集与上报时机的灵活定制能力;具备指标计算结果展示方式的灵活定制。
图4是本发明实施例提供的系统典型部署方式的结构示意图,如图4所示,中间件中的测试集成管控环境和测试基础服务平台两个组成部分的典型部署方式,两个组成部分均支持在物理节点和虚拟节点中进行部署。
测试集成管控环境作为测试开展的门户,部署于测试管理中心节点上,完成对测试环境的统一规划与开设,以及对各参试资源集中执行调度与运行状态的统一监视。
测试基础服务平台作为后台驻守服务,分布式部署在各参试节点上,以支持各参试资源完成与测试集成管控环境的互联互通。
图5是本发明实施例提供的中间件的典型使用模式的结构示意图,如图5所示,中间件以“测试基础服务平台”为支撑,以“测试集成管控环境”为门户和助手,在由上级试验管理控制系统分配的网络环境和虚拟或物理计算资源的基础上,根据测试任务需要,动态调配业务模拟器、仿真器、测试系统等参试资源,按需开设测试测试环境,集中控制测试执行,高效采集和处理测试数据,在测试结束后自动回收各类测试资源。中间件的典型使用模式如图5所示。
中间件的典型使用模式主要包括测试规划、测试环境开设、测试运行管理、测试结果分析展示和测试资源释放5个阶段,每个阶段的详细工作过程如下:
(1)测试规划
在测试规划阶段,中间件主要根据基于试验管理控制系统下发的测试规划信息,基于测试集成管控环境提供的测试开设方案规划功能,完成测试环境开设方案的规划。
(2)测试环境开设
测试环境开设阶段,试验管理控制系统首先基于测试规划与开设方案的要求,完成测试环境物理节点和虚拟节点的开设;在此基础上,中间件提供了参试资源部署管理功能,通过测试基础服务平台提供的资源部署服务,将参试资源动态按需部署到虚拟节点或物理节点上,并完成软件的解压安装启动与脚本的加载,从而完成测试环境的开设。
根据不同的测试任务,中间件支持为各测试任务开设不同的测试空间,并提供测试资源安全隔离机制,能够保证各测试空间中的参试资源独立运行互不影响。
(3)测试运行管理
测试环境开设完成后,对于开设的每个测试任务空间,利用测试集成管控环境提供的测试运行管理功能,首先根据测试规划以恰当的方式启动测试环境中各参试资源,在此基础上,完成对各参试资源具体运行情况的监控。
(4)测试结果分析展示
测试执行过程中,利用测试基础服务平台提供的数据上报服务,自动采集各参试资源的测试数据,并推送给业务能力测试系统和多维态势综合展示系统。
业务能力测试系统首先基于采集到的原始测试数据进行指标计算,并将计算得到的测试结果上报给中间件,完成测试结果的实时展示;同时,完成对测试结果的分析。
(5)测试资源释放
测试结束后,利用测试基础服务平台提供的资源回收服务,完成资源的备份,并自动回收释放相关资源,使测试环境恢复如初。
(1)采用多模混合的柔性中间件架构,设计了多模混合架构的柔性通信中间件,支持根据不同类型测试数据的传输需求,灵活适配最高效的传输方式,提高资源间的互联互通能力。
(2)针对业务能力测试开展过程中,参试对象种类繁多、需配置的技术参数专业性强、交互关系复杂等特点,提供资源服务化建模封装与统一接口定义。
实现了:提供统一的类型定义与资源服务化建模,支持资源接入代码的自动生成与标准化封装,极大提高了资源开发集成效率与互操作能力;
根据测试开展各阶段的主要活动,定义统一标准的节点注册、资源部署、活动协调、数据交互、状态查询以及时钟管理等六类API接口集,可有效支撑测试环境自动开设,参试资源的自动化安装、部署与执行,测试资源统一调度管控、测试过程运行状态的集中监视与管理等功能。
(3)设计了基于集群的自适应扩展和基于云的弹性伸缩测试保障机制:采用负载均衡和服务集群策略,保证云端服务的弹性扩展,满足了未来测试资源不断扩充和性能不断提升的需求;以云测试平台为基础,以资源池的方式对测试开展所需的存储资源、计算资源和服务资源进行统一调度管理,实现了灵活支持不同规模测试的开展,极大提高了系统的弹性扩展性和可伸缩能力。
本发明实施例提供的测试中间件及测试管理系统,该测试中间件包括:测试集成管控环境模块和测试基础服务平台模块,测试集成管控环境模块用于获取测试规划信息,并根据测试规划信息生成测试环境开设脚本;在已经确定的与测试环境开设脚本对应的测试环境下,获取各类测试资源,并对各个测试资源按照预设的调度规则进行调度,使得测试资源执行测试操作;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;测试基础服务平台模块用于根据测试规划信息,确定与测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,以使测试资源通过测试开发集成接口集接入,还用于在测试过程,对所测试结果进行判断,若出现故障,则对故障进行定位,通过增加多模混合架构的柔性通信中间件,支持根据不同类型测试数据的传输需求,灵活适配最高效的传输方式,提高资源间的互联互通能力。
应该指出,上述详细说明都是示例性的,旨在对本申请提供进一步的说明。除非另有指明,本文使用的所有技术和科学术语均具有与本申请所属技术领域的普通技术人员的通常理解所相同的含义。
需要注意的是,这里所使用的术语仅是为了描述具体实施方式,而非意图限制根据本申请的示例性实施方式。如在这里所使用的,除非上下文另外明确指出,否则单数形式也意图包括复数形式。此外,还应当理解的是,当在本说明书中使用术语“包含”和/或“包括”时,其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换,以便这里描述的本申请的实施方式能够以除了在这里图示或描述的那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含。例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了便于描述,在这里可以使用空间相对术语,如“在……之上”、“在……上方”、“在……上表面”、“上面的”等,用来描述如在图中所示的一个器件或特征与其他器件或特征的空间位置关系。应当理解的是,空间相对术语旨在包含除了器件在图中所描述的方位之外的在使用或操作中的不同方位。例如,如果附图中的器件被倒置,则描述为“在其他器件或构造上方”或“在其他器件或构造之上”的器件之后将被定位为“在其他器件或构造下方”或“在其他器件或构造之下”。因而,示例性术语“在……上方”可以包括“在……上方”和“在……下方”两种方位。该器件也可以其他不同方式定位,如旋转90度或处于其他方位,并且对这里所使用的空间相对描述作出相应解释。
在上面详细的说明中,参考了附图,附图形成本文的一部分。在附图中,类似的符号典型地确定类似的部件,除非上下文以其他方式指明。在详细的说明书、附图及权利要求书中所描述的图示说明的实施方案不意味是限制性的。在不脱离本文所呈现的主题的精神或范围下,其他实施方案可以被使用,并且可以作其他改变。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种测试中间件,其特征在于,所述测试中间件至少包括:测试集成管控环境模块和测试基础服务平台模块,两个组成部分均支持在物理节点和虚拟节点中进行部署,所述测试集成管控环境模块用于获取测试规划信息,并根据所述测试规划信息生成测试环境开设脚本;在已经确定的与所述测试环境开设脚本对应的测试环境下,获取各类测试资源,并对各个测试资源按照预设的调度规则进行调度,使得所述测试资源执行测试操作;在测试执行过程中,对测试的运行状态进行监控,并将测试结果进行显示;
所述测试集成管控环境模块至少包括测试执行调度单元, 所述测试执行调度单元用于根据预先设置的编排算法,控制各类测试资源按照顺序启动的方式运行;还用于在执行过程中,对测试资源进行协调调度;
所述测试集成管控环境模块具体用于针对内场和外场两类测试的特点,提供中心集中管控和本地离线控制两种管控模式;还用于针对不同测试任务的特点,提供活动级精细调度和脚本级粗粒度调度两种调度模式;提供针对不同测试开展过程中资源的有效隔离机制,以支持多组测试的并行执行;
所述测试基础服务平台模块用于根据所述测试规划信息,确定与所述测试规划信息对应的基础通信支撑服务、公共构件以及开发集成支撑环境,以使所述测试资源通过测试开发集成接口集接入,还用于在测试过程,对所测试结果进行判断,若出现故障,则对所述故障进行定位。
2.根据权利要求1所述的测试中间件,其特征在于,所述测试集成管控环境模块至少包括测试开设准备单元、测试环境开设单元、测试状态监视单元与指标综合展示单元;
所述测试开设准备单元用于接收试验管理控制系统下发的测试规划信息,并根据所述测试规划信息进行可视化建模,生成测试环境开设脚本;
所述测试环境开设单元用于根据测试环境开设脚本,确定测试环境的开设能力,以确定搭建所述测试环境的工作量;
所述测试状态监视单元用于在测试执行过程中,对不同粒度的测试资源的监控对象进行运行状态的检测,所述运行状态至少包括测试进度、执行状态、和异常告警中的一种或多种;
所述指标综合展示单元用于接收业务能力测试系统上报的测试结果,并根据所述测试结果确定展示方案的配置能力,并对不同类型的指标数据进行展示。
3.根据权利要求2所述的测试中间件,其特征在于,所述测试执行调度单元具体包括测试位置管控子单元和测试任务管控子单元,所述测试位置管控子单元展示包括中心集中管控模式和本地离线管控模式;所述测试任务管控子单元至少包括活动级精细调度模式和脚本级粗粒度调度模式。
4.根据权利要求1所述的测试中间件,其特征在于,所述测试基础服务平台模块包括测试基础通信支撑服务单元、测试公共构件单元、测试开发集成API接口集和测试运行支撑工具集;
所述测试基础通信支撑服务单元用于在测试过程中,根据测试数据、运行状态、管控命令、测试脚本不同类型数据的传输需求,确定测试基础通信支撑服务,所述测试基础通信支撑服务至少包括远程过程调用或消息队列中的一种;
所述测试公共构件单元用于根据文件传输、节点注册、资源部署、进程管理、日志服务、数据收集、状态监视的共性需求,确定预设的测试公共构件;
所述测试开发集成API接口集用于根据测试公共构件提供的公共服务,确定与所述测试资源对应的符合预设标准的开发集成API接口集;
所述测试运行支撑工具集用于对测试过程中的系统运行状态的诊断与故障定位;还用于根据不同的测试规划阶段,对各类测试脚本进行传输;还用于在离线测试条件下,进行测试数据的导入导出操作。
5.根据权利要求4所述的测试中间件,其特征在于,所述测试运行支撑工具集至少包括连通性测试工具、时统校验工具、文件传输工具和数据导入导出。
6.根据权利要求4所述的测试中间件,其特征在于,所述测试开发集成API接口集至少包括节点注册接口、资源部署接口、活动协调接口、状态监控接口和数据上报接口中的一种或多种;具体包括:
节点注册接口用于动态获取参与测试的各类仿真器、模拟器、数据采集器的运行平台信息,所述运行平台信息至少包括IP地址、平台类型和已部署的测试资源情况中的一种或多种;
脚本部署接口用于在测试过程中,确定与各类业务模拟器与仿真器对应的驱动脚本信息;
活动协调接口用于统一调度各类测试资源的测试活动;
状态监控接口用于监控各类测试资源的运行状态,所述运行状态至少包括测试的进展情况、模型的运行状态和资源的使用情况中的一种或多种;
数据上报接口用于接收测试过程中各类测试资源采集到的测试数据,所述测试数据用于各项规定测试指标的计算。
7.一种测试管理系统,其特征在于,包括如权利要求1-4的任一所述的测试中间件,所述测试管理系统包括:基础设施层、支撑服务层、测试基础服务平台层和测试集成管控环境层,其中,所述测试中间件位于所述测试基础服务品台层和所述测试集成管控环境层。
8.根据权利要求7所述的测试管理系统,其特征在于,所述基础设施层至少包括操作系统、数据库、云管理平台及虚拟化资源管理服务等方面内容,所述基础设施层用于基于统一构建的计算存储环境,依托云管理平台,确定与测试对应的虚拟化资源管理服务,且将与测试对应的资源进行存储。
9.根据权利要求7所述的测试管理系统,其特征在于,所述支撑服务层至少包括为测试的开展提供数据分发中间件、数据统一访问服务器、时统服务器、Web服务器和应用服务器中的一种或多种。
10.根据权利要求7所述的测试管理系统,其特征在于,所述测试管理系统为B/S架构。
CN202210531675.3A 2022-05-17 2022-05-17 测试中间件及测试管理系统 Active CN114661622B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210531675.3A CN114661622B (zh) 2022-05-17 2022-05-17 测试中间件及测试管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210531675.3A CN114661622B (zh) 2022-05-17 2022-05-17 测试中间件及测试管理系统

Publications (2)

Publication Number Publication Date
CN114661622A CN114661622A (zh) 2022-06-24
CN114661622B true CN114661622B (zh) 2022-08-23

Family

ID=82036419

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210531675.3A Active CN114661622B (zh) 2022-05-17 2022-05-17 测试中间件及测试管理系统

Country Status (1)

Country Link
CN (1) CN114661622B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115080436B (zh) * 2022-06-28 2023-09-22 中电金信软件有限公司 测试指标确定方法、装置、电子设备及存储介质
CN115208875B (zh) * 2022-07-14 2024-04-19 中国银行股份有限公司 多传输中间件的信息集成系统
CN115442350A (zh) * 2022-07-29 2022-12-06 中国人民解放军63892部队 一种lvc-de分布式合成环境的远程过程调用实现方法
CN116737560B (zh) * 2023-06-08 2023-11-21 中国人民解放军陆军航空兵学院 基于智能导控的智慧训练系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105760298A (zh) * 2016-02-16 2016-07-13 上海斐讯数据通信技术有限公司 一种第三方测试服务平台

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102141962B (zh) * 2011-04-07 2013-06-19 北京航空航天大学 一种安全性分布式测试框架系统及其测试方法
US9183124B2 (en) * 2011-04-18 2015-11-10 Accenture Global Services Limited Automation controller for next generation testing system
CN109783348A (zh) * 2018-12-06 2019-05-21 中国电力科学研究院有限公司 基于云平台的测试工具资源管理方法、系统
CN113704089B (zh) * 2021-07-26 2023-01-10 中国铁道科学研究院集团有限公司通信信号研究所 一种全场景的gsm-r接口服务器测试平台系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105760298A (zh) * 2016-02-16 2016-07-13 上海斐讯数据通信技术有限公司 一种第三方测试服务平台

Also Published As

Publication number Publication date
CN114661622A (zh) 2022-06-24

Similar Documents

Publication Publication Date Title
CN114661622B (zh) 测试中间件及测试管理系统
US11520639B2 (en) Method for allocating and managing cluster resource on cloud platform
US20200379794A1 (en) Method for containerizing application on cloud platform
Zhou et al. Delta debugging microservice systems
CN113127343B (zh) 一种基于微服务架构的电网代码测试分析系统
CN112214280B (zh) 一种电力系统仿真的云化方法及系统
CN103795749B (zh) 用于诊断运行在云环境中的软件产品的问题的方法和装置
CN110162977A (zh) 一种Android车载终端系统漏洞检测系统及方法
JP2008527513A (ja) グリッド環境にサブミットされたグリッド・ジョブによる使用の前のリソース機能の検査
CN111324599B (zh) 一种区块链实验系统及管理方法
CN112256406B (zh) 作业流程平台化调度方法
CN109150653B (zh) 一种远程硬件在环hil自动化测试方法及系统
CN111600760B (zh) 一种电网运行监控系统的质量检测系统、方法及设备
CN110636108A (zh) 一种用于电力计量的微服务架构及其实现方法
CN114896108A (zh) 测试验证系统
CN107018160B (zh) 一种基于层次化的制造资源和云化方法
Lu et al. CF4BDA: A conceptual framework for big data analytics applications in the cloud
CN111708677B (zh) 一种云计算环境下的云硬盘使用量采集方法
CN112068953B (zh) 一种云资源精细化管理溯源系统及方法
CN113986714A (zh) 一种基于容器化的自动化持续测试方法及装置
CN111221687B (zh) 一种云存储测试系统和方法
Zeng et al. A Novel Construction Technology of Enterprise Business Deployment Architecture Based on Containerized Microservice
Sun et al. Towards a scalable paas for service oriented software
CN110650063A (zh) 一种集中式的银行第三方软件仿真系统及方法
Weiß et al. Simulating Cloud Environments of Connected Vehicles for Anomaly Detection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant