CN116225915A - 基于业务巡检的私有云项目交付自动化测试方法和装置 - Google Patents

Abstract

本发明公开了一种基于业务巡检的私有云项目交付自动化测试方法和装置，所述方法包括：采集执行自动化测试所需的当前环境信息，并基于当前环境信息创建自动化测试pod，自动化测试pod包括执行自动化测试所需的依赖信息；当用户触发健康巡检界面中的一键巡检功能键时，拉起自动化测试pod并获取用户配置的自动化测试构建信息，以自动执行自动化测试服务；自动化测试构建信息包括测试账号信息和功能巡检类型信息；自动化测试服务用于自动执行：基于自动化测试pod和自动化测试构建信息执行自动化测试，并在健康巡检界面展示巡检结果；自动销毁自动化测试pod。本发明在避免繁琐的自动化环境搭建工作的同时也最大程度降低了对环境的物理资源的消耗。

Description

基于业务巡检的私有云项目交付自动化测试方法和装置

技术领域

本发明涉及自动化测试技术领域，尤其涉及一种基于业务巡检的私有云项目交付自动化测试方法和装置。

背景技术

中国专利文献CN111026602A公开了一种云平台的健康巡检调度管理方法、装置及电子设备，该方法包括：获取用户自定义的巡检策略和巡检阈值，根据所述巡检策略、云平台中的节点数量以及节点类型创建巡检任务，生成远程调用请求并将其异步发送至各节点；响应于远程调用请求选择执行与巡检任务对应的巡检脚本，采集对应节点的巡检数据；获取巡检数据，根据巡检数据和巡检阈值分别判断各节点的巡检对象是否健康，并基于判断结果生成巡检结果表。

中国专利文献CN112448846A公开了一种k8s集群的健康巡检方法、装置、设备及可读存储介质。能够扫描k8s集群的资源，对扫描得到的资源信息进行汇总，得到资源扫描结果；进而对资源扫描结果中每个资源的配置项进行检查，识别出异常的配置项，以作为检查结果；然后对检查结果进行持久化保存，得到持久化数据；最终通过UI界面展示持久化数据。

中国专利文献CN202210106162.8提供了一种私有云巡检方案，该方案首先可以在获取巡检任务触发信息后，在私有云上完成巡检环境准备，然后根据所述巡检任务触发信息所携带的参数从巡检工具的系统中获取并加载巡检项，基于加载的巡检项初始化所述巡检任务，执行所述巡检任务，并将所述巡检任务的巡检结果做格式化处理后保存至数据库中，在巡检任务完成后，返回格式化处理后的巡检结果。

以上三项专利文献都涉及云计算领域的健康巡检技术，均旨在通过配置并执行巡检功能，检测集群服务器、软件进程的健康状态，并基于一定阈值判断巡检状态是否健康，最终输出巡检结果报告以及告警策略。但是上述巡检方案并未对实际客户最为关心的私有云产品整体的业务功能进行健康巡检，无法满足客户的实际需求。

发明内容

本发明实施例提供一种基于业务巡检的私有云项目交付自动化测试方法和装置，用以解决现有技术中巡检方案并未对实际客户最为关心的私有云产品整体的业务功能进行健康巡检，无法满足客户的实际需求问题。

根据本发明实施例的基于业务巡检的私有云项目交付自动化测试方法，包括：

采集执行自动化测试所需的当前环境信息，并基于所述当前环境信息创建自动化测试pod，所述自动化测试pod包括执行自动化测试所需的依赖信息；

当用户触发健康巡检界面中的一键巡检功能键时，拉起所述自动化测试pod并获取用户配置的自动化测试构建信息，以自动执行自动化测试服务；所述自动化测试构建信息包括测试账号信息和功能巡检类型信息；

所述自动化测试服务用于自动执行：基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，并在所述健康巡检界面展示巡检结果；自动销毁所述自动化测试pod。

根据本发明的一些实施例，所述执行自动化测试所需的依赖信息通过config-map的方式从业务pod中获取，所述执行自动化测试所需的依赖信息包括：当前环境的域名host、数据库连接信息、存储服务器的访问信息。

根据本发明的一些实施例，所述获取用户配置的自动化测试构建信息，包括：

检测用户在健康巡检界面中显示的测试账号信息栏所输入的自定义测试账号信息；当用户没有在所述测试账号信息栏输入自定义测试账号信息时，所述测试账号信息栏显示预设的默认账号信息；

检测用户在所述健康巡检界面中显示的功能巡检类型栏所选择的功能巡检类型，所述功能巡检类型栏提供多个功能巡检类型选项供用户选择，所述多个功能巡检类型选项包括：全量功能巡检、核心业务功能巡检、自定义业务功能巡检。

根据本发明的一些实施例，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，包括：

基于所述自动化测试pod和所述自动化测试构建信息，进行至少一个巡检用例的参数化构建；

执行完成参数化构建的各巡检用例，以获得至少一个巡检用例执行结果；

根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分；

根据所述巡检得分评估当前私有云环境业务功能的健康状态，并生成巡检报告。

根据本发明的一些实施例，所述根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分，包括：

根据所述完成参数化构建的各巡检用例的重要级别，确定所述完成参数化构建的各巡检用例的权重值；

所述重要级别包括：核心功能的基本业务流p0、核心功能的正向业务流p1、重要功能的正向业务流以及核心功能和重要功能的异常业务流p2；所述p0对应的权重值大于所述p1对应的权重值，所述p1对应的权重值大于所述p2对应的权重值；

基于所述完成参数化构建的各巡检用例的权重值以及所述至少一个巡检用例执行结果，根据如下公式计算巡检得分：

score＝100-n_p0×w_p0-n_p1×w_p1-n_p2×w_p2，

其中，n_p0、n_p1、n_p2分别表示重要级别为p0、p1、p2的巡检用例执行失败的用例数，w_p0、w_p1、w_p2分别表示重要级别为p0、p1、p2的巡检用例对应的权重值。

根据本发明的一些实施例，所述w_p0＝10，所述w_p1＝5，所述w_p2＝1。

根据本发明的一些实施例，所述巡检报告，包括：巡检用例总数、巡检用例执行的成功率、测试套件信息、巡检用例信息，所述巡检用例信息包括巡检用例的所有执行步骤；

对于测试失败的巡检用例，会抛出堆栈信息，并标记失败步骤。

根据本发明的一些实施例，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，还包括：

在单条所述巡检用例执行完成后删除该巡检用例用到的所有测试资源；

在所有所述巡检用例执行完成后再次巡检残余的测试资源并完成资源清理；

对于巡检后仍无法清除的测试资源进行记录汇总并在所述巡检报告中展示所有清理失败的测试资源。

根据本发明实施例的基于业务巡检的私有云项目交付自动化测试装置，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的方法的步骤。

采用本发明实施例，本发明提供的基于业务巡检的自动化测试方法，将自动化测试功能作为产品功能的一部分用于交付，通过业务巡检功能触发自动化测试可减轻项目交付人员在环境部署完成之后的环境验证负担，同时此功能也可交付给客户用于环境日常维护时的基本功能冒烟使用，极大的减轻了客户的测试工作量，提升了环境维护的效率。此外，自动化测试的环境运行于集群内独立的pod，在完成测试之后pod便会自动销毁，有效避免了繁琐的自动化环境搭建工作的同时也最大程度降低了对环境的物理资源的消耗。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。在附图中：

图1是本发明实施例中基于业务巡检的私有云项目交付自动化测试方法流程图；

图2是本发明实施例中巡检自动化测试前后端及自动化服务交互逻辑示意图；

图3是本发明实施例中巡检自动化测试前后端及自动化服务的功能示意图。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。另外，在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

本发明实施例提出一种基于业务巡检的私有云项目交付自动化测试方法，该自动化测试方法基于私有云项目的巡检功能执行，用于私有云环境的业务功能测试验证。

本发明实施例的基于业务巡检的私有云项目交付自动化测试方法，包括：

采集执行自动化测试所需的当前环境信息，并基于所述当前环境信息创建自动化测试pod，所述自动化测试pod包括执行自动化测试所需的依赖信息，例如，当前环境的域名host、数据库连接信息、存储服务器的访问信息等。

当用户触发健康巡检界面中的一键巡检功能键时，拉起所述自动化测试pod并获取用户配置的自动化测试构建信息，以自动执行自动化测试服务；所述自动化测试构建信息包括测试账号信息和功能巡检类型信息；

所述自动化测试服务用于自动执行：首先，基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，然后，在所述健康巡检界面展示巡检结果；最后自动销毁所述自动化测试pod，以释放资源。

采用本发明实施例，本发明提供的基于业务巡检的自动化测试方法，将自动化测试功能作为产品功能的一部分用于交付，通过业务巡检功能触发自动化测试可减轻项目交付人员在环境部署完成之后的环境验证负担，同时此功能也可交付给客户用于环境日常维护时的基本功能冒烟使用，极大的减轻了客户的测试工作量，提升了环境维护的效率。此外，自动化测试的环境运行于集群内独立的pod，在完成测试之后pod便会自动销毁，有效避免了繁琐的自动化环境搭建工作的同时也最大程度降低了对环境的物理资源的消耗。

在上述实施例的基础上，进一步提出各变型实施例，在此需要说明的是，为了使描述简要，在各变型实施例中仅描述与上述实施例的不同之处。

根据本发明的一些实施例，所述执行自动化测试所需的依赖信息通过config-map的方式从业务pod中获取。

根据本发明的一些实施例，所述获取用户配置的自动化测试构建信息，包括：

检测用户在健康巡检界面中显示的测试账号信息栏所输入的自定义测试账号信息；当用户没有在所述测试账号信息栏输入自定义测试账号信息时，所述测试账号信息栏显示预设的默认账号信息；

检测用户在所述健康巡检界面中显示的功能巡检类型栏所选择的功能巡检类型，所述功能巡检类型栏提供多个功能巡检类型选项供用户选择，所述多个功能巡检类型选项包括：全量功能巡检、核心业务功能巡检、自定义业务功能巡检。由于，可以便于用户根据需求配置，满足不同用户的需求。

根据本发明的一些实施例，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，包括：

基于所述自动化测试pod和所述自动化测试构建信息，进行至少一个巡检用例的参数化构建；

执行完成参数化构建的各巡检用例，以获得至少一个巡检用例执行结果；

根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分。巡检得分能直观且量化地告知用户当前环境业务功能的状态；

根据所述巡检得分评估当前私有云环境业务功能的健康状态，并生成巡检报告。

根据本发明的一些实施例，所述根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分，包括：

根据所述完成参数化构建的各巡检用例的重要级别，确定所述完成参数化构建的各巡检用例的权重值；

所述重要级别包括：核心功能的基本业务流p0、核心功能的正向业务流p1、重要功能的正向业务流以及核心功能和重要功能的异常业务流p2；所述p0对应的权重值大于所述p1对应的权重值，所述p1对应的权重值大于所述p2对应的权重值；

基于所述完成参数化构建的各巡检用例的权重值以及所述至少一个巡检用例执行结果，根据如下公式计算巡检得分：

score＝100-n_p0×w_p0-n_p1×w_p1-n_p2×w_p2，

其中，n_p0、n_p1、n_p2分别表示重要级别为p0、p1、p2的巡检用例执行失败的用例数，w_p0、w_p1、w_p2分别表示重要级别为p0、p1、p2的巡检用例对应的权重值。

进一步的，可以设置w_p0＝10，w_p1＝5，w_p2＝1。

根据本发明的一些实施例，所述巡检报告，包括：巡检用例总数、巡检用例执行的成功率、测试套件信息、巡检用例信息，所述巡检用例信息包括巡检用例的所有执行步骤；

对于测试失败的巡检用例，会抛出堆栈信息，并标记失败步骤。由此可以方便巡检执行人定位。

根据本发明的一些实施例，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，还包括：

在单条所述巡检用例执行完成后删除该巡检用例用到的所有测试资源。

进一步的，在所有所述巡检用例执行完成后再次巡检残余的测试资源并完成资源清理。

更进一步的，对于巡检后仍无法清除的测试资源进行记录汇总并在所述巡检报告中展示所有清理失败的测试资源。

下面参照附图以一个具体的实施例详细描述根据本发明发明实施例的基于业务巡检的私有云项目交付自动化测试方法。值得理解的是，下述描述仅是示例性描述，而不应理解为对本发明的具体限制。

如图1所示，本发明实施例的基于业务巡检的私有云项目交付自动化测试方法，包括：

步骤S110：采集执行自动化测试所需的当前环境信息，创建自动化测试pod，根据用户选择的巡检级别执行一键巡检；

在用户触发一键巡检时拉起自动化测试pod，该pod包含执行自动化测试所需的所有环境依赖；

自动化测试pod通过config-map的方式从业务pod中获取当前环境的域名(host)、数据库连接信息、存储服务器的访问信息等执行自动化测试所需的依赖信息；

用户在执行一键巡检时可以选择输入自定义的测试账号，或者选择使用默认的测试账号执行自动化测试一键巡检。测试账号信息会作为一键巡检接口的传参传递给后端服务，最终用于自动化测试的参数化构建；

用户在执行一键巡检时可以选择全量功能巡检、核心业务功能巡检、自定义业务功能巡检，来满足不同场景下的自动化测试验证需求；

在拉起自动化测试pod并获取了自动化测试构建信息之后，便开始执行参数化构建。

步骤S120：巡检所执行的用例根据重要程度分为P0/P1/P2，不同重要级别的用例具有不同的权重，在完成自动化测试后根据用例执行结果及用例的重要级别进行赋权打分，算出巡检得分；

巡检自动化用例按照重要级别划分为3个等级；

p0：核心功能的主流程，基本业务流，保证功能的完整性，此类用例失败会导致其他多处功能无法正常使用，此类用例赋予权重值wp0＝10；

p1：核心功能的正向业务流，覆盖系统功能的所有重要业务流，此类用例赋予权重值wp1＝5；

p2：重要功能的正向业务流、以及核心功能和重要功能的异常业务流，此类用例赋予权重值wp2＝1；

最终根据如下公示算出巡检得分：

score＝100-n_p0×w_p0-n_p1×w_p1-n_p2×w_p2，

其中，np0，np1，np2分别表示p0/p1/p2用例执行失败的用例数。

当巡检得分为负数时，巡检页面显示巡检得分为0。如果巡检得分等于100分，则认为当前私有云环境功能正常，否则认为环境存在异常。

步骤S130：完成自动化测试后生成巡检报告并上传至存储服务器，同时检查测试账号下创建的测试资源，删除残余的测试数据；

在完成自动化测试后会生成自动化巡检报告，报告中包含所执行的自动化用例总数、用例执行的成功率、测试套件信息、测试用例信息等，在测试用例信息中会包含用例的所有执行步骤，并会记录所有的请求及响应信息，包括：http请求、数据库sql语句请求、ssh执行的命令等。对于执行失败的用例，会抛出堆栈信息，并告知具体是那一个业务步骤执行失败，便于巡检执行人定位问题。

自动化巡检测试执行时会记录所执行的用例创建的所有资源信息，单条用例在执行完成后会清除当前用例所创建的资源，在所有用例都执行完成之后会再次巡检残余的测试资源并完成资源清理，对于巡检后仍无法清除的资源会记录汇总并将结果返回告知巡检执行用户；

步骤S140：汇总测试结果并通过回调接口将测试结果告知后端服务，并最终在前端巡检页面展示，同时删除自动化测试pod释放资源。

汇总的测试结果包括自动化测试用例的执行结果报告以及清理失败的测试资源汇总报告，执行结果在巡检页面展示。

在完成巡检报告上传及测试数据清理后，自动化测试pod的执行任务即全部完成。测试pod会自动销毁，释放占用的资源。

本发明基于私有云项目的巡检功能执行自动化测试功能，用于私有云环境的业务功能测试验证。本发明中的自动化测试功能运行在私有云集群环境中，在拉起自动化测试服务的pod时通过config-map获取当前环境的域名、数据库信息等执行自动化测试所依赖的环境信息，可以在用户不输入任何构建参数的情形下触发自动化测试任务，操作简便，直观且量化地向客户展示了当前私有云环境基本功能是否正常可用；

其次，自动化测试执行完成之后，会根据用例的执行结果以及用例的重要级别进行赋权打分，最终给出巡检得分，能直观且量化地告知用户当前环境业务功能的状态；

此外，为避免自动化测试服务的运行给客户的环境造成残留的资源数据，自动化用例在设计时会记录用例执行过程中创建的所有资源数据，在所有用例执行完成后会巡检一遍测试账号下的资源数据，清理残余数据，对于多次清理仍未删除的数据会告知用户手工处理，尽量减少自动化测试对客户环境的变动。

上述步骤可以参照图2和图3一并理解，以更清晰的理解本申请所保护的方法。

需要说明的是，以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

对应的，本发明实施例还提出一种基于业务巡检的私有云项目交付自动化测试装置，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的方法的步骤。

参照图2和图3所示，基于业务巡检的私有云项目交付自动化测试装置包括前端10和后端20，前端10用于完成与用户的交互，包括：检测用户触发一键巡检的操作、获取用户配置的自动化测试构建信息、以及巡检结果的展示等功能；后端20用于在用户触发健康巡检界面中的一键巡检功能键时，拉起所述自动化测试pod并从前端获取自动化测试构建信息，以自动执行自动化测试服务30。

需要说明的是，本发明说明书中未作详细描述的内容属于本领域专业技术人员的公知技术。

Claims (9)

1.一种基于业务巡检的私有云项目交付自动化测试方法，其特征在于，包括：

采集执行自动化测试所需的当前环境信息，并基于所述当前环境信息创建自动化测试pod，所述自动化测试pod包括执行自动化测试所需的依赖信息；

当用户触发健康巡检界面中的一键巡检功能键时，拉起所述自动化测试pod并获取用户配置的自动化测试构建信息，以自动执行自动化测试服务；所述自动化测试构建信息包括测试账号信息和功能巡检类型信息；

所述自动化测试服务用于自动执行：基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，并在所述健康巡检界面展示巡检结果；自动销毁所述自动化测试pod。

2.如权利要求1所述的方法，其特征在于，所述执行自动化测试所需的依赖信息通过config-map的方式从业务pod中获取，所述执行自动化测试所需的依赖信息包括：当前环境的域名host、数据库连接信息、存储服务器的访问信息。

3.如权利要求1所述的方法，其特征在于，所述获取用户配置的自动化测试构建信息，包括：

检测用户在健康巡检界面中显示的测试账号信息栏所输入的自定义测试账号信息；当用户没有在所述测试账号信息栏输入自定义测试账号信息时，所述测试账号信息栏显示预设的默认账号信息；

检测用户在所述健康巡检界面中显示的功能巡检类型栏所选择的功能巡检类型，所述功能巡检类型栏提供多个功能巡检类型选项供用户选择，所述多个功能巡检类型选项包括：全量功能巡检、核心业务功能巡检、自定义业务功能巡检。

4.如权利要求1所述的方法，其特征在于，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，包括：

基于所述自动化测试pod和所述自动化测试构建信息，进行至少一个巡检用例的参数化构建；

执行完成参数化构建的各巡检用例，以获得至少一个巡检用例执行结果；

根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分；

根据所述巡检得分评估当前私有云环境业务功能的健康状态，并生成巡检报告。

5.如权利要求4所述的方法，其特征在于，所述根据所述完成参数化构建的各巡检用例的重要级别以及所述至少一个巡检用例执行结果，计算巡检得分，包括：

根据所述完成参数化构建的各巡检用例的重要级别，确定所述完成参数化构建的各巡检用例的权重值；

所述重要级别包括：核心功能的基本业务流p0、核心功能的正向业务流p1、重要功能的正向业务流以及核心功能和重要功能的异常业务流p2；所述p0对应的权重值大于所述p1对应的权重值，所述p1对应的权重值大于所述p2对应的权重值；

基于所述完成参数化构建的各巡检用例的权重值以及所述至少一个巡检用例执行结果，根据如下公式计算巡检得分：

score＝100-n_p0×w_p0-n_p1×w_p1-n_p2×w_p2，

其中，n_p0、n_p1、n_p2分别表示重要级别为p0、p1、p2的巡检用例执行失败的用例数，w_p0、w_p1、w_p2分别表示重要级别为p0、p1、p2的巡检用例对应的权重值。

6.如权利要求5所述的方法，其特征在于，所述w_p0＝10，所述w_p1＝5，所述w_p2＝1。

7.如权利要求4所述的方法，其特征在于，所述巡检报告，包括：巡检用例总数、巡检用例执行的成功率、测试套件信息、巡检用例信息，所述巡检用例信息包括巡检用例的所有执行步骤；

对于测试失败的巡检用例，会抛出堆栈信息，并标记失败步骤。

8.如权利要求4所述的方法，其特征在于，所述基于所述自动化测试pod和所述自动化测试构建信息执行自动化测试，还包括：

在单条所述巡检用例执行完成后删除该巡检用例用到的所有测试资源；

在所有所述巡检用例执行完成后再次巡检残余的测试资源并完成资源清理；

对于巡检后仍无法清除的测试资源进行记录汇总并在所述巡检报告中展示所有清理失败的测试资源。

9.一种基于业务巡检的私有云项目交付自动化测试装置，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的方法的步骤。

Images