CN111667250A - 一种基于云的自动化测试执行机的管理方法和系统 - Google Patents

Abstract

本发明公开了一种基于云的自动化测试执行机的管理系统，包括功能模块系统、WEB服务器、执行机客户端；功能模块系统包括用户登陆与交互模块、权限管理模块、预约管理模块、用例管理模块、用例执行模块、执行机管理模块、数据管理模块以及测试报告日志管理模块；方法包括：申请人查找可预约执行测试任务的测试执行机；填写预约申请信息，选择测试的执行人；执管理员审批是否同意预约申请；测试执行人登陆并使用测试执行机；收集测试报告，测试运行结束后，将测试报告和日志上传到报告服务器；采用本发明执行机的管理方法提高了测试平台的利用率，直观的了解当前测试执行机的性能情况，直观的统计测试执行机的使用率，节省大量人力。

Description

一种基于云的自动化测试执行机的管理方法和系统

技术领域

本发明涉及计算机软硬件测试技术领域，特别涉及一种基于云的自动化测试执行机的管理方法和系统。

背景技术

随着对软件交付质量的关注度不断的提升，自动化测试不断的发展壮大。自动化测试框架、自动化测试用例管理平台等，如雨后春笋一般，极大的提升了自动化测试的实施效率。对于自动化测试而言，增加多个测试执行机进行并行测试，也是提升自动化用例执行效率的一个行之有效的手段。那么如何高效利用这些测试执行机，以及如何快速升级部署这些测试执行机上的测试工具、测试用例以及测试脚本，是每一个应用自动化测试的团队需要调研的一个问题。

针对这些测试执行机的管理，业界主流方式是对开源自动化测试框架selenium-webdriver提供分布式测试环境部署进行定制化、或者是采用docker等容器技术，还有是持续集成管理Jenkins等工具对测试执行机以及部分设备进行管理。

这些开源工具，特别在对纯web的测试验证中，起到非常大的优势。但是，对于需要人工搭建测试环境的工业设备(例如：车载娱乐系统中控屏)自动化测试来说，这些工具均无法满足需求。

同时对测试执行机中的测试工具软件进行升级管理，却缺少通用性的升级方法和系统。在实现本申请的过程中，发现现有的技术中，存在以下问题：

现有的分布式部署工具，均无法知道测试执行机当前是否有人工正在进行操作，人工也无法知道这些管理框架什么时候对执行机进行操作，导致人为测试中断率高；无法批量进行软件升级，在有大量测试执行机下，人工升级耗时耗力；无法直观的了解当前测试执行机的性能情况；无法直观的统计测试执行机的使用率，没法进行测试执行机环境规模的拓展规划。

发明内容

本发明的目的是克服现有技术缺陷，提供一种基于云的自动化测试执行机的管理方法和系统，采用查看预约登记方法，提高测试平台的利用率，直观的了解当前测试执行机的性能情况，直观的统计测试执行机的使用率，节省大量人力。

本发明的目的一方面是这样实现的：一种基于云的自动化测试执行机的管理方法，包括以下步骤：

一种基于云的自动化测试执行机的管理方法，其特征在于， 包括以下步骤：

步骤1）申请人查看预约登记表，查找可预约执行测试任务的测试执行机；

步骤2） 填写预约申请信息，选择测试执行人，点击提交预约申请；

步骤3） 执管理员审批是否同意预约申请，若同意跳转至步骤4），否则流程退回给申请人；

步骤4）执行机自动被系统锁定；

步骤5）触发测试执行机工具和用例库升级跳转至步骤6）；

步骤6）验证升级是否成功，如果成功跳转至步骤7），反之通知执行机管理员，并且整个预约使用流程终止，直到管理员解决问题；

步骤7） 由配置人员进行配置用例和流程；

步骤8）由执行人触发，按照配置好的用例步骤，运行执行测试；

步骤9）收集测试报告，测试运行结束后，将测试报告和日志上传到报告服务器；

步骤10）发布测试报告告知步骤7）中的配置人员。

本发明的目的另一方面是这样实现的：一种基于云的自动化测试执行机的管理系统，包括功能模块系统、WEB服务器、执行机客户端；

所述功能模块系统包括用户登陆与交互模块、权限管理模块、预约管理模块、用例管理模块、用例执行模块、执行机管理模块、数据管理模块以及测试报告日志管理模块；

所述WEB服务器负责建立执行机客户端和执行机管理系统的远程连接；

所述执行机客户端执行功能模块系统下发的任务以及反馈执行机的信息和测试过程中产生的测试日志。

作为本发明的进一步限定，所述用户登陆与交互模块，用以根据用户名提供对应的权限展示所有该用户权限下的功能模块；

所述权限管理模块，用以对执行机的操作权限、平台用户登陆权限以及执行机内部核心模块的使用权限进行管理；

所述预约管理模块，用以预约登记、管理执行机的预约状态、可用状态以及维护状态；

所述用例管理模块，用以管理测试用例；

所述用例执行模块，用以执行并实时展示测试日志以及测试状态；

所述执行机管理模块，用以对执行机信息进行处理，并对驱动测试工具进行自动升级；

所述数据管理模块，用以保存测试用例、测试报告数据、台架使用数据报表以及权限数据；

所述测试报告日志管理模块，用以发送及保存管理测试报告和测试日志。

作为本发明的进一步限定，所述执行机客户端包括测试权限管理模块、测试执行工具模块和信息与状态同步器模块；

所述测试权限管理模块，通过从数据管理模块中获取权限数据，在用户登陆执行机时，判断该用户是否拥有操作权限；

所述测试执行工具模块，用以运行用户指定用例，将运行的日志实时推送到数据管理模块中，方便用户定位与分析测试过程中遇到的问题；

所述信息与状态同步器模块，用以实时与数据管理模块通讯，反馈当前的信息与状态。

本发明采用以上技术方案与现有技术相比，有益效果在于：1.通过合理的预约管理制度，使申请人能够直观的看到执行机是否处于空余状态，使得执行机始终处于高效率使用中，更高效的使用管理；

2. 持续集成工具或人工预约占用后的执行机，会自动锁定，非项目成员无法登陆执行机进行操作，有效的降低了因人为无意干预而导致的测试意外终止情况，避免人工非正常中断测试；

3. 通过管理客户端接收推送升级，环境管理员的只需将需要升级的工具上传到指定目录即可完成升级，测试执行机数量越大，收益比越高，智能管理测试执行机的软件版本；

4. 预约使用后，管理客户端自动同步最新的通用测试用例和测试项目的测试用例，自动更新最新自动化测试用例库，提高测试效率；

5. 实时记录测试执行机的使用率，降低人工统计测试数据的工作量，每月自动发送月报，方便管理员知晓当前台架的使用率，及时扩容。

6. 接入服务器后的所有测试执行机都可以被远程操作，用户可以在任意地点管理测试任务，异地分布式部署方式降低了人员出差成本。

附图说明

图1本发明执行机管理系统框架图。

图2本发明执行机管理方法流程图。

图3测试执行机部署系统图。

图4本发明自动化测试执行机使用率统计报表效果图。

具体实施方式

如图1所示的一种基于云的自动化测试执行机的管理系统，包括功能模块系统、WEB服务器、执行机客户端；

功能模块系统包括用户登陆与交互模块、权限管理模块、预约管理模块、用例管理模块、用例执行模块、执行机管理模块、数据管理模块以及测试报告日志管理模块；

WEB服务器负责建立执行机客户端和执行机管理系统的远程连接；

执行机客户端执行功能模块系统下发的任务以及反馈执行机的信息和测试过程中产生的测试日志，通过执行机客户端模块的支持，使得可以在任意联通网络的区域内部署测试执行机。

用户登陆与交互模块，用以根据用户名提供对应的权限展示所有该用户权限下的功能模块；系统普通用户，可以展示用例管理模块、用例执行模块以及预约管理模块；系统管理员用户，可以展示所有模块。

权限管理模块，用以对执行机的操作权限、平台用户登陆权限以及执行机内部核心模块的使用权限进行管理；包括三种权限：用户操作权限、执行机的使用权限和执行机的证书权限。

预约管理模块，用以预约登记、管理执行机的预约状态、可用状态以及维护状态；

用例管理模块，用以管理测试用例；该模块提供交互页面，用户可以直接在交互页面上，对用例进行操作，包括通用自动化测试用例和自定义自动化测试用例；

用例执行模块，用以执行并实时展示测试日志以及测试状态；执行用例时，系统会将需要执行的任务，推送给执行机，并且实时展示执行机运行的每一个测试步骤结果；该模块提供暂停/恢复、终止两个功能，用户下发暂停时，执行机会进等待状态，用户操作完成后，可以恢复；用户下发终止后，用例执行模块就会调起日志管理模块对测试日志进行收集与发送。

执行机管理模块，用以对执行机信息进行处理，并对驱动测试工具进行自动升级；执行机的信息包括执行机编号、执行机名称、硬件版本号、客户端版本号、可用状态、功能支持以及备注；其中，可用状态包括可用、使用中、维护中、废弃；只有在可用状态下，管理员可以设置为“维护中”状态，在可用状态下，系统可以自动切换“可用”和“使用中”两种状态；支持跨地域性测试执行机部署，能够远程下发测试任务，等待测试报告反馈；执行机的驱动/工具的升级管理，是通过Ansible将要升级的程序推送到各个执行机上，实现对执行机的自动运维；Ansible是一个开源自动化运维工具，实现了批量系统配置、批量程序部署、批量运行命令等功能。

数据管理模块，用以保存测试用例、测试报告数据、台架使用数据报表以及权限数据；利用关系型数据库，实现数据持久化。

测试报告日志管理模块，用以发送及保存管理测试报告和测试日志；在用例执行模块启动时，就开始工作，会主动收集用例执行过程中，执行机信息、测试生成的文本日志以及视频日志；会在用例执行模块执行结束后，生成测试报告；测试结果为异常，并且得到人工确认是异常后，会将测试文本日志、视频日志上传至数据管理模块。

执行机客户端包括测试权限管理模块、测试执行工具模块和信息与状态同步器模块；

测试权限管理模块，通过从数据管理模块中获取权限数据，在用户登陆执行机时，判断该用户是否拥有操作权限；

测试执行工具模块，用以运行用户指定用例，将运行的日志实时推送到数据管理模块中，方便用户定位与分析测试过程中遇到的问题；

信息与状态同步器模块，用以实时与数据管理模块通讯，反馈当前的信息与状态。

如图2所示的一种基于云的自动化测试执行机的管理方法，包括以下步骤：

步骤1）申请人查看预约登记表，查找可预约执行测试任务的测试执行机；

步骤2） 填写预约申请信息，选择测试执行人，点击提交预约申请；

步骤3） 执管理员审批是否同意预约申请，若同意跳转至步骤4），否则流程退回给申请人；

步骤4）执行机自动被系统锁定；

步骤5）触发测试执行机工具和用例库升级跳转至步骤6）；

步骤6）验证升级是否成功，如果成功跳转至步骤7），反之通知执行机管理员，并且整个预约使用流程终止，直到管理员解决问题；

步骤7） 由配置人员进行配置用例和流程；

步骤8）由执行人触发，按照配置好的用例步骤，运行执行测试；

步骤9）收集测试报告，测试运行结束后，将测试报告和日志上传到报告服务器；

步骤10）发布测试报告告知步骤7）中的配置人员。

如图3所示，测试执行机通过网络与WEB服务器连接通讯，能够在不同办公区域访问到所需要的测试执行机，将任务下发至指定执行机后，即可运行测试任务，提高资源整合能力；如图4所示，通过该执行机使用率统计报表申请人可以直观的了解当前测试执行机的性能情况，直观的统计测试执行机的使用率，节省大量人力。

本发明并不局限于上述实施例，在本发明公开的技术方案的基础上，本领域的技术人员根据所公开的技术内容，不需要创造性的劳动就可以对其中的一些技术特征作出一些替换和变形，这些替换和变形均在本发明的保护范围内。

Claims (4)

1.一种基于云的自动化测试执行机的管理方法，其特征在于， 包括以下步骤：

步骤1）申请人查看预约登记表，查找可预约执行测试任务的测试执行机；

步骤2） 填写预约申请信息，选择测试执行人，点击提交预约申请；

步骤3） 执管理员审批是否同意预约申请，若同意跳转至步骤4），否则流程退回给申请人；

步骤4）执行机自动被系统锁定；

步骤5）触发测试执行机工具和用例库升级跳转至步骤6）；

步骤6）验证升级是否成功，如果成功跳转至步骤7），反之通知执行机管理员，并且整个预约使用流程终止，直到管理员解决问题；

步骤7） 由配置人员进行配置用例和流程；

步骤8）由执行人触发，按照配置好的用例步骤，运行执行测试；

步骤9）收集测试报告，测试运行结束后，将测试报告和日志上传到报告服务器；

步骤10）发布测试报告告知步骤7）中的配置人员。

2.一种基于云的自动化测试执行机的管理系统，其特征在于，包括功能模块系统、WEB服务器、执行机客户端；

所述功能模块系统包括用户登陆与交互模块、权限管理模块、预约管理模块、用例管理模块、用例执行模块、执行机管理模块、数据管理模块以及测试报告日志管理模块；

所述WEB服务器负责建立执行机客户端和执行机管理系统的远程连接；

所述执行机客户端执行功能模块系统下发的任务以及反馈执行机的信息和测试过程中产生的测试日志。

3.根据权利要求2所述的一种基于云的自动化测试执行机的管理系统，其特征在于，所述用户登陆与交互模块，用以根据用户名提供对应的权限展示所有该用户权限下的功能模块；

所述权限管理模块，用以对执行机的操作权限、平台用户登陆权限以及执行机内部核心模块的使用权限进行管理；

所述预约管理模块，用以预约登记、管理执行机的预约状态、可用状态以及维护状态；

所述用例管理模块，用以管理测试用例；

所述用例执行模块，用以执行并实时展示测试日志以及测试状态；

所述执行机管理模块，用以对执行机信息进行处理，并对驱动测试工具进行自动升级；

所述数据管理模块，用以保存测试用例、测试报告数据、台架使用数据报表以及权限数据；

所述测试报告日志管理模块，用以发送及保存管理测试报告和测试日志。

4.根据权利要求2所述的一种基于云的自动化测试执行机的管理系统，其特征在于，所述执行机客户端包括测试权限管理模块、测试执行工具模块和信息与状态同步器模块；

所述测试权限管理模块，通过从数据管理模块中获取权限数据，在用户登陆执行机时，判断该用户是否拥有操作权限；

所述测试执行工具模块，用以运行用户指定用例，将运行的日志实时推送到数据管理模块中，方便用户定位与分析测试过程中遇到的问题；

所述信息与状态同步器模块，用以实时与数据管理模块通讯，反馈当前的信息与状态。

Images