CN111708706A - 工业互联网app自动化测试系统和测试方法 - Google Patents

工业互联网app自动化测试系统和测试方法 Download PDF

Info

Publication number
CN111708706A
CN111708706A CN202010568857.9A CN202010568857A CN111708706A CN 111708706 A CN111708706 A CN 111708706A CN 202010568857 A CN202010568857 A CN 202010568857A CN 111708706 A CN111708706 A CN 111708706A
Authority
CN
China
Prior art keywords
test
module
testing
code
management module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010568857.9A
Other languages
English (en)
Inventor
蒋春旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Ceprei Industrial Technology Research Institute
Original Assignee
Chongqing Ceprei Industrial Technology Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Ceprei Industrial Technology Research Institute filed Critical Chongqing Ceprei Industrial Technology Research Institute
Priority to CN202010568857.9A priority Critical patent/CN111708706A/zh
Publication of CN111708706A publication Critical patent/CN111708706A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Stored Programmes (AREA)

Abstract

本发明提供的工业互联网APP自动化测试系统和测试方法以流水线的形式来灵活构建测试流程,基于Kubernetes和Docker技术来构建测试环境,基于Jenkins进行代码构建,同时,流水线支持多种测试工具的整合。本发明在传统人工操作的基础上提供自动化的工业互联网产品测试的解决方案,针对当前工业互联网应用和微服务质量要求,开发面向工业互联网应用和微服务的测试系统,从文档、功能性、可靠性、性能、安全性、协同扩展性、兼容性七个方面展开测试,提出一种规范划、自动化的测试验证方法。

Description

工业互联网APP自动化测试系统和测试方法
技术领域
本发明涉及数据处理技术领域,尤其涉及一种工业互联网APP自动化测试系统和测试方法。
背景技术
现有的工业互联网应用体系庞大,尚未形成工业互联网应用参考架构、微服务框架、工业知识封装等基础标准,以及接口、协议、数据、质量、安全等重点技术标准,工业互联网应用安全性、可靠性难以评价,从而使得工业互联网行业缺少检测评估标准和指标体系进行指导。传统的工业互联网APP测试是由软件测试项目师和业务专家人工完成。经测试项目师和业务专家按照测试用例编写自动化测试脚本,再由机器执行验证;为工业互联网APP编写自动化测试脚本是一件非常复杂的事情,并且很难保证正确性,随着工业互联网应用体系的庞大促使测试项目师和业务专业工作量大,测试成本高。
因此,亟需一种工业互联网APP自动化测试系统和测试方法。
发明内容
有鉴于此,本发明提供一种工业互联网APP自动化测试系统和测试方法。
本发明提供一种工业互联网APP自动化测试系统,其特征在于:包括:项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块、测试用例管理模块和性能测试模块;所述性能测试模块分别与所述项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块和测试用例管理模块连接;
所述项目研发管理模块用于编译打包、代码冲突检测、代码合并和应用管理;
所述代码扫描模块用于对代码实时进行代码静态扫描、代码缺陷扫描、Java代码规约扫描,并向所述单元测试模块反馈扫描结果;
所述单元测试模块用于集成应用代码里的单元测试,并向所述单元测试模块反馈单元测试结果;
所述测试环境管理模块用于按照应用、环境类型维度对内部现有测试环境资源进行管理;
所述测试用例管理模块用于新增测试用例;
所述性能测试模块用于提供测试管理。
进一步,所述测试环境管理模块的环境部署方式包括手动部署和自动部署。
进一步,所述测试用例管理模块的新增用例的导入方式包括单条用例导入,或者使用EXCEL批量导入。
进一步,所述单元测试模块的触发方式包括两种,分别是:手工触发方式和预设时间触发方式。
进一步,所述测试用例模块包括用例管理模块和缺陷管理模块。
相应地,本发明还提供一种工业互联网APP自动化测试方法,所述测试方法适用于权利要求1至5任一所述测试系统,其特征在于:所述方法包括如下步骤:
S1:搭建测试环境,由系统中测试环境管理模块提供支持,根据工业互联网APP的类型自动搭建测试环境;
S2:构建代码,由测试系统的代码扫描模块提供对被测应用的源代码仓库的配置,根据仓库地址对被测应用的源代码进行编译;
S3:代码检查,由测试系统的代码扫描模块会对已配置仓库地址的应用源代码进行静态扫描;
S4:单元测试,由测试系统的单元测试模块发起对被测应用各模块的测试请求;
S5:安全检查,由测试系统调用安全检查,评估代码安全性;
S6:执行步骤S2至步骤S5,并将反馈执行结果;
S7:缺陷处理,步骤S6执行完毕后,将所发现的问题提交至测试系统的测试用例管理模块的缺陷管理模块;
S8:根据缺陷管理模块的记过进行回归测试或生成测试报告。
进一步,所述步骤S3还包括对项目开发仓库地址持续进行代码变更监控。
进一步,所述测试方法还包括测试人员根据测试需求选择性配置步骤S2至步骤S5中的一个步骤或多个步骤。
本发明的有益技术效果:本发明提供的工业互联网APP自动化测试系统和测试方法以流水线的形式来灵活构建测试流程,基于Kubernetes和Docker技术来构建测试环境,基于Jenkins进行代码构建,同时,流水线支持多种测试工具的整合。本发明在传统人工操作的基础上提供自动化的工业互联网产品测试的解决方案,针对当前工业互联网应用和微服务质量要求,开发面向工业互联网应用和微服务的测试系统,从文档、功能性、可靠性、性能、安全性、协同扩展性、兼容性七个方面展开测试,提出一种规范划、自动化的测试验证方法。
附图说明
下面结合附图和实施例对本发明作进一步描述:
图1为本发明的测试系统的结构示意图。
图2为本发明的测试方法流程图。
具体实施方式
以下结合说明书附图对本发明做出进一步的说明:
本发明提供一种工业互联网APP自动化测试系统,其特征在于:包括:如图1所示,项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块、测试用例管理模块和性能测试模块;所述性能测试模块分别与所述项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块和测试用例管理模块连接;
所述项目研发管理模块用于编译打包、代码冲突检测、代码合并和应用管理;包括应用配置管理功能,集成编译打包、代码冲突检测、代码合并、应用管理于一体,提供项目分支管理,项目成员管理,项目进度管理,编译打包功能,支持svn,git多种代码管理系统,代码冲突检测功能,检测和主干代码冲突内容并进行提示,代码合并功能,支持应用代码一键合并主干,应用管理可以灵活配置维护各种应用。所述项目研发管理模块还包括应用配置管理模块和自动化构建模块。
所述代码扫描模块用于对代码实时进行代码静态扫描、代码缺陷扫描、Java代码规约扫描,并向所述单元测试模块反馈扫描结果;集成了FindBugs、SonarQube、Java代码规约等扫描工具,对代码实时进行代码静态扫描、代码缺陷扫描、Java代码规约扫描,并反馈扫描结果。所述代码扫描模块包括代码托管子单元和代码检查子单元。
所述单元测试模块用于集成应用代码里的单元测试,并向所述单元测试模块反馈单元测试结果;支持手工和定时任务两种触发方式,集成应用代码里的单元测试,并反馈单元测试结果,含全/增量覆盖率、单元测试通过率、单测失败追溯,并能够自动化触发运行。
所述测试环境管理模块用于按照应用、环境类型维度对内部现有测试环境资源进行管理;测试环境管理模块支持对接业界主流的PAAS平台(如K8S)和云厂商中间件产品,如SOFA、EDAS、DDC等多种产品完成环境部署。对内部现有测试环境资源进行管理,并将其按照应用、环境类型维度进行管理,如开发环境、测试环境、集成环境、UAT环境等。同时可以为用户提供一整套线下服务器资源管理和部署工具。部署方式同时支持手动部署和自动部署,提供环境一键申请、一键部署、一键释放功能,支持基于SVN、Git等多种代码管理系统的编译。
所述测试用例管理模块用于新增测试用例;可以新增单条用例或者使用Excel导入的方式来新增测试用例,已导入系统的测试用例可以单条执行或者批量执行。
所述性能测试模块用于提供测试管理。将性能测试数据、脚本、场景和环境等工具联动,提供脚本管理以及场景管理等功能,脚本管理,主干脚本库管理和配置,支持用Jmeter的编写和维护脚本,使用版本库管理脚本和版本,方便追踪压测脚本变动,统一直观的脚本管理界面,场景管理,支持在线设置压测力度(并发用户、压测时间、压测梯度),可在线选择压测机集群,压测场景监控,压测执行情况,压测场景管理界面,方面直观管理压测场景。
在本实施例中,所述测试用例模块包括用例管理模块和缺陷管理模块。
相应地,本发明还提供一种工业互联网APP自动化测试方法,所述测试方法适用于权利要求1至5任一所述测试系统,其特征在于:所述方法包括如下步骤:在本实施例中,又程本申请提供的测试方法步骤为流水线;
S1:搭建测试环境,由系统中测试环境管理模块提供支持,根据工业互联网APP的类型自动搭建测试环境;该步骤由系统中测试环境管理模块提供支持,根据工业互联网APP的类型自动搭建测试环境。环境的部署方式有两种,手动部署和自动部署,可以自己在环境管理系统中申请一台服务器,并手动选择一个之前在配置管理已经创建好的部署包,然后部署到该服务器上。同时也具有定时任务功能,可以支持将某一个部署包在一个特定时刻部署到某一台服务器上。还可以按照应用、环境类型维度进行资源管理,可以设置如开发环境、测试环境、集成环境、UAT环境等,支持实时查看部署进程和部署日志,支持查询历史部署日志和部署版本信息。自动部署方式支持定制部署脚本,以支持不同语言不同风格的代码部署,适应不同的部署环境;
S2:构建代码,由测试系统的代码扫描模块提供对被测应用的源代码仓库的配置,根据仓库地址对被测应用的源代码进行编译;根据仓库地址对被测应用的源代码进行编译。可以针对代码的主干或者分支进行编译打包,为了适应不同的项目类型,编译命令可以由测试人员自行指定。
S3:代码检查,由测试系统的代码扫描模块会对已配置仓库地址的应用源代码进行静态扫描;支持多种静态扫描规则。同时,代码扫描模块可以对项目开发仓库地址持续进行代码变更监控,其中集成了FindBugs、SonarQube、Java代码规约等扫描工具,对代码实时进行代码静态扫描、代码缺陷扫描、Java代码规约扫描,并反馈扫描结果,还可通过邮件系统将扫描结果发送给相关人员进行改进。
S4:单元测试,由测试系统的单元测试模块发起对被测应用各模块的测试请求;支持手工和定时任务两种触发方式,集成应用代码里的单元测试,并反馈单元测试结果,含全/增量覆盖率、单元测试通过率、单测失败追溯,并能够自动化触发运行。系统中测试用例管理模块提供了对自动化测试用例集的管理,主要是提供一个用例库来支持单元测试,在制定测试流水线时便可指定特定的用例。测试用例可以使用Excel的方式来导入,已导入系统的测试用例可以单条执行或者批量执行。
S5:安全检查,由测试系统调用安全检查,评估代码安全性;
S6:执行步骤S2至步骤S5,并将反馈执行结果;在执行步骤完成后,代码构建结果会和代码安全检查报告一起通过邮件反馈给相关人员;
执行测试流水线步骤,系统提供一键执行流水线,执行完后,会将执行结果反馈给测试人员;
S7:缺陷处理,步骤S6执行完毕后,将所发现的问题提交至测试系统的测试用例管理模块的缺陷管理模块;缺陷管理主要提供对缺陷生命周期的跟踪管理,包括缺陷的记录、分析、状态更新以及项目缺陷数据的统计分析。支持缺陷的增、删、改、查等基本管理。还支持自定义缺陷模板,对如缺陷描述模板进行管理,对缺陷必填属性或字段进行管理,对缺陷的生命周期和流程进行管理。在提交缺陷时,可根据不同的业务线和要求使用不同的缺陷模板,使工作更灵活,更加利于团队成员协作。
S8:根据缺陷管理模块的记过进行回归测试或生成测试报告。
在本实施例中,所述测试方法还包括测试人员根据测试需求选择性配置步骤S2至步骤S5中的一个步骤或多个步骤。
本发明所依赖的测试系统提供了一种自动化的测试方案,系统根据工业互联网产品的类型来自动搭建测试环境,根据相应的测试需求制定测试流水线,新增或者导入相应的测试用例,然后通过执行测试流水线,将发现的问题提交至缺陷管理单元,而后根据缺陷管理的结果进行回归测试或者生成测试报告。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (8)

1.一种工业互联网APP自动化测试系统,其特征在于:包括:项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块、测试用例管理模块和性能测试模块;所述性能测试模块分别与所述项目研发管理模块、代码扫描模块、单元测试模块、测试环境管理模块和测试用例管理模块连接;
所述项目研发管理模块用于编译打包、代码冲突检测、代码合并和应用管理;
所述代码扫描模块用于对代码实时进行代码静态扫描、代码缺陷扫描、Java代码规约扫描,并向所述单元测试模块反馈扫描结果;
所述单元测试模块用于集成应用代码里的单元测试,并向所述单元测试模块反馈单元测试结果;
所述测试环境管理模块用于按照应用、环境类型维度对内部现有测试环境资源进行管理;
所述测试用例管理模块用于新增测试用例;
所述性能测试模块用于提供测试管理。
2.根据权利要求1所述工业互联网APP自动化测试系统,其特征在于:所述测试环境管理模块的环境部署方式包括手动部署和自动部署。
3.根据权利要求1所述工业互联网APP自动化测试系统,其特征在于:所述测试用例管理模块的新增用例的导入方式包括单条用例导入,或者使用EXCEL批量导入。
4.根据权利要求1所述工业互联网APP自动化测试系统,其特征在于:所述单元测试模块的触发方式包括两种,分别是:手工触发方式和预设时间触发方式。
5.根据权利要求1所述工业互联网APP自动化测试系统,其特征在于:所述测试用例模块包括用例管理模块和缺陷管理模块。
6.一种工业互联网APP自动化测试方法,所述测试方法适用于权利要求1至5任一所述测试系统,其特征在于:所述方法包括如下步骤:
S1:搭建测试环境,由系统中测试环境管理模块提供支持,根据工业互联网APP的类型自动搭建测试环境;
S2:构建代码,由测试系统的代码扫描模块提供对被测应用的源代码仓库的配置,根据仓库地址对被测应用的源代码进行编译;
S3:代码检查,由测试系统的代码扫描模块会对已配置仓库地址的应用源代码进行静态扫描;
S4:单元测试,由测试系统的单元测试模块发起对被测应用各模块的测试请求;
S5:安全检查,由测试系统调用安全检查,评估代码安全性;
S6:执行步骤S2至步骤S5,并将反馈执行结果;
S7:缺陷处理,步骤S6执行完毕后,将所发现的问题提交至测试系统的测试用例管理模块的缺陷管理模块;
S8:根据缺陷管理模块的记过进行回归测试或生成测试报告。
7.根据权利要求6所述工业互联网APP自动化测试方法,其特征在于:所述步骤S3还包括对项目开发仓库地址持续进行代码变更监控。
8.根据权利要求6所述工业互联网APP自动化测试方法,其特征在于:所述测试方法还包括测试人员根据测试需求选择性配置步骤S2至步骤S5中的一个步骤或多个步骤。
CN202010568857.9A 2020-06-19 2020-06-19 工业互联网app自动化测试系统和测试方法 Pending CN111708706A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010568857.9A CN111708706A (zh) 2020-06-19 2020-06-19 工业互联网app自动化测试系统和测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010568857.9A CN111708706A (zh) 2020-06-19 2020-06-19 工业互联网app自动化测试系统和测试方法

Publications (1)

Publication Number Publication Date
CN111708706A true CN111708706A (zh) 2020-09-25

Family

ID=72541276

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010568857.9A Pending CN111708706A (zh) 2020-06-19 2020-06-19 工业互联网app自动化测试系统和测试方法

Country Status (1)

Country Link
CN (1) CN111708706A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112613255A (zh) * 2020-12-10 2021-04-06 海光信息技术股份有限公司 多环境协同回归方法、装置、设备、存储介质
CN113111002A (zh) * 2021-04-30 2021-07-13 中原银行股份有限公司 一种对接口案例进行自动化管理的方法、系统和介质
CN113297088A (zh) * 2021-06-08 2021-08-24 北京百度网讯科技有限公司 测试方法、测试装置、电子设备及存储介质
CN113467829A (zh) * 2021-09-03 2021-10-01 广州嘉为科技有限公司 一种基于Docker的代码检查方法及代码检查服务器
CN113505373A (zh) * 2021-07-09 2021-10-15 福建健康之路信息技术有限公司 一种软件代码质量的测试方法和存储设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108073400A (zh) * 2017-12-07 2018-05-25 湖北三新文化传媒有限公司 软件自动化构建方法、服务器及存储介质
US20180173613A1 (en) * 2015-06-18 2018-06-21 Halliburton Energy Services, Inc. Object deserializer using object-relational mapping file
CN110018964A (zh) * 2019-04-12 2019-07-16 广东电网有限责任公司信息中心 一种面向电力行业研发测试流水线构建方法
CN110046099A (zh) * 2019-04-11 2019-07-23 艾伯资讯(深圳)有限公司 智能化软件测试系统及方法
CN110245088A (zh) * 2019-06-21 2019-09-17 四川长虹电器股份有限公司 一种基于Jenkins的缺陷自动验证系统及验证方法
CN111198814A (zh) * 2019-12-23 2020-05-26 曙光信息产业(北京)有限公司 一种持续集成持续交付的验收系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180173613A1 (en) * 2015-06-18 2018-06-21 Halliburton Energy Services, Inc. Object deserializer using object-relational mapping file
CN108073400A (zh) * 2017-12-07 2018-05-25 湖北三新文化传媒有限公司 软件自动化构建方法、服务器及存储介质
CN110046099A (zh) * 2019-04-11 2019-07-23 艾伯资讯(深圳)有限公司 智能化软件测试系统及方法
CN110018964A (zh) * 2019-04-12 2019-07-16 广东电网有限责任公司信息中心 一种面向电力行业研发测试流水线构建方法
CN110245088A (zh) * 2019-06-21 2019-09-17 四川长虹电器股份有限公司 一种基于Jenkins的缺陷自动验证系统及验证方法
CN111198814A (zh) * 2019-12-23 2020-05-26 曙光信息产业(北京)有限公司 一种持续集成持续交付的验收系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112613255A (zh) * 2020-12-10 2021-04-06 海光信息技术股份有限公司 多环境协同回归方法、装置、设备、存储介质
CN112613255B (zh) * 2020-12-10 2023-01-24 海光信息技术股份有限公司 多环境协同回归方法、装置、设备、存储介质
CN113111002A (zh) * 2021-04-30 2021-07-13 中原银行股份有限公司 一种对接口案例进行自动化管理的方法、系统和介质
CN113297088A (zh) * 2021-06-08 2021-08-24 北京百度网讯科技有限公司 测试方法、测试装置、电子设备及存储介质
CN113297088B (zh) * 2021-06-08 2023-11-07 北京百度网讯科技有限公司 测试方法、测试装置、电子设备及存储介质
CN113505373A (zh) * 2021-07-09 2021-10-15 福建健康之路信息技术有限公司 一种软件代码质量的测试方法和存储设备
CN113467829A (zh) * 2021-09-03 2021-10-01 广州嘉为科技有限公司 一种基于Docker的代码检查方法及代码检查服务器

Similar Documents

Publication Publication Date Title
CN111708706A (zh) 工业互联网app自动化测试系统和测试方法
CN110851356B (zh) 一种基于Selenium的Web应用自动化测试框架及其构建方法、系统
CN103150249B (zh) 一种自动化测试的方法和系统
US7930683B2 (en) Test automation method for software programs
CN111324379B (zh) 基于通用soa服务的模型部署系统
CN110321281A (zh) 基于混合自动化测试框架的Web测试平台及测试方法
CN108845940B (zh) 一种企业级信息系统自动化功能测试方法和系统
CN104407971A (zh) 自动化测试嵌入式软件的方法
CN111066304A (zh) 利用微服务的边缘设备和关联的网络
CN108009081B (zh) 工程设计工具协同装置及工程设计工具协同方法
US20150100832A1 (en) Method and system for selecting and executing test scripts
JP2010231782A (ja) 機能自動化のための方法およびシステム
EP1906275B1 (en) Natively retaining project documentation in a controller
US20170228220A1 (en) Self-healing automated script-testing tool
CN104516818A (zh) 一种适用于逻辑组态软件中编译器的自动化测试系统及其方法
US11138097B2 (en) Automated web testing framework for generating and maintaining test scripts
Humble et al. The deployment production line
US20150100830A1 (en) Method and system for selecting and executing test scripts
CN107480050B (zh) 一种自动测试更新包的测试方法
CN112131116A (zh) 一种嵌入式软件自动化回归测试方法
CN114153743A (zh) 基于接口自动化测试方法
CN112783769A (zh) 一种自定义的自动化软件测试方法
CN111597105A (zh) 一种基于lv环境的自动化测试系统及方法
CN111881056A (zh) 一种自动化测试框架及测试方法
US20190138921A1 (en) Interactive guidance system for selecting thermodynamics methods in process simulations

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200925