CN111078567B - 自动化测试平台的报告生成方法、终端和存储介质 - Google Patents

自动化测试平台的报告生成方法、终端和存储介质 Download PDF

Info

Publication number
CN111078567B
CN111078567B CN201911323263.5A CN201911323263A CN111078567B CN 111078567 B CN111078567 B CN 111078567B CN 201911323263 A CN201911323263 A CN 201911323263A CN 111078567 B CN111078567 B CN 111078567B
Authority
CN
China
Prior art keywords
test
case
report
log
execution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911323263.5A
Other languages
English (en)
Other versions
CN111078567A (zh
Inventor
马家麒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Pinwei Software Co Ltd
Original Assignee
Guangzhou Pinwei Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Pinwei Software Co Ltd filed Critical Guangzhou Pinwei Software Co Ltd
Priority to CN201911323263.5A priority Critical patent/CN111078567B/zh
Publication of CN111078567A publication Critical patent/CN111078567A/zh
Application granted granted Critical
Publication of CN111078567B publication Critical patent/CN111078567B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3696Methods or tools to render software testable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种自动化测试平台的报告生成方法,包括以下步骤:在一测试用例开始执行时,获取所述测试用例对应的日志标签;将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。本发明还公开了一种终端和计算机可读存储介质。本发明由于单个用例对应的日志保存在对应的一个日志文件中,通过日志分析测试问题时,可直接定位到单个用例的日志文件上,极大减少排查过程,提升自动化测试问题排查效率。

Description

自动化测试平台的报告生成方法、终端和存储介质
技术领域
本发明涉及计算机技术领域,尤其涉及发明一种自动化测试平台的报告生成方法、终端和存储介质。
背景技术
自动化测试用例执行完后,如果自动化用例执行失败,需要通过测试报告排查问题,如果是通过Jenkins日志或者控制台日志分析单个用例的失败原因非常困难,特别是对于并发执行的场景下,日志是无序,这时要排查问题更加困难。
发明内容
本发明的主要目的在于提供一种自动化测试平台的报告生成方法、终端和存储介质,旨在解决现今自动化测试用例执行完后,测试报告排查问题的过程复杂,排查困难的技术问题。
为实现上述目的,本发明提供一种自动化测试平台的报告生成方法,所述自动化测试平台的报告生成方法包括以下步骤:
在一测试用例开始执行时,获取所述测试用例对应的日志标签;
将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;
将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。
可选地,测试任务包括至少一个所述测试用例,所述将所述目标日志文件与所述测试用例的执行信息关联保存的步骤之后,还包括:
在所述测试任务执行完成后,获取所述测试任务对应的执行ID;
将所述执行ID对应的所述测试用例的所述测试结果关联保存。
可选地,所述将所述执行ID对应的所述测试用例的所述测试结果关联保存的步骤之后,还包括:
基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告。
可选地,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
输出所述测试报告,和/或输出所述测试报告的查询界面。
可选地,所述输出所述测试报告的查询界面的步骤之后,还包括:
在接收到用户基于所述查询界面触发的查询指令时,获取所述查询指令对应的用例标识;
根据所述用例标识确定查询结果,并输出所述查询结果。
可选地,所述查询结果包括与所述用例标识对应的所述目标日志文件和所述用例标识对应的执行结果中的至少一个。
可选地,测试项目包括至少一个所述测试任务,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
在所述测试项目执行完成后,将所述测试项目的执行结果插入所述测试报告中。
可选地,所述将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果的步骤之后,还包括:
所述测试用例执行完成后,删除所述测试用例对应的日志标签。
为了实现上述目的,本发明还提供一种终端,所述终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试报告生成程序,所述测试报告生成程序被所述处理器执行时实现如上所述的自动化测试平台的报告生成方法的各个步骤。
此外,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有测试报告生成程序,所述测试报告生成程序被处理器执行时实现如上所述的自动化测试平台的报告生成方法的各个步骤。
本发明实施例提出的一种自动化测试平台的报告生成方法、终端和计算机可读存储介质,在一测试用例开始执行时,获取所述测试用例对应的日志标签,将所述测试用例对应的日志信息保持至所述日志标签对应的目标日志文件,将所述目标日志文件与所述测试用例的执行信息关联保持,作为所述测试用例的测试结果。由于单个用例对应的日志保存在对应的一个日志文件中,通过日志分析测试问题时,可直接定位到单个用例的日志文件上,极大减少排查过程,提升自动化测试问题排查效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图;
图2是本发明提供的自动化测试平台的报告生成方法第一实施例的流程示意图;
图3是本发明提供的自动化测试平台的报告生成方法第二实施例的流程示意图;
图4是本发明提供的自动化测试平台的报告生成方法第三实施例的流程示意图;
图5是本发明提供的自动化测试平台的报告生成方法第四实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例用以解释本发明,并不用于限定本发明。
本发明实施例的主要解决方案是:在一测试用例开始执行时,获取所述测试用例对应的日志标签;将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端可以是PC,也可以是服务器、移动终端等。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。所述用户接口1003通过通讯总线1002与所述处理器1001连接,用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括WiFi模块。其中,所述wifi模块用于连接用户终端如移动终端或显示终端等。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
进一步地,继续参照图1,本实施例终端还可以是一种计算机可读存储介质,所述计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及测试报告生成程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的测试报告生成程序,并执行以下操作:
在一测试用例开始执行时,获取所述测试用例对应的日志标签;
将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;
将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
在所述测试任务执行完成后,获取所述测试任务对应的执行ID;
将所述执行ID对应的所述测试用例的所述测试结果关联保存。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
输出所述测试报告,和/或输出所述测试报告的查询界面。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
在接收到用户基于所述查询界面触发的查询指令时,获取所述查询指令对应的用例标识;
根据所述用例标识确定查询结果,并输出所述查询结果。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
所述查询结果包括与所述用例标识对应的所述日志文件和所述用例标识对应的执行结果中的至少一个。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
在所述测试项目执行完成后,将所述测试项目的执行结果插入所述测试报告中。
进一步地,处理器1001可以调用存储器1005中存储的测试报告生成程序,还执行以下操作:
所述测试用例执行完成后,删除所述测试用例对应的日志标签。
参照图2,本发明提供一种自动化测试平台的报告生成方法,所述自动化测试平台的报告生成方法包括以下步骤:
步骤S10,在一测试用例开始执行时,获取所述测试用例对应的日志标签;
步骤S20,将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;
步骤S30,将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。
所述自动化测试平台为软件测试平台,软件上线前,先执行用例,以测试用例的结果查看软件存在的问题。其中,测试用例执行测试过程中,产生执行日志,执行日志直接反应测试用例的结果。当多个测试用例同时执行时,多个测试用例对应的执行日志打印到同一个文件中,难以排查每个用例对应的测试问题,因此为了便于排查软件的问题,本实施例设置单个测试用例对应的执行日志打印到一个日志文件中,且该日志文件中以所述测试用例的名称命名,故对测试用例进行排查时,可以直接找到对应测试用例的日志,针对性进行排查,相对于逐个日志排查,本实施例可以极大程度的减少日志排查过程。
本实施例中,在测试用例执行过程中,执行日志按用例进行分割。如本实施例中的自动化测试平台提供了自动化项目依赖的sdk包,该sdk包含了自动把日志打印到对应日志文件的功能,用户无需任何配置即可接入。
具体地的实现原理:采用logback开源日志组件配置文件,通过logback开源日志组件的SiftingAppder类的功能,实现将日志打印到不同的日志标签(以下用logkey表示)指定的文件中,通过单个用例对应的一个logkey,不同用例对应的logkey不同,故在测试用例的执行日志打印过程中,基于logkey不同,打印到的指定文件不同,实现一个用例对应的日志打印到一个日志文件中。
在测试用例执行前,在所述测试用例上先配置与该测试用例唯一对应的logkey,具体在logback的MDC线程中插入预设设定好的logkey。通过实现了自定义的开源测试框架Testng插件,在beforeInvocation,afterInvocation等拦截器在用例执行前后进行拦截,在测试用例执行结束后,将拦截到的日志保存至与logkey对应的日志文件中,实现单一用例的执行日志保存到一个日志文件中。其中,所述测试用例的logkey可以为所述测试用例的用例名,以所述测试用例的用例名作为所述测试用例的logkey,易于辨识,用户可基于用例名等关键词直接插到到该logkey指定的日志文件中,查找所述测试用例的执行日志。
可以理解的是,由于logback的SiftingAppender日志打印和logKey获取本身线程安全的,所以在多线程执行的时候,用例日志依然能打印到对应的日志文件中。
基于上述用例的分隔设置,本实施例基于自动化测试平台测试用例时,获取所述测试用例对应的日志标签,将所述测试用例对应的日志进行拦截,并将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件中,其中,所述目标日志文件为所述日志标签唯一对应的日志文件,获取所述测试用例对应的日志标签后,根据所述日志标签确定目标日志文件,进而将所述测试用例对应的日志信息保存至所述目标日志文件。
进而将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果。也即所述测试结果包括目标日志文件和测试用例的执行信息,基于所述目标日志文件和测试用例的执行信息相关联,如此,用户基于所述目标日志文件可以直接获取所述测试用例的执行信息,或者基于所述目标日志文件可以直接显示所述测试用例的执行信息,使得测试结果的展现更直观。
进一步地,基于所述测试用例对应有一日志文件,且所述日志文件与所述测试用例名称作为文件名称,在在当前测试用例执行时,所述测试平台可以展现执行日志,基于所述测试平台可以按用例维度展现所述执行日志,可设置只展现当前日志打印的日志,不含其它日志,减少问题排查时间。
本实施例中,在一测试用例开始执行时,获取所述测试用例对应的日志标签,将所述测试用例对应的日志信息保持至所述日志标签对应的目标日志文件,将所述目标日志文件与所述测试用例的执行信息关联保持,作为所述测试用例的测试结果。由于单个用例对应的日志保存在对应的一个日志文件中,通过日志分析测试问题时,可直接定位到单个用例的日志文件上,极大减少排查过程,提升自动化测试问题排查效率。
进一步地,参照图3,本发明还提供一种自动化测试平台的报告生成方法第二实施例,本实施例基于上述第一实施例。本实施例提供的自动化测试平台设置有至少三个执行维度,如划分为测试流水线、测试项目以及测试任务,不同的测试维度对应的测试过程不同。如一个测试流水线包括多个测试项目,若平台触发的是流水线测试,则执行该流水线所有的测试项目。如一个测试项目包括多个测试任务,若触发一个测试项目,则执行该测试项目中的所有测试任务。所述测试任务由自动化测试平台按照用户在每个项目中的用例集配置拆成多个自动化测试任务,用于分发到智能体(agent)进行调度和执行,其中,一个测试任务包括至少一个所述测试用例,实施例中,基于上述维度的划分,可以基于测试任务或测试项目或测试流水线生成至少一个测试报告。以下以每个测试任务对应一个测试报告为例说明本实施例中的自动化测试平台的报告生成和展现方式:
如本实施例中的所述测试任务包括至少一个所述测试用例,执行一个测试任务的过程中,依次或同时执行所述测试任务包含的测试用例,在一个测试用例执行过程中,将所述目标日志文件与所述测试用例的执行信息关联保存的步骤之后,还包括:
步骤S40,在所述测试任务执行完成后,获取所述测试任务对应的执行ID;
步骤S50,将所述执行ID对应的所述测试用例的所述测试结果关联保存。
当一个测试用例执行结束后,把所述测试用例的执行日志以及测试结果关联保存到对应的目标日志文件中。一个测试任务中的所有测试用例执行结束后,则在平台中会形成多个测试用例对应的目标日志文件,此时平台将所测试任务对应的任务结果、所有用例的测试结果以及日志文件关联保存,以便于生成测试任务的测试报告。
由于一个测试项目对应有多个测试任务,每个测试认为对应有多个测试用例,为了快速定位到用例的日志文件以及测试结果,本实施例中每个测试任务对应设置一个执行ID,所述测试任务中包含的所有测试用例的测试结果均与所述执行ID关联保存,可以基于每个测试任务的执行ID将测试用例的测试结果进行划分,基于所述执行ID可以准确定位到对应的测试用例上,加快定位效率。
基于此,本实施例中,所述将所述执行ID对应的所述测试用例的所述测试结果关联保存的步骤之后,还包括:
步骤S60,基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告。
所述预设测试报告模板为预先设置的测试报告模板,所述测试报告模板包括多个维度,不同的维度展现的内容不同。一个测试任务执行结束后,将所述执行ID对应的所有测试用例的所有测试结果关联保存,调用预设测试报告模板,将所述执行ID对应的所有测试用例以及对应的测试结果填入所述预设测试报告模板的对应位置上,生成所述执行ID对应的所述测试用例的测试报告。
进一步地,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
步骤S70,输出所述测试报告,和/或输出所述测试报告的查询界面。
其中,所述输出所述测试报告的步骤包括:向其它终端发送所述测试报告;或者向所述测试平台的界面展示所述测试报告。测试任务执行结束并生成测试报告后,可以将测试报告发送到其它终端,供用户在其它终端进行查看或排查测试问题。也可以在测试平台的截面上直接展示所述测试报告,给用户查看测试问题。
然而,若测试任务包括多个测试用例,在测试平台的界面上无法展示全部的测试报告内容时,可以基于输出所述测试报告的查询界面,所述查询界面关联所述测试平台后台的测试报告的存储区域,用户基于所述查询界面可以对所述测试报告进行查询,或者对单个测试用例的执行日志及执行结果进行单独查询。
可以理解的是,上述是以每个测试任务对应一个测试报告为例说明本实施例中的自动化测试平台的报告生成和展现方式。基于本实施例中的测试平台可以以测试项目维度进行测试,一个测试项目包括至少一个所述测试任务,因此基于一个测试任务完成后,生成所述测试任务对应的测试用例的测试报告,当一个测试项目的所有测试任务都完成后,将所述测试项目的执行结果插入所述测试报告中,以形成测试项目维度的测试报告。
具体地,测试项目包括至少一个所述测试任务,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
在所述测试项目执行完成后,将所述测试项目的执行结果插入所述测试报告中。
同样地,所述测试平台还可以以一个流水线维度进行测试,也即触发一个流水线测试后,按照每个测试任务中的测试用例进行执行,测试任务执行结束后,生成所述测试任务对应的测试报告,测试项目中的测试任务执行结束后,将测试项目的执行结果插入所述测试报告中;所有测试项目测试结束后,还会插入流水线结果,以形成至少三个维度的测试报告,具体该报告能准确显示用例执行数、断言数、重试次数、通过率等重要信息。
基于所述测试报告生成后,输出所述测试报告的查询界面,为了实现多维度查询测试报告,所述查询界面设置多条件查询方式,支持通过各种条件对用例进行模糊搜索、排序、按分组显示等,增加查询的多样性,提供查询的便利性。
本实施例中通过自定义的HTML报告,提升了自动化测试报告的可视化程度和信息完整性,提供了更简洁和更丰富的用例统计信息和搜索功能;跟Jenkins上的控制台日志查看相比,用例维度日志大大减少无用日志和并发日志对用户的干扰和造成排查问题困难。
参照图4,本发明还提供一种自动化测试平台的报告生成方法第三实施例,基于上述第二实施例,所述输出所述测试报告的查询界面的步骤之后,还包括:
步骤S80,在接收到用户基于所述查询界面触发的查询指令时,获取所述查询指令对应的用例标识;
步骤S90,根据所述用例标识确定查询结果,并输出所述查询结果。
其中,所述查询结果包括与所述用例标识对应的所述日志文件和所述用例标识对应的执行结果中的至少一个。
本实施例中自动化测试平台测试结束后,基于预设报告模板生成测试报告,并在所述自动化测试平台上输出所述测试报告的查询界面,所述查询界面设置多条件查询方式,支持通过各种条件对用例进行模糊搜索、排序、按分组显示。本实施例以对用例进行准确查询为例进行说明,如所述查询界面支撑关键词查询,所述关键词可以是用例标识,如所述用例标识包括用例名称、测试结果以及执行ID中的至少一种。用户可以基于所述查询接触输入用例名称、测试结果以及执行ID中的至少一个,基于所述用例名称,所述自动化测试平台输出所述用例名称对应的日志文件,或者与所述测试结果对应的用例、用例的执行日志文件等,或者与所述执行ID对应的用例、用例的执行日志文件和测试结果等,达到准确查询的目的。
所述输出所述查询结果的步骤包括:向其它终端设备发送所述查询结果,或者在所述查询界面中的查询结果显示区域显示所述查询结果。可以理解的是,用户基于所述查询界面查询测试结果时,可以将所述查询结果发送至其它终端,以供用户通过所述其它终端查看所述查询结果。也可以直接将所述查询结果显示在显示区域上,用户可以直观的查看所述查询结果。
具体地,本实施例中的所述查询界面包括查询条件输入区域以及查询结果显示区域,所述查询条件输入区域中具体不同的查询条件选项或输入选项,用户基于所述查询条件输出区域的查询条件选项或输入选项输入查询条件后,平台根据所输入的内容确定查询条件,如用户输入用例名,平台确定用户通过用例名对应的查询条件进行查询,平台获取与所述用例名对应的日志日志文件和所述用例名对应的执行结果,将所述日志文件和所述执行结果显示在所述查询显示区域中,供用户查看所述用例对应的日志文件和执行结果。
本实施例中,所述测试平台基于不同维度或不同条件生成测试用例的报告,用户基于所述测试平台可以准确快速定位到对应的测试用例的日志文件,并将所述日志文件展示出来,为用户查询用例执行的日志提供便利,便于执行问题的排查,提高排查效率。
参照图5,本发明还提供一种自动化测试平台的报告生成方法第四实施例,基于上述第一实施例,所述将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果的步骤之后,还包括:
步骤S100,所述测试用例执行完成后,删除所述测试用例对应的日志标签。
为了避免测试用例执行结束后,下一次再执行所述测试用例时,所述测试用例再次执行的执行日志重复打印到所述测试用例的日志标签对应的目标日志文件上,使得所述目标日志文件出现双重日志,因此,本实施例中所述自动化测试平台设置自动清除过程,在所述测试用例执行完成后,删除所述测试用例对应的日志标签。
可以理解的是,基于本实施例中所述测试用例执行完成后删除所述测试用例对应的日志标签,故该测试用例每次重新执行前,需重新设定所述日志标签,且所述重新设置的日志标签与前一次执行的日志标签不同,或者重新设置的日志标签与前一次执行的日志标签指定的文件不同,如此,实现每次执行所述测试用例时,将日志打印到对应的文件中。
本发明还提供一种终端,所述终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试报告生成程序,所述测试报告生成程序被所述处理器执行时实现如上所述的自动化测试平台的报告生成方法的各个步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有测试报告生成程序,所述测试报告生成程序被处理器执行时实现如上所述的自动化测试平台的报告生成方法的各个步骤。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种自动化测试平台的报告生成方法,其特征在于,所述自动化测试平台的报告生成方法包括以下步骤:
在一测试用例开始执行时,获取所述测试用例对应的日志标签;
将所述测试用例对应的日志信息保存至所述日志标签对应的目标日志文件;
将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果;
其中,所述自动化测试平台包含预设数量的测试维度,所述测试维度对应有预设数量的测试任务,所述测试任务包括至少一个所述测试用例;
其中,一个所述测试用例对应一个所述日志标签,所述在一测试用例开始执行时,获取所述测试用例对应的日志标签的步骤之前,包括:
设置与所述测试用例对应的日志标签;
其中,所述将所述目标日志文件与所述测试用例的执行信息关联保存,作为所述测试用例的测试结果的步骤之后,还包括:
所述测试用例执行完成后,删除所述测试用例对应的日志标签。
2.如权利要求1所述的自动化测试平台的报告生成方法,其特征在于,所述将所述目标日志文件与所述测试用例的执行信息关联保存的步骤之后,还包括:
在所述测试任务执行完成后,获取所述测试任务对应的执行ID;
将所述执行ID对应的所述测试用例的所述测试结果关联保存。
3.如权利要求2所述的自动化测试平台的报告生成方法,其特征在于,所述将所述执行ID对应的所述测试用例的所述测试结果关联保存的步骤之后,还包括:
基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告。
4.如权利要求3所述的自动化测试平台的报告生成方法,其特征在于,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
输出所述测试报告,和/或输出所述测试报告的查询界面。
5.如权利要求4所述的自动化测试平台的报告生成方法,其特征在于,所述输出所述测试报告的查询界面的步骤之后,还包括:
在接收到用户基于所述查询界面触发的查询指令时,获取所述查询指令对应的用例标识;
根据所述用例标识确定查询结果,并输出所述查询结果。
6.如权利要求5所述的自动化测试平台的报告生成方法,其特征在于,所述查询结果包括与所述用例标识对应的所述目标日志文件和所述用例标识对应的执行结果中的至少一个。
7.如权利要求3所述的自动化测试平台的报告生成方法,其特征在于,测试项目包括至少一个所述测试任务,所述基于预设测试报告模板,生成所述执行ID对应的所述测试用例的测试报告的步骤之后,还包括:
在所述测试项目执行完成后,将所述测试项目的执行结果插入所述测试报告中。
8.一种测试终端,其特征在于,所述测试终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试报告生成程序,所述测试报告生成程序被所述处理器执行时实现如权利要求1至7中任一项所述的自动化测试平台的报告生成方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有测试报告生成程序,所述测试报告生成程序被处理器执行时实现如权利要求1至7中任一项所述的自动化测试平台的报告生成方法的步骤。
CN201911323263.5A 2019-12-19 2019-12-19 自动化测试平台的报告生成方法、终端和存储介质 Active CN111078567B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911323263.5A CN111078567B (zh) 2019-12-19 2019-12-19 自动化测试平台的报告生成方法、终端和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911323263.5A CN111078567B (zh) 2019-12-19 2019-12-19 自动化测试平台的报告生成方法、终端和存储介质

Publications (2)

Publication Number Publication Date
CN111078567A CN111078567A (zh) 2020-04-28
CN111078567B true CN111078567B (zh) 2023-06-13

Family

ID=70316148

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911323263.5A Active CN111078567B (zh) 2019-12-19 2019-12-19 自动化测试平台的报告生成方法、终端和存储介质

Country Status (1)

Country Link
CN (1) CN111078567B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111538673B (zh) * 2020-06-04 2023-07-07 中国联合网络通信集团有限公司 基于测试用例的处理方法、装置、设备和存储介质
CN112486820B (zh) * 2020-11-27 2022-04-01 北京百度网讯科技有限公司 用于测试代码的方法、装置、设备以及存储介质
CN112511386B (zh) * 2020-12-09 2022-07-26 爱瑟福信息科技(上海)有限公司 基于robotframework的车载以太网测试方法、系统以及太网测试设备
CN113821431A (zh) * 2020-12-31 2021-12-21 京东科技控股股份有限公司 测试结果的获取方法、装置、电子设备和存储介质
CN113392006B (zh) * 2021-06-17 2022-07-12 浪潮思科网络科技有限公司 一种使用capsys监控自动化测试日志的方法及设备
CN113568829A (zh) * 2021-07-05 2021-10-29 Oppo广东移动通信有限公司 一种外场测试方法及装置、存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100465968C (zh) * 2007-08-20 2009-03-04 中兴通讯股份有限公司 自动化测试日志处理系统
CN102880535B (zh) * 2012-07-24 2015-10-28 播思通讯技术(北京)有限公司 一种用于移动设备的无线自动化测试装置及方法
CN108491326B (zh) * 2018-03-21 2024-02-02 重庆金融资产交易所有限责任公司 测试行为重组方法、装置及存储介质
CN110262967A (zh) * 2019-06-05 2019-09-20 微梦创科网络科技(中国)有限公司 一种应用于自动化测试的日志输出方法与装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
面向CLI的自动化测试方法的研究与实现;徐彩霞;葛华勇;侯仰宇;;计算机与数字工程(02);全文 *

Also Published As

Publication number Publication date
CN111078567A (zh) 2020-04-28

Similar Documents

Publication Publication Date Title
CN111078567B (zh) 自动化测试平台的报告生成方法、终端和存储介质
CN108108297B (zh) 自动化测试的方法和装置
CN109302522B (zh) 测试方法、装置以及计算机系统和介质
CN108717391B (zh) 测试过程的监控装置、方法及计算机可读存储介质
CN111026645B (zh) 用户界面自动化测试方法、装置、存储介质及电子设备
US9262396B1 (en) Browser compatibility checker tool
CN105302722B (zh) Cts自动测试方法及装置
CN109633351B (zh) 智能it运维故障定位方法、装置、设备及可读存储介质
WO2019227708A1 (zh) 测试案例的在线调试装置、方法及计算机可读存储介质
WO2019214109A1 (zh) 测试过程的监控装置、方法及计算机可读存储介质
CN108959067B (zh) 搜索引擎的测试方法、装置及计算机可读存储介质
US20100332904A1 (en) Testing of Distributed Systems
CN112286806A (zh) 自动化测试方法、装置、存储介质及电子设备
US20240054137A1 (en) Stack trace search
US20140082582A1 (en) Resource Tracker
CN113760763A (zh) 软件测试方法、设备、服务器和系统
CN110543429A (zh) 测试用例调试方法、装置及存储介质
CN111694550A (zh) 一种页面显示控制方法、装置及系统
CN107102937B (zh) 一种用户界面测试方法和装置
CN111061448A (zh) 日志信息的显示方法、装置、电子设备及存储介质
CN111309743A (zh) 报表推送方法及装置
CN107451056B (zh) 监听接口测试结果的方法及装置
CN108845924B (zh) 控制响应区域显示控制方法、电子装置及存储介质
KR20150096478A (ko) 프로그래머블 컨트롤러, 프로그래머블 컨트롤러 시스템 및 실행 에러 정보 작성 방법
US9104573B1 (en) Providing relevant diagnostic information using ontology rules

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant