CN110865944A - 测试用例的数据分析方法、装置、存储介质和测试设备 - Google Patents

测试用例的数据分析方法、装置、存储介质和测试设备 Download PDF

Info

Publication number
CN110865944A
CN110865944A CN201911197290.2A CN201911197290A CN110865944A CN 110865944 A CN110865944 A CN 110865944A CN 201911197290 A CN201911197290 A CN 201911197290A CN 110865944 A CN110865944 A CN 110865944A
Authority
CN
China
Prior art keywords
test
information
case
corresponding relation
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201911197290.2A
Other languages
English (en)
Inventor
孟建春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Xinsheng Intelligent Technology Co ltd
Original Assignee
Jiangsu Xinsheng Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Xinsheng Intelligent Technology Co ltd filed Critical Jiangsu Xinsheng Intelligent Technology Co ltd
Priority to CN201911197290.2A priority Critical patent/CN110865944A/zh
Publication of CN110865944A publication Critical patent/CN110865944A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请提供了一种测试用例的数据分析方法、装置、存储介质和测试设备,涉及测试领域。该方法包括:获取被测设备执行测试用例后的测试数据;测试数据包括测试输出信息及被测设备信息;根据测试输出信息及预设对应关系表确定与测试输出信息对应的测试结果信息;根据测试结果信息和被测设备信息生成测试用例的分析结果。由于预设对应关系表表征多个测试输出信息和测试结果信息的对应关系,在根据测试输出信息及预设对应关系表确定测试结果信息时,能够快速、准确地确定出测试用例的分析结果,避免人工对被测设备执行测试用例后的测试数据进行分析,故而能够提高测试用例的测试数据的分析效率,加快产品开发进程。

Description

测试用例的数据分析方法、装置、存储介质和测试设备
技术领域
本申请涉及测试领域,具体而言,涉及一种测试用例的数据分析方法、装置、存储介质和测试设备。
背景技术
在测试领域,自动化测试技术已经被广泛使用。在人们通过自动化测试技术对产品进行测试的实践过程中,人们开发了越来越多的自动化脚本,随之带了越来越多的测试用例的测试数据等待分析。
目前,对于测试用例的测试数据的分析主要是由人工完成的,整个分析过程需要花费大量时间和精力,这使得整个测试数据的分析过程效率低下。并且只有当正确地对测试数据进行分析后,才能进行下一步的产品开发,这会拖慢产品开发的进程。
发明内容
本申请的目的包括,例如,提供了一种测试用例的数据分析方法、装置、存储介质和测试设备,其能够提高测试用例的测试数据的分析效率,加快产品开发进程。
本申请的实施例可以这样实现:
第一方面,实施例提供一种测试用例的数据分析方法,应用于测试设备,所述方法包括:获取被测设备执行测试用例后的测试数据;所述测试数据包括测试输出信息及被测设备信息;根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息;所述预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果。
在可选的实施方式中,所述测试输出信息包括用例ID,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤包括:根据所述用例ID及预设的第一对应关系确定与所述用例ID对应的测试执行信息;所述预设的第一对应关系表征多个用例ID和测试执行信息的对应关系,所述测试执行信息包括测试场景信息和测试步骤信息。
在可选的实施方式中,获取被测设备执行测试用例后的测试数据的步骤包括:在被测设备执行测试用例失败后,获取所述被测设备的测试数据。
在可选的实施方式中,所述测试输出信息包括错误信息,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤包括:根据所述错误信息及预设的第二对应关系确定与所述错误信息对应的错误种类;所述预设的第二对应关系表征多个错误信息和错误种类的对应关系。
在可选的实施方式中,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤之前,所述方法还包括:获取与所述预设对应关系表的版本号对应的最新版本号;当所述预设对应关系表的版本号低于所述最新版本号时,以所述最新版本号对应的对应关系表更新所述预设对应关系表。
在可选的实施方式中,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤之后,所述方法还包括:获取所述被测设备的日志信息;根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果的步骤包括:根据所述测试结果信息、所述被测设备信息和所述日志信息生成所述测试用例的分析结果。
第二方面,实施例提供一种测试用例的数据分析装置,应用于测试设备,所述装置包括:获取模块,用于获取被测设备执行测试用例后的测试数据;所述测试数据包括测试输出信息及被测设备信息;分析模块,用于根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息;所述预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;以及用于根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果。
在可选的实施方式中,所述测试输出信息包括用例ID,所述分析模块用于根据所述用例ID及预设的第一对应关系确定与所述用例ID对应的测试执行信息;所述预设的第一对应关系表征多个用例ID和测试执行信息的对应关系,所述测试执行信息包括测试场景信息和测试步骤信息。
第三方面,实施例提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如前述实施方式任一项所述方法的步骤。
第四方面,实施例提供一种测试设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述测试设备运行时,所述处理器与所述存储器之间通过总线通信,所述处理器执行所述机器可读指令,以执行如前述实施方式任一项所述方法的步骤。
本申请实施例的有益效果包括,例如:
上述方法包括:获取被测设备执行测试用例后的测试数据;测试数据包括测试输出信息及被测设备信息;根据测试输出信息及预设对应关系表确定与测试输出信息对应的测试结果信息;预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;根据测试结果信息和被测设备信息生成测试用例的分析结果。由于预设对应关系表表征多个测试输出信息和测试结果信息的对应关系,在根据测试输出信息及预设对应关系表确定测试结果信息时,能够快速、准确地确定出测试用例的分析结果,避免人工对被测设备执行测试用例后的测试数据进行分析,故而能够提高测试用例的测试数据的分析效率,加快产品开发进程。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例所提供的测试设备的一种结构框图;
图2为本申请实施例所提供的测试用例的数据分析方法的一种流程示意图;
图3为本申请实施例所提供的测试用例的数据分析方法的一种应用场景示意图;
图4为本申请实施例所提供的测试用例的数据分析方法的另一种流程图;
图5为本申请实施例所提供的测试用例的数据分析方法的另一种流程图;
图6为本申请实施例所提供的测试用例的数据分析方法的另一种流程图;
图7为本申请实施例所提供的测试用例的数据分析方法的另一种应用场景示意图;
图8为本申请实施例所提供的测试用例的数据分析装置的一种功能模块图。
图标:100-测试设备;110-存储器;120-处理器;130-总线;140-通信接口;200-被测设备;300-测试用例的数据分析装置;310-获取模块;320-分析模块。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
此外,若出现术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
需要说明的是,在不冲突的情况下,本申请的实施例中的特征可以相互结合。
在实现本申请实施例的技术方案的过程中,本申请发明人发现:
在测试领域,自动化测试技术已经被广泛使用。人们通常会使用Robot Framework软件对产品进行自动化测试,在这个过程中,人们开发了越来越多的自动化脚本,随之带了越来越多的测试用例的测试数据等待分析。
目前,对于测试用例的测试数据的分析主要是由人工完成的,整个分析过程需要花费大量时间和精力,这使得整个测试数据的分析过程效率低下。并且只有当正确地对测试数据进行分析后,才能进行下一步的产品开发,这会拖慢产品开发的进程。
因此,为了改善上述缺陷,本申请实施例提出一种测试用例的数据分析方法、装置、存储介质和测试设备,其能够提高测试用例的测试数据的分析效率,加快产品开发进程。需要说明的是,以上现有技术中的方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本申请实施例针对上述问题所提出的解决方案,都应该是发明人在本申请过程中对本申请做出的贡献。
请参照图1,为本申请实施例所提供的测试设备100的一种结构框图。该测试设备100可以包括存储器110、处理器120、总线130和通信接口140,该存储器110、处理器120和通信接口140相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条总线130或信号线实现电性连接。处理器120可以处理与测试用例的数据分析有关的信息和/或数据,以执行本申请中描述的一个或多个功能。例如,处理器120可以通过获取被测设备执行测试用例后的测试数据,并根据上述数据进行数据分析,进而实现本申请提供的测试用例的数据分析方法。
存储器110可以是但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-Only Memory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。
处理器120可以是一种集成电路芯片,具有信号处理能力。该处理器120可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(NetworkProcessor,NP)等;还可以是数字信号处理器(Digital Signal Processing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以理解,图1所示的结构仅为示意,该测试设备100还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
为了便于理解,本申请以下实施例将以图1所示的测试设备100为例,结合附图,对本申请实施例提供的测试用例的数据分析方法进行具体阐述。
请参考图2,本申请实施例提供了测试用例的数据分析方法的一种流程示意图,该测试用例的数据分析方法可以应用于上述测试设备100,该测试用例的数据分析方法包括以下步骤:
S100,获取被测设备执行测试用例后的测试数据;
测试数据包括测试输出信息及被测设备信息。
可以理解的是,请参照图3,测试设备100可以与多个被测设备200连接,通过本申请提供的方法实现对多个被测设备200执行测试用例后的测试数据进行数据分析,得到多个被测设备200执行测试用例后对应的分析结果,因此,本申请对于被测设备的数量不做限定。为了便于理解,本文中的“获取被测设备执行测试用例后的测试数据”可以理解为“测试设备100获取一个被测设备200执行测试用例后的测试数据”。
在一些可能的实施例中,测试设备100所获取的测试数据可以包括测试输出信息及被测设备信息。以被测设备为固态硬盘(Solid State Disk,SSD)为例,在SSD执行测试用例后,测试设备100可以获取SSD的测试数据,该测试数据可以包括:SSD的测试输出信息(即上述的测试输出信息)及SSD的设备信息(即上述的被测设备信息),其中,SSD的测试输出信息可以包括用例ID、用例suit名称、错误信息等;SSD的设备信息可以包括SSD的版本,SSD的名字编号,SSD的日志等。需要说明的是,本申请实施例中的被测设备200并不仅限于SSD,该被测设备200还可以是服务器、手机、平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、手持计算机、上网本、个人数字助理(personaldigital assistant,PDA)、可穿戴电子设备、虚拟现实设备、汽车中控台等电子设备,甚至,在一些测试场景中,被测设备200还可以是程序装置等,因此本申请实施例对被测设备200不做任何限制。
S110,根据测试输出信息及预设对应关系表确定与测试输出信息对应的测试结果信息;
预设对应关系表表征多个测试输出信息和测试结果信息的对应关系。
在一些可能的实施例中,测试设备100中可以预设有一个预设对应关系表,该预设对应关系表包括多个测试输出信息和测试结果信息的对应关系。继续以被测设备为SSD为例,并假设该测试数据中的测试输出信息为“Errno 10054”,以及该“Errno 10054”信息在预设对应关系表中对应的测试结果信息为“主机问题”。在获取到该测试输出信息后,测试设备100可以从预设对应关系表找到该测试输出信息对应的测试结果信息“主机问题”,进而得到测试输出信息对应的分析结果,实现对测试输出信息的分析,避免了人工对大量的测试输出信息进行分析以得出对应的分析结果,提高了测试用例的数据分析的效率。
需要说明的是,该测试设备100还可以通过网络从其他设备、终端、服务器或存储器中获取到上述的预设对应关系表,本申请对此不做限定。
S120,根据测试结果信息和被测设备信息生成测试用例的分析结果。
在一些可能的实施例中,继续以被测设备为SSD为例,并假设该测试数据中的测试输出信息为“Errno 10054”,该“Errno 10054”信息在预设对应关系表中对应的测试结果信息为“主机问题”,以及被测设备信息为“3号SSD盘”。则可以生成“3号SSD盘存在主机问题,问题信息为‘Errno 10054’”。
应理解,由于预设对应关系表表征多个测试输出信息和测试结果信息的对应关系,在根据测试输出信息及预设对应关系表确定测试结果信息时,能够快速、准确地确定出测试用例的分析结果,避免人工对被测设备执行测试用例后的测试数据进行分析,故而能够提高测试用例的测试数据的分析效率,加快产品开发进程。
进一步的,在图2的基础上,下面给出一种完整方案可能的实现方式,请参照图4,图4示出了本申请实施例提供的测试用例的数据分析方法的另一种流程图。
其中,测试输出信息包括用例ID,对于如何根据测试输出信息及预设对应关系表确定与测试输出信息对应的测试结果信息。为了进一步提升测试用例的测试数据的分析效率,S110可以包括:
S110A,根据用例ID及预设的第一对应关系确定与用例ID对应的测试执行信息;
预设的第一对应关系表征多个用例ID和测试执行信息的对应关系,测试执行信息包括测试场景信息和测试步骤信息。
在一些可能的实施例中,该第一对应关系可以是一张测试用例表格(TestCases),该测试用例表格中预先录入了所有测试用例的用例ID,并且每个用例ID均对应有一个测试执行信息,且该测试执行信息包括测试场景信息和测试步骤信息。
此时,测试设备100可以通过用例ID快速确定出测试场景信息和测试步骤信息,例如,当用例ID为“0006”时,该用例ID对应的测试场景信息为“对SSD硬盘进行带业务读写过程中掉电”,该测试步骤信息为“操作步骤3的检查项失败,测试之前主机上有3块盘,测试后主机上有2块盘,存在踢盘现象”,因此,通过第一对应关系确定出测试用例的测试场景信息和测试步骤信息能够一目了然地展示测试用例的执行场景以及详细的步骤。
由于通过第一对应关系可以确定出测试用例的测试场景信息和测试步骤信息,使得最终生成的测试用例的分析结果内容更加丰富,避免数据缺失引起的人工再次对测试用例的测试数据进行分析,故而能够进一步提升测试用例的测试数据的分析效率。
进一步的,在图2的基础上,为了进一步提升测试用例的测试数据的分析效率,请参照图5,S100还可以包括:
S100A,在被测设备执行测试用例失败后,获取被测设备的测试数据;
测试数据包括测试输出信息及被测设备信息。
在一些可能的实施例中,当被测设备200执行测试用例失败后,测试输出信息可以包括错误信息。
S110还可以包括:S110B,根据错误信息及预设的第二对应关系确定与错误信息对应的错误种类;
预设的第二对应关系表征多个错误信息和错误种类的对应关系。
在一些可能的实施例中,该第二对应关系可以是一张问题信息表格(Failed_reason),该问题信息表格中预先录入了所有测试用例的错误信息,并且每个错误信息均对应有一个错误种类。
此时,测试设备100可以通过错误信息快速确定出错误种类,例如,当错误信息为“SSHException:Timeout openning channel”时,该错误信息对应的错误种类为“网络问题,处理建议”,因此,通过第二对应关系确定出测试用例的错误种类能够使得技术人员快速定位用例的问题。
进一步的,该问题信息表格中还可以预先存储有每个错误种类对应的处理建议,例如,当错误信息为“SSHException:Timeout openning channel”时,该错误信息对应的错误种类为“网络问题,处理建议”,其处理建议为“请交由运维人员处理”,因此,通过第二对应关系确定出测试用例的错误种类能够使得提高技术人员的处理效率。
由于通过第二对应关系可以确定出测试用例的错误种类能够使得技术人员快速定位用例的问题,使得技术人员快速对失败的测试用例进行处理,故而能够进一步提升测试用例的测试数据的分析效率。
可选地,由于上述的预设对应关系表可以是由技术人员根据经验整理得到的,随着技术发展,技术人员会定期更新预设对应关系表的内容。为了使得每次对测试用例的数据分析时,均获取到最新的预设对应关系表。在图2的基础上,请参照图6,在S110之前,方法还可以包括:
S101,获取与预设对应关系表的版本号对应的最新版本号。
S102,当预设对应关系表的版本号低于最新版本号时,以最新版本号对应的对应关系表更新预设对应关系表。
在一些可能的实施例中,例如,与预设对应关系表的版本号对应的最新版本号为“V3.1”,预设对应关系表的版本号为“V2.1”(V2.1低于V3.1),此时,测试设备100可以通过网络从其他设备、终端、服务器或存储器中获取到最新版本号对应的对应关系表,并以最新版本号对应的对应关系表更新预设对应关系表。
可选地,为了使得最终生成的测试用例的分析结果内容更加丰富,进一步提升测试用例的测试数据的分析效率。请继续参照图6,在S110之后,方法还可以包括:
S111,获取被测设备的日志信息。
应理解,由于在通过被测设备测试测试用例时,通过会存在大量的被测设备,以被测设备为SSD为例,在大量的SSD上执行测试用例时,每个SSD上均会记录有日志信息,该日志信息可以反映测试用例在测试时的整个过程,因此有必要获取SSD上的日志信息,尤其是当SSD在执行测试用例出错时。
其中,对于如何根据测试结果信息和被测设备信息生成测试用例的分析结果,S120可以包括:
S120A,根据测试结果信息、被测设备信息和日志信息生成测试用例的分析结果。
在一些可能的实施例中,继续以被测设备为SSD为例,并假设该测试数据中的测试输出信息为“Errno 10054”,该“Errno 10054”信息在预设对应关系表中对应的测试结果信息为“主机问题”,被测设备信息为“3号SSD盘”,以及日志信息为“1.30操作1;1.30;操作2”。则可以生成“3号SSD盘存在主机问题,问题信息为‘Errno 10054’,日志信息内容如下:‘1.30操作1;1.30;操作2’”。
可以理解的是,本申请所述的分析结果可以是一张结果分析定位表格(FailCase_Result),该结果分析定位表格中可以包括上述S110中所有生成的信息作为测试用例的分析结果,在生成结果分析定位表格后,维护人员可以根据该表格对测试环境,测试用例进行维护,以及根据该表格对产品问题进行分析定位,进而实现提高测试用例的测试数据的分析效率,加快产品开发进程。
下面结合实际应用,对本申请所述的方法做进一步解释。
请参照图7,调度执行机为本申请提供的测试设备100,调度执行机可以通过HOST主机与多个SSD连接(该连接方式可以为:调度执行机通过网络(例如基于TCP/IP协议的网络)与HOST主机连接,HOST主机可以通过SATA(Serial Advanced Technology Attachment,串行高级技术附件)线与多个SSD连接,该多个SSD为本申请提供的被测设备200。
其中,为了便于实现本申请提供的方法,该调度执行机的软件系统可以包括:操作系统、python语言环境、Robot Framework框架软件、python自动化特性脚本、python调度脚本、python自动化结果分析脚本,并且,操作系统可以为Windows操作系统、Linux操作系统等。在HOST主机上可以配置有执行自动化测试工具,以便测试SSD。
对于如何实现本申请提供的方法,在调度执行机上可以部署有软件程序,该软件程序可以包括:
调度模块,用于实现根据测试环境及测试用例,实现将测试用例分配至HOST主机上对应的SSD;例如,调度模块可以获取到HOST主机、待测试SSD、待测试的测试用例,并将待测试的测试用例分配给HOST主机,以及实现HOST主机在执行一个待测试的测试用例后继续执行下一个待测试的测试用例。
用例执行模块,用于控制HOST主机执行测试用例,以得到测试数据(例如,通过pybot命令调用RF脚本),并执行该脚本以实现控制HOST主机执行测试用例;
结果分析模块,用于获取被测设备执行测试用例后的测试数据,并实现对测试用例的数据分析,例如实现自动收集执行失败的测试用例,故障的SSD信息,失败测试场景,对执行失败的测试用例进行报错,对执行失败的测试用例进行错误分类,对SSD的日志信息进行收集等功能。
可选地,调度模块在执行时,可以实现:获取目标测试用例的用例ID,根据该用例ID将目标测试用例分配至Host主机上对应的SSD上,并在分配时记录HOST主机信息、SSD盘信息以及执行时间。
用例执行模块在执行时,可以实现:通过“cmd”执行pybot命令,执行RobotFramework内的脚本,实现控制HOST主机执行测试用例。
在测试用例执行结束后,用例执行模块还可以读取用例的结果返回值,并做判断。如果测试用例执行失败,则进入结果分析模块做进一步处理,并获取被测设备执行测试用例后的测试数据,例如,获取错误信息、用例ID、HOST主机信息、SSD盘信息。
在可能的实际应用中,结果分析模块可以包括:
信息获取模块,当被测设备执行测试用例失败后,用于获取测试用例的用例ID、错误信息以及被测设备信息;
日志信息收集模块,用于获取被测设备的日志信息;
问题分类模块,用于根据预设的测试用例表格(TestCases)、问题信息表格(Failed_reason)获取用例ID对应的测试场景信息和测试步骤信息,以及获取错误信息对应的错误种类;
存档信息模块,用于根据测试场景信息、测试步骤信息、被测设备的日志信息、被测设备信息以及错误种类生成结果分析定位表格(FailCase_Result)。
为了执行上述实施例及各个可能的方式中的相应步骤,下面给出一种测试用例的数据分析装置的实现方式,请参阅图8,图8示出了本申请实施例提供的测试用例的数据分析装置的一种功能模块图。需要说明的是,本实施例所提供的测试用例的数据分析装置300,其基本原理及产生的技术效果和上述实施例相同,为简要描述,本实施例部分未提及之处,可参考上述的实施例中相应内容。该测试用例的数据分析装置300包括:获取模块310、分析模块320。
可选地,上述模块可以软件或固件(Firmware)的形式存储于存储器中或固化于本申请提供的测试设备100的操作系统(Operating System,OS)中,并可由测试设备100中的处理器执行。同时,执行上述模块所需的数据、程序的代码等可以存储在存储器中。
其中,获取模块310可以用于支持服务器执行上述S100、S100A、S101、S102、S111等,和/或用于本文所描述的技术的其他过程。
分析模块320可以用于支持服务器执行上述S110、S110A、S110B、S120等,和/或用于本文所描述的技术的其他过程。
基于上述方法实施例,本申请实施例还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述测试用例的数据分析方法的步骤。
可选地,该存储介质能够为通用的存储介质,如移动磁盘、硬盘等,该存储介质上的计算机程序被运行时,能够执行上述测试用例的数据分析方法,从而解决如何提高测试用例的测试数据的分析效率的问题,进而达到提高测试用例的测试数据的分析效率,加快产品开发进程。
综上所述,本申请实施例提供了一种测试用例的数据分析方法、装置、存储介质和测试设备。该方法包括:获取被测设备执行测试用例后的测试数据;测试数据包括测试输出信息及被测设备信息;根据测试输出信息及预设对应关系表确定与测试输出信息对应的测试结果信息;预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;根据测试结果信息和被测设备信息生成测试用例的分析结果。由于预设对应关系表表征多个测试输出信息和测试结果信息的对应关系,在根据测试输出信息及预设对应关系表确定测试结果信息时,能够快速、准确地确定出测试用例的分析结果,避免人工对被测设备执行测试用例后的测试数据进行分析,故而能够提高测试用例的测试数据的分析效率,加快产品开发进程。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考方法实施例中的对应过程,本申请中不再赘述。在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种测试用例的数据分析方法,其特征在于,应用于测试设备,所述方法包括:
获取被测设备执行测试用例后的测试数据;所述测试数据包括测试输出信息及被测设备信息;
根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息;所述预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;
根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果。
2.根据权利要求1所述的方法,其特征在于,所述测试输出信息包括用例ID,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤包括:
根据所述用例ID及预设的第一对应关系确定与所述用例ID对应的测试执行信息;所述预设的第一对应关系表征多个用例ID和测试执行信息的对应关系,所述测试执行信息包括测试场景信息和测试步骤信息。
3.根据权利要求1所述的方法,其特征在于,获取被测设备执行测试用例后的测试数据的步骤包括:
在被测设备执行测试用例失败后,获取所述被测设备的测试数据。
4.根据权利要求3所述的方法,其特征在于,所述测试输出信息包括错误信息,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤包括:
根据所述错误信息及预设的第二对应关系确定与所述错误信息对应的错误种类;所述预设的第二对应关系表征多个错误信息和错误种类的对应关系。
5.根据权利要求1所述的方法,其特征在于,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤之前,所述方法还包括:
获取与所述预设对应关系表的版本号对应的最新版本号;
当所述预设对应关系表的版本号低于所述最新版本号时,以所述最新版本号对应的对应关系表更新所述预设对应关系表。
6.根据权利要求1所述的方法,其特征在于,根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息的步骤之后,所述方法还包括:
获取所述被测设备的日志信息;
根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果的步骤包括:
根据所述测试结果信息、所述被测设备信息和所述日志信息生成所述测试用例的分析结果。
7.一种测试用例的数据分析装置,其特征在于,应用于测试设备,所述装置包括:
获取模块,用于获取被测设备执行测试用例后的测试数据;所述测试数据包括测试输出信息及被测设备信息;
分析模块,用于根据所述测试输出信息及预设对应关系表确定与所述测试输出信息对应的测试结果信息;所述预设对应关系表表征多个测试输出信息和测试结果信息的对应关系;以及用于根据所述测试结果信息和所述被测设备信息生成所述测试用例的分析结果。
8.根据权利要求7所述的装置,其特征在于,所述测试输出信息包括用例ID,所述分析模块用于根据所述用例ID及预设的第一对应关系确定与所述用例ID对应的测试执行信息;所述预设的第一对应关系表征多个用例ID和测试执行信息的对应关系,所述测试执行信息包括测试场景信息和测试步骤信息。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至6任一项所述方法的步骤。
10.一种测试设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述测试设备运行时,所述处理器与所述存储器之间通过总线通信,所述处理器执行所述机器可读指令,以执行如权利要求1至6任一项所述方法的步骤。
CN201911197290.2A 2019-11-29 2019-11-29 测试用例的数据分析方法、装置、存储介质和测试设备 Withdrawn CN110865944A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911197290.2A CN110865944A (zh) 2019-11-29 2019-11-29 测试用例的数据分析方法、装置、存储介质和测试设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911197290.2A CN110865944A (zh) 2019-11-29 2019-11-29 测试用例的数据分析方法、装置、存储介质和测试设备

Publications (1)

Publication Number Publication Date
CN110865944A true CN110865944A (zh) 2020-03-06

Family

ID=69657693

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911197290.2A Withdrawn CN110865944A (zh) 2019-11-29 2019-11-29 测试用例的数据分析方法、装置、存储介质和测试设备

Country Status (1)

Country Link
CN (1) CN110865944A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858320A (zh) * 2020-07-03 2020-10-30 Oppo广东移动通信有限公司 测试数据处理方法、装置及电子设备
CN112015653A (zh) * 2020-08-31 2020-12-01 中移(杭州)信息技术有限公司 问题定位方法、服务器及存储介质
CN112286791A (zh) * 2020-09-27 2021-01-29 长沙市到家悠享网络科技有限公司 一种业务系统测试方法、装置、设备和存储介质
CN113688073A (zh) * 2021-09-07 2021-11-23 天津津航计算技术研究所 一种sata从设备ip核测试系统
CN114822677A (zh) * 2022-05-20 2022-07-29 深圳市金胜电子科技有限公司 一种nand闪存芯片的信息记录方法、装置、电子设备及介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858320A (zh) * 2020-07-03 2020-10-30 Oppo广东移动通信有限公司 测试数据处理方法、装置及电子设备
CN111858320B (zh) * 2020-07-03 2024-05-17 Oppo广东移动通信有限公司 测试数据处理方法、装置及电子设备
CN112015653A (zh) * 2020-08-31 2020-12-01 中移(杭州)信息技术有限公司 问题定位方法、服务器及存储介质
CN112286791A (zh) * 2020-09-27 2021-01-29 长沙市到家悠享网络科技有限公司 一种业务系统测试方法、装置、设备和存储介质
CN113688073A (zh) * 2021-09-07 2021-11-23 天津津航计算技术研究所 一种sata从设备ip核测试系统
CN114822677A (zh) * 2022-05-20 2022-07-29 深圳市金胜电子科技有限公司 一种nand闪存芯片的信息记录方法、装置、电子设备及介质

Similar Documents

Publication Publication Date Title
CN110865944A (zh) 测试用例的数据分析方法、装置、存储介质和测试设备
CN109302522B (zh) 测试方法、装置以及计算机系统和介质
CN108768730B (zh) 用于操作智能网卡的方法和装置
CN110764945A (zh) 一种崩溃日志处理方法、装置、设备和存储介质
CN110347085B (zh) 自动化测试系统、方法、车辆以及计算机可读介质
CN110058920B (zh) 虚拟机性能检测方法及装置、电子设备、存储介质
CN111274154A (zh) 一种自动化测试的方法、装置、设备及存储介质
US20120254662A1 (en) Automated test system and automated test method
CN111198811A (zh) 一种页面自动化测试的方法、装置、电子设备及存储介质
CN109067605B (zh) 一种存储子系统故障诊断方法、装置、终端及存储介质
CN114996127A (zh) 固态硬盘固件模块智能化测试方法及系统
CN111274130A (zh) 一种自动化测试方法、装置、设备及存储介质
CN111694684A (zh) 存储设备的异常构造方法、装置、电子设备及存储介质
US11861214B2 (en) Memory device forensics and preparation
CN112506772A (zh) web自动化测试方法、装置、电子设备和存储介质
CN116738091A (zh) 页面监控方法、装置、电子设备及存储介质
CN111338864A (zh) 内存问题检测方法、装置、计算机设备及存储介质
CN113535580B (zh) 一种cts测试方法、装置及测试设备
CN116087752A (zh) 一种芯片测试方法、系统、装置及介质
CN115454856A (zh) 多应用的安全检测方法、装置、介质及电子设备
CN109299012A (zh) 一种测试方法、装置及电子设备
CN114265786A (zh) 自动化测试方法、装置,计算机设备及可读存储介质
CN113986263A (zh) 代码自动化测试方法、装置、电子设备、存储介质
CN114968753A (zh) 设备升级测试方法、介质、电子设备及测试系统
CN112346994A (zh) 一种测试信息关联方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20200306