CN112035364B - 功能测试结果评估方法及装置 - Google Patents
功能测试结果评估方法及装置 Download PDFInfo
- Publication number
- CN112035364B CN112035364B CN202010902696.2A CN202010902696A CN112035364B CN 112035364 B CN112035364 B CN 112035364B CN 202010902696 A CN202010902696 A CN 202010902696A CN 112035364 B CN112035364 B CN 112035364B
- Authority
- CN
- China
- Prior art keywords
- case
- test
- defect
- cases
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 131
- 238000011156 evaluation Methods 0.000 title claims abstract description 27
- 230000007547 defect Effects 0.000 claims abstract description 127
- 238000011990 functional testing Methods 0.000 claims abstract description 70
- 238000004519 manufacturing process Methods 0.000 claims abstract description 55
- 238000000034 method Methods 0.000 claims abstract description 39
- 238000004590 computer program Methods 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 13
- 238000012544 monitoring process Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 35
- 238000010586 diagram Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000002950 deficient Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010223 real-time analysis Methods 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Factory Administration (AREA)
- Stored Programmes (AREA)
Abstract
本发明公开了一种功能测试结果评估方法及装置，该方法包括：将用例库中的用例表和问题表进行关联，以生成合并表；提取合并表中的功能测试相关信息字段；根据预设规则建立基准表将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估。本发明实现了对测试问题所发现的缺陷与测试用例和生产任务、需求多维度的结合，可以直观判断出哪一类需求对应的用例容易产生缺陷，同时也可以给产品质量一个直观的反馈。
Description
技术领域
本发明涉及计算机技术领域，尤其涉及一种功能测试结果评估方法及装置。
背景技术
功能测试指的是对产品的各功能进行验证，根据功能测试用例，逐项测试，检查产品是否达到用户要求的功能。而测试用例是指对一项特定的软件产品进行测试任务的描述，体现测试方案、方法、技术和策略，其内容包括测试目标、测试环境、输入数据、测试步骤、预期结果、测试脚本等，最终形成文档。简单地认为，测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，用于核实是否满足某个特定软件需求。
现有技术在进行功能测试的过程中，无法将测试问题所发现的缺陷与测试用例和生产任务、需求直观地挂钩，而是将测试用例执行进度、测试发现缺陷数及已解决缺陷数这些指标采用独立维度进行监控，这种功能测试结果评估方式会导致测试人员在功能测试进行过程中无法快速且直观地看出每个需求对应用例缺陷的数量及当下的状态，从而导致最终在得出功能测试结论时容易判断偏颇，无法直观判断哪一类需求对应用例容易产生缺陷，同时也无法给产品质量一个直观的反馈。
发明内容
本发明实施例提供一种功能测试结果评估方法，实现了对测试问题所发现的缺陷与测试用例和生产任务、需求多维度的结合，可以直观判断出哪一类需求对应的用例容易产生缺陷，同时也可以给产品质量一个直观的反馈，该方法包括：
将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例；
提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值；基准表中的字段分别为“用例是否完成标志位testcasestaflag_st”、“用例是否有对应缺陷标志位ifbugflag_st”以及“缺陷状态标志位bugstaflag_st”三个字段为标准取值，此标准取值为功能测试准出标准，准出标准如下：testcasestaflag_st等于1且ifbugflag_st等于1且bugstaflag_st等于4，或，testcasestaflag_st等于1且ifbugflag_st等于0且bugstaflag_st等于null；
将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；
根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；
根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估；
提取合并表中的功能测试相关信息字段，包括：将合并表中的需求ID、需求对应生产任务ID、生产任务对应测试用例ID、用例是否完成标志位：testcasestaflag、用例是否有对应缺陷标志位：ifbugflag、缺陷状态标志位：bugstaflag的字段值进行提取得出全量数据表；
根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值，包括：针对同一个需求ID以及生产任务ID，对用例数进行计数，得到用例总数值testcasesum；若testcasestaflag等于testcasestaflag_st，则已完成用例计数器testcasesum_com加1；若ifbugflag_st等于1，则缺陷计数器testcasesbug加1；若ifbugflag_st等于1且bugstaflag_st等于4，则已解决缺陷计数器testcasesdebug加1；最终得到同一个需求ID及生产任务ID下，用例总数testcasesum，用例完成总数testcasesum_com，缺陷总数testcasesbug以及已解决缺陷总数testcasesdebug。
可选的，将用例库中的用例表和问题表进行关联，以生成合并表，包括：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
可选的，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值之后，所述方法还包括：
通过表格的方式对统计结果进行展示。
可选的，所述方法还包括：
对所述统计结果进行监控处理。
本发明实施例还提供一种功能测试结果评估装置，实现了对测试问题所发现的缺陷与测试用例和生产任务、需求多维度的结合，可以直观判断出哪一类需求对应的用例容易产生缺陷，同时也可以给产品质量一个直观的反馈，该装置包括：
表关联模块，用于将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例；
字段提取模块，用于提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
基准表建立模块，用于根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值；基准表中的字段分别为“用例是否完成标志位testcasestaflag_st”、“用例是否有对应缺陷标志位ifbugflag_st”以及“缺陷状态标志位bugstaflag_st”三个字段为标准取值，此标准取值为功能测试准出标准，准出标准如下：testcasestaflag_st等于1且ifbugflag_st等于1且bugstaflag_st等于4，或，testcasestaflag_st等于1且ifbugflag_st等于0且bugstaflag_st等于null；
字段比较模块，用于将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；
数值统计模块，用于根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；
测试结果评估模块，用于根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估；
字段提取模块，具体用于将合并表中的需求ID、需求对应生产任务ID、生产任务对应测试用例ID、用例是否完成标志位：testcasestaflag、用例是否有对应缺陷标志位：ifbugflag、缺陷状态标志位：bugstaflag的字段值进行提取得出全量数据表；
数值统计模块，具体用于针对同一个需求ID以及生产任务ID，对用例数进行计数，得到用例总数值testcasesum；若testcasestaflag等于testcasestaflag_st，则已完成用例计数器testcasesum_com加1；若ifbugflag_st等于1，则缺陷计数器testcasesbug加1；若ifbugflag_st等于1且bugstaflag_st等于4，则已解决缺陷计数器testcasesdebug加1；最终得到同一个需求ID及生产任务ID下，用例总数testcasesum，用例完成总数testcasesum_com，缺陷总数testcasesbug以及已解决缺陷总数testcasesdebug。
可选的，表关联模块进一步用于：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
可选的，所述装置还包括：
展示模块，用于通过表格的方式对统计结果进行展示。
可选的，所述装置还包括：
监控模块，用于对所述统计结果进行监控处理。
本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述方法的计算机程序。
本发明实施例中，通过将用例库中的用例表和问题表进行关联，以生成合并表，提取合并表中的功能测试相关信息字段，实现了对测试问题所发现的缺陷与测试用例和生产任务、需求多维度的结合，保证后续测试结果更加准确。通过根据预设规则建立基准表，将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较，根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值，再根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估，可以直观判断出哪一类需求对应的用例容易产生缺陷，同时也可以给产品质量一个直观的反馈。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1为本发明实施例中功能测试结果评估方法的流程图；
图2为本发明实施例中功能测试结果评估方法的又一流程图；
图3为本发明实施例中功能测试结果评估装置的结构示意图；
图4为本发明实施例中功能测试结果评估装置的又一结构示意图；
图5是本发明实施例计算机设备示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。
下面对本申请中涉及的名称进行说明：
生产任务：针对需求排期的任务，生产任务包括开发和测试两个主要过程，一个生产任务对应一个需求，但是一个需求可对应多个生产任务。
产品缺陷：产品缺陷是指存在于产品的设计、功能等方面的，未能满足需求或使用产品所必须合理安全要求的情形。
功能测试：功能测试就是对产品的各功能进行验证，根据功能测试用例，逐项测试，检查产品是否达到用户要求的功能。
测试用例：测试用例(Test Case)是指对一项特定的软件产品进行测试任务的描述，体现测试方案、方法、技术和策略。其内容包括测试目标、测试环境、输入数据、测试步骤、预期结果、测试脚本等，最终形成文档。简单地认为，测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，用于核实是否满足某个特定软件需求。
现有技术在进行功能测试的过程中，无法将测试问题所发现的缺陷与测试用例和生产任务、需求直观地挂钩，而是将测试用例执行进度、测试发现缺陷数及已解决缺陷数这些指标采用独立维度进行监控，这种功能测试结果评估方式会导致测试人员在功能测试进行过程中无法快速且直观地看出每个需求对应用例缺陷的数量及当下的状态，从而导致最终在得出功能测试结论时容易判断偏颇，无法直观判断哪一类需求对应用例容易产生缺陷，同时也无法给产品质量一个直观的反馈。为了解决上述问题，本发明实施例提供了一种功能测试结果评估方法。
需要说明的是，本发明可基于python进行功能测试结果评估。
图1为本发明实施例提供的一种功能测试结果评估方法的流程图，如图1所示，该方法包括：
步骤101、将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例。
在实施例中，将用例库中的用例表和问题表进行关联，以生成合并表，包括：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
其中，用例库中的用例表的具体示例表如下表1所示：
表1
| 需求ID | 生产任务ID | 用例ID | testcasestaflag | 其他字段忽略 |
| 1 | 1 | 1 | 1 | …… |
| 1 | 1 | 2 | 0 | …… |
| 1 | 1 | 3 | 1 | …… |
| 1 | 1 | 4 | 1 | …… |
| …… |
用例库中的问题表的具体示例表如下表2所示：
表2
| 生产任务ID | 用例ID | ifbugflag | bugstaflag | 其他字段忽略 |
| 1 | 1 | 0 | Null | …… |
| 1 | 2 | 1 | 0 | …… |
| 1 | 3 | 1 | 3 | …… |
| 1 | 4 | 1 | 4 | …… |
| …… |
合并表的具体示例表如下表3所示：
表3
步骤102、提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
具体实施时，通过python的xlrd库将merge表中的需求ID，需求对应生产任务ID，生产任务对应测试用例ID，用例是否完成标志位：testcasestaflag(boolean类型，0表示未完成，1表示完成)，用例是否有对应缺陷标志位：ifbugflag(boolean类型，0表示无缺陷，1表示有缺陷)，缺陷状态标志位：bugstaflag(0-新缺陷，1-已受理，2-已定位，3-待验，4-已解决)等字段值进行提取得出全量数据表。
全量数据表的具体示例表如下表4所示：
表4
步骤103、根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值。
在实施例中，基准表中的字段分别为“用例是否完成标志位testcasestaflag_st”、“用例是否有对应缺陷标志位ifbugflag_st”以及“缺陷状态标志位bugstaflag_st”三个字段为标准取值，此标准取值为功能测试准出标准，准出标准如下(testcasestaflag_st＝1 AND ifbugflag_st＝1 AND bugstaflag_st＝4)OR(testcasestaflag_st＝1 ANDifbugflag_st＝0 AND bugstaflag_st＝null)。
基准表的具体示例表如下表5所示：
表5
| testcasestaflag_st | Ifbugflag_st | Bugstaflag_st |
| 1 | 0 | Null |
| 1 | 1 | 4 |
步骤104、将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较。
在实施例中，将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较，若两表中的字段相同，则表示该测试用例为已完成的测试用例。
步骤105、根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值。
具体实施时，针对同一个需求ID以及生产任务ID，对用例数进行计数，得到用例总数值testcasesum；
IF(testcasestaflag＝＝testcasestaflag_st)，则已完成用例计数器testcasesum_com加1；
IF(ifbugflag_st＝＝1)，则缺陷计数器testcasesbug加1；
IF(ifbugflag_st＝＝1 AND bugstaflag_st＝＝4)，则已解决缺陷计数器testcasesdebug加1；
最终可得到同一个需求ID及生产任务ID下，用例总数testcasesum，用例完成总数testcasesum_com，缺陷总数testcasesbug以及已解决缺陷总数testcasesdebug。
步骤106、根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估。
由图1可知，本发明实施例提供的功能测试结果评估方法，通过将用例库中的用例表和问题表进行关联，以生成合并表，提取合并表中的功能测试相关信息字段，实现了对测试问题所发现的缺陷与测试用例和生产任务、需求多维度的结合，保证后续测试结果更加准确。通过根据预设规则建立基准表，将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较，根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值，再根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估，可以直观判断出哪一类需求对应的用例容易产生缺陷，同时也可以给产品质量一个直观的反馈。
图2为本发明实施例提供的功能测试结果评估方法的又一流程图，如图2所示，根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值之后，所述方法还包括：
步骤201、通过表格的方式对统计结果进行展示。
在实施例中，通过对统计结果进行展示的表格如下所示：
| 需求ID | 生产任务ID | testcasesum | testcasesum_com | testcasesbug | testcasesdebug |
| 1 | 1 | 4 | 3 | 3 | 1 |
| …… |
具体地统计过程如下：
对用例数进行计数，得到用例总数值testcasesum＝4；
testcasestaflag＝＝testcasestaflag_st，计数得已完成用例testcasesum_com＝3；
ifbugflag_st＝1，得缺陷数testcasesbug＝3；
ifbugflag_st＝1AND bugstaflag_st＝4，得已解决缺陷testcasesdebug＝1。
为了便于对测试结果进行实施监控，便于工作人员实时对测试结果进行分析，所述方法还包括：
对所述统计结果进行监控处理。
基于同一发明构思，本发明实施例中还提供了一种功能测试结果评估装置，如下面的实施例所述。由于功能测试结果评估装置解决问题的原理与功能测试结果评估方法相似，因此，功能测试结果评估装置的实施可以参见功能测试结果评估方法的实施，重复之处不再赘述。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图3为本发明实施例提供的一种功能测试结果评估装置的结构示意图，如图3所示，该装置包括：
表关联模块301，用于将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例；
字段提取模块302，用于提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
基准表建立模块303，用于根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值；
字段比较模块304，用于将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；
数值统计模块305，用于根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；
测试结果评估模块306，用于根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估。
在本发明实施例中，表关联模块301进一步用于：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
图4为本发明实施例提供的一种功能测试结果评估装置的又一结构示意图，如图4所示，该装置还包括：
展示模块401，用于通过表格的方式对统计结果进行展示。
在本发明实施例中，所述装置还包括：
监控模块，用于对所述统计结果进行监控处理。
为了实现上述目的，根据本申请的另一方面，还提供了一种计算机设备。如图5所示，该计算机设备包括存储器、处理器、通信接口以及通信总线，在存储器上存储有可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述实施例方法中的步骤。
处理器可以为中央处理器(Central Processing Unit，CPU)。处理器还可以为其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。
存储器作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及单元，如本发明上述方法实施例中对应的程序单元。处理器通过运行存储在存储器中的非暂态软件程序、指令以及模块，从而执行处理器的各种功能应用以及作品数据处理，即实现上述方法实施例中的方法。
存储器可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器可选包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至处理器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个单元存储在所述存储器中，当被所述处理器执行时，执行上述实施例中的方法。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述方法的计算机程序。
综上所述，由于目前对于功能测试准出结果监控，都是以独立维度监控，如测试用例完成比例或测试缺陷数修复比例，而没有将需求-生产任务-测试用例-缺陷问题这几个维度结合起来分析测试结果的方案，因此本发明通过将用例表及问题表进行数据梳理，并添加需求信息，能将需求-生产任务-测试用例-缺陷问题这几个信息直观展示给使用者，使使用者对功能测试过程一目了然，并对从需求到缺陷的对应关系有整体把控，从而提升产品质量监控力度。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种功能测试结果评估方法，其特征在于，包括：
将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例；
提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值；基准表中的字段分别为“用例是否完成标志位testcasestaflag_st”、“用例是否有对应缺陷标志位ifbugflag_st”以及“缺陷状态标志位bugstaflag_st”三个字段为标准取值，此标准取值为功能测试准出标准，准出标准如下：testcasestaflag_st等于1且ifbugflag_st等于1且bugstaflag_st等于4，或，testcasestaflag_st＝1且ifbugflag_st＝0且bugstaflag_st＝null；
将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；
根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；
根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估；
提取合并表中的功能测试相关信息字段，包括：将合并表中的需求ID、需求对应生产任务ID、生产任务对应测试用例ID、用例是否完成标志位：testcasestaflag、用例是否有对应缺陷标志位：ifbugflag、缺陷状态标志位：bugstaflag的字段值进行提取得出全量数据表；
根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值，包括：针对同一个需求ID以及生产任务ID，对用例数进行计数，得到用例总数值testcasesum；若testcasestaflag等于testcasestaflag_st，则已完成用例计数器testcasesum_com加1；若ifbugflag_st等于1，则缺陷计数器testcasesbug加1；若ifbugflag_st等于1且bugstaflag_st等于4，则已解决缺陷计数器testcasesdebug加1；最终得到同一个需求ID及生产任务ID下，用例总数testcasesum，用例完成总数testcasesum_com，缺陷总数testcasesbug以及已解决缺陷总数testcasesdebug。
2.如权利要求1所述的方法，其特征在于，将用例库中的用例表和问题表进行关联，以生成合并表，包括：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
3.如权利要求1所述的方法，其特征在于，根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值之后，所述方法还包括：
通过表格的方式对统计结果进行展示。
4.如权利要求3所述的方法，其特征在于，还包括：
对所述统计结果进行监控处理。
5.一种功能测试结果评估装置，其特征在于，包括：
表关联模块，用于将用例库中的用例表和问题表进行关联，以生成合并表，其中，所述用例库用于存放针对预设产品的测试用例；
字段提取模块，用于提取合并表中的功能测试相关信息字段，所述功能测试相关信息字段包括：需求ID信息、与所述需求ID信息对应的生产任务ID信息、与所述生产任务ID信息对应的测试用例ID信息、用例是否完成标志位信息、用例对应缺陷标志位信息、缺陷状态标志位信息；
基准表建立模块，用于根据预设规则建立基准表，所述基准表用于记录功能测试相关信息字段的标准值；基准表中的字段分别为“用例是否完成标志位testcasestaflag_st”、“用例是否有对应缺陷标志位ifbugflag_st”以及“缺陷状态标志位bugstaflag_st”三个字段为标准取值，此标准取值为功能测试准出标准，准出标准如下：testcasestaflag_st等于1且ifbugflag_st等于1且bugstaflag_st等于4，或，testcasestaflag_st等于1且ifbugflag_st等于0且bugstaflag_st等于null；
字段比较模块，用于将合并表中的功能测试相关信息字段与基准表中功能测试相关信息字段的标准值进行比较；
数值统计模块，用于根据比较结果，统计用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值；
测试结果评估模块，用于根据用例总数值、测试完成的用例数值、用例缺陷数值、已解决缺陷数值对功能测试结果进行评估；
字段提取模块，具体用于将合并表中的需求ID、需求对应生产任务ID、生产任务对应测试用例ID、用例是否完成标志位：testcasestaflag、用例是否有对应缺陷标志位：ifbugflag、缺陷状态标志位：bugstaflag的字段值进行提取得出全量数据表；
数值统计模块，具体用于针对同一个需求ID以及生产任务ID，对用例数进行计数，得到用例总数值testcasesum；若testcasestaflag等于testcasestaflag_st，则已完成用例计数器testcasesum_com加1；若ifbugflag_st等于1，则缺陷计数器testcasesbug加1；若ifbugflag_st等于1且bugstaflag_st等于4，则已解决缺陷计数器testcasesdebug加1；最终得到同一个需求ID及生产任务ID下，用例总数testcasesum，用例完成总数testcasesum_com，缺陷总数testcasesbug以及已解决缺陷总数testcasesdebug。
6.如权利要求5所述的装置，其特征在于，表关联模块进一步用于：
将用例库中的用例表和问题表以生产任务ID信息和测试用例ID信息为关键字进行关联，测试用例ID信息。
7.如权利要求5所述的装置，其特征在于，根据比较结果，所述装置还包括：
展示模块，用于通过表格的方式对统计结果进行展示。
8.如权利要求7所述的装置，其特征在于，还包括：
监控模块，用于对所述统计结果进行监控处理。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至4任一所述方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至4任一所述方法的计算机程序。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010902696.2A CN112035364B (zh) | 2020-09-01 | 2020-09-01 | 功能测试结果评估方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010902696.2A CN112035364B (zh) | 2020-09-01 | 2020-09-01 | 功能测试结果评估方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112035364A CN112035364A (zh) | 2020-12-04 |
| CN112035364B true CN112035364B (zh) | 2024-04-16 |
Family
ID=73586654
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010902696.2A Active CN112035364B (zh) | 2020-09-01 | 2020-09-01 | 功能测试结果评估方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112035364B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113608998A (zh) * | 2021-07-02 | 2021-11-05 | 新华三信息安全技术有限公司 | 测试活动自动优化的方法、装置、计算机设备及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103257918A (zh) * | 2012-02-16 | 2013-08-21 | 广州博纳信息技术有限公司 | 基于软件测评平台的项目测试过程管理方法 |
| CN108664386A (zh) * | 2017-03-30 | 2018-10-16 | 北京神州泰岳软件股份有限公司 | 一种自动化测试方法和平台 |
| CN108897682A (zh) * | 2018-06-25 | 2018-11-27 | 郑州云海信息技术有限公司 | 一种基于Python的迭代测试结果评估方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20040186686A1 (en) * | 2003-03-17 | 2004-09-23 | Hsia Eddy Sun-How | Method and apparatus for testing a product |
-
2020
- 2020-09-01 CN CN202010902696.2A patent/CN112035364B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103257918A (zh) * | 2012-02-16 | 2013-08-21 | 广州博纳信息技术有限公司 | 基于软件测评平台的项目测试过程管理方法 |
| CN108664386A (zh) * | 2017-03-30 | 2018-10-16 | 北京神州泰岳软件股份有限公司 | 一种自动化测试方法和平台 |
| CN108897682A (zh) * | 2018-06-25 | 2018-11-27 | 郑州云海信息技术有限公司 | 一种基于Python的迭代测试结果评估方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112035364A (zh) | 2020-12-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107885656B (zh) | 产品算法自动化测试方法及应用服务器 | |
| CN107819627B (zh) | 系统故障处理方法及服务器 | |
| CN110471821B (zh) | 异常变更检测方法、服务器及计算机可读存储介质 | |
| CN107908550A (zh) | 一种软件缺陷统计处理方法及装置 | |
| CN110990295B (zh) | 测试用例的验证方法、装置及电子设备 | |
| CN112231133B (zh) | 一种数据修复处理方法、装置及电子设备 | |
| CN110941562A (zh) | 测试用例的验证方法、装置及电子设备 | |
| CN111898905A (zh) | 质量抽检管理方法、装置、计算机设备和存储介质 | |
| CN112463530A (zh) | 微服务系统的异常检测方法、装置、电子设备及存储介质 | |
| CN113391256A (zh) | 一种现场作业终端的电能表计量故障分析方法及系统 | |
| CN112035364B (zh) | 功能测试结果评估方法及装置 | |
| WO2016138805A1 (zh) | 一种分布数据异动判断定位方法及系统 | |
| CN110134598B (zh) | 一种批量处理方法、装置及系统 | |
| CN111611154B (zh) | 一种回归测试的方法、装置和设备 | |
| CN114021338A (zh) | 一种基于多源数据融合的可靠性评估方法 | |
| CN116401113B (zh) | 一种异构众核架构加速卡的环境验证方法、装置及介质 | |
| CN112527573B (zh) | 一种接口测试方法、装置及存储介质 | |
| CN110795308A (zh) | 一种服务器检验方法、装置、设备及存储介质 | |
| CN116187754A (zh) | 生产线故障定位方法、设备及可读存储介质 | |
| CN107102938A (zh) | 测试脚本的更新方法及装置 | |
| CN113093702B (zh) | 故障数据的预测方法和装置、电子设备和存储介质 | |
| CN112612882B (zh) | 检阅报告生成方法、装置、设备和存储介质 | |
| CN114334696A (zh) | 质量检测方法及装置、电子设备和计算机可读存储介质 | |
| CN113886373A (zh) | 一种数据处理方法、装置及电子设备 | |
| CN114139853A (zh) | 一种基于大数据的钢结构产品清单处理方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |