CN113254325A - 测试用例的处理方法和装置 - Google Patents
测试用例的处理方法和装置 Download PDFInfo
- Publication number
- CN113254325A CN113254325A CN202010084764.9A CN202010084764A CN113254325A CN 113254325 A CN113254325 A CN 113254325A CN 202010084764 A CN202010084764 A CN 202010084764A CN 113254325 A CN113254325 A CN 113254325A
- Authority
- CN
- China
- Prior art keywords
- test
- test case
- coverage rate
- benchmark
- case set
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 454
- 238000003672 processing method Methods 0.000 title description 6
- 238000012986 modification Methods 0.000 claims abstract description 57
- 230000004048 modification Effects 0.000 claims abstract description 57
- 238000012545 processing Methods 0.000 claims abstract description 45
- 238000000034 method Methods 0.000 claims abstract description 30
- 238000004590 computer program Methods 0.000 claims description 9
- 238000012217 deletion Methods 0.000 claims 1
- 230000037430 deletion Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000012544 monitoring process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000009825 accumulation Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000013101 initial test Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种测试用例的处理方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对处理后的测试应用文件进行测试并统计基准覆盖率;对基准测试用例集进行修改,然后,使用修改后的测试用例集对处理后的测试应用文件进行测试并统计修改覆盖率;通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集。该实施方式可以精准的筛选测试用例,不会出现对测试用例新增、删除错误的情况,从而能够合理的控制测试用例数量,科学的优化测试用例,提高了后续的测试用例执行测试、测试回归测试的效率。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种测试用例的处理方法和装置。
背景技术
测试用例作为测试人员保证产品质量的最重要的工具,测试用例的多少、质量高低直接影响到测试的工作量、测试回归的工作量和产品的质量。若测试用例覆盖不全,则容易出现线上问题;若测试用例覆盖全面但有重复,则对测试资源和时间会造成浪费。因此,如何精准的衡量测试用例是否存在重复是一个比较有难度的问题。而目前多是通过人工方式来优化测试用例,对测试用例的增加或删除是测试人员根据需求或经验来进行的。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
通过人工方式优化测试用例会存在多增加测试用例或者错误删除测试用例的情况,若多增加了测试用例,则会对后续测试用例的执行和测试回归增加工作量;若错误删除了测试用例,则会造成漏测,导致产品质量下降,产生线上问题。
发明内容
有鉴于此,本发明实施例提供一种测试用例的处理方法和装置,能够精准的筛选测试用例,不会出现对测试用例新增、删除错误的情况,从而能够合理的控制测试用例数量,科学的优化测试用例,提高了后续的测试用例执行测试、测试回归测试的效率。
为实现上述目的,根据本发明实施例的一个方面,提供了一种测试用例的处理方法。
一种测试用例的处理方法,包括:使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
可选地,对所述基准测试用例集进行修改包括:在所述基准测试用例集中新增测试用例和/或从所述基准测试用例集中删除测试用例。
可选地,若对所述基准测试用例集进行修改是在所述基准测试用例集中新增测试用例,则通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集包括:将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率大于所述基准覆盖率,则将所述修改后的测试用例集作为确定的测试用例集;否则,直接将所述基准测试用例集作为确定的测试用例集。
可选地,若对所述基准测试用例集进行修改是从所述基准测试用例集中删除测试用例,则通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集包括:将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率小于所述基准覆盖率,则直接将所述基准测试用例集作为确定的测试用例集;否则,将所述修改后的测试用例集作为确定的测试用例集。
根据本发明实施例的另一方面,提供了一种测试用例的处理装置。
一种测试用例的处理装置,包括:文件处理模块,用于使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;第一统计模块,用于使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;第二统计模块,用于对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;比较确定模块,用于通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
可选地,所述第二统计模块还用于:在所述基准测试用例集中新增测试用例和/或从所述基准测试用例集中删除测试用例。
可选地,若对所述基准测试用例集进行修改是在所述基准测试用例集中新增测试用例,则所述比较确定模块还用于:将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率大于所述基准覆盖率,则将所述修改后的测试用例集作为确定的测试用例集;否则,直接将所述基准测试用例集作为确定的测试用例集。
可选地,若对所述基准测试用例集进行修改是从所述基准测试用例集中删除测试用例,则所述比较确定模块还用于:将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率小于所述基准覆盖率,则直接将所述基准测试用例集作为确定的测试用例集;否则,将所述修改后的测试用例集作为确定的测试用例集。
根据本发明实施例的又一方面,提供了一种测试用例的处理电子设备。
一种测试用例的处理电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例所提供的测试用例的处理方法。
根据本发明实施例的再一方面,提供了一种计算机可读介质。
一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例所提供的测试用例的处理方法。
上述发明中的一个实施例具有如下优点或有益效果:通过使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对处理后的测试应用文件进行测试并统计基准覆盖率;对基准测试用例集进行修改,然后,使用修改后的测试用例集对处理后的测试应用文件进行测试并统计修改覆盖率;通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集,可以精准的筛选测试用例,不会出现对测试用例新增、删除错误的情况,从而能够合理的控制测试用例数量,科学的优化测试用例,提高了后续的测试用例执行测试、测试回归测试的效率。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明实施例的测试用例的处理方法的主要步骤示意图;
图2是本发明实施例的实现原理示意图;
图3是本发明一个实施例的测试应用的模块结构示意图;
图4是本发明一个实施例的测试用例的优化过程原理示意图;
图5是本发明实施例的测试原理示意图;
图6是根据本发明实施例的测试用例的处理装置的主要模块示意图;
图7是本发明实施例可以应用于其中的示例性系统架构图;
图8是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
通过本发明的测试用例的处理方法,可以精准的筛选测试用例,不会出现对测试用例新增或删除错误等情况,能够合理的控制测试用例数量,能够通过本方法科学地优化测试用例,对后续的测试用例执行测试、测试回归测试具有很好的指导意义。
图1是根据本发明实施例的测试用例的处理方法的主要步骤示意图。如图1所示,本发明实施例的测试用例的处理方法主要包括如下的步骤S101至步骤S104。
步骤S101:使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;
步骤S102:使用基准测试用例集对处理后的测试应用文件进行测试并统计基准覆盖率;
步骤S103:对基准测试用例集进行修改,然后,使用修改后的测试用例集对处理后的测试应用文件进行测试并统计修改覆盖率;
步骤S104:通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集。
在本发明的实施例中,覆盖率测试工具例如是jacoco(Java Code Coverage),是开源的Java代码覆盖率测试库。通过执行测试用例即可测试应用的功能。在进行覆盖率测试之前,需要先对要测试的应用进行插桩处理,jacoco在字节编码时使用ASM(是一个Java字节码操控框架)技术修改字节码方法,可以修改Java归档文件Jar文件、类class文件字节码文件,从而生成插过桩的文件包(包括类class包或Java归档文件jar包),通过使用测试用例测试插过桩的文件包即可生成测试用例的覆盖信息文件。其中,插桩可以简单理解为打标记,使用jacoco对应用A处理后,生成了带有jacoco标记的新的应用B,其中,A与B在功能上是完全一致的。由于应用B是被jacoco处理过的应用,在测试完成后,覆盖率测试工具jacoco会自动生成代码覆盖信息文件,并生成代码覆盖情况报告。
覆盖率测试工具jacoco通过对插过桩的测试应用文件进行监听即可获取测试用例的覆盖信息文件。根据本发明的技术方案,首先,通过覆盖率测试工具jacoco对测试应用文件进行监听,执行基准测试用例集(指的是初始的待处理的测试用例集合)中的每个测试用例,然后记录基准测试用例集对应的覆盖率为基准覆盖率。
之后,即可对基准测试用例集进行修改,根据本发明的一个实施例,对基准测试用例集进行修改主要包括在基准测试用例集中新增测试用例和/或从基准测试用例集中删除测试用例。然后,通过覆盖测试工具jacoco获取到修改后的测试用例集的覆盖信息文件,从而分析修改后的测试用例集对应的修改覆盖率。
根据本发明的其中一个实施例,若对基准测试用例集进行修改是在基准测试用例集中新增测试用例,则步骤S104中,通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集具体可以包括:
将基准覆盖率与修改覆盖率进行比较,若修改覆盖率大于基准覆盖率,则将修改后的测试用例集作为确定的测试用例集;
否则,直接将基准测试用例集作为确定的测试用例集。
由于在基准测试用例集中新增测试用例后,修改后的测试用例集对应的修改覆盖率必然是增加或不变,故而,若修改覆盖率大于基准覆盖率,则说明新增该测试用例后,修改后的测试用例集的覆盖率增加,覆盖更全面,故此时即可将该新增的测试用例添加答基准测试用例集中,即:将新增了测试用例的修改后的测试用例集作为确定的测试用例集。否则,若修改后的测试用例集对应的修改覆盖率与基准覆盖率相等,即覆盖率不变,则说明该新增的测试用例的功能已被基准测试用例集中的测试用例实现了,若再增加该测试用例则会造成冗余,增加工作量,故此时无需增加该测试用例,直接将基准测试用例集作为确定的测试用例集。
根据本发明的另一个实施例,若对基准测试用例集进行修改是从基准测试用例集中删除测试用例,则步骤S104中,通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集具体可以包括:
将基准覆盖率与修改覆盖率进行比较,若修改覆盖率小于基准覆盖率,则直接将基准测试用例集作为确定的测试用例集;
否则,将修改后的测试用例集作为确定的测试用例集。
由于在从基准测试集中删除测试用例后,修改后的测试用例集对应的修改覆盖率比如是减少或不变,故而,若修改覆盖率小于基准覆盖率,则说明删除该测试用例后,修改后的测试用例集的覆盖率减少,可能会造成测试漏测,产生线上问题,故此时不可删除该测试用例,将基准测试用例集作为确定的测试用例集。否则,若修改覆盖率与基准覆盖率相等,即覆盖率不变,则说明该删除的测试用例为冗余或重复的测试用例,故此时即可将该测试用例删除,以减少不必要的测试工作量,将删除了该测试用例的修改后的测试用例作为确定的测试用例集。
图2是本发明实施例的实现原理示意图。如图2所示,本发明的实施例在实现时具体可分为应用层、工具层和用户层3个层次,首先,由用户层执行测试用例集(包括基准测试用例集和修改后的测试用例集)来对应用层的测试应用进行测试,其中,测试应用已被覆盖率测试工具jacoco进行插桩处理,并且,覆盖率测试工具jacoco时刻监听测试应用的覆盖率数据。然后,用户层根据获取的测试应用的覆盖率数据来进行覆盖率分析,并生成覆盖率测试报告,并通过应用层来展示该覆盖率测试报告。覆盖率测试工具jacoco在监听到测试应用的覆盖率数据后,还可以将监听到的覆盖率数据写入应用的可扩展标记语言XML(Extensible Markup Language)文件中,以便后续进行读取或进一步处理。
覆盖率测试工具jacoco在统计测试用例的覆盖率时,是通过在被测试的应用中插桩,若执行到对应代码行则行覆盖值会增加1;同样地,还可以根据测试应用的代码结构进行判断,例如:若执行到一个代码分支,则对应的代码分支覆盖值会增加1,若执行到一个方法或函数,则对应的方法或函数的覆盖率会增减1,等等。在进行测试用例的覆盖率统计时,常用的覆盖率测试工具例如包括cobertura、emma、jacoco等等,可根据需要进行灵活选取。
图3是本发明一个实施例的测试应用的模块结构示意图。如图3所示,在本发明的一个实施例中,测试应用主要包括7个功能模块,其中,模块A是一个判定选择模块,根据所满足的条件不同,会执行模块A-B-C-D这个功能分支,或者执行模块A-E-F这个功能分支。根据测试过程中所执行的模块分支包括的代码行数,以及未执行的模块分支包括的代码行数来计算覆盖率。
若某个测试用例执行后,其仅覆盖了模块A-B-C-D这个功能分支,则需要增加测试用例以覆盖模块A-E-F这个功能分支;若在测试用例集中,有多个测试用例均仅覆盖了模块A-B-C-D这个功能分支,则需要进行重复测试用例的删除。
图4是本发明一个实施例的测试用例的优化过程原理示意图。根据本发明的技术方案,在进行测试用例的删除时,其主要实现原理是将功能重复的测试用例进行去重。如图4,对于测试应用来说,假设基准测试用例集中包括测试用例1、测试用例2和测试用例3,依次执行每个测试用例,并检测基准测试用例集在每个测试用例执行完后对测试应用的覆盖率。在该实施例中,覆盖率以行覆盖值为例。
假设测试用例1执行后得到的行覆盖值为100;此时再增加执行测试用例2,得到的行覆盖值即为测试用例1对测试应用的行覆盖信息与测试用例2对测试应用的行覆盖信息的去重和累加,仍为100,则说明测试用例2的功能已可以完全由测试用例1来实现,故可删除测试用例2;之后,再增加执行测试用例3,得到的行覆盖值即为测试用例1、测试用例2和测试用例3对测试应用的行覆盖信息的去重和累加,此时为105,则说明测试用例3的功能未能完全由测试用例1和测试用例2来实现,故而,需保留测试用例3。执行完毕后,可以得到测试用例集包括测试用例1和测试用例3。
图5是本发明实施例的测试原理示意图。如图5所示,在进行测试用例的处理之前,数据库中保存了全量的测试用例;在进行测试用例对测试应用代码的覆盖率测试时,通过覆盖率测试工具jacoco对测试应用进行监听以得到覆盖率信息;然后,根据覆盖率信息对测试用例进行处理,如新增、删除等;重复执行上述过程,最后,使得数据库中仅保存测试应用的有效测试用例,从而达到了提高测试效率的效果。
图6是根据本发明实施例的测试用例的处理装置的主要模块示意图。如图6所示,本发明实施例的测试用例的处理装置600主要包括文件处理模块601、第一统计模块602、第二统计模块603和比较确定模块604。
文件处理模块601,用于使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;
第一统计模块602,用于使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;
第二统计模块603,用于对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;
比较确定模块604,用于通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
根据本发明的一个实施例,第二统计模块603还可以用于:
在所述基准测试用例集中新增测试用例和/或从所述基准测试用例集中删除测试用例。
根据本发明的一个实施例,若对所述基准测试用例集进行修改是在所述基准测试用例集中新增测试用例,则比较确定模块604还可以用于:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率大于所述基准覆盖率,则将所述修改后的测试用例集作为确定的测试用例集;
否则,直接将所述基准测试用例集作为确定的测试用例集。
根据本发明的另一个实施例,若对所述基准测试用例集进行修改是从所述基准测试用例集中删除测试用例,则比较确定模块604还可以用于:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率小于所述基准覆盖率,则直接将所述基准测试用例集作为确定的测试用例集;
否则,将所述修改后的测试用例集作为确定的测试用例集。
根据本发明实施例的技术方案,通过使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对处理后的测试应用文件进行测试并统计基准覆盖率;对基准测试用例集进行修改,然后,使用修改后的测试用例集对处理后的测试应用文件进行测试并统计修改覆盖率;通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集,可以精准的筛选测试用例,不会出现对测试用例新增、删除错误的情况,从而能够合理的控制测试用例数量,科学的优化测试用例,提高了后续的测试用例执行测试、测试回归测试的效率。
图7示出了可以应用本发明实施例的测试用例的处理方法或测试用例的处理装置的示例性系统架构700。
如图7所示,系统架构700可以包括终端设备701、702、703,网络704和服务器705。网络704用以在终端设备701、702、703和服务器705之间提供通信链路的介质。网络704可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备701、702、703通过网络704与服务器705交互,以接收或发送消息等。终端设备701、702、703上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。
终端设备701、702、703可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器705可以是提供各种服务的服务器,例如对用户利用终端设备701、702、703所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理,并将处理结果(例如目标推送信息、产品信息--仅为示例)反馈给终端设备。
需要说明的是,本发明实施例所提供的测试用例的处理方法一般由服务器705执行,相应地,测试用例的处理装置一般设置于服务器705中。
应该理解,图7中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
下面参考图8,其示出了适于用来实现本发明实施例的终端设备或服务器的计算机系统800的结构示意图。图8示出的终端设备或服务器仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示,计算机系统800包括中央处理单元(CPU)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储部分808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有系统800操作所需的各种程序和数据。CPU 801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
以下部件连接至I/O接口805:包括键盘、鼠标等的输入部分806;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分807;包括硬盘等的存储部分808;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至I/O接口805。可拆卸介质811,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器810上,以便于从其上读出的计算机程序根据需要被安装入存储部分808。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分809从网络上被下载和安装,和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(CPU)801执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,例如,可以描述为:一种处理器包括文件处理模块、第一统计模块、第二统计模块和比较确定模块。其中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定,例如,文件处理模块还可以被描述为“用于使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
根据本发明实施例的技术方案,通过使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;使用基准测试用例集对处理后的测试应用文件进行测试并统计基准覆盖率;对基准测试用例集进行修改,然后,使用修改后的测试用例集对处理后的测试应用文件进行测试并统计修改覆盖率;通过将基准覆盖率与修改覆盖率进行比较以确定测试用例集,可以精准的筛选测试用例,不会出现对测试用例新增、删除错误的情况,从而能够合理的控制测试用例数量,科学的优化测试用例,提高了后续的测试用例执行测试、测试回归测试的效率。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (10)
1.一种测试用例的处理方法,其特征在于,包括:
使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;
使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;
对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;
通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
2.根据权利要求1所述的方法,其特征在于,对所述基准测试用例集进行修改包括:
在所述基准测试用例集中新增测试用例和/或从所述基准测试用例集中删除测试用例。
3.根据权利要求2所述的方法,其特征在于,若对所述基准测试用例集进行修改是在所述基准测试用例集中新增测试用例,则通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集包括:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率大于所述基准覆盖率,则将所述修改后的测试用例集作为确定的测试用例集;
否则,直接将所述基准测试用例集作为确定的测试用例集。
4.根据权利要求2所述的方法,其特征在于,若对所述基准测试用例集进行修改是从所述基准测试用例集中删除测试用例,则通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集包括:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率小于所述基准覆盖率,则直接将所述基准测试用例集作为确定的测试用例集;
否则,将所述修改后的测试用例集作为确定的测试用例集。
5.一种测试用例的处理装置,其特征在于,包括:
文件处理模块,用于使用覆盖率测试工具对测试应用进行处理以得到处理后的测试应用文件;
第一统计模块,用于使用基准测试用例集对所述处理后的测试应用文件进行测试并统计基准覆盖率;
第二统计模块,用于对所述基准测试用例集进行修改,然后,使用修改后的测试用例集对所述处理后的测试应用文件进行测试并统计修改覆盖率;
比较确定模块,用于通过将所述基准覆盖率与所述修改覆盖率进行比较以确定测试用例集。
6.根据权利要求5所述的装置,其特征在于,所述第二统计模块还用于:
在所述基准测试用例集中新增测试用例和/或从所述基准测试用例集中删除测试用例。
7.根据权利要求6所述的装置,其特征在于,若对所述基准测试用例集进行修改是在所述基准测试用例集中新增测试用例,则所述比较确定模块还用于:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率大于所述基准覆盖率,则将所述修改后的测试用例集作为确定的测试用例集;
否则,直接将所述基准测试用例集作为确定的测试用例集。
8.根据权利要求6所述的装置,其特征在于,若对所述基准测试用例集进行修改是从所述基准测试用例集中删除测试用例,则所述比较确定模块还用于:
将所述基准覆盖率与所述修改覆盖率进行比较,若所述修改覆盖率小于所述基准覆盖率,则直接将所述基准测试用例集作为确定的测试用例集;
否则,将所述修改后的测试用例集作为确定的测试用例集。
9.一种测试用例的处理电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-4中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-4中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010084764.9A CN113254325A (zh) | 2020-02-10 | 2020-02-10 | 测试用例的处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010084764.9A CN113254325A (zh) | 2020-02-10 | 2020-02-10 | 测试用例的处理方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113254325A true CN113254325A (zh) | 2021-08-13 |
Family
ID=77219367
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010084764.9A Pending CN113254325A (zh) | 2020-02-10 | 2020-02-10 | 测试用例的处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113254325A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114676068A (zh) * | 2022-05-30 | 2022-06-28 | 云账户技术(天津)有限公司 | 代码覆盖率统计方法、系统、网络设备和存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6212667B1 (en) * | 1998-07-30 | 2001-04-03 | International Business Machines Corporation | Integrated circuit test coverage evaluation and adjustment mechanism and method |
US20030093716A1 (en) * | 2001-11-13 | 2003-05-15 | International Business Machines Corporation | Method and apparatus for collecting persistent coverage data across software versions |
CN102176200A (zh) * | 2009-09-25 | 2011-09-07 | 南京航空航天大学 | 一种软件测试用例自动生成方法 |
CN102915271A (zh) * | 2012-10-31 | 2013-02-06 | 北京邮电大学 | 基于控制流图的单元回归测试用例集合优化方法 |
CN105260534A (zh) * | 2015-10-10 | 2016-01-20 | 浪潮(北京)电子信息产业有限公司 | 用于超大规模芯片验证的回归测试用例维护方法及系统 |
CN106407102A (zh) * | 2015-08-03 | 2017-02-15 | 腾讯科技(深圳)有限公司 | 应用程序的模糊测试方法、装置及系统 |
CN106649075A (zh) * | 2015-10-30 | 2017-05-10 | 西门子公司 | 模糊测试方法和装置 |
CN106681912A (zh) * | 2016-12-08 | 2017-05-17 | 武汉斗鱼网络科技有限公司 | 用于Android系统的代码覆盖率的自动化测试方法及装置 |
CN110069414A (zh) * | 2019-04-25 | 2019-07-30 | 浙江吉利控股集团有限公司 | 回归测试方法及系统 |
-
2020
- 2020-02-10 CN CN202010084764.9A patent/CN113254325A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6212667B1 (en) * | 1998-07-30 | 2001-04-03 | International Business Machines Corporation | Integrated circuit test coverage evaluation and adjustment mechanism and method |
US20030093716A1 (en) * | 2001-11-13 | 2003-05-15 | International Business Machines Corporation | Method and apparatus for collecting persistent coverage data across software versions |
CN102176200A (zh) * | 2009-09-25 | 2011-09-07 | 南京航空航天大学 | 一种软件测试用例自动生成方法 |
CN102915271A (zh) * | 2012-10-31 | 2013-02-06 | 北京邮电大学 | 基于控制流图的单元回归测试用例集合优化方法 |
CN106407102A (zh) * | 2015-08-03 | 2017-02-15 | 腾讯科技(深圳)有限公司 | 应用程序的模糊测试方法、装置及系统 |
CN105260534A (zh) * | 2015-10-10 | 2016-01-20 | 浪潮(北京)电子信息产业有限公司 | 用于超大规模芯片验证的回归测试用例维护方法及系统 |
CN106649075A (zh) * | 2015-10-30 | 2017-05-10 | 西门子公司 | 模糊测试方法和装置 |
CN106681912A (zh) * | 2016-12-08 | 2017-05-17 | 武汉斗鱼网络科技有限公司 | 用于Android系统的代码覆盖率的自动化测试方法及装置 |
CN110069414A (zh) * | 2019-04-25 | 2019-07-30 | 浙江吉利控股集团有限公司 | 回归测试方法及系统 |
Non-Patent Citations (3)
Title |
---|
于嘉维;贲可荣;: "ALL-Uses覆盖引导的回归测试用例生成方法", 计算机工程与科学, no. 12, 15 December 2017 (2017-12-15) * |
华丽;李晓月;王成勇;谷琼;: "能提高错误检测能力的回归测试用例集约简", 湖南科技大学学报(自然科学版), no. 02, 20 June 2015 (2015-06-20) * |
尹文洁: "测试用例约简方法的研究与应用", 中国优秀硕士学位论文全文数据库信息科技辑, vol. 2011, no. 08, 15 August 2011 (2011-08-15) * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114676068A (zh) * | 2022-05-30 | 2022-06-28 | 云账户技术(天津)有限公司 | 代码覆盖率统计方法、系统、网络设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107341098B (zh) | 软件性能测试方法、平台、设备及存储介质 | |
CN109002395B (zh) | 一种代码覆盖率管理方法和装置 | |
CN111190888A (zh) | 一种管理图数据库集群的方法和装置 | |
CN111400061A (zh) | 一种数据处理方法和系统 | |
US20180032387A1 (en) | Predictive Analytics on Database Wait Events | |
US20160224400A1 (en) | Automatic root cause analysis for distributed business transaction | |
CN113326247B (zh) | 云端数据的迁移方法、装置及电子设备 | |
CN110874307A (zh) | 事件埋点的收集上报方法和装置 | |
CN112445691B (zh) | 非侵入式智能合约性能检测方法和装置 | |
CN112559024A (zh) | 一种生成交易码变更列表的方法和装置 | |
CN110866031B (zh) | 数据库访问路径的优化方法、装置、计算设备以及介质 | |
CN113254325A (zh) | 测试用例的处理方法和装置 | |
CN112860538A (zh) | 基于线上日志进行接口回归测试的方法和装置 | |
CN113468218A (zh) | 一种对数据库慢sql进行监测和管理的方法和装置 | |
CN112988560A (zh) | 测试系统健壮性的方法和装置 | |
CN113360182A (zh) | 系统性能诊断的方法和装置 | |
CN112579428A (zh) | 接口测试的方法、装置、电子设备和存储介质 | |
CN113778777A (zh) | 一种日志回放方法和装置 | |
CN111176982A (zh) | 一种测试界面生成方法和装置 | |
CN113360368B (zh) | 一种软件性能测试的方法和装置 | |
CN112749078B (zh) | 一种埋点测试方法和装置 | |
CN117130945B (zh) | 一种测试方法和装置 | |
CN113760765B (zh) | 代码测试方法、装置、电子设备和存储介质 | |
CN113326188A (zh) | 一种浏览器测试方法和装置 | |
CN111290939A (zh) | 一种业务分析的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |