CN115017040A - 测试用例筛选方法、系统、电子设备及存储介质 - Google Patents
测试用例筛选方法、系统、电子设备及存储介质 Download PDFInfo
- Publication number
- CN115017040A CN115017040A CN202210609932.0A CN202210609932A CN115017040A CN 115017040 A CN115017040 A CN 115017040A CN 202210609932 A CN202210609932 A CN 202210609932A CN 115017040 A CN115017040 A CN 115017040A
- Authority
- CN
- China
- Prior art keywords
- test
- priority
- target
- test case
- test cases
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 640
- 238000012216 screening Methods 0.000 title claims abstract description 98
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000002360 preparation method Methods 0.000 claims description 10
- 230000002159 abnormal effect Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000007726 management method Methods 0.000 description 5
- 238000007792 addition Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000012356 Product development Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011049 filling Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3676—Test management for coverage analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请提供了一种测试用例筛选方法、系统、电子设备及存储介质，包括建立测试用例基础库与需求基础库的关联关系；根据项目对应的需求及关联关系，确定测试用例基础库中的待筛选测试用例；根据项目版本选择测试策略；若测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选待筛选测试用例以确定第一目标测试用例；若测试策略为回归测试策略，则根据第二预设规则，筛选待筛选测试用例以确定第二目标测试用例。实现了测试用例和需求的标准化、系统化管理，并通过测试用例和需求的关联关系直观体现出测试用例对各产品需求的覆盖情况；同时，将测试用例的筛选规则程序化，脱离人工，大大提高了测试用例筛选效率以及科学性。
Description
技术领域
本发明涉及测试技术领域，特别涉及一种测试用例筛选方法、系统、电子设备及存储介质。
背景技术
在对一套产品进行开发时通常需要构建跨部门、跨系统的协同合作，因此资源复用成为在产品开发过程中的核心思想，具体到产品的测试验证时要求测试资源在不同的项目之前实现共用，其中就包括了对测试用例的复用。
然而不同的项目涉及到的产品不同，对测试用例的需求也不同；即使是同一产品，该产品在不同的测试阶段对于测试用例的需求也存在差异。因此，现有技术提供了一种筛选方法，在接收到测试任务时，需要根据产品需求及测试用例，手工逐条挑选测试用以；其中，通常由测试负责人根据产品需求并依据个人经验判断用例优先级，并计算总体用例数，挑选尽量符合测试策略的用例以供后续测试使用。但这种方法效率低、耗时长且科学性低；缺乏用例与需求的对应关系，不便于直观判断筛选的用例对于需求的覆盖情况。
因此，亟需一种提高测试用例筛选科学性及效率的方法，以解决现有技术的上述技术问题。
发明内容
为了解决现有技术的不足，本发明的主要目的在于提供一种测试用例筛选方法、系统、电子设备及存储介质，以解决现有技术的上述技术问题。
为了达到上述目的，第一方面本发明提供了一种测试用例筛选方法，所述方法包括：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
在一些实施例中，所述用例优先级包括第一优先级和第二优先级，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例之前，所述方法还包括：
将所述测试用例基础库中的测试用例按照第一优先级划分为多个一级测试用例；
对每一所述一级测试用例按照第二优先级划分为多个二级测试用例。
在一些实施例中，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例，包括：
根据待筛选测试用例数量及所述预设比例，确定第一目标测试用例数量；
按照第一优先级顺序，判断所述待筛选测试用例中最高第一优先级下的一级测试用例的数量是否超过所述第一目标测试用例数量；
若超过，此时将所述最高第一优先级记为目标第一优先级并根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例；
若不超过，则确定所述最高第一优先级下的一级测试用例为第一备选测试用例并添加至所述第一目标测试用例中，以及将第一备选测试用例数量的和所述第一目标测试用例数量的差值作为第一剩余数量，并根据第四预设规则确定所述第一目标测试用例。
在一些实施例中，所述根据第四预设规则确定所述第一目标测试用例，包括：
判断所述最高第一优先级的下一级第一优先级下的一级测试用例的数量是否超过所述第一剩余数量；
若不超过则将所述下一级第一优先级下的一级测试用例添加到所述第一目备选测试用例中，并更新所述第一剩余数量，直至所述下一级第一优先级下的一级测试用例的总数超过所述第一剩余数量，此时将所述下一级第一优先级记为目标第一优先级；
根据所述第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例。
在一些实施例中，所述根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例，包括：
判断所述目标第一优先级的一级测试用例下最高第二优先级对应的二级测试用例数量是否超过所述第一目标测试用例数量；
若超过，则在最高第二优先级下的测试用例中随机挑选与所述第一目标测试用例数量对应的二级测试用例，确定与所述第一目标测试用例数量对应的二级测试用例为第一目标测试用例；
若不超过，则确定所述最高第二优先级下的二级测试用例为第二备选测试用并添加至所述第一目标测试用例中，以及将第二备选测试用例数量的和所述第一目标测试用例数量的差值为第二剩余数量；
判断所述最高优先级的下一级第二优先级下的二级测试用例的数量是否超过所述第二剩余数量；
若不超过则将所述下一级第二优先级下的二级测试用例添加到所述第二目备选测试用例中，并更新所述第二剩余数量，直至所述下一级第二优先级下的二级测试用例的总数超过所述第二剩余数量，此时将所述下一级第二优先级记为目标第二优先级；
确定所述目标第二优先级对应的二级测试用例中随机挑选的与所述第二剩余数量对应的二级测试用例、在所述目标第二优先级前的所有第二优先级对应的二级测试用例以及所述目标第一优先级前的所有第一优先级对应的一级测试用例为所述第一目标测试用例。
在一些实施例中，所述则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例，包括：
根据所述待筛选测试用例的测试结果，在所述测试结果为异常时，将对应的待筛选测试用例中添加bug编号；
根据所述bug编号，筛选所述待筛选测试用例，以确定所述第二目标测试用例。
在一些实施例中，所述建立测试用例基础库与需求基础库的关联关系，包括：
在所述需求基础库中添加需求编号列；
在所述测试用例基础库中添加所述需求编号列以及用例编号列；
基于所述需求编号，建立所述测试用例基础库与所述需求基础库中测试用例和需求的所述关联关系。
第二方面，本申请提供了一种测试用例筛选系统，所述系统包括：
准备模块，用于建立测试用例基础库与需求基础库的关联关系；
所述准备模块，还用于根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
所述准备模块，还用于根据项目版本选择测试策略；
筛选模块，用于在所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则时，筛选所述待筛选测试用例以确定第一目标测试用例；
所述筛选模块，还用于所述测试策略为回归测试策略，则根据第二预设规则时，筛选所述待筛选测试用例以确定第二目标测试用例。
第三方面，本申请提供了一种电子设备，所述电子设备包括：
一个或多个处理器；
以及与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行如下操作：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
第四方面，本申请还提供了一种计算机可读存储介质，所述存储介质上存储计算机程序，所述计算机程序使得计算机执行如下操作：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
本申请实现的有益效果为：
本申请提供了一种测试用例筛选方法、系统、电子设备及存储介质，包括建立测试用例基础库与需求基础库的关联关系；根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；根据项目版本选择测试策略；若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。实现了测试用例和需求的标准化、系统化管理，并通过测试用例和需求的关联关系直观体现出测试用例对各产品需求的覆盖情况；同时，将测试用例的筛选规则程序化，脱离人工，大大提高了测试用例筛选效率以及科学性。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图，其中：
图1是本申请实施例提供的测试系统筛选流程图；
图2是本申请实施例提供的测试用例筛选方法流程图；
图3是本申请实施例提供的测试用例筛选系统结构图；
图4是本申请实施例提供的电子设备结构图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
应当理解，在本申请的描述中，除非上下文明确要求，否则整个说明书和权利要求书中的“包括”、“包含”等类似词语应当解释为包含的含义而不是排他或穷举的含义；也就是说，是“包括但不限于”的含义。
还应当理解，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本申请的描述中，除非另有说明，“多个”的含义是两个或两个以上。
需要注意的是，术语“S1”、“S2”等仅用于步骤的描述目的，并非特别指称次序或顺位的意思，亦非用以限定本申请，其仅仅是为了方便描述本申请的方法，而不能理解为指示步骤的先后顺序。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本申请要求的保护范围之内。
如背景技术所述，现有技术通常基于测试人员的经验对测试用例进行挑选，虽然也能够挑选出符合测试要求的测试用例，但是，其挑选过程时间长，缺乏科学性，与测试负责人强相关；此外由于缺乏用例与需求的关系，对应筛选出的用例无法直接判断其对应测试需求的覆盖情况，需求进一步操作以确定。
为解决上述技术问题，本申请提供了一种系统化、标准化的测试用例筛选方法，通过构建需求与用例的关联关系，并进一步细化用例的优先级，将测试用例挑选规则算法化，实现用例筛选的自动化。
值得注意的是，本申请提供的测试用例筛选方法，适用于IPD(IntegratedProduct Development，集成产品开发)流程下的测试用例筛选，也适用于其他任何对具有优先级的测试用例的测试场景中。
实施例一
为实现本申请提供的测试用例的筛选方法，本申请实施例提供了一种测试系统，具体的，如图1所示，应用本实施例公开的测试系统筛选出符合要求的测试用例的过程包括：
S100、构建测试用例与需求的关联关系。
为了实现能够直观的判断后续筛选出的测试用例对产品需求的覆盖情况，在测试系统构建之初，本申请实施例构建测试用例和需求的关联关系，具体的，上述关联关系的过程包括以下步骤：
对产品的需求进行标准化管理，在将通用模板下的需求分解表中增加需求编号列，作为需求的唯一标识，并导入测试系统中，形成某一个产品线的需求基础库(即标准化需求库)；上述测试系统支持对需求的新增、删除及修改，包括但不限于导入和页面添加两种方式。对产品对应测试用例进行标准化管理，在通用的测试用例模板下的测试用例表中添加用例编号列以及需求编号列，通过添加的需求编号列，构建了测试用例和需求的关系；其中用例编号作为用例的唯一标识。此外，在通用的优先级划分的基础上，增加二级优先级一列。将添加用例编号列和需求编号列后的测试用例表，上传至测试系统形成测试用例基础库(即标准化用例库)，上述测试系统支持对测试用例的新增、删除及修改，包括但不限于导入和页面添加两种方式，此外，上述测试系统还允许动态记录每个迭代版本每个用例的执行情况，便于版本的追溯。。值得注意的是，在上传测试系统之前，需要对按照通用的测试用例模板对测试用例进行设计，编写以及评审，评审通过的测试用例才可以上传到测试系统中作为测试用例基础库。
S200、确定项目对应的待筛选测试用例及测试策略。
在对某一产品线的产品进行测试时，可由产品经理登录测试系统，新建一个项目，测试系统根据该项目需求从标准化需求库中导入上述项目需要覆盖的需求，此时，调用需求与测试用例的关联关系，形成上述项目对应的标准用例库，此时的标准用例库由需要筛选的待筛选测试用例组成。
同时，测试负责人在接收到该产品的测试任务时，登入测试系统，输入测试版本，测试系统根据测试版本确定测试策略，测试策略包括遍历测试策略和回归测试策略。具体的，测试系统获取测试负责人输入的测试版本，若输入的测试版本为第一测试版本，则选择遍历测试策略；若输入的测试版本不是第一测试版本，则选择回归测试策略。
S300、基于不同的测试策略，筛选出符合要求的测试用例。
具体的，如果测试系统选择的测试用例为遍历测试策略时，还需要选择该遍历测试策略是基于功能模块进行遍历还是基于总体进行遍历。其中，基于功能模块遍历适用于包含新开发模块或者功能不稳定模块等版本的测试，选择基于功能模块进行遍历后，测试系统会自动过滤出包含上述项目包含的功能模块，测试负责人仅需要在测试系统中输入各个模块的测试比例；基于总体进行遍历适用于常规的版本迭代，选择这种遍历方法后，测试负责人仅需要输入测试需要覆盖的用例比例即可。
以基于功能模块的遍历测试策略为例，对在这种测试策略下对测试用例进行筛选的过程具体如下：
首先，在优先级的设定上，优选的为了方便操作，可以设定三个一级优先级，记为level1，level2、以及level3，对应正常流、备选流以及异常流；每个一级优先级下分三个二级优先级，记为level1-1，level1-2，level1-3；level2-1，level2-2，level2-3；level3-1，level3-2，level3-3。优先级的确认由工作人员编写并评审，在此，本申请实施例只是提出一种优先级的设定，并不将优先级的设定限制为三个。
测试系统输出项目包含的功能模块，功能模块包括模块A、模块B及模块C等，例如服务器测试项目中，输出的功能模块就是BMC模块(Baseboard Management Controller，基板管理控制器)、BIOS模块(Basic Input Output System，基本输入输出系统)、操作系统模块等；测试负责人输入每个模块的测试用例比例，例如针对模块A，测试负责人输入的测试用例比例为15％，测试系统进行遍历筛选时，先计算模块A对应的测试用例总数以及需要筛选出的第一目标测试用例数，第一目标测试用例数等于模块A测试用例总数乘以15％。
判断模块A中level1对应的测试用例数是否达到第一目标测试用例数，如果level1对应的测试用例数超过第一目标测试用例数，则说明level1对应的测试用例数过多，需要对level1对应的测试用例进行深度过滤。对level1对应的测试用例进行深度过滤的步骤包括：判断level1-1对应的测试用例数是否超过第一目标测试用例数，若level1-1对应的测试用例数超过第一目标测试用例数，则在level1-1对应的测试用例中，随机挑选与第一目标测试用例数量一致的测试用例作为第一目标测试用例。若level1-1对应的测试用例数不超过第一目标测试用例数，则计算剩余用例数(target1)，target1为level1-1对应的测试用例数与第一目标测试用例数的差值。此时，判断level1-2对应的测试用例是否超过target1，若超过，则将level1-1对应的测试用例以及在level1-2对应的测试用例中随机筛选出的与target1一致数量的测试用例作为第一目标测试用例；若不超过，则计算剩余用例数(target2)，target2为第一目标测试用例数减去level1-1对应的测试用例数以及level1-2对应的测试用例数，将level1-1对应的测试用例、level1-2对应的测试用例以及在level1-2对于的测试用例数中随机挑选的与target2一致数量的测试用例为第一目标测试用例。
如果level1对应的测试用例数没有超过第一目标测试用例数，即说明level1对应的测试用例不满足需要筛选出的测试用例数量，因此level1对应的测试用例需要全部作为第一目标测试用例中的一部分，并对level2对应的测试用例进行筛选。计算剩余用例数(target3)，target3为第一目标测试用例数与level1对应的测试用例数的差值。如果level2对应的测试用例数超过target3，则说明需要对level2对应的测试用例进行深度过滤，此时按照上述对level1对应的测试用例的进行深度过滤的步骤一致，在level2对应的测试用例中筛选出与target3一致数量的测试用例；此时第一目标测试用例为level1对应的所有测试用例与在level2对应的测试用例中筛选出的与target3一致数量的测试用例。如果level2对应的测试用例数没有超过target3，即说明level1和level2对应的测试用例总数还是达不到筛选要求即不满足第一目标测试用例所需数量，此时将level1和level2对应的测试用例作为第一目标测试用例的一部分并对level3对应的测试用例进行筛选；此时由于模块A对应的测试用例仅分为level1、level2和level3，因此level3对应的测试用例数必定超过剩余用例数(target4)，target4为第一目标测试用例数与level1和level2对应的测试用例总数的差值，此时对level3对应的测试用例进行深度过滤，其中对level3对应的测试用例进行深度过滤的步骤与上述对level1对应的测试用例的进行深度过滤的步骤一致，本申请再次不做赘述。
按照上述方法，对该项目包含的其他模块对应的测试用例进行筛选，以实现对整个项目需要的测试用例进行自动筛选。此外，基于总体进行遍历的测试策略，与上述方法类似，需要用户输入总体对应的测试用例比例。
如果测试系统选择的测试用例为回归测试策略时，根据测试用例执行后的测试结果及即PASS或者Fail，在测试用例表中，针对对应测试结果为Fail的测试用例的填写bug编号；在回归时，直接根据bug编号筛选出需要执行的测试用例集。
基于本申请实施例公开的测试用例筛选方法，测试系统可以实现对测试用例的自动筛选，提高效率并增加筛选的科学性，同时使得工作人员能够直观的判断产品需要的测试用例覆盖情况。
实施例二
对应上述实施例，本申请提供了一种测试用例筛选方法，如图2所示，所述方法包括：
2100、建立测试用例基础库与需求基础库的关联关系；
优选的，所述建立测试用例基础库与需求基础库的关联关系，包括：
2110、在所述需求基础库中添加需求编号列；
2120、在所述测试用例基础库中添加所述需求编号列以及用例编号列；
2130、基于所述需求编号，建立所述测试用例基础库与所述需求基础库中测试用例和需求的所述关联关系。
2200、根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
2300、根据项目版本选择测试策略；
2400、若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
优选的，所述用例优先级包括第一优先级和第二优先级，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例之前，所述方法还包括：
2410、将所述测试用例基础库中的测试用例按照第一优先级划分为多个一级测试用例；
2420、对每一所述一级测试用例按照第二优先级划分为多个二级测试用例。
优选的，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例，包括：
2430、根据待筛选测试用例数量及所述预设比例，确定第一目标测试用例数量；
2440、按照第一优先级顺序，判断所述待筛选测试用例中最高第一优先级下的一级测试用例的数量是否超过所述第一目标测试用例数量；
2450、若超过，此时将所述最高第一优先级记为目标第一优先级并根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例；
优选的，所述根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例，包括：
2451、判断所述目标第一优先级的一级测试用例下最高第二优先级对应的二级测试用例数量是否超过所述第一目标测试用例数量；
2452、若超过，则在最高第二优先级下的测试用例中随机挑选与所述第一目标测试用例数量对应的二级测试用例，确定与所述第一目标测试用例数量对应的二级测试用例为第一目标测试用例；
2453、若不超过，则确定所述最高第二优先级下的二级测试用例为第二备选测试用并添加至所述第一目标测试用例中，以及将第二备选测试用例数量的和所述第一目标测试用例数量的差值为第二剩余数量；
2454、判断所述最高优先级的下一级第二优先级下的二级测试用例的数量是否超过所述第二剩余数量；
2455、若不超过则将所述下一级第二优先级下的二级测试用例添加到所述第二目备选测试用例中，并更新所述第二剩余数量，直至所述下一级第二优先级下的二级测试用例的总数超过所述第二剩余数量，此时将所述下一级第二优先级记为目标第二优先级；
2456、确定所述目标第二优先级对应的二级测试用例中随机挑选的与所述第二剩余数量对应的二级测试用例、在所述目标第二优先级前的所有第二优先级对应的二级测试用例以及所述目标第一优先级前的所有第一优先级对应的一级测试用例为所述第一目标测试用例。
2460、若不超过，则确定所述最高第一优先级下的一级测试用例为第一备选测试用例并添加至所述第一目标测试用例中，以及将第一备选测试用例数量的和所述第一目标测试用例数量的差值作为第一剩余数量，并根据第四预设规则确定所述第一目标测试用例。
优选的，所述根据第四预设规则确定所述第一目标测试用例，包括：
2461、判断所述最高第一优先级的下一级第一优先级下的一级测试用例的数量是否超过所述第一剩余数量；
2462、若不超过则将所述下一级第一优先级下的一级测试用例添加到所述第一目备选测试用例中，并更新所述第一剩余数量，直至所述下一级第一优先级下的一级测试用例的总数超过所述第一剩余数量，此时将所述下一级第一优先级记为目标第一优先级；
2463、根据所述第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例。
2500、若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
优选的，筛选所述待筛选测试用例以确定第二目标测试用例，包括：
2510、根据所述待筛选测试用例的测试结果，在所述测试结果为异常时，将对应的待筛选测试用例中添加bug编号；
2520、根据所述bug编号，筛选所述待筛选测试用例，以确定所述第二目标测试用例。
实施例三
对应实施例一和实施例二，如图3所示，本申请还提供了一种测试用例筛选系统，所述系统包括：
准备模块310，用于建立测试用例基础库与需求基础库的关联关系；
所述准备模块310，还用于根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
所述准备模块310，还用于根据项目版本选择测试策略；
筛选模块320，用于在所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则时，筛选所述待筛选测试用例以确定第一目标测试用例；
所述筛选模块320，还用于所述测试策略为回归测试策略，则根据第二预设规则时，筛选所述待筛选测试用例以确定第二目标测试用例。
在一些实施例中，所述准备模块310还用于将所述测试用例基础库中的测试用例按照第一优先级划分为多个一级测试用例；所述准备模块310还用于对每一所述一级测试用例按照第二优先级划分为多个二级测试用例。
在一些实施例中，所述筛选模块320还用于根据待筛选测试用例数量及所述预设比例，确定第一目标测试用例数量；所述筛选模块320还用于按照第一优先级顺序，判断所述待筛选测试用例中最高第一优先级下的一级测试用例的数量是否超过所述第一目标测试用例数量；若超过，此时所述筛选模块320还用于将所述最高第一优先级记为目标第一优先级并根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例；若不超过，所述筛选模块320还用于则确定所述最高第一优先级下的一级测试用例为第一备选测试用例并添加至所述第一目标测试用例中，以及将第一备选测试用例数量的和所述第一目标测试用例数量的差值作为第一剩余数量，并根据第四预设规则确定所述第一目标测试用例。
在一些实施例中，所述筛选模块320还用于判断所述最高第一优先级的下一级第一优先级下的一级测试用例的数量是否超过所述第一剩余数量；若不超过则所述筛选模块320还用于将所述下一级第一优先级下的一级测试用例添加到所述第一目备选测试用例中，并更新所述第一剩余数量，直至所述下一级第一优先级下的一级测试用例的总数超过所述第一剩余数量，此时将所述下一级第一优先级记为目标第一优先级；所述筛选模块320还用于根据所述第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例。
在一些实施例中，所述筛选模块320还用于判断所述目标第一优先级的一级测试用例下最高第二优先级对应的二级测试用例数量是否超过所述第一目标测试用例数量；若超过，则所述筛选模块320还用于在最高第二优先级下的测试用例中随机挑选与所述第一目标测试用例数量对应的二级测试用例，确定与所述第一目标测试用例数量对应的二级测试用例为第一目标测试用例；若不超过，则所述筛选模块320还用于确定所述最高第二优先级下的二级测试用例为第二备选测试用并添加至所述第一目标测试用例中，以及将第二备选测试用例数量的和所述第一目标测试用例数量的差值为第二剩余数量；判断所述最高优先级的下一级第二优先级下的二级测试用例的数量是否超过所述第二剩余数量；若不超过则所述筛选模块320还用于将所述下一级第二优先级下的二级测试用例添加到所述第二目备选测试用例中，并更新所述第二剩余数量，直至所述下一级第二优先级下的二级测试用例的总数超过所述第二剩余数量，此时将所述下一级第二优先级记为目标第二优先级；所述筛选模块320还用于确定所述目标第二优先级对应的二级测试用例中随机挑选的与所述第二剩余数量对应的二级测试用例、在所述目标第二优先级前的所有第二优先级对应的二级测试用例以及所述目标第一优先级前的所有第一优先级对应的一级测试用例为所述第一目标测试用例。
在一些实施例中，所述筛选模块320还用于根据所述待筛选测试用例的测试结果，在所述测试结果为异常时，将对应的待筛选测试用例中添加bug编号；所述筛选模块320还用于根据所述bug编号，筛选所述待筛选测试用例，以确定所述第二目标测试用例。
在一些实施例中，所述筛选模块320还用于在所述需求基础库中添加需求编号列；所述筛选模块320还用于在所述测试用例基础库中添加所述需求编号列以及用例编号列；所述筛选模块320还用于基于所述需求编号，建立所述测试用例基础库与所述需求基础库中测试用例和需求的所述关联关系。
实施例四
对应上述所有实施例，本申请实施例提供一种电子设备，包括：
一个或多个处理器；以及与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行如下操作：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
其中，图4示例性的展示出了电子设备的架构，具体可以包括处理器410，视频显示适配器411，磁盘驱动器412，输入/输出接口413，网络接口414，以及存储器420。上述处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414，与存储器420之间可以通过总线430进行通信连接。
其中，处理器410可以采用通用的CPU(Central Processing Unit，中央处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit，ASIC)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本申请所提供的技术方案。
存储器420可以采用ROM(Read Only Memory，可编写存储器)、RAM(Random AccessMemory，随机存取存储器)、静态存储设备，动态存储设备等形式实现。存储器420可以存储用于控制电子设备400执行的操作系统421，用于控制电子设备400的低级别操作的基本输入输出系统(BIOS)422。另外，还可以存储网页浏览器423，数据存储管理系统424，以及图标字体处理系统425等等。上述图标字体处理系统425就可以是本申请实施例中具体实现前述各步骤操作的应用程序。总之，在通过软件或者固件来实现本申请所提供的技术方案时，相关的程序代码保存在存储器420中，并由处理器410来调用执行。
输入/输出接口413用于连接输入/输出模块，以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出)，也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等，输出设备可以包括显示器、扬声器、振动器、指示灯等。
网络接口414用于连接通信模块(图中未示出)，以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信，也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。
总线430包括一通路，在设备的各个组件(例如处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414，与存储器420)之间传输信息。
另外，该电子设备400还可以从虚拟资源对象领取条件信息数据库中获得具体领取条件的信息，以用于进行条件判断，等等。
需要说明的是，尽管上述设备仅示出了处理器410、视频显示适配器411、磁盘驱动器412、输入/输出接口413、网络接口414，存储器420，总线430等，但是在具体实施过程中，该设备还可以包括实现正常执行所必需的其他组件。此外，本领域的技术人员可以理解的是，上述设备中也可以仅包含实现本申请方案所必需的组件，而不必包含图中所示的全部组件。
实施例五
对应上述所有实施例，本申请实施例还提供一种计算机可读存储介质，其特征在于，其存储计算机程序，所述计算机程序使得计算机如下操作：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，云服务端，或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅为本申请的较佳实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。
Claims (10)
1.一种测试用例筛选方法，其特征在于，所述方法包括：
建立测试用例基础库与需求基础库的关联关系；
根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
根据项目版本选择测试策略；
若所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例；
若所述测试策略为回归测试策略，则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例。
2.根据权利要求1所述的方法，其特征在于，所述用例优先级包括第一优先级和第二优先级，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例之前，所述方法还包括：
将所述测试用例基础库中的测试用例按照第一优先级划分为多个一级测试用例；
对每一所述一级测试用例按照第二优先级划分为多个二级测试用例。
3.根据权利要求1所述的方法，其特征在于，所述根据用例优先级、预设比例及第一预设规则，筛选所述待筛选测试用例以确定第一目标测试用例，包括：
根据待筛选测试用例数量及所述预设比例，确定第一目标测试用例数量；
按照第一优先级顺序，判断所述待筛选测试用例中最高第一优先级下的一级测试用例的数量是否超过所述第一目标测试用例数量；
若超过，此时将所述最高第一优先级记为目标第一优先级并根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例；
若不超过，则确定所述最高第一优先级下的一级测试用例为第一备选测试用例并添加至所述第一目标测试用例中，以及将第一备选测试用例数量的和所述第一目标测试用例数量的差值作为第一剩余数量，并根据第四预设规则确定所述第一目标测试用例。
4.根据权利要求3所述的方法，其特征在于，所述根据第四预设规则确定所述第一目标测试用例，包括：
判断所述最高第一优先级的下一级第一优先级下的一级测试用例的数量是否超过所述第一剩余数量；
若不超过则将所述下一级第一优先级下的一级测试用例添加到所述第一目备选测试用例中，并更新所述第一剩余数量，直至所述下一级第一优先级下的一级测试用例的总数超过所述第一剩余数量，此时将所述下一级第一优先级记为目标第一优先级；
根据所述第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例。
5.根据权利要求3所述的方法，其特征在于，所述根据第三预设规则对所述目标第一优先级下的一级测试用例再次筛选，以确定所述第一目标测试用例，包括：
判断所述目标第一优先级的一级测试用例下最高第二优先级对应的二级测试用例数量是否超过所述第一目标测试用例数量；
若超过，则在最高第二优先级下的测试用例中随机挑选与所述第一目标测试用例数量对应的二级测试用例，确定与所述第一目标测试用例数量对应的二级测试用例为第一目标测试用例；
若不超过，则确定所述最高第二优先级下的二级测试用例为第二备选测试用并添加至所述第一目标测试用例中，以及将第二备选测试用例数量的和所述第一目标测试用例数量的差值为第二剩余数量；
判断所述最高优先级的下一级第二优先级下的二级测试用例的数量是否超过所述第二剩余数量；
若不超过则将所述下一级第二优先级下的二级测试用例添加到所述第二目备选测试用例中，并更新所述第二剩余数量，直至所述下一级第二优先级下的二级测试用例的总数超过所述第二剩余数量，此时将所述下一级第二优先级记为目标第二优先级；
确定所述目标第二优先级对应的二级测试用例中随机挑选的与所述第二剩余数量对应的二级测试用例、在所述目标第二优先级前的所有第二优先级对应的二级测试用例以及所述目标第一优先级前的所有第一优先级对应的一级测试用例为所述第一目标测试用例。
6.根据权利要求1所述的方法，所述则根据第二预设规则，筛选所述待筛选测试用例以确定第二目标测试用例，包括：
根据所述待筛选测试用例的测试结果，在所述测试结果为异常时，将对应的待筛选测试用例中添加bug编号；
根据所述bug编号，筛选所述待筛选测试用例，以确定所述第二目标测试用例。
7.根据权利要求1所述的方法，所述建立测试用例基础库与需求基础库的关联关系，包括：
在所述需求基础库中添加需求编号列；
在所述测试用例基础库中添加所述需求编号列以及用例编号列；
基于所述需求编号，建立所述测试用例基础库与所述需求基础库中测试用例和需求的所述关联关系。
8.一种测试用例筛选系统，其特征在于，所述系统包括：
准备模块，用于建立测试用例基础库与需求基础库的关联关系；
所述准备模块，还用于根据项目对应的需求及所述关联关系，确定所述测试用例基础库中的待筛选测试用例；
所述准备模块，还用于根据项目版本选择测试策略；
筛选模块，用于在所述测试策略为遍历测试策略，则根据用例优先级、预设比例及第一预设规则时，筛选所述待筛选测试用例以确定第一目标测试用例；
所述筛选模块，还用于所述测试策略为回归测试策略，则根据第二预设规则时，筛选所述待筛选测试用例以确定第二目标测试用例。
9.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
以及与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令，所述程序指令在被所述一个或多个处理器读取执行时，执行权利要求1-7任一所述方法。
10.一种存储介质，其特征在于，其存储计算机程序，所述计算机程序使得计算机执行权利要求1-7中任一所述方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210609932.0A CN115017040B (zh) | 2022-05-31 | 测试用例筛选方法、系统、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210609932.0A CN115017040B (zh) | 2022-05-31 | 测试用例筛选方法、系统、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115017040A true CN115017040A (zh) | 2022-09-06 |
| CN115017040B CN115017040B (zh) | 2024-10-22 |
Family
ID=
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115687164A (zh) * | 2023-01-05 | 2023-02-03 | 中汽智联技术有限公司 | 测试用例泛化筛选方法、设备和存储介质 |
| CN116662210A (zh) * | 2023-07-28 | 2023-08-29 | 杭州罗莱迪思科技股份有限公司 | 一种接口回归测试方法、装置及应用 |
| CN117435514A (zh) * | 2023-12-21 | 2024-01-23 | 杭州罗莱迪思科技股份有限公司 | 冒烟测试用例抽取方法 |
| CN118093433A (zh) * | 2024-04-16 | 2024-05-28 | 北京安博通科技股份有限公司 | 一种针对流量产品的策略自动测试方法及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016188170A1 (zh) * | 2015-10-22 | 2016-12-01 | 中兴通讯股份有限公司 | 测试方法和装置、设备、计算机存储介质 |
| CN111881037A (zh) * | 2020-07-23 | 2020-11-03 | 云账户技术(天津)有限公司 | 测试用例的管理方法、装置和电子设备 |
| CN112069073A (zh) * | 2020-09-07 | 2020-12-11 | 深圳创维－Rgb电子有限公司 | 测试用例的管理方法、终端和存储介质 |
| CN114490404A (zh) * | 2022-02-10 | 2022-05-13 | 中国农业银行股份有限公司 | 一种测试用例确定方法、装置、电子设备及存储介质 |
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016188170A1 (zh) * | 2015-10-22 | 2016-12-01 | 中兴通讯股份有限公司 | 测试方法和装置、设备、计算机存储介质 |
| CN111881037A (zh) * | 2020-07-23 | 2020-11-03 | 云账户技术(天津)有限公司 | 测试用例的管理方法、装置和电子设备 |
| CN112069073A (zh) * | 2020-09-07 | 2020-12-11 | 深圳创维－Rgb电子有限公司 | 测试用例的管理方法、终端和存储介质 |
| CN114490404A (zh) * | 2022-02-10 | 2022-05-13 | 中国农业银行股份有限公司 | 一种测试用例确定方法、装置、电子设备及存储介质 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115687164A (zh) * | 2023-01-05 | 2023-02-03 | 中汽智联技术有限公司 | 测试用例泛化筛选方法、设备和存储介质 |
| CN115687164B (zh) * | 2023-01-05 | 2023-04-14 | 中汽智联技术有限公司 | 测试用例泛化筛选方法、设备和存储介质 |
| CN116662210A (zh) * | 2023-07-28 | 2023-08-29 | 杭州罗莱迪思科技股份有限公司 | 一种接口回归测试方法、装置及应用 |
| CN116662210B (zh) * | 2023-07-28 | 2023-09-29 | 杭州罗莱迪思科技股份有限公司 | 一种接口回归测试方法、装置及应用 |
| CN117435514A (zh) * | 2023-12-21 | 2024-01-23 | 杭州罗莱迪思科技股份有限公司 | 冒烟测试用例抽取方法 |
| CN117435514B (zh) * | 2023-12-21 | 2024-03-01 | 杭州罗莱迪思科技股份有限公司 | 冒烟测试用例抽取方法 |
| CN118093433A (zh) * | 2024-04-16 | 2024-05-28 | 北京安博通科技股份有限公司 | 一种针对流量产品的策略自动测试方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109302522B (zh) | 测试方法、装置以及计算机系统和介质 | |
| CN106294120B (zh) | 测试代码的方法、设备和计算机程序产品 | |
| US9477581B2 (en) | Integrated system and method for validating the functionality and performance of software applications | |
| CN111651366B (zh) | Sdk测试方法、装置、设备及存储介质 | |
| US9465724B2 (en) | Method, program, and system for generating test cases | |
| US20130326486A1 (en) | Keyword based software testing system and method | |
| CN104834602B (zh) | 一种程序发布方法、装置和程序发布系统 | |
| CN108399132A (zh) | 一种调度测试方法、装置及存储介质 | |
| CN110674047B (zh) | 软件测试方法、装置及电子设备 | |
| CN111274154A (zh) | 一种自动化测试的方法、装置、设备及存储介质 | |
| CN112579455B (zh) | 一种接口自动化测试方法、装置、电子设备及存储介质 | |
| CN112527312B (zh) | 一种嵌入式系统的测试方法和测试装置 | |
| CN113778771A (zh) | 一种终端测试的方法、系统及存储介质 | |
| JP2017045217A (ja) | ログ管理装置、ログ管理方法、およびログ管理プログラム | |
| CN111767218A (zh) | 一种用于持续集成的自动化测试方法、设备及存储介质 | |
| CN115017040B (zh) | 测试用例筛选方法、系统、电子设备及存储介质 | |
| CN115017040A (zh) | 测试用例筛选方法、系统、电子设备及存储介质 | |
| CN115983191A (zh) | 测试点验证方法及相关装置 | |
| CN115827469A (zh) | 项目测试管理方法、系统 | |
| CN109359093A (zh) | 一种规则文件更新方法和系统 | |
| CN113590498B (zh) | 一种桌面操作系统应用启动时间的测试方法及系统 | |
| CN115048107A (zh) | 代码编译方法、系统、电子设备及存储介质 | |
| CN110866492B (zh) | 一种基线分支的识别方法、装置及计算机系统 | |
| CN111090574A (zh) | 一种回归测试方法、装置及存储介质 | |
| JP6890795B1 (ja) | プログラム、方法、情報処理装置、及びシステム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant |