CN111966601A - 一种基于标签的自动化测试用例执行方法 - Google Patents
一种基于标签的自动化测试用例执行方法 Download PDFInfo
- Publication number
- CN111966601A CN111966601A CN202010920757.8A CN202010920757A CN111966601A CN 111966601 A CN111966601 A CN 111966601A CN 202010920757 A CN202010920757 A CN 202010920757A CN 111966601 A CN111966601 A CN 111966601A
- Authority
- CN
- China
- Prior art keywords
- label
- test
- equipment
- test case
- execution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 135
- 238000000034 method Methods 0.000 title claims abstract description 27
- 239000013598 vector Substances 0.000 claims description 27
- 238000004458 analytical method Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 claims description 7
- 238000012216 screening Methods 0.000 claims description 6
- 238000010276 construction Methods 0.000 claims description 3
- 230000007547 defect Effects 0.000 description 2
- 238000013522 software testing Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Abstract
本发明公开了一种基于标签的自动化测试用例执行方法，包括如下步骤：测试用例增加资源需求属性，其值为当前测试用例的若干个资源需求项，添加时优先从总的标签列表中选择；测试设备增加资源能力属性，其值为当前测试设备具备的若干个资源能力项，添加时从总的标签列表中选择；通过比较测试用例资源需求属性和测试设备的资源能力属性来判断当前测试设备是否满足当前测试用例，本发明提出一种基于标签的自动化用例执行方法，目的是解决测试设备不满足导致自动化用例执行失败的问题。相比现有技术，本方法能更好地满足测试用例对资源的多样性、变化性需求。
Description
技术领域
本发明涉及标签测试技术领域，具体为一种基于标签的自动化测试用例执行方法。
背景技术
当前以云计算、大数据、人工智能为代表的新一代信息技术日新月异，互联网、移动终端和物联网迅猛发展，软件形态多样化，软件规模不断扩大，复杂性与日俱增。为保障软件的功能性、稳定性和安全性，软件测试必不可少。软件测试是在规定的条件下对程序进行操作，以发现程序错误，衡量软件质量，并对其是否能满足设计要求进行评估的过程。对应着软件规模的扩大，测试用例的数量也在不断增长。为提升测试效率，满足测试质量要求，自动化测试占比不断增高。
在软件版本研发过程中，一般需要进行若干轮次的自动化测试，每次自动化测试都需要对执行失败的用例进行分析，挖掘失败版本缺陷导致的执行失败。但是失败用例中一般都有部分用例是由于测试设备不满足用例要求而导致失败的，甚至在某些阶段、某些情况下因测试设备不满足导致的失败占比很高，可达90％以上。
对这些因测试设备不满足导致的失败用例进行分析，不能挖掘出版本缺陷，没有最终的价值，而且还消耗了用例执行时间、浪费了失败用例分析时间。
发明内容
本发明的目的在于提供一种基于标签的自动化测试用例执行方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种基于标签的自动化测试用例执行方法,包括如下步骤：
测试用例增加资源需求属性，其值为当前测试用例的若干个资源需求项，；
测试设备增加资源能力属性，其值为当前测试设备具备的若干个资源能力项；
通过比较测试用例资源需求属性和测试设备的资源能力属性来判断当前测试设备是否满足当前测试用例。
优选的，其中，标签表示某个资源需求或资源能力项，硬件相关的或软件相关的。
优选的，测试设备增加执行优先级属性，用于在执行中排序。
优选的，任务启动后，先按测试设备遍历，再遍历测试用例集；
多个测试设备，按设备优先级排序；然后对排序好的测试设备，依次选择为当前设备；对当前设备，遍历测试用例集，筛选出当前设备的执行用例集，并从总的测试用例集中删除；
对下一个设备，按照相同方法筛选出执行用例集，直到遍历完全部设备。
优选的，选择一组测试用例，通过分析全部资源需求标签，给出执行设备建议，用于指导测试设备搭建。
优选的，定义一个测试用例的全部标签为标签向量；
首先取全部标签向量的合集，记为A，显然具有A的设备，其用例满足度为100％，简单记为(A,100％)；
遍历全部标签向量，求具有该标签向量及其子集的全部用例数，除以总用例数，即为该标签向量的百分比；
列出全部标签向量百分比对，即是执行设备建议；
根据全部标签向量百分比对绘制梯形图，更形象化地展示。
优选的，一种标签装置，包括：
标签标记模块，提供测试用例、测试设备、总的标签列表的标签新建、删除、查看等功能；
标签匹配模块，提供测试用例标签和测试设备标签的匹配分析功能；
标签分析模块，提供测试用例标签向量分析功能。
与现有技术相比，本发明的有益效果是：本发明提出一种基于标签的自动化用例执行方法，目的是解决测试设备不满足导致自动化用例执行失败的问题。本发明可以解决或规避自动化测试中因测试设备或测试环境不满足导致的执行失败及其后续的失败分析，能够减少测试人力投入、缩减自动化测试周期、提高测试设备利用率，从而提高整体自动化测试效率。相比现有技术，本方法能更好地满足测试用例对资源的多样性、变化性需求。
附图说明
图1为本发明流程图；
图2为本发明标签装置原理框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要说明的是，术语“上”、“下”、“内”、“外”“前端”、“后端”、“两端”、“一端”、“另一端”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“设置有”、“连接”等，应做广义理解，例如“连接”，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
请参阅图1-2，本发明提供一种技术方案：一种基于标签的自动化测试用例执行方法,包括如下步骤：
测试用例增加资源需求属性，其值为当前测试用例的若干个资源需求项，添加时优先从总的标签列表中选择；
测试设备增加资源能力属性，其值为当前测试设备具备的若干个资源能力项，添加时从总的标签列表中选择；
通过比较测试用例资源需求属性和测试设备的资源能力属性来判断当前测试设备是否满足当前测试用例。
其中，标签表示某个资源需求或资源能力项，硬件相关的或软件相关的。
本发明中，从总的标签列表中选择时进行多选，如果列表中不存在，新建一个标签，或在资源需求属性中选中某个标签删除。
标签的内容，与待测系统有关，以存储系统为例，说明如下：
标签A：有8块硬盘
标签B：加载远程复制license
标签C：有FC主机
标签可以使用中文，也可以使用英文，本发明不做限定，能简洁、清楚地标识资源项即可。
本发明中，总的标签列表中选择时进行多选或在资源能力属性中选中某个标签删除；测试设备增加执行优先级属性，用于在执行中排序。
本发明中，在版本测试时，选择若干个测试用例，再选择数个测试设备，启动测试自动化测试任务；
任务启动后，先按测试设备遍历，再遍历测试用例集；
多个测试设备，按设备优先级排序，或轮选排序、随机排序；然后对排序好的测试设备，依次选择为当前设备；对当前设备，遍历测试用例集，按照技术方案中所述方法判断当前用例是否能在当前设备上执行，筛选出当前设备的执行用例集，并从总的测试用例集中删除；
对下一个设备，按照相同方法筛选出执行用例集，直到遍历完全部设备；
总的测试用例集中剩余的测试用例，即为本次执行的测试环境不满足用例，结果直接标记为“测试环境不满足，本次未执行”；
其他用例下发到相应设备上执行，按照实际执行结果标记成功或失败。
另外，本发明中，选择一组测试用例，通过分析全部资源需求标签，给出执行设备建议，用于指导测试设备搭建。
定义一个测试用例的全部标签为标签向量；
首先取全部标签向量的合集，记为A，显然具有A的设备，其用例满足度为100％，简单记为(A,100％)；
遍历全部标签向量，求具有该标签向量及其子集的全部用例数，除以总用例数，即为该标签向量的百分比；
列出全部标签向量百分比对，即是执行设备建议；
根据全部标签向量百分比对绘制梯形图，更形象化地展示。
具体来说，
假定当前测试用例的资源需求属性为Tu…Tv；
假定当前测试设备的资源能力属性为Tx…Ty；
如果测试用例的标签集合(Tu…Tv)包含于(Tx…Ty)，即测试用例的标签集合是测试设备的标签集合的子集，那么当前测试设备满足当前测试用例；
否则当前测试设备不满足当前测试用例。
此外，本发明还公开了一种标签装置，包括：
标签标记模块，提供测试用例、测试设备、总的标签列表的标签新建、删除、查看等功能；
标签匹配模块，提供测试用例标签和测试设备标签的匹配分析功能；
标签分析模块，提供测试用例标签向量分析功能。
本发明提出一种基于标签的自动化用例执行方法，目的是解决测试设备不满足导致自动化用例执行失败的问题。本发明可以解决或规避自动化测试中因测试设备或测试环境不满足导致的执行失败及其后续的失败分析，能够减少测试人力投入、缩减自动化测试周期、提高测试设备利用率，从而提高整体自动化测试效率。相比现有技术，本方法能更好地满足测试用例对资源的多样性、变化性需求。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
Claims (7)
1.一种基于标签的自动化测试用例执行方法,其特征在于：包括如下步骤：
测试用例增加资源需求属性，其值为当前测试用例的若干个资源需求项，；
测试设备增加资源能力属性，其值为当前测试设备具备的若干个资源能力项；
通过比较测试用例资源需求属性和测试设备的资源能力属性来判断当前测试设备是否满足当前测试用例。
2.根据权利要求1所述的一种基于标签的自动化测试用例执行方法,其特征在于：其中，标签表示某个资源需求或资源能力项，硬件相关的或软件相关的。
3.根据权利要求1所述的一种基于标签的自动化测试用例执行方法，其特征在于：测试设备增加执行优先级属性，用于在执行中排序。
4.根据权利要求1所述的一种基于标签的自动化测试用例执行方法，其特征在于：
任务启动后，先按测试设备遍历，再遍历测试用例集；
多个测试设备，按设备优先级排序；然后对排序好的测试设备，依次选择为当前设备；对当前设备，遍历测试用例集，筛选出当前设备的执行用例集，并从总的测试用例集中删除；
对下一个设备，按照相同方法筛选出执行用例集，直到遍历完全部设备。
5.根据权利要求1所述的一种基于标签的自动化测试用例执行方法，其特征在于：选择一组测试用例，通过分析全部资源需求标签，给出执行设备建议，用于指导测试设备搭建。
6.根据权利要求1所述的一种基于标签的自动化测试用例执行方法，其特征在于：定义一个测试用例的全部标签为标签向量；
首先取全部标签向量的合集，记为A，显然具有A的设备，其用例满足度为100％，简单记为(A,100％)；
遍历全部标签向量，求具有该标签向量及其子集的全部用例数，除以总用例数，即为该标签向量的百分比；
列出全部标签向量百分比对，即是执行设备建议；
根据全部标签向量百分比对绘制梯形图，更形象化地展示。
7.一种标签装置，其特征在于：包括：
标签标记模块，提供测试用例、测试设备、总的标签列表的标签新建、删除、查看等功能；
标签匹配模块，提供测试用例标签和测试设备标签的匹配分析功能；
标签分析模块，提供测试用例标签向量分析功能。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010920757.8A CN111966601B (zh) | 2020-09-04 | 2020-09-04 | 一种基于标签的自动化测试用例执行方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010920757.8A CN111966601B (zh) | 2020-09-04 | 2020-09-04 | 一种基于标签的自动化测试用例执行方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111966601A true CN111966601A (zh) | 2020-11-20 |
| CN111966601B CN111966601B (zh) | 2022-09-20 |
Family
ID=73392116
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010920757.8A Active CN111966601B (zh) | 2020-09-04 | 2020-09-04 | 一种基于标签的自动化测试用例执行方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111966601B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112445708A (zh) * | 2020-11-30 | 2021-03-05 | 统信软件技术有限公司 | 一种压力测试方法、装置及计算设备 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105787364A (zh) * | 2014-12-23 | 2016-07-20 | 深圳市腾讯计算机系统有限公司 | 任务的自动化测试方法、装置及系统 |
| WO2016188077A1 (zh) * | 2015-05-25 | 2016-12-01 | 中兴通讯股份有限公司 | 拷机测试方法及装置 |
-
2020
- 2020-09-04 CN CN202010920757.8A patent/CN111966601B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105787364A (zh) * | 2014-12-23 | 2016-07-20 | 深圳市腾讯计算机系统有限公司 | 任务的自动化测试方法、装置及系统 |
| WO2016188077A1 (zh) * | 2015-05-25 | 2016-12-01 | 中兴通讯股份有限公司 | 拷机测试方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 王庆林等: "基于图聚类的协同标记系统资源个性推荐", 《计算机工程与应用》 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112445708A (zh) * | 2020-11-30 | 2021-03-05 | 统信软件技术有限公司 | 一种压力测试方法、装置及计算设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111966601B (zh) | 2022-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106844217B (zh) | 对应用的控件进行埋点的方法及装置、可读存储介质 | |
| CN108959059B (zh) | 一种测试方法以及测试平台 | |
| CN108108297A (zh) | 自动化测试的方法和装置 | |
| CN108399132A (zh) | 一种调度测试方法、装置及存储介质 | |
| CN108268373A (zh) | 自动化测试用例管理方法、装置、设备及存储介质 | |
| CN113254254B (zh) | 系统故障的根因定位方法、装置、存储介质及电子装置 | |
| CN106326120B (zh) | 一种应用软件的回归测试方法及装置、电子设备 | |
| CN110471945B (zh) | 活跃数据的处理方法、系统、计算机设备和存储介质 | |
| CN113326247B (zh) | 云端数据的迁移方法、装置及电子设备 | |
| CN110554962A (zh) | 回归测试的流程覆盖方法、服务器及计算机可读存储介质 | |
| CN107193730A (zh) | 一种自动化的接口测试方法 | |
| CN110287104A (zh) | 测试用例生成方法、装置、终端及计算机可读存储介质 | |
| CN111966601B (zh) | 一种基于标签的自动化测试用例执行方法 | |
| CN113138927A (zh) | 一种软件功能测试方法和装置 | |
| CN113238930A (zh) | 软件系统的测试方法、装置、终端设备和存储介质 | |
| CN114780438A (zh) | 一种基于k-means算法测试产品的方法、系统、设备和存储介质 | |
| CN110059002A (zh) | 测试数据的生成方法、测试设备、存储介质及装置 | |
| CN111459796B (zh) | 自动化测试方法、装置、计算机设备和存储介质 | |
| CN112506757A (zh) | 自动测试方法、系统、计算机设备及其介质 | |
| CN112559369A (zh) | 一种自动化测试方法、设备和存储介质 | |
| CN114124769B (zh) | 一种基站测试方法、装置、电子设备及存储介质 | |
| CN115705187A (zh) | 项目依赖关系展示方法、装置、终端设备和存储介质 | |
| CN112214201A (zh) | 车机系统底层接口认证的方法、装置、设备及存储介质 | |
| CN110928784A (zh) | 一种软件测试环境监测方法及装置 | |
| CN115810137B (zh) | 一种交互式人工智能技术评测方案的构建方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |