CN105302723B - 测试用例评估方法、装置和计算机可读存储介质 - Google Patents

测试用例评估方法、装置和计算机可读存储介质 Download PDF

Info

Publication number
CN105302723B
CN105302723B CN201510751073.9A CN201510751073A CN105302723B CN 105302723 B CN105302723 B CN 105302723B CN 201510751073 A CN201510751073 A CN 201510751073A CN 105302723 B CN105302723 B CN 105302723B
Authority
CN
China
Prior art keywords
test case
evaluation
case
test
scanning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510751073.9A
Other languages
English (en)
Other versions
CN105302723A (zh
Inventor
齐彩会
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201510751073.9A priority Critical patent/CN105302723B/zh
Publication of CN105302723A publication Critical patent/CN105302723A/zh
Application granted granted Critical
Publication of CN105302723B publication Critical patent/CN105302723B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Storage Device Security (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种测试用例评估方法和装置。所述方法包括：建立用例评估关键字库；针对用例评估类别，从所述评估关键字库中选择一个或多个关键字；使用所选择的一个或多个关键字对测试用例进行遍历扫描；以及根据遍历扫描的结果，对所述测试用例进行评估。

Description

测试用例评估方法、装置和计算机可读存储介质
技术领域
本发明涉及软件测试领域，具体地涉及一种测试用例评估方法和装置。
背景技术
在软件测试领域，测试用例是测试人员必不可少的工具。测试用例将软件测试的行为活动做一个科学化的组织归纳，目的是能够将软件测试的行为转化成可管理的模式。同时，测试用例也是将测试具体量化的方法之一。因此，测试用例的好坏直接影响测试质量。
目前，对于测试用例质量的评估大都是采用用例人工评审的形式进行的，并通过在季度末把测试用例数列入绩效考核来加以管控。但这种方法既不规范也不科学，严重地影响了测试用例质量的评估结果，并给软件的评估效果带来了很大的间接影响。
发明内容
为了解决现有技术中存在的上述问题，本发明提出了一种测试用例评估方法和装置。
根据本发明的一个方面，提出了一种测试用例评估方法，包括：建立用例评估关键字库；针对用例评估类别，从所述评估关键字库中选择一个或多个关键字；使用所选择的一个或多个关键字对测试用例进行遍历扫描；以及根据遍历扫描的结果，对所述测试用例进行评估。
优选地，基于所述评估类别与评估关键字之间的预先建立的映射关系来执行所述选择。
优选地，对所述测试用例进行评估还包括：对每个关键字的扫描结果进行计数，当与用例评估类别相对应的所有关键字的计数之和小于预定阈值时，将所述测试用例评估为针对所述用例评估类别不合格。
优选地，使用所选择的一个或多个关键字对测试用例进行遍历扫描还包括：在测试用例的一部分内容中进行粗略扫描，并使用粗略扫描结果对所述测试用例进行评估；当粗略扫描结果不合格时，在测试用例的全部内容中进行精细扫描，并使用精细扫描的结果对所述测试用例进行评估。
根据本发明的另一方面，提出了一种测试用例评估装置，包括：关键字库建立装置，用于建立用例评估关键字库；选择装置，用于针对用例评估类别从所述评估关键字库中选择一个或多个关键字；扫描装置，用于使用所选择的一个或多个关键字对测试用例进行遍历扫描；以及评估装置，用于根据遍历扫描的结果对所述测试用例进行评估。
根据本发明的另一方面，提出了一种测试用例评估装置，包括：存储器；以及耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器中的指令，执行如上所述的测试用例评估方法。
根据本发明的另一方面，提出了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述指令被处理器执行时实现如上所述的测试用例评估方法。
通过使用本发明所提出的测试用例评估方法和装置，能够解决现有技术中的问题，并能够实现对用例覆盖率的更为准确的评估。
附图说明
图1示出了根据本发明的测试用例评估方法的流程图；
图2示出了根据本发明的测试用例评估装置的结构框图。
具体实施方式
以下参考附图对本发明进行具体描述。
首先，图1示出了根据本发明的测试用例评估方法100的流程图。所述测试用例评估方法100开始于步骤S110，在步骤S110中，建立用例评估关键字库。然后，在步骤S120中，针对用例评估类别，从所述评估关键字库中选择一个或多个关键字。接下来，在步骤S130中，使用所选择的一个或多个关键字对测试用例进行遍历扫描。最后，在步骤S140中，根据遍历扫描的结果，对所述测试用例进行评估。
在步骤S110中，首先建立评估关键字库。所述关键字是指能够反映用例对某一方面性能或质量进行了描述的语言，比如关于用例是否反映了“权限”方面的内容，可以通过用例中是否包括“管理员”、“匿名用户”等词语来进行适当地评估。“管理员”、“匿名用户”等即为所述关键字。与用例质量评估有关的每一种用例评估类别(比如上述“权限”)都涉及至少一个关键字。
在步骤S120中，为用例评估类别指定关键字。针对用户的不同需求或不同评估标准，为同一评估类别指定的关键字可能有所不同。比如，针对同一用例评估类别“权限”，用户A可能为其指定以下关键字：“管理员”、“匿名用户”和“权限”；而用户B则可能为其指定以下关键字：“管理员权限”和“匿名用户权限”。这两组关键字所反映的评估强度是不同的，可以适应不同的评估标准或评估理念。
优选地，可以基于所述评估类别与评估关键字之间的预先建立的映射关系来执行所述选择。
所述评估类别可包括但不限于：功能、接口、异常场景、安全、性能、权限、数据库、基本操作(增、删、改、查等)等。
在步骤S130中，针对所指定的关键字对用例测试进行遍历扫描。这里的扫描可以是完全匹配扫描也可以是部分匹配扫描。完全匹配指的是将与关键字完全匹配的情况列入扫描结果，而部分匹配则是将与关键字的一部分匹配的情况列入扫描结果。
用户还可设置匹配度阈值，将匹配度高于或等于阈值的词语列入扫描结果中。所述匹配度的确定可以是基于语义分析进行的，也可以是通过文字对比实现的。比如，当关键字为“管理员权限”时，如果在用例中只扫描到“管理员”则其不符合完全匹配扫描的要求，但可能符合部分匹配扫描的要求。如果用户设定了60％的扫描匹配度阈值，则当匹配度是按照文字对比实现的时，其匹配度刚好为60％。
最后，在步骤S140中，根据遍历扫描的结果，对所述测试用例进行评估。
优选地，对所述测试用例进行评估还包括：对每个关键字的扫描结果进行计数，当与用例评估类别相对应的所有关键字的计数之和小于预定阈值时，将所述测试用例评估为针对所述用例评估类别不合格。
此外，在一种优选实施例中，使用所选择的一个或多个关键字对测试用例进行遍历扫描还包括：在测试用例的一部分内容中进行粗略扫描，并使用粗略扫描结果对所述测试用例进行评估；当粗略扫描结果不合格时，在测试用例的全部内容中进行精细扫描，并使用精细扫描的结果对所述测试用例进行评估。其中，所述测试用例的一部分内容可以是测试用例的标题和/或摘要。
接下来，图2示出了根据本发明的测试用例评估装置200的结构框图。所述测试用例评估装置200包括关键字库建立装置210、选择装置220、扫描装置230和评估装置240。所述关键字库建立装置210用于建立用例评估关键字库。选择装置220用于针对用例评估类别从所述评估关键字库中选择一个或多个关键字。扫描装置230用于使用所选择的一个或多个关键字对测试用例进行遍历扫描。评估装置240用于根据遍历扫描的结果对所述测试用例进行评估。
该测试用例评估装置200与上述测试用例评估方法100相对应。以上对方法100的具体描述和解释同样适用于装置200，在此不再赘述。
尽管以上已经结合本发明的优选实施例示出了本发明，但是本领域的技术人员将会理解，在不脱离本发明的精神和范围的情况下，可以对本发明进行各种修改、替换和改变。因此，本发明不应由上述实施例来限定，而应由所附权利要求及其等价物来限定。

Claims (6)

1.一种测试用例评估方法，包括：
基于测试用例建立包含关键字的用例评估关键字库；
针对与所述测试用例相关联的用例评估类别，从所述评估关键字库中选择一个或多个关键字；
使用所选择的一个或多个关键字对所述测试用例进行遍历扫描；以及
根据遍历扫描的结果，评估所述测试用例是否为针对所述用例评估类别的合格的测试用例，
其中，评估所述测试用例是否为针对所述用例评估类别的合格的测试用例包括：对每个关键字的扫描结果进行计数，当与用例评估类别相对应的所有关键字的计数之和小于预定阈值时，将所述测试用例评估为针对所述用例评估类别不合格。
2.根据权利要求1所述的方法，其中，基于所述评估类别与评估关键字之间的预先建立的映射关系来执行所述选择。
3.根据权利要求1所述的方法，其中，使用所选择的一个或多个关键字对测试用例进行遍历扫描还包括：
在测试用例的一部分内容中进行粗略扫描，并使用粗略扫描结果对所述测试用例进行评估；
当粗略扫描结果不合格时，在测试用例的全部内容中进行精细扫描，并使用精细扫描的结果对所述测试用例进行评估。
4.一种测试用例评估装置，包括：
关键字库建立装置，用于基于测试用例建立包含关键字的用例评估关键字库；
选择装置，用于针对与所述测试用例相关联的用例评估类别从所述评估关键字库中选择一个或多个关键字；
扫描装置，用于使用所选择的一个或多个关键字对所述测试用例进行遍历扫描；以及
评估装置，用于根据遍历扫描的结果评估所述测试用例是否为针对所述用例评估类别的合格的测试用例，
其中，评估所述测试用例是否为针对所述用例评估类别的合格的测试用例包括：对每个关键字的扫描结果进行计数，当与用例评估类别相对应的所有关键字的计数之和小于预定阈值时，将所述测试用例评估为针对所述用例评估类别不合格。
5.一种测试用例评估装置，包括：
存储器；以及
耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器中的指令，执行如权利要求1至3中任一项所述的测试用例评估方法。
6.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述指令被处理器执行时实现如权利要求1至3中任一项所述的测试用例评估方法。
CN201510751073.9A 2015-11-06 2015-11-06 测试用例评估方法、装置和计算机可读存储介质 Active CN105302723B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510751073.9A CN105302723B (zh) 2015-11-06 2015-11-06 测试用例评估方法、装置和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510751073.9A CN105302723B (zh) 2015-11-06 2015-11-06 测试用例评估方法、装置和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN105302723A CN105302723A (zh) 2016-02-03
CN105302723B true CN105302723B (zh) 2020-07-31

Family

ID=55200012

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510751073.9A Active CN105302723B (zh) 2015-11-06 2015-11-06 测试用例评估方法、装置和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN105302723B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106294182B (zh) * 2016-08-24 2021-02-09 腾讯科技（深圳）有限公司 一种确定众测反馈有效性的方法、测试设备及系统
CN107678972B (zh) * 2017-10-27 2021-03-26 苏州浪潮智能科技有限公司 一种测试用例的评估方法及相关装置
CN107908566A (zh) * 2017-11-27 2018-04-13 平安科技（深圳）有限公司 自动化测试管理方法、装置、终端设备及存储介质
CN109871311B (zh) * 2017-12-04 2022-12-27 北京京东尚科信息技术有限公司 一种推荐测试用例的方法和装置
CN110955588B (zh) * 2018-09-26 2021-10-22 华为技术有限公司 一种测试用例的质量确定方法和装置
CN110806969A (zh) * 2019-09-18 2020-02-18 北京你财富计算机科技有限公司 一种测试用例完整度评估方法、装置及电子设备
CN111563039B (zh) * 2020-04-30 2023-07-21 中国银行股份有限公司 一种工作量估算的方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192194A (zh) * 2007-01-19 2008-06-04 中兴通讯股份有限公司 基于测试用例数据库系统的测试用例设计方法
CN103617117A (zh) * 2013-11-15 2014-03-05 中国航空无线电电子研究所 一种基于航空嵌入式软件测试知识库系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5669630B2 (ja) * 2011-03-04 2015-02-12 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ テスト・ケース生成方法、プログラム及びシステム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192194A (zh) * 2007-01-19 2008-06-04 中兴通讯股份有限公司 基于测试用例数据库系统的测试用例设计方法
CN103617117A (zh) * 2013-11-15 2014-03-05 中国航空无线电电子研究所 一种基于航空嵌入式软件测试知识库系统

Also Published As

Publication number Publication date
CN105302723A (zh) 2016-02-03

Similar Documents

Publication Publication Date Title
CN105302723B (zh) 测试用例评估方法、装置和计算机可读存储介质
US10657282B2 (en) Access controlled graph query spanning
US10303874B2 (en) Malicious code detection method based on community structure analysis
TWI396984B (zh) 使用網路文件的偏擊距離之排序功能
CN110082319A (zh) 定标数据修正方法及其电子设备
KR102490529B1 (ko) 전주기적 비식별화 관리 장치 및 방법
CN109002712B (zh) 一种基于值依赖图的污染数据分析方法、系统与电子设备
CN106650454A (zh) 一种sql注入攻击检测方法和装置
CN110414124B (zh) 一种模型构件文件相似度的分析方法和装置
CN112153375A (zh) 基于视频信息的前端性能测试方法、装置、设备及介质
CN115238247A (zh) 基于零信任数据访问控制系统的数据处理方法
US9037609B1 (en) Method for determining access of queries
SE1051394A1 (sv) A system and method for evaluating a reverse query
CN104598598A (zh) 一种关系型数据标准性的评估方法
US9990369B2 (en) Method and apparatus for scanning files
KR101897395B1 (ko) 사이버전 시나리오 작성 및 유효성 확인을 위한 표준 데이터 기반 보안 취약점 대응 방법 및 시스템
US20160048629A1 (en) Automatic generation of test layouts for testing a design rule checking tool
KR102248993B1 (ko) 비식별화 과정의 중간 결과 데이터 분석 방법, 장치, 컴퓨터 프로그램 및 그 기록 매체
van de Lindt et al. Performance-based seismic design of wood frame buildings using a probabilistic system identification concept
KR101524375B1 (ko) 맞춤 접두 필터링을 이용한 유사도 조인 방법
Sangüesa et al. Preservation of ageing classes in deterioration models with independent increments
CN110569435A (zh) 智能双端推荐引擎系统和方法
CN111831709A (zh) 一种app域名核验方法
CN111309631B (zh) 一种代码审计方法、装置、设备及计算机可读存储介质
Shible et al. Ground‐motion model for hard‐rock sites by correction of surface recordings (Part 2): Correction, mixed‐effects regressions, and results

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant