CN109062817A - 自动化测试方法及系统 - Google Patents
自动化测试方法及系统 Download PDFInfo
- Publication number
- CN109062817A CN109062817A CN201811196734.6A CN201811196734A CN109062817A CN 109062817 A CN109062817 A CN 109062817A CN 201811196734 A CN201811196734 A CN 201811196734A CN 109062817 A CN109062817 A CN 109062817A
- Authority
- CN
- China
- Prior art keywords
- test
- software
- identified
- automatic
- item
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3696—Methods or tools to render software testable
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明实施例涉及软件测试技术领域，公开了一种自动化测试方法及系统。自动化测试方法包括：从用例管理工具中获取待测的软件的至少一测试项；尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试；执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果；统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量；根据计算参数生成软件的测试报告。本发明中，无需人工统计计算参数，从而能够自动生成软件的测试报告，耗时较少；同时，避免了人工统计计算参数的不准确性。
Description
技术领域
本发明实施例涉及软件测试技术领域，特别涉及一种自动化测试方法及系统。
背景技术
目前，软件在发布上线之前需要进行一系列的测试，以保证软件的用户体验。在测试时，测试人员会根据测试的内容生成一个软件质量报告。软件质量报告中包括多个指标，例如自动化测试通过率、自动化测试覆盖率等，软件质量报告为软件能否发布上线提供了至关重要的依据。
发明人发现现有技术中至少存在如下问题：现有技术中需要测试人员手动进行多数据的汇总，以获取计算各个指标的数据来形成软件质量报告，这种人工统计数据的方式耗时较多；同时，人工统计数据的不准确性较高。
发明内容
本发明实施方式的目的在于提供一种自动化测试方法及系统，无需人工统计计算参数，从而能够自动生成软件的测试报告，耗时较少；同时，避免了人工统计计算参数的不准确性。
为解决上述技术问题，本发明的实施方式提供了一种自动化测试方法，应用于自动化测试平台，方法包括：从用例管理工具中获取待测的软件的至少一测试项；尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试；执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果；统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量；根据计算参数生成软件的测试报告。
本发明的实施方式还提供了一种自动化测试系统，包括：自动化测试平台与用例管理工具；用例管理工具用于存储待测的软件的至少一测试项；自动化测试平台用于从例管理工具中获取待测的软件的至少一测试项；自动化测试平台还用于尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试；自动化测试平台还用于执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果；自动化测试平台还用于统计计算参数，并根据计算参数生成软件的测试报告；计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量。
本发明实施方式相对于现有技术而言，在测试时，自动化测试平台从用例管理工具中获取待测的软件的至少一测试项，即，同步用例管理工具中存储的软件的至少一测试项；自动化测试平台尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，自动化测试平台中预存有测试项与自动化脚本的对应关系，从而能够获取被标识需要自动化测试的测试项对应的自动化脚本，在获取成功时，将该测试项标识为已自动化测试，并执行获取成功的测试项对应的自动化脚本，得到各自动化脚本的执行结果；在所有的自动化脚本均执行完毕后，自动统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量，从而能够根据统计的计算参数自动生成软件的测试报告。即，自动化测试平台中同步有软件的测试项，从而无需人工统计计算参数，能够自动生成软件的测试报告，耗时较少；同时，避免了人工统计计算参数的不准确性。
另外，测试项至少包括功能描述与功能描述对应的测试用例；尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试，具体包括：获取被标识为需要自动化测试的测试项包含功能描述，并识别功能描述对应的测试用例；尝试获取被标识为需要自动化测试的测试用例对应的自动化脚本，并在获取成功时，将测试用例以及测试用例对应的测试项标识为已自动化测试。本实施方式提供了测试项的具体内容，以及测试项的标识更新方式。
另外，计算参数还包括：测试用例的总数与被标识为已自动化测试的测试用例的数量。本实施方式中，统计的计算参数还包括测试用例的总数与被标识为已自动化测试的测试用例的数量，以便于在测试报告中加入用例自动化覆盖率的指标。
另外，测试项还包括测试用例的缺陷状态；方法还包括：在从用例管理工具中获取待测的软件的至少一测试项之后，还包括：发出存在缺陷的提示信息；在统计计算参数之前，还包括：从用例管理工具获取至少一测试项对应的测试用例的缺陷状态；计算参数还包括：缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数。本实施方式中，统计的计算参数还包括已关闭的缺陷的数量与缺陷的总数，以便于在测试报告中加入缺陷关闭率的指标。
另外，在将测试用例以及测试用例对应的测试项标识为已自动化测试之后，还包括：将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，以供用例管理工具将测试项与测试用例标识为已自动化测试。本实施方式中，在将测试用例以及测试用例对应的测试项标识为已自动化测试之后，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，从而用例管理工具对应的将测试项与测试用例标识为已自动化测试；因此，从用例管理工具中，也能够查询到自动化测试平台的测试项与测试用例的自动化程度。
另外，在根据计算参数生成软件的测试报告之后，还包括：将包括测试报告的软件发布请求发送至软件发布申请平台，以供软件发布申请平台根据测试报告，判断软件是否符合发布条件。本实施方式中，在生成软件的测试报告之后，将包括测试报告的软件发布请求发送至软件发布申请平台，从而软件发布申请平台能够根据接收到的测试报告，自动判断软件是否符合发布条件。
另外，软件发布申请平台还用于在判定软件符合发布条件时，将软件发布至预设的软件升级平台，以供用户自动进行软件的升级。本实施方式中，实现了软件测试、软件发布以及软件升级的全自动化流程。
另外，测试报告包括以下指标的任意之一或任意组合：自动化测试通过率、功能自动化覆盖率、用例自动化覆盖率以及缺陷关闭率。本实施方式提供了测试报告包括的指标的内容。
另外，自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；用例自动化覆盖率＝被标识为已自动化测试的测试用例的数量/测试用例的总数；缺陷关闭率＝缺陷状态为已关闭的缺陷的数量/存在的缺陷的总数。本实施方式提供了四个指标的具体计算方法。
另外，在尝试获取被标识为需要自动化测试的测试项对应的自动化脚本后，还包括：在获取失败时，开始计时，并发出获取失败的提示信息；在计时结束之前，若接收到被标识为需要自动化测试的测试项对应的自动化脚本，则将测试项的标识为已自动化测试；其中，计时的时长为预设时长。本实施方式中，在尝试获取被标识为需要自动化测试的测试项对应的自动化脚本失败后，开始计时，若在预设时长内接收到测试人员补充的被标记为需要自动化测试的测试项对应自动化脚本，则将测试项标识为已自动化测试。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
图1是根据本发明第一实施方式中的自动化测试方法的具体流程图；
图2是根据本发明第二实施方式中的自动化测试方法的具体流程图；
图3是根据本发明第三实施方式中的自动化测试方法的具体流程图；
图4是根据本发明第四实施方式中的自动化测试方法的具体流程图；
图5是根据本发明第五实施方式中的自动化测试方法的具体流程图；
图6是根据本发明第六实施方式中的自动化测试方法的具体流程图；
图7是根据本发明第七实施方式中的自动化测试系统的方框示意图；
图8是根据本发明第十一实施方式中的自动化测试系统的方框示意图；
图9是根据本发明第十一实施方式中的自动化测试系统的方框示意图，其中自动化测试系统还包括软件升级平台。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的各实施方式进行详细的阐述。然而，本领域的普通技术人员可以理解，在本发明各实施方式中，为了使读者更好地理解本申请而提出了许多技术细节。但是，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。
本发明的第一实施方式涉及一种自动化测试方法，应用于自动化测试平台。
本实施方式的自动化测试方法的具体流程如图1所示。
步骤101，从用例管理工具中获取待测的软件的至少一测试项。
具体而言，用例管理工具中存储有需求号，需求号对应的需求描述，需求对应的测试项，测试项为软件待测试的功能，测试项具有对应的标识，标识分为需要自动化测试与无需自动化测试；用例管理工具与自动化测试平台通过接口或者无线进行通信连接，从而自动化测试平台可以从用例管理工具中获取待测的软件的至少一测试项。需要说明的是，本发明中，从用例管理工具中获取的测试项可以为测试项的简单描述信息，无需获取各测试项的详细信息。
步骤102，尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试。
具体而言，自动化测试平台中预存有多个自动化脚本，以及自动化脚本与测试项的对应关系，自动化测试平台从预存的多个自动化脚本中，尝试为被标识为需要自动化测试的测试项获取对应的自动化脚本，在获取成功时，将该测试项标识为已自动化测试；若获取失败，则说明该测试项虽然被标识为需要自动化测试，但是测试人员尚未在自动化测试平台中为该测试项添加对应的自动化脚本，该测试项无法进行自动化测试。
步骤103，执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果。
具体而言，自动化测试平台自动化部署代码到测试环境，利用自动化工具执行获取成功的测试项对应的自动化脚本，即执行被标识为已自动测试的测试项对应的自动化脚本，并记录所有自动化脚本的执行结果，执行结果包括执行成功与执行失败。
步骤104，统计计算参数。
具体而言，在所有自动化脚本执行结束后，自动化测试平台根据所有测试项的标识以及所有自动化脚本的执行结果，统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量。
步骤105，根据计算参数生成软件的测试报告。
具体而言，根据计算参数可以计算出软件的指标，生成的软件的测试报告包括计算出的指标。本实施例中，根据自动化脚本的总数、执行结果为成功的自动化脚本的数量可以计算出自动化测试通过率，自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；根据获取的测试项的总数、被标识为已自动化测试的测试项的数量可以计算出功能自动化覆盖率，功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；生成的软件的测试报告中至少包括自动化测试通过率与功能自动化覆盖率。
较佳的，自动化测试平台在生成测试报告时，可以从用例管理平台中获取需求号以及需求号对应的需求描述，同时计算各个需求下的自动化测试通过率与功能自动化覆盖率，从而将需求与测试报告关联起来。
本实施方式相对于现有技术而言，在测试时，自动化测试平台从用例管理工具中获取待测的软件的至少一测试项，即，同步用例管理工具中存储的软件的至少一测试项；自动化测试平台尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，自动化测试平台中预存有测试项与自动化脚本的对应关系，从而能够获取被标识需要自动化测试的测试项对应的自动化脚本，在获取成功时，将该测试项标识为已自动化测试，并执行获取成功的测试项对应的自动化脚本，得到各自动化脚本的执行结果；在所有的自动化脚本均执行完毕后，自动统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量，从而能够根据统计的计算参数自动生成软件的测试报告。即，自动化测试平台中同步有软件的测试项，从而无需人工统计计算参数，能够自动生成软件的测试报告，耗时较少；同时，避免了人工统计计算参数的不准确性。
本发明的第二实施方式涉及一种自动化测试方法。第二实施方式是在第一实施方式基础上的改进，主要改进之处在于：计算参数还包括测试用例的总数与被标识为已自动化测试的测试用例的数量；测试项至少包括功能描述与功能描述对应的测试用例。
本实施方式的自动化测试方法的具体流程如图2所示。
步骤201，从用例管理工具中获取待测的软件的至少一测试项。
步骤202，具体包括以下子步骤：
子步骤2021，获取被标识为需要自动化测试的测试项包含功能描述，并识别功能描述对应的测试用例。
具体而言，获取被标识为需要自动化测试的测试项的功能描述，并识别出该功能描述下的测试用例，各测试用例同样具有相应的标识，标识分为需要自动化测试与无需自动化测试。
子步骤2022，尝试获取被标识为需要自动化测试的测试用例对应的自动化脚本，并在获取成功时，将测试用例以及测试用例对应的测试项标识为已自动化测试。
具体而言，自动化测试平台中预存有多个自动化脚本，以及自动化脚本与测试项中的测试用例的对应关系，自动化测试平台从预存的多个自动化脚本中，尝试为被标识为需要自动化测试的测试用例获取对应的自动化脚本，在获取成功时，将测试用例以及测试用例对应的测试项标识为已自动化测试；其中，当某个测试项对应的测试用例中，存在一个测试用例被标识为已自动化测试，则该测试用例所属的测试项同样被标识已自动化测试。
步骤203，执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果。
具体而言，执行获取成功的测试用例对应的自动化脚本，并记录所有自动化脚本的执行结果，执行结果包括执行成功与执行失败。
步骤204，统计计算参数。
具体而言，在所有自动化脚本执行结束后，自动化测试平台根据所有测试项以及测试用例的标识以及所有自动化脚本的执行结果，统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量、测试用例的总数、被标识为已自动化测试的测试用例的数量。
步骤205，根据计算参数生成软件的测试报告。
具体而言，根据计算参数可以计算出软件的指标，生成的软件的测试报告包括计算出的指标。本实施例中，根据自动化脚本的总数、执行结果为成功的自动化脚本的数量可以计算出自动化测试通过率，自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；根据获取的测试项的总数、被标识为已自动化测试的测试项的数量，可以计算出功能自动化覆盖率，功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；根据测试用例的总数、被标识为已自动化测试的测试用例的数量，可以计算出用例自动化覆盖率，用例自动化覆盖率＝被标识为已自动化测试的测试用例的数量/测试用例的总数；生成的软件的测试报告中至少包括自动化测试通过率、功能自动化覆盖率以及用例自动化覆盖率。
本实施方式相对于第一实施方式而言，提供了测试项的具体内容，以及测试项的标识更新方式；同时，统计的计算参数还包括测试用例的总数与被标识为已自动化测试的测试用例的数量，以便于在测试报告中加入用例覆盖率的指标。
本发明第三实施方式涉及一种自动化测试方法。第三实施方式是在第二实施方式基础上的改进，主要改进之处在于：统计的计算参数还包括缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数；测试项还包括测试用例的缺陷状态。
本实施方式的自动化测试方法的具体流程如图3所示。
步骤301，从用例管理工具中获取待测的软件的至少一测试项。
步骤302，发出存在缺陷的提示信息。
具体而言，测试项包括功能描述、功能描述对应的测试用例以及测试用例的缺陷状态，测试用例的缺陷状态包括已关闭与未关闭，自动化测试平台具有显示屏，显示屏上可以显示存在缺陷的测试用例，及其缺陷状态，测试人员在接收到自动化测试平台发出的存在缺陷的提示信息后，可以在用例管理工具中关闭存在缺陷的测试用例的缺陷，当测试用例的缺陷被关闭后，其缺陷状态被更新为已关闭；其中，可以设置一个定时任务，在预设时间内，测试人员可以去用例管理工具中关闭存在缺陷的测试用例的缺陷。
步骤303，尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试。
步骤304，执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果。
步骤305，从用例管理工具获取至少一测试项对应的测试用例的缺陷状态。
具体而言，自动化测试平台在所有自动化脚本执行结束后，从用例管理工具中获取至少一测试项对应的测试用例的缺陷状态。
步骤306，统计计算参数。
具体而言，自动化测试平台根据所有测试项以及测试用例的标识、所有自动化脚本的执行结果以及从用例管理工具中获取的至少一测试项对应的测试用例的缺陷状态，统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量、测试用例的总数、被标识为已自动化测试的测试用例的数量、缺陷状态为已关闭的缺陷的数量以及存在的缺陷的总数。
步骤307，根据计算参数生成软件的测试报告。
具体而言，根据计算参数可以计算出软件的指标，生成的软件的测试报告包括计算出的指标。本实施例中，根据自动化脚本的总数、执行结果为成功的自动化脚本的数量可以计算出自动化测试通过率，自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；根据获取的测试项的总数、被标识为已自动化测试的测试项的数量，可以计算出功能自动化覆盖率，功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；根据测试用例的总数、被标识为已自动化测试的测试用例的数量，可以计算出用例自动化覆盖率，用例自动化覆盖率＝被标识为已自动化测试的测试用例的数量/测试用例的总数；根据缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数，可以计算出缺陷关闭率，缺陷关闭率＝缺陷状态为已关闭的缺陷的数量/存在的缺陷的总数；生成的软件的测试报告中至少包括自动化测试通过率、功能自动化覆盖率、用例自动化覆盖率以及缺陷关闭率。
本实施方式相对于第二实施方式而言，统计的计算参数还包括已关闭的缺陷的数量与缺陷的总数，以便于在测试报告中加入缺陷关闭率的指标。
本发明第四实施方式涉及一种自动化测试方法。第四实施方式是在第二实施方式基础上的改进，主要改进之处在于：用例管理工具对测试项与测试用例的标识进行更新。
本实施方式的自动化测试方法的具体流程如图4所示。
其中，步骤401、步骤402与步骤201、步骤202大致相同，步骤404至步骤406与步骤203至步骤205大致相同，主要不同之处在于，增加了步骤403，具体如下：
步骤403，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，以供用例管理工具将测试项与测试用例标识为已自动化测试。
具体而言，自动化测试平台在将测试用例以及测试项标识为已自动化测试之后，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，用例管理工具在接收到通知信息之后，按照通知信息，对应将存储的测试项与测试用例标识为已自动测试；从而，测试人员在用例管理工具中，可以查询到自动化测试平台中测试项与测试用例的标识，从而获取测试用例与测试项的自动化覆盖程度；并且，可以查询用例管理平台各需求下测试用例与测试项的自动化覆盖程度。
本实施方式相对于第二实施方式而言，在将测试用例以及测试用例对应的测试项标识为已自动化测试之后，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，从而用例管理工具对应的将测试项与测试用例标识为已自动化测试；因此，从用例管理工具中，也能够查询到自动化测试平台的测试项与测试用例的自动化程度。需要说明的是，本实施方式也可以作为在第三实施方式基础上的改进，可以达到同样的技术效果。
本发明第五实施方式涉及一种自动化测试方法。第五实施方式是在第一实施方式基础上的改进，主要改进之处在于：能够自动判断软件是否符合发布条件。
本实施方式的自动化测试方法的具体流程如图5所示。
其中，步骤501至步骤505与步骤101至步骤105大致相同，主要不同之处在于，增加了步骤506，具体如下：
步骤506，将包括测试报告的软件发布请求发送至软件发布申请平台，以供软件发布申请平台根据测试报告，判断软件是否符合发布条件。
具体而言，自动化测试平台将包括测试报告的软件发布请求发送至软件发布申请平台，软件发布申请平台在接收到该测试报告后，根据测试报告中各个指标的值判断软件是否符合发布条件；例如，软件的测试报告中包括自动化测试通过率与功能自动化覆盖率，当自动化测试通过率大于预设的自动化测试通过率阈值且功能自动化覆盖率大于预设的功能自动化覆盖率阈值时，软件发布申请平台判定该软件符合发布条件；反之，则说明该软件不符合发布条件，不能发布。
另外，软件发布申请平台在判定该软件符合发布条件时，还可以将该软件发布至预设的软件升级平台，软件的用户可以从软件升级平台中自动进行软件升级，从而实现了软件测试、软件发布以及软件升级的全自动化流程。
需要说明的是，本实施方式也可以作为在第二至第四实施方式中任一项基础上的改进，可以达到同样的技术效果，以第四实施方式为例，软件发布申请平台在自动化测试通过率、功能自动化覆盖率、用例自动化覆盖率以及缺陷关闭率均大于对应的阈值时，判定软件符合发布条件，便可以将该软件发布至预设的软件升级平台，以供用户自动进行软件升级。
本实施方式相对于第一实施方式而言，在生成软件的测试报告之后，将包括测试报告的软件发布请求发送至软件发布申请平台，从而软件发布申请平台能够根据接收到的测试报告，自动判断软件是否符合发布条件。
本发明第六实施方式涉及一种自动化测试方法。第六实施方式是在第一实施方式基础上的改进，主要改进之处在于：测试人员可以人工补充测试项对应的自动化脚本。
其中，步骤601、步骤602与步骤101、步骤102大致相同，步骤605至步骤607与步骤103至步骤105大致相同，主要不同之处在于，增加了步骤603与步骤604，具体如下：
步骤603，在获取失败时，开始计时，并发出获取失败的提示信息。
具体而言，在获取被标识为需要自动化测试的测试项对应的自动化脚本失败时，开始计时，并发出获取失败的提示信息，具体的，自动化测试平台具有显示屏，在显示屏上显示获取失败的测试项，计时时长为预设时长，由测试人员设定。
步骤604，在计时结束之前，若接收到被标识为需要自动化测试的测试项对应的自动化脚本，则将测试项的标识为已自动化测试。
具体而言，在计时期间，测试人员可以补充被标识为需要自动化测试的测试项对应的自动化脚本，自动化测试平台在接收到补充的被标识为需要自动化测试的测试项对应的自动化脚本后，则将测试项的标识为已自动化测试。
需要说明的是，本实施方式也可以在获取失败时，停止软件自动化测试的流程，待所有被标识为需要自动化测试的测试项的自动化脚本均补充完毕后，再继续软件自动化测试。
本实施方式相对于第一实施方式而言，在尝试获取被标识为需要自动化测试的测试项对应的自动化脚本失败后，开始计时，若在预设时长内接收到测试人员补充的被标记为需要自动化测试的测试项对应自动化脚本，则将测试项标识为已自动化测试。需要说明的是，本实施方式也可以作为在第二至第五实施方式中任一项基础上的改进，可以达到同样的技术效果。
本发明第七实施方式涉及一种自动化测试系统，用于对软件进行至少一个功能的测试；请参考图7，自动化测试系统包括：自动化测试平台1与用例管理工具2。自动化测试平台1与用例管理工具2通过预设的接口或者无线进行通信连接。
用例管理工具2用于存储待测的软件的至少一测试项，具体的，用例管理工具2中存储有需求号，需求号对应的需求描述，需求对应的测试项，测试项为软件待测试的功能，测试项具有对应的标识，标识分为需要自动化测试与无需自动化测试。
自动化测试平台1用于从例管理工具2中获取待测的软件的至少一测试项，以对软件进行各种功能的测试。
自动化测试平台1还用于尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，并在获取成功时，将测试项标识为已自动化测试；具体的，自动化测试平台1中预存有多个自动化脚本，以及自动化脚本与测试项的对应关系，自动化测试平台1从预存的多个自动化脚本中，尝试为被标识为需要自动化测试的测试项获取对应的自动化脚本，在获取成功时，将该测试项标识为已自动化测试；若获取失败，则说明该测试项虽然被标识为需要自动化测试，但是测试人员尚未在自动化测试平台1中为该测试项添加对应的自动化脚本，该测试项无法进行自动化测试。
自动化测试平台1还用于执行获取成功的测试项对应的自动化脚本，并得到自动化脚本的执行结果；具体的，自动化测试平台1自动化部署代码到测试环境，利用自动化工具执行获取成功的测试项对应的自动化脚本，即执行被标识为已自动测试的测试项对应的自动化脚本，并记录所有自动化脚本的执行结果，执行结果包括执行成功与执行失败。
自动化测试平台1还用于在所有自动化脚本执行结束后，统计计算参数，并根据计算参数生成软件的测试报告；计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量。其中，自动化测试平台1根据计算参数可以计算出软件的指标，生成的软件的测试报告包括计算出的指标。本实施例中，根据自动化脚本的总数、执行结果为成功的自动化脚本的数量可以计算出自动化测试通过率，自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；根据获取的测试项的总数、被标识为已自动化测试的测试项的数量可以计算出功能自动化覆盖率，功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；生成的软件的测试报告中至少包括自动化测试通过率与功能自动化覆盖率。
不难发现，本实施方式为与第一实施方式相对应的系统实施例，本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第一实施方式中。
本实施方式相对于现有技术而言，在测试时，自动化测试平台从用例管理工具中获取待测的软件的至少一测试项，即，同步用例管理工具中存储的软件的至少一测试项；自动化测试平台尝试获取被标识为需要自动化测试的测试项对应的自动化脚本，自动化测试平台中预存有测试项与自动化脚本的对应关系，从而能够获取被标识需要自动化测试的测试项对应的自动化脚本，在获取成功时，将该测试项标识为已自动化测试，并执行获取成功的测试项对应的自动化脚本，得到各自动化脚本的执行结果；在所有的自动化脚本均执行完毕后，自动统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量，从而能够根据统计的计算参数自动生成软件的测试报告。即，自动化测试平台中同步有软件的测试项，从而无需人工统计计算参数，能够自动生成软件的测试报告，耗时较少；同时，避免了人工统计计算参数的不准确性。
本发明第八实施方式涉及一种自动化测试系统。第八实施方式是在第七实施方式基础上的改进，主要改进之处在于：本实施方式中，请参考图7，计算参数还包括测试用例的总数与被标识为已自动化测试的测试用例的数量；测试项至少包括功能描述与功能描述对应的测试用例。
自动化测试平台1具体用于获取被标识为需要自动化测试的测试项包含功能描述，并识别功能描述对应的测试用例；具体的，自动化测试平台1获取被标识为需要自动化测试的测试项的功能描述，并识别出该功能描述下的测试用例，各测试用例同样具有相应的标识，标识分为需要自动化测试与无需自动化测试。
自动化测试平台1具体用于尝试获取被标识为需要自动化测试的测试用例对应的自动化脚本，并在获取成功时，将测试用例以及测试用例对应的测试项标识为已自动化测试；具体的，自动化测试平台1中预存有多个自动化脚本，以及自动化脚本与测试项中的测试用例的对应关系，自动化测试平台1从预存的多个自动化脚本中，尝试为被标识为需要自动化测试的测试用例获取对应的自动化脚本，在获取成功时，将测试用例以及测试用例对应的测试项标识为已自动化测试；其中，当某个测试项对应的测试用例中，存在一个测试用例被标识为已自动化测试，则该测试用例所属的测试项同样被标识已自动化测试。
本实施方式中，自动化测试平台1在所有自动化脚本执行结束后，自动化测试平台1根据所有测试项以及测试用例的标识以及所有自动化脚本的执行结果，统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量、测试用例的总数、被标识为已自动化测试的测试用例的数量。因此，自动化测试平台1在根据计算参数生成软件的测试报告时，可以根据测试用例的总数、被标识为已自动化测试的测试用例的数量，可以计算出用例自动化覆盖率，用例自动化覆盖率＝被标识为已自动化测试的测试用例的数量/测试用例的总数，从而能够在生成的软件的测试报告中加入用例自动化覆盖率。
由于第二实施方式与本实施方式相互对应，因此本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效，在第二实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第二实施方式中。
本实施方式相对于第七实施方式而言，提供了测试项的具体内容，以及测试项的标识更新方式；同时，统计的计算参数还包括测试用例的总数与被标识为已自动化测试的测试用例的数量，以便于在测试报告中加入用例覆盖率的指标。
本发明第九实施方式涉及一种自动化测试系统。第九实施方式是在第八实施方式基础上的改进，主要改进之处在于：请参考图7，统计的计算参数还包括缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数；测试项还包括测试用例的缺陷状态。
自动化测试平台1还用于在在从用例管理工具2中获取待测的软件的至少一测试项之后，发出存在缺陷的提示信息；具体的，测试项包括功能描述、功能描述对应的测试用例以及测试用例的缺陷状态，测试用例的缺陷状态包括已关闭与未关闭，自动化测试平台1具有显示屏，显示屏上可以显示存在缺陷的测试用例，及其缺陷状态，测试人员在接收到自动化测试平台1发出的存在缺陷的提示信息后，可以在用例管理工具2中关闭存在缺陷的测试用例的缺陷，当测试用例的缺陷被关闭后，其缺陷状态被更新为已关闭；其中，可以设置一个定时任务，在预设时间内，测试人员可以去用例管理工具中关闭存在缺陷的测试用例的缺陷。
自动化测试平台1还用于在统计计算参数之前，从用例管理工具2获取至少一测试项对应的测试用例的缺陷状态；计算参数还包括：缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数。具体的，自动化测试平台根据所有测试项以及测试用例的标识、所有自动化脚本的执行结果以及从用例管理工具中获取的至少一测试项对应的测试用例的缺陷状态，统计计算参数，计算参数至少包括获取的自动化脚本的总数、执行结果为成功的自动化脚本的数量、获取的测试项的总数、被标识为已自动化测试的测试项的数量、测试用例的总数、被标识为已自动化测试的测试用例的数量、缺陷状态为已关闭的缺陷的数量以及存在的缺陷的总数。
本实施例中，自动化测试平台1在根据计算参数生成软件的测试报告时，根据缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数，可以计算出缺陷关闭率，缺陷关闭率＝缺陷状态为已关闭的缺陷的数量/存在的缺陷的总数，从而能够在生成的软件的测试报告中加入缺陷关闭率的指标。
由于第三实施方式与本实施方式相互对应，因此本实施方式可与第三实施方式互相配合实施。第三实施方式中提到的相关技术细节在本实施方式中依然有效，在第三实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第三实施方式中。
本实施方式相对于第八实施方式而言，统计的计算参数还包括已关闭的缺陷的数量与缺陷的总数，以便于在测试报告中加入缺陷关闭率的指标。
本发明第十实施方式涉及一种自动化测试系统。第十实施方式是在第八实施方式基础上的改进，主要改进之处在于：请参考图7，本实施方式中，用例管理工具对测试项与测试用例的标识进行更新。
自动化测试平台1还用于在将测试用例以及测试用例对应的测试项标识为已自动化测试之后，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具2。
用例管理工具2还用于在接收到通知信息之后，将测试项与测试用例标识为已自动化测试。具体的，用例管理工具2在接收到通知信息之后，按照通知信息，对应将存储的测试项与测试用例标识为已自动测试；从而，测试人员在用例管理工具2中，可以查询到自动化测试平台1中测试项与测试用例的标识，从而获取测试用例与测试项的自动化覆盖程度；并且，可以查询用例管理平台2各需求下测试用例与测试项的自动化覆盖程度。
由于第四实施方式与本实施方式相互对应，因此本实施方式可与第四实施方式互相配合实施。第四实施方式中提到的相关技术细节在本实施方式中依然有效，在第四实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第四实施方式中。
本实施方式相对于第八实施方式而言，在将测试用例以及测试用例对应的测试项标识为已自动化测试之后，将包含测试项与测试用例被标识为已自动化测试的通知信息发送至用例管理工具，从而用例管理工具对应的将测试项与测试用例标识为已自动化测试；因此，从用例管理工具中，也能够查询到自动化测试平台的测试项与测试用例的自动化程度。需要说明的是，本实施方式也可以作为在第九实施方式基础上的改进，可以达到同样的技术效果。
本发明第十一实施方式涉及一种自动化测试系统。第十一实施方式是在第七实施方式基础上的改进，主要改进之处在于：请参考图8，本实施方式中，自动化测试系统还包括软件发布申请平台3。
自动化测试平台1还用于将包括测试报告的软件发布请求发送至软件发布申请平台3。本实施例中，自动化测试平台1在生成测试报告后，自动发送软件发布请求至软件发布申请平台3，然不限于此，也可以由测试人员手动控制是否发送软件发布请求至软件发布申请平台3。
软件发布申请平台3用于根据测试报告，判断软件是否符合发布条件，并在判定软件不符合发布条件时，打回软件发布请求。具体的，软件发布申请平台3在接收到该测试报告后，根据测试报告中各个指标的值判断软件是否符合发布条件；例如，软件的测试报告中包括自动化测试通过率与功能自动化覆盖率，当自动化测试通过率大于预设的自动化测试通过率阈值且功能自动化覆盖率大于预设的功能自动化覆盖率阈值时，软件发布申请平台3判定该软件符合发布条件；反之，则说明该软件不符合发布条件，不能发布，打回软件发布请求。
另外，请参考图9，自动化测试系统还包括软件升级平台4，软件发布申请平台3还用于在判定软件符合发布条件时，将软件发布至软件升级平台4，软件升级平台4用于供用户自动进行软件的升级，从而实现了软件测试、软件发布以及软件升级的全自动化流程。
需要说明的是，本实施方式也可以作为在第八至第十实施方式中任一项基础上的改进，可以达到同样的技术效果，以第十实施方式为例，软件发布申请平台3在自动化测试通过率、功能自动化覆盖率、用例自动化覆盖率以及缺陷关闭率均大于对应的阈值时，判定软件符合发布条件，便可以将该软件发布至软件升级平台4，以供用户自动进行软件的升级。。
由于第五实施方式与本实施方式相互对应，因此本实施方式可与第五实施方式互相配合实施。第五实施方式中提到的相关技术细节在本实施方式中依然有效，在第五实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第五实施方式中。
本实施方式相对于第七实施方式而言，在生成软件的测试报告之后，将包括测试报告的软件发布请求发送至软件发布申请平台，从而软件发布申请平台能够根据接收到的测试报告，自动判断软件是否符合发布条件。
本发明第十二实施方式涉及一种自动化测试系统。第十二实施方式是在第七实施方式基础上的改进，主要改进之处在于：请参考图7，测试人员可以人工补充测试项对应的自动化脚本。
自动化测试平台1还用于在获取失败时，开始计时，并发出获取失败的提示信息；具体的，自动化测试平台1具有显示屏，在显示屏上显示获取失败的测试项，计时时长为预设时长，由测试人员设定。
自动化测试平台1还用于在计时结束之前，接收到被标识为需要自动化测试的测试项对应的自动化脚本时，则将测试项的标识为已自动化测试。具体的，在计时期间，测试人员可以补充被标识为需要自动化测试的测试项对应的自动化脚本，自动化测试平台1在接收到补充的被标识为需要自动化测试的测试项对应的自动化脚本后，则将测试项的标识为已自动化测试。
由于第六实施方式与本实施方式相互对应，因此本实施方式可与第六实施方式互相配合实施。第六实施方式中提到的相关技术细节在本实施方式中依然有效，在第六实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第六实施方式中。
本实施方式相对于第七实施方式而言，在尝试获取被标识为需要自动化测试的测试项对应的自动化脚本失败后，开始计时，若在预设时长内接收到测试人员补充的被标记为需要自动化测试的测试项对应自动化脚本，则将测试项标识为已自动化测试。需要说明的是，本实施方式也可以作为在第八至第十一实施方式任一项基础上的改进，可以达到同样的技术效果。
本领域的普通技术人员可以理解，上述各实施方式是实现本发明的具体实施例，而在实际应用中，可以在形式上和细节上对其作各种改变，而不偏离本发明的精神和范围。
Claims (12)
1.一种自动化测试方法，其特征在于，应用于自动化测试平台，所述方法包括：
从用例管理工具中获取待测的软件的至少一测试项；
尝试获取被标识为需要自动化测试的所述测试项对应的自动化脚本，并在获取成功时，将所述测试项标识为已自动化测试；
执行获取成功的所述测试项对应的自动化脚本，并得到所述自动化脚本的执行结果；
统计计算参数，所述计算参数至少包括获取的所述自动化脚本的总数、执行结果为成功的所述自动化脚本的数量、获取的所述测试项的总数、被标识为已自动化测试的所述测试项的数量；
根据所述计算参数生成所述软件的测试报告。
2.根据权利要求1所述的自动化测试方法，其特征在于，所述测试项至少包括功能描述与所述功能描述对应的测试用例；
所述尝试获取被标识为需要自动化测试的所述测试项对应的自动化脚本，并在获取成功时，将所述测试项标识为已自动化测试，具体包括：
获取被标识为需要自动化测试的所述测试项包含功能描述，并识别所述功能描述对应的所述测试用例；
尝试获取被标识为需要自动化测试的所述测试用例对应的自动化脚本，并在获取成功时，将所述测试用例以及所述测试用例对应的测试项标识为已自动化测试。
3.根据权利要求2所述的自动化测试方法，其特征在于，所述计算参数还包括：所述测试用例的总数与被标识为已自动化测试的所述测试用例的数量。
4.根据权利要求2所述的自动化测试方法，其特征在于，所述测试项还包括测试用例的缺陷状态；所述方法还包括：
在所述从用例管理工具中获取待测的软件的至少一测试项之后，还包括：
发出存在缺陷的提示信息；
在所述统计计算参数之前，还包括：
从所述用例管理工具获取所述至少一测试项对应的所述测试用例的缺陷状态；所述计算参数还包括：缺陷状态为已关闭的缺陷的数量与存在的缺陷的总数。
5.根据权利要求2所述的自动化测试方法，其特征在于，在所述将所述测试用例以及所述测试用例对应的测试项标识为已自动化测试之后，还包括：
将包含所述测试项与所述测试用例被标识为已自动化测试的通知信息发送至所述用例管理工具，以供所述用例管理工具将所述测试项与所述测试用例标识为已自动化测试。
6.根据权利要求1至5中任一项所述的自动化测试方法，其特征在于，在所述根据所述计算参数生成所述软件的测试报告之后，还包括：
将包括所述测试报告的软件发布请求发送至软件发布申请平台，以供所述软件发布申请平台根据所述测试报告，判断所述软件是否符合发布条件。
7.根据权利要求6所述的自动化测试方法，其特征在于，所述软件发布申请平台还用于在判定所述软件符合发布条件时，将所述软件发布至预设的软件升级平台，以供用户自动进行所述软件的升级。
8.根据权利要求4所述的自动化测试方法，其特征在于，所述测试报告包括以下指标的任意之一或任意组合：自动化测试通过率、功能自动化覆盖率、用例自动化覆盖率以及缺陷关闭率。
9.根据权利要求8所述的自动化测试方法，其特征在于，
所述自动化测试通过率＝执行结果为成功的自动化脚本的数量/自动化脚本的总数；
所述功能自动化覆盖率＝被标识为已自动化测试的测试项的数量/测试项的总数；
所述用例自动化覆盖率＝被标识为已自动化测试的测试用例的数量/测试用例的总数；
所述缺陷关闭率＝缺陷状态为已关闭的缺陷的数量/存在的缺陷的总数。
10.根据权利要求1所述的自动化测试方法，其特征在于，在所述尝试获取被标识为需要自动化测试的所述测试项对应的自动化脚本后，还包括：
在获取失败时，开始计时，并发出获取失败的提示信息；
在计时结束之前，若接收到被标识为需要自动化测试的所述测试项对应的自动化脚本，则将所述测试项的标识为已自动化测试；其中，计时的时长为预设时长。
11.一种自动化测试系统，其特征在于，包括：自动化测试平台与用例管理工具；
所述用例管理工具用于存储待测的软件的至少一测试项；
所述自动化测试平台用于从所述例管理工具中获取待测的软件的至少一测试项；
所述自动化测试平台还用于尝试获取被标识为需要自动化测试的所述测试项对应的自动化脚本，并在获取成功时，将所述测试项标识为已自动化测试；
所述自动化测试平台还用于执行获取成功的所述测试项对应的自动化脚本，并得到所述自动化脚本的执行结果；
所述自动化测试平台还用于统计计算参数，并根据所述计算参数生成所述软件的测试报告；所述计算参数至少包括获取的所述自动化脚本的总数、执行结果为成功的所述自动化脚本的数量、获取的所述测试项的总数、被标识为已自动化测试的所述测试项的数量。
12.根据权利要求11所述的自动化测试系统，其特征在于，所述自动化测试系统还包括软件发布申请平台；
所述自动化测试平台还用于将包括所述测试报告的软件发布请求发送至所述软件发布申请平台；
所述软件发布申请平台用于根据所述测试报告，判断所述软件是否符合发布条件，并在判定所述软件不符合发布条件时，打回所述软件发布请求。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811196734.6A CN109062817B (zh) | 2018-10-15 | 2018-10-15 | 自动化测试方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811196734.6A CN109062817B (zh) | 2018-10-15 | 2018-10-15 | 自动化测试方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109062817A true CN109062817A (zh) | 2018-12-21 |
| CN109062817B CN109062817B (zh) | 2022-06-03 |
Family
ID=64764764
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811196734.6A Active CN109062817B (zh) | 2018-10-15 | 2018-10-15 | 自动化测试方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109062817B (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109815133A (zh) * | 2018-12-28 | 2019-05-28 | 深圳前海达闼云端智能科技有限公司 | 一种软件测试方法、装置、计算设备及计算机存储介质 |
| CN109828919A (zh) * | 2019-01-18 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 测试报告自动生成方法、装置、计算机设备及存储介质 |
| CN110069409A (zh) * | 2019-04-12 | 2019-07-30 | 网宿科技股份有限公司 | 一种软件质量评估方法及系统 |
| CN110245088A (zh) * | 2019-06-21 | 2019-09-17 | 四川长虹电器股份有限公司 | 一种基于Jenkins的缺陷自动验证系统及验证方法 |
| CN110633215A (zh) * | 2019-09-20 | 2019-12-31 | 苏州浪潮智能科技有限公司 | 一种对自动化测试脚本进行管理的方法和系统 |
| CN110737587A (zh) * | 2019-09-06 | 2020-01-31 | 平安科技（深圳）有限公司 | 一种基于测试案例的测试方法、装置、存储介质和服务器 |
| CN111666208A (zh) * | 2020-05-19 | 2020-09-15 | 北京海致星图科技有限公司 | 一种bug自动回归方法及系统 |
| CN111930611A (zh) * | 2020-07-08 | 2020-11-13 | 南京领行科技股份有限公司 | 一种测试数据的统计方法和装置 |
| CN113127352A (zh) * | 2021-04-20 | 2021-07-16 | 成都新潮传媒集团有限公司 | 一种自动化用例的统计方法、装置及计算机可读存储介质 |
| CN113297090A (zh) * | 2021-06-11 | 2021-08-24 | 南方电网数字电网研究院有限公司 | 系统测试方法、装置、计算机设备和存储介质 |
| CN113542020A (zh) * | 2021-07-02 | 2021-10-22 | 太仓市同维电子有限公司 | 一种交换机产品检测功能测试项的配置方法 |
| CN115545677A (zh) * | 2022-11-24 | 2022-12-30 | 云账户技术(天津)有限公司 | 基于自动化用例执行情况的上线流程规范检测方法和系统 |
Citations (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030126517A1 (en) * | 2001-07-27 | 2003-07-03 | Accordsqa | Automated software testing and validation system |
| US20070022407A1 (en) * | 2001-07-27 | 2007-01-25 | Accordsqa, Inc. | Automated software testing and validation system |
| CN101930400A (zh) * | 2010-08-20 | 2010-12-29 | 北京神州泰岳软件股份有限公司 | Sdk自动化测试系统及方法 |
| US20120198280A1 (en) * | 2011-01-28 | 2012-08-02 | International Business Machines Corporation | Test cases generation for different test types |
| CN103150249A (zh) * | 2011-12-07 | 2013-06-12 | 北京新媒传信科技有限公司 | 一种自动化测试的方法和系统 |
| CN103530231A (zh) * | 2013-10-12 | 2014-01-22 | 北京京东尚科信息技术有限公司 | 一种基于业务流程控制的应用程序测试方法及系统 |
| US20140033175A1 (en) * | 2012-07-27 | 2014-01-30 | Hon Hai Precision Industry Co., Ltd. | Computing device and method for creating test cases of software program |
| CN103593273A (zh) * | 2013-11-27 | 2014-02-19 | 广州视源电子科技股份有限公司 | 一种电路板卡的测试方法、装置和系统 |
| CN104391794A (zh) * | 2014-12-03 | 2015-03-04 | 浪潮集团有限公司 | 一种多种脚本自动测试方法 |
| CN104502743A (zh) * | 2014-11-28 | 2015-04-08 | 惠州市亿能电子有限公司 | 一种基于Labview的电源管理产品自动化测试系统及方法 |
| CN106021118A (zh) * | 2016-06-20 | 2016-10-12 | 深圳充电网科技有限公司 | 测试代码生成方法及装置、测试框架代码执行方法及装置 |
| CN106412566A (zh) * | 2016-09-06 | 2017-02-15 | 深圳创维－Rgb电子有限公司 | 智能电视的自动化测试方法及装置 |
| CN106502888A (zh) * | 2016-10-13 | 2017-03-15 | 杭州迪普科技股份有限公司 | 软件的测试方法和装置 |
| US20170270032A1 (en) * | 2016-03-16 | 2017-09-21 | Fair Isaac Corporation | Systems and methods to improve decision management project testing |
| CN107832208A (zh) * | 2017-10-20 | 2018-03-23 | 深圳怡化电脑股份有限公司 | 软件的自动测试方法及终端设备 |
| CN107908566A (zh) * | 2017-11-27 | 2018-04-13 | 平安科技（深圳）有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
| CN108038052A (zh) * | 2017-11-27 | 2018-05-15 | 平安科技（深圳）有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
| CN108536593A (zh) * | 2018-04-02 | 2018-09-14 | 泰华智慧产业集团股份有限公司 | 基于ui的cs架构软件自动化测试方法及系统 |
-
2018
- 2018-10-15 CN CN201811196734.6A patent/CN109062817B/zh active Active
Patent Citations (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070022407A1 (en) * | 2001-07-27 | 2007-01-25 | Accordsqa, Inc. | Automated software testing and validation system |
| US20030126517A1 (en) * | 2001-07-27 | 2003-07-03 | Accordsqa | Automated software testing and validation system |
| CN101930400A (zh) * | 2010-08-20 | 2010-12-29 | 北京神州泰岳软件股份有限公司 | Sdk自动化测试系统及方法 |
| US20120198280A1 (en) * | 2011-01-28 | 2012-08-02 | International Business Machines Corporation | Test cases generation for different test types |
| CN103150249A (zh) * | 2011-12-07 | 2013-06-12 | 北京新媒传信科技有限公司 | 一种自动化测试的方法和系统 |
| US20140033175A1 (en) * | 2012-07-27 | 2014-01-30 | Hon Hai Precision Industry Co., Ltd. | Computing device and method for creating test cases of software program |
| CN103530231A (zh) * | 2013-10-12 | 2014-01-22 | 北京京东尚科信息技术有限公司 | 一种基于业务流程控制的应用程序测试方法及系统 |
| CN103593273A (zh) * | 2013-11-27 | 2014-02-19 | 广州视源电子科技股份有限公司 | 一种电路板卡的测试方法、装置和系统 |
| CN104502743A (zh) * | 2014-11-28 | 2015-04-08 | 惠州市亿能电子有限公司 | 一种基于Labview的电源管理产品自动化测试系统及方法 |
| CN104391794A (zh) * | 2014-12-03 | 2015-03-04 | 浪潮集团有限公司 | 一种多种脚本自动测试方法 |
| US20170270032A1 (en) * | 2016-03-16 | 2017-09-21 | Fair Isaac Corporation | Systems and methods to improve decision management project testing |
| CN106021118A (zh) * | 2016-06-20 | 2016-10-12 | 深圳充电网科技有限公司 | 测试代码生成方法及装置、测试框架代码执行方法及装置 |
| CN106412566A (zh) * | 2016-09-06 | 2017-02-15 | 深圳创维－Rgb电子有限公司 | 智能电视的自动化测试方法及装置 |
| CN106502888A (zh) * | 2016-10-13 | 2017-03-15 | 杭州迪普科技股份有限公司 | 软件的测试方法和装置 |
| CN107832208A (zh) * | 2017-10-20 | 2018-03-23 | 深圳怡化电脑股份有限公司 | 软件的自动测试方法及终端设备 |
| CN107908566A (zh) * | 2017-11-27 | 2018-04-13 | 平安科技（深圳）有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
| CN108038052A (zh) * | 2017-11-27 | 2018-05-15 | 平安科技（深圳）有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
| CN108536593A (zh) * | 2018-04-02 | 2018-09-14 | 泰华智慧产业集团股份有限公司 | 基于ui的cs架构软件自动化测试方法及系统 |
Non-Patent Citations (2)
| Title |
|---|
| 凌永发等: "软件测试自动化中的脚本技术", 《云南民族学院学报(自然科学版)》 * |
| 李玉等: "基于QTP的企业级应用软件自动化测试方法", 《计算机系统应用》 * |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109815133B (zh) * | 2018-12-28 | 2022-08-09 | 达闼机器人股份有限公司 | 一种软件测试方法、装置、计算设备及计算机存储介质 |
| CN109815133A (zh) * | 2018-12-28 | 2019-05-28 | 深圳前海达闼云端智能科技有限公司 | 一种软件测试方法、装置、计算设备及计算机存储介质 |
| CN109828919A (zh) * | 2019-01-18 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 测试报告自动生成方法、装置、计算机设备及存储介质 |
| CN110069409A (zh) * | 2019-04-12 | 2019-07-30 | 网宿科技股份有限公司 | 一种软件质量评估方法及系统 |
| CN110245088A (zh) * | 2019-06-21 | 2019-09-17 | 四川长虹电器股份有限公司 | 一种基于Jenkins的缺陷自动验证系统及验证方法 |
| CN110245088B (zh) * | 2019-06-21 | 2022-10-18 | 四川长虹电器股份有限公司 | 一种基于Jenkins的缺陷自动验证系统及验证方法 |
| CN110737587B (zh) * | 2019-09-06 | 2022-05-27 | 平安科技（深圳）有限公司 | 一种基于测试案例的测试方法、装置、存储介质和服务器 |
| CN110737587A (zh) * | 2019-09-06 | 2020-01-31 | 平安科技（深圳）有限公司 | 一种基于测试案例的测试方法、装置、存储介质和服务器 |
| CN110633215A (zh) * | 2019-09-20 | 2019-12-31 | 苏州浪潮智能科技有限公司 | 一种对自动化测试脚本进行管理的方法和系统 |
| CN111666208A (zh) * | 2020-05-19 | 2020-09-15 | 北京海致星图科技有限公司 | 一种bug自动回归方法及系统 |
| CN111930611B (zh) * | 2020-07-08 | 2022-06-14 | 南京领行科技股份有限公司 | 一种测试数据的统计方法和装置 |
| CN111930611A (zh) * | 2020-07-08 | 2020-11-13 | 南京领行科技股份有限公司 | 一种测试数据的统计方法和装置 |
| CN113127352A (zh) * | 2021-04-20 | 2021-07-16 | 成都新潮传媒集团有限公司 | 一种自动化用例的统计方法、装置及计算机可读存储介质 |
| CN113127352B (zh) * | 2021-04-20 | 2023-03-14 | 成都新潮传媒集团有限公司 | 一种自动化用例的统计方法、装置及计算机可读存储介质 |
| CN113297090A (zh) * | 2021-06-11 | 2021-08-24 | 南方电网数字电网研究院有限公司 | 系统测试方法、装置、计算机设备和存储介质 |
| CN113297090B (zh) * | 2021-06-11 | 2024-01-23 | 南方电网数字平台科技(广东)有限公司 | 系统测试方法、装置、计算机设备和存储介质 |
| CN113542020A (zh) * | 2021-07-02 | 2021-10-22 | 太仓市同维电子有限公司 | 一种交换机产品检测功能测试项的配置方法 |
| CN115545677A (zh) * | 2022-11-24 | 2022-12-30 | 云账户技术(天津)有限公司 | 基于自动化用例执行情况的上线流程规范检测方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109062817B (zh) | 2022-06-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109062817A (zh) | 自动化测试方法及系统 | |
| CN104050078B (zh) | 测试脚本生成系统 | |
| CN110525823A (zh) | 一种监控垃圾分类投放的方法、装置以及系统 | |
| CN110083528A (zh) | 测试任务的分配方法、装置、计算机设备及存储介质 | |
| CN110414838A (zh) | 一种烟草工艺质量管控方法、系统、设备及存储介质 | |
| CN109995614A (zh) | 一种α测试方法及装置 | |
| CN108270837A (zh) | 一种利用闲置资源的分布式任务调度方法及系统 | |
| CN110188036A (zh) | 一种软件测试方法及装置 | |
| CN109426237A (zh) | 一种电子控制单元ecu的硬件在环测试方法和装置 | |
| CN111126933A (zh) | Kafka生产和消费进度监控方法及装置 | |
| CN108052444A (zh) | 一种用于移动应用的性能测试的方法与装置 | |
| CN109522947A (zh) | 识别方法和设备 | |
| CN105868100A (zh) | 基于Android系统的自动化测试方法及装置 | |
| CN106168924A (zh) | 一种软件测试的方法、装置及电子设备 | |
| CN110235114A (zh) | 分散协调系统、设备行动监视装置和家电设备 | |
| CN107818051A (zh) | 一种测试用例的跳转分析方法、装置及服务器 | |
| CN110489329A (zh) | 一种测试报告的输出方法、装置及终端设备 | |
| CN104516811B (zh) | 一种分布式执行测试用例的方法和系统 | |
| CN110908901A (zh) | 一种图像识别能力的自动化验证方法及系统 | |
| CN115965207A (zh) | 资源配置方法、系统及存储介质 | |
| CN107612144B (zh) | 变电站设备重要性检测系统和方法 | |
| CN113590498B (zh) | 一种桌面操作系统应用启动时间的测试方法及系统 | |
| CN109858632A (zh) | 一种确定阈值的方法及装置 | |
| CN108876099A (zh) | 一种备件采购计划的生成方法 | |
| CN109656826A (zh) | 应用测试方法、系统、设备及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |