CN116010273A - 一种应用测试方法、装置、产品、介质和设备 - Google Patents

Abstract

本申请涉及应用开发技术领域，尤其涉及一种应用测试方法、装置、产品、介质和设备。其中方法包括：对应用内的页面进行截图；根据截图确定页面中的有效控件；从有效控件中确定随机控件；基于随机控件生成随机测试指令；根据随机测试指令对随机控件进行测试。通过上述方式，先根据页面中的截图，确定页面中的有效控件，之后在对这些有效控件进行随机测试，从而确保每一个测试指令都可以下达至有效的页面区域，对于没有有效控件的无效区域则不会有测试指令，提高测试的有效性，可以提高测试的效率。此外，在有效控件中，确定随机控件，可以减少对有效控件的测试数量，用部分有效控件的测试结果反映整体，可以进一步提高测试的效率。

Description

一种应用测试方法、装置、产品、介质和设备

技术领域

本申请涉及应用开发技术领域，尤其涉及一种应用测试方法、装置、产品、介质和设备。

背景技术

开发终端上的一种应用时，需要针对于终端做兼容性测试。比如对于安卓设备，一种应用开发完成之后，若要保证应用在安卓设备中可以正常的进行切换页面、滑动等操作，需要对应用中的可操作性控件进行测试。

现有技术中，以安卓设备为例，主要是基于安卓底层的基础框架，随机生成一些测试指令，执行点击、滑动、赋值等操作。比如，对于一个应用中的页面，随机生成一个像素坐标，对这个像素坐标执行点击操作，或者生成一串连续的像素坐标，对这一串连续的像素坐标进行滑动操作，或者生成一个像素坐标，对这个像素坐标进行赋值操作。在上述过程中，由于一个页面中大部分都是空白区域，可以操作的区域较少，随机生成坐标极易落在无法操作的区域，测试的有效性很低，最终导致测试的效率很低。

基于此，目前亟需一种应用测试方法、装置、产品、介质和设备，用于对应用进行测试，提高测试的效率。

发明内容

基于此，目前亟需一种应用测试方法、装置、产品、介质和设备，用于对应用进行测试，提高测试的效率。

第一方面，本申请实施例提供一种应用测试方法，所述方法包括：对所述应用内的页面进行截图；根据所述截图确定所述页面中的有效控件；从所述有效控件中确定随机控件；基于所述随机控件生成随机测试指令；根据所述随机测试指令对所述随机控件进行测试。

通过上述方式，先根据页面中的截图，确定页面中的有效控件，之后在对这些有效控件进行随机测试，从而确保每一个测试指令都可以下达至有效的页面区域，对于没有有效控件的无效区域则不会有测试指令，提高测试的有效性，可以提高测试的效率。此外，在有效控件中，确定随机控件，可以减少对有效控件的测试数量，用部分有效控件的测试结果反映整体，可以进一步提高测试的效率。

一种可能的实现方式中，根据所述截图确定所述页面中的有效控件，包括：对所述截图进行切割，获得多个子截图；针对任一个子截图，通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件；任一模板图像为具有有效控件的图像或异常控件的图像；若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件。

在上述方式中，通过模板图像匹配有效控件，只需要针对应用构建模板图像库，就可以识别出来有效控件，这种识别方式简单易操作，可实现性高，准确率也比较高，可以提高测试的可靠性与效率。

一种可能的实现方式中，通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件，包括：将所述子截图的图像格式转换为模板图像的格式；针对任一模板图像，将所述子截图与所述模板图像中的控件进行匹配，若匹配，则根据所述模板图像中控件的类型确定所述子截图对应的控件类型。

在上述方式中，通过模板匹配的方式，确定控件的类型，只需要对模板库进行遍历匹配，无需进行其他复杂的计算操作，可以减少有效控件确定过程中的时间占用，提高测试的效率。

一种可能的实现方式中，若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件，包括：将所述子截图进行二值化处理并对二值化后的子截图进行边界检测，从而得到识别出的文字；根据所述文字符合的分类标准，确定所述页面中的有效控件；所述分类标准包括有效类型和异常类型。

在上述方式中，对于模板图像无法匹配的一些控件，有可能是模板图像没有更新，此时通过识别一些关键的文字信息去确定有效控件，可以排除图标的干扰，将控件是否有效用文字判断，可以提高有效控件确定的准确度。

一种可能的实现方式中，所述方法还包括：若所述页面中的异常类型为弹窗控件，则在测试时，生成弹窗控件关闭指令；基于所述弹窗控件关闭指令，关闭所述弹窗控件。

通过上述方式，可以对弹窗控件执行关闭操作，避免页面上的弹窗一直在页面上方悬浮，覆盖住其他有效控件。排除干扰之后，对其他有效控件的测试才可以继续进行。因此，上述过程，确保了对有效控件测试的精准度。

一种可能的实现方式中，根据所述随机测试指令对所述随机控件进行测试之后，还包括：生成随机控件的测试记录，所述测试记录用于判断对所述随机控件的测试是否达到预设次数；若是，则在下一次的测试中排除所述随机控件对应的随机测试指令。

通过上述方式，可以排除对一个控件进行反复测试，浪费测试资源，确保测试的效率。

第二方面，本申请实施例提供一种装置，该装置包括：

截图模块，用于对所述应用内的页面进行截图；

确定模块，用于根据所述截图确定所述页面中的有效控件；从所述有效控件中确定随机控件；

生成模块，用于基于所述随机控件生成随机测试指令；

测试模块，用于根据所述随机测试指令对所述随机控件进行测试。

一种可能的实现方式中，所述截图模块具体用于：对所述截图进行切割，获得多个子截图；

所述确定模块，具体用于：

针对任一个子截图，通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件；任一模板图像为具有有效控件的图像或异常控件的图像；

若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件。

所述确定模块，具体还用于：

将所述子截图的图像格式转换为模板图像的格式；

针对任一模板图像，将所述子截图与所述模板图像中的控件进行匹配，若匹配，则根据所述模板图像中控件的类型确定所述子截图对应的控件类型。

所述确定模块，具体还用于：

将所述子截图进行二值化处理并对二值化后的子截图进行边界检测，从而得到识别出的文字；

根据所述文字符合的分类标准，确定所述页面中的有效控件；所述分类标准包括有效类型和异常类型。

所述确定模块，具体还用于：

若所述页面中的异常类型为弹窗控件，则在测试时，生成弹窗控件关闭指令；

基于所述弹窗控件关闭指令，关闭所述弹窗控件。

所述测试模块，还用于：

生成随机控件的测试记录，所述测试记录用于判断对所述随机控件的测试是否达到预设次数；

第三方面，本申请实施例提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，当计算机程序被运行时，执行上述第一方面中任一项方法。

第四方面，本申请实施例提供一种计算设备，包括：存储器，用于存储程序指令；处理器，用于调用存储器中存储的程序指令，按照获得的程序执行上述第一方面中任一项设计中的方法。

第五方面，本申请实施例提供一种计算机程序产品，当计算机程序产品在处理器上运行时，实现如上述第一方面中任一项设计中的方法。

上述第二方面至第五方面的有益效果，具体可参照上述第一方面任一项设计可达到的有益效果，此处不再一一赘述。

附图说明

图1示例性示出本申请实施例提供的一种应用场景示意图；

图2示例性示出本申请实施例提供的一种应用页面示意图；

图3示例性示出本申请实施例提供的一种应用测试方法示意图；

图4示例性示出本申请实施例提供的一种确定有效控件的方法示意图；

图5示例性地示出本申请实施例提供的一种应用测试装置示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

图1示例性示出本申请实施例提供的一种应用场景示意图，如图1所示，一种应用在安装在终端上之后，可以基于终端的环境对应用中的页面进行操作。示例性地，对页面的操作包括在文本框中赋值、点击按钮、滑动页面等。其中滑动又可以包括多种方向的滑动，例如，向下滑动可以使页面中的内容自上而下滚动，向上滑动可以使页面中的内容自下而上滚动，向右滑动，可以返回至上一个页面，向左滑动，可以跳转到下一个页面等。按钮的触发机制和滑动类似，可以通过点击按钮进入至下一个页面，或者返回至上一个页面等。

基于上述应用场景，在开发完成一个应用之后，需要对上述功能进行测试，确保上述在文本框中赋值、点击按钮、滑动页面等操作在终端中可以正常执行。

一种可能的实现方式中，可以在基于终端的基础框架生成随机测试指令。图2示例性示出本申请实施例提供的一种应用页面示意图，如图2所示，在应用页面中包括文本框1和文本框2、按钮1和按钮2。基于终端的基础框架生成随机测试指令，比如，终端为一种安卓设备，一种安卓设备的基础框架为monkey框架，这是一种开源的框架，基于monkey框架可以对安装在安装设备中的应用进行侵入性的测试。主要原理即为随机生成测试指令，对页面的性能进行测试。

如图2所示，基于monkey框架，可以随机生成测试指令。设图2所示的页面为560x1028大小的一个页面，即在这个页面上公有560行128列的像素点，基于这些像素点可以生成随机的测试坐标。一以点击测试为例，随机生成的坐标为坐标1(228，129)、坐标2(290，450)、坐标3(140，500)、坐标4(215，820)、坐标5(950，100)。对这些坐标点所在的位置执行点击操作，看点击之后页面是否正常。由图2可以看出，坐标1点击到了文本框1上，可以出触发文本框1的输入操作；坐标5点击到了按钮1上，可以触发按钮1对应的功能，例如，确认当前页面内容。其余的坐标2、坐标3、坐标4均点击在了空白的区域，不会触发任何操作。由此，对当前页面的测试中只有两个是有效的。这是由于，一个页面中大部分的位置都是不可以操作的区域，仅供展示，因此随机生成的测试坐标一大部分会落在无效区域，导致没有任何操作产生，导致一次测试的有效率很低，最终影响测试的效率，甚至准确度。

并且，在上述方式应用在实际的测试场景中时，会包括弹窗的测试。比如，在进入到一个页面时，应用会自动弹出一个提示框，用于展示广告或者对这个页面进行风险提示。此时，在页面中所有的区域都是无法进行操作的，只有将提示框关闭之后才能继续进行测试。但是，使用上述测试方法，由于生成的指令是随机的，无法确保点击指令可以关闭提示框，那么这就会导致，所有的测试指令都是无效的，进一步降低了测试的效率。

另一种可能的实现方式中，在生成随机测试指令之前，可以对无效区域进行过滤。这种方式主要是针对大面积的无效区域，比如，对于一个纯白屏页面或者纯黑屏页面进行过滤，可以避免一直对这种页面进行测试，可以在一定程度上提高测试的效率。但是这种方式中仍然是通过生成随机测试指令进行测试的，对于页面中出现提示框的情况，也无法确保测试指令可以关闭提示框，进而导致测试指令无效，降低测试的效率。

基于此，本申请提供了一种应用测试方法，用于确保测试的有效性，提高测试效率。

图3示例性示出本申请实施例提供的一种应用测试方法示意图，如图3所示，所述方法包括：

步骤301，对应用内的页面进行截图。使用一种截图工具，对页面的内容进行截取，基于一个具有动态功能的页面获取到一个静态的页面截图，由多个像素点组成。

步骤302，根据截图确定页面中的有效控件。有效控件指的是，页面中可以进行操作的控件，比如图2中的文本框和按钮。

步骤303，从有效控件中确定随机控件。一个页面的控件比较少，但是，对于一个应用来讲，包括多个页面，多个页面中的控件数比较多，进行测试时无法对所有控件进行测试，因此，需要对有效控件进行随机选择，从而确定随机控件，对这些随机控件进行测试，来反映整体的测试结果。

步骤304，基于随机控件生成随机测试指令。对于上述步骤中获取到的随机控件，生成对应的随机测试指令。例如，对于可点击的控件生成点击指令；对于文本框空间，生成输入指令，并且输入指令中需要携带输入内容；对于可滑动的控件，比如滚动条，生成滑动指令。具体的滑动指令可以包括一串坐标点，用于指示从页面中的第一位置滑动至第二位置。

步骤305，根据随机测试指令对随机控件进行测试。上述步骤305中的随机测试指令可以作用与页面的控件中，对应用的页面进行测试。

通过上述方式，先根据页面中的截图，确定页面中的有效控件，之后在对这些有效控件进行随机测试，从而确保每一个测试指令都可以下达至有效的页面区域，对于没有有效控件的无效区域则不会有测试指令，提高测试的有效性，可以提高测试的效率。此外，在有效控件中，确定随机控件，可以减少对有效控件的测试数量，用部分有效控件的测试结果反映整体，可以进一步提高测试的效率。

针对于上述步骤301，图4示例性示出本申请实施例提供的一种确定有效控件的方法示意图，如图4所示，该方法包括：

步骤401，对截图进行切割，获得多个子截图。

获取多个子截图的目的是为了提高下一步中与模板图像匹配的效率。在这个步骤之前，为了避免在对截图进行切割的时候将一个控件分割在两个子截图中，可以对截图先进行边缘检测，不把一个完整控件切开，另外如果一个完整控件是由多个图标组合到一起的，也可以进行一定的补偿和重组。即使重组失败，把一个控件分割到了多个子截图中，最终它对于测试结果的影响也是比较小的，只不过可能出现重复操作的问题。获得多个子截图之后，可以对子截图进行预处理，将其处理成和模板图像一致的格式，比如，处理为和子截图一致的分辨率，以提高下一步中匹配的成功率。

步骤402，针对任一个子截图，判断所述子截图与所述模板图像是否匹配；若是，则执行步骤403，若否，则执行步骤404。

模板图像是预先存储在模板库中的，模板库中收录了多种控件的图像。每一种应用可以对应一个模板库。

步骤403，通过模板库中的各模板图像与子截图的匹配结果，确定页面中的有效控件；任一模板图像为具有有效控件的图像或异常控件的图像。

针对任一模板图像，将子截图与模板图像中的控件进行匹配，若匹配，则根据模板图像中控件的类型确定子截图对应的控件类型。例如，子截图中包含按钮1、按钮2这两个控件的图标，而模板库中的模板图像也有按钮1的图像和按钮2的图像，此时就可以在匹配过程中匹配到按钮1和按钮2这两个控件。

在上述方式中，通过模板图像匹配有效控件，只需要针对应用构建模板图像库，就可以识别出来有效控件，这种识别方式简单易操作，可实现性高，准确率也比较高，可以提高测试的可靠性与效率。

步骤404，通过对子截图进行图像文字识别，确定页面中的有效控件。

将子截图进行二值化处理并对二值化后的子截图进行边界检测，从而得到识别出的文字。这是一种图像中的文字识别技术，可以将图像中的中文或者外文识别出来，形成可复制的文本内容。

在进行文字识别之前，可以先对子截图进行预识别，判断子截图中是否包括文字信息，如果包括文字信息，则在通过二值化和便捷检测，确定具体的文字信息内容。

在上述方式中，对于模板图像无法匹配的一些控件，有可能是模板图像没有更新，此时通过识别一些关键的文字信息去确定有效控件，可以排除图标的干扰，将控件是否有效用文字判断，可以提高有效控件确定的准确度。

根据文字符合的分类标准，确定页面中的有效控件；分类标准包括有效类型和异常类型。有效类型的控件为上述按钮、文本框这种在页面中原本就存在的控件；异常类型的控件可以为提示框这种悬浮于页面上方的弹窗控件。对于这种弹窗控件，需要在测试时将弹窗控件进行关闭，否则，对于其他有效控件的测试也是无效的。

因此则在测试时，需要生成弹窗控件关闭指令；基于所述弹窗控件关闭指令，关闭所述弹窗控件。例如，弹窗控件关闭指令可以为一个点击指令，点击指令对应的坐标位置是弹窗控件中的关闭按钮，此时，执行点击指令，就可以关闭弹窗。此时，可以确保其他随机测试指令的有效性。

通过上述方式，可以对弹窗控件执行关闭操作，避免页面上的弹窗一直在页面上方悬浮，覆盖住其他有效控件。排除干扰之后，对其他有效控件的测试才可以继续进行。因此，上述过程，确保了对有效控件测试的精准度。

在上述步骤305之后，生成随机控件的测试记录，测试记录用于判断对随机控件的测试是否达到预设次数；若是，则在下一次的测试中排除随机控件对应的随机测试指令。

测试记录用于记录随机控件的被测次数，比如，有的随机控件只需要测试一次，就可以判定它是否是可以正常操作的，例如确定按钮；有的随机控件必须多次测试，才判定它是可以正常操作的，例如，增大字号按钮。在测试过程中，有的页面中包括返回按钮，在通过点击指令，点击返回按钮，返回至前一个页面之后，为了提高测试效率，这个页面中只需要测试一次的按钮就不需要在对它进行测试，因此，在下一次生成随机测试指令时，排除这个按钮对应的随机测试指令。

基于相同的技术构思，本申请实施例还提供了一种应用测试装置，图5示例性地示出本申请实施例提供的一种应用测试装置示意图，该装置可以执行前述的应用测试方法，如图5所示，该装置包括：

截图模块，用于对所述应用内的页面进行截图；

确定模块，用于根据所述截图确定所述页面中的有效控件；从所述有效控件中确定随机控件；

生成模块，用于基于所述随机控件生成随机测试指令；

测试模块，用于根据所述随机测试指令对所述随机控件进行测试。

一种可能的实现方式中，所述截图模块具体用于：对所述截图进行切割，获得多个子截图；

所述确定模块，具体用于：

针对任一个子截图，通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件；任一模板图像为具有有效控件的图像或异常控件的图像；

若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件。

所述确定模块，具体还用于：

将所述子截图的图像格式转换为模板图像的格式；

针对任一模板图像，将所述子截图与所述模板图像中的控件进行匹配，若匹配，则根据所述模板图像中控件的类型确定所述子截图对应的控件类型。

所述确定模块，具体还用于：

将所述子截图进行二值化处理并对二值化后的子截图进行边界检测，从而得到识别出的文字；

根据所述文字符合的分类标准，确定所述页面中的有效控件；所述分类标准包括有效类型和异常类型。

所述确定模块，具体还用于：

若所述页面中的异常类型为弹窗控件，则在测试时，生成弹窗控件关闭指令；

基于所述弹窗控件关闭指令，关闭所述弹窗控件。

所述测试模块，还用于：

生成随机控件的测试记录，所述测试记录用于判断对所述随机控件的测试是否达到预设次数；

若是，则在下一次的测试中排除所述随机控件对应的随机测试指令。

基于相同的技术构思，本发明实施例还提供了一种计算机程序产品，当所述计算机程序产品在处理器上运行时，实现如图3和图4所示意的方法。

基于相同的技术构思，本发明实施例还提供了一种计算设备，包括：存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行如图3和图4所示意的方法。

基于相同的技术构思，本发明实施例还提供了一种计算机可读存储介质，当所述计算机程序产品在处理器上运行时，实现如图3和图4所示意的方法。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种应用测试方法，其特征在于，所述方法包括：

对所述应用内的页面进行截图；

根据所述截图确定所述页面中的有效控件；

从所述有效控件中确定随机控件；基于所述随机控件生成随机测试指令；

根据所述随机测试指令对所述随机控件进行测试。

2.如权利要求1所述的方法，其特征在于，根据所述截图确定所述页面中的有效控件，包括：

对所述截图进行切割，获得多个子截图；

针对任一个子截图，通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件；任一模板图像为具有有效控件的图像或异常控件的图像；

若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件。

3.如权利要求2所述的方法，其特征在于，

通过模板库中的各模板图像与所述子截图的匹配结果，确定所述页面中的有效控件，包括：

将所述子截图的图像格式转换为模板图像的格式；

针对任一模板图像，将所述子截图与所述模板图像中的控件进行匹配，若匹配，则根据所述模板图像中控件的类型确定所述子截图对应的控件类型。

4.如权利要求2所述的方法，其特征在于，若与各模板图像均不匹配，则通过对所述子截图进行图像文字识别，确定所述页面中的有效控件，包括：

将所述子截图进行二值化处理并对二值化后的子截图进行边界检测，从而得到识别出的文字；

根据所述文字符合的分类标准，确定所述页面中的有效控件；所述分类标准包括有效类型和异常类型。

5.如权利要求4所述的方法，其特征在于，所述方法还包括：

若所述页面中的异常类型为弹窗控件，则在测试时，生成弹窗控件关闭指令；

基于所述弹窗控件关闭指令，关闭所述弹窗控件。

6.如权利要求1至5任一项所述的方法，其特征在于，根据所述随机测试指令对所述随机控件进行测试之后，还包括：

生成随机控件的测试记录，所述测试记录用于判断对所述随机控件的测试是否达到预设次数；

若是，则在下一次的测试中排除所述随机控件对应的随机测试指令。

7.一种应用测试装置，其特征在于，所述装置包括：

截图模块，用于对所述应用内的页面进行截图；

确定模块，用于根据所述截图确定所述页面中的有效控件；从所述有效控件中确定随机控件；

生成模块，用于基于所述随机控件生成随机测试指令；

测试模块，用于根据所述随机测试指令对所述随机控件进行测试。

8.一种计算机程序产品，其特征在于，计算机程序产品在处理器上运行时，实现如权利要求1至6中任一项所述的方法。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，当所述计算机程序被运行时，执行如权利要求1至6中任一项所述的方法。

10.一种计算设备，其特征在于，包括：

存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行如权利要求1至6任一项权利要求所述的方法。

Images