CN113190444B - 一种测试方法、装置及存储介质 - Google Patents

Abstract

一种测试方法、装置及存储介质，该方法包括：获取目标应用的待测试路径；获取测试过程中目标应用的当前显示界面的待比较图像，将待比较图像与待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；若比较结果指示待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面，则从当前显示界面所包括的控件中确定待测试控件；针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像；根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果。通过本申请，可以提高针对应用程序的测试效率和测试结果的准确性。

Description

一种测试方法、装置及存储介质

技术领域

本申请涉及软件测试技术领域，尤其涉及一种测试方法、装置及存储介质。

背景技术

在移动互联网时代，为了更好地保证用户的体验，确定应用程序中的控件在触发后能否实现正确的界面切换是非常必要的，如果针对应用程序中控件进行测试时只利用人工测试的方式的话，会耗费大量人力，同时测试的效果很依赖个人能力和对应用程序的了解程度，可能导致测试质量参差不齐。可见，如何提高测试的准确性和效率已成为针对应用程序进行测试的重中之重。

发明内容

本申请实施例提供了一种测试方法、装置及存储介质，可以提高针对应用程序的测试效率和测试结果的准确性。

一方面，本申请实施例提供了一种测试方法，所述方法包括：

获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

另一方面，本申请实施例提供了一种测试装置，所述装置包括：

获取模块，用于获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

所述获取模块，还用于获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

处理模块，用于若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

所述获取模块，还用于针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

所述处理模块，还用于根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

相应地，本申请实施例提供了一种计算机设备，该设备包括处理器、通信接口和存储器，所述处理器、所述通信接口和所述存储器相互连接，其中，所述存储器存储有可执行程序代码，所述处理器用于调用所述可执行程序代码，执行上述任一可能实现方式所述的测试方法。

相应地，本申请实施例提供了一种计算机可读存储介质，存储有计算机程序，所述处理器执行上述任一可能实现方式所述的测试方法所涉及的程序。

相应地，本申请实施例提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述任一可能实现方式所述的测试方法。

本申请实施例中，首先获取目标应用的待测试路径和目标应用的当前显示界面的待比较图像，若待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面时，则从当前显示界面所包括的控件中确定待测试控件，并获取针对待测试控件执行控件触发操作后目标应用的跳转显示界面的界面图像，最后根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，从而可以提高针对应用程序的测试效率和测试结果的准确性。

附图说明

为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种测试系统的架构示意图；

图2为本申请实施例提供的一种测试方法的流程示意图；

图3为本申请实施例提供的另一种测试方法的流程示意图；

图4为本申请实施例提供的另一种测试方法的流程示意图；

图5为本申请实施例涉及的确定待测试路径的示意图；

图6为本申请实施例提供的另一种测试方法的流程示意图；

图7为本申请实施例提供的另一种测试方法的流程示意图；

图8是本申请实施例提供的一种测试装置的结构示意图；

图9是本申请实施例提供的一种计算机设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

需要说明的是，本申请实施例中所涉及到的“第一”、第二”等描述仅用于描述目的，而不能理解为指示或者暗示其相对重要性或者隐含指明所指示的技术特征的数量。因此，限定有“第一”、第二”的技术特征可以明示或者隐含的包括至少一个该特征。

为了实现提高测试效率以及测试结果准确性的目的，本申请实施例基于人工智能技术提出了一种测试方法。

人工智能(Artificial Intelligence,AI)技术是一门综合学科，涉及领域广泛，既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。

机器学习(Machine Learning,ML)是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心，是使计算机具有智能的根本途径，其应用遍及人工智能的各个领域。机器学习和深度学习通常包括人工神经网络、置信网络、强化学习、迁移学习、归纳学习、式教学习等技术。

随着人工智能技术的研究和进步，人工智能技术在多个领域展开研究和应用，本申请实施例针对应用程序中的控件进行测试的过程主要涉及人工智能技术中的机器学习等技术，具体通过以下实施例进行说明。

为了更好的理解本申请实施例提供的测试方法，下面先对本申请实施例适用的测试系统的构架进行描述。请参阅图1，图1是本申请实施例提供的测试系统的架构示意图。如图1所示，测试系统可以包括客户端101、测试设备102，客户端101和测试设备102之间可以通过网络连接，比如通过无线网络连接等。客户端101和测试设备102均可以为一个或多个，本申请对此不作限定。

客户端101为目标应用对应的应用程序，目标应用是指需要测试的应用，可以是通讯应用、支付应用、游戏应用等各种应用。客户端101可以安装在终端设备上，终端设备可以是智能电视、具有无线通信功能的手持设备(例如智能手机、平板电脑)、计算设备(例如个人电脑(personal computer,PC)、车载设备、可穿戴设备或者其他智能装置等，但并不局限于此。

测试设备102可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。

请参见图2，图2是本申请实施例提供的一种测试方法的流程示意图，测试设备102会获取客户端101对应的目标应用的显示界面信息集，显示界面信息集包括客户端101对应的目标应用中的各个显示界面和每个显示界面的控件信息。测试设备102通过对客户端101对应的目标应用执行自动探索根据自动探索结果确定基础测试路径，然后对基础测试路径中包括的显示界面进行起始点配置确定起始显示界面和终止显示界面，从而获取跳转路径，并根据跳转路径和基础测试路径生成待测试路径，最后根据待测试路径的路径信息对客户端101对应的目标应用执行自动化测试。

其中，测试设备102在获取待测试路径的路径信息对客户端101对应的目标应用中执行自动化测试时，首先会从客户端101对应的目标应用上获取目标应用的当前显示界面的待比较图像，若待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面时，则从当前显示界面包括的控件中确定待测试控件，并针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像，根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，可以提高针对应用程序的测试效率和测试结果的准确性。

可以理解的是，本申请实施例描述的系统的架构示意图是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域普通技术人员可知，随着系统架构的演变和新业务场景的出现，本申请实施例提供的技术方案对于类似的技术问题，同样适用。

请参见图3，图3为本申请提供的另一种测试方法的流程示意图，以该方法应用于图1中的测试设备102为例进行说明，包括以下步骤：

S301、获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径。

在一个实施例中，第一显示界面为起始显示界面，第二显示界面为终止显示界面，跳转路径可以直接从起始显示界面跳转到终止显示界面，也可以在起始显示界面跳转至终止显示界面之间包括一个或多个显示界面，其中，起始显示界面、终止显示界面，和该一个或多个显示界面存在跳转关系，跳转关系可以指示显示界面之间的有向跳转，即显示界面A与显示界面B存在跳转关系，表示可以从显示界面A跳转至显示界面B。

其中，显示界面也可以称为用户界面(User Interface,UI)，显示界面可以是目标应用的登录界面，也可以是目标应用的首页显示界面，还可以是目标应用的设置界面等，本申请对此不作限定。

S302、获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果。

具体地，在针对目标应用进行测试时，测试设备可以在测试的过程中，通过自动化测试工具(例如AITEST SDK框架)等从客户端中获取目标应用在当前显示界面的显示图像，并将当前显示界面的显示图像作为待比较图像。

进一步地，将待比较图像与待测试路径中的各个显示界面进行比较，得到的比较结果可以指示待测试路径中是否存在界面图像与待比较图像相匹配的匹配显示界面，根据匹配显示界面是否存在从而确定是否可以进一步执行测试。

S303、若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面。

其中，当待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面时，表示待测试路径中包括待比较图像，可以根据待测试路径进一步执行测试。

具体地，首先将待测试路径中匹配显示界面的下一显示界面作为目标显示界面，然后对当前显示界面中包括的控件进行分析，根据当前显示界面中的各个控件的显示界面跳转信息确定针对各个控件执行控件触发操作后得到的下一显示界面，最后将各个控件执行控件触发操作后得到的下一显示界面与目标显示界面进行匹配，将与目标显示界面相匹配的下一显示界面对应的控件作为待测试控件，当存在多个待测试控件时，可以随机选取一个进行测试，也可以根据历史点击次数选取点击次数最少或最多的控件作为待测试控件，本申请对此不作限定。

其中，控件是显示界面中能够触发界面跳转的部件，例如，可以是操作按钮、操作手势、动作、表情等，本申请对此不作限定。

S304、针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像。

具体地，当确定待测试控件后，测试设备可以根据待测试控件的位置信息在客户端上模拟点击执行控件触发操作，也可以通过模拟操作手势、模拟动作或模拟表情等针对待测试控件执行控件触发操作，并获取控件触发操作后目标应用的跳转显示界面的界面图像。

S305、根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

具体地，在确定跳转显示界面的界面图像以及目标显示界面的界面图像后，可以根据跳转显示界面的界面图像和目标显示界面的界面图像确定待测试控件是否能正确实现显示界面的跳转，从而生成相应的测试结果。

在本申请实施例中，首先获取目标应用的待测试路径和目标应用的当前显示界面的待比较图像，通过将待比较图像与待测试路径中的各个显示界面的界面图像进行比较，得到比较结果，若比较结果指示待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面，则从当前显示界面所包括的控件中确定待测试控件，并针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像，最后根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，因此本申请可以利用待测试路径自动化地执行控件触发操作，来对应用程序中的待测试控件进行测试，从而可以提高针对应用程序的测试效率和测试结果的准确性。

请参见图4，图4为本申请提供的另一种测试方法的流程示意图，以该方法应用于图1中的测试设备102为例进行说明，包括以下步骤：

S401、获取所述目标应用的基础测试路径，所述基础测试路径为从所述第一显示界面跳转至所述第二显示界面的初始跳转路径。

其中，第一显示界面为起始显示界面，第二显示界面为终止显示界面，初始跳转路径是从起始显示界面跳转到终止显示界面。

在一个实施例中，为了获取基础测试路径，可以将目标应用中的任一显示界面作为第一显示界面，然后通过随机选取的方法(或选取历史点击次数最少或做多的方式)从第一显示界面中确定出要点击的控件，并确定针对第一显示界面中要点击的控件执行控件触发操作后对应的下一显示界面，进一步地可以针对下一显示界面继续执行控件触发操作，通过设定控件触发操作停止条件，从而得到基础测试路径。

在一个可行的实施例中，为了获取基础测试路径，可以将目标应用中的任意两个显示界面分别作为第一显示界面和第二显示界面，通过自动化测试工具探索第一显示界面跳转至第二显示界面时包括的显示界面，得到基础测试路径。

S402、获取所述基础测试路径中的一对或多对相邻显示界面之间的跳转路径。

在一个实施例中，针对基础测试路径中一对相邻显示界面，将这一对相邻显示界面作为起始显示界面和终止显示界面，如图5所示，以显示界面b->显示界面d(显示界面b跳转至显示界面d)为例，其中，显示界面b为起始显示界面，显示界面d为终止显示界面。然后确定在起始显示界面跳转至终止显示界面之间包括的显示界面，并根据在起始显示界面跳转至终止显示界面之间包括的显示界面确定跳转路径。

具体地，起始显示界面跳转至终止显示界面之间包括的显示界面可以为零个，也可以为一个，还可以为多个，本申请对此不作限定，如图5所示，在显示界面b跳转至显示界面d之间包括一个显示界面(显示界面c)，在显示界面d跳转至显示界面h之间包括一个(显示界面e)或二个显示界面(显示界面f和显示界面g)，然后根据起始显示界面、终止显示界面，以及在起始显示界面跳转至终止显示界面之间包括的显示界面确定跳转路径(例如图5中的显示界面b->显示界面d和显示界面d->显示界面h)。

在一个实施例中，当一对相邻显示界面之间包括的显示界面大于预设个数时，可能是因为相邻显示界面是个环形回路，则放弃对该路径的测试。

S403、根据所述一对或多对相邻显示界面之间的跳转路径以及所述基础测试路径，确定待测试路径。

具体地，将基础测试路径和一对或多对相邻显示界面之间的跳转路径进行合成处理，例如采用笛卡尔积方式，得到待测试路径，当一对相邻显示界面存在多个跳转路径时，可以随机选取，也可以根据测试需要选取，本申请对此不作限定。

在一个实施例中，当一对相邻显示界面之间的跳转路径包括的显示界面的个数为二个时，即跳转路径只存在一对相邻显示界面，将其与基础测试路径合成后得到的待测试路径为基础测试路径。

请参见表1，从表1中可以看出，相比于基础测试路径，待测试路径的路径数量从6上升至37，覆盖的显示界面数量从17上升至22，因此通过跳转路径对基础测试路径进行扩展可以提高显示界面的测试覆盖率，同时相比于基础测试路径，待测试路径的路径数量的增加也可以对显示界面中更多的控件进行测试，提高显示界面控件的测试覆盖率。

表1

路径类别	路径数量	显示界面数量	显示界面覆盖率
				基础测试路径	6	17	65.4％(17/26)
待测试路径	37	22	94.6％(22/26)

S404、获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果。

在一个实施例中，将待比较图像与待测试路径中的各个显示界面的界面图像进行比较，得到比较结果的过程包括以下步骤：

(1)将待比较图像与待测试路径中的各个显示界面的界面图像进行比较，确定待比较图像和各个显示界面的界面图像之间的相似度。

具体地，为了将待比较图像与待测试路径中的各个显示界面的界面图像进行比较，需要获取待比较图像的图像特征和待测试路径中的各个显示界面的界面图像的图像特征，包括尺度不变特征变换(Scale-invariant feature transform，SIFT)特征、颜色直方图特征、方向梯度直方图(Histogram of Oriented Gradient,HOG)特征、图像特征(Oriented FAST and Rotated BRIEF,ORB)等图像特征中的一个或多个，本申请对此不作限定。进一步地，将待比较图像的图像特征和各个显示界面的界面图像的图像特征进行相似度匹配，例如利用蛮力(Brute-Force)算法法相似度匹配算法等进行匹配，确定待比较图像和各个显示界面之间的相似度。

在一个实施例中，考虑到在对待测试控件进行测试时，可能需要在不同分辨率的客户端上显示目标应用的显示界面，导致待比较图像和各个显示界面的界面图像可能分辨率不一致，因此本申请采用ORB表征图像的图像特征，ORB是一种具有尺度不变性和旋转不变性的特征点描述方法，该方法利用增强的快速关键点提取(Features from AcceleratedSegment Test,FAST)方法提取关键点，并使用方向归一化的二进制描述子(Binary RobustIndependent Elementary Features,BRIEF)对关键点进行描述。当进行特征提取时，ORB首先对图像构建图像金字塔，然后运用FAST方法提取金字塔每一层的角点，并通过Harris角点检测方法保留前N个角点作为关键点。当计算特征点描述子时，首先定义以关键点为中心的二维区域，并通过图像矩找到区域质心。然后将关键点到区域质心的向量作为关键点方向，并将图像按区域方向旋转。最后，使用BRIEF算法对图像区域内256个预先定义的像素进行二进制测试生成256位的字符串作为关键点的特征描述子。

(2)根据待比较图像和各个显示界面的界面图像之间的相似度，确定各个显示界面中是否存在界面图像与待比较图像之间的相似度大于或等于相似度阈值的显示界面。

具体地，获取各个显示界面与待比较图像之间的相似度，并确定是否存在大于或等于相似度阈值对应的显示界面。

(3)若存在大于或等于相似度阈值对应的显示界面，则得到用于指示待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面的比较结果，并将界面图像与待比较图像之间的相似度大于或等于相似度阈值的显示界面确定为匹配显示界面。

具体地，若存在大于或等于相似度阈值对应的显示界面，则将该显示界面作为匹配显示界面。

在一个实施例中，考虑到目标应用的界面图像变化较少，例如游戏应用中人物细节的设置变化，可能存在多个相似度大于或等于相似度阈值的显示界面，则确定最大相似度对应的显示界面，并将该显示界面作为匹配显示界面。

(4)若不存在大于或等于相似度阈值对应的显示界面，则得到用于指示待测试路径中不存在界面图像与待比较图像相匹配的匹配显示界面的比较结果。

在一个实施例中，若比较结果指示待测试路径中不存在界面图像与待比较图像相匹配的匹配显示界面时，则切换目标应用的显示界面，获取目标应用切换后的显示界面的界面图像，将切换后的显示界面的界面图像作为待比较图像，并与待测试路径中的各个显示界面的界面图像进行比较，得到比较结果，直至比较结果指示待测试路径中存在界面图像与当前显示界面的界面图像相匹配的匹配显示界面，否则继续切换目标应用的显示界面。

S405、若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面。

具体地，当比较结果指示待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面时，需要从当前显示界面所包括的控件中确定待测试控件。

在一个实施例中，如图6所示，从当前显示界面所包括的控件中确定待测试控件的过程包括以下步骤：

S601、根据所述待测试路径和所述匹配显示界面确定所述目标显示界面。

具体地，若比较结果指示待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面，则根据待测试路径和匹配显示界面确定匹配显示界面的下一显示界面，并将匹配显示界面的下一显示界面作为目标显示界面。

S602、获取所述当前显示界面的控件信息，所述控件信息包括所述当前显示界面中各个控件的显示界面跳转信息。

具体地，控件信息至少包括显示界面中各个控件的显示界面跳转信息。其中，控件的显示界面跳转信息指示了针对控件执行控件触发操作后的下一显示界面。

在一个实施例中，为了获取当前显示界面的控件信息，可以通过调用控件识别模型获取，控件识别模型可以是利用训练样本集对快速区域卷积神经网络(Fast RegionConvolutional Neural Network,Faster R-CNN)和RefineNet(提炼网络)等网络训练得到的，其中训练样本集中的每个样本集包括样本显示界面和样本显示界面的控件信息。如下所示为当前显示界面的控件信息的一个实例：

其中，当前显示界面为fileName，labels的每个元素表示一个控件，nextUI表示控件的显示界面跳转信息，x、y、w、h是控件的位置信息，click_Num为针对控件执行的点击操作，除了是点击操作还可以是滑动操作、表情操作等，label表示控件的标签类型，包括：关闭(close)、返回(return)、菜单(tag)、其他(other)，在一些可行的实施例中，在选取待测试控件时，也可以根据控件的标签类型进行确定。

S603、根据所述各个控件的显示界面跳转信息从所述当前显示界面所包括的控件中确定与所述目标显示界面相关联的控件。

具体地，根据各个控件的显示界面跳转信息可以确定执行控件触发操作后哪一个控件对应的显示界面与目标显示界面相匹配，将相匹配的显示界面对应的控件作为与目标显示界面相关联的控件。

S604、将所述与所述目标显示界面相关联的控件确定为待测试控件。

具体地，当存在多个与目标显示界面相关联的控件时，可以随机选取，也可根据历史点击次数选取，本申请对此不作限定。

通过本实施例，可以通过目标显示界面和待测试路径自动化地在显示界面上选取控件作为待测试控件进行测试。

S406、确定所述待测试控件在所述当前显示界面中的位置信息。

在一个实施例中，当待测试控件为操作按钮时，可以根据待测试控件的控件信息确定待测试控件在当前显示界面中的位置信息，也可以是通过自动化测试工具确定，本申请对此不作限定。

S407、针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像。

在一个实施例中，针对待测试控件执行控件触发操作时，可以根据待测试控件在当前显示界面中的位置信息，针对待测试控件执行模拟点击操作，从而获取执行控件触发操作后目标应用的跳转显示界面的界面图像。

S408、根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

在一个实施例中，为了确定关于待测试控件的测试结果，可以包括以下步骤：

(1)将跳转显示界面的界面图像与目标显示界面的界面图像进行比较，确定跳转显示界面的界面图像与目标显示界面的界面图像是否相匹配。

(2)若跳转显示界面的界面图像与目标显示界面的界面图像相匹配，则确定待测试控件测试通过。

(3)若跳转显示界面的界面图像与目标显示界面的界面图像不相匹配，则确定待测试控件测试不通过。

具体地，在确定跳转显示界面的界面图像以及目标显示界面的界面图像后，可以将跳转显示界面的界面图像和目标显示界面的界面图像进行比较，若跳转显示界面的界面图像与目标显示界面的界面图像相匹配，表示待测试控件通过，待测试控件的功能正常，能够实现显示界面的正常跳转，若跳转显示界面的界面图像与目标显示界面的界面图像不相匹配，或目标应用出现故障时，则确定待测试控件测试不通过，待测试控件的功能存在问题，可以生成测试报告给开发人员进行故障修正。

在一个实施例中，根据跳转显示界面的界面图像检测跳转显示界面是否加载完成，若是，则执行根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果的步骤。

在一个可能的实施例中，可能由于网络延迟，导致获取到的跳转显示界面的界面图像没有加载完成，可以首先针对跳转显示界面进行检测，当跳转显示界面加载完成时，则根据跳转显示界面的界面图像与目标显示界面的界面图像确定关于待测试控件的测试结果。

在一个可行的实施例中，若获取到的跳转显示界面未加载完成，则继续获取目标应用的跳转显示界面切换后的显示界面。

在本申请实施例中，通过跳转路径对基础测试路径进行扩展得到待测试路径，然后根据目标应用的当前显示界面的待比较图像与待测试路径中的各个显示界面的界面图像确定待测试路径中是否存在界面图像与待比较图像相匹配的匹配显示界面，当存在匹配显示界面时，则从当前显示界面所包括的控件中确定待测试控件，并针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像，最后根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，因此本申请可以利用待测试路径自动化地执行控件触发操作，来对应用程序中的待测试控件进行测试，从而可以提高针对应用程序的测试效率和测试结果的准确性，同时通过对基础测试路径进行扩展，还可以提高针对应用程序的测试覆盖率。

综上所述，本申请实施例提供的测试方法的主要流程如图7所示，其中，显示界面信息集包括目标应用中的各个显示界面和每个显示界面的控件信息。首先在自动化测试工具上加载显示界面信息集和待测试路径，然后从客户端上获取显示的当前显示界面，并确定待测试路径中是否包含当前显示界面的界面图像，当包含时，将当前显示界面作为待测试图像，并根据显示界面信息集获取待测试图像的控件信息，根据待测试图像的控件信息中各个控件的显示界面跳转信息和待测试路径确定待测试控件的位置信息，在客户端上模拟点击，当根据模拟点击后的显示界面得到待测试控件的测试结果，同事根据模拟点击后的显示界面确定待测试路径是否遍历完成。其中，当模拟点击后的显示界面不是待测试控件的跳转显示界面图像时，可以继续获取客户端中的当前显示界面，直至达到预先设定的循环次数或直到出现故障。本申请可以提高针对应用程序的测试效率和测试结果的准确性。

如图8所示，图8是本申请实施例提供的一种测试装置的结构示意图，所述装置包括：

获取模块801，用于获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

所述获取模块801，还用于获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

处理模块802，用于若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

所述获取模块801，还用于针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

所述处理模块802，还用于根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

在一个实施例中，所述处理模块802，具体用于：

根据所述待测试路径和所述匹配显示界面确定所述目标显示界面；

获取所述当前显示界面的控件信息，所述控件信息包括所述当前显示界面中各个控件的显示界面跳转信息；

根据所述各个控件的显示界面跳转信息从所述当前显示界面所包括的控件中确定与所述目标显示界面相关联的控件；

将所述与所述目标显示界面相关联的控件确定为待测试控件。

在一个实施例中，所述处理模块802，具体用于：

将所述跳转显示界面的界面图像与所述目标显示界面的界面图像进行比较，确定所述跳转显示界面的界面图像与所述目标显示界面的界面图像是否相匹配；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像相匹配，则确定所述待测试控件测试通过；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像不相匹配，则确定所述待测试控件测试不通过。

在一个实施例中，所述处理模块802，具体用于：

根据所述跳转显示界面的界面图像检测所述跳转显示界面是否加载完成；

若是，则执行所述根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果的步骤。

在一个实施例中，所述获取模块801，具体用于：

获取所述目标应用的基础测试路径，所述基础测试路径为从所述第一显示界面跳转至所述第二显示界面的初始跳转路径；

获取所述基础测试路径中的一对或多对相邻显示界面之间的跳转路径；

根据所述一对或多对相邻显示界面之间的跳转路径以及所述基础测试路径，确定待测试路径。

在一个实施例中，所述获取模块801，具体用于：

将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，确定所述待比较图像和所述各个显示界面的界面图像之间的相似度；

根据所述待比较图像和所述各个显示界面的界面图像之间的相似度，确定所述各个显示界面中是否存在界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面；

若存在，则得到用于指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果，并将所述界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面确定为所述匹配显示界面；

若不存在，则得到用于指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果。

在一个实施例中，所述获取模块801，具体用于：

确定所述待测试控件在所述当前显示界面中的位置信息；

根据所述待测试控件在所述当前显示界面中的位置信息，针对所述待测试控件执行模拟点击操作。

在一个实施例中，所述获取模块801，具体用于：

若所述比较结果指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面时，则切换所述目标应用的显示界面；

获取所述目标应用切换后的显示界面的界面图像；

将所述切换后的显示界面的界面图像作为待比较图像，并执行所述将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果的步骤。

在本申请实施例中，首先获取目标应用的待测试路径和目标应用的当前显示界面的待比较图像，若待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面，则从当前显示界面所包括的控件中确定待测试控件，并针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像，最后根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，可以提高针对应用程序的测试效率和测试结果的准确性。

如图9所示，图9是本申请实施例提供的一种计算机设备的结构示意图，该设备内部结构如图9所示，包括：一个或多个处理器901、存储器902、通信接口903。上述处理器901、存储器902和通信接口903可通过总线904或其他方式连接，本申请实施例以通过总线904连接为例。

其中，处理器901(或称CPU(Central Processing Unit，中央处理器))是计算机设备的计算核心以及控制核心，其可以解析计算机设备内的各类指令以及处理计算机设备的各类数据，例如：CPU可以用于解析用户向计算机设备所发送的开关机指令，并控制计算机设备进行开关机操作；再如：CPU可以在计算机设备内部结构之间传输各类交互数据，等等。通信接口903可选的可以包括标准的有线接口、无线接口(如Wi-Fi、移动通信接口等)，受处理器901的控制用于收发数据。存储器902(Memory)是计算机设备中的记忆设备，用于存放程序和数据。可以理解的是，此处的存储器902既可以包括计算机设备的内置存储器，当然也可以包括计算机设备所支持的扩展存储器。存储器902提供存储空间，该存储空间存储了计算机设备的操作系统，可包括但不限于：Windows系统、Linux系统等等，本申请对此并不作限定。

在一个实施例中，所述处理器901，具体用于：

获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

在一个实施例中，所述处理器901，具体用于：

根据所述待测试路径和所述匹配显示界面确定所述目标显示界面；

获取所述当前显示界面的控件信息，所述控件信息包括所述当前显示界面中各个控件的显示界面跳转信息；

根据所述各个控件的显示界面跳转信息从所述当前显示界面所包括的控件中确定与所述目标显示界面相关联的控件；

将所述与所述目标显示界面相关联的控件确定为待测试控件。

在一个实施例中，所述处理器901，具体用于：

将所述跳转显示界面的界面图像与所述目标显示界面的界面图像进行比较，确定所述跳转显示界面的界面图像与所述目标显示界面的界面图像是否相匹配；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像相匹配，则确定所述待测试控件测试通过；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像不相匹配，则确定所述待测试控件测试不通过。

在一个实施例中，所述处理器901，具体用于：

根据所述跳转显示界面的界面图像检测所述跳转显示界面是否加载完成；

若是，则执行所述根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果的步骤。

在一个实施例中，所述处理器901，具体用于：

获取所述目标应用的基础测试路径，所述基础测试路径为从所述第一显示界面跳转至所述第二显示界面的初始跳转路径；

获取所述基础测试路径中的一对或多对相邻显示界面之间的跳转路径；

根据所述一对或多对相邻显示界面之间的跳转路径以及所述基础测试路径，确定待测试路径。

在一个实施例中，所述处理器901，具体用于：

将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，确定所述待比较图像和所述各个显示界面的界面图像之间的相似度；

根据所述待比较图像和所述各个显示界面的界面图像之间的相似度，确定所述各个显示界面中是否存在界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面；

若存在，则得到用于指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果，并将所述界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面确定为所述匹配显示界面；

若不存在，则得到用于指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果。

在一个实施例中，所述处理器901，具体用于：

确定所述待测试控件在所述当前显示界面中的位置信息；

根据所述待测试控件在所述当前显示界面中的位置信息，针对所述待测试控件执行模拟点击操作。

在一个实施例中，所述处理器901，具体用于：

若所述比较结果指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面时，则切换所述目标应用的显示界面；

获取所述目标应用切换后的显示界面的界面图像；

将所述切换后的显示界面的界面图像作为待比较图像，并执行所述将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果的步骤。

在本申请实施例中，首先获取目标应用的待测试路径和目标应用的当前显示界面的待比较图像，若待测试路径中存在界面图像与待比较图像相匹配的匹配显示界面，则从当前显示界面所包括的控件中确定待测试控件，并针对待测试控件执行控件触发操作，获取执行控件触发操作后目标应用的跳转显示界面的界面图像，最后根据跳转显示界面的界面图像以及目标显示界面的界面图像，确定关于待测试控件的测试结果，可以提高针对应用程序的测试效率和测试结果的准确性。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述测试方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。

本申请一个或多个实施例还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各方法的实施例中所执行的步骤。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种测试方法，其特征在于，所述方法包括：

获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

2.根据权利要求1所述的方法，其特征在于，所述从所述当前显示界面所包括的控件中确定待测试控件，包括：

根据所述待测试路径和所述匹配显示界面确定所述目标显示界面；

获取所述当前显示界面的控件信息，所述控件信息包括所述当前显示界面中各个控件的显示界面跳转信息；

根据所述各个控件的显示界面跳转信息从所述当前显示界面所包括的控件中确定与所述目标显示界面相关联的控件；

将所述与所述目标显示界面相关联的控件确定为待测试控件。

3.根据权利要求1所述的方法，其特征在于，所述根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果，包括：

将所述跳转显示界面的界面图像与所述目标显示界面的界面图像进行比较，确定所述跳转显示界面的界面图像与所述目标显示界面的界面图像是否相匹配；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像相匹配，则确定所述待测试控件测试通过；

若所述跳转显示界面的界面图像与所述目标显示界面的界面图像不相匹配，则确定所述待测试控件测试不通过。

4.根据权利要求1～3任一项所述的方法，其特征在于，所述方法还包括：

根据所述跳转显示界面的界面图像检测所述跳转显示界面是否加载完成；

若是，则执行所述根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果的步骤。

5.根据权利要求1～3任一项所述的方法，其特征在于，所述获取目标应用的待测试路径，包括：

获取所述目标应用的基础测试路径，所述基础测试路径为从所述第一显示界面跳转至所述第二显示界面的初始跳转路径；

获取所述基础测试路径中的一对或多对相邻显示界面之间的跳转路径；

根据所述一对或多对相邻显示界面之间的跳转路径以及所述基础测试路径，确定待测试路径。

6.根据权利要求1～3任一项所述的方法，其特征在于，所述将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果，包括：

将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，确定所述待比较图像和所述各个显示界面的界面图像之间的相似度；

根据所述待比较图像和所述各个显示界面的界面图像之间的相似度，确定所述各个显示界面中是否存在界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面；

若存在，则得到用于指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果，并将所述界面图像与所述待比较图像之间的相似度大于或等于相似度阈值的显示界面确定为所述匹配显示界面；

若不存在，则得到用于指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面的比较结果。

7.根据权利要求1～3任一项所述的方法，其特征在于，所述待测试控件为操作按钮，所述针对所述待测试控件执行控件触发操作，包括：

确定所述待测试控件在所述当前显示界面中的位置信息；

根据所述待测试控件在所述当前显示界面中的位置信息，针对所述待测试控件执行模拟点击操作。

8.根据权利要求1所述的方法，其特征在于，所述方法还包括：

若所述比较结果指示所述待测试路径中不存在界面图像与所述待比较图像相匹配的匹配显示界面时，则切换所述目标应用的显示界面；

获取所述目标应用切换后的显示界面的界面图像；

将所述切换后的显示界面的界面图像作为待比较图像，并执行所述将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果的步骤。

9.一种测试装置，其特征在于，所述装置包括：

获取模块，用于获取目标应用的待测试路径，所述待测试路径为从第一显示界面跳转至第二显示界面的跳转路径；

所述获取模块，还用于获取测试过程中所述目标应用的当前显示界面的待比较图像，将所述待比较图像与所述待测试路径中的各个显示界面的界面图像进行比较，得到比较结果；

处理模块，用于若所述比较结果指示所述待测试路径中存在界面图像与所述待比较图像相匹配的匹配显示界面，则从所述当前显示界面所包括的控件中确定待测试控件，所述待测试控件与所述待测试路径中的目标显示界面相关联，所述目标显示界面为所述待测试路径中所述匹配显示界面的下一显示界面；

所述获取模块，还用于针对所述待测试控件执行控件触发操作，获取执行所述控件触发操作后所述目标应用的跳转显示界面的界面图像；

所述处理模块，还用于根据所述跳转显示界面的界面图像以及所述目标显示界面的界面图像，确定关于所述待测试控件的测试结果。

10.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1～8任一项所述的测试方法。

Images