CN115934560A - 一种用户界面ui自动化测试方法、装置、设备及介质 - Google Patents

Abstract

本申请涉及界面测试领域，具体涉及一种用户界面UI自动化测试方法、装置、设备及介质，用于解决UI自动化测试效率低的问题。该方法包括：对用户在被测界面上的操作过程进行录制；在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将动态数据转换成固定数据；将固定数据发送到被测界面，以使用户获取固定数据；在录制完成后，对录制内容进行回放，若回放成功，则确定被测界面功能正常。由于在本申请中使用的是挡板服务器，挡板服务器可以将动态数据转换成固定数据，可以提高回放的成功率，从而提高测试效率。

Description

一种用户界面UI自动化测试方法、装置、设备及介质

技术领域

本申请涉及界面测试领域，具体涉及一种用户界面UI自动化测试方法、装置、设备及介质。

背景技术

在应用软件进行功能测试或者专项测试时，由于移动端版本迭代频繁，并且对于一个应用软件来说，通常存在多个后台服务器环境，容易出现测试数据资源紧张、测试环境不稳定等现象。

在测试过程中，有些测试会涉及到获取动态变化的数据(例如动态获取验证码、二维码等，过1分钟或者5分钟就会失效)，这些动态变化的数据可能会导致在用户界面UI自动化测试过程中回放失败；并且，现有技术在自动化测试过程中，因为存在一些消耗性测试数据，互斥的数据，数据被破坏等，不能同时在多台设备上进行自动化测试，需要准备充足的测试数据才可能完成，严重降低了测试效率。

发明内容

本申请实施例提供一种用户界面UI自动化测试方法、装置、设备及介质，用于解决UI自动化测试效率低的问题。

第一方面，本申请实施例提供一种用户界面UI自动化测试方法，所述方法包括：

对用户在被测界面上的操作过程进行录制；

在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将所述动态数据转换成固定数据；

将所述固定数据发送到所述被测界面，以使所述用户获取所述固定数据；

在录制完成后，对录制内容进行回放，若回放成功，则确定所述被测界面功能正常。

在本申请实施例提供的用户界面UI自动化测试方法中，由于使用的是挡板服务器，挡板服务器可以将动态数据转换成固定数据，可以提高回放的成功率，从而提高测试效率。

在一种可能的实施例中，所述对用户在被测界面上的操作过程进行录制之前，还包括：

根据所述被测界面的属性，对所述挡板服务器进行数据资源配置。

在一种可能的实施例中，所述对用户在被测界面上的操作过程进行录制，包括：

识别所述用户在被测界面上进行的操作对应的操作位置和操作控件；

将识别到的所述操作位置和所述操作控件的数据记录并保存。

在一种可能的实施例中，所述对录制内容进行回放，包括：

基于智能查找算法定位当前要回放的操作位置和操作控件；

根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。

在一种可能的实施例中，通过下列方式判断回放是否成功：

若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败。

在一种可能的实施例中，所述通过挡板服务器将所述动态数据转换成固定数据，包括：

通过所述挡板服务器获取所述操作控件的类型信息；

基于所述操作控件的类型信息，将所述动态数据转换成与所述操作控件对应的固定数据。

在一种可能的实施例中，所述对录制内容进行回放后，还包括：

若回放失败，则确定所述被测界面功能异常，并进行告警。

第二方面，本申请提供一种户界面UI自动化测试装置，所述装置包括：

录制单元，用于对用户在被测界面上的操作过程进行录制；

转换单元，用于在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将所述动态数据转换成固定数据；将所述固定数据发送到所述被测界面，以使所述用户获取所述固定数据；

回放单元，用于在录制完成后，对录制内容进行回放，若回放成功，则确定所述被测界面功能正常。

在一种可能的实施例中，所述装置还包括：

配置单元，用于根据所述被测界面的属性，对所述挡板服务器进行数据资源配置。

在一种可能的实施例中，所述录制单元具体用于：

识别所述用户在被测界面上进行的操作对应的操作位置和操作控件；

将识别到的所述操作位置和所述操作控件的数据记录并保存。

在一种可能的实施例中，所述回放单元具体用于：

基于智能查找算法定位当前要回放的操作位置和操作控件；

根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。

在一种可能的实施例中，通过下列方式判断回放是否成功：

若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败。

在一种可能的实施例中，所述转换单元具体用于：

通过所述挡板服务器获取所述操作控件的类型信息；

基于所述操作控件的类型信息，将所述动态数据转换成与所述操作控件对应的固定数据。

在一种可能的实施例中，所述回放单元还用于：

若回放失败，则确定所述被测界面功能异常，并进行告警。

第三方面，本申请提供一种电子设备，包括：

存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序指令执行第一方面中任一项所述的方法包括的步骤。

第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被计算机执行时，使所述计算机执行第一方面中任一项所述的方法。

第五方面，本申请提供了一种计算机程序产品，所述计算机程序产品包括：计算机程序代码，当所述计算机程序代码在计算机上运行时，使得计算机执行第一方面中任一项所述的方法。

附图说明

图1为本申请实施例提供的一种UI自动化测试方法的流程示意图；

图2为本申请实施例提供的一种录制回放的流程示意图；

图3a为本申请实施例提供的一种具体的应用场景示意图；

图3b为本申请实施例提供的另一种具体的应用场景示意图；

图4为本申请实施例提供的一种用户界面UI自动化测试装置的结构图；

图5为本申请实施例提供的一种电子设备的结构图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚明白，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以按不同于此处的顺序执行所示出或描述的步骤。

本申请的说明书和权利要求书及上述附图中的术语“第一”和“第二”是用于区别不同对象，而非用于描述特定顺序。此外，术语“包括”以及它们任何变形，意图在于覆盖不排他的保护。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请中的“多个”可以表示至少两个，例如可以是两个、三个或者更多个，本申请实施例不做限制。

本申请技术方案中，对数据的采集、传播、使用等，均符合国家相关法律法规要求。

在介绍本申请实施例所提供的一种用户界面UI自动化测试方法之前，为了便于理解，下面首先对本申请实施例的技术背景进行详细介绍。

一些应用软件项目在进行功能测试，兼容性等专项测试时存在移动端版本迭代频繁，具有多个后台服务器环境以及测试数据资源紧张等现象，在进行回归测试的时候会存在重复执行测试案例，环境不稳定导致测试阻塞，延迟版本投产；在进行兼容性测试专项会因为没有充足的测试数据，环境不稳定，需要投入更多的人力和时间去实施。

更具体的说，现有技术中存在如下两方面缺陷：

(1)UI自动化测试过程中因数据变化导致回放失败，例如动态获取验证码，动态获取二维码，过1分钟或者5分钟就会失效，回放时导致脚本执行失败；

(2)现有技术在自动化测试过程中，因为存在一些消耗性测试数据，互斥的数据，数据被破坏等，不能同时在多台设备上进行自动化测试，需要准备充足的测试数据才可能完成。

针对此现象，为了提升项目迭代的回归测试的执行成功率，节约人工回归的时间，节约预埋测试数据的时间，提升工作效率，本申请在项目中实践了基于挡板环境进行的自动化测试，解决了以上问题。

如图1所示，为本申请实施例提供的一种用户界面UI自动化测试方法，包括以下步骤：

S101、对用户在被测界面上的操作过程进行录制；

S102、在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将动态数据转换成固定数据；

S103、将固定数据发送到被测界面，以使用户获取固定数据；

S104、在录制完成后，对录制内容进行回放，若回放成功，则确定被测界面功能正常。

本申请实施例提供的用户界面UI自动化测试方法，对用户在被测界面上的操作过程进行录制；在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将动态数据转换成固定数据；将固定数据发送到被测界面，以使用户获取固定数据；在录制完成后，对录制内容进行回放，若回放成功，则确定被测界面功能正常。由于使用挡板服务器将动态数据转换成固定数据，可以提高回放的成功率，从而提高测试效率。

值得说明的，这里回放的并不是单纯的视频，而是根据录制的内容进行相应的操作，若录制过程中某一操作需要获取例如验证码等数据，那么回放的时候仍然需要获取数据。

在一些实施例中，对用户在被测界面上的操作过程进行录制之前，还可以根据被测界面的属性，对挡板服务器进行数据资源配置。这里的数据配置指的是配置测试所需要的各种数据，例如测试某一应用软件时，用户登录需要用户自身的手机号码，当用户登录之后在其他设备就不能再次登录，本申请由于使用的是挡板服务器，可以直接在挡板服务器中配置大量测试数据，例如配置大量虚拟的手机号码，从而可以使得测试可以在多台设备上同时进行，批量进行自动化测试，从而可以提升工作效率。

具体的测试工具可以使用Soloπ，这是一种面向移动端实现的一套无线化、非侵入、免Root的Android专项工具，能够脱离PC环境，在移动端实现自动化的功能、性能及兼容性测试，降低广大测试开发者的测试成本，提升测试效率。

本申请中使用的是挡板服务器，也就是测试在挡板环境下，挡板指的是在开发或者测试环境中模拟被调用系统的服务或者功能，并提供相应接口调用时的返回值，协助调用系统进行开发测试的一类系统或者服务。而挡板数据就是为了模拟真实的网络请求，而编写的假数据，这种数据虽然是编写出来的，但是符合真实环境中的数据格式。这种数据一般存储在程序的本地，然后直接从本地调用后看显示和相关逻辑是否正常，如果正常，那么就说明当接入正常环境后仍然可以正常的运行。在测试过程中主要利用的是录制回放功能，录制回放功能可以基于AccessibilityService、ChromeDevToolsProtocol、图像识别三种模式实现精确查找，可以在设备本地实现回放，也可以转换为Appium/Macaca等框架的脚本，对接云测平台，另外，为了降低用例维护的成本，在端上还提供了用例编辑、流程控制的功能。

如图2所示，为本申请实施例提供的录制回放的示意图，在录制过程中，Soloπ会对用户的操作进行拦截，识别用户操作的位置，高亮当前操作的控件，记录用户当前要做的操作类型，在每一步操作后，将操作类型及目标控件的各种信息都记录下来。这里的控件信息包括控件的ID、文字等基本信息，以及相对布局、截图信息等。在回放时，Soloπ会逐条解析之前录制的数据，通过智能查找算法，综合各种属性，定位目标控件，找到控件后，就会执行相应的操作，如点击、滑动等。在所有步骤执行后，会展示本次回放的结果，包括日志、截图等信息，作为本次回放的总结。

在一些实施例中，对用户在被测界面上的操作过程进行录制，具体可以为识别用户在被测界面上进行的操作对应的操作位置和操作控件；将识别到的操作位置和操作控件的数据记录并保存，记录并保存以便后续回放。

在一些实施例中，对录制内容进行回放，可以为：基于智能查找算法定位当前要回放的操作位置和操作控件；根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。具体可以通过如下方式判断回放是否成功：若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败，若回放失败，则确定被测界面功能异常，并进行告警。

在一些实施例中，通过挡板服务器将动态数据转换成固定数据，具体可以为通过挡板服务器获取操作控件的类型信息；基于操作控件的类型信息，将动态数据转换成与操作控件对应的固定数据。比如操作控件的类型为获取验证码，则可以将动态的验证码转换成对应的固定验证码，比如固定为123456；再比如操作控件的类型为获取二维码，则可以将动态的二维码转换成对应的固定不变的二维码，这样可以保证在回放时能够验证成功从而保证验证过程的顺利进行。

如图3a所示，为一种具体的应用场景示意图，首先APP端获取验证码，然后挡板服务器发送验证码，用户在APP端输入验证码后，发送验证码到挡板服务器，最后挡板服务器校验验证码并返回验证结果给App端，本申请可以将动态验证码修改为固定验证码，可以保证这个过程顺利进行；同样的，如图3b所示，为另一种具体的应用场景示意图，商户向挡板服务器请求生成收款码，然后付款App用户扫码后向挡板服务器发送收款码查询请求，获取二维码信息和订单信息，本申请可以将动态二维码修改为固定二维码，可以保证这个过程顺利进行。

本申请是在录制的时候使用挡板环境的被测应用包进行录制，具体场景比如以上提到的输入验证码(使用挡板服务器返回的数据),生成二维码(使用挡板服务器生成二维码)，可解决动态变化的这些数据在回放时因为数据变化而导致的回放失败。

基于同一发明构思，本申请实施例提供一种用户界面UI自动化测试装置，请参照图4，该装置包括：

录制单元401，用于对用户在被测界面上的操作过程进行录制；

转换单元402，用于在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将动态数据转换成固定数据；将固定数据发送到被测界面，以使用户获取固定数据；

回放单元403，用于在录制完成后，对录制内容进行回放，若回放成功，则确定被测界面功能正常。

在一些实施例中，还包括：

配置单元，用于根据被测界面的属性，对挡板服务器进行数据资源配置。

在一些实施例中，录制单元401具体用于：

识别用户在被测界面上进行的操作对应的操作位置和操作控件；

将识别到的操作位置和操作控件的数据记录并保存。

在一些实施例中，回放单元403具体用于：

基于智能查找算法定位当前要回放的操作位置和操作控件；

根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。

在一些实施例中，通过下列方式判断回放是否成功：

若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败。

在一些实施例中，转换单元402具体用于：

通过挡板服务器获取操作控件的类型信息；

基于操作控件的类型信息，将动态数据转换成与操作控件对应的固定数据。

在一些实施例中，回放单元403还用于：

若回放失败，则确定被测界面功能异常，并进行告警。

基于同一发明构思，本申请实施例提供一种电子设备，该设备可以实现前文论述的用户界面UI自动化测试设备的功能，请参照图5，该设备包括处理器501和存储器502，存储器502，用于存储程序指令；处理器501，用于调用所述存储器502中存储的程序指令，按照获得的程序指令执行上述任一项所述的用户界面UI自动化测试方法包括的步骤。

基于同一发明构思，本申请实施例提供一种计算机可读存储介质，计算机程序产品包括：计算机程序代码，当计算机程序代码在计算机上运行时，使得计算机执行如前文论述任一的用户界面UI自动化测试方法。由于上述计算机可读存储介质解决问题的原理与用户界面UI自动化测试方法相似，因此上述计算机可读存储介质的实施可以参见方法的实施，重复之处不再赘述。

基于同一发明构思，本申请实施例还提供了一种计算机程序产品，该计算机程序产品包括：计算机程序代码，当该计算机程序代码在计算机上运行时，使得计算机执行如前文论述任一的用户界面UI自动化测试方法。由于上述计算机程序产品解决问题的原理与用户界面UI自动化测试方法相似，因此上述计算机程序产品的实施可以参见方法的实施，重复之处不再赘述。

本申请实施例提供一种用户界面UI自动化测试方法、装置、设备及介质，该方法包括对用户在被测界面上的操作过程进行录制；在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将动态数据转换成固定数据；将固定数据发送到被测界面，以使用户获取固定数据；在录制完成后，对录制内容进行回放，若回放成功，则确定被测界面功能正常。由于使用挡板服务器将动态数据转换成固定数据，可以提高回放的成功率，从而提高测试效率。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列用户操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (17)

1.一种用户界面UI自动化测试方法，其特征在于，包括：

对用户在被测界面上的操作过程进行录制；

在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将所述动态数据转换成固定数据；

将所述固定数据发送到所述被测界面，以使所述用户获取所述固定数据；

在录制完成后，对录制内容进行回放，若回放成功，则确定所述被测界面功能正常。

2.如权利要求1所述的方法，其特征在于，所述对用户在被测界面上的操作过程进行录制之前，还包括：

根据所述被测界面的属性，对所述挡板服务器进行数据资源配置。

3.如权利要求1所述的方法，其特征在于，所述对用户在被测界面上的操作过程进行录制，包括：

识别所述用户在被测界面上进行的操作对应的操作位置和操作控件；

将识别到的所述操作位置和所述操作控件的数据记录并保存。

4.如权利要求3所述的方法，其特征在于，所述对录制内容进行回放，包括：

基于智能查找算法定位当前要回放的操作位置和操作控件；

根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。

5.如权利要求3所述的方法，其特征在于，通过下列方式判断回放是否成功：

若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败。

6.如权利要求3所述的方法，其特征在于，所述通过挡板服务器将所述动态数据转换成固定数据，包括：

通过所述挡板服务器获取所述操作控件的类型信息；

基于所述操作控件的类型信息，将所述动态数据转换成与所述操作控件对应的固定数据。

7.如权利要求1-6任一所述的方法，其特征在于，所述对录制内容进行回放后，还包括：

若回放失败，则确定所述被测界面功能异常，并进行告警。

8.一种用户界面UI自动化测试装置，其特征在于，包括：

录制单元，用于对用户在被测界面上的操作过程进行录制；

转换单元，用于在录制过程中，若检测到用户在被测界面上的操作过程需要获取动态数据，则通过挡板服务器将所述动态数据转换成固定数据；将所述固定数据发送到所述被测界面，以使所述用户获取所述固定数据；

回放单元，用于在录制完成后，对录制内容进行回放，若回放成功，则确定所述被测界面功能正常。

9.如权利要求8所述的装置，其特征在于，还包括：

配置单元，用于根据所述被测界面的属性，对所述挡板服务器进行数据资源配置。

10.如权利要求8所述的装置，其特征在于，所述录制单元具体用于：

识别所述用户在被测界面上进行的操作对应的操作位置和操作控件；

将识别到的所述操作位置和所述操作控件的数据记录并保存。

11.如权利要求10所述的装置，其特征在于，所述回放单元具体用于：

基于智能查找算法定位当前要回放的操作位置和操作控件；

根据定位得到的操作位置和操作控件，确定用户的操作并回放显示。

12.如权利要求10所述的装置，其特征在于，通过下列方式判断回放是否成功：

若将在录制过程中记录并保存的操作位置和操作控件均完整回放，则确定回放成功，否则，确定回放失败。

13.如权利要求10所述的装置，其特征在于，所述转换单元具体用于：

通过所述挡板服务器获取所述操作控件的类型信息；

基于所述操作控件的类型信息，将所述动态数据转换成与所述操作控件对应的固定数据。

14.如权利要求8-13任一所述的装置，其特征在于，所述回放单元还用于：

若回放失败，则确定所述被测界面功能异常，并进行告警。

15.一种电子设备，其特征在于，包括：

存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序指令执行权利要求1-7中任一项所述的方法包括的步骤。

16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被计算机执行时，使所述计算机执行如权利要求1-7中任一项所述的方法。

17.一种计算机程序产品，其特征在于，所述计算机程序产品包括：计算机程序代码，当所述计算机程序代码在计算机上运行时，使得计算机执行上述如权利要求1-7中任一项所述的方法。

Images