CN112363918B - 用户界面ai自动化测试方法、装置、设备和存储介质 - Google Patents
用户界面ai自动化测试方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN112363918B CN112363918B CN202011204981.3A CN202011204981A CN112363918B CN 112363918 B CN112363918 B CN 112363918B CN 202011204981 A CN202011204981 A CN 202011204981A CN 112363918 B CN112363918 B CN 112363918B
- Authority
- CN
- China
- Prior art keywords
- application software
- target object
- anchor
- current page
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010998 test method Methods 0.000 title claims abstract description 25
- 238000012360 testing method Methods 0.000 claims abstract description 72
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000012545 processing Methods 0.000 claims description 79
- 238000004891 communication Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 7
- 238000004422 calculation algorithm Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000009434 installation Methods 0.000 description 5
- 239000003208 petroleum Substances 0.000 description 5
- 238000013136 deep learning model Methods 0.000 description 4
- 238000012015 optical character recognition Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Abstract
本申请实施例提供了一种用户界面AI自动化测试方法、装置、设备和存储介质。其中，方法包括：获取终端设备上显示的应用软件的当前页面的截图，对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对所述目标对象进行预设的操作，得到用户界面自动化测试的结果。本申请实施例可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
Description
技术领域
本申请涉及测试技术领域，尤其涉及一种用户界面(User Interface，简称UI)人工智能(Artificial Intelligence，简称AI)自动化测试方法、用户界面AI自动化测试装置、电子设备和计算机可读存储介质。
背景技术
用户界面自动化化测试主要是基于用户界面的功能来进行测试。目前，在进行用户界面自动化测试时，当待操作的用户界面的目标对象在一个用户界面上出现多个，或者待操作的用户界面的目标对象动态变化时，将无法对该目标对象进行精确的操作，使得用户界面自动化测试的覆盖场景有限。
发明内容
本申请实施例提供一种用户界面AI自动化测试方法、用户界面AI自动化测试装置、电子设备和计算机可读存储介质，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
为了解决上述技术问题，本申请实施例是这样实现的：
第一个方面，提供了一种用户界面AI自动化测试方法，包括：
获取终端设备上显示的应用软件的当前页面的截图，对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象；
根据所确定的目标对象的位置信息，对所述目标对象进行预设的操作，得到用户界面自动化测试的结果。
第二个方面，提供了一种用户界面AI自动化测试装置，包括：
识别模块，用于获取终端设备上显示的应用软件的当前页面的截图，对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
定位模块，用于基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象；
处理模块，用于根据所确定的目标对象的位置信息，对所述目标对象进行预设的操作，得到用户界面自动化测试的结果。
第三方面，本申请实施例提供了一种电子设备，包括处理器、通信接口、存储器和通信总线；其中，所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信；所述存储器，用于存放计算机程序；所述处理器，用于执行所述存储器上所存放的程序，实现如第一方面所述的用户界面AI自动化测试方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的用户界面AI自动化测试方法。
本申请实施例提供的用户界面AI自动化测试方法、用户界面AI自动化测试装置、电子设备和计算机可读存储介质，通过获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果；利用锚点对象与目标对象的对应关系，基于AI技术对终端设备上显示的应用软件的页面的截图进行识别，在应用软件的页面中根据锚点对象的位置信息确定目标对象的位置信息，从而在应用软件的页面中出现多个目标对象和/或目标对象动态变化时，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
附图说明
为了更清楚地说明本申请一个或多个实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例用户界面AI自动化测试方法的一种实现方式的流程示意图；
图2为本申请实施例通过对页面的截图进行识别得到页面中锚点对象和目标对象的位置的一种实现方式的流程示意图；
图3为本申请实施例根据识别处理的结果确定页面中锚点对象和目标对象的位置的一种实现方式的流程示意图；
图4为本申请实施例在应用软件的当前页面中确定与锚点对象对应的目标对象的一种实现方式的流程示意图；
图5为本申请实施例在应用软件的当前页面中确定与锚点对象对应的目标对象的另一种实现方式的流程示意图；
图6为本申请实施例用户界面AI自动化测试方法的一种应用场景的示意图；
图7为本申请实施例用户界面AI自动化测试方法的另一种应用场景的示意图；
图8为本申请实施例用户界面AI自动化测试装置的一种组成结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请一个或多个实施例中的技术方案，下面将结合本申请一个或多个实施例中的附图，对本申请一个或多个实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请的一部分实施例，而不是全部的实施例。基于本申请一个或多个实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本文件的保护范围。
图1为本申请实施例用户界面AI自动化测试方法的一种实现方式的流程示意图，图1所示的方法可以由用户界面AI自动化测试装置作为执行主体执行，该用户界面AI自动化测试装置可以安装于通用终端设备，例如，台式计算机、笔记本式计算机、平板电脑、手机、可穿戴设备等，也可以安装于专用测试设备，本申请实施例对此不作限定，如图1所示，该自动化测试方法至少包括：
S102，获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息。
在本申请实施例中，用户界面AI自动化测试的对象可以为终端设备上安装的应用软件(application software)，例如，终端设备可以为手机、平板电脑、车载计算机、可穿戴设备等，应用软件可以为应用商店类软件、媒体播放类软件、股票类软件等，本申请实施例对中端设备和应用软件的类型不作限定。可选地，在终端设备上打开应用软件后，可以由终端设备截取应用软件的当前页面的截图，发送给用户界面AI自动化测试装置，获取终端设备上显示的应用软件的当前页面的截图；或者，可以在用户界面AI自动化测试装置上显示终端设备的用户界面，在打开终端设备上的应用软件后，由用户界面AI自动化测试装置截取应用软件的当前页面的截图，获取终端设备上显示的应用软件的当前页面的截图；本发明实施例对获取终端设备上显示的应用软件的当前页面的截图的实现方式不作限定。
在本申请实施例中，目标对象可以为应用软件的页面中可以进行操作的文字或者图标等页面元素；锚点对象可以为在同一应用软件的页面中与目标对象相关联的文字或者图标等页面元素；本申请实施例对目标对象和锚点对象的类型不作限定，其中，在本申请的实施例中文字包含数字。在获取终端设备上显示的应用软件的当前页面的截图后，可以对应用软件的当前页面的截图中的页面元素进行识别处理，并根据对页面元素进行识别处理的结果，获得应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息。可选地，可以通过机器学习对应用软件的当前页面的截图进行识别处理，例如，机器学习可以为深度学习的模型，本申请实施例对应用软件的当前页面的截图进行识别处理的实现方式不作限定。
S104，基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
在本申请实施例中，可以根据应用软件的当前页面中锚点对象与目标对象的关联，预设的锚点对象与目标对象的对应关系，从而可以基于预设的锚点对象与目标对象的对应关系，根据锚点对象在当前页面中的位置信息，在当前页面中确定与锚点对象对应的目标对象。可选地，可以跟据在应用软件的当前页面中锚点对象与目标对象的关联，在用户界面AI自动化测试方法的程序中增加支持根据锚点对象定位目标对象的语法，基于所增加的根据锚点对象定位目标对象的语法，预设锚点对象与目标对象的对应关系，通过增加支持根据锚点对象定位目标对象的语法，预设锚点对象与目标对象的对应关系，可以降低用户界面AI自动化测试程序设计的门槛。
在一些可选的例子中，预设的锚点对象与目标对象的对应关系，可以为锚点对象与目标对象的方位关系，例如，方位关系可以包括以下方位中的一种：上、下、左、右、左上、左下、右上、右下；在另一些可选的例子中，预设的锚点对象与目标对象的对应关系，可以为锚点对象与目标对象的方位关系和锚点对象与目标对象的距离关系，例如，距离关系可以为与锚点对象距离最近的目标对象；本申请实施例对预设的锚点对象与目标对象的对应关系的形式不作限定。
S106，根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果。
在本申请实施例中，可以根据目标对象的类型，预设对目标对象进行的操作，从而可以根据所确定的目标对象在当前页面中的位置信息，对目标对象进行预设的操作，获得用户界面自动化测试的结果，例如，对目标对象进行的预设的操作可以包括以下操作中的一种：点击操作、赋值操作、滑动操作、输入操作。可选地，可以跟据目标对象的类型和在应用软件的当前页面中锚点对象与目标对象的关联，增加支持根据锚点对象操作目标对象的语法，以基于所增加的根据锚点对象操作目标对象的语法，预设锚点对象与目标对象的对应关系和对目标对象进行的操作，从而可以根据锚点对象定位目标对象，并对目标对象进行操作，实现根据锚点对象操作目标对象，通过增加支持根据锚点对象操作目标对象的语法，预设锚点对象与目标对象的对应关系和对目标对象进行的操作，可以简化用户界面AI自动化测试的程序设计。
本申请实施例的用户界面AI自动化测试方法，通过获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果；利用锚点对象与目标对象的对应关系，基于AI技术对终端设备上显示的应用软件的页面的截图进行识别，在应用软件的页面中根据锚点对象的位置信息确定目标对象的位置信息，从而在应用软件的页面中出现多个目标对象和/或目标对象动态变化时，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
下面将结合图2至图7的实施例对本申请的用户界面AI自动化测试方法进行详细描述。
图2为本申请实施例通过对页面的截图进行识别得到页面中锚点对象和目标对象的位置的一种实现方式的流程示意图。如图2所示，获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息，至少包括：
S202，截取终端设备上显示的应用软件的当前页面的截图。
在本实施例中，终端设备上显示的应用软件的当前页面的截图，是在用户界面AI自动化测试装置上显示终端设备的用户界面，并打开终端设备上的应用软件后，由用户界面AI自动化测试装置截取。
S204，对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理。
在本实施例中，可以对应用软件的当前页面的截图中的文字进行文字识别处理，例如，可以通过光学字符识别(Optical Character Recognition，简称OCR)进行文字识别处理；可以对应用软件的当前页面的截图中的图标等进行图像识别处理，例如，可以通过图像匹配进行图像识别处理，其中图像匹配可以采用模板匹配或者特征匹配等算法，本申请实施例对实现图像匹配的算法不作限定。
在一些可选的例子中，可以通过两个深度学习的模型分别对应用软件的当前页面的截图进行文字识别处理和图像识别处理；在另一些可选的例子中，可以先通过两个深度学习的模型分别对应用软件的当前页面的截图进行文字检测处理和一般对象检测处理，在应用软件的当前页面的截图中标定出文字区域和一般对象区域，再通过两个深度学习的模型分别对应用软件的当前页面的截图中所标定出的文字区域和一般对象区域进行文字识别处理和图像识别处理；本申请实施例对应用软件的当前页面的截图进行文字识别处理和图像识别处理的实现方式不作限定。
S206，根据文字识别处理的结果和/或图像识别处理的结果，确定应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息。
在本实施例中，可以基于预设的锚点对象和目标对象，根据对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理的结果，在应用软件的当前页面中确定出锚点对象的位置信息和目标对象的位置信息。可选地，可以基于所增加的根据锚点对象定位目标对象的语法，或者根据锚点对象操作目标对象的语法，确定预设的锚点对象和目标对象。
本实施例通过先对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理，再根据文字识别处理和/或图像识别处理的结果，确定应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息，可以通过同一文字识别处理和/或图像识别处理模型，实现对不同终端设备的不同应用软件的页面截图的文字识别处理和/或图像识别处理，保证用户界面AI自动化测试方法的通用性。
图3为本申请实施例根据识别处理的结果确定页面中锚点对象和目标对象的位置的一种实现方式的流程示意图。如图3所示，根据文字识别处理的结果和/或图像识别处理的结果，确定应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息，至少包括：
S302，根据文字识别处理的结果和/或图像识别处理的结果，判断在应用软件的当前页面中是否存在锚点对象。
在本实施例中，通过对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理，可以获得应用软件的当前页面中的文字和/或图标等页面元素及其位置信息，通过将预设的锚点对象与所获得的应用软件的当前页面中的页面元素进行匹配，可以判断在应用软件的当前页面中是否存在该锚点对象。例如，当锚点对象为文字时，可以通过文字匹配算法对预设的锚点对象与应用软件的当前页面中的文字进行匹配；当锚点对象为图标时，可以通过图像匹配算法对预设的锚点对象与应用软件的当前页面中的图标进行匹配，其中，文字匹配算法和图像匹配算法可以采用现有的文字匹配算法和图像匹配算法来实现，本申请实施例对将预设的锚点对象与应用软件的当前页面中的页面元素进行匹配的实现方式不作限定。
在应用软件的当前页面中存在锚点对象的情况下，执行S304；否则，在应用软件的当前页面中不存在锚点对象的情况下，结束操作。
S304，确定锚点对象在应用软件的当前页面中的位置信息。
在本实施例中，在判定应用软件的当前页面中存在锚点对象的情况下，可以根据对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理，所获得的应用软件的当前页面中的页面元素的位置信息，确定锚点对象在应用软件的当前页面中的位置信息。
S306，根据文字识别处理的结果和/或图像识别处理的结果，确定目标对象在应用软件的当前页面中的位置信息。
在本实施例中，在确定锚点对象在应用软件的当前页面中的位置信息后，可以根据对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理，所获得的应用软件的当前页面中的页面元素及其位置信息，通过将预设的目标对象与所获得的应用软件的当前页面中的页面元素进行匹配，在应用软件的当前页面中确定目标对象的位置信息。例如，当目标对象为文字时，可以通过文字匹配算法对预设的目标对象与应用软件的当前页面中的文字进行匹配；当目标对象为图标时，可以通过图像匹配算法对预设的目标对象与应用软件的当前页面中的图标进行匹配，其中，文字匹配算法和图像匹配算法可以采用现有的文字匹配算法和图像匹配算法来实现，本申请实施例对将预设的目标对象与应用软件的当前页面中的页面元素进行匹配的实现方式不作限定。
本实施例通过先判断在应用软件的当前页面中是否存在锚点对象，在判定应用软件的当前页面中存在锚点对象的情况下，再确定锚点对象在应用软件的当前页面中的位置信息和目标对象在应用软件的当前页面中的位置信息，使应用软件的当前页面中目标对象的确定依赖于锚点对象的确定，可以避免直接根据对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理的结果，确定应用软件的当前页面中目标对象的位置信息，可以节约计算资源，提高用户界面AI自动化测试的处理效率。
图4为本申请实施例在应用软件的当前页面中确定与锚点对象对应的目标对象的一种实现方式的流程示意图。如图4所示，基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象，至少包括：
S402，基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象。
在本实施例中，预设的锚点对象与目标对象的对应关系可以包括：锚点对象与目标对象的方位关系和锚点对象在应用软件的页面中的序数。可以先基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象。在一些可选的例子中，在根据锚点对象定位目标对象的语法中可以包括：锚点对象与目标对象的方位关系和锚点对象在应用软件的页面中的序数，以基于根据锚点对象定位目标对象的语法，预设锚点对象与目标对象的对应关系。例如，根据锚点对象定位目标对象的语法可以为“数量词+名词+方位词+名词”的形式，其中，第一次名词表示锚点对象，第二个名词表示目标对象，数量词表示锚点对象在应用软件的页面中的序数，方位词表示锚点对象与目标对象的方位关系。
S404，基于预设的锚点对象与目标对象的方位关系，根据所确定的锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
在本实施例中，在基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象后，可以基于预设的锚点对象与目标对象的方位关系，根据所确定的锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。可选地，在确定锚点对象后，可以根据预设的目标对象选取原则，在应用软件的当前页面中确定与锚点对象对应的目标对象，预设的目标对象选取原则可以包括：目标对象在锚点对象的顶边与底边的平行线确定的区域内，目标对象在锚点对象的顶边与底边+-15度角的直线确定的扇形区域内，选取与锚点对象距离最近的目标对象等，本申请实施例对预设的目标对象选取原则的内容不作限定。
本实施例通过预设的锚点对象与目标对象的方位关系和锚点对象在应用软件的页面中的序数，在应用软件的页面中出现多个锚点对象时，可以准确确定锚点对象的位置，进而准确确定目标对象的位置，实现对目标对象的精确操作，进一步增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
图5为本申请实施例在应用软件的当前页面中确定与锚点对象对应的目标对象的另一种实现方式的流程示意图。如图5所示，基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象，至少包括：
S502，基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象。
在本实施例中，预设的锚点对象与目标对象的对应关系可以包括：锚点对象与目标对象的方位关系、锚点对象在应用软件的页面中的序数和目标对象相对于锚点对象的序数。可以先基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象。在一些可选的例子中，在根据锚点对象定位目标对象的语法中可以包括：锚点对象与目标对象的方位关系、锚点对象在应用软件的页面中的序数和目标对象相对于锚点对象的序数，以基于根据锚点对象定位目标对象的语法，预设锚点对象与目标对象的对应关系。例如，根据锚点对象定位目标对象的语法可以为“数量词+名词+方位词+数量词+名词”的形式，其中，第一次名词表示锚点对象，第二个名词表示目标对象，第一个数量词表示锚点对象在应用软件的页面中的序数，第二个数量词表示目标对象相对于锚点对象的序数，方位词表示锚点对象与目标对象的方位关系。
S504，基于预设的锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，根据所确定的锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
在本实施例中，在基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象后，可以基于预设的锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，根据所确定的锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。可选地，在确定锚点对象后，可以根据预设的目标对象选取原则，在应用软件的当前页面中确定与锚点对象对应的目标对象，预设的目标对象选取原则可以包括：目标对象在锚点对象的顶边与底边的平行线确定的区域内，目标对象在锚点对象的顶边与底边+-15度角的直线确定的扇形区域内，按照相对于锚点对象由近及远的方式选取目标对象等，本申请实施例对预设的目标对象选取原则的内容不作限定。
本实施例通过预设的锚点对象与目标对象的方位关系、锚点对象在应用软件的页面中的序数和目标对象相对于锚点对象的序数，在应用软件的页面中出现多个锚点对象时，可以准确确定锚点对象的位置，在锚点对象对应多个目标对象时，也可以准确确定目标对象的位置，从而实现对目标对象的精确操作，进一步增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
在另一些可能的实现方式中，预设的锚点对象与目标对象的对应关系可以包括：锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数。此时，基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象，可以至少包括：基于预设的锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，根据所确定的锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。在一些可选的例子中，在根据锚点对象定位目标对象的语法中可以包括：锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，以基于根据锚点对象定位目标对象的语法，预设锚点对象与目标对象的对应关系。例如，根据锚点对象定位目标对象的语法可以为“名词+方位词+数量词+名词”的形式，其中，第一次名词表示锚点对象，第二个名词表示目标对象，数量词表示目标对象相对于锚点对象的序数，方位词表示锚点对象与目标对象的方位关系。
图6为本申请实施例用户界面AI自动化测试方法的一种应用场景的示意图，图6的应用场景为：手机中应用商店类软件中安装梦幻西游的用例，如图6所示，在用户界面AI自动化测试方法的程序中增加支持根据锚点对象操作目标对象的语法：点击梦幻西游右侧的安装按钮。在执行该测试用例时，获取手机上显示的应用商店类软件的应用软件列表下载页面的截图，对应用软件列表下载页面的截图进行文字识别处理，得到应用软件列表下载页面中梦幻西游，即锚点对象，的位置信息，和安装按钮，即目标对象，的位置信息；基于点击梦幻西游右侧的安装按钮的语法，根据梦幻西游在应用软件列表下载页面中的位置信息，在应用软件列表下载页面中确定与梦幻西游对应的安装按钮；根据所确定的安装按钮在应用软件列表下载页面中的位置信息，对安装按钮进行点击操作，从而得到用户界面自动化测试的结果。
图7为本申请实施例用户界面AI自动化测试方法的另一种应用场景的示意图，图7的应用场景为：手机中股票类软件中获取中国石油现价的用例，如图7所示，在用户界面AI自动化测试方法的程序中增加支持根据锚点对象操作目标对象的语法：将中国石油右侧的文字赋值给变量${now_price}。在执行该测试用例时，获取手机上显示的股票类软件的股票行情页面的截图，对股票行情页面的截图进行文字识别处理，得到股票行情页面中中国石油，即锚点对象，的位置信息，和最新价31.88，即目标对象，的位置信息；基于将中国石油右侧的文字赋值给变量${now_price}的语法，根据中国石油在股票行情页面中的位置信息，在股票行情页面中确定与中国石油对应的最新价31.88；根据所确定的最新价31.88在股票行情页面中的位置信息，将最新价31.88赋值给变量${now_price}，从而得到用户界面自动化测试的结果。
对应上述图1至图7所述的用户界面AI自动化测试方法，基于相同的技术构思，本申请实施例还提供了一种用户界面AI自动化测试装置，该用户界面AI自动化测试装置可以安装于通用终端设备，例如，台式计算机、笔记本式计算机、平板电脑、手机、可穿戴设备等，也可以安装于专用测试设备，本申请实施例对此不作限定，图8为本申请实施例用户界面AI自动化测试装置的一种组成结构示意图，该用户界面AI自动化测试装置用于执行图1至图7描述的用户界面AI自动化测试方法，如图8所示，该自动化测试装置至少包括：识别模块810、定位模块820和处理模块830，识别模块810、定位模块820和处理模块830依次连接。其中，
识别模块810，用于获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息。
在本申请实施例中，关于识别模块810的说明可以参见图1中关于S102的说明，故在此不再复述。
定位模块820，用于基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
在本申请实施例中，关于定位模块820的说明可以参见图1中关于S104的说明，故在此不再复述。
处理模块830，用于根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果。
在本申请实施例中，关于处理模块830的说明可以参见图1中关于S106的说明，故在此不再复述。
本申请实施例的用户界面AI自动化测试装置，通过获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果；利用锚点对象与目标对象的对应关系，基于AI技术对终端设备上显示的应用软件的页面的截图进行识别，在应用软件的页面中根据锚点对象的位置信息确定目标对象的位置信息，从而在应用软件的页面中出现多个目标对象和/或目标对象动态变化时，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
可选地，识别模块810，用于截取终端设备上显示的应用软件的当前页面的截图；对应用软件的当前页面的截图进行文字识别处理和/或图像识别处理；根据文字识别处理的结果和/或图像识别处理的结果，确定应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息。
可选地，识别模块810，用于根据文字识别处理的结果和/或图像识别处理的结果，判断在应用软件的当前页面中是否存在锚点对象；在应用软件的当前页面中存在锚点对象的情况下，确定锚点对象在应用软件的当前页面中的位置信息；根据文字识别处理的结果和/或图像识别处理的结果，确定目标对象在应用软件的当前页面中的位置信息。
可选地，定位模块820，用于基于预设的锚点对象与目标对象的方位关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
可选地，定位模块820，用于基于预设的锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象。
可选地，定位模块820，还用于基于预设的锚点对象在应用软件的页面中的序数，在应用软件的当前页面中确定锚点对象。
可选地，处理模块830，对目标对象进行的预设的操作包括以下操作中的一种：点击操作、赋值操作、滑动操作和输入操作。
对应上述图1至图7描述的用户界面AI自动化测试方法，基于相同的技术构思，本申请实施例还提供了一种电子设备，该电子设备包括：处理器、通信接口、存储器和通信总线；其中，处理器、通信接口以及存储器通过总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序，实现以下方法：
获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；
根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果。
本申请实施例的电子设备，通过获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果；利用锚点对象与目标对象的对应关系，基于AI技术对终端设备上显示的应用软件的页面的截图进行识别，在应用软件的页面中根据锚点对象的位置信息确定目标对象的位置信息，从而在应用软件的页面中出现多个目标对象和/或目标对象动态变化时，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
对应上述图1至图7描述的用户界面AI自动化测试方法，基于相同的技术构思，本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现以下流程：
获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；
根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果。
本申请实施例的计算机可读存储介质，通过获取终端设备上显示的应用软件的当前页面的截图，对应用软件的当前页面的截图进行识别处理，得到应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；基于预设的锚点对象与目标对象的对应关系，根据锚点对象的位置信息，在应用软件的当前页面中确定与锚点对象对应的目标对象；根据所确定的目标对象的位置信息，对目标对象进行预设的操作，得到用户界面自动化测试的结果；利用锚点对象与目标对象的对应关系，基于AI技术对终端设备上显示的应用软件的页面的截图进行识别，在应用软件的页面中根据锚点对象的位置信息确定目标对象的位置信息，从而在应用软件的页面中出现多个目标对象和/或目标对象动态变化时，可以准确确定目标对象的位置，实现对目标对象的精确操作，增加用户界面自动化测试的覆盖场景，扩大用户界面自动化测试的应用范围。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本申请一个或多个实施例可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请的一个或多个实施例，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本申请中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本文件的实施例而已，并不用于限制本文件。对于本领域技术人员来说，本文件可以有各种更改和变化。凡在本文件的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本文件的权利要求范围之内。
Claims (9)
1.一种用户界面AI自动化测试方法，其特征在于，包括：
获取终端设备上显示的应用软件的当前页面的截图，对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象；
根据所确定的目标对象的位置信息，对所述目标对象进行预设的操作，得到用户界面自动化测试的结果；
所述对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息，包括：
对所述应用软件的当前页面的截图进行文字识别处理和/或图像识别处理；
根据所述文字识别处理的结果和/或所述图像识别处理的结果，确定所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
所述根据所述文字识别处理的结果和/或所述图像识别处理的结果，确定所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息，包括：
根据所述文字识别处理的结果和/或所述图像识别处理的结果，判断在所述应用软件的当前页面中是否存在所述锚点对象；
在所述应用软件的当前页面中存在所述锚点对象的情况下，确定所述锚点对象在所述应用软件的当前页面中的位置信息；
根据所述文字识别处理的结果和/或所述图像识别处理的结果，确定所述目标对象在所述应用软件的当前页面中的位置信息。
2.根据权利要求1所述的自动化测试方法，其特征在于，所述获取终端设备上显示的应用软件的当前页面的截图，包括：
截取所述终端设备上显示的所述应用软件的当前页面的截图。
3.根据权利要求1至2中任一项所述的自动化测试方法，其特征在于，所述基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象，包括：
基于预设的锚点对象与目标对象的方位关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象。
4.根据权利要求1至2中任一项所述的自动化测试方法，其特征在于，所述基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象，包括：
基于预设的锚点对象与目标对象的方位关系和目标对象相对于锚点对象的序数，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象。
5.根据权利要求4所述的自动化测试方法，其特征在于，所述基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象，还包括：
基于预设的锚点对象在应用软件的页面中的序数，在所述应用软件的当前页面中确定所述锚点对象。
6.根据权利要求5所述的自动化测试方法，其特征在于，对所述目标对象进行的所述预设的操作包括以下操作中的一种：点击操作、赋值操作、滑动操作和输入操作。
7.一种用户界面AI自动化测试装置，其特征在于，包括：
识别模块，用于获取终端设备上显示的应用软件的当前页面的截图，对所述应用软件的当前页面的截图进行识别处理，得到所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
定位模块，用于基于预设的锚点对象与目标对象的对应关系，根据所述锚点对象的位置信息，在所述应用软件的当前页面中确定与所述锚点对象对应的目标对象；
处理模块，用于根据所确定的目标对象的位置信息，对所述目标对象进行预设的操作，得到用户界面自动化测试的结果；
所述识别模块，用于对所述应用软件的当前页面的截图进行文字识别处理和/或图像识别处理；根据所述文字识别处理的结果和/或所述图像识别处理的结果，确定所述应用软件的当前页面中锚点对象的位置信息和目标对象的位置信息；
所述识别模块，用于根据所述文字识别处理的结果和/或所述图像识别处理的结果，判断在所述应用软件的当前页面中是否存在所述锚点对象；在所述应用软件的当前页面中存在所述锚点对象的情况下，确定所述锚点对象在所述应用软件的当前页面中的位置信息；根据所述文字识别处理的结果和/或所述图像识别处理的结果，确定所述目标对象在所述应用软件的当前页面中的位置信息。
8.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线；其中，所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信；所述存储器，用于存放计算机程序；所述处理器，用于执行所述存储器上所存放的程序，实现如权利要求1至6中任一项所述的用户界面AI自动化测试方法。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的用户界面AI自动化测试方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011204981.3A CN112363918B (zh) | 2020-11-02 | 2020-11-02 | 用户界面ai自动化测试方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011204981.3A CN112363918B (zh) | 2020-11-02 | 2020-11-02 | 用户界面ai自动化测试方法、装置、设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112363918A CN112363918A (zh) | 2021-02-12 |
| CN112363918B true CN112363918B (zh) | 2024-03-08 |
Family
ID=74512683
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011204981.3A Active CN112363918B (zh) | 2020-11-02 | 2020-11-02 | 用户界面ai自动化测试方法、装置、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112363918B (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103645890A (zh) * | 2013-11-29 | 2014-03-19 | 北京奇虎科技有限公司 | 一种用于在图形用户界面中定位控件的方法和装置 |
| CN107506300A (zh) * | 2017-08-09 | 2017-12-22 | 百度在线网络技术（北京）有限公司 | 一种用户界面测试方法、装置、服务器和存储介质 |
| CN109189682A (zh) * | 2018-08-27 | 2019-01-11 | 广州云测信息技术有限公司 | 一种脚本录制方法和装置 |
| CN109492608A (zh) * | 2018-11-27 | 2019-03-19 | 腾讯科技（深圳）有限公司 | 图像分割方法、装置、计算机设备及存储介质 |
| CN110058991A (zh) * | 2018-11-30 | 2019-07-26 | 阿里巴巴集团控股有限公司 | 一种应用软件的自动测试方法和系统 |
| CN110399748A (zh) * | 2019-07-23 | 2019-11-01 | 中国建设银行股份有限公司 | 一种基于图像识别的截图方法和装置 |
| WO2020051959A1 (zh) * | 2018-09-10 | 2020-03-19 | 深圳码隆科技有限公司 | 基于图片的服装尺寸测量方法及装置 |
| CN111414948A (zh) * | 2020-03-13 | 2020-07-14 | 腾讯科技（深圳）有限公司 | 目标对象检测方法和相关装置 |
| WO2020173008A1 (zh) * | 2019-02-27 | 2020-09-03 | 平安科技（深圳）有限公司 | 一种文本识别方法及装置 |
| CN111651361A (zh) * | 2020-06-10 | 2020-09-11 | 宋文韬 | 一种基于可视化页面的无脚本自动化测试方法 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8392887B2 (en) * | 2009-06-15 | 2013-03-05 | Sas Institute Inc. | Systems and methods for identifying graphic user-interface components |
| US10210386B2 (en) * | 2016-03-31 | 2019-02-19 | Facebook, Inc. | Storing identification data as virtual personally identifiable information |
| US10453271B2 (en) * | 2016-12-07 | 2019-10-22 | Microsoft Technology Licensing, Llc | Automated thumbnail object generation based on thumbnail anchor points |
| CN108304761A (zh) * | 2017-09-25 | 2018-07-20 | 腾讯科技（深圳）有限公司 | 文本检测方法、装置、存储介质和计算机设备 |
-
2020
- 2020-11-02 CN CN202011204981.3A patent/CN112363918B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103645890A (zh) * | 2013-11-29 | 2014-03-19 | 北京奇虎科技有限公司 | 一种用于在图形用户界面中定位控件的方法和装置 |
| CN107506300A (zh) * | 2017-08-09 | 2017-12-22 | 百度在线网络技术（北京）有限公司 | 一种用户界面测试方法、装置、服务器和存储介质 |
| CN109189682A (zh) * | 2018-08-27 | 2019-01-11 | 广州云测信息技术有限公司 | 一种脚本录制方法和装置 |
| WO2020051959A1 (zh) * | 2018-09-10 | 2020-03-19 | 深圳码隆科技有限公司 | 基于图片的服装尺寸测量方法及装置 |
| CN109492608A (zh) * | 2018-11-27 | 2019-03-19 | 腾讯科技（深圳）有限公司 | 图像分割方法、装置、计算机设备及存储介质 |
| CN110058991A (zh) * | 2018-11-30 | 2019-07-26 | 阿里巴巴集团控股有限公司 | 一种应用软件的自动测试方法和系统 |
| WO2020173008A1 (zh) * | 2019-02-27 | 2020-09-03 | 平安科技（深圳）有限公司 | 一种文本识别方法及装置 |
| CN110399748A (zh) * | 2019-07-23 | 2019-11-01 | 中国建设银行股份有限公司 | 一种基于图像识别的截图方法和装置 |
| CN111414948A (zh) * | 2020-03-13 | 2020-07-14 | 腾讯科技（深圳）有限公司 | 目标对象检测方法和相关装置 |
| CN111651361A (zh) * | 2020-06-10 | 2020-09-11 | 宋文韬 | 一种基于可视化页面的无脚本自动化测试方法 |
Non-Patent Citations (2)
| Title |
|---|
| 基于机器视觉的管料自动识别与定位系统的设计与实现;饶鹏;《中国优秀硕士学位论文全文数据库 (经济与管理科学辑)》;J150-420 * |
| 大型运输机显示控制系统自动化测试平台设计;刘峰;《测控技术》;68-71 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112363918A (zh) | 2021-02-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106658672B (zh) | 一种无线保真Wi-Fi连接方法及移动终端 | |
| CN111708366B (zh) | 机器人及其行动控制方法、装置和计算机可读存储介质 | |
| CN109033772B (zh) | 一种验证信息的输入方法及装置 | |
| CN109685055A (zh) | 一种图像中文本区域的检测方法及装置 | |
| CN103996205A (zh) | 用于处理对象的方法和电子设备 | |
| CN106326120B (zh) | 一种应用软件的回归测试方法及装置、电子设备 | |
| CN110879777A (zh) | 应用界面的控件测试方法、装置、计算机设备及存储介质 | |
| CN110489312A (zh) | 用于控件触发数据采集的数据关联方法和装置 | |
| CN109831351B (zh) | 链路跟踪方法、装置、终端及存储介质 | |
| CN112631947B (zh) | 应用程序的测试控制方法、装置、电子设备及存储介质 | |
| CN112506600A (zh) | 用户界面的元素定位方法及其装置、介质和电子设备 | |
| CN105466414A (zh) | 一种导航路线的推荐方法及服务器 | |
| WO2014176938A1 (en) | Method and apparatus of retrieving information | |
| CN109978044B (zh) | 训练数据生成方法和装置、以及模型的训练方法和装置 | |
| CN112363919B (zh) | 用户界面ai自动化测试方法、装置、设备和存储介质 | |
| CN112363918B (zh) | 用户界面ai自动化测试方法、装置、设备和存储介质 | |
| CN108304104B (zh) | 一种数据获取方法及其设备、存储介质、终端 | |
| CN112840305B (zh) | 字体切换方法及相关产品 | |
| CN111598128A (zh) | 用户界面的控件状态识别、控制方法、装置、设备及介质 | |
| CN112231234B (zh) | 跨平台用户界面自动化测试方法、装置、设备和存储介质 | |
| CN106302011A (zh) | 基于多端的测试方法及终端 | |
| CN105706023A (zh) | 与不支持的输入设备的通信 | |
| CN115878491A (zh) | 界面异常检测方法、装置、电子设备、存储介质及芯片 | |
| CN114490323A (zh) | 终端设备的测试方法、装置及电子设备 | |
| JP6174706B2 (ja) | 装置上のフォルダの内容を動的に更新するシステム及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20240412 Address after: 100016 building 4, Dongfang Science Park, 52 Jiuxianqiao Road, Chaoyang District, Beijing Patentee after: BEIJING TESTIN INFORMATION TECHNOLOGY Co.,Ltd. Country or region after: China Address before: 102425 building 31, 69 Yanfu Road, Fangshan District, Beijing Patentee before: Beijing Yunju Intelligent Technology Co.,Ltd. Country or region before: China |