CN108228065B - 探测ui控件信息的方法、装置和电子设备 - Google Patents

Abstract

本申请实施例提供了一种探测UI控件信息的方法、装置和电子设备，该方法包括：提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；确定所述位置处的UI控件；获取所述UI控件的信息，并展示所述UI控件的信息。本申请实施例中，用户通过在待探测终端的显示屏上滑动手指或鼠标，即可实现对app中的UI控件信息的视觉验收，非常便捷，从而提高了用户验收app中的UI控件信息的效率。

Description

探测UI控件信息的方法、装置和电子设备

技术领域

本申请涉及软件测试技术领域，尤其是涉及一种探测UI(User Interface，用户界面)元素信息的方法、装置和电子设备。

背景技术

UI控件也称之为UI元素，通常为应用程序(application，简称app)中可以看见的任何可视元素，如按钮、文本字段、图像、标签等等，其中一些元素可响应用户的操作(如按钮等)。

在app开发过程中，app中的UI控件需要进行视觉验收，即实时查看每个UI控件的信息。目前一般通过直接查看代码或使用调试工具联调的方式，来实现app中UI控件的视觉验收。其中，直接查看代码的方式可能适合于开发人员，但验收方可能并不懂编程，因此，对于验收方而言，这种实现方式体验较差且验收效率较低。而使用调试工具联调的方式，需要在终端模拟机上安装调试工具，并进行相关配置。对于验收方而言，这种方式往往还需要学习和熟悉终端模拟机以及调试工具的相关功能，因此，这种实现方式同样体验较差且验收效率低。

发明内容

本申请实施例的目的在于提供一种探测UI控件信息的方法、装置和电子设备，以提高UI控件的验收效率和用户体验。

为达到上述目的，一方面，本申请实施例提供了一种探测UI控件信息的方法，包括以下步骤：

提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

另一方面，本申请实施例还提供了一种探测UI控件信息的装置，包括：

UI调试模式提供模块，用于提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；

操作指令接收模块，用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；

位置确定模块，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块，用于确定所述位置处的UI控件；

信息展示模块，用于获取所述UI控件的信息，并展示所述UI控件的信息。

再一方面，本申请实施例还提供了一种电子设备，包括：

处理器；

存储器，用于存储探测UI控件信息的装置，所述探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

再一方面，本申请实施例还提供了另一种探测用户界面UI控件信息的方法，包括以下步骤：

提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

再一方面，本申请实施例还提供了另一种探测用户界面UI控件信息的装置，包括：

UI调试模式提供模块，用于提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

操作指令接收模块，用于用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

位置确定模块，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块，用于确定所述位置处的UI控件；

信息展示模块，用于获取所述UI控件的信息，并展示所述UI控件的信息。

再一方面，本申请实施例还提供了另一种电子设备，包括：

处理器；

存储器，用于存储探测UI控件信息的装置，所述探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

本申请实施例中提供了应用的UI调试模式，该UI调试模式中包括其显示层级为第一层级的探测浮标，探测浮标可在待探测终端的显示屏上被移动。在应用的UI调试模式下，当接收到用户在显示屏上对探测浮标的操作指令时，根据操作指令确定对应的探测点，并确定探测点在屏幕坐标系中的位置；然确定该位置处的UI控件；确定UI控件后可获取该UI控件的信息并展示。由此可见，本申请实施例中，用户不需要查看app代码，也不需要学习和熟悉终端模拟机以及调试工具，只需在待探测终端的显示屏上通过手指或鼠标操作探测浮标，即可实现对app中的UI控件信息的视觉验收，非常便捷，从而提高了用户验收app中的UI控件信息的效率。

附图说明

此处所说明的附图用来提供对本申请实施例的进一步理解，构成本申请实施例的一部分，并不构成对本申请实施例的限定。在附图中：

图1为本申请一实施例的探测UI控件信息的方法的流程图；

图2为本申请另一实施例的探测UI控件信息的方法的流程图；

图3为本申请一实施例中UI控件信息的显示示意图；

图4为本申请另一实施例中UI控件信息的显示示意图；

图5为本申请另一实施例中UI控件信息的显示示意图；

图6为本申请另一实施例中UI控件信息的显示示意图；

图7为本申请另一实施例中UI控件信息的显示示意图；

图8为本申请另一实施例中UI控件信息的显示示意图；

图9为本申请一实施例的探测UI控件信息的装置的结构框图；

图10为本申请一实施例的电子设备的结构框图；

图11为本申请另一实施例的探测UI控件信息的装置的结构框图；

图12为本申请另一实施例的电子设备的结构框图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚明白，下面结合实施例和附图，对本申请实施例做进一步详细说明。在此，本申请实施例的示意性实施例及其说明用于解释本申请实施例，但并不作为对本申请实施例的限定。

下面结合附图，对本申请实施例的具体实施方式作进一步的详细说明。

需要说明的是，本申请以下实施例所提及的“探测UI控件信息”是指探测app中的UI控件的信息。在本申请说明书及权利要求当中所提及的“包括”为一开放式用语，故应解释成“包括但不限定于”。

参考图1所示，为本申请一实施例的探测UI控件信息的方法，该方法的执行主体可以为待探测终端，其包括以下步骤：

S101、提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动。

一般的，在app的开发过程中，开发者会先开发出调试(DEBUG)版本的app。所述的DEBUG版本是包含调试信息的，以便于程序员调试和完善app。而由于视觉验收app中UI控件信息的需求一般仅限于开发者，因此，本申请实施例中，可以在DEBUG版本的app中引入探测用户界面UI控件信息的功能。也就是说，本申请实施例中，提供应用的UI调试模式可以是DEBUG版本的app中一种功能模式。在该功能模式下，可以方便的实现对DEBUG版本的app中的各个UI控件进行视觉验收。并且，在正式推出的发布(RELEASE)版本的app中，探测用户界面UI控件信息的功能，则没必要被打包进去。这是因为，所述的RELEASE版本往往是进行了各种优化的，从而使得app在代码大小、运行速度等各项指标上都是最优(或至少较优的)，以便于用户使用。

本申请实施例中，所述待探测终端例如可以为终端真机。其中，所述的终端真机是相对于测试用的终端模拟机而言的，其是指市场上出售的终端，例如我们平时使用的台式电脑、笔记本电脑、手机、平板电脑等。

本申请实施例中，所述探测浮标例可以为如图6至图8中的手形标记所示；在本申请其他实施例中，所述探测浮标例还可以为任何可见形状，例如圆形、三角形、圆环形等等。需要说明的是，如果要实现所述探测浮标的功能，需预先在DEBUG版本的app中新建一个探测浮标控件，并将其图层的显示层级为设置第一级(也就最高级)，这样，就保证了探测浮标可始终处于app中任何用户界面的最上方，当界面间跳转时，不会对其造成影响(即界面间跳转不会导致探测浮标不可见或被隐藏)，从而可以方便对界面中任何UI控件进行探测。其中，探测浮标控件的新建，一般需要定义探测浮标控件的属性(比如形状、尺寸、颜色、图层优先级等等)和方法(按压时触发的执行动作、松开时触发的执行动作、拖动时触发的执行动作等等)。

S102、在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令。

在本申请一个示例性实施例中，所述操作指令例如可以为点击所述探测浮标。其中，所述的点击可以是用户通过手指或触控笔等操作待探测终端的触摸显示屏实现；也可以是用户通过鼠标操作待探测终端的显示屏实现。

在本申请另一个示例性实施例中，所述操作指令也可以为按住所述探测浮标的同时并任意拖动标。其中，所述的按住并拖动可以是用户通过手指或触控笔等操作待探测终端的触摸显示屏实现；也可以是用户通过鼠标操作待探测终端的显示屏实现。

在本申请另一个示例性实施例中，所述操作指令还可以为感应所述探测浮标。其中，在本示例性实施例中，待探测终端具有浮空触屏。当用户的手指(或其他合适的物体)与浮空触屏上显示的探测浮标的距离落入浮空触屏的感应范围时，所述探测浮标既可以感应所述用户的操作。其中，浮空触屏可以采用Floating Touch浮空触屏技术，浮空触屏让用户使用待探测终端时候，无需触摸屏幕就可以完成相关操作，例如手指与浮空触屏保证约15mm的距离就可以在待探测终端上获得类似鼠标的操作，也就是说，只需将手指悬停于浮空触屏上方便可操控待探测终端。

在本申请另一个示例性实施例中，所述操作指令还可以为感应所述探测浮标的同时并拖动。同样，在本示例性实施例中，待探测终端具有浮空触屏。当用户的手指(或其他合适的物体)与浮空触屏上显示的探测浮标的距离落入浮空触屏的感应范围时，所述探测浮标既可以感应所述用户的操作，并且在感应范围内，在感应的同时，用户的手指(或其他合适的物体)如果同时水平移动，则所述探测浮标会在浮空触屏上做相应的移动。

S103、根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置。

本申请实施例中，当用户通过操作指令操作所述探测浮标时，在待探测终端的显示屏上，所述探测浮标被操作时所述处的位置就被确定为探测点。

S104、确定所述位置处的UI控件。

本申请实施例中，如果要探测UI控件信息，则需要将探测点的轨迹映射到UI控件上。而一般情况下，对于一个app来说，其每个界面中通常有多个UI控件，并且其中一些UI控件之间是存在父子关系的(即任何一个子UI控件的位置，都是相对于他的父UI控件的坐标系进行设置的)。以图6至图8中所示的三个UI控件A、B和C为例，A是B的父UI控件，对应的B是A的子UI控件；而B又是C的父UI控件，对应的C则是B的子UI控件。在空间位置关系上，由于B是A的子UI控件，因此B的图层是在A的图层上方，同理，C是B的子UI控件，因此C的图层是在B的图层上方。因此，在本申请的一个示例性实施例中，所述确定探测点在屏幕坐标系中的位置可以包括：先确定探测点当前在其父UI控件的坐标系中的位置；然后将所述探测点当前在其UI控件的坐标系中的位置，转换成屏幕坐标系中的位置。例如当一个探测点位于C范围内的某个位置时，由于该位置是相对B中的一个位置，即该位置是在B的坐标系中的一个位置，这样，利用B的坐标系与屏幕坐标系的对应关系，可将该位置从B的坐标系转换到屏幕坐标系，即可确定探测点在屏幕坐标系中的位置。

一般情况下，对于一个app来说，其每个界面中通常有多个UI控件。在一些情况下，如果一个界面中的多个UI控件之间全都是位于同一图层级别的兄弟关系，而互不隶属时，则在扫描当前界面中所有在UI元素后，很容易检测出探测点位置处的UI控件。

然而，更多情况下，一个界面中有多个UI控件时，其中至少一部分UI部件之间是存在父子关系的。在此情况下，在本申请的一个示例性实施例中，可通过以下方式确定探测点位置处的UI控件，具体的：

首先，确定当前界面内所有UI控件中的各个根UI控件。其中，所述的根UI控件是指该UI控件不存在父UI控件，或者说根UI控件的父UI控件是UIView。其中，UIView表示屏幕上的一块矩形区域，它在app中占有绝对重要的地位，因为几乎所有可视化控件都是UIView的子类。

其次，从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件。当然，在检测出位于所述探测点位置处的根UI控件后，对于那些不在探测点位置处的根UI控件可以剔除或忽略，对应的，隶属于那些不在探测点位置处的根UI控件的UI控件，也会相应的被剔除或忽略，从而可以有效减少计算量。

再次，确定位于所述探测点位置处的根UI控件的各个第一子UI控件。

再次，从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件。同样，在检测出位于所述探测点位置处的第一子UI控件后，可以剔除或忽略不在探测点位置处的第一子UI控件。

然后，确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件。

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其图层的显示级别为第二级的UI控件(即其图层的显示级别仅次于探测浮标)。由此可见，本示例性实施例基于递归遍历的方式从图层的底层往上层一一探测，最终找出位于所述探测点位置处且其图层的显示级别为第二级的UI控件，然后将检测出的所有位于所述探测点位置处的UI控件统一保存。

当然，在本申请其他示例性实施例中，所述检测也可采用其他方式实现，例如从图层的上层往底层一一探测，只是由这种方式相对于上述方式而言，其实现可能更为复杂。

S105、获取所述UI控件的信息，并展示所述UI控件的信息。

在本申请一个示例性实施例中，所述UI控件的信息例如可以包括UI控件的名称和/或位置等等。在本申请其他示例性实施例中，还可根据需要获取UI控件的任何信息。

在本申请一个示例性实施例中，如果一个界面中的多个UI控件之间全都是位于同一图层级别的兄弟关系，则所述的获取UI控件的信息，即为获取其中位于探测点位置处的UI控件的信息。在本申请另一示例性实施例中，app的一个界面中有多个UI控件时，其中至少一部分UI部件之间是存在父子关系的。在此情况下，位于探测点位置处的UI控件可能不止一个；例如图6所示，手形标记处有C、B和A三个UI控件；例如图7所示，手形标记处有B和A两个UI控件。因此，此时所述获取所述UI控件的信息可以包括：确认当前界面内所有位于所述探测点位置处的UI控件中，其图层的显示级别为第二级的UI控件；然后获取该UI控件的信息。例如，在图6中，虽然，位于手形标记处有C、B和A三个UI控件，但由于C的图层级别是其中最高的(除探测浮标外)，因此，只需获取C的信息。类似的，在图7中，虽然，位于手形标记处有B和A两个UI控件，但由于B的图层级别是其中最高(除探测浮标外)的，因此，只需获取B的信息。

在本申请的一个实施例中，可通过调用所述UI控件所属的类的get方法获取UI控件的信息。

在本申请另一实施例中，在展示所述UI控件的信息的同时，还可以将所述UI控件突出显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，加粗显示，例如图6至图8所示。

在本申请一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，填充不同图案的方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，填充不同颜色的方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，高亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，低亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，高亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，低亮度方式显示。

本申请再一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，填充不同颜色的方式显示，等等。

本申请实施例中，还可以设置启用和退出该功能模式的选择开关。例如，在本申请的一个示例性实施例中，所述选择开关可以是虚拟开关(例如滑动式虚拟开关等)。在本申请另一示例性实施例中，所述选择开关也可以是一个特定的手势(比如拇指和食指同时触摸显示屏并相向滑动等等)。在本申请再一示例性实施例中，所述选择开关还可以是通过终端上的物理按键实现，等等。

本申请实施例的探测用户界面UI控件信息的方法中，可以在DEBUG版本的app中UI调试模式。UI调试模式中包括其显示层级为第一层级的探测浮标，探测浮标可在待探测终端的显示屏上被移动；在应用的UI调试模式下，当接收到用户在显示屏上对探测浮标的操作指令时，根据操作指令确定对应的探测点，并确定探测点在屏幕坐标系中的位置；然确定该位置处的UI控件；确定UI控件后可获取该UI控件的信息并展示。由此可见，本申请实施例中，用户不需要查看app代码，也不需要学习和熟悉终端模拟机以及调试工具，只需在待探测终端的显示屏上通过手指或鼠标操作探测浮标，即可实现对app中的UI控件信息的视觉验收，非常便捷，从而提高了用户验收app中的UI控件信息的效率。

结合图2所示，为本申请另一实施例的探测UI控件信息的方法，该方法的执行主体可以为待探测终端，其包括以下步骤：

S201、提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配。

与图1所示实施例的方法不同，本申请实施例提供的应用的UI调试模式中包括的是可透视且其显示层级为第一层级的探测图层，该探测图层的尺寸与待探测终端的显示屏的尺寸相匹配，以实现对待探测终端的显示屏上任何位置处的UI控件进行探测。本申请实施例中，透视的目的是为了可向用户显示位于探测图层下的UI控件。在本申请一个示例性实施例中，所述的可透视可优选为透明。

同样，本申请实施例中，要实现探测图层的功能，需要预先在DEBUG版本的app中新建一个探测图层，并定义其属性和方法。

S202、在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令。

S203、根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置。

在本申请一示例性实施例中，所述探测点可以是与所述待探测终端的触控显示屏接触的接触点位置。在本示例性实施例中，当手指或触控笔触摸到待探测终端的触控显示屏内的任一位置时，该位置就被确定为探测点。

在本申请另一示例性实施例中，所述探测点可以是待探测终端的显示屏上的鼠标指针所在位置。在本示例性实施例中，滑动鼠标时，鼠标指针会在待探测终端的显示屏上作相应的滑动，在此过程中，鼠标指针指向哪个位置，该位置就被确定为探测点。

在本申请另一示例性实施例中，所述探测点可以是待探测终端的显示屏上的鼠标点击位置。在本示例性实施例中，当用鼠标指定键(例如左键)点击待探测终端的显示屏内任一位置时，该鼠标点击位置就被为探测点。

在本申请另一示例性实施例中，所述待探测终端的浮空触屏的感应点位置。在本示例性实施例中，当用户的手指(或其他合适的物体)与浮空触屏的距离落入浮空触屏的感应范围时，所述探测浮标既可以感应所述用户的操作，此时用户的手指(或其他合适的物体)的位置即为探测点。

S204、确定所述位置处的UI控件。

S205、获取所述UI控件的信息，并展示所述UI控件的信息。

本申请图2所示实施例是本申请图1所示实施例的变形，本申请的图2所示实施例的各步骤的具体细节请参见本申请图1所示实施例的相应步骤，在此不再赘述。在本申请一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，填充不同图案的方式显示，例如图3至图5所示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，填充不同颜色的方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，高亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件整体，相对于背景或其他UI控件，低亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，高亮度方式显示。

在本申请另一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，低亮度方式显示。

本申请再一示例性实施例中，所述的突出显示可以是将目标UI控件的边框，相对于背景或其他UI控件，填充不同颜色的方式显示，等等。

本申请实施例中，还可以设置启用和退出该功能模式的选择开关。例如，在本申请的一个示例性实施例中，所述选择开关可以是虚拟开关(例如滑动式虚拟开关等)。在本申请另一示例性实施例中，所述选择开关也可以是一个特定的手势(比如拇指和食指同时触摸显示屏并相向滑动等等)。在本申请再一示例性实施例中，所述选择开关还可以是通过终端上的物理按键实现，等等。

本申请实施例的探测用户界面UI控件信息的方法中，可以在DEBUG版本的app中UI调试模式。该UI调试模式中包括可透视且其显示层级为第一层级的探测图层，且探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；在应用的UI调试模式下，当接收到用户在显示屏上对探测图层的操作指令时，根据操作指令确定对应的探测点，并确定探测点在屏幕坐标系中的位置；然确定该位置处的UI控件；确定UI控件后可获取该UI控件的信息并展示。由此可见，本申请实施例中，用户不需要查看app代码，也不需要学习和熟悉终端模拟机以及调试工具，只需在待探测终端的显示屏上通过手指或鼠标操作探测浮标，即可实现对app中的UI控件信息的视觉验收，非常便捷，从而提高了用户验收app中的UI控件信息的效率。

虽然上文描述的过程流程包括以特定顺序出现的多个操作，但是，应当清楚了解，这些过程可以包括更多或更少的操作，这些操作可以顺序执行或并行执行(例如使用并行处理器或多线程环境)。

参考图9所示，本申请实施例提供了一种第一探测UI控件信息的装置，该第一探测UI控件信息的装置包括：

UI调试模式提供模块91，用于提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；

操作指令接收模块92，用于用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；

位置确定模块93，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块94，用于确定所述位置处的UI控件；

信息展示模块95，用于获取所述UI控件的信息，并展示所述UI控件的信息。

本申请实施例的探测UI控件信息的装置，与上述图1所示实施例的探测UI控件信息的方法相对应，因此，有关于本申请实施例的探测UI控件信息的装置的细节，请参考上述图1所示实施例的探测UI控件信息的方法，在此不再赘述。

参见图10所示，本申请实施例的电子设备在硬件层面可以包括处理器、内部总线、存储器和内存，当然还可能包括其他业务所需要的硬件。处理器从存储器中读取对应的计算机程序到内存中然后运行，在逻辑层面上形成第一探测UI控件信息的装置。当然，除了软件实现方式之外，本申请并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。其中，所述第一探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标，所述探测浮标可在待探测终端的显示屏上被移动；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

本申请实施例的电子设备，与上述图1所示实施例的探测UI控件信息的方法相对应，因此，有关于本申请实施例的电子设备的细节，请参考上述图1所示实施例的探测UI控件信息的方法，在此不再赘述。

参考图11所示，本申请实施例提供了另一种第二探测UI控件信息的装置，该第二探测UI控件信息的装置包括：

UI调试模式提供模块111，用于提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

操作指令接收模块112，用于用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

位置确定模块113，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块114，用于确定所述位置处的UI控件；

信息展示模块115，用于获取所述UI控件的信息，并展示所述UI控件的信息。

本申请实施例的探测UI控件信息的装置，与上述图2所示实施例的探测UI控件信息的方法相对应，因此，有关于本申请实施例的探测UI控件信息的装置的细节，请参考上述图2所示实施例的探测UI控件信息的方法，在此不再赘述。

参见图12所示，本申请实施例的另一种电子设备在硬件层面可以包括处理器、内部总线、存储器和内存，当然还可能包括其他业务所需要的硬件。处理器从存储器中读取对应的计算机程序到内存中然后运行，在逻辑层面上形成第二探测UI控件信息的装置。当然，除了软件实现方式之外，本申请并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。其中，所述第二探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息。

本申请实施例的电子设备，与上述图2所示实施例的探测UI控件信息的方法相对应，因此，有关于本申请实施例的电子设备的细节，请参考上述图2所示实施例的探测UI控件信息的方法，在此不再赘述。

本领域技术人员还可以了解到本申请实施例列出的各种说明性逻辑块、单元和步骤可以通过硬件、软件或两者的结合来实现。至于是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用，可以使用各种方法实现所述的功能，但这种实现不应被理解为超出本申请实施例保护的范围。

本申请实施例中所描述的各种说明性的逻辑块，或单元都可以通过通用处理器，数字信号处理器，专用集成电路(ASIC)，现场可编程门阵列或其它可编程逻辑装置，离散门或晶体管逻辑，离散硬件部件，或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器，可选地，该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现，例如数字信号处理器和微处理器，多个微处理器，一个或多个微处理器联合一个数字信号处理器核，或任何其它类似的配置来实现。

本申请实施例中所描述方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地，存储媒介可以与处理器连接，以使得处理器可以从存储媒介中读取信息，并可以向存储媒介存写信息。可选地，存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中，ASIC可以设置于用户终端中。可选地，处理器和存储媒介也可以设置于用户终端中的不同的部件中。

在一个或多个示例性的设计中，本申请实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现，这些功能可以存储与电脑可读的媒介上，或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如，这样的电脑可读媒体可以包括但不限于RAM、ROM、EEPROM、CD-ROM或其它光盘存储、磁盘存储或其它磁性存储装置，或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外，任何连接都可以被适当地定义为电脑可读媒介，例如，如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、DVD、软盘和蓝光光盘，磁盘通常以磁性复制数据，而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

以上所述的具体实施例，对本申请的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本申请实施例的具体实施例而已，并不用于限定本申请的保护范围，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (16)

1.一种探测UI控件信息的方法，其特征在于，包括以下步骤：

提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标控件，所述探测浮标控件可在待探测终端的显示屏上被移动；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标控件的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处且其显示层级为第二层级的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述确定所述位置处且其显示层级为第二层级的UI控件，包括：

扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件，包括：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

2.根据权利要求1所述的探测UI控件信息的方法，其特征在于，所述操作指令包括以下中的任意一种：

点击所述探测浮标控件；

按住所述探测浮标控件的同时并拖动；

感应所述探测浮标控件；

感应所述探测浮标控件的同时并拖动。

3.根据权利要求1所述的探测UI控件信息的方法，其特征在于，所述确定所述探测点在屏幕坐标系中的位置，包括：

确定所述探测点当前在其父UI控件的坐标系中的位置；

将所述探测点当前在其父UI控件的坐标系中的位置，转换成屏幕坐标系中的位置。

4.根据权利要求1所述的探测UI控件信息的方法，其特征在于，所述获取所述UI控件的信息，包括：

调用所述UI控件所属的类的get方法获取所述UI控件的信息。

5.根据权利要求1所述的探测UI控件信息的方法，其特征在于，还包括：

在展示所述UI控件的信息的同时，将所述UI控件突出显示。

6.根据权利要求1所述的探测UI控件信息的方法，其特征在于，所述UI控件的信息包括：所述UI控件的控件名称和/或位置。

7.一种探测UI控件信息的装置，其特征在于，包括：

UI调试模式提供模块，用于提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标控件，所述探测浮标控件可在待探测终端的显示屏上被移动；

操作指令接收模块，用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标控件的操作指令；

位置确定模块，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块，用于确定所述位置处且其显示层级为第二层级的UI控件；

信息展示模块，用于获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述UI控件确定模块包括：

检测单元，用于扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，所述检测单元具体用于：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

8.一种电子设备，其特征在于，包括：

处理器；

存储器，用于存储探测UI控件信息的装置，所述探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括其显示层级为第一层级的探测浮标控件，所述探测浮标控件可在待探测终端的显示屏上被移动；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测浮标控件的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处且其显示层级为第二层级的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述确定所述位置处且其显示层级为第二层级的UI控件，包括：

扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件，包括：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

9.一种探测UI控件信息的方法，其特征在于，包括以下步骤：

提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处且其显示层级为第二层级的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述确定所述位置处且其显示层级为第二层级的UI控件，包括：

扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件，包括：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

10.根据权利要求9所述的探测UI控件信息的方法，其特征在于，所述探测点包括以下所列中的任意一种或其结合：

与所述待探测终端的触控显示屏接触的接触点位置；

所述显示屏上的鼠标指针所在位置；

所述显示屏上的鼠标点击位置；

所述待探测终端的浮空触屏的感应点位置。

11.根据权利要求9所述的探测UI控件信息的方法，其特征在于，所述确定所述探测点在屏幕坐标系中的位置，包括：

确定所述探测点当前在其父UI控件的坐标系中的位置；

将所述探测点当前在其父UI控件的坐标系中的位置，转换成屏幕坐标系中的位置。

12.根据权利要求9所述的探测UI控件信息的方法，其特征在于，所述获取所述UI控件的信息，包括：

调用所述UI控件所属的类的get方法获取所述UI控件的信息。

13.根据权利要求9所述的探测UI控件信息的方法，其特征在于，还包括：

在展示所述UI控件的信息的同时，将所述UI控件突出显示。

14.根据权利要求9所述的探测UI控件信息的方法，其特征在于，所述UI控件的信息包括：所述UI控件的控件名称和/或位置。

15.一种探测UI控件信息的装置，其特征在于，包括：

UI调试模式提供模块，用于提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

操作指令接收模块，用于在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

位置确定模块，用于根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

UI控件确定模块，用于确定所述位置处且其显示层级为第二层级的UI控件；

信息展示模块，用于获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述UI控件确定模块包括：

检测单元，用于扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，所述检测单元具体用于：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

16.一种电子设备，其特征在于，包括：

处理器；

存储器，用于存储探测UI控件信息的装置，所述探测UI控件信息的装置被所述处理器执行时，执行如下步骤：

提供应用的UI调试模式，所述UI调试模式中包括可透视且其显示层级为第一层级的探测图层，所述探测图层的尺寸与待探测终端的显示屏的尺寸相匹配；

在所述应用的UI调试模式下，接收用户在所述显示屏上对所述探测图层的操作指令；

根据所述操作指令确定对应的探测点，并确定所述探测点在屏幕坐标系中的位置；

确定所述位置处且其显示层级为第二层级的UI控件；

获取所述UI控件的信息，并展示所述UI控件的信息；

其中，所述确定所述位置处且其显示层级为第二层级的UI控件，包括：

扫描当前界面内的所有UI控件，并从中检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件；

其中，检测出所有位于所述探测点位置处且其显示层级为第二层级的UI控件，包括：

确定当前界面内所有UI控件中的各个根UI控件；

从所述各个根UI控件中，检测出位于所述探测点位置处的根UI控件；

确定位于所述探测点位置处的根UI控件的各个第一子UI控件；

从所述各个第一子UI控件中，检测出位于所述探测点位置处的第一子UI控件；

确定位于所述探测点位置处的第一子UI控件的各个第二子UI控件；

依此递推，直至从所述当前界面内所有UI控件中，找出位于所述探测点位置处且其显示层级为第二层级的UI控件。

Images