CN110377338A - 信息标注方法、介质、装置和计算设备 - Google Patents

Abstract

本发明的实施方式提供了一种信息标注方法、信息标注装置、计算机可读介质和计算设备。该方法包括：响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；利用所述信息标注图层接收信息标注指令；根据所述信息标注指令确定所述视图界面中的目标视图对象；获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息。该方法可以提高标注信息的可控性和交互性，用户可以根据需要自由查看各个视图对象的标注信息，进而能够提高应用程序的检测准确性和验收效率。

Description

信息标注方法、介质、装置和计算设备

技术领域

本发明的实施方式涉及计算机技术领域，更具体地，本发明的实施方式涉及信息标注方法、信息标注装置、计算机可读介质和计算设备。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

在应用程序产品的开发过程中，一般需要对应用程序的各方面功能实现和使用效果进行检测，只有顺利通过检测的应用程序才能作为合格产品进行上线。而如果检测到应用程序存在缺陷，则需要对其进行调整或修复。例如，测试人员在对应用程序进行视觉效果验收时，发现应用程序中某处文字对象的字体颜色与设计源稿存在偏差，那么通常的做法是询问相应的开发人员或者查找应用程序的源代码，从而确定该处字体颜色的色值，然后再判断是否需要对色值做出调整。这种检测方式存在实时性差、检测效率低等问题。

发明内容

本发明的目的在于提供一种信息标注方法、信息标注装置、计算机可读介质和计算设备，至少在一定程度上克服背景技术中存在的检测实时性差、检测效率低等问题。

根据本发明实施方式的第一方面，提供了一种信息标注方法，该方法包括：响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；利用所述信息标注图层接收信息标注指令；根据所述信息标注指令确定所述视图界面中的目标视图对象；获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息。

在本发明的一些示例性实施方式中，基于以上技术方案，所述信息标注图层包括指令接收图层和信息展示图层。

在本发明的一些示例性实施方式中，基于以上技术方案，所述利用所述信息标注图层接收信息标注指令，包括：利用所述指令接收图层拦截作用于所述视图界面的触控事件；当所述触控事件为信息标注事件时，将所述触控事件确定为信息标注指令。

在本发明的一些示例性实施方式中，基于以上技术方案，所述根据所述信息标注指令确定所述视图界面中的目标视图对象，包括：利用所述指令接收图层确定所述信息标注指令在所述视图界面的触发位置；获取所述视图界面的视图布局信息，所述视图布局信息包括所述视图对象的位置信息和尺寸信息；根据所述触发位置和所述视图布局信息确定所述视图界面中的目标视图对象。

在本发明的一些示例性实施方式中，基于以上技术方案，所述根据所述触发位置和所述布局信息确定所述视图界面中的目标视图对象，包括：根据所述视图布局信息，通过递归查找算法在所述视图界面中查找包含所述触发位置的尺寸最小的视图对象，并将所述尺寸最小的视图对象作为目标视图对象。

在本发明的一些示例性实施方式中，基于以上技术方案，所述标注信息包括所述目标视图对象的边界信息和属性信息；所述获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息，包括：获取所述目标视图对象的边界信息；根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框；获取所述目标视图对象的属性信息；在所述信息展示图层中确定目标显示区域，并在所述目标显示区域内显示所述属性信息。

在本发明的一些示例性实施方式中，基于以上技术方案，所述边界信息包括所述目标视图对象的外部边界信息；所述根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框，包括：根据所述外部边界信息在所述信息展示图层中绘制所述目标视图对象的外部边界线框。

在本发明的一些示例性实施方式中，基于以上技术方案，所述边界信息还包括所述目标视图对象内的各个子视图的内部边界信息；所述根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框，还包括：根据所述内部边界信息在所述信息展示图层中绘制所述目标视图对象的内部边界线框。

在本发明的一些示例性实施方式中，基于以上技术方案，所述属性信息包括所述目标视图对象的基础属性和标签属性；所述获取所述目标视图对象的属性信息，包括：通过所述目标视图对象所属应用程序提供的基础属性接口获取所述目标视图对象的所述基础属性；确定所述目标视图对象在所述应用程序中对应的标签，根据所述标签获得所述目标视图对象的标签属性。

在本发明的一些示例性实施方式中，基于以上技术方案，所述指令接收图层和所述信息展示图层均为透明图层。

在本发明的一些示例性实施方式中，基于以上技术方案，所述指令接收图层位于所述视图界面和所述信息展示图层之间。

在本发明的一些示例性实施方式中，基于以上技术方案，所述标注信息具有页面跳转功能；所述方法还包括：利用所述指令接收图层接收作用于所述标注信息的信息跳转指令；根据所述信息跳转指令在所述信息展示图层上显示与所述标注信息相关的跳转页面。

在本发明的一些示例性实施方式中，基于以上技术方案，所述跳转页面为网络页面或者缓存文件页面；所述根据所述信息跳转指令在所述信息展示图层上显示与所述标注信息相关的跳转页面，包括：确定与所述标注信息相关的统一资源定位符或者缓存目录；根据所述信息跳转指令在所述信息展示图层上显示对应于所述统一资源定位符的网络页面或者对应于所述缓存目录的缓存文件页面。

根据本发明实施方式的第二方面，提供一种介质，其上存储有程序，该程序被处理器执行时实现如以上各个技术方案中的信息标注方法。

根据本发明实施方式的第三方面，提供一种信息标注装置，该装置包括：图层建立模块，被配置为响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；指令接收模块，被配置为利用所述信息标注图层接收信息标注指令；对象确定模块，被配置为根据所述信息标注指令确定所述视图界面中的目标视图对象；信息展示模块，被配置为获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息。

在本发明的一些示例性实施方式中，基于以上技术方案，所述信息标注图层包括指令接收图层和信息展示图层。

在本发明的一些示例性实施方式中，基于以上技术方案，所述指令接收模块包括：触控事件拦截单元，被配置为利用所述指令接收图层拦截作用于所述视图界面的触控事件；标注指令确定单元，被配置为当所述触控事件为信息标注事件时，将所述触控事件确定为信息标注指令。

在本发明的一些示例性实施方式中，基于以上技术方案，所述对象确定模块包括：触发位置确定单元，被配置为利用所述指令接收图层确定所述信息标注指令在所述视图界面的触发位置；布局信息获取单元，被配置为获取所述视图界面的视图布局信息，所述视图布局信息包括所述视图对象的位置信息和尺寸信息；视图对象确定单元，被配置为根据所述触发位置和所述视图布局信息确定所述视图界面中的目标视图对象。

在本发明的一些示例性实施方式中，基于以上技术方案，所述视图对象确定单元包括：递归查找子单元，被配置为根据所述视图布局信息，通过递归查找算法在所述视图界面中查找包含所述触发位置的尺寸最小的视图对象，并将所述尺寸最小的视图对象作为目标视图对象。

在本发明的一些示例性实施方式中，基于以上技术方案，所述标注信息包括所述目标视图对象的边界信息和属性信息；所述信息展示模块包括：边界信息获取单元，被配置为获取所述目标视图对象的边界信息；边界线框绘制单元，被配置为根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框；属性信息获取单元，被配置为获取所述目标视图对象的属性信息；属性信息显示单元，被配置为在所述信息展示图层中确定目标显示区域，并在所述目标显示区域内显示所述属性信息。

在本发明的一些示例性实施方式中，基于以上技术方案，所述边界信息包括所述目标视图对象的外部边界信息；所述边界线框绘制单元包括：外部边界绘制子单元，被配置为根据所述外部边界信息在所述信息展示图层中绘制所述目标视图对象的外部边界线框。

在本发明的一些示例性实施方式中，基于以上技术方案，所述边界信息还包括所述目标视图对象内的各个子视图的内部边界信息；所述边界线框绘制单元还包括：内部边界绘制子单元，被配置为根据所述内部边界信息在所述信息展示图层中绘制所述目标视图对象的内部边界线框。

在本发明的一些示例性实施方式中，基于以上技术方案，所述属性信息包括所述目标视图对象的基础属性和标签属性；所述属性信息获取单元包括：基础属性获取子单元，被配置为通过所述目标视图对象所属应用程序提供的基础属性接口获取所述目标视图对象的所述基础属性；标签属性获取子单元，被配置为确定所述目标视图对象在所述应用程序中对应的标签，根据所述标签获得所述目标视图对象的标签属性。

在本发明的一些示例性实施方式中，基于以上技术方案，所述指令接收图层和所述信息展示图层均为透明图层。

在本发明的一些示例性实施方式中，基于以上技术方案，所述指令接收图层位于所述视图界面和所述信息展示图层之间。

在本发明的一些示例性实施方式中，基于以上技术方案，所述标注信息具有页面跳转功能；所述装置还包括：跳转指令接收模块，被配置为利用所述指令接收图层接收作用于所述标注信息的信息跳转指令；跳转页面显示模块，被配置为根据所述信息跳转指令在所述信息展示图层上显示与所述标注信息相关的跳转页面。

在本发明的一些示例性实施方式中，基于以上技术方案，所述跳转页面为网络页面或者缓存文件页面；所述跳转页面显示模块包括：信息确定单元，被配置为确定与所述标注信息相关的统一资源定位符或者缓存目录；页面显示单元，被配置为根据所述信息跳转指令在所述信息展示图层上显示对应于所述统一资源定位符的网络页面或者对应于所述缓存目录的缓存文件页面。

根据本发明实施方式的第四方面，提供一种计算设备，该计算设备包括：处理器和存储器，所述存储器存储有可执行指令，所述处理器用于调用所述存储器存储的可执行指令执行如以上各技术方案中的信息标注方法。

在本发明实施方式提供的信息标注方法、信息标注装置、计算机可读介质和计算设备中，通过在应用程序的视图界面上覆盖信息标注图层可以将针对视图对象的标注信息展示在外部图层上，将标注信息与视图对象分离的同时，能够向用户呈现信息直接标注在视图对象上的视觉效果。利用信息标注图层展示标注信息可以提高标注信息的可控性和交互性，用户可以根据需要自由查看各个视图对象的标注信息，从而能够提高应用程序的检测准确性和验收效率。

附图说明

通过参考附图阅读下文的详细描述，本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本发明的若干实施方式，其中：

图1示出了本发明在一应用场景中的双图层标注信息展示示意图；

图2示出了本发明在该应用场景中的信息标注原理示意图；

图3示出了在本公开的一些示例性实施方式中的信息标注方法的步骤流程图；

图4示出了在本公开的一些示例性实施方式中接收信息标注指令的步骤流程图；

图5示出了在本公开的一些示例性实施方式中确定目标视图对象的步骤流程图；

图6示出了在本公开的一些示例性实施方式中展示标注信息的步骤流程图；

图7示出了在本公开的一些示例性实施方式中跳转页面的步骤流程图；

图8示出了在本公开的一些示例性实施方式中的信息标注装置的组成结构示意图。

在附图中，相同或对应的标号表示相同或对应的部分。

具体实施方式

下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解，给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。相反，提供这些实施方式是为了使本发明更加透彻和完整，并且能够将本发明的范围完整地传达给本领域的技术人员。

本领域技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本发明可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。

现将本文中所涉及的术语解释如下：

视图对象(View)：指的是应用程序在某一用户界面中呈现的文本、图像、虚拟控件等视图化的虚拟元素；

视图界面：指的是包含有若干视图对象的用户界面；

视图组(ViewGroup)：继承自View，可以是单个视图对象，也可以是由多个视图对象组成的一组视图，如一个列表或者一个网格；

Drawable：一种可以在画布(Canvas)上进行绘制的抽象概念，它可以是一种颜色或者一张图片，也可以通过XML定义或者通过代码创建。

ViewOverLay：存在于API 18+(Android 4.3)内的类，是View视图自带的一个浮层，在视图的所有内容绘制完成后被绘制，它的大小尺寸与对应的视图相同。

ViewGroupOverLay：是ViewOverLay的子类，对应于ViewGroup，同样地，这个浮层在ViewGroup中所有内容(包括子视图ChildView)绘制完毕后才会被绘制，它的大小尺寸与对应的ViewGroup相同。

Activity：一个应用程序组件，可以提供一个单独的视图界面，利用视图界面内的视图对象可以监听并处理用户指令，从而与用户进行交互以完成某项任务。

此外，附图中的任何元素数量均用于示例而非限制，以及任何命名都仅用于区分，而不具有任何限制含义。

下面参考本发明的若干代表性实施方式，详细阐释本发明的原理和精神。

发明概述

在本领域的相关技术中，为了方便测试人员对应用程序进行实时检测，可以在标注模式下为应用程序的视图对象添加标注信息，标注信息的内容例如可以包视图对象的尺寸、颜色、字体大小、填充值等相关信息。通过显示这些标注信息可以直接向测试人员展示视图对象的配置信息，而不必依赖于询问开发人员或者查找源代码等手段。

一种可选的信息标注方式是利用视图对象自带的浮层(OverLay)进行标注信息的添加。例如，利用ViewOverLay可以在视图对象内添加或者移除Drawable，从而实现对标注信息的增加或删除；又例如，利用ViewGroupOverLay可以在ViewOverLay的基础上增加对视图类型标注信息的支持。浮层OverLay作为视图View自带的成员变量，是属于对应视图对象的内容信息，会在视图对象的所有内容绘制完毕后被绘制，然后呈现在用户面前。

基于利用视图自带浮层进行信息标注的方法，当用户需要对视图对象的信息进行标注时，例如对文本视图对象TextView的字体大小进行标注，那么首先需要将标注信息转化为对应的Drawable或者View，然后通过用于在视图中提供浮层的函数getOverLay()获得或者创建一个OverLay对象，最后通过OverLay提供的API接口进行标注信息的增加或者删除操作。

通过视图自带浮层作为标注信息的绘制载体，虽然可以提高应用程序中视图信息呈现的实时性，但是浮层的绘制和视图对象的绘制具有很强的关联性，浮层中的所有标注信息会在视图对象呈现的同时一并展示出来。在视图对象较多且视图界面有限的情况下，标注信息的种类和数量也较为繁杂，测试人员难以从中选择自己真正想要查看的有用信息。另外，由于浮层本身的定位，它只能作为一个内容展示容器，而无法处理点击或者触摸事件，因此也存在着可控性差，无法进行用户交互的问题。

基于以上问题和缺陷，本发明提供了一种改进的信息标注方法，该方法的基本原理是在应用程序的视图界面之上覆盖一个或者多个外部图层，然后利用外部覆盖的图层对视图界面中的视图对象进行信息标注。与此同时，还可以利用外部覆盖的图层接收用户触发的点击或者其他触摸事件，从而进行标注信息的精准显示和操作，提高了标注信息的可控性和交互性。采用本发明中的信息标注方法可以为应用程序的开发人员和测试人员提供更加便捷高效的视图检测手段。

在介绍了本发明的基本原理之后，下面具体介绍本发明的各种非限制性实施方式。

应用场景总览

需要注意的是，下述应用场景仅是为了便于理解本发明的精神和原理而示出，本发明的实施方式在此方面不受任何限制。相反，本发明的实施方式可以应用于适用的任何场景。

举例而言，本发明的实施方式主要可以应用于智能手机、平板电脑、笔记本电脑、台式电脑等各种终端设备上。当用户在终端设备上对应用程序进行测试时，可以通过实施本发明提供的信息标注方法对应用程序视图界面中的各个视图对象进行信息标注，从而能够实时且高效地获取到视图对象的准确信息。

图1示出了本发明在一应用场景中的双图层标注信息展示示意图，图中显示的是图层与视图界面的分解状态。如图1所示，本应用场景在应用程序的视图界面之上覆盖了两个外部图层，图中的左侧部分为应用程序APP的视图界面，视图界面中可以呈现实现应用程序功能的若干视图对象，例如可以包括文本、图像、虚拟控件等等。图中的中间部分为指令接收图层MaskTouchLayout，可以用于实现用户指令的接收以及用户指令的分析和传递等其他功能。图中的右侧部分为信息展示图层PixelPaintLayout，可以用于在指定位置处显示针对视图对象的标注信息。

图2示出了本发明在该应用场景中的信息标注原理示意图。其中各个部分的功能和原理介绍如下：

列表控制器ActivityCycleManager：

维护了一个Activity的显示列表，各个Activity按照各自的启动顺序在该显示列表中依次排列，显示列表中的最后一个Activity是最后启动的，即为当前显示的Activity。ActivityCycleManager可以通过广播主动推送Activity列表的变化给MarkView或者由MarkView通过调用getTopActivity的方法去获得Activity列表的变化。

图层管理器MarkView：

主要实现如下两方面的功能：

(1)在当前Activity所展示的视图界面之上覆盖或者移除图1中所示的两个外部图层，即指令接收图层MaskTouchLayout和信息展示图层PixelPaintLayout。

(2)在指令接收图层MaskTouchLayout和信息展示图层PixelPaintLayout之间进行数据传输。

指令接收图层MaskTouchLayout：

用于拦截用户点击事件MotionEvent，并将点击事件传递给MarkView。基于指令接收图层拦截到的用户点击事件，可以确定APP视图界面上的目标视图对象TargetView。如果不拦截该层点击事件，那么下层APP的视图对象可能会因接收到该触摸事件而进行跳转或其他操作，而无法达到根据用户点击事件显示标注信息的效果。

信息展示图层PixelPaintLayout：

根据MarkView传递出来的目标视图对象TargetView，递归调用DrawWireFrame方法，在对应的位置利用drawRect方法绘制目标视图对象及其子视图对象的边界，并且在图层的适合位置标注(drawText和drawLine)相应的属性信息，例如标注内边距Padding和外边距Margin的具体数值。这样给用户的视觉呈现就如同在原APP上进行信息标注。

示例性方法

下面结合上述的应用场景，参考图3至图7来描述根据本发明示例性实施方式的信息标注方法。

图3示出了在本公开的一些示例性实施方式中的信息标注方法的步骤流程图。如图3所示，该方法主要可以包括以下步骤：

步骤S310.响应于信息标注请求，建立覆盖于视图界面上的信息标注图层。

终端设备在正常工作状态下，可以通过显示屏幕向用户呈现应用程序的视图界面。与此同时，用户可以与视图界面中的各个视图对象进行交互以实现相应的应用程序功能。而在应用程序的开发和测试过程中，用户(主要可以是开发人员或者测试人员)可以通过向终端设备发送信息标注请求，使得终端设备由正常工作状态切换至信息标注状态。响应于信息标注请求，切换至信息标注状态的终端设备在当前显示的应用程序的视图界面之上建立信息标注图层，信息标注图层的数量可以是一个或者多个。本步骤中建立的信息标注图层可以与应用程序的视图界面具有完全相同的尺寸，从而能够完整覆盖在视图界面上。

步骤S320.利用信息标注图层接收信息标注指令。

在进入信息标注状态后，用户可以根据标注信息的显示需求向终端设备发送信息标注指令，该信息标注指令将被信息标注图层接收以进行后续处理。以智能手机或者平板电脑等触控设备为例，信息标注图层接收到的信息标注指令可以是根据用户施加的点击、长按或者滑动等触控操作而生成的控制指令。

步骤S330.根据信息标注指令确定视图界面中的目标视图对象。

应用程序可以按照确定的视图布局形式在一个视图界面中同时呈现多个视图对象，而且每个视图对象在视图界面中一般具有相对确定的尺寸和位置。在一个应用程序的视图界面中一般具有多种不同类型的视图对象，以便实现丰富的程序功能。视图对象的类型例如可以包括文本类视图对象TextView和图像类视图对象ImageView，另外还可以包括按钮、输入框、滚动条等虚拟控件类视图对象。在本步骤中，根据信息标注图层接收到的信息标注指令，可以从视图界面所呈现的一个或者多个视图对象中确定一个目标视图对象，该目标视图对象即为用户希望对其进行信息查看的视图对象。

步骤S340.获取对应于目标视图对象的标注信息并在信息标注图层上展示标注信息。

由步骤S330确定视图界面中的目标视图对象之后，本步骤可以获取与目标视图对象相对应的标注信息，同时将该标注信息展示在信息标注图层上。标注信息的展示内容、展示形式以及展示位置等可以根据实际需要按照预先设定的规则进行配置，展示内容例如可以包括目标视图对象的尺寸、颜色、字体大小等内容，展示形式例如可以包括文字、图像等形式，展示位置例如可以包括信息标注图层的顶部、中部、底部等位置，本发明对此均不做特殊限定。

在本示例性实施方式提供的信息标注方法中，通过在应用程序的视图界面上覆盖信息标注图层可以将针对视图对象的标注信息展示在外部图层上，将标注信息与视图对象分离的同时，能够向用户呈现信息直接标注在视图对象上的视觉效果。利用信息标注图层展示标注信息可以提高标注信息的可控性和交互性，用户可以根据需要自由查看各个视图对象的标注信息，从而能够提高应用程序的检测准确性和验收效率。

在本公开的一些示例性实施方式中，可以在视图界面外部逐层覆盖多个信息标注图层，从而更加精准高效地实现信息标注功能。如上文中应用场景总览部分所涉及的实施方式，覆盖在视图界面外部的信息标注图层可以包括指令接收图层MaskTouchLayout和信息展示图层PixelPaintLayout。其中，指令接收图层和信息展示图层均可以是透明图层，不会对底层视图界面的呈现产生遮挡。可选地，指令接收图层可以被设置在视图界面和信息展示图层之间。

当视图界面上覆盖多个信息标注图层时，可以由其中一个指定的信息标注图层接收用户触发的交互指令，图4示出了在本公开的一些示例性实施方式中接收信息标注指令的步骤流程图。如图4所示，在以上实施方式的基础上，步骤S320.利用信息标注图层接收信息标注指令，可以包括以下步骤：

步骤S410.利用指令接收图层拦截作用于视图界面的触控事件。

针对具有触控功能的终端设备，在正常工作状态下，当用户在应用程序的视图界面上施加触控操作时，可以触发视图界面中相应视图对象的应用功能。例如，在音乐APP的播放界面下，用户点击播放界面中的播放按钮时，可以触发终端设备播放对应的音乐。而进入信息标注状态后，利用指令接收图层可以拦截作用在视图界面上的触控事件，避免因触发视图对象的应用功能而对信息标注的功能和效果产生影响。

步骤S420.当触控事件为信息标注事件时，将触控事件确定为信息标注指令。

在利用指令接收图层拦截到触控事件后，可以对该触控事件的事件类型进行判断，当判定一个触控事件的事件类型为信息标注事件时，那么可以将该触控事件确定为信息标注指令。举例而言，在信息标注状态下的点击事件可以被认定为信息标注指令，而除点击事件以外的其他触控事件可以被认定为无效触控事件。

仍以音乐APP为例，当用户在信息标注状态下点击播放界面中的播放按钮时，可以确定该点击事件为信息标注事件，然后基于信息标注指令可以向用户呈现针对该播放按钮的标注信息，例如可以展示该播放按钮的尺寸、边界和颜色等信息。与此同时，由于该点击事件被外部的指令接收图层所拦截，位于底层的播放界面并不会触发音乐APP自身的音乐播放功能。

在通过指令接收图层拦截触控事件进而确定信息标注指令后，可以继续根据信息标注指令确定目标视图对象，该目标对象即为需要展示标注信息的视图对象。图5示出了在本公开的一些示例性实施方式中确定目标视图对象的步骤流程图。如图5所示，在以上各种实施方式的基础上，步骤S330.根据信息标注指令确定视图界面中的目标视图对象，可以包括以下步骤：

步骤S510.利用指令接收图层确定信息标注指令在视图界面的触发位置。

当指令接收图层拦截到触控事件后，如果判定该触控事件的事件类型为用于触发信息标注指令的信息标注事件，那么指令接收图层还需要获取该触控事件在指令接收图层内的拦截位置，然后根据指令接收图层与视图界面之间的位置映射关系确定信息标注指令在视图界面中的触发位置。举例而言，如果指令接收图层是以相同的尺寸大小完整覆盖在视图界面上，那么可以利用同一个坐标系对指令接收图层和视图界面内的各个位置进行标定。当指令接收图层获取到一个触控事件的拦截位置为具有某一坐标值的位置点，那么可以将视图界面中具有相同坐标值的位置确定为信息标注指令的触发位置，即确定信息标注指令在视图界面的触发位置。

步骤S520.获取视图界面的视图布局信息，视图布局信息包括视图对象的位置信息和尺寸信息。

为了确定触发位置和视图对象的对应关系，可以获取视图界面的视图布局信息，该视图布局信息反映了视图界面中各个视图对象在整体界面中的分布情况，具体包括了每个视图对象的位置信息和尺寸信息。基于视图布局信息，可以将视图界面中的各个位置点与各个视图对象建立关联关系。例如，位于视图界面的某一个矩形区域内的所有位置点均对应于一个视图对象；而位于另外一个矩形区域内的所有位置点则对应于另一个视图对象。

步骤S530.根据触发位置和视图布局信息确定视图界面中的目标视图对象。

根据步骤S510中确定的信息标注指令在视图界面中的触发位置以及由步骤S520获取到的视图界面的视图布局信息，本步骤可以对二者进行比对，从而确定视图界面中的目标视图对象。例如，本步骤可以根据各个视图对象的尺寸和位置，判断信息标注指令的触发位置是否落在某个视图对象的区域范围内，如果判断结果为是，那么该视图对象即可作为信息标注指令所对应的目标视图对象。

一般而言，在应用程序的视图界面中，可能会存在多个视图对象相互嵌套的情况，例如某一个视图对象View的内部可以包括多个子视图对象ChildView。在此基础上，步骤S530.根据触发位置和视图布局信息确定视图界面中的目标视图对象，可以进一步包括：根据视图布局信息，通过递归查找算法在视图界面中查找包含触发位置的尺寸最小的视图对象，并将尺寸最小的视图对象作为目标视图对象。具体的查找过程例如可以是先在整个视图界面内查找包含信息标注指令的触发位置的一个尺寸最大的视图对象，然后在该视图对象的位置范围内继续查找包含该触发位置的尺寸最大的子视图对象，不断重复这一过程便可以查找到包含该触发位置的尺寸最小的视图对象，而这一尺寸最小的视图对象便作为信息标注指令所对应的目标视图对象。

根据实际的标注需要，针对不同类型的标注信息可以采用各种不同的标注形式。在本公开的一些示例性实施方式中，目标视图对象的标注信息可以包括边界信息和属性信息，相应地，可以由信息展示图层采用不同标注形式对这两种标注信息进行展示。图6示出了在本公开的一些示例性实施方式中展示标注信息的步骤流程图。如图6所示，在以上各种实施方式的基础上，S340.获取对应于目标视图对象的标注信息并在信息标注图层上展示标注信息，可以包括以下步骤：

步骤S610.获取目标视图对象的边界信息。

目标视图对象的边界信息可以包括外部边界信息和内部边界信息，外部边界表示目标视图对象整体与视图界面的其他部分之间的界限，而内部边界表示目标视图对象与其内部各个子视图相互之间的界限。在一些实施方式中，本步骤可以仅获取目标视图对象的外部边界信息，或者也可以同时获取目标视图对象的外部边界信息和内部边界信息。

步骤S620.根据边界信息在信息展示图层中绘制目标视图对象的边界线框。

当步骤S610中获取的边界信息包括目标视图对象的外部边界信息时，可以根据外部边界信息在信息展示图层中绘制目标视图对象的外部边界线框。当步骤S610中获取的边界信息还包括目标视图对象的内部边界信息时，可以再根据内部边界信息在信息展示图层中绘制目标视图对象的内部边界线框。外部边界线框和内部边界线框可以使用不同的线型和/或颜色加以区分，以使用户能够直观地看到目标视图对象所在区域的位置界线，同时也能准确地向用户传达当前展示标注信息的视图对象是哪一个。

步骤S630.获取目标视图对象的属性信息。

目标视图对象的属性信息可以包括基础属性和标签属性，基础属性主要是各种视图对象所共有的常规属性信息，例如可以包括视图对象的宽度、高度、字体颜色、字体大小等等。基础属性的获取方式可以是通过目标视图对象所属应用程序提供的基础属性接口直接获取得到。标签属性主要是应用程序开发人员为部分视图对象添加的较复杂的特殊属性信息，例如可以包括与目标视图对象相关的网络链接、缓存地址等等。标签属性的获取方式可以是先确定目标视图对象在所属应用程序中对应的标签，然后再根据该标签获取目标视图对象的标签属性。对于不同的视图对象而言，只有当其所属应用程序中存在与之对应的标签时，才能获取到相应的标签属性，否则便只能获取到基础属性。在一些可选的实施方式中，可以通过字节码插桩技术在应用程序中插入代码以实现为目标视图对象添加具有指定含义的标签。

步骤S640.在信息展示图层中确定目标显示区域，并在目标显示区域内显示属性信息。

由步骤S630获取到目标视图对象的属性信息后，本步骤可以在信息展示图层中确定用于对属性信息进行展示的目标显示区域。该目标显示区域可以是信息展示图层中的一处具有固定尺寸和位置的显示区域，例如可以是位于信息展示图层底部的矩形区域。优选地，该目标显示区域还可以是根据目标视图对象在视图界面中的具体位置而确定的一处显示区域，例如直接将属性信息显示在信息展示图层中与目标视图对象所在位置重叠的区域，由此可以向用户呈现出在目标视图对象上直接为其标注边界线框和属性信息的视觉效果。

在本公开的一些示例性实施方式中，呈现在信息展示图层上的标注信息可以具有页面跳转功能。例如可以在以文字形式显示的标注信息的基础上为其建立超链接或者创建对应的虚拟按钮，使得标注信息能够链接至一个新的视图页面，从而实现页面跳转。在此基础上，本公开一些示例性实施方式中的信息标注方法还可以包括如图7所示的以下步骤：

步骤S710.利用指令接收图层接收作用于标注信息的信息跳转指令。

针对具有页面跳转功能的标注信息，可以利用指令接收图层接收与之对应的信息跳转指令。以触控设备为例，可以将点击、长按或者滑动等一种或者几种指定的触控事件用于触发信息跳转指令。当用户施加触控操作时，指令接收图层可以对其进行拦截，同时判断该触控操作是否为指定类型的触控事件，如果判断结果为是，便可以由该触控事件触发作用于标注信息的信息跳转指令。

步骤S720.根据信息跳转指令在信息展示图层上显示与标注信息相关的跳转页面。

当触发信息跳转指令后，指令接收图层可以根据该信息跳转指令向信息展示图层传递用于展示跳转页面的展示指令，然后由信息展示图层基于该展示指令显示与对应的标注信息相关的跳转页面。举例而言，将长按操作作为触发信息跳转指令的触控事件，那么在视觉效果上，当用户长按某一标注信息时，便可以呈现出与该标注信息相对应的跳转页面。

与标注信息相对应的跳转页面可以是网络页面，也可以是缓存文件页面。响应于信息跳转指令，可以首先确定与标注信息相关的统一资源定位符(Uniform ResourceLocator，URL)或者缓存目录。然后根据信息跳转指令在信息展示图层上显示对应于统一资源定位符的网络页面或者对应于缓存目录的缓存文件页面。例如，对于某一图像类型的视图对象，如果该视图对象对应一网络图片，那么根据信息跳转指令可以跳转至对应于指定URL的网络页面；而如果该视图对象对应一缓存图片，那么根据信息跳转指令可以跳转至对应于指定缓存目录的缓存文件。尤其是在测试人员在对应用程序进行检测时，如果某一视图界面中的一张图片加载不出来，那么通过点击标注信息可以快速跳转打开相应的网络页面，查看网络页面是否能够顺利显示；或者可以通过点击标注信息快速跳转至相应的缓存文件，查看缓存文件是否存在问题，而不必再设置断点并手动查找文件夹目录。

示例性介质

在介绍了本发明示例性实施方式的方法之后，接下来，对本发明示例性实施方式的介质进行说明。

在一些可能的实施方式中，本发明的各个方面还可以实现为一种介质，其上存储有程序代码，当所述程序代码被设备的处理器执行时用于实现上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的信息标注方法中的步骤。

例如，在本发明的一些示例性实施方式中，所述设备的处理器执行所述程序代码时用于实现如图3所示的以下步骤：步骤S310.响应于信息标注请求，建立覆盖于视图界面上的信息标注图层。步骤S320.利用信息标注图层接收信息标注指令。步骤S330.根据信息标注指令确定视图界面中的目标视图对象。步骤S340.获取对应于目标视图对象的标注信息并在信息标注图层上展示标注信息。

在本发明的一些示例性实施方式中，所述设备的处理器执行所述程序代码时还可以用于实现如图4至图7所示的各种示例性方法所涉及的步骤。

需要说明的是：上述的介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于：电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于：电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、有线、光缆、RF等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

示例性装置

在介绍了本发明示例性实施方式的介质之后，接下来，参考图8对本发明示例性实施方式的信息标注装置进行说明。

图8示出了在本公开的一些示例性实施方式中的信息标注装置的组成结构示意图。如图8所示，信息标注装置800主要可以包括：图层建立模块810、指令接收模块820、对象确定模块830和信息展示模块840。

图层建立模块810被配置为响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；指令接收模块820被配置为利用信息标注图层接收信息标注指令；对象确定模块830被配置为根据信息标注指令确定视图界面中的目标视图对象；信息展示模块840被配置为获取对应于目标视图对象的标注信息并在信息标注图层上展示标注信息。

在本公开的一些示例性实施方式中，基于以上实施方式，信息标注图层包括指令接收图层和信息展示图层。

在本公开的一些示例性实施方式中，基于以上各实施方式，指令接收模块820主要可以包括：触控事件拦截单元821和标注指令确定单元822。

触控事件拦截单元821被配置为利用指令接收图层拦截作用于视图界面的触控事件；标注指令确定单元822被配置为当触控事件为信息标注事件时，将触控事件确定为信息标注指令。

在本公开的一些示例性实施方式中，基于以上各实施方式，对象确定模块830主要可以包括：触发位置确定单元831、布局信息获取单元832和视图对象确定单元833。

触发位置确定单元831被配置为利用指令接收图层确定信息标注指令在视图界面的触发位置；布局信息获取单元832被配置为获取视图界面的视图布局信息，视图布局信息包括视图对象的位置信息和尺寸信息；视图对象确定单元833被配置为根据触发位置和视图布局信息确定视图界面中的目标视图对象。

在本公开的一些示例性实施方式中，基于以上各实施方式，视图对象确定单元833可以进一步包括：递归查找子单元，被配置为根据视图布局信息，通过递归查找算法在视图界面中查找包含触发位置的尺寸最小的视图对象，并将尺寸最小的视图对象作为目标视图对象。

在本公开的一些示例性实施方式中，基于以上各实施方式，标注信息可以包括目标视图对象的边界信息和属性信息；信息展示模块840主要可以包括：边界信息获取单元841、边界线框绘制单元842、属性信息获取单元843和属性信息显示单元844。

边界信息获取单元841被配置为获取目标视图对象的边界信息；边界线框绘制单元842被配置为根据边界信息在信息展示图层中绘制目标视图对象的边界线框；属性信息获取单元843被配置为获取目标视图对象的属性信息；属性信息显示单元844被配置为在信息展示图层中确定目标显示区域，并在目标显示区域内显示属性信息。

在本公开的一些示例性实施方式中，基于以上各实施方式，边界信息可以包括目标视图对象的外部边界信息；边界线框绘制单元842可以进一步包括：外部边界绘制子单元，被配置为根据外部边界信息在信息展示图层中绘制目标视图对象的外部边界线框。

在本公开的一些示例性实施方式中，基于以上各实施方式，边界信息还可以包括目标视图对象内的各个子视图的内部边界信息；边界线框绘制单元842还可以进一步包括：内部边界绘制子单元，被配置为根据内部边界信息在信息展示图层中绘制目标视图对象的内部边界线框。

在本公开的一些示例性实施方式中，基于以上各实施方式，属性信息可以包括目标视图对象的基础属性和标签属性；属性信息获取单元843可以包括：基础属性获取子单元和标签属性获取子单元。

基础属性获取子单元，被配置为通过目标视图对象所属应用程序提供的基础属性接口获取目标视图对象的基础属性；标签属性获取子单元，被配置为确定目标视图对象在应用程序中对应的标签，根据标签获得目标视图对象的标签属性。

在本公开的一些示例性实施方式中，基于以上各实施方式，指令接收图层和信息展示图层均为透明图层。

在本公开的一些示例性实施方式中，基于以上各实施方式，指令接收图层位于视图界面和信息展示图层之间。

在本公开的一些示例性实施方式中，基于以上各实施方式，标注信息具有页面跳转功能；信息标注装置800还可以包括：跳转指令接收模块850和跳转页面显示模块860。

跳转指令接收模块850被配置为利用指令接收图层接收作用于标注信息的信息跳转指令；跳转页面显示模块860被配置为根据信息跳转指令在信息展示图层上显示与标注信息相关的跳转页面。

在本公开的一些示例性实施方式中，基于以上各实施方式，跳转页面为网络页面或者缓存文件页面；跳转页面显示模块860可以进一步包括：信息确定单元861和页面显示单元862。

信息确定单元861被配置为确定与标注信息相关的统一资源定位符或者缓存目录；页面显示单元862被配置为根据信息跳转指令在信息展示图层上显示对应于统一资源定位符的网络页面或者对应于缓存目录的缓存文件页面。

示例性计算设备

在介绍了本发明示例性实施方式的方法、介质和装置之后，接下来，介绍根据本发明的另一示例性实施方式的计算设备。

所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

在一些可能的实施方式中，根据本发明实施方式的计算设备可以至少包括至少一个处理器、以及至少一个存储器。其中，所述存储器存储有程序代码，当所述程序代码被所述处理器执行时，使得所述处理器执行上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的信息标注方法中的步骤。

例如，所述处理器可以执行如图3中所示的以下步骤：步骤S310.响应于信息标注请求，建立覆盖于视图界面上的信息标注图层。步骤S320.利用信息标注图层接收信息标注指令。步骤S330.根据信息标注指令确定视图界面中的目标视图对象。步骤S340.获取对应于目标视图对象的标注信息并在信息标注图层上展示标注信息。

又如，所述处理器也可以执行如图4至图7所示的各种示例性方法所涉及的步骤。

应当注意，尽管在上文详细描述中提及了信息标注装置的若干模块、单元或子单元，但是这种划分仅仅是示例性的，并非是强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多模块或单元的特征和功能可以在一个模块或单元中具体化。反之，上文描述的一个模块或单元的特征和功能可以进一步划分为由多个模块或单元来具体化。

此外，尽管在附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

虽然已经参考若干具体实施方式描述了本发明的精神和原理，但是应该理解，本发明并不限于所发明的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合以进行受益，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (10)

1.一种信息标注方法，包括：

响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；

利用所述信息标注图层接收信息标注指令；

根据所述信息标注指令确定所述视图界面中的目标视图对象；

获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息。

2.根据权利要求1所述的信息标注方法，所述信息标注图层包括指令接收图层和信息展示图层。

3.根据权利要求2所述的信息标注方法，所述利用所述信息标注图层接收信息标注指令，包括：

利用所述指令接收图层拦截作用于所述视图界面的触控事件；

当所述触控事件为信息标注事件时，将所述触控事件确定为信息标注指令。

4.根据权利要求2所述的信息标注方法，所述根据所述信息标注指令确定所述视图界面中的目标视图对象，包括：

利用所述指令接收图层确定所述信息标注指令在所述视图界面的触发位置；

获取所述视图界面的视图布局信息，所述视图布局信息包括所述视图对象的位置信息和尺寸信息；

根据所述触发位置和所述视图布局信息确定所述视图界面中的目标视图对象。

5.根据权利要求4所述的信息标注方法，所述根据所述触发位置和所述布局信息确定所述视图界面中的目标视图对象，包括：

根据所述视图布局信息，通过递归查找算法在所述视图界面中查找包含所述触发位置的尺寸最小的视图对象，并将所述尺寸最小的视图对象作为目标视图对象。

6.根据权利要求2所述的信息标注方法，所述标注信息包括所述目标视图对象的边界信息和属性信息；所述获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息，包括：

获取所述目标视图对象的边界信息；

根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框；

获取所述目标视图对象的属性信息；

在所述信息展示图层中确定目标显示区域，并在所述目标显示区域内显示所述属性信息。

7.根据权利要求6所述的信息标注方法，所述边界信息包括所述目标视图对象的外部边界信息；所述根据所述边界信息在所述信息展示图层中绘制所述目标视图对象的边界线框，包括：

根据所述外部边界信息在所述信息展示图层中绘制所述目标视图对象的外部边界线框。

8.一种介质，其上存储有程序，该程序被处理器执行时实现如权利要求1至7中任一项所述的信息标注方法。

9.一种信息标注装置，包括：

图层建立模块，被配置为响应于信息标注请求，建立覆盖于视图界面上的信息标注图层；

指令接收模块，被配置为利用所述信息标注图层接收信息标注指令；

对象确定模块，被配置为根据所述信息标注指令确定所述视图界面中的目标视图对象；

信息展示模块，被配置为获取对应于所述目标视图对象的标注信息并在所述信息标注图层上展示所述标注信息。

10.一种计算设备，包括：处理器和存储器，所述存储器存储有可执行指令，所述处理器用于调用所述存储器存储的可执行指令执行如权利要求1至7中任一项所述的信息标注方法。