CN104346085A - 一种对控件对象的操作方法、装置及终端设备 - Google Patents

Abstract

提供了一种对控件对象的操作方法、装置及终端设备，其中，所述方法包括：检测屏幕感应区域的操作物，在检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能。在本发明提供的实施例中，终端检测到屏幕感应区域的操作物后，根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以实现对屏幕上各个控件对象的操控，确保用户仅用单手握住终端设备并方便地操控屏幕上的各个控件对象，提高了用户对屏幕上各个控件对象进行操控的便捷性和灵活性，简化了用户的操作方式。

Description

一种对控件对象的操作方法、装置及终端设备

技术领域

本发明涉及终端设备技术领域，特别涉及一种对控件对象的操作方法、装置及终端设备。

背景技术

现在，包括手机、平板电脑等终端设备已经普及到人们生活的诸多方面，人们利用各种移动终端进行通信、看视频和阅读等，功能非常多且强大，而且终端设备便于携带，用户可以在乘车或行走的时候使用终端设备。

目前，终端设备的屏幕通常具有接触触控的功能，用户在需要触发控件对象的功能时，通常是用户利用手指点击屏幕上的控件对象，以触发该控件对象的功能；终端设备的屏幕也可以具有悬浮触控功能，用户通过触控笔来悬浮触控来触发控件对象的功能。上述的接触触控或悬浮触控来触发控件对象的方式，通常需要用户可以用一只手握住终端设备，用另一只手去触发屏幕中的控件对象。例如，当用户左手手握住终端设备，右手提着物品的时候，用户必须放下物品以腾出右手操控屏幕中的控件对象，这对用户来说很不方便。或者，当用户乘坐公交车并站在公交车上时，用户必须用一只手抓住扶手以防止摔倒，这时用户用另一只手握住终端设备，这样就无法对终端设备中的控件对象进行操控，非常不方便。

在现有技术中，用户也可以用单手握住终端设备并利用这只手的大拇指来操控屏幕上的控件对象，但是，大拇指只能操控屏幕上的部分区域，屏幕上的大部分控件对象位于拇指无法触及的位置，所以，用户很难仅用单手握住终端设备并操控其屏幕上的各个控件对象。

发明内容

本发明提供一种对控件对象的操作方法、装置及终端设备，用于解决现有技术中，用户无法仅用单手握住终端设备并方便操控其屏幕上的各个控件对象的问题。

为解决上述问题，本发明提供了一种对控件对象的操作方法，其中，包括：检测屏幕感应区域的操作物；

在检测到操作物后，根据用户的选择操作定位所述屏幕上显示的控件对象；

在检测到所述操作物在所述屏幕感应区域的确认操作后，触发定位的所述控件对象的功能。

本发明还提供了一种对控件对象的操作装置，其中包括：

检测模块，用于检测屏幕感应区域的操作物；

定位模块，用于在所述检测模块检测到操作物后，根据用户的选择操作定位所述屏幕上显示的控件对象；

触发模块，用于在所述检测模块检测到操作物在屏幕感应区域的确认操作后，触发定位的所述控件对象的功能。

本发明还提供一种终端设备，其中，包括上述的任意一种装置。

本发明提供的实施例的有益效果：

在本发明提供的实施例中，终端检测到屏幕感应区域的操作物后，根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，根据该技术方案，可以先定位到用户希望操作的控件对象，这样，用户可以直接在屏幕感应区域对定位到的控件对象进行确认操作以触发其功能，与现有技术用户需要用手直接去点击控件对象以触发其功能的方式相比，本申请提供的方案能够满足用户仅用单手握住终端设备并方便地操控屏幕上的各个控件对象，提高了用户对屏幕上各个控件对象进行操控的便捷性和灵活性，简化了用户的操作方式。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为本发明对控件对象的操作方法第一实施例的流程图；

图2为本发明对控件对象的操作方法第二实施例的流程图；

图3为本实施例中根据移动轨迹定位移动方向上的控件对象的示意图；

图4为本实施例中显示效果从控件对象的位置移动到操作物对应位置的示意图；

图5为本实施例中显示效果在全透明窗口的结构示意图；

图6为本实施例中显示效果在全透明窗口进行复制的结构示意图；

图7为本实施例中显示效果在全透明窗口移动到操作物对应位置的示意图；

图8为本实施例中选择控件对象的结构示意图；

图9为本实施例中定位控件对象区域的结构示意图；

图10为本实施例中操作物操控区域的结构示意图；

图11为本发明对控件对象的操作方法第三实施例的流程图；

图12为本实施例中根据眼球的焦点的位置定位控件对象的示意图；

图13为本发明对控件对象的操作装置第一实施例的结构示意图；

图14为本发明对控件对象的操作装置第二实施例的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。

本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的任一单元和全部组合。

本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语（包括技术术语和科学术语）具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样定义，不会用理想化或过于正式的含义来解释。

本技术领域技术人员可以理解，这里所使用的“终端”、“终端设备”既包括仅具备无发射能力的无线信号接收器的设备，又包括具有能够在双向通信链路上进行双向通信的接收和发射硬件的设备。这种设备可以包括：具有或没有多线路显示器的蜂窝或其他通信设备；可以组合语音和数据处理、传真和/或数据通信能力的个人通信系统（PCS）；可以包括射频接收器和寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或全球定位系统（GPS）接收器的个人数字助理（PDA）；和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“终端”、“终端设备”可以是便携式、可运输、安装在交通工具（航空、海运和/或陆地）中的，或者适合于和/或配置为在本地运行和/或以分布形式在地球和/或空间的任何其他位置运行。这里所使用的“终端”、“终端设备”还可以是通信终端、上网终端、音乐/视频播放终端，例如可以是PDA、MID和/或具有音乐/视频播放功能的移动电话，可以是智能电视、机顶盒等设备。“基站”、“基站设备”为相应于“终端”、“终端设备”的网络侧设备。

图1为本发明对控件对象的操作方法第一实施例的流程图。如图1所示，本实施例对控件对象的操作方法的工作流程具体包括如下工作步骤：

步骤101、检测屏幕感应区域的操作物。

在本实施例中，在终端屏幕上设置屏幕感应区域，屏幕感应区域为屏幕中可以感应到外界操作的区域，屏幕感应区域可以为感应外界操作物悬浮操作的悬浮感应区域，以检测是否有操作物悬浮在屏幕感应区域上方；屏幕感应区域也可以为感应外界操作物接触操作的接触感应区域，用于检测是否有操作物接触屏幕感应区域，本申请实施例中涉及的操作物可以为触控笔或手指等。当检测到屏幕感应区域的操作物时，进入步骤102。

步骤102、在检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象。

在本步骤中，检测到操作物后，终端设备根据用户的选择操作定位屏幕上显示的控件对象，被定位的控件对象可以按照设定方式显示在屏幕上，以便于用户观察或操控被定位的对象。在本实施例中，检测到操作物的情况包括：检测到操作物接触屏幕，包括操作物单击屏幕、双击屏幕或者长按屏幕超过预先设定的时间等，其中，长按屏幕的预先设定的时间可以为1s或2s；或者检测到操作物接触屏幕、且在屏幕上按照设定方式移动，设定方式移动包括在屏幕上直线移动、曲线移动、划圈或者往复移动等方式。对于具有悬浮触控功能的屏幕，检测到操作物的情况还包括：检测到操作物悬浮在屏幕的悬浮感应区域；或者悬浮在屏幕的悬浮感应区域超过设定时间，设定时间可以为1s或2s等；或者检测到操作物悬浮在屏幕的悬浮感应区域、且在悬浮感应区域按照设定方式移动，按照设定方式移动包括在悬浮感应区域上方直线移动、曲线移动、划圈或者往复移动等方式。

检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象，例如，用户通过眼球来定位控件对象，用户也可以通过操作物定位控件对象，然后进入步骤103。

步骤103、在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能。

本申请各实施例中，用户执行确认操作时对应的屏幕区域与定位到的控件对象所在的屏幕区域可以为相同区域，也可以为不同区域。当用户执行确认操作时对应的屏幕区域与定位到的控件对象所在的屏幕区域为不同区域时，能够更好地方便用户执行单手操作，即用户不需要和现有操作方式一样去触控控件对象所在的屏幕位置，而只需要在手指所对应的屏幕区域进行确认操作即可，以使用方便快捷地触控定位到的控件对象。

本申请各实施例中，触发定位的控件对象的功能时，可以有多种方式，例如，可以直接向相应的控件对象发送指令以触发其功能，也可以预先保存各个控件对象的标识信息，在检测到用户的确认操作后，生成触摸事件，将该触摸事件发送给定位的控件对象或包括定位的控件对象的应用程序，其中，该触摸事件中包括定位的控件对象的标识信息。该标识信息用于指示触摸事件的接收端触发与该标识信息对应的控件对象的功能，即接收到触摸事件的对象会根据触摸事件中包括的标识信息，触发该标识信息对应的控件对象的功能。其中，控件对象的标识信息可以包括控件对象的位置信息和/或控件对象的ID等信息。现有技术中，一般当用户点击屏幕时，会生成触摸事件，该触摸事件中一般包括点击位置的坐标，根据本申请实施例，需要按照如上方式，将该触摸事件中的点击位置的坐标替换为被定位到的控件对象的标识信息。

在本步骤中，终端在屏幕感应区域检测操作物是否做出确认操作，操作物的确认操作包括：操作物点击屏幕，或者，操作物在屏幕感应区域静止时间超过第一设定时长等，其中，第一设定时长可以为1s或1.5s等。当检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，在屏幕上显示控件对象的窗口，用户通过窗口与该控件对象进行信息交互。

在本实施例中，终端检测到屏幕感应区域的操作物后，根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以实现对屏幕上各个控件对象的操控，确保用户仅用单手握住终端设备并方便地操控屏幕上的各个控件对象，提高了用户对屏幕上各个控件对象进行操控的便捷性和灵活性，简化了用户的操作方式。

图2为本发明对控件对象的操作方法第二实施例的流程图，图3为本实施例中根据移动轨迹定位移动方向上的控件对象的示意图，图4为本实施例中显示效果从控件对象的位置移动到操作物对应位置的示意图，图5为本实施例中显示效果在全透明窗口的结构示意图，图6为本实施例中显示效果在全透明窗口进行复制的结构示意图，图7为本实施例中显示效果在全透明窗口移动到操作物对应位置的示意图，图8为本实施例中选择控件对象的结构示意图，图9为本实施例中定位控件对象区域的结构示意图，图10为本实施例中操作物操控区域的结构示意图。如图2所示，本实施例对控件对象的操作方法的具体流程包括如下步骤：

步骤201、检测屏幕感应区域的操作物。

在本实施例中，终端设备的屏幕可以具有接触触控的功能，此时的操作物为手指等；终端设备的屏幕也可以具有悬浮触控的功能，包括电磁电容屏幕和自电容互电容屏幕，电磁电容屏幕的操作物为电磁触控笔，自电容互电容屏幕的操作物为手指等。在终端设备处于运行状态时，将实时检测屏幕感应区域的操作物，当检测到操作物后，进入步骤202。

步骤202、在检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象。

在本步骤中，检测到屏幕感应区域的操作物时，如果终端接收到用户触发的通过操作物定位控件对象的操作，或者检测到用户预先设置的通过操作物定位控件对象的设置信息，则检测操作物的选择操作，以根据操作物的选择操作来定位控件对象。本实施例中，屏幕上显示的控件对象包括：屏幕上设定区域范围内的控件对象，其中，设定区域范围包括：操作物在屏幕上所对应位置的设定范围以外的区域范围。其中，用户通过操作物定位控件对象的选择操作包括：用户利用操作物点击屏幕感应区域、或者将操作物悬浮停留在屏幕感应区域的上方等。用户预先设置的通过操作物定位控件对象的设置信息包括：用户通过操作物在屏幕感应区域的上方做往复运动、直线运动或曲线运动等。

在本实施例中，检测操作物的选择操作包括检测操作物的状态，如果未检测到操作物在屏幕感应区域的移动，则定位到默认控件对象；如果检测到操作物在屏幕感应区域的移动，则根据移动轨迹定位屏幕上显示的控件对象。其中，根据移动轨迹定位屏幕上的控件对象时，可以根据移动轨迹的移动方向，以本次移动前定位到的控件对象为基准，定位移动方向上的控件对象；或者，如果本次移动为检测到操作物后的第一次移动，则本次移动前定位到的控件对象为默认控件对象；或者根据移动轨迹的终止位置，定位距离终止位置最近的控件对象。

在实际应用中，默认控件对象包括如下的任意一种控件对象：屏幕上显示的控件对象中使用频率最高的控件对象、屏幕上显示的控件对象中最近使用的控件对象、屏幕上显示的控件对象中与当前操作关联的控件对象、屏幕上显示的控件对象中预先设置的控件对象、屏幕上显示的控件对象中距离操作物最近的控件对象等。例如，用户使用频率最高的控件对象为“掌上营业厅”，如果用户手指在屏幕感应区域未移动，则定位控件对象“掌上营业厅”；或者，用户最近使用的控件对象为“短信”，如果未检测到用户手指在屏幕感应区域的移动，则定位到控件对象“短信”。或者，检测并比较用户手指与屏幕上各个控件对象之间的距离，如果用户手指与控件对象“宽带视讯”距离最近，在未检测到用户手指在屏幕感应区域的移动的情况下，定位到控件对象“宽带视讯”。

本实施例中，以本次移动前定位到的控件对象为基准根据操作物移动轨迹的移动方向，定位移动方向上的控件对象。如图3所示，在实际应用中，可以在屏幕上设置一个二维坐标系，坐标系的X轴为屏幕的下框边、Y轴为屏幕的左框边，屏幕上的任意位置都可以利用该坐标系中的坐标（x，y）来标识。操作物定位到一个控件对象时，记录操作物处于坐标系中的第一位置A（x1，y1），如果操作物再次移动到达第二位置B（x2，y2），操作物在X轴方向的移动距离为Jx=abs（x2-x1），移动位移为Wx=x2-x1；操作物在Y轴方向的移动位移为Wy=y2-y1，移动距离为Jy=abs（y2-y1）。本实施例中，通过移动距离判断操作物是否移动，当移动距离Jx大于阈值Jxo时，则标识操作物在X方向上发生移动，如果移动距离Jx等于或小于阈值Jxo时，则标识操作物未在X方向上发生移动，当移动距离Jy大于阈值Jyo时，则标识操作物在Y方向上发生移动，如果移动距离Jy等于或小于阈值Jyo时，则标识操作物未在Y方向上发生移动，通过设置移动距离的阈值，减少或避免操作物的微小移动而产生的操作。在判断出操作物只在X方向发生移动的情况下，通过移动位移判断操作物的移动方向，当Wx大于0时，标识操作物在X方向上向右移动，当Wx小于0时，则标识操作物在X方向上向左移动；在判断出操作物只在Y方向发生移动的情况下，当Wy大于0时，标识操作物在Y方向上向上移动，当Wy小于0时，则标识操作物在Y方向上向下移动。在判断出操作物X方向和Y方向都发生移动的情况下，比较Jx和Jy的大小，如果Jx小于Jy，则忽略操作物在X方向上移动，标识操作物只在Y方向上移动；如果Jx大于Jy，则忽略操作物在Y方向上移动，标识操作物只在X方向上移动。根据用户的选择操作定位屏幕上显示的控件对象之后，进入步骤203。

步骤203、将定位到的控件对象按照设定方式显示在屏幕上。

在本步骤中，将定位到的控件对象按照设定方式来显示，以使用户清楚地观测和/或操控定位到的控件对象。其中，按照设定方式来显示定位到的控件对象包括改变控件对象的显示效果，例如：改变控件对象的亮度、大小和/或颜色等显示效果。

为方便用户对定位到的控件对象进行操控，还可以将控件对象显示到操作物在屏幕上所对应位置的区域内，用户可以通过操作物直接操控该区域内的控件对象。例如，直接在操作物在屏幕上所对应位置的区域内复制显示效果，或者，如图4所示，将显示效果从控件对象的位置移动到操作物在屏幕上所对应位置的区域内，此时，操作物对应位置的区域内的控件对象，其显示效果可以是控件对象定位前的显示效果，也可以是控件对象定位后的显示效果。

在实际应用中，可以如图5所示，本实施例中也可以在屏幕上设置一个全透明窗口500，该全透明窗口用于实现上述的功能，即通过该全透明窗口500检测屏幕感应区域的操作物，以及根据用户的选择操作定位屏幕上显示的控件对象，并触发定位的控件对象的功能。具体地，全透明窗口和应用程序同时运行在终端设备中，其中，全透明窗口500与控件对象所在的窗口平行，全透明窗口500上的位置可以采用图3所示的二维坐标系。如图6所示，当检测到操作物后，根据用户的操作，在全透明窗口500中的操作物对应的位置复制定位到的控件对象；或者，如图7所示，在全透明窗口500中在定位到的控件对象的位置复制控件对象，然后将复制的控件对象移动到操作物对应位置的区域内，以增强动画效果，提高用户的使用乐趣。

本实施例中，在全透明窗口500中定位控件对象的逻辑方法有二种，包括：动态定位控件对象的逻辑方法和静态定位控件对象的逻辑方法。以现有技术中常用的Android系统为例介绍上述二种逻辑方法。其中，在全透明窗口500中动态定位控件对象的逻辑方法如下：通过控件View类的draw(Canvas)函数，可以把View（包括这个View内部包含的所有子元素）都画到Bitmap对象中，并将Bitmap对象通过Windows Manager传递给全透明窗口500，然后在全透明窗口500上显示该控件对象，从而完成定位控件对象的操作。

在全透明窗口500中静态定位控件对象的逻辑方法如下：获取View的id和context，然后通过Context.getResources函数得到Resource对象，再通过Resource.getDrawable(id)得到对应view的图像信息，并将图像信息传递给全透明窗口500，然后在全透明窗口500上显示该控件对象，从而完成定位控件对象的操作。

在实际应用中，Android系统主要包含TextView、EditView、Button、Menu、RadioGroup、RadioButton、CheckBox、ProgressBar、ListView、TabWidget、SeekBar、ScrollView、GirdView、ImageSwitcher等控件对象。每个控件对象的具体使用类别有不同，例如Button控件对象，在应用程序中起到按钮的作用，TextView控件对象在应用程序中起到用户获得输入光标进行字符输入的作用，ImageView控件对象在应用程序中起到显示图片的作用，RadioButton控件对象和CheckBox控件对象在应用程序中分别起到单选和复选的作用。

本步骤中，将定位到的控件对象按照设定方式显示在屏幕上之后，如果检测到操作物在屏幕感应区域的操作为确认操作，则进入步骤204；如果检测到操作物在屏幕感应区域的操作为撤销操作，进入步骤205。

步骤204、在检测到操作物的确认操作后，触发定位的控件对象的功能。

在本步骤中，当检测到操作物在的操作为确认操作后，触发定位的控件对象的功能。其中，本实施例中操作确认操作包括：操作物点击屏幕、操作物在屏幕感应区域静止时间超过第一设定时长等。

步骤205、在检测到操作物的撤销操作后，取消对控件对象的定位。

在本步骤中，当检测到操作物在的操作为撤销操作时，取消对控件对象的定位，被取消定位的控件对象将恢复到定位前的显示效果；如果被定位的控件对象显示在操作物在屏幕上所对应位置的区域内，则被取消定位的控件对象将在操作物在屏幕上所对应位置的区域内消失。其中，检测到操作物的撤销操作包括：检测到操作物离开屏幕感应区域，或者在第二设定时长内未检测到操作物的确认操作，或者检测到操作物又发生了移动等。例如，当被定位的控件对象显示在用户手指在屏幕上所对应位置的区域时，如果检测到用户手指离开屏幕感应区域或用户没有继续操作或者用户手指又发生了移动，被定位的控件对象将在操作物在屏幕上所对应位置的区域内消失。在实际应用中，第二设定时长可以为1s或1.5s等用户或系统设定的时长。

如图8所示，本实施例中，屏幕中显示有控件对象1-6，用户可以对控件对象类型进行设置或取消。控件对象类型包括二种：第一类型的控件对象具有被操作物定位和触发的属性，所以，第一类型的控件对象可以执行如图1或如图2所示的流程；第二类型的控件对象为现有技术中的普通的控件对象，不具有被操作物定位和触发的属性，所以也就不能执行如图1或如图2所示的流程。当用户在图8中选中控件对象1和控件对象2之后，控件对象1和控件对象2具有被操作物定位和触发的属性，而未被用户选中的控件对象3-6择不具有被操作物定位和触发的属性。检测控件对象是否具有被操作物定位和触发的属性时，首先找到屏幕上控件对象的根节点，然后沿着控件对象的根节点遍历所有控件对象的节点，每遍历到一个控件对象的节点，读取并分析该控件对象节点的信息，然后中提取控件对象的ID、位置以及是否具有被操作物定位和触发的属性等信息。在实际应用中，可以预设一些有被操作物定位和触发的属性的控件对象，或者，如图9所示，具有被操作物定位和触发的属性的控件对象设置在定位控件对象区域，定位控件对象区域可以为矩形、圆形等任何形状。定位控件对象区域中的所有控件对象均具有被操作物定位和触发的属性，如图10所示，用户在单手操控大尺寸屏幕，屏幕中的一些区域单手操控不易，所以还可以在屏幕上设置操作物操控区域，以方便用户单手操作，操作物操控区域的亮度、颜色、透明度等可以进行任意设置，本实施例中的操作物操控区域设置在用户方便触控的位置，图10所示的操作物操控区域位于屏幕的右下方，该操作物操控区域为用户拇指方便触控到的位置，以方便用户在操作物操控区域触控被定位的控件对象。或者，在屏幕上首次显示控件对象的时候，先对该控件对象是否具有被操作物定位和触发的属性进行检测，保存检测结果，当控件对象第二次或第N次后再次在屏幕上显示的时候，首先检测是否保存有该控件对象的检测结果，如果存在则直接使用上次结果，如果不存在，则再进行检测。

在本实施例中，终端检测到屏幕感应区域的操作物后，根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以实现对屏幕上各个控件对象的操控，确保用户仅用单手握住终端设备并方便地定位和触发屏幕上的各个控件对象，提高了操控屏幕上的各个控件对象的灵活性和趣味性。

图11为本发明对控件对象的操作方法第三实施例的流程图，图12为本实施例中根据眼球的焦点的位置定位控件对象的示意图。如图11所示，本实施例对控件对象的操作方法的具体流程包括如下步骤：

步骤111、检测屏幕感应区域的操作物。

在本步骤中，终端实时检测屏幕感应区域的操作，当终端检测到屏幕感应区域的操作时，如果接收到用户触发的通过眼球定位控件对象的操作，或者检测到用户预先设置的通过眼球定位控件对象的设置信息，说明用户希望通过眼睛来实施选择操作，以通过眼睛来定位屏幕上的控件对象，则进入步骤112。

步骤112、检测用户的眼球，根据用户的眼球在屏幕上的焦点定位焦点所在的控件对象。

在本步骤中，如图12所示，终端检测用户的眼球，将眼球的焦点在屏幕上的位置与控件对象的位置进行比较，如果眼球的焦点在屏幕上的位置与控件对象的位置为同一位置，则可以启动计时器，当计时器的计时时间大于预设时间时，则根据眼球的焦点在屏幕上的位置定位焦点所在的控件对象，提高用户对屏幕上各个控件对象进行操控的趣味性。

例如，对于Android系统而言，当overlay接收到用户的眼球在屏幕上的焦点定位焦点所在的控件对象时，如图5所示的全透明窗口500将接收到定位事件，此时全透明窗口500将通过终端系统接口通知WindowManager，在WindowManagerImpl类中记录了当前处于运行状态的应用程序的窗口信息，包括窗口对应的DecorView和ViewRoot等信息，通过当前处于运行状态的应用程序的窗口的RootView和DecorView查找到当前应用程序窗口上获得眼球在屏幕上的焦点对应的控件对象，再调用该控件对象的performClick函数，该函数为控件对象的父类View的成员函数，模拟View的事件，完成定位事件转发。对于Android而言，程序对象结构最上层的控件是控件对象View，如果最上层控件对象View对具有被操作物定位和触发的属性这个功能，那么它的子控件都具备类似功能。

当用户通过眼睛定位到想要开启的控件对象之后，进入步骤113。

步骤113、将定位到的控件对象按照设定方式显示在屏幕上。

在本步骤中，将定位到的控件对象按照设定方式来显示，以使用户清楚地观测和/或操控定位到的控件对象。为方便用户对定位到的控件对象进行操控，如图12所示，还可以将控件对象显示到操作物在屏幕上所对应位置的区域内，例如，当操作物是手指时，显示在用户手指所对应的屏幕区域，用户可以通过操作物直接操控该区域内的控件对象。例如，直接在操作物在屏幕上所对应位置的区域内复制显示效果，或者将显示效果从控件对象的位置移动到操作物在屏幕上所对应位置的区域内，此时，操作物对应位置的区域内的控件对象，其显示效果可以是控件对象定位前的显示效果，也可以是控件对象定位后的显示效果。其中，按照设定方式来显示定位到的控件对象包括改变控件对象的显示效果，改变控件对象的显示效果包括：改变控件对象的亮度、大小和/或颜色等显示效果。将定位到的控件对象按照设定方式显示在屏幕上之后，当检测到操作物在屏幕感应区域的操作为确认操作，进入步骤114；当检测到操作物在屏幕感应区域的操作为撤销操作，进入步骤115。

步骤114、当检测到操作物的确认操作后，触发定位的控件对象的功能。

在本步骤中，当检测到操作物在的操作为确认操作后，触发定位的控件对象的功能，在屏幕上显示控件对象的窗口，用户通过窗口与该控件对象进行信息交互。其中，本实施例中操作确认操作包括：操作物点击屏幕、操作物在屏幕感应区域静止时间超过第一设定时长等。

步骤115、在检测到操作物的撤销操作后，取消对控件对象的定位。

在本步骤中，当检测到操作物在的操作为撤销操作时，取消对控件对象的定位，被取消定位的控件对象将恢复到定位前的显示效果；如果被定位的控件对象显示在操作物在屏幕上所对应位置的区域内，则被取消定位的控件对象将在操作物在屏幕上所对应位置的区域内消失。

在本实施例中，通过眼球的焦点来完成选择操作，以定位屏幕上显示的控件对象，然后通过操作物在屏幕感应区域的对眼睛选择的控件对象进行确认操作，触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以实现对屏幕上各个控件对象的操控，确保用户仅用单手握住终端设备并方便操控其屏幕上的各个控件对象，提高了操控屏幕上各个控件对象的灵活性和趣味性。

图13为本发明对控件对象的操作装置第一实施例的结构示意图。如图13所示，本实施例对控件对象的操作装置包括：检测模块131、定位模块132和触发模块133，其中，检测模块131用于检测屏幕感应区域的操作物，定位模块132用于在检测模块检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象。其中，用户的选择操作包括：用户通过眼球定位控件对象，或者用户通过操作物定位控件对象。触发模块133用于在检测模块检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，其中，操作物在屏幕感应区域的确认操作具体包括：操作物点击所述屏幕，操作物在屏幕感应区域的静止时间达到第一设定时长。

在本实施例中，检测模块检测到屏幕感应区域的操作物后，定位模块根据用户的选择操作定位屏幕上显示的控件对象，在检测到操作物在屏幕感应区域的确认操作后，触发模块触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以对屏幕上各个控件对象进行定位、触发等操作，确保用户仅用单手握住终端设备并方便地操控屏幕上的各个控件对象，同时也提高了用户对屏幕上各个控件对象进行操控的趣味性。

图14为本发明对控件对象的操作装置第二实施例的结构示意图。如图14所示，本实施例对控件对象的操作装置还包括：接收模块134、显示模块135和取消模块136。其中，接收模块134用于接收用户触发的通过眼球定位控件对象的操作，或用于检测用户预先设置的通过眼球定位控件对象的设置信息。显示模块135用于将定位模块132定位到的控件对象按照设定方式显示在屏幕上，例如，显示模块135将定位到的控件对象以改变显示效果的方式显示在屏幕上；或者，显示模块135将定位到的控件对象的显示效果显示在操作物在屏幕上所对应位置的区域内。显示模块135可以直接在操作物在屏幕上所对应位置的区域内复制显示效果，也可以将显示效果从控件对象的位置移动到操作物在屏幕上所对应位置的区域内。在检测模块131检测到用户对当前定位的控件对象的撤销操作后，取消模块136取消模块取消对所述控件对象的定位，其中，用户对当前定位的控件对象的撤销操作，包括如下的任意一种：检测模块131检测到操作物离开屏幕感应区域，检测模块131在第二设定时长内未检测到操作物的确认操作，或者，检测模块131检测到操作物发生移动。

进一步的，检测模块131检测操作物可以包括如下任意一种情况：检测模块131检测到操作物接触屏幕，检测模块131检测到操作物悬浮在屏幕的悬浮感应区域，检测模块131检测到操作物接触屏幕、且在屏幕上按照设定方式移动，检测模块131检测到操作物悬浮在屏幕的悬浮感应区域、且在悬浮感应区域按照设定方式移动。检测模块131还用于检测用户的眼球，根据用户的眼球在屏幕上的焦点，定位焦点所在的控件对象。检测模块131检测操作物的状态，若检测模块131未检测到操作物在屏幕感应区域的移动，则定位模块132定位到默认控件对象，若检测模块131检测到操作物在屏幕感应区域的移动，则定位模块132根据操作物的移动轨迹定位屏幕上显示的控件对象。其中，在检测模块131检测到操作物在屏幕感应区域的确认操作后，触发模块133将生成触摸事件，并将触摸事件发送给定位的控件对象或包括定位的控件对象的应用程序，触摸事件中包括定位的控件对象的标识信息，标识信息用于指示触摸事件的接收端触发与该标识信息对应的控件对象的功能。

在本实施例中，定位模块132根据移动轨迹的移动方向，以本次移动前定位到的控件对象为基准，定位移动方向上的控件对象，其中，若本次移动为检测模块131检测到操作物后的第一次移动，则本次移动前定位到的控件对象为默认控件对象；或者，定位模块132根据移动轨迹的终止位置，定位距离终止位置最近的控件对象。本实施例中的默认对象可以为如下中的一种：屏幕上显示的控件对象中使用频率最高的控件对象，屏幕上显示的控件对象中最近使用的控件对象，屏幕上显示的控件对象中与当前操作关联的控件对象，屏幕上显示的控件对象中预先设置的控件对象，或者屏幕上显示的控件对象中距离操作物最近的控件对象。

在本实施例中，在接收模块134接收到用户触发的通过操作物定位控件对象的操作之后，检测模块131检测操作物的状态；或者，在接收模块134检测到用户预先设置的通过操作物定位控件对象的设置信息之后，检测模块131检测操作物的状态。

在本实施例中，检测模块检测到屏幕感应区域的操作物后，定位模块根据用户的选择操作定位屏幕上显示的控件对象，在检测模块检测到操作物在屏幕感应区域的确认操作后，触发模块触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以实现对屏幕上各个控件对象的操控，确保用户仅用单手握住终端设备并方便地定位和触发屏幕上的各个控件对象，提高了操控屏幕上的各个控件对象的灵活性和趣味性。

本发明还提供一种终端设备，包括图13或图14所示的对控件对象的操作装置，本实施例终端设备中的对控件对象的操作装置采用图13所示的结构，如图13所示，对控件对象的操作装置包括：检测模块131、定位模块132和触发模块133，其中，检测模块131用于检测屏幕感应区域的操作物，定位模块132用于在检测模块检测到操作物后，根据用户的选择操作定位屏幕上显示的控件对象，触发模块133用于在检测模块检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能。

本实施例中，通过检测模块检测到屏幕感应区域的操作物后，通过定位模块根据用户的选择操作定位屏幕上显示的控件对象，通过触发模块在检测到操作物在屏幕感应区域的确认操作后，触发定位的控件对象的功能，从而使用户在屏幕感应区域就可以对屏幕上各个控件对象进行定位、触发等操作，确保用户仅用单手握住终端设备并方便地操控屏幕上的各个控件对象，同时也提高了用户对屏幕上各个控件对象进行操控的趣味性。

本技术领域技术人员可以理解，本发明可以涉及用于执行本申请中所述操作中的一项或多项操作的设备。所述设备可以为所需的目的而专门设计和制造，或者也可以包括通用计算机中的已知设备，所述通用计算机有存储在其内的程序选择性地激活或重构。这样的计算机程序可以被存储在设备（例如，计算机）可读介质中或者存储在适于存储电子指令并分别耦联到总线的任何类型的介质中，所述计算机可读介质包括但不限于任何类型的盘（包括软盘、硬盘、光盘、CD-ROM、和磁光盘）、随即存储器（RAM）、只读存储器（ROM）、电可编程ROM、电可擦ROM（EPROM）、电可擦除可编程ROM（EEPROM）、闪存、磁性卡片或光线卡片。可读介质包括用于以由设备（例如，计算机）可读的形式存储或传输信息的任何机构。例如，可读介质包括随即存储器（RAM）、只读存储器（ROM）、磁盘存储介质、光学存储介质、闪存装置、以电的、光的、声的或其他的形式传播的信号（例如载波、红外信号、数字信号）等。

本技术领域技术人员可以理解，可以用计算机程序指令来实现这些结构图和/或框图和/或流图中的每个框以及这些结构图和/或框图和/或流图中的框的组合。可以将这些计算机程序指令提供给通用计算机、专业计算机或其他可编程数据处理方法的处理器来生成机器，从而通过计算机或其他可编程数据处理方法的处理器来执行的指令创建了用于实现结构图和/或框图和/或流图的框或多个框中指定的方法。

本技术领域技术人员可以理解，本发明中已经讨论过的各种操作、方法、流程中的步骤、措施、方案可以被交替、更改、组合或删除。进一步地，具有本发明中已经讨论过的各种操作、方法、流程中的其他步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。进一步地，现有技术中的具有与本发明中公开的各种操作、方法、流程中的步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。

以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (35)

1.一种对控件对象的操作方法，其特征在于，包括：

检测屏幕感应区域的操作物；

在检测到操作物后，根据用户的选择操作定位所述屏幕上显示的控件对象；

在检测到所述操作物在所述屏幕感应区域的确认操作后，触发定位的所述控件对象的功能。

2.根据权利要求1所述的方法，其特征在于，所述检测到操作物，包括：

检测到操作物接触所述屏幕；或

检测到操作物悬浮在所述屏幕的悬浮感应区域；或

检测到操作物接触所述屏幕、且在所述屏幕上按照设定方式移动；或

检测到操作物悬浮在所述屏幕的悬浮感应区域、且在所述悬浮感应区域按照设定方式移动。

3.根据权利要求1或2所述的方法，其特征在于，所述用户的选择操作，包括：

所述用户通过眼球定位控件对象；或

所述用户通过操作物定位控件对象。

4.根据权利要求1所述的方法，其特征在于，根据用户的选择操作定位所述屏幕上显示的控件对象，包括：

检测用户的眼球，根据所述用户的眼球在所述屏幕上的焦点，定位所述焦点所在的控件对象。

5.根据权利要求4所述的方法，其特征在于，在检测用户的眼球之前，还包括：

接收到所述用户触发的通过眼球定位控件对象的操作；或

检测到所述用户预先设置的通过眼球定位控件对象的设置信息。

6.根据权利要求1所述的方法，其特征在于，根据用户的选择操作定位所述屏幕上显示的控件对象，包括：

检测操作物的状态；

若未检测到所述操作物在屏幕感应区域的移动，则定位到默认控件对象；

若检测到所述操作物在屏幕感应区域的移动，则根据移动轨迹定位所述屏幕上显示的控件对象。

7.根据权利要求6所述的方法，其特征在于，根据移动轨迹定位所述屏幕上显示的控件对象，包括：

根据所述移动轨迹的移动方向，以本次移动前定位到的控件对象为基准，定位所述移动方向上的控件对象，其中，若本次移动为检测到操作物后的第一次移动，则本次移动前定位到的控件对象为默认控件对象；或

根据所述移动轨迹的终止位置，定位距离所述终止位置最近的控件对象。

8.根据权利要求6或7所述的方法，其特征在于，所述默认控件对象，包括：

所述屏幕上显示的控件对象中使用频率最高的控件对象；或

所述屏幕上显示的控件对象中最近使用的控件对象；或

所述屏幕上显示的控件对象中与当前操作关联的控件对象；或

所述屏幕上显示的控件对象中预先设置的控件对象；或

所述屏幕上显示的控件对象中距离操作物最近的控件对象。

9.根据权利要求6或7所述的方法，其特征在于，在检测操作物的状态之前，还包括：

接收到所述用户触发的通过操作物定位控件对象的操作；或

接收到所述用户预先设置的通过操作物定位控件对象的设置信息。

10.根据权利要求1、4或6所述的方法，其特征在于，根据用户的选择操作定位所述屏幕上显示的控件对象，还包括：

将定位到的控件对象按照设定方式显示在所述屏幕上。

11.根据权利要求10所述的方法，其特征在于，将定位到的控件对象按照设定方式显示在所述屏幕上，包括：

将定位到的控件对象以改变显示效果的方式显示在所述屏幕上；或

将定位到的控件对象的显示效果显示在所述操作物在屏幕上所对应位置的区域内。

12.根据权利要求11所述的方法，其特征在于，将定位到的控件对象的显示效果显示在所述操作物在屏幕上所对应位置的区域内，包括：

直接在所述操作物在屏幕上所对应位置的区域内复制所述显示效果；或

将所述显示效果从所述控件对象的位置移动到所述操作物在屏幕上所对应位置的区域内。

13.根据权利要求1、4或6所述的方法，其特征在于，所述操作物在所述屏幕感应区域的确认操作，包括：

所述操作物点击所述屏幕；或

所述操作物在所述屏幕感应区域的静止时间达到第一设定时长。

14.根据权利要求1、4或6所述的方法，其特征在于，根据用户的选择操作定位所述屏幕上显示的控件对象后，还包括：

若检测到所述用户对当前定位的控件对象的撤销操作后，取消对所述控件对象的定位。

15.根据权利要求14所述的方法，其特征在于，检测到所述用户对当前定位的控件对象的撤销操作，包括：

检测到所述操作物离开屏幕感应区域；或

在第二设定时长内未检测到所述操作物的确认操作；或

检测到所述操作物发生移动。

16.根据权利要求1所述的方法，其特征在于，所述屏幕上显示的控件对象，包括：

所述屏幕上设定区域范围内的控件对象，其中，所述设定区域范围包括：所述操作物在屏幕上所对应位置的设定范围以外的区域范围。

17.根据权利要求1所述的方法，其特征在于，触发定位的所述控件对象的功能，包括：

生成触摸事件，将所述触摸事件发送给定位的所述控件对象或包括定位的所述控件对象的应用程序，其中，所述触摸事件中包括定位的所述控件对象的标识信息，所述标识信息用于指示所述触摸事件的接收端触发与该标识信息对应的控件对象的功能。

18.一种对控件对象的操作装置，其特征在于，包括：

检测模块，用于检测屏幕感应区域的操作物；

定位模块，用于在所述检测模块检测到操作物后，根据用户的选择操作定位所述屏幕上显示的控件对象；

触发模块，用于在所述检测模块检测到操作物在屏幕感应区域的确认操作后，触发定位的所述控件对象的功能。

19.根据权利要求18所述的装置，其特征在于，所述检测模块检测操作物，包括：

所述检测模块检测到操作物接触所述屏幕；或

所述检测模块检测到操作物悬浮在所述屏幕的悬浮感应区域；或

所述检测模块检测到操作物接触所述屏幕、且在所述屏幕上按照设定方式移动；或

所述检测模块检测到操作物悬浮在所述屏幕的悬浮感应区域、且在所述悬浮感应区域按照设定方式移动。

20.根据权利要求18或19所述的装置，其特征在于，所述用户的选择操作，包括：

所述用户通过眼球定位控件对象；或

所述用户通过操作物定位控件对象。

21.根据权利要求18所述的装置，其特征在于，所述检测模块根据用户的选择操作定位所述屏幕上显示的控件对象，包括：

所述检测模块检测用户的眼球，根据所述用户的眼球在所述屏幕上的焦点，所述定位模块定位所述焦点所在的控件对象。

22.根据权利要求21所述的装置，其特征在于，还包括：

接收模块，用于接收到所述用户触发的通过眼球定位控件对象的操作；或

接收到所述用户预先设置的通过眼球定位控件对象的设置信息。

23.根据权利要求18所述的装置，其特征在于，所述定位模块根据用户的选择操作定位所述屏幕上显示的控件对象，包括：

所述检测模块检测操作物的状态；

若所述检测模块未检测到所述操作物在屏幕感应区域的移动，则所述定位模块定位到默认控件对象；

若所述检测模块检测到所述操作物在屏幕感应区域的移动，则所述定位模块根据移动轨迹定位所述屏幕上显示的控件对象。

24.根据权利要求23所述的装置，其特征在于，所述定位模块根据移动轨迹定位所述屏幕上显示的控件对象，包括：

所述定位模块根据所述移动轨迹的移动方向，以本次移动前定位到的控件对象为基准，定位所述移动方向上的控件对象，其中，若本次移动为检测到操作物后的第一次移动，则本次移动前定位到的控件对象为默认控件对象；或

所述定位模块根据所述移动轨迹的终止位置，定位距离所述终止位置最近的控件对象。

25.根据权利要求23或24所述的装置，其特征在于，所述默认控件对象，包括：

所述屏幕上显示的控件对象中使用频率最高的控件对象；或

所述屏幕上显示的控件对象中最近使用的控件对象；或

所述屏幕上显示的控件对象中与当前操作关联的控件对象；或

所述屏幕上显示的控件对象中预先设置的控件对象；或

所述屏幕上显示的控件对象中距离操作物最近的控件对象。

26.根据权利要求23或24所述的装置，其特征在于，在所述检测模块检测操作物的状态之前，还包括：

所述接收模块接收到所述用户触发的通过操作物定位控件对象的操作；或

检测到所述用户预先设置的通过操作物定位控件对象的设置信息。

27.根据权利要求18、21或23所述的装置，其特征在于，还包括：

显示模块，用于将定位到的控件对象按照设定方式显示在所述屏幕上。

28.根据权利要求27所述的装置，其特征在于，所述定位模块具体用于：

将定位到的控件对象以改变显示效果的方式显示在所述屏幕上；或

将定位到的控件对象的显示效果显示在所述操作物在屏幕上所对应位置的区域内。

29.根据权利要求28所述的装置，其特征在于，所述显示模块具体用于：

直接在所述操作物在屏幕上所对应位置的区域内复制所述显示效果；或

将所述显示效果从所述控件对象的位置移动到所述操作物在屏幕上所对应位置的区域内。

30.根据权利要求18、21或23所述的装置，其特征在于，所述操作物在所述屏幕感应区域的确认操作，具体包括：

所述操作物点击所述屏幕；或

所述操作物在所述屏幕感应区域的静止时间达到第一设定时长。

31.根据权利要求18、21或23所述的装置，其特征在于还包括：

取消模块，若所述检测模块检测到所述用户对当前定位的控件对象的撤销操作后，所述取消模块取消对所述控件对象的定位。

32.根据权利要求31所述的装置，其特征在于，所述检测模块检测到所述用户对当前定位的控件对象的撤销操作，包括：

所述检测模块检测到所述操作物离开屏幕感应区域；或

所述检测模块在第二设定时长内未检测到所述操作物的确认操作；或

所述检测模块检测到所述操作物发生移动。

33.根据权利要求18所述的装置，其特征在于，所述屏幕上显示的控件对象，包括：

所述屏幕上设定区域范围内的控件对象，其中，所述设定区域范围包括：所述操作物在屏幕上所对应位置的设定范围以外的区域范围。

34.根据权利要求18所述的装置，其特征在于，所述触发模块具体用于：

在所述检测模块检测到操作物在屏幕感应区域的确认操作后，生成触摸事件，将所述触摸事件发送给定位的所述控件对象或包括定位的所述控件对象的应用程序，其中，所述触摸事件中包括定位的所述控件对象的标识信息，所述标识信息用于指示所述触摸事件的接收端触发与该标识信息对应的控件对象的功能。

35.一种终端设备，其特征在于包括：权利要求18-34任一所述的对控件对象的操作装置。