CN109753143B - 一种优化光标位置的方法和装置 - Google Patents

Abstract

本发明公开了一种优化光标位置的方法和装置，该方法包括：首先，通过对眼球动作进行追踪，获得屏幕坐标；其次，若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；然后，将光标移动到所述光标位置范围内；最后，根据调整光标的指令，调整所述光标至目标对象位置。由此可见，不是直接基于屏幕坐标进行相应操作，而是先利用眼球追踪技术中的屏幕坐标得到粗略的光标位置范围，再利用目标对象位置进行微调，精准定位光标位置，实现优化光标位置的意图，从而降低后续光标点击的误操作率。

Description

一种优化光标位置的方法和装置

技术领域

本发明涉及计算机交互技术领域，尤其涉及一种优化光标位置的方法和装置。

背景技术

随着科技的快速发展，智能终端设备在日常生活以及工作中的普及率越来越高。为了方便用户使用智能终端设备，产生了眼球追踪技术，该眼球追踪技术是指实时追踪眼球动作，通过捕捉眼部细微变化，预测用户的状态和需求并进行响应操作，实现用眼球控制智能终端设备的技术。

具体地，眼球追踪技术是利用红外设备和图像采集设备对眼球动作进行追踪，捕捉眼部细微变化，将其转化为智能终端设备的屏幕坐标；根据该屏幕坐标直接进行相应的响应操作。

但是，发明人经过研究发现，眼球追踪技术仅凭眼部细微变化得到的屏幕坐标不准确，直接基于该屏幕坐标进行响应操作，很容易造成误操作。尤其是对于大屏智能终端设备而言，例如，掌上电脑、平板电脑和触摸一体机等，眼部细微变化较小，而智能终端设备屏幕较大，转化得到的屏幕坐标准确率更低，导致误操作率较高。

发明内容

本发明所要解决的技术问题是，提供一种优化光标位置的方法和装置，精准定位光标位置，实现优化光标位置的意图，以降低后续光标点击的误操作率。

第一方面，本发明实施例提供了一种优化光标位置的方法，该方法包括：

通过对眼球动作进行追踪，获得屏幕坐标；

若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；

将光标移动到所述光标位置范围内；

根据调整光标的指令，调整所述光标至目标对象位置。

优选的，所述若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，包括：

若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据所述目标屏幕坐标和技术误差，绘制显示目标窗口，所述目标窗口具有透明度；

将所述目标窗口确定为所述光标位置范围。

优选的，所述目标屏幕坐标为所述预设时间段内的屏幕坐标的平均值。

优选的，所述调整光标的指令是响应于移动鼠标的操作或触控拖动光标的操作产生的。

优选的，在所述将光标移动到所述光标位置范围内之后，还包括：

若获得的屏幕坐标与所述预设时间段内任意一个屏幕坐标的差值超过预设值或所述获得的屏幕坐标在所述光标位置范围外，隐藏所述目标窗口。

优选的，在所述调整所述光标至目标对象位置之后，还包括：

隐藏所述目标窗口。

优选的，所述通过对眼球动作进行追踪，获得屏幕坐标，包括：

通过对眼球动作进行追踪，获取眼球运动信息；

根据眼球追踪算法，将眼球运动信息转化为所述屏幕坐标。

优选的，在所述调整所述光标至目标对象位置之后，还包括：

响应于所述光标的点击操作，触发所述目标对象。

第二方面，本发明实施例提供了一种优化光标位置的装置，该装置包括：

获得单元，用于通过对眼球动作进行追踪，获得屏幕坐标；

确定单元，用于若预设时间段内任意两个屏幕坐标的差值不超过第一预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；

移动单元，用于将光标移动到所述光标位置范围内；

调整单元，用于根据调整光标的指令，调整所述光标至目标对象位置。

第三方面，本发明实施例提供了一种智能终端设备，该设备包括：至少一个存储器和至少一个处理器；

其中，存储器用于存储程序代码，处理器用于调用所述存储器所存储的程序代码执行所述第一方面提供的优化光标位置的方法。

第四方面，本发明实施例提供了一种存储介质，所述存储介质用于存储程序代码，所述程序代码用于执行所述第一方面提供的优化光标位置的方法。

第五方面，本发明实施例提供了一种包括指令的计算机程序产品，当其在计算机上运行时，使得所述计算机执行所述第一方面提供的优化光标位置的方法。

与现有技术相比，本发明至少具有以下优点：

采用本发明实施例的技术方案，首先，通过对眼球动作进行追踪，获得屏幕坐标；其次，若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；然后，将光标移动到所述光标位置范围内；最后，根据调整光标的指令，调整所述光标至目标对象位置。由此可见，不是直接基于屏幕坐标进行相应操作，而是先利用眼球追踪技术中的屏幕坐标得到粗略的光标位置范围，再利用目标对象位置进行微调，精准定位光标位置，实现优化光标位置的意图，从而降低后续光标点击的误操作率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例中一种应用场景所涉及的系统框架示意图；

图2为本发明实施例提供的一种优化光标位置的方法的流程示意图；

图3为本发明实施例提供的目标窗口的示意图；

图4为本发明实施例提供的一种优化光标位置的装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

发明人经过研究发现，智能终端设备在日常生活以及工作中的普及率极高，为了方便用户使用智能终端设备，随着科技的发展产生了眼球追踪技术。现有技术中眼球追踪技术是利用红外设备和图像采集设备对眼球动作进行实时追踪，捕捉眼部细微变化，将其转化为智能终端设备的屏幕坐标，预测用户的状态和需求，根据该屏幕坐标直接进行相应的响应操作，实现用眼球控制智能终端设备。但是，仅凭眼部细微变化得到的屏幕坐标可能存在一定的误差，直接基于该屏幕坐标进行响应操作，很容易造成误操作。尤其是对于大屏智能终端设备而言，眼部细微变化较小，智能终端设备屏幕较大，转化得到的屏幕坐标准确率更低，导致误操作率较高。

为了解决这一问题，在本发明实施例中，首先，通过对眼球动作进行追踪，获得屏幕坐标；其次，若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；然后，将光标移动到所述光标位置范围内；最后，根据调整光标的指令，调整所述光标至目标对象位置。由此可见，不是直接基于屏幕坐标进行相应操作，而是先利用眼球追踪技术中的屏幕坐标得到粗略的光标位置范围，再利用目标对象位置进行微调，精准定位光标位置，实现优化光标位置的意图，从而降低后续光标点击的误操作率。

举例来说，本发明实施例的场景之一，可以是应用到如图1所示的场景中，该场景涉及包括摄像头101、处理器102和存储器103的智能终端设备。其中，处理器102可能是一个中央处理器CPU，或者是特定集成电路ASIC(Application Specific IntegratedCircuit)，或者是被配置成实施本发明实施例的一个或多个集成电路。存储器103存储有程序代码，存储器103可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatilememory)，例如至少一个磁盘存储器。

具体地，所述处理器102调用所述存储器103所存储的程序代码，通过所述摄像头101对眼球动作进行追踪，获得屏幕坐标；若预设时间段内任意两个屏幕坐标的差值不超过预设值，处理器102根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；处理器102将光标移动到所述光标位置范围内；根据调整光标的指令，处理器102调整所述光标至目标对象位置。

可以理解的是，在上述应用场景中，虽然将本发明实施方式的动作描述由处理器101执行，但是，本发明在执行主体方面不受限制，只要执行了本发明实施方式所公开的动作即可。

可以理解的是，上述场景仅是本发明实施例提供的一个场景示例，本发明实施例并不限于此场景。

下面结合附图，通过实施例来详细说明本发明实施例中优化光标位置的方法和装置的具体实现方式。

示例性方法

参见图2，示出了本发明实施例中一种优化光标位置的方法的流程示意图。在本实施例中，所述方法例如可以包括以下步骤：

步骤201：通过对眼球动作进行追踪，获得屏幕坐标。

可以理解的是，为了解决现有技术中仅仅使用眼球追踪技术完成对智能终端设备的控制的方式所存在误操作率高的问题，在本实施例中，并非直接利用眼球追踪技术控制智能终端设备，而是根据眼球追踪技术得到粗略的光标位置。其中，第一步是实时跟踪眼球动作得到智能终端设备的屏幕坐标，即，用户所关注的位置的坐标。在实际应用中，智能终端设备包括图像采集装置，例如，摄像头；用户在使用智能终端设备过程中，智能终端设备通过摄像头可以实时采集用户眼睛的图像，通过对眼睛中眼球动作进行追踪，捕捉眼部细微变化得到眼球运动信息，基于眼球追踪算法可以将眼球运动信息转化为所述屏幕坐标。因此，在本实施例的一些实施方式中，所述步骤201例如可以包括：

步骤2011：通过对眼球动作进行追踪，获取眼球运动信息；

步骤2012：根据眼球追踪算法，将眼球运动信息转化为所述屏幕坐标。

例如，平板电脑通过摄像头实时对眼球动作进行追踪，平板电脑的处理器获取眼球运动信息；根据眼球追踪算法，将眼球运动信息实时转化为所述屏幕坐标(x₁，y₁)、(x₂，y₃)……(x_n，y_n)。

步骤202：若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的。

可以理解的是，只有当用户一直关注智能终端设备屏幕上某个区域时，才需要确定用户关注区域对应的屏幕坐标范围，该屏幕坐标范围即是光标位置范围。由于步骤201中的屏幕坐标实施时获得的，判定用户一直关注智能终端设备屏幕上某个区域的条件就是一段时间内获得的屏幕坐标波动不大，即，预设时间段内任意两个屏幕坐标的差值不超过预设值。例如，1s内获得任意两个屏幕坐标的差值不超过1cm。

需要说明的是，在实际应用中，为了便于用户明确光标位置范围，根据所述目标屏幕坐标和技术误差可以计算得到一个平面空间区域，将该平面空间区域作为目标窗口，表示用户关注区域对应的位置范围，在屏幕上绘制该显示目标窗口以显示给用户，该位置范围即是光标位置范围。因此，在本实施例的一些实施方式中，所述步骤202例如可以包括以下步骤：

步骤2021：若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据所述目标屏幕坐标和技术误差，绘制显示目标窗口，所述目标窗口具有透明度；

步骤2022：将所述目标窗口确定为所述光标位置范围。

其中，需要说明的是，在满足预设时间段内任意两个屏幕坐标的差值不超过预设值的条件下，预设时间段内获得了多个屏幕坐标，为了更精确地计算得到目标窗口，一般采用多个屏幕坐标的平均值作为计算数据。因此，在本实施例的一些实施方式中，所述目标屏幕坐标为所述预设时间段内的屏幕坐标的平均值。当然，本实施例中的目标屏幕坐标并不仅仅局限于预设时间段内的屏幕坐标的平均值，也可以是预设时间段内的任意一个屏幕坐标等等，只要基于预设时间段内的屏幕坐标得到屏幕坐标均可。

还需要说明的是，考虑到目标窗口不能遮挡智能终端设备原有的屏幕信息，该目标窗口需要具有一定的透明度，又考虑到目标窗口的美观性和用户的视觉效果，目标窗口可以是椭圆形的半透明窗口，例如，如图3所示的目标窗口的示意图。

步骤203：将光标移动到所述光标位置范围内。

需要说明的是，有可能存在用户虽然一直关注智能终端设备屏幕上某个区域，但是并不想进行任何操作的情况，即使光标被移动到光标位置范围之内，当后续获得的屏幕坐标与预设时间段内屏幕坐标相差过大，或者后续获得的屏幕坐标不在光标位置范围内，并不需要继续执行步骤204，而是选择隐藏已显示的目标窗口。因此，在本实施例的一些实施方式中，在所述步骤203之后，例如还可以包括：若获得的屏幕坐标与所述预设时间段内任意一个屏幕坐标的差值超过预设值或所述获得的屏幕坐标在所述光标位置范围外，隐藏所述目标窗口。

步骤204：根据调整光标的指令，调整所述光标至目标对象位置。

可以理解的是，由于步骤203中的光标位置范围仅仅是粗略对光标进行定位，利用眼球追踪技术界定了用户关注的位置范围，为了解决现有技术中误操作率高的问题，在步骤203之后，基于用户真实关注的目标对象，生成调整光标的指令，根据指令调整光标位置范围内的光标至目标对象所处的位置，实现光标位置范围到一个精准光标位置的优化，也就是光标位置的精准定位。在实际应用中，对于非触屏智能终端设备而言，用户可以手动移动鼠标，生成调整光标的指令；对于触屏智能终端设备而言，用户可以触控拖动光标，生成调整光标的指令。因此，在本实施例的一些实施方式中，所述步骤204中的调整光标的指令是响应于移动鼠标的操作或触控拖动光标的操作产生的。

需要说明的是，在步骤204调整光标至目标对象位置时，步骤202中确定为光标位置范围的目标窗口是作为光标移动调整的参考界定区域，当光标被调整到目标对象位置后，该目标窗口对于用户而言是多余的，影响智能终端设备的屏幕视觉效果。因此，在本实施例的一些实施方式中，在所述步骤204之后，例如还可以包括：隐藏所述目标窗口，从而提升智能终端设备的屏幕视觉效果，提高用户使用体验。

还需要说明的是，在光标被调整到目标对象位置之后，光标已经处于用户所关注的目标对象位置，此时，可进行光标点击触发目标对象的操作，从而完成控制智能终端设备的意图。因此，在本实施例的一些实施方式中，在所述步骤204之后，例如还可以包括：响应于所述光标的点击操作，触发所述目标对象。当然，也可以在光标被调整到目标对象位置之后，直接进行触发目标对象的操作，在本实施例中并不做任何限定。

通过本实施例提供的各种实施方式，首先，通过对眼球动作进行追踪，获得屏幕坐标；其次，若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；然后，将光标移动到所述光标位置范围内；最后，根据调整光标的指令，调整所述光标至目标对象位置。由此可见，不是直接基于屏幕坐标进行相应操作，而是先利用眼球追踪技术中的屏幕坐标得到粗略的光标位置范围，再利用目标对象位置进行微调，精准定位光标位置，实现优化光标位置的意图，从而降低后续光标点击的误操作率。

示例性设备

参见图4，示出了本发明实施例中一种优化光标位置的装置的结构示意图。在本实施例中，所述装置例如具体可以包括：

获得单元401，用于通过对眼球动作进行追踪，获得屏幕坐标；

确定单元402，用于若预设时间段内任意两个屏幕坐标的差值不超过第一预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；

移动单元403，用于将光标移动到所述光标位置范围内；

调整单元404，用于根据调整光标的指令，调整所述光标至目标对象位置。

可选的，所述确定单元402包括：

绘制显示子单元，用于若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据所述目标屏幕坐标和技术误差，绘制显示目标窗口，所述目标窗口具有透明度；

确定子单元，用于将所述目标窗口确定为所述光标位置范围。

可选的，所述目标屏幕坐标为所述预设时间段内的屏幕坐标的平均值。

可选的，所述调整光标的指令是响应于移动鼠标的操作或触控拖动光标的操作产生的。

可选的，所述装置还包括：

第一隐藏单元，用于若获得的屏幕坐标与所述预设时间段内任意一个屏幕坐标的差值超过预设值或所述获得的屏幕坐标在所述光标位置范围外，隐藏所述目标窗口。

可选的，所述装置还包括：

第二隐藏单元，用于隐藏所述目标窗口。

可选的，所述获得单元401包括：

获取子单元，用于通过对眼球动作进行追踪，获取眼球运动信息；

转化子单元，用于根据眼球追踪算法，将眼球运动信息转化为所述屏幕坐标。

可选的，所述装置还包括：

触发单元，用于响应于所述光标的点击操作，触发所述目标对象。

通过本实施例提供的各种实施方式，首先，通过对眼球动作进行追踪，获得屏幕坐标；其次，若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的屏幕坐标得到的；然后，将光标移动到所述光标位置范围内；最后，根据调整光标的指令，调整所述光标至目标对象位置。由此可见，不是直接基于屏幕坐标进行相应操作，而是先利用眼球追踪技术中的屏幕坐标得到粗略的光标位置范围，再利用目标对象位置进行微调，精准定位光标位置，实现优化光标位置的意图，从而降低后续光标点击的误操作率。

本发明实施例还提供一种智能终端设备，该智能终端设备的硬件结构可以如图1所示，包括：至少一个存储器和至少一个处理器；

其中，存储器用于存储程序代码，处理器用于调用所述存储器所存储的程序代码执行上述实施例提供的优化光标位置的方法。

另外，本发明实施例还提供了一种存储介质，所述存储介质用于存储程序代码，所述程序代码用于执行上述实施例提供的优化光标位置的方法。

另外，本发明实施例还提供了一种包括指令的计算机程序产品，当其在计算机上运行时，使得所述计算机执行上述实施例提供的优化光标位置的方法。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制。虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明。任何熟悉本领域的技术人员，在不脱离本发明技术方案范围情况下，都可利用上述揭示的方法和技术内容对本发明技术方案做出许多可能的变动和修饰，或修改为等同变化的等效实施例。因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰，均仍属于本发明技术方案保护的范围内。

Claims (11)

1.一种优化光标位置的方法，其特征在于，包括：

通过对眼球动作进行追踪，获得屏幕坐标，所述屏幕坐标指用户所关注的位置在屏幕上的坐标；

若预设时间段内任意两个所述屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的所述屏幕坐标得到的；

将光标移动到所述光标位置范围内；

根据调整光标的指令，调整所述光标位置范围内的所述光标至目标对象位置。

2.根据权利要求1所述的方法，其特征在于，所述若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，包括：

若预设时间段内任意两个屏幕坐标的差值不超过预设值，根据所述目标屏幕坐标和技术误差，绘制显示目标窗口，所述目标窗口具有透明度；

将所述目标窗口确定为所述光标位置范围。

3.根据权利要求2所述的方法，其特征在于，所述目标屏幕坐标为所述预设时间段内的屏幕坐标的平均值。

4.根据权利要求1所述的方法，其特征在于，所述调整光标的指令是响应于移动鼠标的操作或触控拖动光标的操作产生的。

5.根据权利要求2所述的方法，其特征在于，在所述将光标移动到所述光标位置范围内之后，还包括：

若获得的屏幕坐标与所述预设时间段内任意一个屏幕坐标的差值超过预设值或所述获得的屏幕坐标在所述光标位置范围外，隐藏所述目标窗口。

6.根据权利要求2所述的方法，其特征在于，在所述调整所述光标至目标对象位置之后，还包括：

隐藏所述目标窗口。

7.根据权利要求1所述的方法，其特征在于，所述通过对眼球动作进行追踪，获得屏幕坐标，包括：

通过对眼球动作进行追踪，获取眼球运动信息；

根据眼球追踪算法，将眼球运动信息转化为所述屏幕坐标。

8.根据权利要求1所述的方法，其特征在于，在所述调整所述光标至目标对象位置之后，还包括：

响应于所述光标的点击操作，触发所述目标对象。

9.一种优化光标位置的装置，其特征在于，包括：

获得单元，用于通过对眼球动作进行追踪，获得屏幕坐标，所述屏幕坐标指用户所关注的位置在屏幕上的坐标；

确定单元，用于若预设时间段内任意两个所述屏幕坐标的差值不超过第一预设值，根据目标屏幕坐标和技术误差，确定光标位置范围，所述目标屏幕坐标是基于所述预设时间段内的所述屏幕坐标得到的；

移动单元，用于将光标移动到所述光标位置范围内；

调整单元，用于根据调整光标的指令，调整所述光标位置范围内的所述光标至目标对象位置。

10.一种智能终端设备，其特征在于，包括：至少一个存储器和至少一个处理器；

其中，存储器用于存储程序代码，处理器用于调用所述存储器所存储的程序代码执行权利要求1-8任意一项所述的优化光标位置的方法。

11.一种存储介质，所述存储介质用于存储程序代码，所述程序代码用于执行权利要求1-8任意一项所述的优化光标位置的方法。