CN106406535A - 一种移动设备操作方法、装置及移动设备 - Google Patents

Abstract

本申请涉及一种移动设备操作方法、装置及移动设备。其中，移动设备操作方法包括：在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。本申请实施例利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

Description

一种移动设备操作方法、装置及移动设备

技术领域

本发明涉及通信领域，尤其涉及一种移动设备操作方法、装置及移动设备。

背景技术

目前，手机、平板等智能移动设备都采用触控操作方式，也就是通过用手或触控笔点击屏幕来实现对移动设备的操作。比如，当人们要打开某种应用或调出菜单时，可以通过点击应用、菜单按钮，或是长按弹出上下文菜单等方式来实现相关操作。

触控操作方式相比于按键操作方式有了非常大的进步，更加方便快捷，也更加智能。然而，触控操作方式仍然需要用手来实现对移动设备的操作，无论是用手指直接进行的点击操作还是利用触控笔进行的点击操作，都离不开手的使用。

这种限制导致了在一些不方便使用手的情况下，无法实现对移动设备的操作。例如：

场景一

冬天在很冷的户外，用户戴着手套，不想拿出来点击屏幕。

场景二

正在干活，双手很脏，有来电却不方便用手接听电话。

可见，当前的移动设备在使用过程中，由于受到用手的限制，在一些不方便使用手的情况下，无法实现对移动设备的操作。

发明内容

本发明的目的在于提供一种移动设备操作方法、装置及移动设备，能够在不方便使用手的情况下，实现对移动设备的操作。

第一方面，本发明实施例提出了一种移动设备操作方法，应用于设置有眼部信息检测传感器的移动设备，包括：

在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

进一步地，上述方法还可具有以下特点，所述基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作，包括：

确定所述移动设备的当前屏幕状态；

在所述当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的所述眼部信息所对应的操作；

对所述移动设备执行查找到的操作。

进一步地，上述方法还可具有以下特点，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为灭屏状态，所述眼部信息所对应的操作为亮屏操作的情况下，对所述移动设备执行亮屏操作。

进一步地，上述方法还可具有以下特点，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且锁屏状态，所述眼部信息所对应的操作为解锁操作的情况下，对所述移动设备执行解锁操作。

进一步地，上述方法还可具有以下特点，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中菜单的调用操作的情况下，对所述移动设备执行调用菜单的操作。

进一步地，上述方法还可具有以下特点，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中应用程序图标或菜单中选项的选择操作的情况下，对所述移动设备执行选择应用程序图标或菜单中选项的操作。

进一步地，上述方法还可具有以下特点，在对所述移动设备执行选择应用程序图标或菜单中选项的操作之后，还包括：

根据在执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

进一步地，上述方法还可具有以下特点，在对所述移动设备执行选择应用程序图标或菜单中选项的操作之后，还包括：

根据在执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

进一步地，上述方法还可具有以下特点，在所述检测所述移动设备的当前使用者的眼部信息之前，还包括：

将所述移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数。

进一步地，上述方法还可具有以下特点，所述眼部信息为眼球注视时长、连续眨眼次数、眼睛注视位置这三种信息中的任意一种或至少两种的组合。

本发明实施例提供的移动设备操作方法，利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

第二方面，本发明实施例提出了一种移动设备操作装置，应用于设置有眼部信息检测传感器的移动设备，包括：

检测模块，用于在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

操作模块，用于基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

进一步地，上述装置还可具有以下特点，所述操作模块包括：

确定单元，用于确定所述移动设备的当前屏幕状态；

查找单元，用于在所述确定单元确定的所述当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的所述眼部信息所对应的操作；

执行单元，用于对所述移动设备执行所述查找单元查找到的操作。

进一步地，上述装置还可具有以下特点，所述执行单元包括：

亮屏子单元，用于在所述当前屏幕状态为灭屏状态，所述眼部信息所对应的操作为亮屏操作的情况下，对所述移动设备执行亮屏操作。

进一步地，上述装置还可具有以下特点，所述执行单元包括：

解锁子单元，用于在所述当前屏幕状态为亮屏且锁屏状态，所述眼部信息所对应的操作为解锁操作的情况下，对所述移动设备执行解锁操作。

进一步地，上述装置还可具有以下特点，所述执行单元包括：

调用子单元，用于在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中菜单的调用操作的情况下，对所述移动设备执行调用菜单的操作。

进一步地，上述装置还可具有以下特点，所述执行单元包括：

选择子单元，用于在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中应用程序图标或菜单中选项的选择操作的情况下，对所述移动设备执行选择应用程序图标或菜单中选项的操作。

进一步地，上述装置还可具有以下特点，在所述选择子单元之后，所述执行单元还包括：

开关控制子单元，用于根据在所述选择子单元执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

进一步地，上述装置还可具有以下特点，在所述选择子单元之后，所述执行单元还包括：

更改选择子单元，用于根据在所述选择子单元执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

进一步地，上述装置还可具有以下特点，在所述检测模块之前，还包括：

增大模块，用于将所述移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数。

进一步地，上述装置还可具有以下特点，所述眼部信息为眼球注视时长、连续眨眼次数、眼睛注视位置这三种信息中的任意一种或至少两种的组合。

本发明实施例提供的移动设备操作装置，利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

第三方面，本发明实施例提出了一种移动设备，设置有眼部信息检测传感器，所述移动设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为：

在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

进一步地，上述移动设备还可具有以下特点，所述移动设备为手机或平板电脑。

本发明实施例提供的移动设备，能够利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例一中移动设备操作方法的流程示意图；

图2为图1中步骤S102的一种流程示意图。

图3为图2中步骤S203的流程示意图之一。

图4为图2中步骤S203的流程示意图之二。

图5为图2中步骤S203的流程示意图之三。

图6为图2中步骤S203的流程示意图之四。

图7为图2中步骤S203的流程示意图之五。

图8为图2中步骤S203的流程示意图之六。

图9为本发明实施例九中移动设备操作方法的流程示意图。

图10为移动设备的屏幕坐标示意图。

图11为使用光标选中应用图标的示意图。

图12为本发明实施例十中移动设备操作装置的结构框图。

图13为本发明实施例所提供的移动设备1300的一种硬件结构示意图。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实施例只用于解释本发明，并非用于限定本发明的范围。对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，根据本发明精神所获得的所有实施例，都属于本发明的保护范围。

本发明各实施例的移动设备操作方法可以应用于设置有眼部信息检测传感器的移动设备。其中，眼部信息检测传感器可以是前置摄像头、红外传感器等。该移动设备上还可以设置有动作捕捉传感器，能够捕捉用户的手势动作信息。

实施例一

图1为本发明实施例一中移动设备操作方法的流程示意图。如图1所示，本实施例中，移动设备操作方法可以包括如下步骤：

S101、在满足预设条件的情况下，检测移动设备的当前使用者的眼部信息；

在应用中，可以为执行本实施例中的移动设备操作方法流程的应用程序设置一个开关，步骤S101中的预设条件可以是该开关处于开启状态。

其中，眼部信息可以是眼球注视时长、连续眨眼次数、眼睛注视位置等中的任意一个或其任意组合。

S102、基于检测到的眼部信息和预设的眼部信息与操作的对应关系对移动设备进行相应操作。

在移动设备中，可以预先设置眼部信息与操作(指对移动设备的操作)的对应关系，以便在检测到眼部信息时，能够根据检测到的眼部信息查找到其所对应的操作，然后对移动设备执行该查找到的操作。

其中，眼部信息与操作的对应关系可以由移动设备的用户在移动设备中以自定义的方式进行设置，用户也可以通过从移动设备给出的眼部信息与操作的对应关系的可选项中进行选择来进行设置，在用户既不进行自定义设置，也不进行选择设置的情况下，移动设备可以采用默认的眼部信息与操作的对应关系。

本步骤中，基于眼部信息即可对移动设备进行操作，不需要使用手来完成相关操作。这样就摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作。

通过本发明实施例，用户通过眼睛就可以对移动设备发出操作指令，从而实现对移动设备的操作，提供了一种新的人机交互方式，并且这种交互方式不需要依靠手来完成，从而给用户带来了一种新的使用体验，同时也提高了移动设备的智能化程度。

S101～S102的执行主体可以为一种装置，该装置可以是位于本地设备的应用，或者还可以是位于本地设备的应用中的插件或软件开发工具包(Software DevelopmentKit，SDK)等功能单元，本发明实施例对此不进行特别限定。

可以理解的是，所述应用可以是安装在设备上的应用程序(nativeApp)，或者还可以是设备上的浏览器的一个网页程序(webApp)，本发明实施例对此不进行限定。

本发明实施例提供的移动设备操作方法，利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

实施例二

基于上述实施例一所提供的移动设备操作方法，本发明实施例对前述的步骤S102中基于检测到的眼部信息和预设的眼部信息与操作的对应关系对移动设备进行相应操作的方法进行具体描述。

图2为图1中步骤S102的一种流程示意图。如图2所示，本实施例中，步骤S102可以包括如下子步骤：

S201、确定移动设备的当前屏幕状态；

其中，当前屏幕状态可以是灭屏状态、亮屏且锁屏状态、亮屏且已解锁状态等。

S202、在当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的眼部信息所对应的操作；

需要说明的是，在步骤S202中的眼部信息与操作的对应关系是一种与屏幕状态对应的对应关系。也就是说，每一种具体的眼部信息与操作的对应关系都是与一种具体的屏幕状态对应的。例如，灭屏状态对应一种眼部信息与操作的对应关系，亮屏且已解锁状态对应一种眼部信息与操作的对应关系，灭屏状态与亮屏且已解锁状态各自所对应的眼部信息与操作的对应关系可以是不同的。

基于此，当移动设备在不同的屏幕状态下检测到同一种眼部信息时可以进行不同的操作。这样就能够根据有限多的眼部信息对移动设备进行更多的操作。这样，虽然眼睛给出信息的方式十分有限(也就是说，眼部信息的种类有限)，但仍然可以据此拓展更多的操作方式。

S203、对移动设备执行在步骤S202中查找到的操作。

本步骤依据在步骤S202中查找到的眼部信息对应的操作自动对对移动设备执行操作。也就是说，移动设备通过检测到的使用者的眼部信息来理解使用者的操作意图，然后自动按照理解的操作意图进行操作。整个操作过程中仅需要使用者给出一个移动设备能够理解的眼部信息，非常智能且方便快捷。这个过程中不需要用户用手来操作，从而摆脱了用手操作的限制，进而使得在很多不方便使用手的应用场景中也能实现对移动设备的操作，因此拓展了移动设备的应用场景。

实施例三

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图3为图2中步骤S203的流程示意图之一。如图3所示，本实施例中，步骤S203可以包括如下子步骤：

S301、在当前屏幕状态为灭屏状态，眼部信息所对应的操作为亮屏操作的情况下，对移动设备执行亮屏操作。

通过本步骤，在移动设备的屏幕处于灭屏状态时，可以通过眼部信息来实现对移动设备的亮屏操作。相比于基于按键触发的亮屏操作，本实施例提供的这种亮屏方式不需要在移动设备上设置用于亮屏操作的按键，从而能够简化移动设备的结构。

实施例四

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图4为图2中步骤S203的流程示意图之二。如图4所示，本实施例中，步骤S203可以包括如下子步骤：

S401、在当前屏幕状态为亮屏且锁屏状态，眼部信息所对应的操作为解锁操作的情况下，对移动设备执行解锁操作。

通过本步骤，在移动设备的屏幕处于亮屏且锁屏状态时，可以通过眼部信息来实现对移动设备的屏幕解锁操作。这种屏幕解锁方式不需要用手进行操作，而且比用手在屏幕上通过输入密码或画出解锁图形等的传统解锁方式更方便，也更加快捷。

实施例五

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图5为图2中步骤S203的流程示意图之三。如图5所示，本实施例中，步骤S203可以包括如下子步骤：

S501、在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中菜单的调用操作的情况下，对移动设备执行调用菜单的操作。

通过本步骤，在移动设备的屏幕处于亮屏且已解锁状态时，可以通过眼部信息来实现对移动设备的菜单调用操作。这种菜单调用方式不需要用手进行操作，而且比用手在屏幕上通过点击来调用菜单的方式更加快捷。

实施例六

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图6为图2中步骤S203的流程示意图之四。如图6所示，本实施例中，步骤S203可以包括如下子步骤：

S601、在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中应用程序图标或菜单中选项的选择操作的情况下，对移动设备执行选择应用程序图标或菜单中选项的操作。

通过本步骤，在移动设备的屏幕处于亮屏且已解锁状态时，可以通过眼部信息来实现对移动设备中应用程序图标或菜单中选项的选择操作。这种选择应用程序图标或菜单中选项的操作方式不需要使用手，而且方便快捷，在不方便用手的场景中也能够进行应用程序图标或菜单中选项的选择操作。

实施例七

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图7为图2中步骤S203的流程示意图之五。如图7所示，本实施例中，步骤S203可以包括如下子步骤：

S701、在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中应用程序图标或菜单中选项的选择操作的情况下，对移动设备执行选择应用程序图标或菜单中选项的操作；

S702、根据在执行选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

其中，用于确定是否打开已选择的应用程序图标或菜单中选项的手势动作信息或眼部信息是在对移动设备执行了应用程序图标或菜单中选项的选择操作、已有应用程序图标或菜单中选项被选择之后获得的。

其中，手势动作信息可以通过动作捕捉传感器来捕捉。

当然，在本发明其他实施例中，用于确定是否打开已选择的应用程序图标或菜单中选项的信息除了手势动作信息、眼部信息之外，还可以采用其他的信息。

本实施例在通过眼部信息实现对移动设备中应用程序图标或菜单中选项的选择操作之后，再通过手势动作信息或眼部信息来控制是否开启已选择的应用程序图标或菜单中选项。从选择应用程序或菜单选项到打开已选择的应用程序或菜单选项的整个过程都不需要用手操作，符合不方便用手的移动设备应用场景的需求。

实施例八

基于上述实施例二所提供的移动设备操作方法，本发明实施例对前述的步骤S203中对移动设备执行在步骤S202中查找到的操作的方法进行具体描述。

图8为图2中步骤S203的流程示意图之六。如图8所示，本实施例中，步骤S203可以包括如下子步骤：

S801、在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中应用程序图标或菜单中选项的选择操作的情况下，对移动设备执行选择应用程序图标或菜单中选项的操作；

S802、根据在执行选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

当移动设备的使用者通过眼部信息实现对移动设备中应用程序图标或菜单中选项的选择操作之后，由于选择错误或者想法改变想改选其他的应用程序或菜单选项时，可以通过步骤S802所提供的利用手势动作信息或眼部信息的方式来更改选择。这种更改选择的方式也不需要用手操作，符合不方便用手的移动设备应用场景的需求。

实施例九

图9为本发明实施例九中移动设备操作方法的流程示意图。如图9所示，本实施例中，移动设备操作方法可以包括如下步骤：

S901、在满足预设条件的情况下，将移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数；

由于可以通过用眼睛注视应用程序图标或菜单中选项的方式来选择应用程序或菜单选项，在这种操作方式中，应用程序图标或菜单中选项越大，操作精度就越高，而应用程序图标或菜单中选项越低，操作精度也会随之降低，因此，为了方便用户使用，减少误操作，就需要对移动设备桌面上的应用程序图标或菜单中选项进行增大。

S902、检测移动设备的当前使用者的眼部信息；

其中，眼部信息可以是眼球注视时长、连续眨眼次数等。

S903、基于检测到的眼部信息和预设的眼部信息与操作的对应关系对移动设备进行相应操作。

本发明实施例提供的移动设备操作方法，利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

在眼部信息为眼球注视时长时，需要确定眼球注视的目标是什么。比如，移动设备的桌面上有十几个应用程序图标，当使用者注视移动设备屏幕的时候，如何知道使用者的眼球注视的具体是哪一个应用程序图标呢？这里我们结合图10来对这个问题进行说明。

图10为移动设备的屏幕坐标示意图。如图10所示，设屏幕中心位置到瞳孔正方向位置为0度原点，则屏幕右半屏的X轴为正数，屏幕左半屏的X轴为负数，屏幕上半屏的Y轴为正数，屏幕下半屏的Y轴为负数。

根据屏幕尺寸、分辨率等信息，可以计算出屏幕上的应用程序图标、菜单等所在的位置坐标，根据用户瞳孔的注视与屏幕中心正向位置的角度，通过算法公式就可以计算出用户在注视屏幕时眼球所锁定的应用或菜单。

当移动设备检测到用户注视某应用、菜单等的时间长度达到设定阈值，会出现如图11所示的光标，圈住用户要选中的应用或菜单。当前被光标圈住的应用处于选中状态，选中应用后，移动设备等待用户进一步操作的指令。

下面通过示例对本发明的移动设备操作方法作进一步详细说明。假设在以下给出的各示例中，眼部信息与操作的对应关系都已经预先在移动设备中设置好。

示例一

假设移动设备屏幕当前处于亮屏且已解锁的状态，屏幕上当前显示多个应用程序图标。移动设备使用者用眼睛注视当前屏幕上的微信的应用程序图标(以下简称微信图标)6秒钟。移动设备检测到使用者对微信”图标的眼球注视时长超过5秒钟(假设5秒钟为移动设备中预设的眼球注视时长阈值)，并且从预设的眼部信息与操作的对应关系中获知眼球注视时长这种眼部信息对应的操作是选择应用程序或菜单选项，则移动设备用光标圈中微信图标，使微信图标处于已选中的状态。

在微信图标处于已选中的状态后，使用者继续注视微信图标3秒钟，此时，移动设备开启微信应用程序。

或者，在微信图标处于已选中的状态后，使用者连续眨眼2次，移动设备解析后，获知连续眨眼2次对应开启当前已选中应用或菜单选项的操作，则开启微信应用程序。

示例二

同示例一，使用者通过用眼睛注视选择微信应用，使微信图标处于已选中的状态，然后，移动设备通过动作捕捉传感器捕捉用户的手势动作信息，如果此时捕捉到使用者比V的手势或竖起三根手指，则开启微信应用，如果此时捕捉到使用者的掌心向下的动作，则取消对微信应用的选中。这里虽然使用了手来做动作，但是并不需要用手触摸或点击移动设备的屏幕。

示例三

假设移动设备屏幕当前处于灭屏状态。移动设备使用者用眼睛注视当前屏幕6秒钟，移动设备检测到该注视后控制移动设备进入亮屏状态。

假设进入亮屏状态后，移动设备处于屏幕锁定状态，此时，使用者对着屏幕继续注视3秒后眨眼1次，移动设备自动解锁，进入到解锁状态，显示移动设备的桌面。

示例四

假设移动设备屏幕当前处于亮屏且已解锁状态，屏幕当前显示移动设备的桌面，桌面上部留出一片空白区域，该空白区域下方排列有应用程序图标。使用者注视桌面上部的空白区域5秒钟，移动设备检测到后弹出菜单，并将菜单内容(菜单内容是菜单中的全部菜单选项)全屏显示。然后，用户注视要选择的菜单选项5秒钟，移动设备检测到后选中该菜单选项。在选中该菜单选项后，使用者在5秒内连续眨眼2次，移动设备检测到后打开该已选中的菜单选项。

实施例十

为了实现前述移动设备操作方法实施例中的各步骤，本发明实施例还提供了移动设备操作装置实施例。本发明实施例提供的移动设备操作装置可以应用于设置有眼部信息检测传感器的移动设备。其中，眼部信息检测传感器可以是前置摄像头、红外传感器等。该移动设备上还可以设置有动作捕捉传感器，能够捕捉用户的手势动作信息。

图12为本发明实施例十中移动设备操作装置的结构框图。如图12所示，本实施例中，移动设备操作装置1200可以包括检测模块1210和操作模块1220。其中，检测模块1210用于在满足预设条件的情况下，检测移动设备的当前使用者的眼部信息。操作模块1220用于基于检测模块1210检测到的眼部信息和预设的眼部信息与操作的对应关系对移动设备进行相应操作。

在本发明实施例中，操作模块1220还可以包括确定单元、查找单元和执行单元。其中，确定单元用于确定移动设备的当前屏幕状态。查找单元用于在确定单元确定的当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的眼部信息所对应的操作。执行单元用于对移动设备执行查找单元查找到的操作。

其中，执行单元可以包括亮屏子单元。亮屏子单元用于在当前屏幕状态为灭屏状态，眼部信息所对应的操作为亮屏操作的情况下，对移动设备执行亮屏操作。

其中，执行单元可以包括解锁子单元。解锁子单元用于在当前屏幕状态为亮屏且锁屏状态，眼部信息所对应的操作为解锁操作的情况下，对移动设备执行解锁操作。

其中，执行单元可以包括调用子单元。调用子单元用于在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中菜单的调用操作的情况下，对移动设备执行调用菜单的操作。

其中，执行单元可以包括选择子单元。选择子单元用于在当前屏幕状态为亮屏且已解锁状态，眼部信息所对应的操作为对移动设备中应用程序图标或菜单中选项的选择操作的情况下，对移动设备执行选择应用程序图标或菜单中选项的操作。

在执行单元包括选择子单元的基础上，在选择子单元之后，执行单元还可以包括开关控制子单元。开关控制子单元用于根据在选择子单元执行选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

在执行单元包括选择子单元的基础上，在选择子单元之后，执行单元还可以包括更改选择子单元。更改选择子单元用于根据在选择子单元执行选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

在本发明实施例中，在检测模块1210之前，移动设备操作装置1200还可以包括增大模块。增大模块用于将移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数。

其中，眼部信息可以为眼球注视时长、连续眨眼次数、眼睛注视位置这三种信息中的任意一种或至少两种的组合。

由于本实施例中的移动设备操作装置能够执行前述实施例中的移动设备操作方法，本实施例未详细描述的部分，可参考对前述移动设备操作方法各实施例的相关说明。

本发明实施例提供的移动设备操作装置，利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

实施例十一

本发明实施例还提供了一种移动设备。该移动设备包括处理器和用于存储处理器可执行指令的存储器，其中，处理器被配置为：在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

其中，移动设备可以是手机、平板电脑等。

请参见图13，其为本发明实施例所提供的移动设备1300的一种硬件结构示意图。如图13所示，移动设备1300可以包括以下一个或多个组件：处理组件1302，存储器1304，电源组件1306，多媒体组件1308，音频组件1310，输入/输出(I/O)的接口1312，传感器组件1314，以及通信组件1316。

处理组件1302通常控制移动设备1300的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1302可以包括一个或多个处理器1320来执行指令，以完成前述的移动设备操作方法的全部或部分步骤，具体包括：在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。此外，处理组件1302可以包括一个或多个模块，便于处理组件1302和其他组件之间的交互。例如，处理组件1302可以包括多媒体模块，以方便多媒体组件1308和处理组件1302之间的交互。

存储器1304被配置为存储各种类型的数据以支持在移动设备1300的操作。这些数据的示例包括用于在移动设备1300上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1304可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件1306为移动设备1300的各种组件提供电力。电源组件1306可以包括电源管理系统，一个或多个电源，及其他与为移动设备1300生成、管理和分配电力相关联的组件。

多媒体组件1308包括在所述移动设备1300和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1308包括一个前置摄像头和/或后置摄像头。当移动设备1300处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件1310被配置为输出和/或输入音频信号。例如，音频组件1310包括一个麦克风(MIC)，当移动设备1300处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1304或经由通信组件1316发送。在一些实施例中，音频组件1310还包括一个扬声器，用于输出音频信号。

I/O接口1312为处理组件1302和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件1314包括一个或多个传感器，用于为移动设备1300提供各个方面的状态评估。例如，传感器组件1314可以检测到移动设备1300的打开/关闭状态，组件的相对定位，例如所述组件为移动设备1300的显示器和小键盘，传感器组件1314还可以检测移动设备1300或移动设备1300一个组件的位置改变，用户与移动设备1300接触的存在或不存在，移动设备1300方位或加速/减速和移动设备1300的温度变化。传感器组件1314可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1314还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1314还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件1316被配置为便于移动设备1300和其他设备之间有线或无线方式的通信。移动设备1300可以接入基于通信标准的无线网络，如WiFi、2G、3G或4G或它们的组合。在一个示例性实施例中，通信组件1316经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件1316还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，移动设备1300可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

本发明实施例提供的移动设备，能够利用移动设备使用者的眼部信息对移动设备进行操作，不仅提供了一种对移动设备的新操作方式，同时还摆脱了必须用手来操作移动设备的限制，从而在不方便使用手的情况下，也能够实现对移动设备的操作，进而拓展了移动设备的应用场景，提升了用户的使用体验。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机装置(可以是个人计算机，服务器，或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (22)

1.一种移动设备操作方法，应用于设置有眼部信息检测传感器的移动设备，其特征在于，包括：

在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

2.根据权利要求1所述的方法，其特征在于，所述基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作，包括：

确定所述移动设备的当前屏幕状态；

在所述当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的所述眼部信息所对应的操作；

对所述移动设备执行查找到的操作。

3.根据权利要求2所述的方法，其特征在于，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为灭屏状态，所述眼部信息所对应的操作为亮屏操作的情况下，对所述移动设备执行亮屏操作。

4.根据权利要求2所述的方法，其特征在于，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且锁屏状态，所述眼部信息所对应的操作为解锁操作的情况下，对所述移动设备执行解锁操作。

5.根据权利要求2所述的方法，其特征在于，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中菜单的调用操作的情况下，对所述移动设备执行调用菜单的操作。

6.根据权利要求2所述的方法，其特征在于，所述对所述移动设备执行查找到的操作，包括：

在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中应用程序图标或菜单中选项的选择操作的情况下，对所述移动设备执行选择应用程序图标或菜单中选项的操作。

7.根据权利要求6所述的方法，其特征在于，在对所述移动设备执行选择应用程序图标或菜单中选项的操作之后，还包括：

根据在执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

8.根据权利要求6所述的方法，其特征在于，在对所述移动设备执行选择应用程序图标或菜单中选项的操作之后，还包括：

根据在执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

9.根据权利要求1所述的方法，其特征在于，在所述检测所述移动设备的当前使用者的眼部信息之前，还包括：

将所述移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数。

10.根据权利要求1所述的方法，其特征在于，所述眼部信息为眼球注视时长、连续眨眼次数、眼睛注视位置这三种信息中的任意一种或至少两种的组合。

11.一种移动设备操作装置，应用于设置有眼部信息检测传感器的移动设备，其特征在于，包括：

检测模块，用于在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

操作模块，用于基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

12.根据权利要求11所述的装置，其特征在于，所述操作模块包括：

确定单元，用于确定所述移动设备的当前屏幕状态；

查找单元，用于在所述确定单元确定的所述当前屏幕状态对应的眼部信息与操作的对应关系中查找检测到的所述眼部信息所对应的操作；

执行单元，用于对所述移动设备执行所述查找单元查找到的操作。

13.根据权利要求12所述的装置，其特征在于，所述执行单元包括：

亮屏子单元，用于在所述当前屏幕状态为灭屏状态，所述眼部信息所对应的操作为亮屏操作的情况下，对所述移动设备执行亮屏操作。

14.根据权利要求12所述的装置，其特征在于，所述执行单元包括：

解锁子单元，用于在所述当前屏幕状态为亮屏且锁屏状态，所述眼部信息所对应的操作为解锁操作的情况下，对所述移动设备执行解锁操作。

15.根据权利要求12所述的装置，其特征在于，所述执行单元包括：

调用子单元，用于在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中菜单的调用操作的情况下，对所述移动设备执行调用菜单的操作。

16.根据权利要求12所述的装置，其特征在于，所述执行单元包括：

选择子单元，用于在所述当前屏幕状态为亮屏且已解锁状态，所述眼部信息所对应的操作为对所述移动设备中应用程序图标或菜单中选项的选择操作的情况下，对所述移动设备执行选择应用程序图标或菜单中选项的操作。

17.根据权利要求16所述的装置，其特征在于，在所述选择子单元之后，所述执行单元还包括：

开关控制子单元，用于根据在所述选择子单元执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息确定是否打开已选择的应用程序图标或菜单中选项。

18.根据权利要求16所述的装置，其特征在于，在所述选择子单元之后，所述执行单元还包括：

更改选择子单元，用于根据在所述选择子单元执行所述选择应用程序图标或菜单中选项的操作之后捕捉的手势动作信息或检测到的眼部信息更改对应用程序图标或菜单中选项的选择。

19.根据权利要求11所述的装置，其特征在于，在所述检测模块之前，还包括：

增大模块，用于将所述移动设备桌面上的应用程序图标或菜单中选项增大到设定倍数。

20.根据权利要求11所述的装置，其特征在于，所述眼部信息为眼球注视时长、连续眨眼次数、眼睛注视位置这三种信息中的任意一种或至少两种的组合。

21.一种移动设备，设置有眼部信息检测传感器，其特征在于，所述移动设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为：

在满足预设条件的情况下，检测所述移动设备的当前使用者的眼部信息；

基于检测到的所述眼部信息和预设的眼部信息与操作的对应关系对所述移动设备进行相应操作。

22.根据权利要求21所述的移动设备，其特征在于，所述移动设备为手机或平板电脑。