CN107508963A - 终端控制方法、装置、终端及计算机可读存储介质 - Google Patents

Abstract

本发明提供了一种终端控制方法、装置、终端及计算机可读存储介质，其中，该方法包括：控制终端的虹膜检测传感器采集人眼映射于该终端屏幕的位置信息；判断该位置信息是否与指定位置信息一致；在判断该位置信息与该指定位置信息一致时，获取该人眼的动作信息；判断该人眼的动作信息是否与指定动作信息一致；在判断该人眼的动作信息与该指定动作信息一致时，控制该终端执行对应的操作。通过本发明解决了现有技术中使用手指触摸屏幕对终端进行触控操作，导致手指产生疲劳感并不能使双手得到解放、以及使用语音控制终端会受到周围环境的影响，导致无法操控终端的问题，在控制终端过程中，解放出双手的同时提高了控制的准确度。

Description

终端控制方法、装置、终端及计算机可读存储介质

技术领域

本发明涉及人机交互技术领域，具体涉及一种终端控制方法、装置、终端及计算机可读存储介质。

背景技术

随着大屏幕智能终端的不断普及，智能终端以智能手机为例，现在的智能手机就是一部微型的个人电脑，在我们生活中扮演着越来越重要的角色。

现在操作手机最主要的方式是通过手指触控屏幕进行控制，这种方式虽然准确率最高，同时也比较方便，但是长时间进行操作会造成疲劳感，更有甚者造成各种疾病，例如关节炎，而且手机屏幕越来越大，用手指操作手机，会越来越累。并且双手有时不便进行操作手机，而语音操控会受到周围环境的限制，较少场景可以满足使用语音操控手机的各项功能。

发明内容

有鉴于此，本发明实施例提供了一种终端控制方法、装置、终端及计算机可读存储介质，以解决现有技术中使用手指触摸屏幕对终端进行触控操作，导致手指产生疲劳感并不能使双手得到解放、以及使用语音控制终端会受到周围环境的影响，导致无法操控终端的问题。

为此，本发明实施例提供了如下技术方案：

本发明第一方面，提供了一种终端控制方法，包括：控制终端的虹膜检测传感器采集人眼映射于所述终端屏幕的位置信息；判断所述位置信息是否与指定位置信息一致；在判断所述位置信息与所述指定位置信息一致时，获取所述人眼的动作信息；判断所述人眼的动作信息是否与指定动作信息一致；在判断所述人眼的动作信息与所述指定动作信息一致时，控制所述终端执行对应的操作。

结合本发明第一方面，本发明第一方面第一实施方式中，所述人眼的动作信息包括以下至少之一：所述人眼的位置信息与所述指定位置一致的第一持续时间、所述人眼眨眼的次数和/或眨眼的时间间隔。

结合本发明第一方面，本发明第一方面第二实施方式中，所述虹膜检测传感器的数量为两个，两个所述虹膜检测传感分别设置于所述终端屏幕顶端的两侧。

结合本发明第一方面、本发明第一方面第一、二实施方式，本发明第一方面第三实施方式中，控制终端的虹膜检测传感器采集人眼相对于所述终端屏幕的位置信息之后，还包括：控制所述终端的光标随着所述位置信息移动。

结合本发明第一方面第三实施方式,本发明第一方面第四实施方式中，控制终端的虹膜检测传感器采集人眼相对于所述终端屏幕的位置信息之前，还包括；获取所述位置信息与所述光标位置一致的第二持续时间；判断所述第二持续时间是否大于预定阈值；在判断所述第二持续时间大于所述预定阈值时，开启虹膜控制功能。

本发明第二方面，提供了一种终端控制装置，包括：第一控制模块，用于控制终端的虹膜检测传感器采集人眼映射于所述终端屏幕的位置信息；第一判断模块，用于判断所述位置信息是否与指定位置信息一致；获取模块，用于在判断所述位置信息与所述指定位置信息一致时，获取所述人眼的动作信息；第二判断模块，用于判断所述人眼的动作信息是否与指定动作信息一致；第二控制模块，用于在判断所述人眼的动作信息与所述指定动作信息一致时，控制所述终端执行对应的操作。

结合本发明第二方面，本发明第二方面第一实施方式中，所述人眼的动作信息包括以下至少之一：所述人眼的位置信息与所述指定位置一致的第一持续时间、所述人眼眨眼的次数和/或眨眼的时间间隔。

结合本发明第二方面，本发明第二方面第二实施方式中，所述虹膜检测传感器的数量为两个，两个所述虹膜检测传感分别设置于所述终端屏幕顶端的两侧。

本发明第三方面，提供了一种终端，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行上述方法的步骤。

本发明第四方面，提供了一种计算机可读存储介质，其上存储有计算机指令，该指令被处理器执行时实现上述方法的步骤。

本发明实施例技术方案，具有如下优点：

本发明实施例提供了一种终端控制方法、装置、终端及计算机可读存储介质，其中，该方法包括：控制终端的虹膜检测传感器采集人眼映射于该终端屏幕的位置信息，具体地，可以通过终端的一个或者多个虹膜检测传感器采集人眼映射于该终端屏幕的位置信息；判断人眼映射于该终端屏幕的位置信息是否与指定位置信息一致，例如判断人眼映射于终端屏幕的位置信息是否与微信APP的位置一致；在判断人眼映射于终端屏幕的位置信息与该指定位置信息一致时，获取人眼的动作信息；判断人眼的动作信息是否与指定动作信息一致，例如预先规定眨眼一次即为打开微信APP；在判断该人眼的动作信息与该指定动作信息一致时，控制该终端执行对应的操作，例如检测到该人眼的动作信息为眨眼动作即打开微信APP。通过本发明解决了现有技术中使用手指触摸屏幕对终端进行触控操作，导致手指产生疲劳感并不能使双手得到解放、以及使用语音控制终端会受到周围环境的影响，导致无法操控终端的问题，在控制终端过程中，解放出双手的同时提高了控制的准确度。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了本发明实施例中手机的结构图；

图2是根据本发明实施例的终端控制方法的流程图；

图3是根据本发明实施例的移动终端结构示意图；

图4是根据本发明实施例的终端控制装置的结构框图；

图5是本发明实施例提供的移动终端的硬件结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，是本发明的实施例的应用场景示意图。移动终端可以为手机或平板电脑等移动设备，移动终端以手机为例，手机的部分结构框图如图1所示，手机包括射频电路210、存储器220、输入单元230、显示单元240、传感器250、音频电路260、无线模块270、处理器280以及电源290等部分。本领域技术人员可以理解，图1中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

其中RF电路210用于收发信息或通话过程中，信号的接收和发送。存储器220用于存储软件程序以及模块，处理器280通过运行存储在存储器220的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。输入单元230用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。输入单元230可包括触控面板231以及其他输入设备232。其他输入设备232可以包括但不限于物理键盘、功能键、鼠标、操作杆中的一种或几种。显示单元240用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元240可以包括显示面板241。触控面板231可覆盖显示面板241，当触控面板231检测到在其上或附近的触摸操作后，传送给处理器280以确定触摸事件的类型，随后处理器280根据触摸事件的类型在显示面板241上提供相应的视觉输出。

手机还可包括至少一种传感器250，如光传感器、运动传感器以及其他传感器。光传感器可包括环境光传感器及接近传感器，环境传感器可根据环境光线的明暗来调节显示面板241的亮度，接近传感器可在手机移动到耳边时，关闭显示面板241和/或背光。本实施例中光传感器可以设置在手机的正面和背面的壳体上，用于检测用户持握手机时的遮挡区域。此处还可以包括压力传感器，设置在手机的正面或背面壳体上，用于通过检测压力的方式获得用户持握手机时的遮挡区域。此外，手机还可以配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，不再赘述。

音频电路260、扬声器261、传声器262可提供用户与手机之间的音频接口。无线模块270可以是WIFI模块，为用户提供无线的互联网访问服务。

处理器280是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器220内的软件程序和/或模块，以及调用存储在存储器220内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器280可以包括一个或多个处理单元。此外，手机还包括各部件供电的电源290，通过电源管理系统与处理器280逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管未示出，手机还可以包括摄像头、蓝牙模块等，在此不再赘述。

在本实施例中提供了一种终端控制方法，可用于上述的移动终端，如手机、平板电脑等，图2是根据本发明实施例的终端控制方法的流程图，如图2所示，该流程包括如下步骤：

步骤S201，控制终端的虹膜检测传感器采集人眼映射于终端屏幕的位置信息；具体地，可以通过终端的一个虹膜检测传感器采集人眼映射于屏幕的位置信息，为了更精确的获取人眼映射于屏幕的位置信息也可以使用两个虹膜检测传感器进行采集，根据用户使用手机的习惯，用户一般用手掌握住手机的下部，为了避免手挡住虹膜检测传感器，如图3所示，将两个虹膜检测传感分别设置于终端屏幕顶端的两侧。

步骤S202，判断上述位置信息是否与指定位置信息一致；例如在通过虹膜技术操作微信APP时，判断通过虹膜检测传感器采集人眼映射于终端屏幕的位置信息是否与微信APP的位置一致，在一致的情况下，则判断为欲对该微信APP进行一定的操作，从而继续执行步骤S203。

步骤S203，在判断上述位置信息与指定位置信息一致时，获取人眼的动作信息；人眼的动作信息可以是人眼的位置信息与指定位置一致的第一持续时间，也可以是人眼眨眼的次数，还可以是眨眼的时间间隔。

步骤S204，判断人眼的动作信息是否与指定动作信息一致。

步骤S205，在判断人眼的动作信息与该指定动作信息一致时，控制该终端执行对应的操作。例如，当用户眼球移动到需要操作的微信APP的位置之后，需要实现点击一下的微信APP位置屏幕的操作时，人眼快速连续眨三次，实现点击微信APP一次。当用户需要按住微信APP位置时，通过快速眨眼两次，停顿一下(超过一秒小于三秒)，然后在连续快速眨眼两次，实现按住该微信APP。当用户翻页时，可以将眼睛从中心位置移动到相应的翻页箭头位置，当移动到箭头上时，只需要眨眼按照箭头，就可以实现翻页功能。

通过上述步骤，采用虹膜检测技术，根据人眼映射于终端屏幕的位置信息和人眼的动作信息实现对屏幕进行触控的技术，解决了现有技术中使用手指触摸屏幕对终端进行触控操作，导致手指产生疲劳感并不能使双手得到解放、以及使用语音控制终端会受到周围环境的影响，导致无法操控终端的问题，上述全新的人机交互方式，通过虹膜技术检测人眼运动过程，通过精准的算法，实现和手指触控屏幕的相同操作，彻底解放双手，实现了根据轻松、便捷的人机交互。

为了明示人眼相对于该终端屏幕的位置信息，在一个可选实施例中，控制终端的虹膜检测传感器采集人眼相对于该终端屏幕的位置信息之后，控制该终端的光标随着该位置信息移动。即，当用户开启虹膜传感器控制屏幕功能后，双眼从十字光标的位置向屏幕的其他位置移动，十字光标会移动到眼球所看的屏幕位置。

控制终端的虹膜检测传感器采集人眼相对于该终端屏幕的位置信息之前，当打开手机虹膜技术控制屏幕操作时，手机屏幕上会出现一个十字光标，为了让虹膜传感器可以准确定位人眼球的运动，每次使用虹膜传感器控制屏幕时，获取该位置信息与光标位置一致的第二持续时间，判断该第二持续时间是否大于预定阈值，该预定阈值可以灵活设置，例如可以是5秒钟，在判断第二持续时间大于该预定阈值时，开启虹膜控制功能。即，需要使用者一直盯住屏幕中心位置的十字光标超过5秒钟，也就是说每次使用虹膜传感器控制屏幕的开启方式是，双眼盯住手机屏幕中心的十字光标超过5秒钟。为了实现精确的控制，每次实现一个按压、按住或者眼睛离开手机屏幕时，十字光标都会恢复到屏幕中心位置，使用人员需要使用虹膜控制手机时，需要眼球盯住十字光标重新从中心位置进行操作。

在本实施例中还提供了一种终端控制装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图4是根据本发明实施例的终端控制装置的结构框图，如图4所示，包括：第一控制模块41，用于控制终端的虹膜检测传感器采集人眼映射于该终端屏幕的位置信息；第一判断模块42，用于判断该位置信息是否与指定位置信息一致；获取模块43，用于在判断该位置信息与该指定位置信息一致时，获取该人眼的动作信息；第二判断模块44，用于判断该人眼的动作信息是否与指定动作信息一致；第二控制模块45，用于在判断该人眼的动作信息与该指定动作信息一致时，控制该终端执行对应的操作。

可选地，该人眼的动作信息包括以下至少之一：该人眼的位置信息与该指定位置一致的第一持续时间、该人眼眨眼的次数和/或眨眼的时间间隔。

可选地，该虹膜检测传感器的数量为两个，两个该虹膜检测传感分别设置于该终端屏幕顶端的两侧。

本实施例中的终端控制装置是以功能单元的形式来呈现，这里的单元是指ASIC电路，执行一个或多个软件或固定程序的处理器和存储器，和/或其他可以提供上述功能的器件。

上述各个模块的更进一步的功能描述与上述对应实施例相同，在此不再赘述。

请参阅图5，图5是本发明实施例提供的移动终端的硬件结构示意图，如图所示，该终端可以包括：至少一个处理器501，例如CPU(Central Processing Unit，中央处理器)，至少一个通信接口503，存储器504，至少一个通信总线502。其中，通信总线502用于实现这些组件之间的连接通信。其中，通信接口503可以包括显示屏(Display)、键盘(Keyboard)，可选通信接口503还可以包括标准的有线接口、无线接口。存储器504可以是高速RAM存储器(Ramdom Access Memory，易挥发性随机存取存储器)，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器504可选的还可以是至少一个位于远离前述处理器501的存储装置。其中处理器501可以结合图4所描述的装置，存储器504中存储一组程序代码，且处理器501调用存储器504中存储的程序代码，以用于执行一种终端控制方法，即用于执行以下操作：

控制终端的虹膜检测传感器采集人眼映射于所述终端屏幕的位置信息；

判断所述位置信息是否与指定位置信息一致；

在判断所述位置信息与所述指定位置信息一致时，获取所述人眼的动作信息；

判断所述人眼的动作信息是否与指定动作信息一致；

在判断所述人眼的动作信息与所述指定动作信息一致时，控制所述终端执行对应的操作。

其中，通信总线502可以是外设部件互连标准(peripheral componentinterconnect，简称PCI)总线或扩展工业标准结构(extended industry standardarchitecture，简称EISA)总线等。通信总线502可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

其中，存储器504可以包括易失性存储器(英文：volatile memory)，例如随机存取存储器(英文：random-access memory，缩写：RAM)；存储器也可以包括非易失性存储器(英文：non-volatile memory)，例如快闪存储器(英文：flash memory)，硬盘(英文：hard diskdrive，缩写：HDD)或固态硬盘(英文：solid-state drive，缩写：SSD)；存储器504还可以包括上述种类的存储器的组合。

其中，处理器501可以是中央处理器(英文：central processing unit，缩写：CPU)，网络处理器(英文：network processor，缩写：NP)或者CPU和NP的组合。

其中，处理器501还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(英文：application-specific integrated circuit，缩写：ASIC)，可编程逻辑器件(英文：programmable logic device，缩写：PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(英文：complex programmable logic device，缩写：CPLD)，现场可编程逻辑门阵列(英文：field-programmable gate array，缩写：FPGA)，通用阵列逻辑(英文：generic arraylogic,缩写：GAL)或其任意组合。

可选地，存储器504还用于存储程序指令。处理器501可以调用程序指令，实现如本申请图2实施例中所示的终端控制方法。

本发明实施例还提供了一种非暂态计算机存储介质，所述计算机存储介质存储有计算机可执行指令，该计算机可执行指令可执行上述任意方法实施例中的终端控制的处理方法。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)、随机存储记忆体(Random Access Memory，RAM)、快闪存储器(Flash Memory)、硬盘(Hard DiskDrive，缩写：HDD)或固态硬盘(Solid-State Drive，SSD)等；所述存储介质还可以包括上述种类的存储器的组合。

虽然结合附图描述了本发明的实施例，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (10)

1.一种终端控制方法，其特征在于，包括：

控制终端的虹膜检测传感器采集人眼映射于所述终端屏幕的位置信息；

判断所述位置信息是否与指定位置信息一致；

在判断所述位置信息与所述指定位置信息一致时，获取所述人眼的动作信息；

判断所述人眼的动作信息是否与指定动作信息一致；

在判断所述人眼的动作信息与所述指定动作信息一致时，控制所述终端执行对应的操作。

2.根据权利要求1所述的方法，其特征在于，所述人眼的动作信息包括以下至少之一：

所述人眼的位置信息与所述指定位置一致的第一持续时间、所述人眼眨眼的次数和/或眨眼的时间间隔。

3.根据权利要求1所述的方法，其特征在于，所述虹膜检测传感器的数量为两个，两个所述虹膜检测传感分别设置于所述终端屏幕顶端的两侧。

4.根据权利要求1至3中任一所述的方法，其特征在于，控制终端的虹膜检测传感器采集人眼相对于所述终端屏幕的位置信息之后，还包括：

控制所述终端的光标随着所述位置信息移动。

5.根据权利要求4所述的方法，其特征在于，控制终端的虹膜检测传感器采集人眼相对于所述终端屏幕的位置信息之前，还包括；

获取所述位置信息与所述光标位置一致的第二持续时间；

判断所述第二持续时间是否大于预定阈值；

在判断所述第二持续时间大于所述预定阈值时，开启虹膜控制功能。

6.一种终端控制装置，其特征在于，包括：

第一控制模块，用于控制终端的虹膜检测传感器采集人眼映射于所述终端屏幕的位置信息；

第一判断模块，用于判断所述位置信息是否与指定位置信息一致；

获取模块，用于在判断所述位置信息与所述指定位置信息一致时，获取所述人眼的动作信息；

第二判断模块，用于判断所述人眼的动作信息是否与指定动作信息一致；

第二控制模块，用于在判断所述人眼的动作信息与所述指定动作信息一致时，控制所述终端执行对应的操作。

7.根据权利要求6所述的装置，其特征在于，所述人眼的动作信息包括以下至少之一：

所述人眼的位置信息与所述指定位置一致的第一持续时间、所述人眼眨眼的次数和/或眨眼的时间间隔。

8.根据权利要求6所述的装置，其特征在于，所述虹膜检测传感器的数量为两个，两个所述虹膜检测传感分别设置于所述终端屏幕顶端的两侧。

9.一种终端，其特征在于，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行权利要求1至5中任一所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机指令，其特征在于，该指令被处理器执行时实现权利要求1至5中任一所述方法的步骤。