CN106527705A - 一种实现操作的方法和装置 - Google Patents

一种实现操作的方法和装置 Download PDF

Info

Publication number
CN106527705A
CN106527705A CN201610963819.7A CN201610963819A CN106527705A CN 106527705 A CN106527705 A CN 106527705A CN 201610963819 A CN201610963819 A CN 201610963819A CN 106527705 A CN106527705 A CN 106527705A
Authority
CN
China
Prior art keywords
motion
eyeball
mobile terminal
preset
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610963819.7A
Other languages
English (en)
Inventor
张圣杰
陈鹏飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201610963819.7A priority Critical patent/CN106527705A/zh
Publication of CN106527705A publication Critical patent/CN106527705A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Abstract

一种实现操作的方法和装置,包括:获取眼球的运动信息;根据眼球的运动信息对移动终端进行预设操作。通过本发明实施例的方案,通过眼球的运动信息来实现对移动终端的操作,从而简化了操作,提高了用户体验。

Description

一种实现操作的方法和装置
技术领域
本文涉及但不限于终端技术,尤指一种实现操作的方法和装置。
背景技术
目前对移动终端进行相关操作时,往往需要其中一只手拿着移动终端,另一只手进行相应的操作,这样用户操作起来比较麻烦,用户体验度不高。
发明内容
本发明实施例提出了一种实现操作的方法和装置,能够简化操作,从而提高用户体验。
本发明实施例提出了一种实现操作的装置,包括:
获取模块,用于获取眼球的运动信息;
控制模块,用于根据眼球的运动信息对移动终端进行预设操作。
可选的,所述获取模块具体用于:
获取所述眼球的运动方向;
所述控制模块具体用于:
根据所述眼球的运动方向对移动终端进行预设操作。
可选的,所述控制模块具体用于:
判断出所述眼球的运动方向为第一运动方向,将所述移动终端的屏幕亮度调高,判断出所述眼球的运动方向为第二运动方向,将所述移动终端的屏幕亮度调低;和/或,
判断出所述眼球的运动方向为第三运动方向,将所述移动终端的音量调高,判断出所述眼球的运动方向为第四运动方向,将所述移动终端的音量调高。
可选的,所述获取模块具体用于:
获取所述眼球的运动方向和运动距离;
所述控制模块具体用于:
根据所述眼球的运动距离确定操作幅度,根据所述眼球的运动方向对所述移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
可选的,所述获取模块具体用于:
当判断出眼球控制功能已开启时,获取所述眼球的运动信息。
本发明实施例还提出了一种实现操作的方法,包括:
获取眼球的运动信息;
根据眼球的运动信息对移动终端进行预设操作。
可选的,所述获取眼球的运动信息包括:
获取所述眼球的运动方向;
所述根据眼球的运动信息对移动终端进行预设操作包括:
根据所述眼球的运动方向对移动终端进行预设操作。
可选的,所述根据眼球的运动方向对移动终端进行预设操作包括:
判断出所述眼球的运动方向为第一运动方向,将所述移动终端的屏幕亮度调高,判断出所述眼球的运动方向为第二运动方向,将所述移动终端的屏幕亮度调低;和/或,
判断出所述眼球的运动方向为第三运动方向,将所述移动终端的音量调高,判断出所述眼球的运动方向为第四运动方向,将所述移动终端的音量调高。
可选的,所述获取眼球的运动信息包括:
获取所述眼球的运动方向和运动距离;
所述根据眼球的运动信息对移动终端进行预设操作包括:
根据所述眼球的运动距离确定操作幅度,根据所述眼球的运动方向对所述移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
可选的,该方法还包括:
当判断出眼球控制功能已开启时,继续执行所述获取眼球的运动信息的步骤。
与相关技术相比,本发明实施例包括:获取眼球的运动信息;根据眼球的运动信息对移动终端进行预设操作。通过本发明实施例的方案,通过眼球的运动信息来实现对移动终端的操作,从而简化了操作,提高了用户体验。
附图说明
下面对本发明实施例中的附图进行说明,实施例中的附图是用于对本发明的进一步理解,与说明书一起用于解释本发明,并不构成对本发明保护范围的限制。
图1为实现本发明各个实施例的移动终端的硬件结构示意图;
图2为如图1所示的移动终端的无线通信系统示意图;
图3为本发明第一实施例实现操作的方法的流程图;
图4为本发明第一实施例确定预设点的运动方向的示意图一;
图5为本发明第一实施例确定预设点的运动方向的示意图二;
图6为本发明第一实施例确定预设点的运动方向的示意图三;
图7为本发明第一实施例显示移动终端进行预设操作后的结果的示意图;
图8为本发明第二实施例实现操作的装置的结构组成示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为了便于本领域技术人员的理解,下面结合附图对本发明作进一步的描述,并不能用来限制本发明的保护范围。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的各种方式可以相互组合。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,"模块"与"部件"可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1为实现本发明各个实施例的移动终端的硬件结构示意。
移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信系统或网络之间的无线电通信。例如,无线通信单元可以包括移动通信模块112。
移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121,相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送,可以根据移动终端的构造提供两个或更多相机1210。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。
接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为"识别装置")可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外,当移动终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。
至此,己经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何类型的移动终端,并且不限于滑动型移动终端。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。
这样的通信系统可以使用不同的空中接口和/或物理层。例如,由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地,长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信系统,但是这样的教导同样适用于其它类型的系统。
参考图2,CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的系统可以包括多个BSC2750。
每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。
分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子系统(BTS)或者其它等效术语。在这样的情况下,术语"基站"可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为"蜂窝站"。或者,特定BS270的各分区可以被称为多个蜂窝站。
如图2中所示,广播发射器(BT)295将广播信号发送给在系统内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位系统(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。
在图2中,描绘了多个卫星300,但是理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪移动终端的位置的其它技术。另外,至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。
作为无线通信系统的一个典型操作,BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。
基于上述移动终端硬件结构以及通信系统,提出本发明方法各个实施例。
如图3所示,本发明第一实施例提出一种实现操作的方法,包括:
步骤300、获取眼球的运动信息。包括:
获取眼球的运动方向;或者,获取眼球的运动方向和运动距离。
可选的,获取眼球的运动方向包括:
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的第一张图像和第N张图像中提取眼球;分别确定眼球的预设点在第一张图像和第N张图像中的位置;根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动方向,将预设点的运动方向作为眼球的运动方向。
或者,
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的每一张图像提取眼球;分别确定眼球的预设点在每一张图像中的位置;根据眼球的预设点在每一图像中的位置确定预设点的运动方向,将预设点的运动方向作为眼球的运动方向。
其中,眼球的预设点可以是眼球上的任意一点,例如,眼球的中心点,或者眼球轮廓上的任意一点等;也可以是眼球内影像上的任意一点,例如,眼球内的影像中心点等。
当眼球的预设点为眼球内影像上的任意一点时,从图像中提取眼球后,还需要从图像的眼球中提取眼球内的影像,具体如何从图像中提取眼球和眼球内的影像可以采用本领域技术人员的熟知技术实现,并不用于限定本发明实施例的保护范围,这里不再赘述。
其中,预设点在图像中的位置是指预设点位于图像中的第几行第几列,可以将图像的行作为预设点的横坐标,将图像的列作为预设点的纵坐标来确定预设点的运动方向。
例如,如图4所示,当|XN-X1|-|YN-Y1|≥M1时,确定预设点的运动方向为向左或向右;当XN>X1时,确定预设点的运动方向为向右;当XN<X1时,确定预设点的运动方向为向左;
当|YN-Y1|-|XN-X1|≥M2时,确定预设点的运动方向为向上或向下;当YN>Y1时,确定预设点的运动方向为向下;当YN<Y1时,确定预设点的运动方向为向上;
其中,XN为预设点在第N张图像的行,X1为预设点(如图4中的预设点1)在第一张图像的行,YN为预设点(如图4中的预设点N)在第N张图像的列,Y1为预设点在第一张图像的列,M1为第一预设阈值,M2为第二预设阈值。
对于第二种方法,如图5所示,当时,确定预设点的运动方向为向左或向右;当XN>X1时,确定预设点的运动方向为向右;当XN<X1时,确定预设点的运动方向为向左;
时,确定预设点的运动方向为向左或向右;确定预设点的运动方向为向上或向下;当YN>Y1时,确定预设点的运动方向为向下;当YN<Y1时,确定预设点的运动方向为向上;
其中,其中,Xi+1为预设点在第(i+1)张图像的行,Xi为预设点在第i张图像的行,Yi+1为预设点在第(i+1)张图像的列,Yi为预设点在第i张图像的列,M3为第三预设阈值,M4为第四预设阈值。
当然,除了上述确定预设点的运动方向的方法,还可以采用其他的方法来确定,具体的确定条件可以由用户自行设定,本发明实施例对此不作限定。
当眼球的运动方向为顺时针方向或逆时针方向时,只能采用第二种方法来确定眼球的运动方向。此时,在判断运动方向为顺时针方向还是逆时针方向时,可以根据行和列的变化趋势来判断。
如图6所示,如果预设点的列先变大后变小,且预设点的行先变小后变大再变小;或者,预设点的列先变大后变小再变大,且预设点的行先变大后变小;或者,预设点的列先变小后变大,且预设点的行先变大后变小再变大;或者,预设点的列先变小后变大再变小,且预设点的行先变小后变大,等等,则是顺时针方向;
如果预设点的列先变大后变小,且预设点的行先变大后变小再变大;或者,预设点的列先变大后变小再变大,且预设点的行先变小再变大;或者,预设点的列先变小后变大,且预设点的行先变小后变大再变小;或者,预设点的列先变小后变大再变小,且预设点的行先变大后变小,等等,则是逆时针方向。当然,不限于上述的判断方法,可以根据预设点的运动规律来设置判断方法,本发明实施例对此不作限定。
可选的,获取眼球的运动方向和运动距离包括:
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的第一张图像和第N张图像中提取眼球;分别确定眼球的预设点在第一张图像和第N张图像中的位置;根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动方向和运动距离,将预设点的运动方向作为眼球的运动方向,将预设点的运动距离作为眼球的运动距离。
或者,
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的每一张图像提取眼球;分别确定眼球的预设点在每一张图像中的位置;根据眼球的预设点在每一图像中的位置确定预设点的运动方向和运动距离,将预设点的运动方向作为眼球的运动方向,将预设点的运动距离作为眼球的运动距离。
其中,根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动距离包括:
按照公式计算预设点的运动距离L。
其中,根据眼球的预设点在每一图像中的位置确定预设点的运动距离包括:
按照公式计算预设点的运动距离L。
步骤301、根据眼球的运动信息对移动终端进行预设操作。包括:
根据眼球的运动方向对移动终端进行预设操作;或者,
根据眼球的运动距离确定操作幅度,根据眼球的运动方向对移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
可选的,根据眼球的运动方向对移动终端进行预设操作包括:
判断出眼球的运动方向为第一运动方向,将移动终端的屏幕亮度调高,判断出眼球的运动方向为第二运动方向,将移动终端的屏幕亮度调低;和/或,
判断出眼球的运动方向为第三运动方向,将移动终端的音量调高,判断出眼球的运动方向为第四运动方向,将移动终端的音量调高。
其中,第一运动方向、或第二运动方向、或第三运动方向、或第四运动方向可以是以下的任意一个:
向左、向右、向上、向下、顺时针方向、逆时针方向。
当只通过眼球的运动方向来控制屏幕的亮度时,第一运动方向和第二运动方向有6×5=30种取法,包括:
第一运动方向为向左、第二运动方向为向右;或者,第一运动方向为向右、第二运动方向为向左;或者,第一运动方向为向上、第二运动方向为向下;或者,第一运动方向为向下、第二运动方向为向上;或者,第一运动方向为顺时针方向、第二运动方向为逆时针方向;或者,第一运动方向为逆时针方向、第二运动方向为顺时针方向,等等。也就是说,只要第一运动方向和第二运动方向不同,第一运动方向和第二运动方向可以取上述六种运动方向中的任意一种。
当只通过眼球的运动方向来控制音量时,第三运动方向和第四运动方向页有6×5=30种取法,包括:
第三运动方向为向左、第四运动方向为向右;或者,第三运动方向为向右、第四运动方向为向左;或者,第三运动方向为向上、第四运动方向为向下;或者,第三运动方向为向下、第四运动方向为向上;或者,第三运动方向为顺时针方向、第四运动方向为逆时针方向;或者,第三运动方向为逆时针方向、第四运动方向为顺时针方向,等等。也就是说,只要第三运动方向和第四运动方向不同,第三运动方向和第四运动方向可以取上述六种运动方向中的任意一种。
当通过眼球的运动方向来控制屏幕的亮度和音量时,第一运动方向、第二运动方向、第三运动方向和第四运动方向有6×5×4×3=360种取法,包括:
第一运动方向为向左、第二运动方向为向右、第三运动方向为向上、第四运动方向为向下;或者,第一运动方向为向左、第二运动方向为向右、第三运动方向为向下、第四运动方向为向上;或者,第一运动方向为向右、第二运动方向为向左、第三运动方向为向上、第四运动方向为向下;或者,第一运动方向为向左、第二运动方向为向右、第三运动方向为顺时针、第四运动方向为逆时针方向;或者,第一运动方向为顺时针方向、第二运动方向为逆时针方向、第三运动方向为向上、第四运动方向为向下;等等。也就是说,只要第一运动方向、第二运动方向、第三运动方向和第四运动方向不同,第一运动方向、第二运动方向、第三运动方向和第四运动方向可以取上述六种运动方向中的任意一种。
可选的,根据眼球的运动距离确定操作幅度包括:
根据眼球的运动距离和操作幅度之间的预设函数关系确定操作幅度。
其中,预设函数关系可以由用户自行设置,例如,操作幅度为眼球的运动距离的A倍或者A分之一;或者,操作幅度为眼球的运动距离加上或减去一个预设值,等等,本发明实施例对此不作限定。
当只通过眼球的运动方向来进行预设操作时,预设操作的幅度可以设置为固定值。
可选的,该方法还包括:
显示进行预设操作后的结果,如图7所示,可以在屏幕上显示调整后音量的大小或屏幕的亮度的大小等。
可选的,该方法还包括:
当判断出眼球控制功能已开启时,继续执行获取眼球的运动信息的步骤。
可选的,该方法还包括:
当判断出眼球控制功能已关闭时,结束本流程。
或者,当判断出眼球控制功能已关闭时,如果检测到眼球处于运动状态,则提示用户是否开启眼球控制功能。
上述方法可以通过移动终端来实现,也就是说,由移动终端来获取眼球的运动信息,确定进行的预设操作,并进行预设操作;上述方法也可以通过与移动终端不同的设备来实现,即由其他设备来获取眼球的运动信息,根据眼球的运动信息确定对移动终端进行的预设操作,将确定出的预设操作发送给移动终端执行,其他设备如何获取眼球的运动信息,并确定对移动终端进行的预设操作与上述过程类似,这里不再赘述。
通过本发明实施例的方案,通过眼球的运动信息来实现对移动终端的操作,从而简化了操作,提高了用户体验。
参见图8,本发明第二实施例还提出了一种实现操作的装置,包括:
获取模块,用于获取眼球的运动信息;
控制模块,用于根据眼球的运动信息对移动终端进行预设操作。
其中,获取模块可以通过图1的照相机121和控制器180实现,控制模块可以设置在图1的控制器180中。
可选的,获取模块具体用于:
获取眼球的运动方向;
控制模块具体用于:
根据眼球的运动方向对移动终端进行预设操作。
可选的,获取模块具体用于:
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的第一张图像和第N张图像中提取眼球;分别确定眼球的预设点在第一张图像和第N张图像中的位置;根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动方向,将预设点的运动方向作为眼球的运动方向。
或者,
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的每一张图像提取眼球;分别确定眼球的预设点在每一张图像中的位置;根据眼球的预设点在每一图像中的位置确定预设点的运动方向,将预设点的运动方向作为眼球的运动方向。
其中,眼球的预设点可以是眼球上的任意一点,例如,眼球的中心点,或者眼球轮廓上的任意一点等;也可以是眼球内影像上的任意一点,例如,眼球内的影像中心点等。
当眼球的预设点为眼球内影像上的任意一点时,从图像中提取眼球后,还需要从图像的眼球中提取眼球内的影像,具体如何从图像中提取眼球和眼球内的影像可以采用本领域技术人员的熟知技术实现,并不用于限定本发明实施例的保护范围,这里不再赘述。
其中,预设点在图像中的位置是指预设点位于图像中的第几行第几列,可以将图像的行作为预设点的横坐标,将图像的列作为预设点的纵坐标来确定预设点的运动方向。
例如,如图4所示,当|XN-X1|-|YN-Y1|≥M1时,确定预设点的运动方向为向左或向右;当XN>X1时,确定预设点的运动方向为向右;当XN<X1时,确定预设点的运动方向为向左;
当|YN-Y1|-|XN-X1|≥M2时,确定预设点的运动方向为向上或向下;当YN>Y1时,确定预设点的运动方向为向下;当YN<Y1时,确定预设点的运动方向为向上;
其中,XN为预设点在第N张图像的行,X1为预设点(如图4中的预设点1)在第一张图像的行,YN为预设点(如图4中的预设点N)在第N张图像的列,Y1为预设点在第一张图像的列,M1为第一预设阈值,M2为第二预设阈值。
对于第二种方法,如图5所示,当时,确定预设点的运动方向为向左或向右;当XN>X1时,确定预设点的运动方向为向右;当XN<X1时,确定预设点的运动方向为向左;
时,确定预设点的运动方向为向左或向右;确定预设点的运动方向为向上或向下;当YN>Y1时,确定预设点的运动方向为向下;当YN<Y1时,确定预设点的运动方向为向上;
其中,其中,Xi+1为预设点在第(i+1)张图像的行,Xi为预设点在第i张图像的行,Yi+1为预设点在第(i+1)张图像的列,Yi为预设点在第i张图像的列,M3为第三预设阈值,M4为第四预设阈值。
当然,除了上述确定预设点的运动方向的方法,还可以采用其他的方法来确定,具体的确定条件可以由用户自行设定,本发明实施例对此不作限定。
当眼球的运动方向为顺时针方向或逆时针方向时,只能采用第二种方法来确定眼球的运动方向。此时,在判断运动方向为顺时针方向还是逆时针方向时,可以根据行和列的变化趋势来判断。
如果预设点的列先变大后变小,且预设点的行先变小后变大再变小;或者,预设点的列先变大后变小再变大,且预设点的行先变大后变小;或者,预设点的列先变小后变大,且预设点的行先变大后变小再变大;或者,预设点的列先变小后变大再变小,且预设点的行先变小后变大,等等,则是顺时针方向;
如果预设点的列先变大后变小,且预设点的行先变大后变小再变大;或者,预设点的列先变大后变小再变大,且预设点的行先变小再变大;或者,预设点的列先变小后变大,且预设点的行先变小后变大再变小;或者,预设点的列先变小后变大再变小,且预设点的行先变大后变小,等等,则是逆时针方向。当然,不限于上述的判断方法,可以根据预设点的运动规律来设置判断方法,本发明实施例对此不作限定。
可选的,控制模块具体用于:
判断出眼球的运动方向为第一运动方向,将移动终端的屏幕亮度调高,判断出眼球的运动方向为第二运动方向,将移动终端的屏幕亮度调低;和/或,
判断出眼球的运动方向为第三运动方向,将移动终端的音量调高,判断出眼球的运动方向为第四运动方向,将移动终端的音量调高。
其中,第一运动方向、或第二运动方向、或第三运动方向、或第四运动方向可以是以下的任意一个:
向左、向右、向上、向下、顺时针方向、逆时针方向。
当只通过眼球的运动方向来控制屏幕的亮度时,第一运动方向和第二运动方向有6×5=30种取法,包括:
第一运动方向为向左、第二运动方向为向右;或者,第一运动方向为向右、第二运动方向为向左;或者,第一运动方向为向上、第二运动方向为向下;或者,第一运动方向为向下、第二运动方向为向上;或者,第一运动方向为顺时针方向、第二运动方向为逆时针方向;或者,第一运动方向为逆时针方向、第二运动方向为顺时针方向,等等。也就是说,只要第一运动方向和第二运动方向不同,第一运动方向和第二运动方向可以取上述六种运动方向中的任意一种。
当只通过眼球的运动方向来控制音量时,第三运动方向和第四运动方向页有6×5=30种取法,包括:
第三运动方向为向左、第四运动方向为向右;或者,第三运动方向为向右、第四运动方向为向左;或者,第三运动方向为向上、第四运动方向为向下;或者,第三运动方向为向下、第四运动方向为向上;或者,第三运动方向为顺时针方向、第四运动方向为逆时针方向;或者,第三运动方向为逆时针方向、第四运动方向为顺时针方向,等等。也就是说,只要第三运动方向和第四运动方向不同,第三运动方向和第四运动方向可以取上述六种运动方向中的任意一种。
当通过眼球的运动方向来控制屏幕的亮度和音量时,第一运动方向、第二运动方向、第三运动方向和第四运动方向有6×5×4×3=360种取法,包括:
第一运动方向为向左、第二运动方向为向右、第三运动方向为向上、第四运动方向为向下;或者,第一运动方向为向左、第二运动方向为向右、第三运动方向为向下、第四运动方向为向上;或者,第一运动方向为向右、第二运动方向为向左、第三运动方向为向上、第四运动方向为向下;或者,第一运动方向为向左、第二运动方向为向右、第三运动方向为顺时针、第四运动方向为逆时针方向;或者,第一运动方向为顺时针方向、第二运动方向为逆时针方向、第三运动方向为向上、第四运动方向为向下;等等。也就是说,只要第一运动方向、第二运动方向、第三运动方向和第四运动方向不同,第一运动方向、第二运动方向、第三运动方向和第四运动方向可以取上述六种运动方向中的任意一种。
可选的,获取模块具体用于:
获取眼球的运动方向和运动距离;
控制模块具体用于:
根据眼球的运动距离确定操作幅度,根据眼球的运动方向对移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
可选的,获取模块具体用于:
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的第一张图像和第N张图像中提取眼球;分别确定眼球的预设点在第一张图像和第N张图像中的位置;根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动方向和运动距离,将预设点的运动方向作为眼球的运动方向,将预设点的运动距离作为眼球的运动距离。
或者,
在预设时间内连续获取N张包括人眼的图像;其中,N为大于或等于2的整数;分别从获得的每一张图像提取眼球;分别确定眼球的预设点在每一张图像中的位置;根据眼球的预设点在每一图像中的位置确定预设点的运动方向和运动距离,将预设点的运动方向作为眼球的运动方向,将预设点的运动距离作为眼球的运动距离。
其中,获取模块具体用于采用以下方式实现根据眼球的预设点在第一张图像和第N张图像中的位置确定预设点的运动距离:
按照公式计算预设点的运动距离L。
其中,获取模块具体用于采用以下方式实现根据眼球的预设点在每一图像中的位置确定预设点的运动距离:
按照公式计算预设点的运动距离L。
可选的,控制模块具体用于采用以下方式实现根据眼球的运动距离确定操作幅度:
根据眼球的运动距离和操作幅度之间的预设函数关系确定操作幅度。
其中,预设函数关系可以由用户自行设置,例如,操作幅度为眼球的运动距离的A倍或者A分之一;或者,操作幅度为眼球的运动距离加上或减去一个预设值,等等,本发明实施例对此不作限定。
当只通过眼球的运动方向来进行预设操作时,预设操作的幅度可以设置为固定值。
可选的,还包括:
显示模块,用于显示进行预设操作后的结果,如图7所示,可以在屏幕上显示调整后音量的大小或屏幕的亮度的大小等。
其中,显示模块可以通过图1的显示单元151和控制器180来实现。
可选的,获取模块具体用于:
当判断出眼球控制功能已开启时,获取眼球的运动信息。
可选的,获取模块还用于:
当判断出眼球控制功能已关闭时,结束本流程。
或者,当判断出眼球控制功能已关闭时,如果检测到眼球处于运动状态,则提示用户是否开启眼球控制功能。
上述装置可以设置在移动终端中,也可以设置在与移动终端不同的设备中。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种实现操作的装置,其特征在于,包括:
获取模块,用于获取眼球的运动信息;
控制模块,用于根据眼球的运动信息对移动终端进行预设操作。
2.根据权利要求1所述的装置,其特征在于,所述获取模块具体用于:
获取所述眼球的运动方向;
所述控制模块具体用于:
根据所述眼球的运动方向对移动终端进行预设操作。
3.根据权利要求2所述的装置,其特征在于,所述控制模块具体用于:
判断出所述眼球的运动方向为第一运动方向,将所述移动终端的屏幕亮度调高,判断出所述眼球的运动方向为第二运动方向,将所述移动终端的屏幕亮度调低;和/或,
判断出所述眼球的运动方向为第三运动方向,将所述移动终端的音量调高,判断出所述眼球的运动方向为第四运动方向,将所述移动终端的音量调高。
4.根据权利要求1所述的装置,其特征在于,所述获取模块具体用于:
获取所述眼球的运动方向和运动距离;
所述控制模块具体用于:
根据所述眼球的运动距离确定操作幅度,根据所述眼球的运动方向对所述移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
5.根据权利要求1所述的装置,其特征在于,所述获取模块具体用于:
当判断出眼球控制功能已开启时,获取所述眼球的运动信息。
6.一种实现操作的方法,其特征在于,包括:
获取眼球的运动信息;
根据眼球的运动信息对移动终端进行预设操作。
7.根据权利要求6所述的方法,其特征在于,所述获取眼球的运动信息包括:
获取所述眼球的运动方向;
所述根据眼球的运动信息对移动终端进行预设操作包括:
根据所述眼球的运动方向对移动终端进行预设操作。
8.根据权利要求7所述的方法,其特征在于,所述根据眼球的运动方向对移动终端进行预设操作包括:
判断出所述眼球的运动方向为第一运动方向,将所述移动终端的屏幕亮度调高,判断出所述眼球的运动方向为第二运动方向,将所述移动终端的屏幕亮度调低;和/或,
判断出所述眼球的运动方向为第三运动方向,将所述移动终端的音量调高,判断出所述眼球的运动方向为第四运动方向,将所述移动终端的音量调高。
9.根据权利要求6所述的方法,其特征在于,所述获取眼球的运动信息包括:
获取所述眼球的运动方向和运动距离;
所述根据眼球的运动信息对移动终端进行预设操作包括:
根据所述眼球的运动距离确定操作幅度,根据所述眼球的运动方向对所述移动终端进行预设操作;其中,预设操作的幅度为确定出的操作幅度。
10.根据权利要求6所述的方法,其特征在于,该方法还包括:
当判断出眼球控制功能已开启时,继续执行所述获取眼球的运动信息的步骤。
CN201610963819.7A 2016-10-28 2016-10-28 一种实现操作的方法和装置 Pending CN106527705A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610963819.7A CN106527705A (zh) 2016-10-28 2016-10-28 一种实现操作的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610963819.7A CN106527705A (zh) 2016-10-28 2016-10-28 一种实现操作的方法和装置

Publications (1)

Publication Number Publication Date
CN106527705A true CN106527705A (zh) 2017-03-22

Family

ID=58326955

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610963819.7A Pending CN106527705A (zh) 2016-10-28 2016-10-28 一种实现操作的方法和装置

Country Status (1)

Country Link
CN (1) CN106527705A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019033567A1 (zh) * 2017-08-17 2019-02-21 平安科技(深圳)有限公司 眼球动作捕捉方法、装置及存储介质
CN110275613A (zh) * 2019-05-29 2019-09-24 Oppo广东移动通信有限公司 屏幕显示处理方法、装置、电子设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103176607A (zh) * 2013-04-16 2013-06-26 重庆市科学技术研究院 一种眼控鼠标实现方法及系统
CN103376891A (zh) * 2012-04-23 2013-10-30 凹凸电子(武汉)有限公司 多媒体系统,显示装置的控制方法及控制器
CN103631365A (zh) * 2012-08-22 2014-03-12 中国移动通信集团公司 一种终端输入控制方法及装置
CN104216508A (zh) * 2013-05-31 2014-12-17 中国电信股份有限公司 通过眼动跟踪技术进行功能键操作的方法和装置
CN104731340A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 光标位置确定方法及终端设备
CN105825837A (zh) * 2016-03-28 2016-08-03 乐视控股(北京)有限公司 屏幕亮度调节方法、设备及包含该设备的显示设备
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术(北京)有限公司 一种根据眼部动作对终端进行控制的方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103376891A (zh) * 2012-04-23 2013-10-30 凹凸电子(武汉)有限公司 多媒体系统,显示装置的控制方法及控制器
CN103631365A (zh) * 2012-08-22 2014-03-12 中国移动通信集团公司 一种终端输入控制方法及装置
CN103176607A (zh) * 2013-04-16 2013-06-26 重庆市科学技术研究院 一种眼控鼠标实现方法及系统
CN104216508A (zh) * 2013-05-31 2014-12-17 中国电信股份有限公司 通过眼动跟踪技术进行功能键操作的方法和装置
CN104731340A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 光标位置确定方法及终端设备
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术(北京)有限公司 一种根据眼部动作对终端进行控制的方法及装置
CN105825837A (zh) * 2016-03-28 2016-08-03 乐视控股(北京)有限公司 屏幕亮度调节方法、设备及包含该设备的显示设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019033567A1 (zh) * 2017-08-17 2019-02-21 平安科技(深圳)有限公司 眼球动作捕捉方法、装置及存储介质
US10650234B2 (en) 2017-08-17 2020-05-12 Ping An Technology (Shenzhen) Co., Ltd. Eyeball movement capturing method and device, and storage medium
CN110275613A (zh) * 2019-05-29 2019-09-24 Oppo广东移动通信有限公司 屏幕显示处理方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN106485689A (zh) 一种图片处理方法和装置
CN105739854B (zh) 交互信息处理方法及装置
CN106095217A (zh) 应用分享装置、系统及方法
CN106648369A (zh) 应用程序的切换装置及方法
CN106547446A (zh) 应用切换装置和方法
CN106097952A (zh) 一种终端显示屏分辨率调整方法和终端
CN106791022A (zh) 一种移动终端及截图方法
CN105681582A (zh) 一种控件颜色调整方法及终端
CN106569709A (zh) 控制移动终端的装置及方法
CN106851003A (zh) 根据壁纸颜色调整文字颜色的方法及装置
CN105893490A (zh) 图片展示装置和方法
CN105554382B (zh) 一种移动终端及其实现拍照控制的方法
CN105843379B (zh) 移动终端边缘感应区变换装置和方法
CN106502526A (zh) 一种后台管理方法及终端
CN106568468A (zh) 基于光线传感器的自动化测试校准系统及方法
CN106569712A (zh) 无边框移动终端及基于无边框移动终端的分屏方法
CN105704266A (zh) 一种移动终端、移动终端外壳及实现移动终端控制的方法
CN106550190A (zh) 一种拍照控制方法和装置
CN105183830B (zh) 图片浏览方法及装置
CN106713661A (zh) 一种移动终端及显示文字的方法
CN106547674A (zh) 一种指纹录入方法、装置及终端
CN106376004A (zh) 一种信息处理方法及终端
CN106201482A (zh) 一种数据处理方法及电子设备
CN105722246A (zh) 网速叠加装置及方法
CN106527705A (zh) 一种实现操作的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170322

RJ01 Rejection of invention patent application after publication