CN103186240B - 一种基于高像素摄像头探测眼球运动的方法 - Google Patents

一种基于高像素摄像头探测眼球运动的方法 Download PDF

Info

Publication number
CN103186240B
CN103186240B CN201310096908.2A CN201310096908A CN103186240B CN 103186240 B CN103186240 B CN 103186240B CN 201310096908 A CN201310096908 A CN 201310096908A CN 103186240 B CN103186240 B CN 103186240B
Authority
CN
China
Prior art keywords
eyeball
user
mobile terminal
movement
program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310096908.2A
Other languages
English (en)
Other versions
CN103186240A (zh
Inventor
刘鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Xike Technology Co Ltd
Original Assignee
Chengdu Xike Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Xike Technology Co Ltd filed Critical Chengdu Xike Technology Co Ltd
Priority to CN201310096908.2A priority Critical patent/CN103186240B/zh
Publication of CN103186240A publication Critical patent/CN103186240A/zh
Application granted granted Critical
Publication of CN103186240B publication Critical patent/CN103186240B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Eye Examination Apparatus (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于高像素摄像头探测眼球运动的方法,它包括开启前置摄像头、人脸识别检测、眼球识别检测、程序根据用户眼球运动完成对移动终端的操作等步骤,本发明还包括一个眼球运动校准的步骤。本发明可以实现对移动终端的自如操作,无论是打开移动终端的菜单选项还是应用程序,都可以操作自如,还可以完成几个应用程序之间的切换,就如同人使用鼠标在电脑上的几个窗口之间切换一样简单,也能够完成例如阅读电子书时的翻页动作,是用户至少能腾出一只手来,在借助于外物的情形甚至可以腾出双手,为用户带来极大方便。

Description

一种基于高像素摄像头探测眼球运动的方法
技术领域
本发明涉及一种基于高像素摄像头探测眼球运动的方法。
背景技术
随着科技的发展和人们需求的日益增加,移动终端的功能日益增多,以往只能在电脑上操作的各种应用,如今也能在移动终端上完成,例如OFFICE办公、收发邮件、淘宝、发微博、看电影、玩3D游戏等等。为了给用户带来更来的视觉体验,移动终端的屏幕越来越大,给用户带来如同电脑搬的视听效果。但是在诸多优势的背后,也为用户带来很多的不便,尤其是操作。大多数情况下用户根本不能一只手实现对移动终端的操作,必须两只手同时作用才能很好的完成应用程序的打开、关闭或者切换操作,但是有时候使用者会遇到不能空出两只手的情况,这就使得用户不能很好的使用移动终端,为用户带来很大的困扰。出于用户使用考虑,急需一种能改变现状的方法,使用户对移动终端的操作方便,
发明内容
本发明的目的在于克服现有技术的不足,提供一种能够实现对移动终端方便操作的一种基于高像素摄像头探测眼球运动的方法。
本发明的目的是通过以下技术方案来实现的:一种基于高像素摄像头探测眼球运动的方法,它包括以下步骤:
S1:开启前置摄像头;
S2:人脸识别检测:识别当前是否有人脸,并判断人脸位置是否为正面,当上述不符合时,确认为识别失败,则发出无法识别到人脸的警告,并退出程序;
S3:眼球识别检测:探测出眼球的位置,晶状体的大小和上下眼皮的位置,至少锁定四个点,包括上眼皮、晶状体左边缘、晶状体右边缘和瞳孔,当程序无法正确识别眼球时,则发出请用户纠正人脸姿势的警告,并再次进行眼球识别检测;
S4:程序根据用户眼球运动完成对移动终端的操作:移动终端屏幕上显示一个鼠标式样的图标,该图标会随着眼球的移动而相应的移动,并根据人眼的动作完成对应用程序的相应操作。
它还包括一个眼球运动校准的步骤,在移动终端屏幕上不同的位置显示亮点,并提示用户根据亮点的位置移动眼球,程序识别到用户眼球的移动与屏幕上显示的所有亮点一致时校准完成。
所述的人眼的动作包括眨眼睛,用户需要在第一次使用时根据程序提示自定义设置不同的眨眼睛次数表示的实际操作。
本发明的有益效果是:使用者可以使用本发明对移动终端操作自如,无论是打开移动终端的菜单选项还是应用程序,都可以操作自如,还可以完成几个应用程序之间的切换,就如同人使用鼠标在电脑上的几个窗口之间切换一样简单,也能够完成例如阅读电子书时的翻页动作,是用户至少能腾出一只手来,在借助于外物的情形甚至可以腾出双手,为用户带来极大方便。
附图说明
图1为本发明的方法流程示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
如图1所示,一种基于高像素摄像头探测眼球运动的方法,本发明实现的前提条件是移动终端具备高像素的前置摄像头,它包括以下步骤:
S1:开启前置摄像头;
S2:人脸识别检测:识别当前是否有人脸,并判断人脸位置是否为正面,当上述不符合时,确认为识别失败,则发出无法识别到人脸的警告,并退出程序;
S3:眼球识别检测:探测出眼球的位置,晶状体的大小和上下眼皮的位置,至少锁定四个点,包括上眼皮、晶状体左边缘、晶状体右边缘和瞳孔,当程序在一定时间内无法正确识别眼球时,则发出请用户纠正人脸姿势的警告,并再次进行眼球识别检测;
S4:程序根据用户眼球运动完成对移动终端的操作:移动终端屏幕上显示一个鼠标式样的图标,该图标会随着眼球的移动而相应的移动,并根据人眼的动作完成对应用程序的相应操作,例如打开或者关闭应用程序、在多个应用程序之间进行切换操作等。
它还包括一个眼球运动校准的步骤,校准时,程序会在移动终端屏幕上不同的位置会显示亮点,提示用户根据亮点的位置移动眼球,此目的是为了探测用户眼球的左右移动的位置和上下眼皮移动的相对位置,并和手机屏幕的长宽校准。程序识别到用户眼球的移动与屏幕上显示的所有亮点一致时校准完成。
通过人的眼球运动控制手机操作的原理,主要是通过人眼球的左右移动距离和上眼皮上下移动的距离形成坐标点并在屏幕上显示为轨迹。
所述的人眼的动作包括眨眼睛,用户需要在第一次使用时根据程序提示自定义设置不同的眨眼睛次数表示的实际操作,例如眨两次眼睛表示打开文件等,之后系统会根据用户的自定义设置自动执行用户的操作。

Claims (3)

1.一种基于高像素摄像头探测眼球运动的方法,其特征在于:它包括以下步骤:
S1:开启前置摄像头;
S2:人脸识别检测:识别当前是否有人脸,并判断人脸位置是否为正面,当上述不符合时,确认为识别失败,则发出无法识别到人脸的警告,并退出程序;
S3:眼球识别检测:探测出眼球的位置,晶状体的大小和上下眼皮的位置,至少锁定四个点,包括上眼皮、晶状体左边缘、晶状体右边缘和瞳孔,当程序在一定时间内无法正确识别眼球时,则发出请用户纠正人脸姿势的警告,并再次进行眼球识别检测;
S4:程序根据用户眼球运动完成对移动终端的操作:通过人眼球的左右移动距离和上眼皮上下移动的距离形成坐标点并在屏幕上显示为轨迹,移动终端屏幕上显示一个鼠标式样的图标,该图标会随着眼球的移动而相应的移动,并根据人眼的动作完成对应用程序的相应操作,所述的人眼的动作包括眨眼睛。
2.根据权利要求1所述的一种基于高像素摄像头探测眼球运动的方法,其特征在于:它还包括一个眼球运动校准的步骤,在移动终端屏幕上不同的位置显示亮点,并提示用户根据亮点的位置移动眼球,探测用户眼球的左右移动的位置和上下眼皮移动的相对位置,并和移动终端屏幕的长宽校准,程序识别到用户眼球的移动与屏幕上显示的所有亮点一致时校准完成。
3.根据权利要求1所述的一种基于高像素摄像头探测眼球运动的方法,其特征在于:用户需要在第一次使用时根据程序提示自定义设置不同的眨眼睛次数表示的实际操作。
CN201310096908.2A 2013-03-25 2013-03-25 一种基于高像素摄像头探测眼球运动的方法 Expired - Fee Related CN103186240B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310096908.2A CN103186240B (zh) 2013-03-25 2013-03-25 一种基于高像素摄像头探测眼球运动的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310096908.2A CN103186240B (zh) 2013-03-25 2013-03-25 一种基于高像素摄像头探测眼球运动的方法

Publications (2)

Publication Number Publication Date
CN103186240A CN103186240A (zh) 2013-07-03
CN103186240B true CN103186240B (zh) 2016-02-10

Family

ID=48677439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310096908.2A Expired - Fee Related CN103186240B (zh) 2013-03-25 2013-03-25 一种基于高像素摄像头探测眼球运动的方法

Country Status (1)

Country Link
CN (1) CN103186240B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103345305B (zh) * 2013-07-22 2016-08-31 百度在线网络技术(北京)有限公司 用于移动终端输入法的候选词控制方法、装置和移动终端
CN104423870A (zh) * 2013-09-10 2015-03-18 北京三星通信技术研究有限公司 图形用户界面中的控件、显示方法及操作控件的方法和装置
CN104536654B (zh) * 2014-12-25 2018-02-02 小米科技有限责任公司 智能穿戴设备上的菜单选取方法、装置及智能穿戴设备
CN104571528B (zh) * 2015-01-27 2017-09-05 王露 一种基于眼球追踪实现眼球控制智能终端的设备及方法
CN105323374A (zh) * 2015-05-19 2016-02-10 维沃移动通信有限公司 移动终端的多窗口任务执行方法及其移动终端
CN104915099A (zh) * 2015-06-16 2015-09-16 努比亚技术有限公司 一种图标整理方法和终端设备
CN105184277B (zh) * 2015-09-29 2020-02-21 杨晴虹 活体人脸识别方法以及装置
CN110060537A (zh) * 2019-03-22 2019-07-26 珠海超凡视界科技有限公司 一种虚拟现实驾培装置及其人机交互方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101754715A (zh) * 2008-05-20 2010-06-23 松下电器产业株式会社 视线检测装置、摄像装置、视线检测方法、程序以及集成电路
CN102073435A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
CN102662473A (zh) * 2012-04-16 2012-09-12 广东步步高电子工业有限公司 基于眼部动作识别来实现人机信息交互的装置及方法
WO2012121405A1 (en) * 2011-03-07 2012-09-13 Sharp Kabushiki Kaisha A user interface, a device having a user interface and a method of providing a user interface
CN102880292A (zh) * 2012-09-11 2013-01-16 上海摩软通讯技术有限公司 移动终端及其操控方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101754715A (zh) * 2008-05-20 2010-06-23 松下电器产业株式会社 视线检测装置、摄像装置、视线检测方法、程序以及集成电路
CN102073435A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
WO2012121405A1 (en) * 2011-03-07 2012-09-13 Sharp Kabushiki Kaisha A user interface, a device having a user interface and a method of providing a user interface
CN102662473A (zh) * 2012-04-16 2012-09-12 广东步步高电子工业有限公司 基于眼部动作识别来实现人机信息交互的装置及方法
CN102880292A (zh) * 2012-09-11 2013-01-16 上海摩软通讯技术有限公司 移动终端及其操控方法

Also Published As

Publication number Publication date
CN103186240A (zh) 2013-07-03

Similar Documents

Publication Publication Date Title
CN103186240B (zh) 一种基于高像素摄像头探测眼球运动的方法
CN103412647B (zh) 一种人脸识别的页面显示控制方法及移动终端
US10082886B2 (en) Automatic configuration of an input device based on contextual usage
CN103116400B (zh) 一种屏幕显示状态的控制方法及电子设备
CN104660799B (zh) 移动终端及其控制方法
CN105955461A (zh) 一种交互界面管理方法和系统
CN103718148B (zh) 屏幕显示模式确定方法及终端设备
US9921687B2 (en) Always-available input through finger instrumentation
US20150205507A1 (en) Terminal and interface operation management method
KR20150032019A (ko) 시선 추적 기반의 사용자 인터페이스 방법 및 그 장치
WO2018072339A1 (zh) 一种虚拟现实头盔和切换虚拟现实头盔显示信息的方法
CN103885592A (zh) 一种在屏幕上显示信息的方法及装置
CN103513788B (zh) 基于陀螺仪传感器的手势识别方法、系统及移动终端
CN103513882A (zh) 一种触控设备的控制方法、装置及触控设备
US9823779B2 (en) Method and device for controlling a head-mounted display by a terminal device
CN105549732A (zh) 虚拟现实设备的控制方法、装置及虚拟现实设备
WO2015149498A1 (zh) 用于屏幕模式切换的方法、装置、计算机存储介质和设备
KR20140141100A (ko) 시력 보호 방법 및 장치
CN106020454B (zh) 一种基于眼控技术的智能终端触摸屏操作方法及系统
CN105843499A (zh) 一种切换显示状态的方法和终端
CN105404463A (zh) 一种触屏移动终端及其防误触方法
CN105204651A (zh) 一种控制方法及装置
CN103412723A (zh) 一种移动终端解锁方法及系统
CN104320536A (zh) 一种隐私保护的方法及系统
CN103744531A (zh) 智能手表左右侧功能键转换方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160210

Termination date: 20200325