CN107102732A - 一种眼动判断方法及装置 - Google Patents
一种眼动判断方法及装置 Download PDFInfo
- Publication number
- CN107102732A CN107102732A CN201710226285.4A CN201710226285A CN107102732A CN 107102732 A CN107102732 A CN 107102732A CN 201710226285 A CN201710226285 A CN 201710226285A CN 107102732 A CN107102732 A CN 107102732A
- Authority
- CN
- China
- Prior art keywords
- eye
- point
- summit
- pupil center
- frame picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Eye Examination Apparatus (AREA)
Abstract
本发明涉及一种眼动判断方法及装置,其中方法包括以下步骤:步骤1、通过摄像头以预设时间间隔持续获取用户眼部图片;步骤2、连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;步骤3、根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,即将获取的每一帧图片置于同一坐标中,眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。与现有眼动方向判断方法相比,本方法能节省大量运算,提高计算速度并降低硬件实现成本。
Description
技术领域
本发明涉及智能硬件技术领域,更具体地说,涉及一种眼动判断方法及装置。
背景技术
在人机交互技术领域,尽管当前已经有许多新兴交互方式的尝试,比如体感交互、眼动跟踪、语音交互、生物识别等方式,但大部分的交互方式使用率都不是非常高,也还未进入真正意义上的商业应用普及中,更没有哪种人机交互方式,能够达到人可以毫无障碍、随心所欲地和设备(机器)交流的水平。除了逐渐普及了的多点触控交互方式以外,其他大部分的人机交互方式在技术以及使用稳定性上还有待突围。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供一种眼动判断方法及装置。
本发明解决其技术问题所采用的技术方案是:
构造一种眼动判断方法,其中,包括以下步骤:
步骤1、通过摄像头以预设时间间隔持续获取用户眼部图片;
步骤2、连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;
步骤3、根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,即将获取的每一帧图片置于同一坐标中,所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及所述瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
本发明所述的眼动判断方法,其中,所述步骤2具体包括:
步骤2-1、提取所述眼眶边缘曲线,分别获取所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标;
步骤2-2、提取瞳孔中心点坐标;
步骤2-3、计算所述瞳孔中心点坐标分别至所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
本发明还提供了一种眼动判断装置,其中,包括:
摄像模块,用于通过摄像头以预设时间间隔持续获取用户眼部图片;
距离计算模块,用于连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;
判断模块,用于根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,即将获取的每一帧图片置于同一坐标中,所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及所述瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
本发明所述的眼动判断装置,其中,所述距离计算模块包括:
坐标计算单元,用于提取所述眼眶边缘曲线,分别获取所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标,提取瞳孔中心点坐标;
距离计算单元,用于计算所述瞳孔中心点坐标分别至所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
本发明的有益效果在于:通过计算并存储所获取的每帧图片瞳孔中心点到眼眶上、下、左、右四个方向的距离,并根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,可以快速实现眼动方向的判断,与现有眼动方向判断方法相比,本方法能节省大量运算,提高计算速度并降低硬件实现成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将结合附图及实施例对本发明作进一步说明,下面描述中的附图仅仅是本发明的部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图:
图1是本发明较佳实施例的眼动判断方法流程图;
图2a、2b、2c、2d是本发明较佳实施例的持续获取的4帧眼部图片示意图;
图3是本发明较佳实施例的眼动判断装置原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的部分实施例,而不是全部实施例。基于本发明的实施例,本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例,都属于本发明的保护范围。
本发明较佳实施例的眼动判断方法流程如图1所示,包括以下步骤:
步骤S10、通过摄像头以预设时间间隔持续获取用户眼部图片;
步骤S20、连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;
步骤S30、根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向。
本发明方法通过计算并存储所获取的每帧图片瞳孔中心点到眼眶上、下、左、右四个方向的距离,并根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,可以快速实现眼动方向的判断,与现有眼动方向判断方法相比,本方法能节省大量运算,提高计算速度并降低硬件实现成本。
上述眼动判断方法中,步骤S20具体包括:
步骤S21、提取眼眶边缘曲线,分别获取眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标;
步骤S22、提取瞳孔中心点坐标;
步骤S23、计算瞳孔中心点坐标分别至眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
上述眼动判断方法中,步骤S30具体包括:
以眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标为固定坐标,计算连续获得的每一帧图片中瞳孔中心点坐标至这四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
上述眼动判断方法中,步骤S30具体包括:
将获取的每一帧图片置于同一坐标中,眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及瞳孔中心点坐标均为活动点;
计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
图2a、2b、2c、2d是持续获取的4帧眼部图片示意图,从图2a依次至图2b、2c、2d,瞳孔向左侧移动。以眼眶边缘曲线上顶点c、下顶点d、左侧顶点a、右侧顶点b坐标为固定坐标,分别计算这4帧图片中,瞳孔中心点e坐标至这四点的距离,四个距离值分别记为e-c、e-d、e-a、e-b,通过列表,可以发现e-c、e-d、e-b三个距离值均依次变大,e-a则变小,可以判断出瞳孔向眼眶左侧顶点方向移动。
在另一实施例中,瞳孔向图2a中上顶点c和左侧顶点a的方向移动,即向左上方移动,此时可以通过上述方法计算出上述距离值e-d、e-b是逐渐变大,而距离值e-a、e-c则逐渐变小。
在具体的实施例中,可以将e-c、e-d、e-a、e-b四个值分别的变大、变小两个状态以排列组合形式列出对应的眼动方向状态结果,在计算得到上述e-c、e-d、e-a、e-b四个值之后,直接查表得到对应的眼动方向判断结果,可进一步提高判断速度。
在本发明另一实施例中,还提供了一种眼动判断装置,如图3所示,具体包括:摄像模块10,用于通过摄像头以预设时间间隔持续获取用户眼部图片;距离计算模块20,用于连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;判断模块30,用于根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向。本发明通过计算并存储所获取的每帧图片瞳孔中心点到眼眶上、下、左、右四个方向的距离,并根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,可以快速实现眼动方向的判断,与现有眼动方向判断方法相比,本方法能节省大量运算,提高计算速度并降低硬件实现成本。
上述实施例中,摄像模块可以是单个摄像头,或者是摄像模组。距离计算模块、判断模块可以是固化于FPGA板上的硬件电路模块,通过可编程逻辑器件实现数据计算。
上述眼动判断装置中,距离计算模块包括:坐标计算单元,用于提取眼眶边缘曲线,分别获取眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标,提取瞳孔中心点坐标;距离计算单元,用于计算瞳孔中心点坐标分别至眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
上述眼动判断装置中,判断模块包括第一判断单元,用于以眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标为固定坐标,计算连续获得的每一帧图片中瞳孔中心点坐标至这四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
上述眼动判断装置中,判断模块包括第二判断单元,用于将获取的每一帧图片置于同一坐标中,眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (4)
1.一种眼动判断方法,其特征在于,包括以下步骤:
步骤1、通过摄像头以预设时间间隔持续获取用户眼部图片;
步骤2、连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;
步骤3、根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,即将获取的每一帧图片置于同一坐标中,所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及所述瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
2.根据权利要求1所述的眼动判断方法,其特征在于,所述步骤2具体包括:
步骤2-1、提取所述眼眶边缘曲线,分别获取所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标;
步骤2-2、提取瞳孔中心点坐标;
步骤2-3、计算所述瞳孔中心点坐标分别至所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
3.一种眼动判断装置,其特征在于,包括:
摄像模块,用于通过摄像头以预设时间间隔持续获取用户眼部图片;
距离计算模块,用于连续对每一帧图片进行分析,计算并存储瞳孔中心点到眼眶上、下、左、右四个方向的距离;
判断模块,用于根据瞳孔中心点到眼眶上、下、左、右四个方向的距离变化判断眼动方向,即将获取的每一帧图片置于同一坐标中,所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标,以及所述瞳孔中心点坐标均为活动点,计算连续获得的每一帧图片中瞳孔中心点坐标至其他四点的距离,并根据每帧图片中这四点的距离变化判断眼动方向。
4.根据权利要求3所述的眼动判断装置,其特征在于,所述距离计算模块包括:
坐标计算单元,用于提取所述眼眶边缘曲线,分别获取所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点的坐标,提取瞳孔中心点坐标;
距离计算单元,用于计算所述瞳孔中心点坐标分别至所述眼眶边缘曲线上顶点、下顶点、左侧顶点、右侧顶点坐标的相对距离。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710226285.4A CN107102732A (zh) | 2017-04-08 | 2017-04-08 | 一种眼动判断方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710226285.4A CN107102732A (zh) | 2017-04-08 | 2017-04-08 | 一种眼动判断方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107102732A true CN107102732A (zh) | 2017-08-29 |
Family
ID=59675378
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710226285.4A Pending CN107102732A (zh) | 2017-04-08 | 2017-04-08 | 一种眼动判断方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107102732A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107609516A (zh) * | 2017-09-13 | 2018-01-19 | 重庆爱威视科技有限公司 | 自适应眼动追踪方法 |
CN116077060A (zh) * | 2023-02-03 | 2023-05-09 | 上海耐欣科技有限公司 | 一种显示设备、评估系统和评估方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103885589A (zh) * | 2014-03-06 | 2014-06-25 | 华为技术有限公司 | 眼动追踪方法及装置 |
CN104793732A (zh) * | 2015-01-04 | 2015-07-22 | 北京君正集成电路股份有限公司 | 一种智能眼镜的操作方法及智能眼镜 |
US20160034029A1 (en) * | 2011-12-14 | 2016-02-04 | Kenton M. Lyons | Gaze activated content transfer system |
-
2017
- 2017-04-08 CN CN201710226285.4A patent/CN107102732A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160034029A1 (en) * | 2011-12-14 | 2016-02-04 | Kenton M. Lyons | Gaze activated content transfer system |
CN103885589A (zh) * | 2014-03-06 | 2014-06-25 | 华为技术有限公司 | 眼动追踪方法及装置 |
CN104793732A (zh) * | 2015-01-04 | 2015-07-22 | 北京君正集成电路股份有限公司 | 一种智能眼镜的操作方法及智能眼镜 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107609516A (zh) * | 2017-09-13 | 2018-01-19 | 重庆爱威视科技有限公司 | 自适应眼动追踪方法 |
CN107609516B (zh) * | 2017-09-13 | 2019-10-08 | 重庆爱威视科技有限公司 | 自适应眼动追踪方法 |
CN116077060A (zh) * | 2023-02-03 | 2023-05-09 | 上海耐欣科技有限公司 | 一种显示设备、评估系统和评估方法 |
CN116077060B (zh) * | 2023-02-03 | 2024-01-16 | 上海耐欣科技有限公司 | 一种显示设备、评估系统和评估方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107092872A (zh) | 一种眼动识别方法及装置 | |
CN105593785B (zh) | 凝视辅助触摸屏输入 | |
CN105930767A (zh) | 一种基于人体骨架的动作识别方法 | |
CN105046661B (zh) | 一种提升视频美颜效率的方法、装置及智能终端 | |
CN106201173B (zh) | 一种基于投影的用户交互图标的交互控制方法及系统 | |
CN105511600B (zh) | 一种基于混合现实的多媒体人机交互平台 | |
CN105825499A (zh) | 基准平面的确定方法和确定系统 | |
CN103809853B (zh) | 一种信息处理方法及电子设备 | |
CN106371718A (zh) | 一种截屏方法和装置 | |
CN101692196A (zh) | 一种窗口排列方法、系统及显示终端 | |
CN110347317A (zh) | 一种窗口切换方法、装置、存储介质及交互智能平板 | |
CN107102732A (zh) | 一种眼动判断方法及装置 | |
CN109011097A (zh) | 一种基于运动想象与增强现实的康复训练方法 | |
CN108109037A (zh) | 基于移动终端的模拟试衣方法、装置、系统及存储介质 | |
CN109656493A (zh) | 控制方法及装置 | |
CN109330556A (zh) | 利用图像技术和云端控制技术的视力检测方法和系统 | |
CN109062486B (zh) | 一种显示窗口的调节方法及电子设备 | |
CN108415561A (zh) | 基于虚拟人的手势交互方法及系统 | |
CN110083238A (zh) | 基于增强现实技术的人机互动方法与系统 | |
CN109993135A (zh) | 一种基于增强现实的手势识别方法、系统及装置 | |
CN104809483B (zh) | 实现任意方向书写文本行切分的方法及系统 | |
CN108062742A (zh) | 一种利用数字图像处理和变形的眉毛更换方法 | |
CN107092873A (zh) | 一种眼动方向识别方法及装置 | |
US20160139414A1 (en) | Information processing method and wearable device | |
CN202854704U (zh) | 一种3d显示的人机交互的设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170829 |
|
WD01 | Invention patent application deemed withdrawn after publication |