CN105260027A - 一种人机交互的系统及方法 - Google Patents

一种人机交互的系统及方法 Download PDF

Info

Publication number
CN105260027A
CN105260027A CN201510745945.0A CN201510745945A CN105260027A CN 105260027 A CN105260027 A CN 105260027A CN 201510745945 A CN201510745945 A CN 201510745945A CN 105260027 A CN105260027 A CN 105260027A
Authority
CN
China
Prior art keywords
eyeballs
picture
man
action
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510745945.0A
Other languages
English (en)
Inventor
付保林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Feixun Data Communication Technology Co Ltd
Original Assignee
Shanghai Feixun Data Communication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Feixun Data Communication Technology Co Ltd filed Critical Shanghai Feixun Data Communication Technology Co Ltd
Priority to CN201510745945.0A priority Critical patent/CN105260027A/zh
Publication of CN105260027A publication Critical patent/CN105260027A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明适用于计算机领域,提供了一种人机交互系统,其包括两个红外摄像头、一个眼球成像分析模块、一个眼球识别模块及一个屏幕控制模块。两个红外摄像头分别对用户的两个眼球进行红外拍照,以得到两个眼球的图片。眼球成像分析模块分析该两个眼球的图片,判断双眼的动作。眼球识别模块内存储有一键值映射表,键值映射表反映两个眼球的动作与用户的操作的对应关系。眼球识别模块根据双眼的动作对照键值映射表,确定用户的操作。屏幕控制模块根据眼球识别模块所确定的用户的操作控制屏幕。本发明的人机交互系统采用用户的双眼动作作为控制屏幕的触发信息,无需手指的介入也无需额外的设备即可轻松操作电子设备。本发明提供了一种人机交互方法。

Description

一种人机交互的系统及方法
技术领域
本发明属于计算机领域,尤其涉及一种人机交互的系统及方法。
背景技术
目前,现有的人机交互系统,不管是触摸屏还是按键型都需要有手的介入,才能实现各项功能。以阅读手机电子书为例,对于触摸屏手机,用户需要用手滑动或者点击触摸屏来实现上下页的翻页阅读,对于按键型手机,用户需要按上下键来实现上下页的翻页阅读,这些操作和功能的选择都离不开手,久而久之,会让用户感到枯燥乏味。因此,亟需设计一种操作简单而且全新的用户体验模式,进而达到丰富人机交互形式的效果,增加用户的体验乐趣。
发明内容
本发明所要解决的技术问题在于提供一种人机交互系统及方法,旨在采用用户的双眼动作作为控制屏幕的触发信息。
本发明是这样实现的,一种人机交互系统,其包括两个红外摄像头、一个眼球成像分析模块、一个眼球识别模块及一个屏幕控制模块。该两个红外摄像头分别用于对用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片。该眼球成像分析模块用于分析该两个眼球的图片,判断双眼的动作。该眼球识别模块内部存储有一个键值映射表,该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系。该眼球识别模块用于根据该双眼的动作对照该键值映射表,确定该用户的操作。该屏幕控制模块用于根据该眼球识别模块所确定的该用户的操作控制屏幕。
本发明还提供了一种人机交互方法,其包括如下步骤:对一用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片;分析该两个眼球的图片,以判断双眼的动作;根据该双眼的动作对照一键值映射表,确定该用户的操作,其中该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系;及根据该用户的操作控制屏幕。
本发明与现有技术相比,有益效果在于:该人机交互系统及方法,采用用户的双眼动作作为控制屏幕的触发信息,无需手指的介入也无需额外的设备即可轻松操作电子设备,具有操作简单、便利且硬件成本低的优点。该人机交互系统及方法提供了一种全新的用户体验模式,进而达到丰富人机交互形式的效果,增加了用户的体验乐趣。
附图说明
图1是本发明实施例提供的人机交互系统的功能模块图。
图2是图1的人机交互系统的眼球识别模块内部存储的键值映射表。
图3是本发明实施例提供的人机交互方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,本发明实施例提供的人机交互系统100,其设置在一个电子设备(比如手机)内。该人机交互系统100包括两个红外摄像头10、一个眼球成像分析模块20、一个眼球识别模块30及一个屏幕控制模块40。
该两个红外摄像头10分别用于对用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片。在本实施例中,该两个眼球的图片的分辨率均为800*480像素。
该眼球成像分析模块20用于分析该两个眼球的图片,以判断双眼的动作。在本实施例中,该眼球成像分析模块20通过图像处理函数Tx直接截取剪切该两个眼球的图片中的眼部区域,再通过图像处理的窗函数Cx对该两个眼球的图片中的眼部区域进行处理。
该眼球识别模块30内部存储有一个键值映射表(如图2),用于根据该双眼的动作对照该键值映射表,确定该用户的操作。该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系。比如,两个眼球同时顶住屏幕的时间t超过第一预定时间t1,表示关机;两个眼球同时盯住屏幕的时间t在第二预定时间t2及第三预定时间t3之间,表示唤醒屏幕;左眼眨动,表示按压返回键;右眼眨动,表示按压确认键;右眼盯住屏幕的时间t大于第四预定时间t4,表示返回;左眼盯住屏幕的时间t大于第五预定时间t5,表示按压菜单键;两个眼球同时右移,表示将图片浏览器中的图片放大;两个眼球同时左移,表示将图片浏览器中的图片缩小;两个眼球同时多次眨眼,表示进行音量调节,循序递增或递减。
该屏幕控制模块40用于根据该眼球识别模块30所确定的该用户的操作控制屏幕。
如图3所示,本发明实施例提供的人机交互方法,其包括如下步骤:
S1:对一用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片。在本实施例中,该两个眼球的图片的分辨率均为800*480像素。
S2:分析该两个眼球的图片,以判断双眼的动作。具体的,该步骤包括步骤“通过图像处理函数Tx直接截取剪切该两个眼球的图片中的眼部区域,再通过图像处理的窗函数Cx对该两个眼球的图片中的眼部区域进行处理”。
S3:根据该双眼的动作对照一键值映射表,确定该用户的操作。其中,该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系。比如,两个眼球同时顶住屏幕的时间t超过第一预定时间t1,表示关机;两个眼球同时盯住屏幕的时间t在第二预定时间t2及第三预定时间t3之间,表示唤醒屏幕;左眼眨动,表示按压返回键;右眼眨动,表示按压确认键;右眼盯住屏幕的时间t大于第四预定时间t4,表示返回;左眼盯住屏幕的时间t大于第五预定时间t5,表示按压菜单键;两个眼球同时右移,表示将图片浏览器中的图片放大;两个眼球同时左移,表示将图片浏览器中的图片缩小;两个眼球同时多次眨眼,表示进行音量调节,循序递增或循序递减。
S4:根据该用户的操作控制一屏幕。
与现有技术相比较,本发明的人机交互系统及方法,能够采用用户的双眼动作作为控制屏幕的触发信息,无需手指的介入也无需额外的设备即可轻松操作电子设备,具有操作简单、便利且硬件成本低的优点。进一步的,该人机交互系统及方法提供了一种全新的用户体验模式,进而达到丰富人机交互形式的效果,增加了用户的体验乐趣。
值得注意的是,上述实施例中,所包括的各个功能模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能实现相应的功能即可;各功能模块的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
另外,本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,相应的程序可以存储于一计算机可读取存储介质(如ROM/RAM、磁盘或光盘等)中。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种人机交互系统,其包括两个红外摄像头、一个眼球成像分析模块、一个眼球识别模块及一个屏幕控制模块,该两个红外摄像头分别用于对用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片;该眼球成像分析模块用于分析该两个眼球的图片,判断双眼的动作;该眼球识别模块内部存储有一个键值映射表,该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系;该眼球识别模块用于根据该双眼的动作对照该键值映射表,确定该用户的操作;该屏幕控制模块用于根据该眼球识别模块所确定的该用户的操作控制屏幕。
2.如权利要求1所述的人机交互系统,其特征在于,该眼球成像分析模块通过图像处理函数直接截取剪切该两个眼球的图片中的眼部区域,再通过图像处理的窗函数对该两个眼球的图片中的眼部区域进行处理,以判断双眼的动作。
3.如权利要求1所述的人机交互系统,其特征在于,该两个眼球的图片的分辨率均为800*480像素。
4.一种人机交互方法,其包括如下步骤:对一用户的两个眼球进行红外拍照,以捕捉两个眼球的动作,从而得到两个眼球的图片;分析该两个眼球的图片,以判断双眼的动作;根据该双眼的动作对照一键值映射表,确定该用户的操作,其中该键值映射表反映该两个眼球的动作与该用户的操作之间的对应关系;及根据该用户的操作控制屏幕。
5.如权利要求4所述的人机交互方法,其特征在于,在该步骤“分析该两个眼球的图片,以判断双眼的动作”中包括步骤“通过图像处理函数直接截取剪切该两个眼球的图片中的眼部区域,再通过图像处理的窗函数对该两个眼球的图片中的眼部区域进行处理”。
6.如权利要求4所述的人机交互方法,其特征在于,该两个眼球的图片的分辨率均为800*480像素。
CN201510745945.0A 2015-11-04 2015-11-04 一种人机交互的系统及方法 Pending CN105260027A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510745945.0A CN105260027A (zh) 2015-11-04 2015-11-04 一种人机交互的系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510745945.0A CN105260027A (zh) 2015-11-04 2015-11-04 一种人机交互的系统及方法

Publications (1)

Publication Number Publication Date
CN105260027A true CN105260027A (zh) 2016-01-20

Family

ID=55099748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510745945.0A Pending CN105260027A (zh) 2015-11-04 2015-11-04 一种人机交互的系统及方法

Country Status (1)

Country Link
CN (1) CN105260027A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293086A (zh) * 2016-08-08 2017-01-04 广东小天才科技有限公司 信息的显示控制方法及装置
WO2018184246A1 (zh) * 2017-04-08 2018-10-11 闲客智能(深圳)科技有限公司 一种眼动识别方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020180799A1 (en) * 2001-05-29 2002-12-05 Peck Charles C. Eye gaze control of dynamic information presentation
CN103294198A (zh) * 2013-05-23 2013-09-11 深圳先进技术研究院 一种基于移动终端的人机交互方法及系统
CN103677270A (zh) * 2013-12-13 2014-03-26 电子科技大学 一种基于眼动跟踪的人机交互方法
CN104951070A (zh) * 2015-06-02 2015-09-30 无锡天脉聚源传媒科技有限公司 一种基于眼睛操控设备的方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020180799A1 (en) * 2001-05-29 2002-12-05 Peck Charles C. Eye gaze control of dynamic information presentation
CN103294198A (zh) * 2013-05-23 2013-09-11 深圳先进技术研究院 一种基于移动终端的人机交互方法及系统
CN103677270A (zh) * 2013-12-13 2014-03-26 电子科技大学 一种基于眼动跟踪的人机交互方法
CN104951070A (zh) * 2015-06-02 2015-09-30 无锡天脉聚源传媒科技有限公司 一种基于眼睛操控设备的方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
冯凤 等: "面向信息娱乐系统的车内眼动交互研究", 《汽车工程学报》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293086A (zh) * 2016-08-08 2017-01-04 广东小天才科技有限公司 信息的显示控制方法及装置
CN106293086B (zh) * 2016-08-08 2019-01-29 广东小天才科技有限公司 信息的显示控制方法及装置
WO2018184246A1 (zh) * 2017-04-08 2018-10-11 闲客智能(深圳)科技有限公司 一种眼动识别方法及装置

Similar Documents

Publication Publication Date Title
US20220377128A1 (en) File transfer display control method and apparatus, and corresponding terminal
EP3220249B1 (en) Method, device and terminal for implementing regional screen capture
KR102225802B1 (ko) 반응형 영상 생성방법 및 생성프로그램
TWI590145B (zh) 使用者可縮放圖示
CN107479691B (zh) 一种交互方法及其智能眼镜和存储装置
US11366582B2 (en) Screenshot capturing method, device, electronic device and computer-readable medium
US10860857B2 (en) Method for generating video thumbnail on electronic device, and electronic device
US10990226B2 (en) Inputting information using a virtual canvas
KR102373021B1 (ko) 글로벌 특수 효과의 전환 방법, 전환 장치, 단말 설비 및 저장 매체
CN104199552A (zh) 多屏显示方法、设备及系统
CN106155514A (zh) 一种实现触控的方法和装置
CN104238946A (zh) 一种触控方法、装置及终端
CN113282168A (zh) 头戴式显示设备的信息输入方法、装置及头戴式显示设备
CN102945077B (zh) 一种图片查看方法、装置及智能终端
CN104881225A (zh) 一种调节条的控制方法和装置
CN103268151B (zh) 一种数据处理装置及其启动特定功能的方法
CN103207678A (zh) 一种电子设备及其解锁方法
CN102915193A (zh) 一种网页浏览方法、装置及智能终端
US20190243536A1 (en) Method for interacting with one or more software applications using a touch sensitive display
US20160300321A1 (en) Information processing apparatus, method for controlling information processing apparatus, and storage medium
CN107122104B (zh) 数据显示方法及装置
US20140223328A1 (en) Apparatus and method for automatically controlling display screen density
CN105335061A (zh) 信息的显示方法、装置及终端
CN105260027A (zh) 一种人机交互的系统及方法
CN105739761A (zh) 一种数字输入方法以及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160120