CN103164017B - 一种眼控输入方法及电子设备 - Google Patents

一种眼控输入方法及电子设备 Download PDF

Info

Publication number
CN103164017B
CN103164017B CN201110412391.4A CN201110412391A CN103164017B CN 103164017 B CN103164017 B CN 103164017B CN 201110412391 A CN201110412391 A CN 201110412391A CN 103164017 B CN103164017 B CN 103164017B
Authority
CN
China
Prior art keywords
viewpoint
operator
flex point
screen
eyes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110412391.4A
Other languages
English (en)
Other versions
CN103164017A (zh
Inventor
甘大勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201110412391.4A priority Critical patent/CN103164017B/zh
Publication of CN103164017A publication Critical patent/CN103164017A/zh
Application granted granted Critical
Publication of CN103164017B publication Critical patent/CN103164017B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种眼控输入方法及电子设备。该眼控输入方法适用于设置有监控装置以及屏幕的电子设备,其中,所述屏幕显示有多个对象和一预定确认区域,该方法包括:通过该监控装置实时监控该电子设备的操作者的眼睛的移动信息;分析该移动信息,确定该操作者的眼睛在该屏幕上的视点;记录该操作者眼睛移动控制该视点移动过程中的拐点信息;当该视点位于所述预定确认区域时,获得该视点位于所述预定确认区域之前最近一次所记录的拐点信息;根据该视点位于该预定确认区域之前最近一次所记录的拐点信息确定该多个对象中的第一对象;对该第一对象执行第一操作。通过利用本发明所提供方案,可有效提高操作者眼控输入时的体验性。

Description

一种眼控输入方法及电子设备
技术领域
本发明涉及电子设备技术领域,特别是涉及一种眼控输入方法及电子设备。
背景技术
随着科学技术飞速的发展,各种电子产品不断的丰富并方便了大众生活。由于利用电子产品处理信息具有方便快捷、节省资源等优势,使得电子产品成为人们的生活或工作中不可或缺的一部分。
其中,眼控键盘或眼控鼠标作为一种新型的输入形式备受人们的青睐。以眼控键盘为例,其通过特定眼控部件以及内部集成的识别软件等,通过注视时间作为确认输入的条件,使得操作操作者无需手动输入方式即可实现输入操作,可以有效适用于特定的应用场景。
但是,通过注视时间来确定是否输入的情况下,注视时间一般设置为2~3秒,这使得操作者眼控输入的体验性较差。
发明内容
为解决上述技术问题,本发明实施例提供了一种眼控输入方法及电子设备,以提高操作者眼控输入的体验性,技术方案如下:
一种眼控输入方法,适用于设置有监控装置以及屏幕的电子设备,其中,所述屏幕显示有多个对象和一预定确认区域,所述方法包括:
通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
当所述视点位于所述预定确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
对所述第一对象执行第一操作。
其中,屏幕显示的多个对象为屏幕软键盘上的多个按键;
对所述第一对象执行第一操作为:
在所述预定确认区域输入所确定的第一按键对应的按键值。
其中,记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息,具体为:
记录操作者眼睛移动控制所述视点在屏幕软键盘上移动过程中的拐点位于所述屏幕的位置坐标。
其中,屏幕显示的多个对象为一功能界面上的多个图标;
对所述第一对象执行第一操作为:
开启所述第一图标对应的功能界面。
其中,记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息,具体为:
记录所述操作者眼睛移动控制视点在所述功能界面上移动过程中的拐点位于所述屏幕的位置坐标。
相应的,本发明实施例还提供一种电子设备,设置有监控装置以及屏幕,所述屏幕显示有多个对象和一预定确认区域,该电子设备包括:
监控模块,用于通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
视点确定模块,用于分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
拐点信息记录模块,用于记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
判断模块,用于判断视点是否位于预定确认区,如果是则触发拐点信息获取模块;
拐点信息获取模块,用于获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
对象确定模块,用于根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
操作执行模块,用于对所述第一对象执行第一操作。
其中,所述操作执行模块,包括:
第一操作执行单元,用于在所述预定确认区域输入所确定的第一按键对应的按键值。
其中,所述拐点信息记录模块,包括:
第一拐点信息记录单元,用于记录操作者眼睛移动控制所述视点在屏幕软键盘上移动过程中的拐点位于所述屏幕的位置坐标。
其中,所述操作执行模块,包括:
第二操作执行单元,用于开启所述第一图标对应的功能界面。
其中,所述拐点信息记录模块,包括:
第二拐点信息记录单元,用于记录所述操作者眼睛移动控制视点在所述功能界面上移动过程中的拐点位于所述屏幕的位置坐标。
本发明实施例所提供的技术方案,通过记录操作者眼睛移动控制屏幕上视点移动过程中的拐点信息,并在视点位于预定的确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;对所述第一对象执行第一操作。与现有技术相比,通过将操作者眼睛在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例所提供的一种眼控输入方法的第一种流程图;
图2为本发明实施例所提供的一种眼控输入方法的第二种流程图;
图3为本发明实施例所提供的一种眼控输入方法的第三种流程图;
图4为本发明实施例所提供的一种眼控输入方法适用于的一种眼镜的结构示意图;
图5为本发明实施例所提供的一种眼控输入方法的第四种流程图;
图6为本发明实施例所提供的一种眼控输入方法所适用的一种屏幕示意图;
图7为本发明实施例所提供的一种眼控输入方法所适用的一种屏幕的又一示意图;
图8为本发明实施例所提供的一种眼控输入方法的第五种流程图;
图9为本发明实施例所提供的一种电子设备的结构示意图。
具体实施方式
现有技术所提供的眼控输入方法中,通常将注视对象时间作为确认输入的条件,而注视时间一般设置为2~3秒,也就是,当操作者眼睛注视某对象2~3秒时,才能执行该对象对应的操作,这使得操作者眼控输入时体验性较差。
本发明实施例提供了一种眼控输入方法及电子设备,以提高操作者在眼控输入过程的体验性。
下面首先对本发明实施例所提供的一种眼控输入方法进行介绍。
一种眼控输入方法,适用于设置有监控装置以及屏幕的电子设备,其中,所述屏幕显示有多个对象和一预定确认区域,所述方法包括:
通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
当所述视点位于所述预定确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
对所述第一对象执行第一操作。
本发明实施例所提供的技术方案,通过记录操作者眼睛移动控制屏幕上视点移动过程中的拐点信息,并在视点位于预定的确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;对所述第一对象执行第一操作。与现有技术相比,通过将操作者眼睛在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明所提供的眼控输入方法,适用于设置有监控装置及屏幕的电子设备,其中,该屏幕显示有多个对象和一预定确认区。该多个对象为操作者眼控过程中可以选择的对象,该预定确认区域为操作者眼睛选定某一对象后进行确认输入的区域。例如:对于屏幕上显示有屏幕软键盘和输入确认区而言,屏幕软键盘上的各按键则为眼控过程中可选择的对象,而当操作者眼睛在屏幕上的视点进入输入确认区时,表明操作者需要输入某一按键值;而对于屏幕上显示有一功能界面的多个图标和图标确认区而言,该功能界面上的各个图标则为眼控过程中可选择的对象,而当操作者眼睛在屏幕上的视点进入图标确认区时,表明操作者选定某个图标并且需要开启所选定图标对应的功能界面。可以理解的是,本发明所提供的眼控输入方法可以适用于设置有监控装置以及屏幕的手机、笔记本、IPAD、眼镜等,其中,不同电子设备中的监控装置的设置位置以及屏幕所显示的对象和确认区域可以不同。
一种眼控输入方法,如图1所示,可以包括:
S101,通过监控装置实时监控电子设备的操作者的眼睛的移动信息;
当操作者需要进行相应的眼控输入操作时,此时需开启电子设备中监控装置并将屏幕上所显示的内容设置为眼控输入所对应的显示内容。其中,屏幕显示内容包括多个待选择对象以及确认选择对象的预定确认区域。该监控装置可以为内置于电子设备中的摄像头,或电子设备外接的专门设置的具有监控功能的装置等。
在操作者进行相应的眼控操作时,需要通过该电子设备的监控装置实时监控操作者眼睛的移动信息,以确定操作者眼睛在屏幕上的视点。
S102,分析所获得的移动信息,确定该操作者的眼睛在该屏幕上的视点;
在获得该监控装置实时监控操作者眼睛的移动信息后,可以分析所获得的移动信息,确定出操作者眼睛在电子设备屏幕上的视点,所谓眼睛在屏幕上的视点为操作者眼睛在屏幕上移动过程中的所注视到的屏幕位置点。
S103,记录该操作者眼睛移动控制视点移动过程中的拐点信息;
可以理解的是,操作者眼睛移动控制视点移动的过程为操作者进行对象选择的过程,而视点移动过程中的拐点所对应的对象极有可能为操作者所选定的对象,因此需要将视点移动过程中各拐点信息进行记录,以进行后续的处理。其中,拐点信息可以为相应拐点在屏幕上的位置坐标,或者可以定位拐点在屏幕上位置的其他信息。
S104,判断当前视点是否位于预定确认区域中;如果是,则执行步骤S105;否则,不作处理;
实际应用中,在手动操作电子设备的过程中,操作在选定操作区中某一对象后,眼睛会自然的切换到该操作区对应的屏幕上,以对该对象进行确认输入。因此,由手动操作电子设备可知,在操作者眼控输入过程中,当操作者眼睛在屏幕上的视点由对象所处区域切换到预定的确认区域时,则表明操作者已选定相应的对象,此时,需要执行步骤S105,以确定出所选定的对象;否则,不做任何处理即可。
S105,获得当前视点位于确认区域之前最近一次所记录的拐点信息;
由于操作者眼睛在屏幕上视点已经从对象所处区域切换到确认区域,此时,表明操作者眼睛已经查询并选定相应的对象。而实际查找过程中,所确定的对象一般位于眼睛移动控制视点移动过程中视点切换到确认区域之前的最近一次拐点处,所以从所记录的多个拐点信息中获得当前视点位于确认区域之前最近一次所记录的拐点信息。
S106,根据当前视点位于该确认区域之前最近一次所记录的拐点信息确定多个对象中第一对象;
在获得当前视点位于该确认区域之前最近一次所记录的拐点信息后,可以根据该拐点信息获得所选定对象在屏幕上的位置,进而确定出操作者所选定的第一对象,该第一对象为操作者本次眼控输入过程中眼睛所选定的对象。
S107,执行所确定的第一对象对应的第一操作。
在确定出操作者本次眼控输入过程所选定的第一对象后,则执行该第一对象对应的第一操作即可。可以理解的是,屏幕上显示的对象类型不同,则对象对应的操作则不相同。例如:对于屏幕显示的多个对象为屏幕软键盘上的多个按键而言,执行某一个对象对应的操作则为在预定确认区域输入所确定按键对应的按键值;而对于屏幕显示的多个对象为一功能界面上的多个图标而言,执行某一对象对应的操作则为开启相应图标对应的功能界面。
本实施例中,将操作者在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,相对于将注视对象时间作为确认输入的条件的方式,可有效提高操作者眼控输入时的体验性。
下面以具有作为监控装置的摄像头和屏幕的笔记本为例,对本发明所提供的一种眼控输入方法进行详细介绍。其中,假设该屏幕上显示具有多个按键的屏幕软键盘,并且该屏幕上同时显示与屏幕软键盘对应的输入确认区。该输入确认区中可以将屏幕软键盘上按键信息进行显示。可以理解的是,该方法并不局限于笔记本,还可以适用于具有监控装置和屏幕的手机、IPAD、眼镜等。
一种眼控输入方法,如图2所示,可以包括:
S201,通过该摄像头实时监控笔记本操作者的眼睛的移动信息;
当操作者需要进行相应的眼控输入操作时,此时需开启摄像头以及屏幕软键盘,同时开启相应的输入确认区。该输入确认区可以为现有的文本编辑区,或者,增设与屏幕软键盘对应的确认区。
通过摄像头可以实时监控到该操作者眼睛的移动信息。可以理解的是,该摄像头可以为内置于笔记本上方的普通摄像头,此时操作者在进行眼控输入时,需要校对自身的位置,以便该摄像头可以顺利监控到操作者眼睛的移动信息;或者,该摄像头可以为笔记本顶端的可旋转的监控装置,此时操作者在进行眼控输入时可以在该摄像头可旋转角度范围内进行相应移动,以便该摄像头可以顺利监控到旋转角度范围内的操作者眼睛的移动信息。可以理解的是,可以根据实际应用场景选择不同的监控装置。
S202,分析操作者眼睛的移动信息,确定操作者眼睛在笔记本屏幕上的视点;
在该摄像头监控得到操作者眼睛的移动信息后,可以通过分析所获得的移动信息,确定出操作者眼睛在笔记本屏幕上的视点。
S203,记录该操作者眼睛移动控制视点移动过程中的拐点在屏幕上的位置坐标;
可以理解的是,当操作者眼睛移动控制视点移动的过程中,其视点拐点所对应的按键值极有可能为待输入按键值,因此需要将拐点在屏幕上的位置坐标进行记录,以进行后续的处理。
S204,判断当前视点是否位于输入确认区中;如果是,则执行步骤S205;否则,不作处理;
在监控到操作者眼睛在屏幕上的视点由屏幕软键盘区切换到输入确认区时,则表明操作者需要进行相应的按键输入,此时,则需要执行步骤S205,以确定出相应的待输入按键值;否则,不做任何处理即可。
S205,获得当前视点位于输入确认区之前最近一次所记录的拐点对应的位置坐标;
由于操作者眼睛在屏幕上的视点已经从屏幕软键盘区切换到输入确认区,此时,表明操作者眼睛已经查找到相应的待输入按键,而实际查找过程中,所确定的待输入按键一般位于眼睛移动过程中的视点切换到输入确认区之前的最近一拐点处,所以从所记录的多个视点拐点信息中获得当前视点位于输入确认区之前最近一次所记录的拐点对应的位置坐标。
S206,根据当前视点位于该输入确认区域之前最近一次所记录的拐点对应的位置坐标确定屏幕软键盘上的一按键;
在获得当前视点位于该输入确认区之前最近一次所记录的拐点信息后,可以根据该拐点在屏幕上的位置坐标,确定出操作者所选择的屏幕软键盘上的一按键,该所确定的按键即为操作者本次输入操作的待输入按键。
S207,在该输入确认区输入所确定的按键对应的按键值。
当确定操作者本次输入的待输入按键后,则在该输入确认区输入所确定的按键对应的按键值,以此实现一次完整的眼控输入。
本实施例中,在操作者手动输入时眼睛在键盘与屏幕上自然切换表示确认输入的基础上,将操作者在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性。
可以理解的是,在实际应用中,通过眼控进行确认输入的情况并局限于屏幕软键盘,当屏幕上显示有一具有多个图标的功能界面时,也可以通过眼控的方式实现图标对应功能界面的开启。下面则以图4所示的具有特定监控装置和镜片屏幕的眼镜为例,对本发明所提供的一种眼控输入方法进行介绍。其中,该眼镜的镜片屏幕上可以显示相应的功能界面,该功能界面上包含多个图标,同时该屏幕上显示相应的图标确认区。并且,当操作者通过图标确认区选定一图标后,则会开启与图标对应的功能界面。可以理解的是,本实施例所提供的方法并不局限于眼镜,还可以应用于笔记本、手机、IPAD等具有监控装置和屏幕的电子设备。
一种眼控输入方法,如图3所示,可以包括:
S301,通过该监控装置实时监控该眼镜操作者的眼睛的移动信息;
当操作者需要对该眼镜进行眼控操作时,则需将该眼镜戴上,并调整相应监控装置的位置,以便该监控装置可以顺利监控到操作者眼睛的移动信息。
可以理解的是,当该眼镜对应的监控装置内置于眼镜中,则此监控装置应该具有较好的监控角度,以便在无需操作者调整监控角度的情况下,顺利监控到操作者眼睛移动信息。
S302,分析操作者眼睛的移动信息,确定操作者眼睛在镜片屏幕上的视点;
S303,记录该操作者眼睛移动控制视点移动过程中的拐点在镜片屏幕上的位置坐标;
S304,判断当前视点是否位于图标确认区中;如果是,则执行步骤S305;否则,不作处理;
S305,获得当前视点位于图标确认区之前最近一次所记录的拐点对应的位置坐标;
步骤S302~步骤S305与上述实施例步骤S202~步骤S205相似,在此不再赘述。
S306,根据当前视点位于该图标确认区域之前最近一次所记录的拐点对应的位置坐标确定镜片屏幕上功能界面中的一图标;
在获得当前视点位于该图标确认区之前最近一次所记录的拐点信息后,可以根据该拐点在屏幕上的位置坐标,确定出操作者所选择的镜片屏幕上的图标对象,该所确定的图标对象即为操作者本次眼控操作的所选定的图标。
S307,开启所确定的图标对应的功能界面。
当确定操作者本次眼控操作所选定的图标后,则应该开启该图标对应的功能界面,以实现一次完整的眼控输入操作。
本实施例中,在具有监控装置和屏幕的眼镜设备中,将操作者在图标操作区域与图标确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性。
在本发明的另一实施例中,可以将具有屏幕的电子设备通过无线连接方式与监控装置相连,进而实现监控装置与电子设备完全分离时操作者进行灵活的眼控输入。
下面以监控装置设置在眼镜上,该监控装置与笔记本可进行无线通信为例,对本发明所提供的一种眼控输入方法进行介绍。其中,假设笔记本屏幕上显示具有多个按键的屏幕软键盘,并且同时显示与屏幕软键盘对应的输入确认区。该输入确认区中可以将屏幕软键盘上按键信息进行显示。可以理解的是,设置有监控装置的眼镜可以与笔记本以外的电子设备进行无线相连,例如手机、IPAD等具有屏幕的电子设备;并且,监控装置并不局限于设置在眼镜上。
一种眼控输入方法,如图5所示,可以包括:
S401,实时接收该眼镜上监控装置实时监控该笔记本操作者的眼睛的移动信息;
通过在操作者使用的眼镜中设置监控装置进而采集操作者眼睛的移动信息,可以使得操作者在进行眼控输入操作时所处位置比较灵活。也就是,只要操作者位于监控装置与电子设备无线传输的范围内时,电子设备即可接收到监控装置所监控的操作者的眼睛的移动信息。
S402,分析操作者眼睛的移动信息,确定操作者眼睛在笔记本屏幕上的视点;
S403,记录该操作者眼睛移动控制视点移动过程中的拐点在屏幕上的位置坐标;
S404,判断当前视点是否位于输入确认区中;如果是,则执行步骤S405;否则,不作处理;
S405,获得当前视点位于输入确认区之前最近一次所记录的拐点对应的位置坐标;
S406,根据当前视点位于该输入确认区域之前最近一次所记录的拐点对应的位置坐标确定屏幕软键盘上的一按键;
S407,在该输入确认区输入所确定的按键对应的按键值。
本实施例中步骤S402~步骤S407与上述实施例中步骤S202~S207相似,在此不在赘述。
本实施例中,通过将操作者眼睛在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性;同时,监控装置与具有屏幕的电子设备相分离,监控装置可以通过无线传输的方式将实时监控得到的操作者眼睛移动信息传输给相应的电子设备,使得眼控输入更加灵活。
下面结合一具体的实施例对本发明所提供的一种眼控输入方法进行介绍。假设一笔记本具有作为监控装置的内置摄像头以及屏幕,该屏幕上可显示如图6所示的屏幕软键盘和输入确认区。当操作者需要眼控输入时,需要开启摄像头以及如图6所示的屏幕软键盘和输入确认区。该输入确认区可以显示操作者所选定的按键值,并最终将所确定的按键值显示在文本编辑区。
下面结合图7和图8,以一次眼控输入过程为例,对本发明实施例所提供的一种眼控输入方法进行介绍。
一种眼控输入方法,可以包括:
S501,在操作者眼控输入过程中,通过摄像头实时监控该操作者的眼睛的移动信息;
S502,分析操作者眼睛的移动信息,确定操作者眼睛在笔记本屏幕上的视点;
S503,记录该操作者眼睛移动控制视点移动过程中的②处拐点在屏幕上的位置坐标;
其中,如图7所示,②处为操作者眼睛移动控制屏幕上视点移动过程①-②-③中的拐点所在位置,此时需要记录该拐点所在位置②在屏幕上的位置坐标。
S504,当操作者眼睛移动控制视点移动到输入确认区的③处时,获得③处视点位于输入确认区之前最近一次所记录的②处拐点对应的位置坐标;
当操作者眼睛移动控制视点移动到输入确认区时,表明操作者已经选定本次眼控操作对应的按键,所以需要获得③处视点位于输入确认区之前最近一次所记录的②处拐点对应的位置坐标,进而进行后续按键值的确定。
S505,根据当前视点位于该输入确认区域之前最近一次所记录的②处拐点对应的位置坐标确定屏幕软键盘上的按键;
S506,在该输入确认区输入所确定的按键对应的按键值N。
本实施例中,操作者眼睛移动控制屏幕上视点移动过程①-②-③中,当操作者眼睛移动控制视点移动到输入确认区的③处时,则获得③处视点位于输入确认区之前最近一次所记录的②处拐点对应的位置坐标,进而可以确定操作者本次眼控输入所选定的按键,在输入确认区显示该按键值N。可见,通过将操作者在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,相对于将注视对象时间作为确认输入的条件的方式,可有效提高操作者眼控输入时的体验性。
通过以上的方法实施例的描述,所属领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:只读存储器(ROM)、随机存取存储器(RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
相应于上述方法实施例,本发明还提供一种电子设备,其设置有监控装置以及屏幕,所述屏幕显示有多个对象和一预定确认区域,如图9所示,该电子设备可以包括:
监控模块110,用于通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
视点确定模块120,用于分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
拐点信息记录模块130,用于记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
判断模块140,用于判断视点是否位于预定确认区,如果是则触发拐点信息获取模块;
拐点信息获取模块150,用于获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
对象确定模块160,用于根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
操作执行模块170,用于对所述第一对象执行第一操作。
通过利用本发明实施例所提供的电子设备,可记录操作者眼睛移动控制屏幕上视点移动过程中的拐点信息,并在视点位于预定的确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;对所述第一对象执行第一操作。与现有技术相比,通过将操作者眼睛在对象操作区域与确认区域之间的自然切换作为眼控输入条件来实现眼控输入,可有效提高操作者眼控输入时的体验性。
可以理解的是,该电子设备可以为具有监控装置和屏幕的手机、笔记本、IPAD、眼镜等。当然,该电子设备中的监控装置和屏幕可以位于同一设置中,也为分离状态。
其中,所述操作执行模块,包括:
第一操作执行单元,用于在所述预定确认区域输入所确定的第一按键对应的按键值。
其中,所述拐点信息记录模块,包括:
第一拐点信息记录单元,用于记录操作者眼睛移动控制所述视点在屏幕软键盘上移动过程中的拐点位于所述屏幕的位置坐标。
其中,所述操作执行模块,包括:
第二操作执行单元,用于开启所述第一图标对应的功能界面。
其中,所述拐点信息记录模块,包括:
第二拐点信息记录单元,用于记录所述操作者眼睛移动控制视点在所述功能界面上移动过程中的拐点位于所述屏幕的位置坐标。
对于装置或系统实施例而言,由于其基本相应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置或系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,在没有超过本申请的精神和范围内,可以通过其他的方式实现。当前的实施例只是一种示范性的例子,不应该作为限制,所给出的具体内容不应该限制本申请的目的。例如,所述单元或子单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或多个子单元结合一起。另外,多个单元可以或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
另外,所描述系统,装置和方法以及不同实施例的示意图,在不超出本申请的范围内,可以与其它系统,模块,技术或方法结合或集成。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
以上所述仅是本发明的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种眼控输入方法,其特征在于,适用于设置有监控装置以及屏幕的电子设备,其中,所述屏幕显示有多个对象和一预定确认区域,所述方法包括:
通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
当所述视点位于所述预定确认区域时,获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
对所述第一对象执行第一操作。
2.根据权利要求1所述的方法,其特征在于,屏幕显示的多个对象为屏幕软键盘上的多个按键;
对所述第一对象执行第一操作为:
在所述预定确认区域输入所确定的第一按键对应的按键值。
3.根据权利要求2所述的方法,其特征在于,记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息,具体为:
记录操作者眼睛移动控制所述视点在屏幕软键盘上移动过程中的拐点位于所述屏幕的位置坐标。
4.根据权利要求1所述的方法,其特征在于,屏幕显示的多个对象为一功能界面上的多个图标;
对所述第一对象执行第一操作为:
开启第一图标对应的功能界面。
5.根据权利要求4所述的方法,其特征在于,记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息,具体为:
记录所述操作者眼睛移动控制视点在所述功能界面上移动过程中的拐点位于所述屏幕的位置坐标。
6.一种电子设备,其特征在于,设置有监控装置以及屏幕,所述屏幕显示有多个对象和一预定确认区域,该电子设备包括:
监控模块,用于通过所述监控装置实时监控所述电子设备的操作者的眼睛的移动信息;
视点确定模块,用于分析所述移动信息,确定所述操作者的眼睛在所述屏幕上的视点;
拐点信息记录模块,用于记录所述操作者眼睛移动控制所述视点移动过程中的拐点信息;
判断模块,用于判断视点是否位于预定确认区,如果是则触发拐点信息获取模块;
拐点信息获取模块,用于获得所述视点位于所述预定确认区域之前最近一次所记录的拐点信息;
对象确定模块,用于根据所述视点位于所述预定确认区域之前最近一次所记录的拐点信息确定所述多个对象中的第一对象;
操作执行模块,用于对所述第一对象执行第一操作。
7.根据权利要求6所述的电子设备,其特征在于,所述操作执行模块,包括:
第一操作执行单元,用于在所述预定确认区域输入所确定的第一按键对应的按键值。
8.根据权利要求7所述的电子设备,其特征在于,所述拐点信息记录模块,包括:
第一拐点信息记录单元,用于记录操作者眼睛移动控制所述视点在屏幕软键盘上移动过程中的拐点位于所述屏幕的位置坐标。
9.根据权利要求6所述的电子设备,其特征在于,所述操作执行模块,包括:
第二操作执行单元,用于开启第一图标对应的功能界面。
10.根据权利要求9所述的电子设备,其特征在于,所述拐点信息记录模块,包括:
第二拐点信息记录单元,用于记录所述操作者眼睛移动控制视点在所述功能界面上移动过程中的拐点位于所述屏幕的位置坐标。
CN201110412391.4A 2011-12-12 2011-12-12 一种眼控输入方法及电子设备 Active CN103164017B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110412391.4A CN103164017B (zh) 2011-12-12 2011-12-12 一种眼控输入方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110412391.4A CN103164017B (zh) 2011-12-12 2011-12-12 一种眼控输入方法及电子设备

Publications (2)

Publication Number Publication Date
CN103164017A CN103164017A (zh) 2013-06-19
CN103164017B true CN103164017B (zh) 2016-03-30

Family

ID=48587167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110412391.4A Active CN103164017B (zh) 2011-12-12 2011-12-12 一种眼控输入方法及电子设备

Country Status (1)

Country Link
CN (1) CN103164017B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3078343A4 (en) * 2014-07-22 2017-08-16 Olympus Corporation Medical system
CN105807899B (zh) * 2014-12-30 2020-02-21 联想(北京)有限公司 一种电子设备及信息处理方法
CN104898850B (zh) * 2015-06-30 2018-02-06 上海安翰医疗技术有限公司 一种多台设备共享输入装置的输入切换系统及方法
CN105867619B (zh) * 2016-03-28 2019-02-05 联想(北京)有限公司 一种信息处理方法及电子设备
CN106896915B (zh) * 2017-02-15 2020-05-29 阿里巴巴(中国)有限公司 基于虚拟现实的输入控制方法及装置
WO2019067901A2 (en) 2017-09-29 2019-04-04 Apple Inc. USER INTERACTIONS BASED ON THE LOOK
WO2019217081A1 (en) * 2018-05-09 2019-11-14 Apple Inc. Selecting a text input field using eye gaze
CN109683705A (zh) * 2018-11-30 2019-04-26 北京七鑫易维信息技术有限公司 眼球注视控制交互控件的方法、装置和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008054928A (ja) * 2006-08-31 2008-03-13 Nidek Co Ltd 眼底撮影装置
CN101515199A (zh) * 2009-03-24 2009-08-26 北京理工大学 一种基于视线跟踪和p300脑电电位的字符输入装置
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
CN101945612A (zh) * 2008-02-14 2011-01-12 诺基亚公司 用于确定注视方向的设备和方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100185113A1 (en) * 2009-01-21 2010-07-22 Teledyne Scientific & Imaging, Llc Coordinating System Responses Based on an Operator's Cognitive Response to a Relevant Stimulus and to the Position of the Stimulus in the Operator's Field of View

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008054928A (ja) * 2006-08-31 2008-03-13 Nidek Co Ltd 眼底撮影装置
CN101945612A (zh) * 2008-02-14 2011-01-12 诺基亚公司 用于确定注视方向的设备和方法
CN101515199A (zh) * 2009-03-24 2009-08-26 北京理工大学 一种基于视线跟踪和p300脑电电位的字符输入装置
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法

Also Published As

Publication number Publication date
CN103164017A (zh) 2013-06-19

Similar Documents

Publication Publication Date Title
CN103164017B (zh) 一种眼控输入方法及电子设备
EP2945049A1 (en) Touch control assembly, device control method, controller and electronic equipment
CN106406848A (zh) 终端横竖屏切换方法及装置
CN104360798A (zh) 一种桌面布局的方法和终端
CN103955333A (zh) 一种设备和方法
CN102981756A (zh) 一种触屏移动终端上快速切换应用的方法
CN101546192B (zh) 工厂信息显示设备和方法
CN104571832A (zh) 移动终端、及其操控系统和方法
CN103973880A (zh) 便携式设备和控制外部设备的方法
CN107463543A (zh) 一种表单信息录入方法及设备
CN112148181A (zh) 菜单显示方法、装置、电子设备及存储介质
CN112188001B (zh) 快捷设置方法、快捷设置装置、电子设备和可读存储介质
CN108762604A (zh) 一种显示方法、装置及电子设备
CN105824693A (zh) 一种多任务显示的控制方法及移动终端
CN106201265A (zh) 一种基于web的移动终端操控方法、装置及系统
WO2015024209A1 (en) Causation of stylistic mimicry on a companion apparatus
CN112148163A (zh) 屏幕录制方法、装置及电子设备
CN105468284A (zh) 移动终端的操控方法、装置及移动终端
CN103164131B (zh) 一种电子设备的解锁方法及电子设备
CN105589627B (zh) 快捷菜单显示方法、快捷菜单显示装置和终端
CN106980429A (zh) 桌面图标的处理方法及移动终端
CN103902208B (zh) 电子设备控制方法及电子设备
CN105955634A (zh) 移动智能终端的截图方法和截图系统
CN113485625A (zh) 电子设备的响应方法、装置和电子设备
CN104216624B (zh) 一种显示方法和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant