CN103631364B - 一种控制方法及电子设备 - Google Patents

一种控制方法及电子设备 Download PDF

Info

Publication number
CN103631364B
CN103631364B CN201210298140.2A CN201210298140A CN103631364B CN 103631364 B CN103631364 B CN 103631364B CN 201210298140 A CN201210298140 A CN 201210298140A CN 103631364 B CN103631364 B CN 103631364B
Authority
CN
China
Prior art keywords
electronic equipment
control
grid
human eye
sight line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210298140.2A
Other languages
English (en)
Other versions
CN103631364A (zh
Inventor
甘大勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201210298140.2A priority Critical patent/CN103631364B/zh
Publication of CN103631364A publication Critical patent/CN103631364A/zh
Application granted granted Critical
Publication of CN103631364B publication Critical patent/CN103631364B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种控制方法,用于简化操作过程。所述方法包括:当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;根据所述第一运动参数确定人眼的第一视线焦点;当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象;针对所述第一可操控对象进行控制;当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件;针对所述第一控件进行控制。本发明还公开了用于实现所述方法的电子设备。

Description

一种控制方法及电子设备
技术领域
本发明涉及计算机及嵌入式领域,特别涉及一种控制方法及电子设备。
背景技术
现有技术中,用户需要对显示区域中显示的内容进行操作时,一般是通过鼠标或者触摸屏进行操作,而需要对键盘进行操作时,也只能通过手指或其他操作体触摸键盘的方式来进行操作。
这样,如果用户与电子设备相隔较远,或者用户正在进行其他操作,两只手均不空闲时,想对电子设备进行操作还要通过手来进行,则显得十分不便。可见,现有技术中的操作过程较为繁琐,也不够智能。
发明内容
本发明实施例提供一种控制方法及电子设备,用于解决现有技术中操作过程较为繁琐的技术问题,实现了简化操作过程的技术效果。
一种控制方法,所述方法应用于一电子设备中,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述方法包括:
当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;
根据所述第一运动参数确定人眼的第一视线焦点;
当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象;
针对所述第一可操控对象进行控制;
当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件;
针对所述第一控件进行控制。
较佳的,所述采集装置为摄像头。
较佳的,在通过所述采集装置采集人眼的运行,获得人眼的第一运动参数之前还包括步骤:当所述电子设备包括一个所述采集装置时,确定通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;当所述电子设备包括两个所述采集装置时,根据人眼的眼皮运动或根据人眼的视线与所述显示区域所在平面的夹角确定具体通过其中哪个所述采集装置采集人眼的运行,获得人眼的第一运动参数。
较佳的,当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象的步骤包括:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象;
如果所述电子设备包括两个所述采集装置,将所述电子设备除所述显示区域外的其它区域对应到一第二网格中,所述第二网格由交叉的经线和纬线构成,所述第二网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个可操控对象,所述第二网格对应于所述第二采集装置,确定所述第一视线焦点在所述第二网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象。
较佳的,当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件的步骤包括:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件;
如果所述电子设备包括两个所述采集装置,将所述显示区域对应到一第一网格中,所述第一网格由交叉的经线和纬线构成,所述第一网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件,所述第一网格对应于第一采集装置,确定所述第一视线焦点在所述第一网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件。
较佳的,针对所述第一可操控对象进行控制的步骤包括:控制所述电子设备完成与所述第一可操控对象相应的第一功能;或控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
较佳的,针对所述第一控件进行控制的步骤包括:控制所述电子设备打开与所述第一控件对应的显示界面;或控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
较佳的,控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置的步骤包括:通过所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点;根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置确定出第一方向;根据所述第一方向将所述第一控件由所述显示区域上的所述第一位置移动到所述第二位置。
较佳的,在根据所述第一运动参数确定人眼的第一视线焦点之后还包括步骤:当所述第一视线焦点位于所述电子设备外的第一区域范围内时,根据所述第一视线焦点确定第一操作对象;根据所述第一操作对象确定一第三可操控对象;针对所述第三可操控对象进行控制。
较佳的,根据所述第一视线焦点确定第一操作对象的步骤包括:通过所述采集装置获得的所述第一操作对象对应的第一图像信息确定所述第一操作对象。
较佳的,根据所述第一操作对象确定一第三可操控对象的步骤包括:将所述第一图像信息与本地存储的各图像信息进行比对,确定与所述第一图像信息相同的第二图像信息;确定所述第二图像信息对应于所述第三可操控对象。
较佳的,根据所述第一操作对象确定一第三可操控对象的步骤包括:对所述第一图像信息进行图像识别,确定所述第一图像信息所对应的第一对象;确定所述第一对象对应于所述第三可操控对象。
较佳的,针对所述第三可操控对象进行控制的步骤包括:将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。
一种电子设备,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述电子设备还包括:
所述采集装置用于当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;
第一确定装置,用于根据所述第一运动参数确定人眼的第一视线焦点;
第二确定装置,用于当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象;
第一控制装置,用于针对所述第一可操控对象进行控制;
第三确定装置,用于当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件;
第二控制装置,用于针对所述第一控件进行控制。
较佳的,所述采集装置为摄像头。
较佳的,所述电子设备还包括:第四确定装置,用于当所述电子设备包括一个所述采集装置时,确定通过所述采集装置采集人眼的运行,获得人眼的第一运动参数,及当所述电子设备包括两个所述采集装置时,根据人眼的眼皮运动或根据人眼的视线与所述显示区域所在平面的夹角确定具体通过其中哪个所述采集装置采集人眼的运行,获得人眼的第一运动参数。
较佳的,所述第二确定装置具体用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象;
如果所述电子设备包括两个所述采集装置,将所述电子设备除所述显示区域外的其它区域对应到一第二网格中,所述第二网格由交叉的经线和纬线构成,所述第二网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个可操控对象,所述第二网格对应于所述第二采集装置,确定所述第一视线焦点在所述第二网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象。
较佳的,所述第三确定装置具体用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件;
如果所述电子设备包括两个所述采集装置,将所述显示区域对应到一第一网格中,所述第一网格由交叉的经线和纬线构成,所述第一网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件,所述第一网格对应于第一采集装置,确定所述第一视线焦点在所述第一网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件。
较佳的,所述第一控制装置具体用于:控制所述电子设备完成与所述第一可操控对象相应的第一功能;或控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
较佳的,所述第二控制装置具体用于:控制所述电子设备打开与所述第一控件对应的显示界面;或控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
较佳的,所述第二控制装置具体用于:通过所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点;根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置确定出第一方向;根据所述第一方向将所述第一控件由所述显示区域上的所述第一位置移动到所述第二位置。
较佳的,所述电子设备还包括:第五确定装置,用于当所述第一视线焦点位于所述电子设备外的第一区域范围内时,根据所述第一视线焦点确定第一操作对象,及根据所述第一操作对象确定一第三可操控对象;
所述电子设备还包括:第三控制装置,用于针对所述第三可操控对象进行控制。
较佳的,所述第五确定装置具体用于通过所述采集装置获得的所述第一操作对象对应的第一图像信息确定所述第一操作对象。
较佳的,所述第五确定装置具体用于将所述第一图像信息与本地存储的各图像信息进行比对,确定与所述第一图像信息相同的第二图像信息,及确定所述第二图像信息对应于所述第三可操控对象。
较佳的,所述第五确定装置具体用于对所述第一图像信息进行图像识别,确定所述第一图像信息所对应的第一对象;确定所述第一对象对应于所述第三可操控对象。
较佳的,所述第三控制装置具体用于将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。
本发明实施例中的控制方法可以应用于一电子设备中,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述方法包括:当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;根据所述第一运动参数确定人眼的第一视线焦点;当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象确定第一可操控对象;针对所述第一可操控对象进行控制;当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件确定第一控件;针对所述第一控件进行控制。可以通过所述采集装置采集人眼的运行,通过人眼的运行确定人眼的所述第一视线焦点,当所述第一视线焦点落在所述电子设备的显示区域内时,可以对所述显示区域内显示的控件进行相应控制,当所述第一视线焦点落在所述电子设备上、且在所述显示区域外时,可以对所述电子设备显示区域外的可操控对象进行相应控制,从而可以通过人眼的运行来控制所述电子设备,使所述电子设备根据人眼的运行进行相应响应,操作十分便利,用户无需动手即可完成想要的操作或即可获取相应的提示,简化了操作过程,提高了操作效率,使所述电子设备更加智能,也提高了用户体验。
附图说明
图1为本发明实施例中控制方法的主要流程图;
图2为本发明实施例中电子设备的详细结构图。
具体实施方式
本发明实施例中的控制方法可以应用于一电子设备中,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述方法包括:当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;根据所述第一运动参数确定人眼的第一视线焦点;当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象确定第一可操控对象;针对所述第一可操控对象进行控制;当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件确定第一控件;针对所述第一控件进行控制。可以通过所述采集装置采集人眼的运行,通过人眼的运行确定人眼的所述第一视线焦点,当所述第一视线焦点落在所述电子设备的显示区域内时,可以对所述显示区域内显示的控件进行相应控制,当所述第一视线焦点落在所述电子设备上、且在所述显示区域外时,可以对所述电子设备显示区域外的可操控对象进行相应控制,从而可以通过人眼的运行来控制所述电子设备,使所述电子设备根据人眼的运行进行相应响应,操作十分便利,用户无需动手即可完成想要的操作或即可获取相应的提示,简化了操作过程,提高了操作效率,使所述电子设备更加智能,也提高了用户体验。
参见图1,本发明提供一种控制方法,所述方法可以应用于一电子设备中,所述电子设备可以包括壳体、显示装置、至少一个可操控对象及采集装置。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域可以通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,所述采集装置设置在所述壳体上,可以用于当人眼进入到预定采集区域内时采集人眼运动。所述方法可以包括以下步骤:
步骤101:当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数。
本发明实施例中,所述采集装置可以是摄像头。所述采集装置可以有预设的采集区域,即所述预定采集区域。
本发明实施例中,所述电子设备可以包括有一个所述采集装置,或者也可以包括有两个或以上所述采集装置。较佳的,所述电子设备可以包括有一个所述采集装置,或者也可以包括有两个所述采集装置。如果所述电子设备包括有一个所述采集装置,则所述采集装置的采集区域至少包括所述电子设备,如果所述电子设备包括有两个所述采集装置,则其中一个所述采集装置的采集区域可以是所述电子设备的所述显示区域,另一个所述采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。
如果所述电子设备包括有两个所述采集装置,其中第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。所述电子设备可以通过人眼的眼皮的运动情况来确定究竟使用哪一个采集装置采集人眼的运动。
例如,可以确定人眼眼球中部有一第一位置,当人眼的眼皮运动位于从人眼的眼球的上部向下到位于人眼的眼球的第一位置之间时,可以确定使用所述第二采集装置来采集人眼的运动,如果人眼的眼皮运动位于从人眼的眼球的下部向上到所述第一位置,可以确定使用所述第一采集装置来采集人眼的运动。其中,当人眼的眼皮位于所述第一位置时,可以确定此时人眼的视线焦点对应的可以是所述显示区域与所述电子设备除所述显示区域外的其它区域的分界线。即,当人眼的眼皮位于所述第一位置靠上的区域时,可以确定使用所述第一采集装置来采集人眼的运动,当人眼的眼皮位于所述第一位置靠下的区域时,可以确定使用所述第二采集装置来采集人眼的运动。
或者,如果所述电子设备包括有两个所述采集装置,其中第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域,所述电子设备还可以通过人眼的视线与所述显示区域之间的夹角来确定具体使用哪一个采集装置。
例如,当人眼的视线与所述显示区域的上边缘所在的延伸面之间的夹角的角度在第一角度到第二角度之间时,可以确定使用所述第一采集装置来采集人眼的运动,其中,所述第一角度可以是锐角,所述第二角度可以是钝角。当人眼的视线与所述显示区域的上边缘所在的延伸面之间的夹角的角度为所述第一角度时,可以确定此时人眼的视线焦点对应的可以是所述显示区域与所述电子设备除所述显示区域外的其它区域的分界线;当人眼的视线与所述显示区域的上边缘所在的延伸面之间的夹角的角度为所述第二角度时,可以确定此时人眼的视线焦点对应的可以是所述电子设备与除所述电子设备之外的其它区域的分界线。
当人眼进入到所述采集装置的采集区域内,即所述预定采集区域内时,可以通过所述采集装置采集人眼的运行,从而可以获得人眼的第一运动参数。通过所述第一运动参数至少可以确定人眼的视线方向。
本发明实施例中,当所述电子设备具有多个采集装置时,可以通过人眼的眼皮运动来确定究竟由哪个采集装置来采集人眼的运动,或者也可以通过人眼的视线与所述显示区域所在的平面之间的夹角来确定究竟由哪个采集装置来采集人眼的运动,确定采集装置的方式可以多样,可以根据具体需求和精确度来确定选择方式。
步骤102:根据所述第一运动参数确定人眼的第一视线焦点。
本发明实施例中,根据所述第一运动参数至少可以确定人眼的视线方向,在确定人眼的视线方向之后,可以确定人眼的视线与所述电子设备所在的平面的交点,即可以确定人眼的视线落在所述电子设备所在的平面上的点,该点即为所述第一视线焦点。
步骤103:当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象。
例如,所述电子设备为一笔记本,该笔记本可以具有第一主体和第二主体,所述第一主体为显示屏所在的主体,所述第二主体为键盘所在的主体,则所述第一主体的所述显示屏的显示区域即可以看作本发明实施例中的所述显示区域,所述第二主体中包括的键盘区域即可以看作本发明实施例中的所述电子设备除所述显示区域外的其它区域。
一、本发明实施例中,如果所述电子设备具有一个所述采集装置,则所述采集装置的采集区域至少可以覆盖整个电子设备。
可以形象地看作:将所述电子设备整个对应到一个第三网格中,该第三网格类似于坐标形式,由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到该第三网格中,可以确定所述第一视线焦点在该第三网格中的具体位置。所述第三网格中可以包括至少一个第三预设区域范围,其中每个所述第三预设区域范围可以唯一确定一个控件或一个可操控对象。
例如可以确定由所述第三预设区域范围内的至少一个交点确定一个可操控对象或一个控件。其中,所述第三网格对应于所述显示区域的部分,可以由一个所述预设区域范围确定一个控件,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的第三预设区域范围确定具体的控件;所述第三网格对应于所述电子设备除所述显示区域外的部分,可以由一个所述第三预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的所述第三预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
二、本发明实施例中,如果所述电子设备具有多个所述采集装置,以所述电子设备具有两个所述采集装置来进行说明:其中所述第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中所述第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。
可以形象地看作:将所述电子设备分别对应到两个网格中,其中第一网格对应于所述显示区域,其中第二网格对应于所述电子设备除所述显示区域外的其它区域。且所述第一采集装置对应于所述第一网格,所述第二采集装置对应于所述第二网格,即通过所述第一采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第一网格中,通过所述第二采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第二网格中。所述第一网格和所述第二网格都可以类似于坐标形式,均可以由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到与该采集装置对应的网格中,从而可以确定所述第一视线焦点在相应网格中的具体位置。所述第一网格中可以包括至少一个第一预设区域范围,所述第二网格中可以包括至少一个第二预设区域范围,其中每个所述第一预设区域范围可以唯一确定一个控件,每个所述第二预设区域范围可以唯一确定一个可操控对象。
其中,所述第一网格对应于所述显示区域,可以由一个所述第一预设区域范围内确定一个控件,可以根据所述第一视线焦点在该第一网格中对应的具体的点确定该点落在哪个预设区域范围中,从而根据具体的所述第一预设区域范围确定具体的控件;所述第二网格对应于所述电子设备除所述显示区域外的其它区域,可以由一个所述第二预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第二网格中对应的具体的点确定该点落在哪个所述第二预设区域范围中,从而根据具体的所述第二预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
本发明实施例中,无论电子设备具有多少个采集装置,都有与其对应的根据所述第一视线焦点确定可操控对象的方法,可以根据具体情况进行具体选择。且以上只示出了一种可能的方法,其它能够根据所述第一视线焦点确定所述第一可操控对象的方法均在本发明的保护范围之内。
步骤104:针对所述第一可操控对象进行控制。
本发明实施例中,针对所述第一可操控对象进行控制的步骤可以是:控制所述电子设备完成与所述第一可操控对象相应的第一功能;或可以是控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或可以是控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
例如,所述第一可操控对象为第一按键,针对所述第一可操控对象进行控制,可以是控制所述电子设备完成与所述第一按键相应的所述第一功能。例如,该第一按键为键盘锁按键,其对应的所述第一功能为锁住数字键盘,则如果根据用户的所述第一视线焦点确定出所述第一视线焦点对应的是所述第一按键,则可以控制所述电子设备锁住数字键盘,即控制所述电子设备完成与所述第一按键相应的所述第一功能。
例如,所述第一可操控对象为第一按键,针对所述第一可操控对象进行控制,可以是所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度。例如所述第一按键为N按键,所述第一按键对应有指示灯,如果根据用户的所述第一视线焦点确定出所述第一视线焦点对应的是所述第一按键,则可以控制所述电子设备将所述第一可操控对象对应的该指示灯的亮度由所述第一亮度调整为所述第二亮度,所述第一亮度可以不同于所述第二亮度。例如所述第二亮度的亮度值可以大于所述第一亮度的亮度值,即可以将所述第一可操控对象对应的所述指示灯调亮,以对用户起到提示作用,例如如果用户在较暗的环境中使用所述电子设备,则如果控制所述电子设备将所述第一可操控对象对应的所述指示灯调亮,可以使用户能够明确所述第一可操控对象的位置,从而可以对所述第一可操控对象进行操作,尽量避免误操作。
例如,所述第一可操控对象为第一按键,针对所述第一可操控对象进行控制,可以是控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。其中,不同的按键可以对应有所述显示区域中的不同控件。其中,一个可操控对象可以对应有至少一个控件,同样,一个控件也可以对应有至少一个可操控对象。例如所述第一按键对应于所述显示区域中的所述第二控件,如果确定用户的所述第一视线焦点对应于所述第一按键,则可以控制所述电子设备将所述第二控件的亮度由所述第一亮度调整为所述第二亮度。本发明实施例中,如果一个可操控对象对应有多个控件,则可以控制所述电子设备将与该可操控对象对应的所有控件的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该可操控对象对应的所有控件中的其中部分控件的亮度由所述第一亮度调整为所述第二亮度;本发明实施例中,如果一个控件对应有多个可操控对象,则可以控制所述电子设备将与该控件对应的所有可操控对象的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该控件对应的所有可操控对象中的其中部分可操控对象的亮度由所述第一亮度调整为所述第二亮度。其中,本发明实施例中所说的调整可操控对象的亮度,指的可以是调整可操控对象对应的指示灯的亮度,该指示灯可以位于可操控对象下方,或者也可以位于可操控对象侧面。例如,可操控对象为某一按键,则与该按键对应的指示灯可以位于该按键下方,或者也可以位于该按键侧面、位于该按键所在的键盘平面上。
本发明实施例中,对所述第一可操控对象进行控制的方式可以有多种,具体控制方式可以预先设定,也可以随机选择,或者可以由用户选择,可以结合用户的需求来确定控制方式,以能够满足不同用户的不同需求。
步骤105:当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件确定第一控件。
例如,所述电子设备为一笔记本,该笔记本可以具有第一主体和第二主体,所述第一主体为显示屏所在的主体,所述第二主体为键盘所在的主体,则所述第一主体的所述显示屏的显示区域即可以看作本发明实施例中的所述显示区域,所述第二主体中包括的键盘区域即可以看作本发明实施例中的所述电子设备除所述显示区域外的其它区域。
一、本发明实施例中,如果所述电子设备具有一个所述采集装置,则所述采集装置的采集区域至少可以覆盖整个电子设备。
可以形象地看作:将所述电子设备整个对应到一个第三网格中,该第三网格类似于坐标形式,由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到该第三网格中,可以确定所述第一视线焦点在该第三网格中的具体位置。所述第三网格中可以包括至少一个第三预设区域范围,其中每个所述第三预设区域范围可以唯一确定一个控件或一个可操控对象。
例如可以确定由所述第三预设区域范围内的至少一个交点确定一个可操控对象或一个控件。其中,所述第三网格对应于所述显示区域的部分,可以由一个所述预设区域范围确定一个控件,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的第三预设区域范围确定具体的控件;所述第三网格对应于所述电子设备除所述显示区域外的部分,可以由一个所述第三预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的所述第三预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
二、本发明实施例中,如果所述电子设备具有多个所述采集装置,以所述电子设备具有两个所述采集装置来进行说明:其中所述第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中所述第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。
可以形象地看作:将所述电子设备分别对应到两个网格中,其中第一网格对应于所述显示区域,其中第二网格对应于所述电子设备除所述显示区域外的其它区域。且所述第一采集装置对应于所述第一网格,所述第二采集装置对应于所述第二网格,即通过所述第一采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第一网格中,通过所述第二采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第二网格中。所述第一网格和所述第二网格都可以类似于坐标形式,均可以由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到与该采集装置对应的网格中,从而可以确定所述第一视线焦点在相应网格中的具体位置。所述第一网格中可以包括至少一个第一预设区域范围,所述第二网格中可以包括至少一个第二预设区域范围,其中每个所述第一预设区域范围可以唯一确定一个控件,每个所述第二预设区域范围可以唯一确定一个可操控对象。
其中,所述第一网格对应于所述显示区域,可以由一个所述第一预设区域范围内确定一个控件,可以根据所述第一视线焦点在该第一网格中对应的具体的点确定该点落在哪个预设区域范围中,从而根据具体的所述第一预设区域范围确定具体的控件;所述第二网格对应于所述电子设备除所述显示区域外的其它区域,可以由一个所述第二预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第二网格中对应的具体的点确定该点落在哪个所述第二预设区域范围中,从而根据具体的所述第二预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
本发明实施例中,无论电子设备具有多少个采集装置,都有与其对应的根据所述第一视线焦点确定控件的方法,可以根据具体情况进行具体选择。且以上只示出了一种可能的方法,其它能够根据所述第一视线焦点确定所述第一控件的方法均在本发明的保护范围之内。
步骤106:针对所述第一控件进行控制。
本发明实施例中,针对所述第一控件进行控制,具体可以是:控制所述电子设备打开与所述第一控件对应的显示界面;或可以是控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或可以是控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
例如,所述第一控件为对应于一word文档的第一图标,针对所述第一控件进行控制,具体可以是控制所述电子设备打开与所述第一控件对应的显示界面,即可以控制所述电子设备打开该word文档。
或者例如,所述第一控件为对应于一word文档的第一图标,针对所述第一控件进行控制,具体可以是控制所述电子设备将所述第一图标由所述显示区域上的第一位置移动到所述显示区域上的第二位置,所述第一位置可以不同于所述第二位置。其中,控制所述电子设备将所述第一图标由所述显示区域上的第一位置移动到所述显示区域上的第二位置,具体可以是:通过相应的所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点,根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置确定出第一方向,即确定出人眼的视线在所述显示区域上的第一位移方向,根据所述第一方向将所述第一图标由所述显示区域上的所述第一位置移动到所述第二位置。
或者例如,所述第一控件为一图片,针对所述第一控件进行控制,具体可以是控制所述电子设备对所述第一控件进行放大操作或缩小操作,即可以是控制所述电子设备对该图片进行放大操作或缩小操作。
或者例如,所述第一控件为所述显示区域中的一控件,在所述电子设备除所述显示区域之外的其它区域有与所述第一控件相关的两个按键,针对所述第一控件进行控制,具体可以是控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。本实施例中所述第二操控对象的数量可以是两个,具体的,可以控制该两个可操控对象的亮度均由所述第三亮度调整为所述第四亮度,或者可以控制该两个可操控对象中的一个可操控对象的亮度由所述第三亮度调整为所述第四亮度。
本发明实施例中,人眼的视线可能位于所述电子设备之外的区域,可以预设一第一区域范围,如果人眼的视线落在所述第一区域范围内,则所述采集装置还可以采集到人眼的视线所对应的操作对象的信息。本发明实施例中,所述操作对象的信息指的可以是所述操作对象的图像信息。
一、例如,如果所述电子设备具有一个所述采集装置,则所述采集装置的采集区域至少可以覆盖整个电子设备。
可以形象地看作:将所述电子设备整个对应到一个第三网格中,该第三网格类似于坐标形式,由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到该第三网格中,可以确定所述第一视线焦点在该第三网格中的具体位置。所述第三网格中可以包括至少一个第三预设区域范围,其中每个所述第三预设区域范围可以唯一确定一个控件或一个可操控对象。
当根据所述采集装置采集到的人眼的运动确定出所述第一视线焦点没有位于该第三网格中时,可以确定所述第一视线焦点位于所述电子设备之外。因所述采集装置采集到了人眼的运动,可以说明此时的所述第一视线焦点位于所述第一区域范围内,则所述采集装置可以采集所述第一视线焦点对应的第一操作对象的图像信息,进而对采集的图像信息进行识别,确定所述第一操作对象是否为与所述电子设备有关的操作对象。例如,确定出所述第一操作对象为一USB(通用串行总线)接口,则可以确定所述第一操作对象为与所述电子设备有关的操作对象,则可以继续确定所述第一操作对象在所述电子设备中对应的第三可操控对象。例如,所述第一操作对象为一鼠标的USB接口,则所述第三可操控对象为所述电子设备上的USB接口,此时所述电子设备可以针对所述第三可操控对象进行控制。其中,针对所述第三可操控对象进行控制的方法,具体可以是将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。其中,将所述第三可操控对象的亮度由第四亮度调整到第五亮度,具体可以是将所述第三可操控对象对应的指示灯的亮度由所述第四亮度调整至所述第五亮度。其中,所述电子设备上的USB接口可以位于所述电子设备的侧面,则与该USB接口对应的指示灯可以位于所述电子设备的侧面,也可以位于所述电子设备的正面,例如如果所述电子设备为一笔记本,则与该USB接口对应的指示灯可以位于该笔记本的键盘所在的平面上、与该USB接口对应的位置。
二、或者例如,如果所述电子设备具有多个所述采集装置,以所述电子设备具有两个所述采集装置来进行说明:其中所述第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中所述第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。
可以形象地看作:将所述电子设备分别对应到两个网格中,其中第一网格对应于所述显示区域,其中第二网格对应于所述电子设备除所述显示区域外的其它区域。且所述第一采集装置对应于所述第一网格,所述第二采集装置对应于所述第二网格,即通过所述第一采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第一网格中,通过所述第二采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第二网格中。所述第一网格和所述第二网格都可以类似于坐标形式,均可以由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到与该采集装置对应的网格中,从而可以确定所述第一视线焦点在相应网格中的具体位置。所述第一网格中可以包括至少一个第一预设区域范围,所述第二网格中可以包括至少一个第二预设区域范围,其中每个所述第一预设区域范围可以唯一确定一个控件,每个所述第二预设区域范围可以唯一确定一个可操控对象。
当根据所述采集装置采集到的人眼的运动确定出所述第一视线焦点既没有位于所述第一网格中,也没有位于所述第二网格中,可以确定所述第一视线焦点位于所述电子设备之外。因所述采集装置采集到了人眼的运动,可以说明此时的所述第一视线焦点位于所述第一区域范围内,则所述采集装置可以采集所述第一视线焦点对应的第一操作对象的图像信息,进而对采集的图像信息进行识别,确定所述第一操作对象是否为与所述电子设备有关的操作对象。例如,确定出所述第一操作对象为一光盘,则可以确定所述第一操作对象为与所述电子设备有关的操作对象,则可以继续确定所述第一操作对象在所述电子设备中对应的第三可操控对象。例如,所述第一操作对象为一光盘,则所述第三可操控对象为所述电子设备上的光驱,此时所述电子设备可以针对所述第三可操控对象进行控制。其中,针对所述第三可操控对象进行控制的方法,具体可以是将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。其中,将所述第三可操控对象的亮度由第四亮度调整到第五亮度,具体可以是将所述第三可操控对象对应的指示灯的亮度由所述第四亮度调整至所述第五亮度。其中,所述电子设备上的光盘可以位于所述电子设备的侧面,则与该光盘对应的指示灯可以位于所述电子设备的侧面,也可以位于所述电子设备的正面,例如如果所述电子设备为一笔记本,则与该光盘对应的指示灯可以位于该笔记本的键盘所在的平面上、与该光盘对应的位置。
本发明实施例中,对所述第一可操控对象进行控制的方式可以有多种,具体控制方式可以预先设定,也可以随机选择,或者可以由用户选择,可以结合用户的需求来确定控制方式,以能够满足不同用户的不同需求。
以下通过几个具体的实施例来介绍本发明中的控制方法,下面的实施例主要介绍了所述控制方法的几个可能的应用场景。需要说明的是,本发明中的实施例只用于解释本发明,而不能用于限制本发明。一切符合本发明思想的实施例均在本发明的保护范围之内,本领域技术人员自然知道应该如何根据本发明的思想进行变形。
实施例一:
所述电子设备为一笔记本。所述电子设备可以包括壳体、显示装置、至少一个可操控对象及两个采集装置。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域可以通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,该两个采集装置可以设置在所述壳体上,可以用于当人眼进入到预定采集区域内时采集人眼运动。该两个采集装置均为摄像头。其中第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。所述电子设备可以通过人眼的眼皮的运动情况来确定究竟使用哪一个采集装置采集人眼的运动。
例如,可以确定人眼眼球中部有一第一位置,当人眼的眼皮运动位于从人眼的眼球的上部向下到位于人眼的眼球的第一位置之间时,可以确定使用所述第二采集装置来采集人眼的运动,如果人眼的眼皮运动位于从人眼的眼球的下部向上到所述第一位置,可以确定使用所述第一采集装置来采集人眼的运动。其中,当人眼的眼皮位于所述第一位置时,可以确定此时人眼的视线焦点对应的可以是所述显示区域与所述电子设备除所述显示区域外的其它区域的分界线。即,当人眼的眼皮位于所述第一位置靠上的区域时,可以确定使用所述第一采集装置来采集人眼的运动,当人眼的眼皮位于所述第一位置靠下的区域时,可以确定使用所述第二采集装置来采集人眼的运动。本实施例中,所述电子设备确定人眼的眼皮运动到第二位置,该第二位置位于从人眼的眼球的上部向下到位于人眼的眼球的第一位置之间,则可以确定由所述第一采集装置来采集人眼的运动。
通过所述第一采集装置采集人眼的运行,获得人眼的第一运动参数。
根据所述第一运动参数至少可以确定人眼的视线方向,在确定人眼的视线方向之后,可以确定人眼的视线与所述电子设备所在的平面的交点,即可以确定人眼的视线落在所述电子设备所在的平面上的点,该点即为所述第一视线焦点。
因本实施例中是通过所述第一采集装置来采集人眼的运动,可以确定所述第一视线焦点是位于所述电子设备的所述显示区域内。
本实施例中,因所述电子设备具有两个所述采集装置,可以形象地看作:将所述电子设备分别对应到两个网格中,其中第一网格对应于所述显示区域,其中第二网格对应于所述电子设备除所述显示区域外的其它区域。且所述第一采集装置对应于所述第一网格,所述第二采集装置对应于所述第二网格,即通过所述第一采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第一网格中,通过所述第二采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第二网格中。所述第一网格和所述第二网格都可以类似于坐标形式,均可以由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到与该采集装置对应的网格中,从而可以确定所述第一视线焦点在相应网格中的具体位置。所述第一网格中可以包括至少一个第一预设区域范围,所述第二网格中可以包括至少一个第二预设区域范围,其中每个所述第一预设区域范围可以唯一确定一个控件,每个所述第二预设区域范围可以唯一确定一个可操控对象。
其中,所述第一网格对应于所述显示区域,可以由一个所述第一预设区域范围内确定一个控件,可以根据所述第一视线焦点在该第一网格中对应的具体的点确定该点落在哪个预设区域范围中,从而根据具体的所述第一预设区域范围确定具体的控件;所述第二网格对应于所述电子设备除所述显示区域外的其它区域,可以由一个所述第二预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第二网格中对应的具体的点确定该点落在哪个所述第二预设区域范围中,从而根据具体的所述第二预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
因所述第一视线焦点对应于所述第一网格,所以可以在所述第一网格中确定出所述第一视线焦点所在的位置,可以确定该位置位于哪个所述第一预设区域范围内,例如可以确定该位置对应于第一个第一预设区域范围内,该第一个第一预设区域范围对应于所述显示区域中的第一控件。
可以针对所述第一控件进行控制。本实施例中,所述第一控件可以是对应于一word文档的第一图标,针对所述第一控件进行控制,具体可以是控制所述电子设备打开与所述第一控件对应的显示界面,即可以控制所述电子设备打开该word文档。
实施例二:
所述电子设备为一笔记本。所述电子设备可以包括壳体、显示装置、至少一个可操控对象及两个采集装置。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域可以通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,该两个采集装置可以设置在所述壳体上,可以用于当人眼进入到预定采集区域内时采集人眼运动。该两个采集装置均为摄像头。其中第一采集装置的采集区域可以是所述电子设备的所述显示区域,其中第二采集装置的采集区域可以是所述电子设备除所述显示区域外的其它区域。所述电子设备可以通过人眼的眼皮的运动情况来确定究竟使用哪一个采集装置采集人眼的运动。
例如,可以确定人眼眼球中部有一第一位置,当人眼的眼皮运动位于从人眼的眼球的上部向下到位于人眼的眼球的第一位置之间时,可以确定使用所述第二采集装置来采集人眼的运动,如果人眼的眼皮运动位于从人眼的眼球的下部向上到所述第一位置,可以确定使用所述第一采集装置来采集人眼的运动。其中,当人眼的眼皮位于所述第一位置时,可以确定此时人眼的视线焦点对应的可以是所述显示区域与所述电子设备除所述显示区域外的其它区域的分界线。即,当人眼的眼皮位于所述第一位置靠上的区域时,可以确定使用所述第一采集装置来采集人眼的运动,当人眼的眼皮位于所述第一位置靠下的区域时,可以确定使用所述第二采集装置来采集人眼的运动。本实施例中,所述电子设备确定人眼的眼皮运动到第二位置,该第二位置位于从人眼的眼球的下部向上到位于人眼的眼球的第一位置之间,则可以确定由所述第二采集装置来采集人眼的运动。
通过所述第二采集装置采集人眼的运行,获得人眼的第一运动参数。
根据所述第一运动参数至少可以确定人眼的视线方向,在确定人眼的视线方向之后,可以确定人眼的视线与所述电子设备所在的平面的交点,即可以确定人眼的视线落在所述电子设备所在的平面上的点,该点即为所述第一视线焦点。
因本实施例中是通过所述第二采集装置来采集人眼的运动,可以确定所述第一视线焦点是位于所述电子设备除所述显示区域外的其它区域。
本实施例中,因所述电子设备具有两个所述采集装置,可以形象地看作:将所述电子设备分别对应到两个网格中,其中第一网格对应于所述显示区域,其中第二网格对应于所述电子设备除所述显示区域外的其它区域。且所述第一采集装置对应于所述第一网格,所述第二采集装置对应于所述第二网格,即通过所述第一采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第一网格中,通过所述第二采集装置采集的人眼的运动确定出的所述第一视线焦点都能够对应到所述第二网格中。所述第一网格和所述第二网格都可以类似于坐标形式,均可以由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到与该采集装置对应的网格中,从而可以确定所述第一视线焦点在相应网格中的具体位置。所述第一网格中可以包括至少一个第一预设区域范围,所述第二网格中可以包括至少一个第二预设区域范围,其中每个所述第一预设区域范围可以唯一确定一个控件,每个所述第二预设区域范围可以唯一确定一个可操控对象。
其中,所述第一网格对应于所述显示区域,可以由一个所述第一预设区域范围内确定一个控件,可以根据所述第一视线焦点在该第一网格中对应的具体的点确定该点落在哪个预设区域范围中,从而根据具体的所述第一预设区域范围确定具体的控件;所述第二网格对应于所述电子设备除所述显示区域外的其它区域,可以由一个所述第二预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第二网格中对应的具体的点确定该点落在哪个所述第二预设区域范围中,从而根据具体的所述第二预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
因所述第一视线焦点对应于所述第二网格,所以可以在所述第二网格中确定出所述第一视线焦点所在的位置,可以确定该位置位于哪个所述第二预设区域范围内,例如可以确定该位置对应于第一个第二预设区域范围内,该第一个第二预设区域范围对应于所述电子设备中的第一可操控对象。
可以针对所述第一可操控对象进行控制。本实施例中,所述第一控件可以是第一按键,针对所述第一可操控对象进行控制,具体可以是控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。其中,不同的按键可以对应有所述显示区域中的不同控件。其中,一个可操控对象可以对应有至少一个控件,同样,一个控件也可以对应有至少一个可操控对象。例如所述第一按键对应于所述显示区域中的所述第二控件,如果确定用户的所述第一视线焦点对应于所述第一按键,则可以控制所述电子设备将所述第二控件的亮度由所述第一亮度调整为所述第二亮度。本发明实施例中,如果一个可操控对象对应有多个控件,则可以控制所述电子设备将与该可操控对象对应的所有控件的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该可操控对象对应的所有控件中的其中部分控件的亮度由所述第一亮度调整为所述第二亮度;本发明实施例中,如果一个控件对应有多个可操控对象,则可以控制所述电子设备将与该控件对应的所有可操控对象的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该控件对应的所有可操控对象中的其中部分可操控对象的亮度由所述第一亮度调整为所述第二亮度。其中,本发明实施例中所说的调整可操控对象的亮度,指的可以是调整可操控对象对应的指示灯的亮度,该指示灯可以位于可操控对象下方,或者也可以位于可操控对象侧面。例如,可操控对象为某一按键,则与该按键对应的指示灯可以位于该按键下方,或者也可以位于该按键侧面、位于该按键所在的键盘平面上。
实施例三:
所述电子设备为一笔记本。所述电子设备可以包括壳体、显示装置、至少一个可操控对象及一个采集装置。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域可以通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,该采集装置可以设置在所述壳体上,可以用于当人眼进入到预定采集区域内时采集人眼运动。该采集装置为摄像头。所述采集装置的采集区域可以是所述电子设备。
通过所述采集装置采集人眼的运行,获得人眼的第一运动参数。
根据所述第一运动参数至少可以确定人眼的视线方向,在确定人眼的视线方向之后,可以确定人眼的视线与所述电子设备所在的平面的交点,即可以确定人眼的视线落在所述电子设备所在的平面上的点,该点即为所述第一视线焦点。
本实施例中,因所述电子设备具有一个所述采集装置,所述采集装置的采集区域至少可以覆盖整个电子设备。
可以形象地看作:将所述电子设备整个对应到一个第三网格中,该第三网格类似于坐标形式,由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到该第三网格中,可以确定所述第一视线焦点在该第三网格中的具体位置。所述第三网格中可以包括至少一个第三预设区域范围,其中每个所述第三预设区域范围可以唯一确定一个控件或一个可操控对象。
例如可以确定由所述第三预设区域范围内的至少一个交点确定一个可操控对象或一个控件。其中,所述第三网格对应于所述显示区域的部分,可以由一个所述预设区域范围确定一个控件,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的第三预设区域范围确定具体的控件;所述第三网格对应于所述电子设备除所述显示区域外的部分,可以由一个所述第三预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的所述第三预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
将所述第一视线焦点对应到所述第三网格中,可以在所述第三网格中确定出所述第一视线焦点所在的位置。本实施例中可以首先确定该位置位于所述电子设备除所述显示区域之外的其它区域,则可以确定所述第一视线焦点应对应于一可操控对象。可以继续确定该位置位于哪个所述第三预设区域范围内,例如可以确定该位置对应于第一个所述第三预设区域范围内,该第一个所述第三预设区域范围对应于所述电子设备中的第一可操控对象。
可以针对所述第一可操控对象进行控制。本实施例中,所述第一控件可以是第一按键,针对所述第一可操控对象进行控制,具体可以是控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。其中,不同的按键可以对应有所述显示区域中的不同控件。其中,一个可操控对象可以对应有至少一个控件,同样,一个控件也可以对应有至少一个可操控对象。例如所述第一按键对应于所述显示区域中的所述第二控件,如果确定用户的所述第一视线焦点对应于所述第一按键,则可以控制所述电子设备将所述第二控件的亮度由所述第一亮度调整为所述第二亮度。本发明实施例中,如果一个可操控对象对应有多个控件,则可以控制所述电子设备将与该可操控对象对应的所有控件的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该可操控对象对应的所有控件中的其中部分控件的亮度由所述第一亮度调整为所述第二亮度;本发明实施例中,如果一个控件对应有多个可操控对象,则可以控制所述电子设备将与该控件对应的所有可操控对象的亮度均由所述第一亮度调整为所述第二亮度,或者可以控制所述电子设备将与该控件对应的所有可操控对象中的其中部分可操控对象的亮度由所述第一亮度调整为所述第二亮度。其中,本发明实施例中所说的调整可操控对象的亮度,指的可以是调整可操控对象对应的指示灯的亮度,该指示灯可以位于可操控对象下方,或者也可以位于可操控对象侧面。例如,可操控对象为某一按键,则与该按键对应的指示灯可以位于该按键下方,或者也可以位于该按键侧面、位于该按键所在的键盘平面上。
实施例四:
所述电子设备为一笔记本。所述电子设备可以包括壳体、显示装置、至少一个可操控对象及一个采集装置。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域可以通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,该采集装置可以设置在所述壳体上,可以用于当人眼进入到预定采集区域内时采集人眼运动。该采集装置为摄像头。所述采集装置的采集区域可以是所述电子设备。
通过所述采集装置采集人眼的运行,获得人眼的第一运动参数。
根据所述第一运动参数至少可以确定人眼的视线方向,在确定人眼的视线方向之后,可以确定人眼的视线与所述电子设备所在的平面的交点,即可以确定人眼的视线落在所述电子设备所在的平面上的点,该点即为所述第一视线焦点。
本实施例中,因所述电子设备具有一个所述采集装置,所述采集装置的采集区域至少可以覆盖整个电子设备。
可以形象地看作:将所述电子设备整个对应到一个第三网格中,该第三网格类似于坐标形式,由交叉的经线和纬线构成。每根经线和每根纬线可以确定一个交点,通过所述采集装置采集到的人眼的运动而确定出的所述第一视线焦点都可以对应到该第三网格中,可以确定所述第一视线焦点在该第三网格中的具体位置。所述第三网格中可以包括至少一个第三预设区域范围,其中每个所述第三预设区域范围可以唯一确定一个控件或一个可操控对象。
例如可以确定由所述第三预设区域范围内的至少一个交点确定一个可操控对象或一个控件。其中,所述第三网格对应于所述显示区域的部分,可以由一个所述预设区域范围确定一个控件,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的第三预设区域范围确定具体的控件;所述第三网格对应于所述电子设备除所述显示区域外的部分,可以由一个所述第三预设区域范围确定一个可操控对象,可以根据所述第一视线焦点在该第三网格中对应的具体的点确定该点落在哪个所述第三预设区域范围中,从而根据具体的所述第三预设区域范围确定具体的可操控对象,即确定所述第一可操控对象。
将所述第一视线焦点对应到所述第三网格中,可以在所述第三网格中确定出所述第一视线焦点所在的位置。本实施例中确定出所述第一视线焦点不在所述第三网格内,则可以确定该位置位于所述电子设备之外的其它区域,因所述第一视线焦点被所述采集装置所采集到,则可以确定所述第一视线焦点位于所述第一区域范围内。确定所述第一视线焦点对应的第一操作对象,本实施例中,所述第一操作对象可以是一移动硬盘的USB借口。
可以通过所述采集装置采集所述第一视线焦点所对应的所述第一操作对象的图像信息。例如可以将该图像信息称为第一图像信息。
在采集该图像信息后,可以将该第一图像信息与本地存储的各图像信息进行对比。本发明实施例中,本地可以预先存储有各类操作对象所对应的图像信息,这些操作对象可以均是与所述电子设备有关的操作对象。
本实施例中,在将所述第一图像信息与本地存储的各图像信息进行对比后,可以确定所述第一图像信息与本地存储的第二图像信息一致,则可以确定所述第二图像信息所对应的第三可操控对象,所述第三可操控对象可以位于所述电子设备上。例如本实施例中因所述第一操作对象为鼠标的USB接口,则所述第三可操控对象可以是所述电子设备上的USB接口。例如所述电子设备具有多个USB接口,则所述第三可操控对象可以是指所述电子设备上的所有USB接口。
在确定所述第三可操控对象后,可以将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。因本实施例中所述第三可操控对象由多个,则将所述第三可操控对象的亮度由第四亮度调整到第五亮度具体可以是:将所有所述第三可操控对象的亮度由第四亮度调整到第五亮度,或者也可以是将所有所述第三可操控对象中的部分所述第三可操控对象的亮度由第四亮度调整到第五亮度。
参见图2,本发明还提供一种电子设备,所述电子设备可以包括壳体、显示装置、至少一个可操控对象及采集装置201。其中,所述显示装置可以设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象可以设置在所述壳体上,所述采集装置可以设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动。所述电子设备还可以包括第一确定装置202、第二确定装置203、第一控制装置204、第三确定装置205和第二控制装置206。所述电子设备还可以包括第四确定装置207、第五确定装置208和第三控制装置209。
采集装置201可以用于当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数。本发明实施例中,采集装置201可以是摄像头。
第一确定装置202可以用于根据所述第一运动参数确定人眼的第一视线焦点。
第二确定装置203可以用于当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象。
第二确定装置203具体可以用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象;
如果所述电子设备包括两个所述采集装置,将所述电子设备除所述显示区域外的其它区域对应到一第二网格中,所述第二网格由交叉的经线和纬线构成,所述第二网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个可操控对象,所述第二网格对应于所述第二采集装置,确定所述第一视线焦点在所述第二网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象。
第一控制装置204可以用于针对所述第一可操控对象进行控制。
第一控制装置204具体可以用于控制所述电子设备完成与所述第一可操控对象相应的第一功能;或控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
第三确定装置205可以用于当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件。
第三确定装置205具体可以用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件;
如果所述电子设备包括两个所述采集装置,将所述显示区域对应到一第一网格中,所述第一网格由交叉的经线和纬线构成,所述第一网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件,所述第一网格对应于所述第一采集装置,确定所述第一视线焦点在所述第一网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件。
第二控制装置206可以用于针对所述第一控件进行控制。
第二控制装置206具体可以用于控制所述电子设备打开与所述第一控件对应的显示界面;或控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
第二控制装置206具体可以用于通过所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点;根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置确定出第一方向;根据所述第一方向将所述第一控件由所述显示区域上的所述第一位置移动到所述第二位置。
第四确定装置207可以用于当所述电子设备包括一个所述采集装置时,确定通过所述采集装置采集人眼的运行,获得人眼的第一运动参数,及当所述电子设备包括两个所述采集装置时,根据人眼的眼皮运动或根据人眼的视线与所述显示区域所在平面的夹角确定具体通过其中哪个所述采集装置采集人眼的运行,获得人眼的第一运动参数。
第五确定装置208可以用于当所述第一视线焦点位于所述电子设备外的第一区域范围内时,根据所述第一视线焦点确定第一操作对象,及根据所述第一操作对象确定一第三可操控对象。
第五确定装置208具体可以用于通过所述采集装置获得的所述第一操作对象对应的第一图像信息确定所述第一操作对象。
第五确定装置208具体可以用于将所述第一图像信息与本地存储的各图像信息进行比对,确定与所述第一图像信息相同的第二图像信息,及确定所述第二图像信息对应于所述第三可操控对象。
第五确定装置208具体可以用于对所述第一图像信息进行图像识别,确定所述第一图像信息所对应的第一对象;确定所述第一对象对应于所述第三可操控对象。
第三控制装置209可以用于针对所述第三可操控对象进行控制。
第三控制装置209具体可以用于将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。
本发明实施例中的控制方法可以应用于一电子设备中,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述方法包括:当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;根据所述第一运动参数确定人眼的第一视线焦点;当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象确定第一可操控对象;针对所述第一可操控对象进行控制;当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件确定第一控件;针对所述第一控件进行控制。可以通过所述采集装置采集人眼的运行,通过人眼的运行确定人眼的所述第一视线焦点,当所述第一视线焦点落在所述电子设备的显示区域内时,可以对所述显示区域内显示的控件进行相应控制,当所述第一视线焦点落在所述电子设备上、且在所述显示区域外时,可以对所述电子设备显示区域外的可操控对象进行相应控制,从而可以通过人眼的运行来控制所述电子设备,使所述电子设备根据人眼的运行进行相应响应,操作十分便利,用户无需动手即可完成想要的操作或即可获取相应的提示,简化了操作过程,提高了操作效率,使所述电子设备更加智能,也提高了用户体验。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (22)

1.一种控制方法,所述方法应用于一电子设备中,其特征在于,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述方法包括:
当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;
根据所述第一运动参数确定人眼的第一视线焦点;
当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象;
针对所述第一可操控对象进行控制;
当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件;
针对所述第一控件进行控制;
当所述第一视线焦点位于所述电子设备外的第一区域范围内时,根据所述第一视线焦点采集第一图像信息;根据所述第一图像信息确定一第三可操控对象;针对所述第三可操控对象进行控制;
其中,根据所述第一图像信息确定第三可操控对象的步骤包括:
将所述第一图像信息与本地存储的各图像信息进行比对,确定与所述第一图像信息相同的第二图像信息;确定所述第二图像信息对应于所述第三可操控对象;
或,
对所述第一图像信息进行图像识别,确定所述第三可操控对象。
2.如权利要求1所述的方法,其特征在于,所述采集装置为摄像头。
3.如权利要求1所述的方法,其特征在于,在通过所述采集装置采集人 眼的运行,获得人眼的第一运动参数之前还包括步骤:当所述电子设备包括一个所述采集装置时,确定通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;当所述电子设备包括两个所述采集装置时,根据人眼的眼皮运动或根据人眼的视线与所述显示区域所在平面的夹角确定具体通过其中哪个所述采集装置采集人眼的运行,获得人眼的第一运动参数。
4.如权利要求3所述的方法,其特征在于,当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象的步骤包括:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象;
如果所述电子设备包括两个所述采集装置,将所述电子设备除所述显示区域外的其它区域对应到一第二网格中,所述第二网格由交叉的经线和纬线构成,所述第二网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个可操控对象,所述第二网格对应于第二采集装置,确定所述第一视线焦点在所述第二网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象。
5.如权利要求3所述的方法,其特征在于,当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件的步骤包括:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对 象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件;
如果所述电子设备包括两个所述采集装置,将所述显示区域对应到一第一网格中,所述第一网格由交叉的经线和纬线构成,所述第一网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件,所述第一网格对应于第一采集装置,确定所述第一视线焦点在所述第一网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件。
6.如权利要求1所述的方法,其特征在于,针对所述第一可操控对象进行控制的步骤包括:控制所述电子设备完成与所述第一可操控对象相应的第一功能;或控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
7.如权利要求1所述的方法,其特征在于,针对所述第一控件进行控制的步骤包括:控制所述电子设备打开与所述第一控件对应的显示界面;或控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
8.如权利要求7所述的方法,其特征在于,控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置的步骤包括:通过所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点;根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置 确定出第一方向;根据所述第一方向将所述第一控件由所述显示区域上的所述第一位置移动到所述第二位置。
9.如权利要求1所述的方法,其特征在于,对所述第一图像信息进行图像识别,确定所述第三可操控对象的步骤包括:
对所述第一图像信息进行图像识别,确定所述第一图像信息所对应的第一对象;确定所述第一对象对应于所述第三可操控对象。
10.如权利要求1所述的方法,其特征在于,所述第一图像信息通过所述采集装置获得。
11.如权利要求1所述的方法,其特征在于,针对所述第三可操控对象进行控制的步骤包括:将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。
12.一种电子设备,其特征在于,所述电子设备包括壳体、显示装置、至少一个可操控对象及采集装置;其中,所述显示装置设置在所述壳体内且所述显示装置的显示区域通过所述壳体显露,所述至少一个可操控对象设置在所述壳体上,所述采集装置设置在所述壳体上,用于当人眼进入到预定采集区域内时采集人眼运动;所述电子设备还包括:
所述采集装置用于当人眼进入到所述预定采集区域内时,通过所述采集装置采集人眼的运行,获得人眼的第一运动参数;
第一确定装置,用于根据所述第一运动参数确定人眼的第一视线焦点;
第二确定装置,用于当所述第一视线焦点位于所述电子设备上、且在所述显示区域外时,根据所述第一视线焦点从所述至少一个可操控对象中确定第一可操控对象;
第一控制装置,用于针对所述第一可操控对象进行控制;
第三确定装置,用于当所述第一视线焦点位于所述显示区域内时,根据所述第一视线焦点从所述显示区域中包括的至少一个控件中确定第一控件;
第二控制装置,用于针对所述第一控件进行控制;
第五确定装置,用于当所述第一视线焦点位于所述电子设备外的第一区域范围内时,根据所述第一视线焦点采集第一图像信息,及根据所述第一图像信息确定一第三可操控对象;
第三控制装置,用于针对所述第三可操控对象进行控制;
其中,所述第五确定装置具体用于:
将所述第一图像信息与本地存储的各图像信息进行比对,确定与所述第一图像信息相同的第二图像信息;确定所述第二图像信息对应于所述第三可操控对象;
或,
对所述第一图像信息进行图像识别,确定所述第三可操控对象。
13.如权利要求12所述的电子设备,其特征在于,所述采集装置为摄像头。
14.如权利要求12所述的电子设备,其特征在于,所述电子设备还包括:第四确定装置,用于当所述电子设备包括一个所述采集装置时,确定通过所述采集装置采集人眼的运行,获得人眼的第一运动参数,及当所述电子设备包括两个所述采集装置时,根据人眼的眼皮运动或根据人眼的视线与所述显示区域所在平面的夹角确定具体通过其中哪个所述采集装置采集人眼的运行,获得人眼的第一运动参数。
15.如权利要求14所述的电子设备,其特征在于,所述第二确定装置具体用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象;
如果所述电子设备包括两个所述采集装置,将所述电子设备除所述显示区域外的其它区域对应到一第二网格中,所述第二网格由交叉的经线和纬线构成,所述第二网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个可操控对象,所述第二网格对应于第二采集装置,确定所述第一视线焦点在所述第二网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一可操控对象。
16.如权利要求14所述的电子设备,其特征在于,所述第三确定装置具体用于:
如果所述电子设备包括一个所述采集装置,将所述电子设备对应到一第三网格中,所述第三网格由交叉的经线和纬线构成,所述第三网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件或一个可操控对象,所述第三网格对应于所述采集装置,确定所述第一视线焦点在所述第三网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件;
如果所述电子设备包括两个所述采集装置,将所述显示区域对应到一第一网格中,所述第一网格由交叉的经线和纬线构成,所述第一网格分为至少一个预设区域范围,其中每个所述预设区域范围唯一确定一个控件,所述第一网格对应于第一采集装置,确定所述第一视线焦点在所述第一网格中的位置,确定该位置落入的所述预设区域范围,根据该位置落入的所述预设区域范围确定所述第一控件。
17.如权利要求12所述的电子设备,其特征在于,所述第一控制装置具体用于:控制所述电子设备完成与所述第一可操控对象相应的第一功能;或控制所述电子设备将所述第一可操控对象的亮度由第一亮度调整为第二亮度,所述第一亮度不同于所述第二亮度;或控制所述电子设备将与所述第一可操控对象对应的所述显示区域中的第二控件的亮度由所述第一亮度调整为所述第二亮度。
18.如权利要求12所述的电子设备,其特征在于,所述第二控制装置具体用于:控制所述电子设备打开与所述第一控件对应的显示界面;或控制所述电子设备将所述第一控件由所述显示区域上的第一位置移动到第二位置,所述第一位置不同于所述第二位置;或控制所述电子设备对所述第一控件进行放大操作或缩小操作;或控制所述电子设备将与所述第一控件对应的所述显示区域外的第二可操控对象的亮度由第三亮度调整为第四亮度,所述第三亮度不同于所述第四亮度。
19.如权利要求18所述的电子设备,其特征在于,所述第二控制装置具体用于:通过所述采集装置获得所述人眼的第二运动参数,通过所述第二运动参数确定人眼的第二视线焦点;根据所述第一视线焦点所在的位置与所述第二视线焦点所在的位置确定出第一方向;根据所述第一方向将所述第一控件由所述显示区域上的所述第一位置移动到所述第二位置。
20.如权利要求12所述的电子设备,其特征在于,所述第五确定装置具体用于:
对所述第一图像信息进行图像识别,确定所述第一图像信息所对应的第一对象;确定所述第一对象对应于所述第三可操控对象。
21.如权利要求12所述的电子设备,其特征在于,所述第一图像信息通过所述采集装置获得。
22.如权利要求12所述的电子设备,其特征在于,所述第三控制装置具体用于将所述第三可操控对象的亮度由第四亮度调整到第五亮度,所述第四亮度不同于所述第五亮度。
CN201210298140.2A 2012-08-20 2012-08-20 一种控制方法及电子设备 Active CN103631364B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210298140.2A CN103631364B (zh) 2012-08-20 2012-08-20 一种控制方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210298140.2A CN103631364B (zh) 2012-08-20 2012-08-20 一种控制方法及电子设备

Publications (2)

Publication Number Publication Date
CN103631364A CN103631364A (zh) 2014-03-12
CN103631364B true CN103631364B (zh) 2017-06-27

Family

ID=50212539

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210298140.2A Active CN103631364B (zh) 2012-08-20 2012-08-20 一种控制方法及电子设备

Country Status (1)

Country Link
CN (1) CN103631364B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103902157B (zh) * 2014-03-14 2017-06-27 联想(北京)有限公司 一种信息处理方法和电子设备
CN104461005B (zh) * 2014-12-15 2018-01-02 东风汽车公司 一种车载屏幕开关控制方法
CN104598029A (zh) * 2015-01-12 2015-05-06 联想(北京)有限公司 一种控制电子设备的方法及电子设备
CN104811532A (zh) * 2015-03-23 2015-07-29 努比亚技术有限公司 终端屏显参数的调整方法及装置
CN105892632A (zh) * 2015-11-16 2016-08-24 乐视致新电子科技(天津)有限公司 一种判断虚拟现实应用的ui控件被选中的方法和装置
CN108140080B (zh) * 2015-12-09 2021-06-01 华为技术有限公司 一种显示的方法、装置及系统
WO2017113757A1 (zh) * 2015-12-31 2017-07-06 北京小鸟看看科技有限公司 一种环绕式界面布局方法、三维沉浸式环境下内容切换方法和列表切换方法
CN105843887B (zh) * 2016-03-21 2020-10-27 联想(北京)有限公司 信息处理方法及电子设备
CN109782920A (zh) * 2019-01-30 2019-05-21 上海趣虫科技有限公司 一种用于扩展现实的人机交互方法及处理终端
CN109871253A (zh) * 2019-01-31 2019-06-11 维沃移动通信有限公司 一种显示方法及终端
CN115857661A (zh) * 2021-09-24 2023-03-28 华为技术有限公司 语音交互方法、电子设备及计算机可读存储介质
CN113900518A (zh) * 2021-09-30 2022-01-07 Oppo广东移动通信有限公司 人眼注视数据采集方法、装置、存储介质与电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
CN101344919A (zh) * 2008-08-05 2009-01-14 华南理工大学 视线跟踪方法及应用该方法的残疾人辅助系统
CN101576800A (zh) * 2008-05-06 2009-11-11 纬创资通股份有限公司 驱动电子装置显示页面卷动的方法与装置
TW201005651A (en) * 2008-07-24 2010-02-01 Utechzone Co Ltd Page-turning method for electronic document through eyeball control and system thereof, pupil position determination method and pupil analysis module
CN102176191A (zh) * 2011-03-23 2011-09-07 山东大学 一种基于视线跟踪的电视机操控方法
CN102609086A (zh) * 2011-12-26 2012-07-25 西北工业大学 适用于视线输入的汉字输入方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6578962B1 (en) * 2001-04-27 2003-06-17 International Business Machines Corporation Calibration-free eye gaze tracking

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
CN101576800A (zh) * 2008-05-06 2009-11-11 纬创资通股份有限公司 驱动电子装置显示页面卷动的方法与装置
TW201005651A (en) * 2008-07-24 2010-02-01 Utechzone Co Ltd Page-turning method for electronic document through eyeball control and system thereof, pupil position determination method and pupil analysis module
CN101344919A (zh) * 2008-08-05 2009-01-14 华南理工大学 视线跟踪方法及应用该方法的残疾人辅助系统
CN102176191A (zh) * 2011-03-23 2011-09-07 山东大学 一种基于视线跟踪的电视机操控方法
CN102609086A (zh) * 2011-12-26 2012-07-25 西北工业大学 适用于视线输入的汉字输入方法

Also Published As

Publication number Publication date
CN103631364A (zh) 2014-03-12

Similar Documents

Publication Publication Date Title
CN103631364B (zh) 一种控制方法及电子设备
US11520477B2 (en) Augmented reality scrollbar
US11741917B2 (en) Eclipse cursor for mixed reality displays
JP7123148B2 (ja) 複合現実ディスプレイにおける仮想コンテンツのための掩蔽カーソル
KR102641655B1 (ko) 3차원 공간에서 가상 객체들 선택
CN108459811A (zh) 虚拟道具的处理方法、装置、电子设备及存储介质
CN109313511A (zh) 提供虚拟空间的方法、提供虚拟体验的方法、程序以及记录介质
CN105074625B (zh) 信息处理设备、信息处理方法及计算机可读记录介质
EP2631739B1 (en) Contactless gesture-based control method and apparatus
EP4196866A2 (en) Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US20130082922A1 (en) Tactile glove for human-computer interaction
CN108595002B (zh) 一种信息处理方法及电子设备
KR20140128275A (ko) 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법
US20190272040A1 (en) Manipulation determination apparatus, manipulation determination method, and, program
CN105867599A (zh) 一种手势操控方法及装置
CN109782920A (zh) 一种用于扩展现实的人机交互方法及处理终端
CN107179876A (zh) 基于虚拟现实系统的人机交互装置
CN104156061B (zh) 直观的姿势控制
Chertoff et al. An exploration of menu techniques using a 3D game input device
Tuntakurn et al. Natural interactive 3D medical image viewer based on finger and arm gestures
TW201234239A (en) Device and method for proximity gesture detection
Nakakoji et al. Tciex: an environment for designing and experiencing a variety of visuo-haptic sensory conflicts
CN106896904A (zh) 一种控制方法及电子设备
AU2012265605A1 (en) Method, system and apparatus for generating a virtual user interface
CN116194868A (zh) 用于与三维环境进行交互的设备、方法和图形用户界面

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant