CN103529933A - 眼动操控方法及系统 - Google Patents

Abstract

本发明提供一种眼动操控方法及系统，应用于电子显示设备，且电子显示设备包括显示屏幕且执行至少一应用模块；本发明的眼动操控方法至少包括下列步骤：首先，启动眼动操控模式；接着，通过眼动侦测单元撷取眼部影像，并产生眼部位置信息；再通过分析单元接收眼部位置信息，并将眼部位置信息映像到显示屏幕以产生分析信息；最后，通过处理单元接收分析信息，并依据分析信息产生眼动指针；其中处理单元依据眼动指针对应上述应用模块的位置，于显示屏幕产生预览窗口。本发明提供一种眼动操控方法及系统，以解决现有的电子显示设备旋转画面时不直觉、不够快速的缺点，利用眼动指针直接控制电子显示设备。

Description

眼动操控方法及系统

技术领域

本发明是有关于一种操控方法及系统，且特别是有关于一种眼动操控方法及系统。

背景技术

随着现在电子产品的微小化及其便携性的提升，利用智能型手机、台式机、平板电脑或是笔记本电脑浏览网页、阅读电子文件、观看影片或个人数字助理的应用已趋于成熟。

一般而言，电子显示设备多是通过键盘、鼠标或是触控组件给予电子显示设备控制指令，特别是在浏览电子文件时，通过光标位置推测用户阅读位置或是于操控的控制项目；换言之，使用者眼睛焦点聚焦于上述控制项目后，还须通过键盘、鼠标或是触控组件才可以操控上述控制项目，实为不直觉、不够快速的操控方法。

发明内容

本发明提供一种眼动操控方法及系统，以符合使用者的需求。

本发明解决电子显示设备不直觉、不够快速的操控方法。

本发明提供一种眼动操控方法，应用于电子显示设备，且电子显示设备包括显示屏幕且执行至少一应用模块；本发明的眼动操控方法至少包括下列步骤：首先，启动眼动操控模式；接着，通过眼动侦测单元撷取眼部影像，并产生眼部位置信息；再通过分析单元接收眼部位置信息，并将眼部位置信息映像到显示屏幕以产生分析信息；最后，通过处理单元接收分析信息，并依据分析信息产生眼动指针；其中处理单元依据眼动指针对应应用模块的位置，于显示屏幕产生预览窗口。

本发明还提供一种眼动操控系统，应用于电子显示设备，电子显示设备包括显示屏幕且执行至少一应用模块；本发明的眼动操控系统至少包括：眼动侦测单元、分析单元以及处理单元；眼动侦测单元设置于显示屏幕的一侧，而分析单元与眼动侦测单元电性连接，处理单元则与分析单元电性连接；其中，眼动侦测单元提供眼部位置信息给分析单元，分析单元依据眼部位置信息映像到显示屏幕而提供分析信息给处理单元，处理单元再依据分析信息于显示屏幕产生眼动指针，处理单元依据眼动指针对应应用模块的位置，于显示屏幕产生预览窗口。

承上所述，本发明提供一种眼动操控方法及系统，以解决现有的电子显示设备旋转画面时的缺点。

附图说明

图1所示为依据本发明一实施例的眼动操控方法的步骤流程图；

图2所示为依据本发明一实施例的眼动操控方法于电子显示设备产生眼动指针的示意图；

图3所示为依据本发明一实施例的眼动操控方法应用于电子显示设备，且电子显示设备的显示画面为电子文件的操作示意图；

图4所示为依据本发明一实施例执行图3的控制项目的控制功能后的电子显示设备的显示画面的示意图；

图5所示为依据本发明一实施例的眼动操控方法应用于电子显示设备，且显示屏幕产生预览窗口的示意图；以及

图6所示为依据本发明一实施例的眼动操控系统的结构图。

具体实施方式

以下将参照相关图式，说明依本发明较佳实施例的眼动操控方法的步骤、眼动操控系统的结构以及应用示意情况，其中相同的结构、步骤及单元将以相同的参照符号加以说明；且为了便于理解，与本发明非直接相关的结构、步骤及组件将省略不绘出；此外，以下所称的电子显示设备可为笔记本电脑、平板电脑、台式机、或智能型手机，且不以上述为限。

请先参考图1，图2及图6，图1为本发明眼动操控方法的步骤流程图，图2为本发明眼动操控方法于电子显示设备产生眼动指针的示意图。

本发明为一种眼动操控方法应用于电子显示设备2，电子显示设备2包括显示屏幕22，且电子显示设备可执行至少一应用模块；眼动操控系统1包括眼动侦测单元11。

本发明的眼动操控方法至少包括下列步骤：首先，启动眼动操控模式(步骤(S01)；接着，通过眼动侦测单元11撷取眼部影像，并产生眼部位置信息(S02)；此可通过眼动侦测单元11(例如为眼球追踪单元)，通过启动眼动侦测单元11以启动眼动操控模式并产生眼部位置信息。

眼动侦测单元11可撷取用户的眼部影像、眼部坐标或其组合，并传送给分析单元12；此处所称的眼部影像，为用户眼部的轮廓连线，而眼部坐标则可为通过定位虹膜与结膜的交界处，定义出虹膜的轮廓连线；但无论是眼部影像、眼部坐标或其组合在撷取后将其转换成绝对坐标，并传送给分析单元12。

接着，再通过分析单元12接收眼部位置信息，并将眼部位置信息映像到显示屏幕22以产生分析信息(步骤S03)。

分析单元12接收眼部位置信息，可依据眼部位置信息产生分析信息；此处的眼部位置信息可为用户的眼部坐标，由眼动侦测单元11所撷取的坐标映射到显示屏幕22，故分析单元12可得知使用者于显示屏幕22的视线焦点的位置(以图2的虚线表示)。

实际操作时，眼动侦测单元11将不停的侦测使用者眼部的动作情况；换言之，显示屏幕22上的眼动指针221会依据使用者视线移动的轨迹于显示屏幕22产生相对动作。

接着，通过处理单元13接收分析信息，并依据分析信息产生眼动指针221(步骤S04，可参考图2)；且处理单元13依据眼动指针221的位置，操控显示屏幕22对应位置的应用模块；详细而言，处理单元13于显示屏幕22产生眼动指针221后，当眼动指针221的位置移动至显示屏幕22对应的应用模块时，将于显示屏幕22产生预览窗口(步骤S05)；其中预览窗口可包括至少一控制项目，且控制项目还包括多个控制功能；各控制功能可对应不同的执行功能；或者亦可有一实施例的预览窗口可为选自于上述应用模块中的影像信息(例如图片或是影像截图)。

在本实施例中，应用模块系用以自动启一动应用程序，此处所称的应用模块可为显示屏幕22对应不同的内容(例如电子文件、网页或是应用软件)的概括称呼，且应用模块可于显示屏幕22设置多个控制引导块(例如文本块、图案、或程序启动快捷虚拟按键)；因此，当眼动指针221移动到任一应用模块时，处理单元13可依据眼动指针221的位置，于显示屏幕22对应产生预览窗口。

补充说明的是，此处所称移动为眼动指针221实际移动到例如应用模块的图像上或者移动到应用模块图像的周围触发区，以使处理单元13能够辨识需操控的控制对象；且图2虽绘示箭头形状的眼动指针221，但形状不以此为限，亦可有实施例的眼动指针221为亮点，或是可不显示实体眼动指针221的形状于显示屏幕22。

此外，本发明眼动操控方法还包括步骤：输入确认指令，以确认选择至少其一上述这些控制功能(步骤S06)；此处所称的确认指令，可为例如眼动指针221停留于应用模块的时间超过默认时间、眨眼多次、或者眼动指针221移动到控制项目的其控制功能时搭配用户不同手势触碰等方式，使处理单元13传送确认信号给执行单元14，以确认启动控制项目的至少其一上述这些控制功能。

除了上述步骤以外，本发明还可包括通过执行单元14执行控制项目(步骤S07)。

以下将说明，本发明眼动操控方法应用于电子显示设备的实施方式。

请继续参考图3及图4，图3为本发明眼动操控方法应用于电子显示设备，且电子显示设备的显示画面为电子文件的操作示意图，图4则为执行图3的控制项目的控制功能后的电子显示设备的显示画面的示意图。

若使用者通过电子显示设备阅读网页或是电子文件，则显示屏幕22可显示电子文件或网页，且电子文件或网页包括至少一文字区，且各文字区对应应用模块；此处所称的文字区可为段落、句子或单词，换言之，段落、句子或单词都可设定为应用模块的引导块；所以，当眼动指针221移动到对应的应用模块的位置时，处理单元13可依据眼动指针221的位置，产生预览窗口222，且预览窗口222包括至少一控制项目2221；各控制项目2221又还可包括多个控制功能2221a，以操控对应位置的应用模块。

需补充说明的是，本实施例仅例示于预览窗口222包括控制项目2221、且控制项目2221包括五控制功能2221a的实施例，但不应此为限。

详言之，控制功能2221a可为复制应用模块(文字区)中的文字、缩放应用模块(文字区)中的文字、翻译应用模块(文字区)中的文字、亮标应用模块(文字区)中的文字、开启或关闭应用模块中的电子文件或其组合，但不以此为限；也可有实施例的控制项目2221的控制功能2221a还包括朗读文字区或通过电子邮件邮寄等控制功能。

当本实施例的眼动指针221移动到对应的应用模块的位置或附近时，跳出对应应用模块的简单操控指令的预览窗口222，例如但不限于复制、放大、翻译、标注、或关闭，以使使用者可以直觉地将眼动指针221移动到欲选择的控制功能2221a，以执行应用模块；例如，若将眼动指针221移动到放大的控制功能2221a上，则处理单元13及执行单元14可启动并执行放大应用模块(文字区)中的文字(图4)。

此处的控制功能2221a亮标或标注应用模块(文字区)中的文字为将应用模块(文字区)中的段落、句子或单词加注底色，让使用者将电子文件或是网页内重要的段落、句子或单词加以注记，以方便下次阅读时可快速地找到特定段落、句子或单词。

此外，虽然本实施例显示为多个操控指令，但亦可有实施例，使用者可预先调整成于阅读模式，眼动指针221的控制项目2221仅具控制功能2221a(例如翻译)，故使用者于阅读过程中眼动指针221所选取的文字，将会将直接进行文字翻译，将不需再额外选择所欲执行的动作，以符合使用者的阅读习惯。

再者，为了提供更佳的阅读体验，也可设定当眼动指针221移动到预览窗口222的控制项目2221的控制功能2221a时需停留至少预设时间或例如连续眨眼两下，才启动控制功能2221a，避免不必要的执行应用模块影响阅读；在其他实施例中，眼动指针标221的操控方法也可搭配使用者的手势触碰作为确认指令以启动应用模块，本发明不以此为限；或者更有一实施例中，使用者利用输入时，可通过眼动指针221选取正确的单字。

请参考图5，为本发明眼动操控方法应用于电子显示设备，且显示屏幕产生预览窗口的示意图。

在本实施例中，电子显示设备2的显示屏幕22至少包括多个应用模块，且具有图像各自对应上述这些应用模块；与前述实施例不同的是，眼动操控方法还包括以下步骤：当眼动指针(图未绘出)移动至应用模块时，显示屏幕22于眼动指针的位置产生预览窗口222。

举例而言，若应用模块为相簿文件夹时，当眼动指针移动至应用模块时，将会产生包括相簿文件夹内的照片缩图，以形成预览窗口222；换言之，本实施例的控制项目为图像(照片缩图)，与前述实施例的控制项目为选单的实施例有所不同；使用者可将眼动指针移动至任一图像，其可启动例如开启图片或拨放文件夹图片等控制功能；或者，若应用模块为影片，则当眼动指针移动至应用模块时，将会产生影片的内容截图，以形成预览窗口222。

最后，请一并参考图2及图6，图6为本发明眼动操控系统的结构图。

眼动操控系统1应用于电子显示设备2，电子显示设备2包括显示屏幕22；且眼动操控系统1至少包括眼动侦测单元11、分析单元12以及处理单元13；眼动侦测单元11设置于显示屏幕22的一侧，而分析单元12与眼动侦测单元11电性连接，处理单元13则与分析单元12电性连接。

眼动侦测单元11提供眼部位置信息给分析单元12，分析单元12依据眼部位置信息映像到显示屏幕22而提供分析信息给处理单元13，处理单元13再依据分析信息于显示屏幕22产生眼动指针221。

分析单元12接收眼部位置信息，并依据眼部位置信息产生分析信息；此处的眼部位置信息可为用户的眼部坐标，由眼动侦测单元11所撷取的坐标将可映射到显示屏幕，故分析单元12可得知使用者于显示屏幕22的视线焦点的位置。

此外，眼动操控系统1还可包括执行单元14，且执行单元14与处理单元13电性连接；且执行单元14用以执行应用模块。

需特别说明的是，虽然本实施例的处理单元13与执行单元14为独立的单元及结构，但也可将处理单元13与执行单元14结合于单一芯片上，达到与本实施例相同的效果。

其余的单元及组件间的连接关系与前述实施例相同，故不再赘述。

综上所述，本发明提供一种眼动操控方法及系统，为通过眼动侦测单元撷取眼部影像，再依序通过分析单元及处理单元的处理，于显示屏幕产生眼动指针。并通过眼动指针于对应应用模块的位置，产生预览窗口，并于预览窗口内选取欲执行的控制项目的控制功能，以达成利用眼动指针直接控制电子显示设备的目的。

虽然本发明已以较佳实施例揭露如上，然其并非用以限定本发明，任何所属技术领域中具有通常知识者，在不脱离本发明的精神和范围内，当可作些许的更动与润饰，因此本发明的保护范围当视权利要求书所界定者为准。

Claims (14)

1.一种眼动操控方法，应用于电子显示设备，上述电子显示设备包括显示屏幕且执行至少一应用模块，其特征在于，上述眼动操控方法包括下列步骤：

启动眼动操控模式；

通过眼动侦测单元撷取眼部影像，并产生眼部位置信息；

通过分析单元接收上述眼部位置信息，并将上述眼部位置信息映像到上述显示屏幕以产生分析信息；以及

通过处理单元接收上述分析信息，并依据上述分析信息产生眼动指针；

其中上述处理单元依据上述眼动指针对应上述应用模块的位置，于上述显示屏幕产生预览窗口。

2.根据权利要求1所述的眼动操控方法，其特征在于，其中上述预览窗口选自于上述应用模块中的影像信息。

3.根据权利要求1所述的眼动操控方法，其特征在于，其中上述预览窗口包括至少一控制项目。

4.根据权利要求3所述的眼动操控方法，其特征在于，还包括：

通过执行单元，执行上述控制项目。

5.根据权利要求3所述的眼动操控方法，其特征在于，其中上述控制项目包括多个控制功能，上述这些控制功能为：

复制、缩放、翻译、亮标上述应用模块中的文字、开启或关闭上述应用模块中的电子文件或其组合。

6.根据权利要求3所述的眼动操控方法，其特征在于，其中上述控制项目为图像或选单。

7.根据权利要求5所述的眼动操控方法，其特征在于，还包括：

输入确认指令，以确认选择至少其一上述这些控制功能。

8.一种眼动操控系统，应用于电子显示设备，上述电子显示设备包括显示屏幕且执行至少一应用模块，其特征在于，上述眼动操控系统包括：

眼动侦测单元，设置于上述显示屏幕的一侧；

分析单元，与上述眼动侦测单元电性连接；以及

处理单元，与上述分析单元电性连接；

其中，上述眼动侦测单元提供眼部位置信息给上述分析单元，上述分析单元依据上述眼部位置信息映像到上述显示屏幕而提供分析信息给上述处理单元，处理单元再依据上述分析信息于上述显示屏幕产生眼动指针，上述处理单元依据眼动指针对应上述应用模块的位置，于上述显示屏幕产生预览窗口。

9.根据权利要求8所述的眼动操控系统，其特征在于，其中上述预览窗口选自于上述应用模块中的影像信息。

10.根据权利要求8所述的眼动操控系统，其特征在于，其中上述预览窗口包括至少一控制项目。

11.根据权利要求10所述的眼动操控系统，其特征在于，还包括：

执行单元，与上述处理单元电性连接，并执行上述控制项目。

12.根据权利要求10所述的眼动操控系统，其特征在于，其中上述控制项目包括多个控制功能，上述这些控制功能为：

复制、缩放、翻译、亮标上述应用模块中的文字、开启或关闭上述应用模块中的电子文件或其组合。

13.根据权利要求10所述的眼动操控系统，其特征在于，其中上述控制项目为图像或选单。

14.根据权利要求8所述的眼动操控系统，其特征在于，其中上述电子显示设备为智能型手机、台式机、平板电脑、或是笔记本电脑。

Images