CN103869958A - 电子装置控制方法以及电子装置 - Google Patents

电子装置控制方法以及电子装置 Download PDF

Info

Publication number
CN103869958A
CN103869958A CN201210550398.7A CN201210550398A CN103869958A CN 103869958 A CN103869958 A CN 103869958A CN 201210550398 A CN201210550398 A CN 201210550398A CN 103869958 A CN103869958 A CN 103869958A
Authority
CN
China
Prior art keywords
electronic installation
electronic
head
sight line
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201210550398.7A
Other languages
English (en)
Other versions
CN103869958B (zh
Inventor
黄昱豪
李宜方
高铭璨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pixart Imaging Inc
Original Assignee
Pixart Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pixart Imaging Inc filed Critical Pixart Imaging Inc
Priority to CN201210550398.7A priority Critical patent/CN103869958B/zh
Priority to CN201710414748.XA priority patent/CN107390862A/zh
Publication of CN103869958A publication Critical patent/CN103869958A/zh
Application granted granted Critical
Publication of CN103869958B publication Critical patent/CN103869958B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements

Abstract

本发明公开了一种电子装置控制方法,使用在电子装置上,包含:侦测眼球的视线在该电子装置的显示器上的位置;以及若该视线停留在该显示器上目标物的时间不超过预定时间周期,则使该电子装置动作在第一模式,若该视线停留在该目标物的时间超过该预定时间周期,则使该电子装置动作在第二模式,其中在该第二模式中,该电子装置侦测包含该眼球的头部的转动动作,并根据该转动动作执行相对应的动作。

Description

电子装置控制方法以及电子装置
技术领域
本发明有关于电子装置控制方法以及使用这个电子装置控制方法的电子装置,特别有关于侦测头部转动以执行相对应动作的电子装置控制方法以及使用这个电子装置控制方法的电子装置。
背景技术
现有技术中,使用者可使用视线来控制电子装置。图1A、图1B绘示了现有技术中侦测视线以控制游标的示意图。请留意虚框内的左眼EL和右眼ER是由垂直头部H的X方向看向左眼EL和右眼ER的放大图示。
电子装置100具有一个眼球追踪装置103,其可用以追踪使用者的视线。在图1A中,使用者的头部H跟电视平行而未转动,视线落在电子装置100的显示器101上的游标Cr,而其左眼EL和右眼ER会如虚框内的图示般,会正视着游标Cr。而在图1B中,使用者会转动左眼EL和右眼ER至右边,眼球追踪装置103会侦测到使用者视线往右移动,因此游标Cr在显示器101上会有相对应的位移。
然而,在日常生活中,人们较少执行眼球上下转动的动作,因此侦测视线来控制电子装置较不符合使用者的习惯,可能会让使用者觉得不便或疲劳。
发明内容
因此,本发明一个目的是公开一种根据头部转动来控制电子装置的电子装置控制方法。
本发明的另一个目的是公开一种可根据头部转动来控制其动作的电子装置。
本发明一个实施例公开了一种电子装置控制方法,使用在电子装置上,包含:侦测眼球的视线在该电子装置的显示器上的位置;以及若该视线停留在该显示器上目标物的时间不超过预定时间周期,则使该电子装置动作在第一模式,若该视线停留在该目标物的时间超过该预定时间周期,则使该电子装置动作在第二模式,其中在该第二模式中,该电子装置侦测包含该眼球的头部的转动动作,并根据该转动动作执行相对应的动作。
本发明另一个实施例公开了一种可通过头部转动控制其动作的电子装置,包含:显示器;眼球追踪装置,用以侦测眼球的视线在该显示器上的位置;控制单元,若该视线停留在该显示器上目标物的时间不超过预定时间周期,则使该电子装置动作在第一模式,若该视线停留在该目标物的时间超过该预定时间周期,则使该电子装置动作在第二模式;以及头部转动侦测装置,用以侦测包含该眼球的头部的转动动作,在该第二模式中该控制单元使该电子装置根据该转动动作执行相对应的动作。
根据前述实施例,使用者可通过头部转动来控制电子装置,可避免现有技术中通过视线控制电子装置的问题。此外,使用者可通过视线来触发头部转动控制,这样可让使用者完全不用通过手输入指令,更增加了使用上的便利性。
附图说明
图1A、图1B绘示了现有技术中侦测视线以控制游标的示意图。
图2绘示了根据本发明一个实施例的可通过头部转动控制其动作的电子装置的方块图。
图3A、图3B以及图3C绘示了图2中的头部转动侦测装置如何判断头部转动的其中一例。
图4A以及图4B绘示了根据本发明一个实施例的,以头部转动控制游标的示意图。
图5A、图5B以及图5C绘示了根据本发明一个实施例的,以头部转动进行翻页动作的示意图。
图6A以及图6B绘示了根据本发明一个实施例的,以头部转动滑动画面的示意图。
图7绘示了根据本发明一个实施例的电子装置控制方法的流程图。
其中,附图标记说明如下:
100、200电子装置
201、101显示器
103、203眼球追踪装置
205控制单元
207头部转动侦侧装置
209光源
具体实施方式
图2绘示了根据本发明一个实施例的可通过头部转动控制其动作的电子装置200的方块图。如图2所示,电子装置200包含一个显示器201、一个眼球追踪装置203、一个控制单元205以及一个头部转动侦侧装置207。眼球追踪装置203用以侦测一个眼球的视线在显示器201上的一个位置。控制单元205用以控制电子装置200的动作。若视线停留在显示器上一个目标物(例如一个游标或一个任意点)的时间不超过一个预定时间周期,则使电子装置200动作在一个第一模式。若视线停留在目标物的时间超过预定时间周期,则使电子装置200动作在一个第二模式。在一个实施例中,在第一模式下,控制单元205使电子装置200根据视线而执行相对应的动作。头部转动侦测装置207用以侦测包含眼球的一个头部的转动动作,在第二模式中控制单元205使电子装置200根据头部转动动作执行相对应的动作。
头部转动侦测装置207可是各种不同形态的电子装置。举例来说,可以一个重力传感器或一个陀螺仪来判断头部的转动动作。或者,电子装置200可包含一个光源209,光源209会如图3A所示般将光点L投射在眼睛E上。若如图3B所示侦测到瞳孔P转动但光点L在眼睛E上的位置未移动时,则表示眼睛转动但头部未转动。相反的,若如图3C所示侦测到瞳孔P转动且光点L在眼睛E上的也有变化时,则表示头部转动。然请留意,熟知此项技艺者当可通过各种不同机制侦测头部的转动,并不受限在前述的例子。
然请留意,在图2的实施例中,眼球追踪装置203、控制单元205以及头部转动侦侧装置207和显示器201均位在同一个电子装置200中。然而,这些元件也可以位在不同装置上。举例来说,头部转动侦侧装置207位在另一个携带式装置(例如眼镜或是头戴式的装置),这个携带式装置会由使用者配戴在身上,并在判断头部转动的动作后,把相关信息以无线或有线方式传送给控制单元205。在这个实施例中,这个携带式装置和电子装置200视为一组可通过头部转动控制其动作的电子装置。同样的,眼球追踪装置203也可位在这一类的携带式装置,并在判断眼球的视线后,把相关信息以无线或有线方式传送给控制单元205。而控制单元205在这一类实施例中,可设置在电子装置200中,也可设置在携带式装置中,并会以无线或有线的方式传送命令给电子装置200。此外,也请留意在图2的实施例中,眼球追踪装置203、控制单元205以及头部转动侦侧装置207以不同的硬件表示之,然而这些元件也可整合为一个或两个硬件。举例来说,可在一个处理单元中写入韧体,来执行眼球追踪装置203、控制单元205以及头部转动侦侧装置207其中至少其一的功能。
以下将以图示举例说明如何以头部转动控制电子装置200。须注意的是,在后续的图示中,为了方便说明会省略掉一些图2中电子装置200所具有的元件。图4A以及图4B绘示了根据本发明一个实施例的,以头部转动控制游标的示意图。与图1A和图1B相同,虚框内的左眼EL和右眼ER是由垂直头部H的X方向看向左眼EL和右眼ER的放大图示。在图4A中,电子装置200运作在第一模式,也即会如图1A和图1B所示般根据使用者的视线控制显示器201上的游标Cr。使用者若欲进入第二模式,则须注视着显示器201上的游标Cr(此时游标Cr即是前述的目标物),在注视游标Cr经过一个预定时间周期后,电子装置200会进入图4B所示的第二模式。
在图4B中,使用者的头部H向左转动,游标Cr会相对应头部H的转动动作而移动。此时使用者的视线仍可注视着游标确认其动作,因此左眼EL和右眼ER可如图4B所示般仍注意着前方。请留意,电子装置200运作在第二模式下时,视线落在何处并不影响其动作,因此在图4B中,即使使用者的视线不注视着游标,仍可以头部H的转动动作来控制游标的移动。
图5A、图5B以及图5C绘示了根据本发明一个实施例的,以头部转动进行翻页动作的示意图。在图5A中,显示器201原本播放着画面P1(P1可是一个网页画面、一个照片或一个文件等),使用者可注视着显示器201中的任意点(如点F1或F2)超过一个预定时间周期来使电子装置200进入图5B所示的第二模式。而在图5B中,使用者H的头部向右转动,此时显示器201会翻至画面P1的下一页而显示画面P2。此时若使用者的头部H再往右转动,可再翻至画面P2的下一页,而若使用者的头部H往左转动,则可往回翻页至画面P2的上一页,也就是如图5C所示般回到画面P1
除了如前述般以头部的左右转动来控制电子装置外,也可以用头部的上下转动来控制电子装置。图6A以及图6B绘示了根据本发明一个实施例的,以头部转动滑动画面的示意图。在图6A中,显示器201显示数据(如一个文件或一个网页资料)中的第一行L1至第6行L6。使用者注视着显示器201上任意点(如F1)超过一个预定时间周期来使电子装置200进入第二模式。而在图6B中,使用者往上转动头部,显示器201上的数据会相对应的往上滑动,因此会如图6B所示般,显示数据中的第3行L3至第8行L8
纵上所述,使用者可以头部转动使电子装置执行各种不同的功能。但请留意前述转动方向和功能的对应关是仅用以举例,并非用以限定本发明。
根据前述实施例,可得到一个电子装置控制方法。图7绘示了根据本发明一个实施例的电子装置控制方法的流程图,其包含了下列步骤:
步骤701
侦测一个眼球的视线在一个显示器上的位置。
步骤703
判断视线停留在显示器上一个目标物的时间是否超过一个预定时间周期。若否则到步骤705,若是则到步骤707。
步骤705
使电子装置动作在一个第一模式。在一个实施例中,在第一模式下,电子装置根据视线而执行相对应的动作,如图1A和图1B所示,但并不限定。
步骤707
使该电子装置动作在一个第二模式。其中在第二模式中,电子装置侦测一个头部的转动动作,并根据转动动作执行相对应的动作。例如图4A和图4B中,根据头部转动移动游标Cr,或如图5A、图5B和图5C中,根据头部转动进行翻页,也可如图6A和图6B中,根据头部转动滑动画面。
根据前述实施例,使用者可通过头部转动来控制电子装置,可避免现有技术中通过视线控制电子装置的问题。此外,使用者可通过视线来触发头部转动控制,这样可让使用者完全不用通过手输入指令,更增加了使用上的便利性。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (13)

1.一种电子装置控制方法,使用在电子装置上,包含:
侦测眼球的视线在该电子装置的显示器上的位置;以及
若该视线停留在该显示器上目标物的时间不超过预定时间周期,则使该电子装置动作在第一模式,若该视线停留在该目标物的时间超过该预定时间周期,则使该电子装置动作在第二模式,其中在该第二模式中,该电子装置侦测包含该眼球的头部的转动动作,并根据该转动动作执行相对应的动作。
2.如权利要求1所述的电子装置控制方法,其中在该第一模式中,该电子装置根据该视线而执行相对应的动作。
3.如权利要求2所述的电子装置控制方法,其中在该第一模式中,该电子装置根据该视线而移动该显示器上的游标。
4.如权利要求1所述的电子装置控制方法,其中在该第二模式中,该电子装置根据该转动动作而在该显示器上进行下列动作至少其一:移动游标、翻页和滑动画面。
5.如权利要求1所述的电子装置控制方法,进一步包括将光点投射在该眼球上,并根据该光点与该眼球的位置关系来判断该头部的该转动动作。
6.如权利要求1所述的电子装置控制方法,是使用重力传感器或陀螺仪来侦测该头部的该转动动作。
7.一种可通过头部转动控制其动作的电子装置,包含:
显示器;
眼球追踪装置,用以侦测眼球的视线在该显示器上的位置;
控制单元,若该视线停留在该显示器上目标物的时间不超过预定时间周期,则使该电子装置动作在第一模式,若该视线停留在该目标物的时间超过该预定时间周期,则使该电子装置动作在第二模式;以及
头部转动侦测装置,用以侦测包含该眼球的头部的转动动作,在该第二模式中该控制单元使该电子装置根据该转动动作执行相对应的动作。
8.如权利要求7所述的电子装置,其中在该第一模式中,该控制单元使该电子装置根据该视线而执行相对应的动作。
9.如权利要求8所述的电子装置,其中在该第一模式中,该控制单元使该电子装置根据该视线而移动该显示器上的游标。
10.如权利要求7所述的电子装置,其中在该第二模式中,该控制单元使该电子装置根据该转动动作而在该显示器上进行下列动作至少其一:移动游标、翻页和滑动画面。
11.如权利要求7所述的电子装置,进一步包括:
光源,用以将光点投射在该眼球上;
该眼球追踪装置更用以侦测该光点的位置,该控制单元根据该光点与该眼球的位置关系来判断该头部的该转动动作。
12.如权利要求7所述的电子装置,其中该头部转动侦测装置是重力传感器或陀螺仪。
13.如权利要求7所述的电子装置,包含第一电子装置以及第二电子装置,其中该第一电子装置包含该显示器,且该第二电子装置包含该眼球追踪装置、该控制单元以及该头部转动侦测装置其中至少其一。
CN201210550398.7A 2012-12-18 2012-12-18 电子装置控制方法以及电子装置 Active CN103869958B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201210550398.7A CN103869958B (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置
CN201710414748.XA CN107390862A (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210550398.7A CN103869958B (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201710414748.XA Division CN107390862A (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置

Publications (2)

Publication Number Publication Date
CN103869958A true CN103869958A (zh) 2014-06-18
CN103869958B CN103869958B (zh) 2017-07-04

Family

ID=50908584

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201210550398.7A Active CN103869958B (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置
CN201710414748.XA Pending CN107390862A (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201710414748.XA Pending CN107390862A (zh) 2012-12-18 2012-12-18 电子装置控制方法以及电子装置

Country Status (1)

Country Link
CN (2) CN103869958B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104391572A (zh) * 2014-11-10 2015-03-04 苏州佳世达电通有限公司 具有眼球追踪功能的电子装置及其控制方法
CN105320261A (zh) * 2015-01-07 2016-02-10 维沃移动通信有限公司 移动终端的控制方法及移动终端
CN107479713A (zh) * 2017-08-18 2017-12-15 湖州靖源信息技术有限公司 一种移动设备的人机交互方法及移动设备
TWI644260B (zh) * 2017-11-07 2018-12-11 佳世達科技股份有限公司 顯示裝置
CN111192419A (zh) * 2019-12-20 2020-05-22 南京景玉信息科技有限公司 基于大数据以及信息技术的智能餐桌服务方法及其系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI826118B (zh) * 2022-11-15 2023-12-11 宏碁股份有限公司 提供裸視3d內容的系統及方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7561143B1 (en) * 2004-03-19 2009-07-14 The University of the Arts Using gaze actions to interact with a display
SE529599C2 (sv) * 2006-02-01 2007-10-02 Tobii Technology Ab Alstring av grafisk returinformation i ett datorsystem
CN101286109A (zh) * 2007-12-17 2008-10-15 邵学悌 一种可便捷移动计算机显示屏内图文显示界面的方法
CN101566874A (zh) * 2008-04-24 2009-10-28 鸿富锦精密工业(深圳)有限公司 控制装置及使用该控制装置的电子设备
CN101995944A (zh) * 2009-08-24 2011-03-30 仇锐铿 眼电控制系统以及利用眼电控制系统控制游标的方法
CN102156537B (zh) * 2010-02-11 2016-01-13 三星电子株式会社 一种头部姿态检测设备及方法
CN101866215B (zh) * 2010-04-20 2013-10-16 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
CN102375533A (zh) * 2010-08-19 2012-03-14 阳程科技股份有限公司 游标操控方法
US20120257035A1 (en) * 2011-04-08 2012-10-11 Sony Computer Entertainment Inc. Systems and methods for providing feedback by tracking user gaze and gestures
CN102520786A (zh) * 2011-09-13 2012-06-27 深圳市比维视创科技有限公司 智能终端利用用户动作实现控制电子设备的方法及系统
CN102622085A (zh) * 2012-04-11 2012-08-01 北京航空航天大学 多维感官人机交互系统及交互方法
CN102724576A (zh) * 2012-05-08 2012-10-10 深圳Tcl新技术有限公司 遥控器控制光标移动的方法及装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104391572A (zh) * 2014-11-10 2015-03-04 苏州佳世达电通有限公司 具有眼球追踪功能的电子装置及其控制方法
CN104391572B (zh) * 2014-11-10 2017-08-22 苏州佳世达电通有限公司 具有眼球追踪功能的电子装置及其控制方法
CN105320261A (zh) * 2015-01-07 2016-02-10 维沃移动通信有限公司 移动终端的控制方法及移动终端
CN107479713A (zh) * 2017-08-18 2017-12-15 湖州靖源信息技术有限公司 一种移动设备的人机交互方法及移动设备
TWI644260B (zh) * 2017-11-07 2018-12-11 佳世達科技股份有限公司 顯示裝置
CN111192419A (zh) * 2019-12-20 2020-05-22 南京景玉信息科技有限公司 基于大数据以及信息技术的智能餐桌服务方法及其系统
CN111192419B (zh) * 2019-12-20 2021-12-24 广东铄金科技有限公司 基于大数据以及信息技术的智能餐桌服务方法及其系统

Also Published As

Publication number Publication date
CN107390862A (zh) 2017-11-24
CN103869958B (zh) 2017-07-04

Similar Documents

Publication Publication Date Title
CN103869958A (zh) 电子装置控制方法以及电子装置
US10558353B2 (en) System and method for 360-degree video navigation
US8248364B1 (en) Seeing with your hand
JP6495164B2 (ja) 眼鏡用ヘッドアップディスプレイシステム
US10416835B2 (en) Three-dimensional user interface for head-mountable display
US9830883B2 (en) Method and circuit for adjusting screen brightness and display device
CN105319718A (zh) 可穿戴眼镜和经由可穿戴眼镜显示图像的方法
US20170045928A1 (en) Electronic apparatus and method of controlling power supply
US20160026241A1 (en) System and Method for Monitoring Habits of User of Electronic Device
KR102391860B1 (ko) 정보 처리 시스템 및 정보 처리 방법
CN104317396B (zh) 一种屏幕自动形变的方法、装置及终端设备
US20150091793A1 (en) Method for controlling device on the basis of eyeball motion, and device therefor
US20140009623A1 (en) Gesture recognition system and glasses with gesture recognition function
CN108209857A (zh) 便携式眼睛追踪设备
CN105511846A (zh) 电子设备和显示控制方法
US20150109437A1 (en) Method for controlling surveillance camera and system thereof
JP2017054201A5 (zh)
MY175525A (en) Method and apparatus to combine ocular control with motion control for human computer interaction
US20170127535A1 (en) System and method for controlling curvature of viewer adaptive type flexible display in order to increase immersive feeling
WO2018070624A3 (en) Mobile terminal and control method thereof
US20110135290A1 (en) Camera adjusting system and method
US20190287486A1 (en) System for providing hands-free input to a computer
US20110135291A1 (en) Camera adjusting system and method
CN104423835A (zh) 基于对计算设备的支撑来调整显示的装置及方法
US20190079598A1 (en) Wearable device and control method, and smart control system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant