TWI488070B - 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置 - Google Patents

電子裝置控制方法以及使用此電子裝置控制方法的電子裝置 Download PDF

Info

Publication number
TWI488070B
TWI488070B TW101146206A TW101146206A TWI488070B TW I488070 B TWI488070 B TW I488070B TW 101146206 A TW101146206 A TW 101146206A TW 101146206 A TW101146206 A TW 101146206A TW I488070 B TWI488070 B TW I488070B
Authority
TW
Taiwan
Prior art keywords
electronic device
head
mode
line
display
Prior art date
Application number
TW101146206A
Other languages
English (en)
Other versions
TW201423479A (zh
Inventor
Yu Hao Huang
Yi Fang Lee
Ming Tsan Kao
Original Assignee
Pixart Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pixart Imaging Inc filed Critical Pixart Imaging Inc
Priority to TW101146206A priority Critical patent/TWI488070B/zh
Priority to US13/910,123 priority patent/US9582074B2/en
Publication of TW201423479A publication Critical patent/TW201423479A/zh
Application granted granted Critical
Publication of TWI488070B publication Critical patent/TWI488070B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

電子裝置控制方法以及使用此電子裝置控制方法的電子裝置
本發明有關於電子裝置控制方法以及使用此電子裝置控制方法的電子裝置，特別有關於偵測頭部轉動以執行相對應動作的電子裝置控制方法以及使用此電子裝置控制方法的電子裝置。
習知技術中，使用者可使用視線來控制電子裝置。第1A圖、第1B圖繪示了習知技術中偵測視線以控制遊標的示意圖。請留意虛框內的左眼EL和右眼ER是由垂直頭部H的X方向看向左眼EL和右眼ER的放大圖示。
電子裝置100具有一眼球追蹤裝置103，其可用以追蹤使用者的視線。在第1A圖中，使用者的頭部H跟電視平行而未轉動，視線落於電子裝置100的顯示器101上的遊標Cr，而其左眼EL和右眼ER會如虛框內的圖示般，會正視著遊標Cr。而在第1B圖中，使用者會轉動左眼EL和右眼ER至右邊，眼球追蹤裝置103會偵測到使用者視線往右移動，因此遊標Cr在顯示器101上會有相對應的位移。
然而，在日常生活中，人們較少執行眼球上下轉動的動作，因此偵測視線來控制電子裝置較不符合使用者的習慣，可能會讓使用者覺得不便或疲勞。
因此，本發明一目的為提供一種根據頭部轉動來控制電子裝置的電子裝置控制方法。
本發明的另一目的為提供一種可根據頭部轉動來控制其動作的電子裝置。
本發明一實施例揭露了一種電子裝置控制方法，使用在一電子裝置上，包含：偵測一眼球的視線在該電子裝置的一顯示器上的位置；以及若該視線停留在該顯示器上一目標物的時間不超過一預定時間週期，則使該電子裝置動作於一第一模式，若該視線停留在該目標物的時間超過該預定時間週期，則使該電子裝置動作於一第二模式，其中於該第二模式中，該電子裝置偵測包含該眼球之一頭部的轉動動作，並根據該轉動動作執行相對應的動作。
本發明另一實施例揭露了一種可藉由頭部轉動控制其動作的電子裝置，包含：一顯示器；一眼球追蹤裝置，用以偵測一眼球的視線在該顯示器上的一位置；一控制單元，若該視線停留在該顯示器上一目標物的時間不超過一預定時間週期，則使該電子裝置動作於一第一模式，若該視線停留在該目標物的時間超過該預定時間週期，則使該電子裝置動作於一第二模式；以及一頭部轉動偵測裝置，用以偵測包含該眼球之一頭部的轉動動作，在該第二模式中該控制單元使該電子裝置根據該轉動動作執行相對應的動作。
根據前述實施例，使用者可利用頭部轉動來控制電子裝置，可避免習知技術中利用視線控制電子裝置的問題。此外，使用者可利用視線來觸發頭部轉動控制，如此可讓使用者完全不用利用手輸入指令，更增加了使用上的便利性。
第2圖繪示了根據本發明一實施例的可藉由頭部轉動控制其動作的電子裝置200的方塊圖。如第2圖所示，電子裝置200包含一顯示器201、一眼球追蹤裝置203、一控制單元205以及一頭部轉動偵側裝置207。眼球追蹤裝置203用以偵測一眼球的視線在顯示器201上的一位置。控制單元205用以控制電子裝置200的動作。若視線停留在顯示器上一目標物(例如一遊標或一任意點)的時間不超過一預定時間週期，則使電子裝置200動作於一第一模式。若視線停留在目標物的時間超過預定時間週期，則使電子裝置200動作於一第二模式。在一實施例中，於第一模式下，控制單元205使電子裝置200根據視線而執行相對應的動作。頭部轉動偵測裝置207用以偵測包含眼球之一頭部的轉動動作，在第二模式中控制單元205使電子裝置200根據頭部轉動動作執行相對應的動作。
頭部轉動偵測裝置207可為各種不同形態的電子裝置。舉例來說，可以一重力感測器或一陀螺儀來判斷頭部的轉動動作。或者，電子裝置200可包含一光源209，光源209會如第3A圖所示般將光點L投射在眼睛E上。若如第3B圖所示偵測到瞳孔P轉動但光點L於眼睛E上的位置未移動時，則表示眼睛轉動但頭部未轉動。相反的，若如第3C圖所示偵測到瞳孔P轉動且光點L於眼睛E上的亦有變化時，則表示頭部轉動。然請留意，熟知此項技藝者當可藉由各種不同機制偵測頭部的轉動，並不受限於前述的例子。
然請留意，在第2圖的實施例中，眼球追蹤裝置203、控制單元 205以及頭部轉動偵側裝置207和顯示器201均位於同一電子裝置200中。然而，這些元件也可以位於不同裝置上。舉例來說，頭部轉動偵側裝置207位於另一攜帶式裝置(例如眼鏡或是頭戴式的裝置)，此攜帶式裝置會由使用者配戴在身上，並在判斷頭部轉動的動作後，把相關資訊以無線或有線方式傳送給控制單元205。於此實施例中，此攜帶式裝置和電子裝置200視為一組可利用頭部轉動控制其動作的電子裝置。同樣的，眼球追蹤裝置203亦可位於此類的攜帶式裝置，並在判斷眼球的視線後，把相關資訊以無線或有線方式傳送給控制單元205。而控制單元205在此類實施例中，可設置於電子裝置200中，亦可設置於攜帶式裝置中，並會以無線或有線的方式傳送命令給電子裝置200。此外，亦請留意在第2圖的實施例中，眼球追蹤裝置203、控制單元205以及頭部轉動偵側裝置207以不同的硬體表示之，然而這些元件亦可整合為一個或兩個硬體。舉例來說，可在一處理單元中寫入韌體，來執行眼球追蹤裝置203、控制單元205以及頭部轉動偵側裝置207其中至少其一的功能。
以下將以圖示舉例說明如何以頭部轉動控制電子裝置200。須注意的是，在後續的圖示中，為了方便說明會省略掉一些第2圖中電子裝置200所具有的元件。第4A圖以及第4B圖繪示了根據本發明一實施例的，以頭部轉動控制遊標的示意圖。與第1A圖和第1B圖相同，虛框內的左眼EL和右眼ER是由垂直頭部H的X方向看向左眼EL和右眼ER的放大圖示。在第4A圖中，電子裝置200運作於第一模式，亦即會如第1A圖和第1B圖所示般根據使用者的視線控制顯示器201上的遊標Cr。使用者若欲進入第二模式，則須注視 著顯示器201上的遊標Cr(此時遊標Cr即為前述的目標物)，在注視遊標Cr經過一預定時間週期後，電子裝置200會進入第4B圖所示的第二模式。
在第4B圖中，使用者的頭部H向左轉動，遊標Cr會相對應頭部H的轉動動作而移動。此時使用者的視線仍可注視著遊標確認其動作，因此左眼EL和右眼ER可如第4B圖所示般仍注意著前方。請留意，電子裝置200運作於第二模式下時，視線落於何處並不影響其動作，因此在第4B圖中，即使使用者的視線不注視著遊標，仍可以頭部H的轉動動作來控制遊標的移動。
第5A圖、第5B以及第5C圖繪示了根據本發明一實施例的，以頭部轉動進行翻頁動作的示意圖。在第5A圖中，顯示器201原本播放著畫面P1 (P1可為一網頁畫面、一照片或一文件等)，使用者可注視著顯示器201中的任意點(如點F1 或F2 )超過一預定時間週期來使電子裝置200進入第5B圖所示的第二模式。而在第5B圖中，使用者H的頭部向右轉動，此時顯示器201會翻至畫面P1 的下一頁而顯示畫面P2 。此時若使用者的頭部H再往右轉動，可再翻至畫面P2 的下一頁，而若使用者的頭部H往左轉動，則可往回翻頁至畫面P2 的上一頁，也就是如第5C圖所示般回到畫面P1 。
除了如前述般以頭部的左右轉動來控制電子裝置外，也可以用頭部的上下轉動來控制電子裝置。第6A圖以及第6B圖繪示了根據本發明一實施例的，以頭部轉動滑動畫面的示意圖。在第6A圖中，顯示器201顯示資料(如一文件或一網頁資料)中的第一行L1 至第6行L6 。使用者注視著顯示器201上任意點(如F1 )超過一預定時間週 期來使電子裝置200進入第二模式。而在第6B圖中，使用者往上轉動頭部，顯示器201上的資料會相對應的往上滑動，因此會如第6B圖所示般，顯示資料中的第3行L3 至第8行L8 。
縱上所述，使用者可以頭部轉動使電子裝置執行各種不同的功能。但請留意前述轉動方向和功能的對應關係僅用以舉例，並非用以限定本發明。
根據前述實施例，可得到一電子裝置控制方法。第7圖繪示了根據本發明一實施例的電子裝置控制方法的流程圖，其包含了下列步驟：
步驟701
偵測一眼球的視線在一顯示器上的位置。
步驟703
判斷視線停留在顯示器上一目標物的時間是否超過一預定時間週期。若否則到步驟705，若是則到步驟707。
步驟705
使電子裝置動作於一第一模式。在一實施例中，於第一模式下，電子裝置根據視線而執行相對應的動作，如第1A圖和第1B圖所示，但並不限定。
步驟707
使該電子裝置動作於一第二模式。其中於第二模式中，電子裝置偵測一頭部的轉動動作，並根據轉動動作執行相對應的動作。例如第4A圖和第4B圖中，根據頭部轉動移動遊標Cr，或如第5A圖、第5B圖和第5C圖中，根據頭部轉動進行翻頁，亦可如第6A圖和第6B圖中，根據頭部轉動滑動畫面。
根據前述實施例，使用者可利用頭部轉動來控制電子裝置，可避免習知技術中利用視線控制電子裝置的問題。此外，使用者可利用視線來觸發頭部轉動控制，如此可讓使用者完全不用利用手輸入指令，更增加了使用上的便利性。
以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所 做之均等變化與修飾，皆應屬本發明之涵蓋範圍。
100、200‧‧‧電子裝置
201、101‧‧‧顯示器
103、203‧‧‧眼球追蹤裝置
205‧‧‧控制單元
207‧‧‧頭部轉動偵側裝置
209‧‧‧光源
第1A圖、第1B圖繪示了習知技術中偵測視線以控制遊標的示意圖。
第2圖繪示了根據本發明一實施例的可藉由頭部轉動控制其動作的電子裝置的方塊圖。
第3A圖、第3B以及第3C圖繪示了第2圖中的頭部轉動偵測裝置如何判斷頭部轉動的其中一例。
第4A圖以及第4B圖繪示了根據本發明一實施例的，以頭部轉動控制遊標的示意圖。
第5A圖、第5B以及第5C圖繪示了根據本發明一實施例的，以頭部轉動進行翻頁動作的示意圖。
第6A圖以及第6B圖繪示了根據本發明一實施例的，以頭部轉動滑動畫面的示意圖。
第7圖繪示了根據本發明一實施例的電子裝置控制方法的流程圖。
200‧‧‧電子裝置
201‧‧‧顯示器
203‧‧‧眼球追蹤裝置
205‧‧‧控制單元
207‧‧‧頭部轉動偵側裝置
209‧‧‧光源

Claims (13)

  1. 一種電子裝置控制方法，使用在一電子裝置上，包含：偵測一眼球的視線在該電子裝置的一顯示器上的位置；以及若該視線停留在該顯示器上一目標物的時間不超過一預定時間週期，則使該電子裝置動作於一第一模式，若該視線停留在該目標物的時間超過該預定時間週期，則使該電子裝置動作於一第二模式，其中於該第二模式中，該電子裝置偵測包含該眼球之一頭部的轉動動作，並根據該轉動動作執行相對應的動作。
  2. 如申請專利範圍第1項所述的電子裝置控制方法，其中於該第一模式中，該電子裝置根據該視線而執行相對應的動作。
  3. 如申請專利範圍第2項所述的電子裝置控制方法，其中於該第一模式中，該電子裝置根據該視線而移動該顯示器上的一遊標。
  4. 如申請專利範圍第1項所述的電子裝置控制方法，其中於該第二模式中，該電子裝置根據該轉動動作而在該顯示器上進行下列動作至少其一：移動遊標、翻頁和滑動畫面。
  5. 如申請專利範圍第1項所述的電子裝置控制方法，更包含將一光點投射於該眼球上，並根據該光點與該眼球的位置關係來判斷該頭部的該轉動動作。
  6. 如申請專利範圍第1項所述的電子裝置控制方法，係使用一重力感測器或一陀螺儀來偵測該頭部的該轉動動作。
  7. 一種可藉由頭部轉動控制其動作的電子裝置，包含：一顯示器；一眼球追蹤裝置，用以偵測一眼球的視線在該顯示器上的一位置；一控制單元，若該視線停留在該顯示器上一目標物的時間不超過一預定時間週期，則使該電子裝置動作於一第一模式，若該視線停留在該目標物的時間超過該預定時間週期，則使該電子裝置動作於一第二模式；以及一頭部轉動偵測裝置，用以偵測包含該眼球之一頭部的轉動動作，在該第二模式中該控制單元使該電子裝置根據該轉動動作執行相對應的動作。
  8. 如申請專利範圍第7項所述的電子裝置，其中於該第一模式中，該控制單元使該電子裝置根據該視線而執行相對應的動作。
  9. 如申請專利範圍第8項所述的電子裝置，其中於該第一模式中，該控制單元使該電子裝置根據該視線而移動該顯示器上的一遊標。
  10. 如申請專利範圍第7項所述的電子裝置，其中於該第二模式中，該控制單元使該電子裝置根據該轉動動作而在該顯示器上進行 下列動作至少其一：移動遊標、翻頁和滑動畫面。
  11. 如申請專利範圍第7項所述的電子裝置，更包含一光源，用以將一光點投射於該眼球上；該眼球追蹤裝置更用以偵測該光點之位置，該控制單元根據該光點與該眼球的位置關係來判斷該頭部的該轉動動作。
  12. 如申請專利範圍第7項所述的電子裝置，其中該頭部轉動偵測裝置為一重力感測器或一陀螺儀。
  13. 如申請專利範圍第7項所述的電子裝置，包含一第一電子裝置以及一第二電子裝置，其中該第一電子裝置包含該顯示器，且該第二電子裝置包含該眼球追蹤裝置、該控制單元以及該頭部轉動偵測裝置其中至少其一。
TW101146206A 2012-12-07 2012-12-07 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置 TWI488070B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW101146206A TWI488070B (zh) 2012-12-07 2012-12-07 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置
US13/910,123 US9582074B2 (en) 2012-12-07 2013-06-05 Controlling method and electronic apparatus utilizing the controlling method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW101146206A TWI488070B (zh) 2012-12-07 2012-12-07 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置

Publications (2)

Publication Number Publication Date
TW201423479A TW201423479A (zh) 2014-06-16
TWI488070B true TWI488070B (zh) 2015-06-11

Family

ID=50882337

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101146206A TWI488070B (zh) 2012-12-07 2012-12-07 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置

Country Status (2)

Country Link
US (1) US9582074B2 (zh)
TW (1) TWI488070B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105190515A (zh) * 2013-05-08 2015-12-23 富士通株式会社 输入装置以及输入程序
WO2015040608A1 (en) * 2013-09-22 2015-03-26 Inuitive Ltd. A peripheral electronic device and method for using same
US10585485B1 (en) 2014-11-10 2020-03-10 Amazon Technologies, Inc. Controlling content zoom level based on user head movement
JP6346547B2 (ja) * 2014-11-26 2018-06-20 公立大学法人広島市立大学 方向指示装置及び方向指示方法
JP6231585B2 (ja) * 2016-01-05 2017-11-15 株式会社Ｑｄレーザ 画像投影装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101379456A (zh) * 2006-02-01 2009-03-04 托比伊科技公司 在计算机系统中图形反馈的产生
CN201945946U (zh) * 2011-01-20 2011-08-24 叶尔肯·拜山 头控鼠标
CN102292690A (zh) * 2009-01-22 2011-12-21 阿尔卡特朗讯美国公司 电子数据输入系统
TW201203018A (en) * 2010-07-02 2012-01-16 Usun Technology Co Ltd Method for controlling cursor
CN102749990A (zh) * 2011-04-08 2012-10-24 索尼电脑娱乐公司 通过追踪用户视线和姿态提供反馈的系统和方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5367315A (en) * 1990-11-15 1994-11-22 Eyetech Corporation Method and apparatus for controlling cursor movement
US7561143B1 (en) * 2004-03-19 2009-07-14 The University of the Arts Using gaze actions to interact with a display
US7541566B2 (en) * 2005-12-29 2009-06-02 Nokia Corporation Transmitter, receiver, and system with relative position detecting functionality between transmitters and receivers
US8793620B2 (en) * 2011-04-21 2014-07-29 Sony Computer Entertainment Inc. Gaze-assisted computer interface
US8279174B2 (en) * 2008-08-27 2012-10-02 Lg Electronics Inc. Display device and method of controlling the display device
US9507418B2 (en) * 2010-01-21 2016-11-29 Tobii Ab Eye tracker based contextual action
US8648880B2 (en) * 2010-06-03 2014-02-11 Sony Corporation Terminal device, display method, and application computer program product

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101379456A (zh) * 2006-02-01 2009-03-04 托比伊科技公司 在计算机系统中图形反馈的产生
CN102292690A (zh) * 2009-01-22 2011-12-21 阿尔卡特朗讯美国公司 电子数据输入系统
TW201203018A (en) * 2010-07-02 2012-01-16 Usun Technology Co Ltd Method for controlling cursor
CN201945946U (zh) * 2011-01-20 2011-08-24 叶尔肯·拜山 头控鼠标
CN102749990A (zh) * 2011-04-08 2012-10-24 索尼电脑娱乐公司 通过追踪用户视线和姿态提供反馈的系统和方法

Also Published As

Publication number Publication date
US20140164756A1 (en) 2014-06-12
US9582074B2 (en) 2017-02-28
TW201423479A (zh) 2014-06-16

Similar Documents

Publication Publication Date Title
US10303250B2 (en) Wearable glasses and method of displaying image via the wearable glasses
US9124685B2 (en) Portable device including control actions dependent on a user looking at a touchscreen
JP6129879B2 (ja) 多次元入力のためのナビゲーション手法
US8947351B1 (en) Point of view determinations for finger tracking
US10585474B2 (en) Electronic display illumination
US10558273B2 (en) Electronic device and method for controlling the electronic device
KR101919010B1 (ko) 안구 동작에 기초한 디바이스의 제어 방법 및 이를 위한 디바이스
US9658699B2 (en) System and method for using a side camera for free space gesture inputs
KR102391860B1 (ko) 정보 처리 시스템 및 정보 처리 방법
US8884928B1 (en) Correcting for parallax in electronic displays
TWI488070B (zh) 電子裝置控制方法以及使用此電子裝置控制方法的電子裝置
JP6260255B2 (ja) 表示制御装置およびプログラム
KR101919009B1 (ko) 안구 동작에 의한 제어 방법 및 이를 위한 디바이스
JP2017054201A5 (zh)
TWI671552B (zh) 穿戴式眼鏡、顯示影像方法以及非暫時性電腦可讀取儲存媒體
US9411412B1 (en) Controlling a computing device based on user movement about various angular ranges
TWI476639B (zh) 鍵盤裝置及電子裝置
CN103869958B (zh) 电子装置控制方法以及电子装置
US20150334658A1 (en) Affecting device action based on a distance of a user's eyes
US20240094819A1 (en) Devices, methods, and user interfaces for gesture-based interactions
US20170140508A1 (en) Method, apparatus, and terminal for controlling screen auto-rotation
TW201913298A (zh) 可顯示實體輸入裝置即時影像之虛擬實境系統及其控制方法
Schmieder et al. Thumbs up: 3D gesture input on mobile phones using the front facing camera
US20180203507A1 (en) Wearable device locking and unlocking using motion and gaze detection
US12067230B2 (en) Computer platform with shared user experience interface