TW201915662A - 具有眼球追蹤功能之電子裝置及其控制方法 - Google Patents
具有眼球追蹤功能之電子裝置及其控制方法 Download PDFInfo
- Publication number
- TW201915662A TW201915662A TW106134246A TW106134246A TW201915662A TW 201915662 A TW201915662 A TW 201915662A TW 106134246 A TW106134246 A TW 106134246A TW 106134246 A TW106134246 A TW 106134246A TW 201915662 A TW201915662 A TW 201915662A
- Authority
- TW
- Taiwan
- Prior art keywords
- function
- eyeball
- electronic device
- viewing
- eye
- Prior art date
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
一種具有眼球追蹤功能之電子裝置及其控制方法。具有眼球追蹤功能之電子裝置包含一顯示裝置、一影像擷取裝置及一處理單元。處理單元包含一動眼分析模組及一控制模組。顯示裝置用以顯示一使用者介面。影像擷取裝置用以取得一眼球位置,並傳送眼球位置。動眼分析模組用以接收眼球位置,依據眼球位置以分析使用者介面上被注視的一觀看座標。控制模組用以依據觀看座標以觸發對應使用者介面之一應用功能。
Description
本案是有關於一種電子裝置及其控制方法,且特別是有關於一種具有眼球追蹤功能之電子裝置及其控制方法。
過去我們瀏覽網頁及文件時都是需要使用者用眼睛確認後再使用滑鼠與鍵盤做操作;但有時候雙手不方便時或正在吃東西、做菜看食譜等等特殊情境下需要暫時放下手邊工作才能繼續操作。
此外,現階段的眼球追蹤應用技術大多針對遊戲、醫療市場,尚未看到針對一般使用者的商業化產品。目前較為完整的應用為醫療市場,但其設計則是針對殘疾患者以眼球追蹤完全取代鍵盤滑鼠操作,所以在操作設計上相對於一般大眾較為繁雜,長時間使用下容易使眼睛疲憊。
因此,如何提供一種讓一般使用者在使用不同應用程式時,能應用具有眼球追蹤功能的電子裝置及其控制方法以與應用程式互動,已成為須解決的問題之一。
本案提供一種具有眼球追蹤功能之電子裝置及其控制方法,其利用追蹤眼球並將眼球位置映射在螢幕上,以基於眼球位置與各種應用程式進行直接的互動,且可不同的應用程式可對應到不同的至少一應用功能,透過此種互動方式使得操作各種應用程式得使用者介面更為方便。
根據本案之一方面,提供一種具有眼球追蹤功能之電子裝置。具有眼球追蹤功能之電子裝置包含一顯示裝置、一影像擷取裝置及一處理單元。處理單元包含一動眼分析模組及一控制模組。顯示裝置用以顯示一使用者介面。影像擷取裝置用以取得一眼球位置,並傳送眼球位置。動眼分析模組用以接收眼球位置,依據眼球位置以分析使用者介面上被注視的一觀看座標。控制模組,用以依據觀看座標以觸發對應使用者介面之一應用功能。
根據本案之另一方面,提供一種具有眼球追蹤功能之電子裝置的控制方法。具有眼球追蹤功能之電子裝置的控制方法包含以下步驟:顯示一使用者介面;取得一眼球位置,並傳送眼球位置;接收眼球位置,依據眼球位置以分析使用者介面上被注視的一觀看座標;以及依據觀看座標以觸發對應使用者介面之一應用功能。
請參閱第1~2圖,第1圖為根據本案一實施例繪示的一種具有眼球追蹤功能之電子裝置100的示意圖。第2圖為根據本案一實施例繪示的一種具有眼球追蹤功能之電子裝置的控制方法200的流程圖。於一實施例中,具有眼球追蹤功能之電子裝置100包含一顯示裝置10、一影像擷取裝置20及一處理單元30,其中,處理單元30包含一動眼分析模組32及一控制模組34。於一實施例中,影像擷取裝置20包含一第一攝像模組22及一第二攝像模組24。於一實施例中,處理單元30更包含一行為觀察模組36。
於一實施例中,具有眼球追蹤功能之電子裝置100可以是一筆電、一桌機、一手機、一平板或其他具有顯示功能的裝置於一實施例中,顯示裝置10可以是一螢幕或各種顯示器。
於一實施例中,處理單元30可以由微控制單元(microcontroller)、處理器(microprocessor)、數位訊號處理器(digital signal processor)、特殊應用積體電路(application specific integrated circuit,ASIC)或一邏輯電路以實現之。於一實施例中,動眼分析模組32、控制模組34及行為觀察模組36亦可合併或分別由微控制單元、處理器、數位訊號處理器、特殊應用積體電路或一邏輯電路以實現之。
於一實施例中,影像擷取裝置20中的第一攝像模組22可以是一紅外線攝影模組,第二攝像模組24可以是一般的影像擷取模組。於一實施例中,第一攝像模組22及第二攝像模組24是由至少一電荷耦合元件(Charge Coupled Device;CCD)或一互補式金氧半導體(Complementary Metal-Oxide Semiconductor;CMOS)感測器所組成。
於一實施例中,請參閱第2圖,以下詳述本案具有眼球追蹤功能之電子裝置的控制方法200的流程圖。具有眼球追蹤功能之電子裝置的控制方法200中所提及的元件可由第1圖所述的元件實現之。
於步驟210中,顯示裝置10用以顯示一使用者介面。例如,此使用者介面可以是便攜式文件格式(Portable Document Format,PDF)之應用程式的介面。又例如,此使用者介面可以是一網頁瀏覽器的介面。
於步驟220中,影像擷取裝置20用以取得一眼球位置,並傳送眼球位置。於一實施例中,影像擷取裝置20可以外掛或內嵌於具有眼球追蹤功能之電子裝置100中。舉例而言,影像擷取裝置20可以安裝於一筆電的螢幕上方,用以朝向使用者(例如為第3圖所示的使用者USR)臉部方向拍攝,又例如,影像擷取裝置20為外掛式影像擷取裝置,透過有線/無線之通訊方式與一筆電連結,並朝向使用者USR臉部方向拍攝。
於一實施例中,影像擷取裝置20包含第一攝像模組22及第二攝像模組24。
於一實施例中,第一攝像模組22包含一紅外線發射裝置,故可藉由一紅外線照射一使用者USR眼部,並拍攝使用者USR眼部,以取得一眼部影像,藉此,即便使用者USR處於較陰暗的位置,第一攝像模組22仍能拍攝使用者USR眼部。
於一實施例中,第二攝像模組24分析眼部影像,以取得一眼周輪廓影像及眼球影像,並計算眼球影像與眼周輪廓影像的一相對距離,以取得眼球位置。
於一實施例中,影像擷取裝置20可傳送眼部影像、眼球位置及/或眼周輪廓影像的位置。
於步驟230中,動眼分析模組32用以接收眼球位置,依據眼球位置以分析使用者介面上被注視的一觀看座標。
請參考第3圖,第3圖為根據本案一實施例繪示的一種觀看座標(Ex,Ey)的示意圖。在一實施例中,動眼分析模組32接收到接收眼球位置後,依據眼球位置與顯示裝置10(於此例中,例如為螢幕MO)之一當前解析度的相對位置以取得一觀看座標(Ex,Ey)。於一些實施例中,可利用已知的眼動影像處理演算法,以藉由拍攝到的眼部影像及眼球位置算出使用者USR(沿著視線EL)於螢幕MO上的觀看座標(Ex,Ey),故其詳細的演算法此處不再贅述之。
例如,螢幕MO的當前解析度為1920X1080,則將最右上角的畫素座標定義為(0,0),最右下角的畫素座標定義為(1920,1080),並依據眼球位置及當前解析度的相對位置算出觀看座標(360,480),代表使用者USR正在觀看螢幕MO上的觀看座標(360,480)之位置。
於步驟240中,控制模組34用以依據觀看座標以觸發對應使用者介面之一應用功能。
請參考第4、5A~5C圖,第4圖為根據本案一實施例繪示的一種使用者USR注視範圍的示意圖。第5A~5C圖為根據本案一實施例繪示一種視覺回饋效果的示意圖。
於一實施例中,行為觀察模組36用以偵測位於同一位置之觀看座標的一持續注視時間或一眼球移動狀態。於一實施例中,行為觀察模組36可以在開啟眼球模式下於應用程式的背景執行觀察使用者USR的眼睛行為,例如於第4圖中,行為觀察模組36偵測使用者USR是否(沿著視線EL)注視某一觀看座標(Ex,Ey)的持續注視時間超過一觸發門檻值,當使用者USR注視觀看座標(Ex,Ey)的持續注視時間超過觸發門檻值,且此觀看座標(Ex,Ey)位於一虛擬按鈕BT上時,則代表使用者USR欲觸發或按下此虛擬按鈕BT。藉此,行為觀察模組36可觀察並得知使用者USR的眼睛行為。
於一實施例中,行為觀察模組36可先預設持續注視時間為1秒鐘,當使用者USR注視觀看座標(Ex,Ey)超過1秒鐘時,則代表使用者USR欲觸發此觀看座標(Ex,Ey)所對應的應用功能(例如為捲動頁面),接著,行為觀察模組36可持續地觀察使用者USR的眼睛行為,以修正預設的持續注視時間(例如修改為0.7秒),讓判斷使用者USR的眼睛行為的準確率越來越高。
請一併參閱第4、5A~5C圖,當第4圖中的虛擬按鈕BT之範圍的左上角座標為(X1,Y1),右下角座標為(X2,Y2)時,而使用者USR注視的觀看座標為(Ex,Ey)時,若觀看座標的X軸值Ex介於X1及X2之間且觀看座標的Y軸值Ey介於Y1及Y2之間,則控制模組34可判定使用者USR正在注視虛擬按鈕BT。於一實施例中,當判定使用者USR正在注視虛擬按鈕BT時控制模組34可立即給予視覺回饋,例如使虛擬按鈕BT變色、變形、變亮或於使用者介面UI0上顯示一進度條。
於第5A~5C圖中,其繪示一種圓形進度條BR,當控制模組34可判定使用者USR正在注視觀看座標(Ex,Ey)時,可在使用者介面UI0上顯示圓形進度條BR。
於一實施例中,控制模組34設定持續注視時間為0.7秒時,代表使用者USR欲觸發此觀看座標(Ex,Ey)所對應的應用功能(例如為捲動頁面),則當使用者USR開始注視觀看座標(Ex,Ey)時(如第4圖所示),圓形進度條BR會不斷的藉由圓形進度條BR顯示注視時間(如第5A~5B圖所示),並於0.7秒後,控制模組34觸發此觀看座標(Ex,Ey)所對應的應用功能(如第5C圖所示)。
更具體而言,當使用者USR開始注視觀看座標(Ex,Ey)時,觀看座標(Ex,Ey)的鄰近處會顯示圓形進度條BR,且圓形進度條BR上的計時條TM會依據使用者USR的注視時間而變化(例如為,於圓形進度條BR之圓周上的上色面積越來越長)。如第5A圖所示,計時條TM(較粗線段)所佔圓形進度條BR之圓周的長度代表使用者開始注視觀看座標(Ex,Ey)約0.15秒。如第5B圖所示,計時條TM所佔圓形進度條BR之圓周的長度代表使用者USR開始注視觀看座標(Ex,Ey)約0.65秒。如第5C圖所示,當使用者USR注視觀看座標(Ex,Ey)0.7秒,則在位於觀看座標(Ex,Ey)的應用功能圖示上顯示鎖定樣式,代表觸發此觀看座標(Ex,Ey)所對應的應用功能(例如為捲動頁面)。
請參照第6A~6B圖,第6A~6B圖為根據本案一實施例繪示的使用者介面的示意圖。於一實施例中,如第6A~6B圖所示,使用者介面UI1、UI2可對應不同的應用程式以呈現不同的功能選單TB1、TB2。更具體而言,第6A圖為瀏覽器的使用者介面UI1,其具有功能選單TB1,功能選單TB1中包含多個應用功能的其中至少之一者,並可由圖片或虛擬之按鍵的方式呈現之,例如捲動頁面之按鍵61、切換頁面之按鍵62、點擊之按鍵63及摺疊選單之按鍵64,其各自對應捲動頁面功能、切換頁面功能、點擊功能及摺疊選單功能。此外,一般的瀏覽器的使用者介面UI1可能包含物件bu1~bu12,關於物件bu1~bu12此處僅為示意用,本案並不對此作任何限制。
另一方面,第6B圖為開啟PDF檔案之應用程式的使用者介面UI2,其具有功能選單TB2,功能選單TB2中包含多個應用功能的其中至少之一者,並可由圖片或虛擬按鍵的方式呈現之,例如捲動頁面之按鍵61、切換頁面之按鍵62、點擊之按鍵63及摺疊選單之按鍵64,其各自對應捲動頁面功能、切換頁面功能、點擊功能及摺疊選單功能,此外,在本例子中,由於使用者USR較常在開啟PDF檔案時,進行選取部分檔案內容的操作,因此,第6B圖之功能選單TB2相較於第6A圖之功能選單TB1更包含了對應選取功能的選取之按鍵66。此外,一般開啟PDF檔案之應用程式的使用者介面UI2可能包含物件bu13~bu38,其中物件bu21可以是一PDF檔,關於物件bu13~bu38此處僅為示意用,本案並不對此作任何限制。
另外,第6B圖之功能選單TB2中以較細的斜線L1、L2分別繪製於切換頁面之按鍵62、點擊之按鍵63上,其代表在功能選單TB2中,此兩個應用功能暫時被禁用,此可由使用者USR或控制模組34設定之。
由此可知,控制模組34可判定使用者USR正在操作的應用程式類型,以對應在此應用程式的使用者介面(如使用者介面UI1)中顯示對應的功能選單(如功能選單TB1),以達到針對不同應用程式的操作方式,提供不同的應用功能之效果。例如,針對檔案管理員的應用程式提供的應用功能為選取文件、複製、剪下及/或貼上,針對投影片的應用程式提供的應用功能為換頁、放映及/或區域放大,針對開啟PDF的應用程式提供的應用功能為放大、縮小及/或上下捲動等,然,本發明並不限於此,不同的應用程式可對應到相同、部分相同或完全不同的至少一應用功能。
請參照第7A~7D圖,第7A~7D圖為根據本案一實施例繪示的觸發應用功能之方法的示意圖。於一實施例中,控制模組34判斷位於同一位置之觀看座標(例如為觀看座標(Ex,Ey))的持續注視時間是否大於一觸發門檻值(例如為0.7秒),當位於同一位置之觀看座標的持續注視時間大於觸發門檻值時,控制模組34觸發對應觀看座標之應用功能。以下以更具體的實施方式對此進行說明,需注意的是,以下實施方式可部分、全部合併或各別獨立實施之。
於一實施例中,如第7A圖所示,當控制模組34判斷位於同一位置之觀看座標(Ex,Ey)的持續注視時間大於觸發門檻值(例如為0.7秒),且觀看座標(Ex,Ey)位於一捲動頁面功能的範圍A1、A2內時,則控制模組34依據該觀看座標以傳送一捲動訊號,藉以捲動一當前頁面。於一實施例中,捲動頁面功能的範圍位於使用者介面UIA的一上部範圍A1及一下部範圍A2。於一實施例中,控制模組34可將使用者介面UIA的上部1/4面積(如第7A圖所示的上部範圍A1)及下部1/4面積(如第7A圖所示的下部範圍A2作為捲動頁面功能的範圍。
於一實施例中,如第7B圖所示,當控制模組34判斷位於同一位置之觀看座標(Ex,Ey)的持續注視時間大於觸發門檻值(例如為0.7秒),且觀看座標(Ex,Ey)位於一切換頁面功能的範圍內時,則控制模組34依據觀看座標(Ex,Ey)以傳送一切換訊號,藉以切換一當前頁面至當前頁面的下一頁或該當前頁面的上一頁。於一實施例中,切換頁面功能的範圍位於使用者介面UIB的一左部範圍B1及一右部範圍B2。
於一實施例中,如第7C圖中的左側之使用者介面UIC所示,當控制模組34判斷位於同一位置之觀看座標(Ex,Ey)的持續注視時間大於觸發門檻值(例如為0.7秒),且觀看座標(Ex,Ey)位於一虛擬按鈕BT時,則控制模組34依據觀看座標(Ex,Ey)以傳送一點擊訊號,藉以點擊虛擬按鈕BT。於一實施例中,如第7C圖中的左側之使用者介面UIC所示,控制模組34判斷位於同一位置之觀看座標(Ex,Ey)的持續注視時間大於一注視門檻值(例如為0.2秒),但尚未到達觸發門檻值(例如為0.7秒)時,則在觀看座標(Ex,Ey)旁顯示一未點擊圖式CL,當持續注視時間大於觸發門檻值(例如為0.7秒)時,如第7C圖中的右側之使用者介面UIC’所示,觀看座標(Ex,Ey)旁顯示一點擊圖式CL’,代表控制模組34依據觀看座標(Ex,Ey)以傳送一點擊訊號,藉以點擊虛擬按鈕BT。
於一實施例中,如第7D圖中的左側之使用者介面UID所示,當控制模組34判斷位於同一位置之觀看座標(Ex,Ey)該持續注視時間大於觸發門檻值(例如為0.7秒),且觀看座標(Ex,Ey)位於一摺疊選單之按鍵65時,則控制模組34傳送一摺疊訊號,藉以摺疊一功能選單TD。於一實施例中,功能選單TD中包含一捲動頁面功能、一切換頁面功能、一點擊功能及一摺疊選單功能之其中至少之一者,如第7D圖中的左側之使用者介面UID中,功能選單TD中包含捲動頁面之按鍵61、切換頁面之按鍵62及摺疊選單之按鍵65。於一實施例中,當控制模組34傳送一摺疊訊號,藉以摺疊一功能選單TD後,原摺疊選單之按鍵65將會更改圖視為如第7D圖中的右側之使用者介面UID’中的摺疊選單之按鍵65’之樣貌,並將原捲動頁面之按鍵61、切換頁面之按鍵62隱藏。
於一些實施例中,摺疊選單之按鍵65’可以是半透明且可移動的,使用者可自行調整摺疊選單之按鍵65’位於使用者介面UID’中的位置。此外,當使用者注視摺疊選單之按鍵65’超過一預設時間,則摺疊選單之按鍵65’將所有應用功能顯示出來(例如回到第7D圖使用者介面UID所示之顯示狀態,將捲動頁面之按鍵61、切換頁面之按鍵62及摺疊選單之按鍵65皆顯示出來)。於一實施例中,使用者可自行設定其常用的應用功能被顯示出來。
藉由上述方式,當使用者USR雙手忙碌(例如為做菜)時,可用具有眼球追蹤功能之電子裝置100,以顯示其所需要的資訊(例如為網頁版的食譜)。
請參照第8A~8B圖,第8A~8B圖為根據本案一實施例繪示的顯示應用功能之方法的示意圖。於第8A圖中,當使用者USR開啟多個視窗WD1、WD2時,若使用者USR的滑鼠游標MS停留在視窗WD1中,則此例中的所有應用功能之圖式或虛擬按鍵顯示於視窗WD1中。於第8B圖中,當使用者USR開啟多個視窗WD1、WD2時,若使用者USR的滑鼠游標MS停留在視窗WD2中,則此例中的所有應用功能之圖式或虛擬按鍵顯示於視窗WD2中。藉此,控制模組34可以在開啟多個視窗WD1、WD2時,將所有應用功能之圖式或虛擬按鍵顯示於使用者USR正在操作或是最上層的視窗中。
綜上,本案透過追蹤眼球並將眼球位置映射在螢幕上,基於眼球位置與各種應用程式進行直接的互動,且可不同的應用程式可對應到不同的至少一應用功能,透過此種互動方式使得操作各種應用程式得使用者介面更為方便。
雖然本案已以實施例揭露如上,然其並非用以限定本案,任何熟習此技藝者,在不脫離本案之精神和範圍內,當可作各種之更動與潤飾,因此本案之保護範圍當視後附之申請專利範圍所界定者為準。
100‧‧‧具有眼球追蹤功能之電子裝置
200‧‧‧具有眼球追蹤功能之電子裝置的控制方法
10‧‧‧顯示裝置
20‧‧‧影像擷取裝置
30‧‧‧處理單元
22‧‧‧第一攝像模組
24‧‧‧第二攝像模組
32‧‧‧動眼分析模組
34‧‧‧控制模組
36‧‧‧行為觀察模組
USR‧‧‧使用者
EL‧‧‧視線
MO‧‧‧螢幕
UI0、UI1、UI2、UIA、UIB、UIC、UIC’、UID、UID’‧‧‧使用者介面
BT‧‧‧虛擬按鈕
BR‧‧‧圓形進度條
TM‧‧‧計時條
61~66、65’‧‧‧按鍵
TB1、TB2、TD‧‧‧功能選單
A1、A2、B1、B2‧‧‧範圍
CL‧‧‧未點擊圖式
CL’‧‧‧點擊圖式
WD1、WD2‧‧‧視窗
MS‧‧‧滑鼠游標
bu1~bu38‧‧‧物件
L1、L2‧‧‧斜線
為讓本揭示內容之上述和其他目的、特徵、優點與實施例能更明顯易懂,所附圖示之說明如下: 第1圖為根據本案一實施例繪示的一種具有眼球追蹤功能之電子裝置的示意圖; 第2圖為根據本案一實施例繪示的一種具有眼球追蹤功能之電子裝置的控制方法的流程圖; 第3圖為根據本案一實施例繪示的一種觀看座標的示意圖; 第4圖為根據本案一實施例繪示的一種使用者注視範圍的示意圖; 第5A~5C圖為根據本案一實施例繪示一種視覺回饋效果的示意圖; 第6A~6B圖為根據本案一實施例繪示的使用者介面的示意圖; 第7A~7D圖為根據本案一實施例繪示的觸發應用功能之方法的示意圖;以及 第8A~8B圖為根據本案一實施例繪示的顯示應用功能之方法的示意圖。
Claims (20)
- 一種具有眼球追蹤功能之電子裝置,包含: 一顯示裝置,用以顯示一使用者介面; 一影像擷取裝置,用以取得一眼球位置,並傳送該眼球位置;以及 一處理單元,包含: 一動眼分析模組,用以接收該眼球位置,並依據該眼球位置,分析該使用者介面上被注視的一觀看座標;以及 一控制模組,用以依據該觀看座標,觸發對應該使用者介面之一應用功能。
- 如請求項1所述之具有眼球追蹤功能之電子裝置,其中該影像擷取裝置包含: 一第一攝像模組,藉由一紅外線照射一使用者眼部,並拍攝該使用者眼部,以取得一眼部影像; 一第二攝像模組,分析該眼部影像,以取得一眼周輪廓影像及該眼球影像,並計算該眼球影像與該眼周輪廓影像的一相對距離,以取得該眼球位置。
- 如請求項2所述之具有眼球追蹤功能之電子裝置,其中該觀看座標係依據該眼球位置與該顯示裝置之一當前解析度的相對位置以取得。
- 如請求項1所述之具有眼球追蹤功能之電子裝置,其中該處理單元更包含: 一行為觀察模組,用以偵測位於同一位置之該觀看座標的一持續注視時間或一眼球移動狀態。
- 如請求項4所述之具有眼球追蹤功能之電子裝置,其中該控制模組更用以判斷位於同一位置之該觀看座標的該持續注視時間是否大於一觸發門檻值,當位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值時,該控制模組觸發對應該觀看座標之該應用功能。
- 如請求項5所述之具有眼球追蹤功能之電子裝置,其中當該控制模組判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一捲動頁面功能的範圍內時,則該控制模組依據該觀看座標以傳送一捲動訊號,藉以捲動一當前頁面; 其中,該捲動頁面功能的範圍位於該使用者介面的一上部範圍及一下部範圍。
- 如請求項5所述之具有眼球追蹤功能之電子裝置,其中當該控制模組判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一切換頁面功能的範圍內時,則該控制模組依據該觀看座標以傳送一切換訊號,藉以切換一當前頁面至該當前頁面的下一頁或該當前頁面的上一頁; 其中,該切換頁面功能的範圍位於該使用者介面的一左部範圍及一右部範圍。
- 如請求項5所述之具有眼球追蹤功能之電子裝置,其中當該控制模組判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一虛擬按鍵時,則該控制模組依據該觀看座標以傳送一點擊訊號,藉以點擊該虛擬按鍵。
- 如請求項5所述之具有眼球追蹤功能之電子裝置,其中當該控制模組判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一摺疊選單按鍵時,則該控制模組傳送一摺疊訊號,藉以摺疊一功能選單; 其中該功能選單中包含一捲動頁面功能、一切換頁面功能、一點擊功能及一摺疊選單功能之其中至少之一者。
- 如請求項1所述之具有眼球追蹤功能之電子裝置,其中該使用者介面用以對應不同的應用程式以呈現不同的一功能選單。
- 一種具有眼球追蹤功能之電子裝置的控制方法,包含: 顯示一使用者介面; 取得一眼球位置,並傳送該眼球位置; 接收該眼球位置,並依據該眼球位置,分析該使用者介面上被注視的一觀看座標;以及 依據該觀看座標,觸發對應該使用者介面之一應用功能。
- 如請求項11所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 藉由一紅外線照射一使用者眼部,並拍攝該使用者眼部,以取得一眼部影像; 分析該眼部影像,以取得一眼周輪廓影像及該眼球影像,並計算該眼球影像與該眼周輪廓影像的一相對距離,以取得該眼球位置。
- 如請求項12所述之具有眼球追蹤功能之電子裝置的控制方法,其中該觀看座標係依據該眼球位置與該顯示裝置之一當前解析度的相對位置以取得。
- 如請求項11所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 偵測位於同一位置之該觀看座標的一持續注視時間或一眼球移動狀態。
- 如請求項14所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 判斷位於同一位置之該觀看座標的該持續注視時間是否大於一觸發門檻值; 當位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值時,觸發對應該觀看座標之該應用功能。
- 如請求項15所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 當判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一捲動頁面功能的範圍內時,則依據該觀看座標以捲動一當前頁面; 其中,該捲動頁面功能的範圍位於該使用者介面的一上部範圍及一下部範圍。
- 如請求項15所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 當判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一切換頁面功能的範圍內時,則依據該觀看座標以切換一當前頁面至該當前頁面的下一頁或該當前頁面的上一頁; 其中,該切換頁面功能的範圍位於該使用者介面的一左部範圍及一右部範圍。
- 如請求項15所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 當判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一虛擬按鍵時,則依據該觀看座標,點擊該虛擬按鍵。
- 如請求項15所述之具有眼球追蹤功能之電子裝置的控制方法,更包含: 當判斷位於同一位置之該觀看座標的該持續注視時間大於該觸發門檻值,且該觀看座標位於一摺疊選單按鍵時,則摺疊一功能選單; 其中該功能選單中包含一捲動頁面功能、一切換頁面功能、一點擊功能及一摺疊選單功能之其中至少之一者。
- 如請求項11所述之具有眼球追蹤功能之電子裝置的控制方法,其中該使用者介面用以對應不同的應用程式以呈現不同的一功能選單。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW106134246A TW201915662A (zh) | 2017-10-03 | 2017-10-03 | 具有眼球追蹤功能之電子裝置及其控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW106134246A TW201915662A (zh) | 2017-10-03 | 2017-10-03 | 具有眼球追蹤功能之電子裝置及其控制方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW201915662A true TW201915662A (zh) | 2019-04-16 |
Family
ID=66991766
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW106134246A TW201915662A (zh) | 2017-10-03 | 2017-10-03 | 具有眼球追蹤功能之電子裝置及其控制方法 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TW201915662A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112419666A (zh) * | 2020-10-19 | 2021-02-26 | 钱继华 | 一种基于升降控制的智能居住服务方法及其系统 |
TWI751704B (zh) * | 2020-09-16 | 2022-01-01 | 宏碁股份有限公司 | 影像顯示裝置與其清晰度調整方法 |
CN114327216A (zh) * | 2020-09-25 | 2022-04-12 | 宏碁股份有限公司 | 影像显示装置与其清晰度调整方法 |
-
2017
- 2017-10-03 TW TW106134246A patent/TW201915662A/zh unknown
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI751704B (zh) * | 2020-09-16 | 2022-01-01 | 宏碁股份有限公司 | 影像顯示裝置與其清晰度調整方法 |
CN114327216A (zh) * | 2020-09-25 | 2022-04-12 | 宏碁股份有限公司 | 影像显示装置与其清晰度调整方法 |
CN114327216B (zh) * | 2020-09-25 | 2023-08-22 | 宏碁股份有限公司 | 影像显示装置与其清晰度调整方法 |
CN112419666A (zh) * | 2020-10-19 | 2021-02-26 | 钱继华 | 一种基于升降控制的智能居住服务方法及其系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9946338B2 (en) | Information processing to vary screen display based on a gaze point of the user | |
US9329691B2 (en) | Operation input apparatus and method using distinct determination and control areas | |
US8666115B2 (en) | Computer vision gesture based control of a device | |
JP5604739B2 (ja) | 画像認識装置および操作判定方法並びにプログラム | |
US9389722B2 (en) | User interface device that zooms image in response to operation that presses screen, image zoom method, and program | |
JP5412227B2 (ja) | 映像表示装置、および、その表示制御方法 | |
US9454837B2 (en) | Image processing apparatus, method, and computer-readable storage medium calculating size and position of one of an entire person and a part of a person in an image | |
TW200945174A (en) | Vision based pointing device emulation | |
JP2009042796A (ja) | ジェスチャー入力装置および方法 | |
KR20120096849A (ko) | 제스쳐를 이용한 입력 장치 및 방법 | |
JP5921981B2 (ja) | 映像表示装置および映像表示方法 | |
US20140053115A1 (en) | Computer vision gesture based control of a device | |
US20140101587A1 (en) | Information processing apparatus and method | |
KR102325339B1 (ko) | 사용자의 움직임을 검출하여 사용자 입력을 수신하는 방법 및 이를 위한 장치 | |
TW201915662A (zh) | 具有眼球追蹤功能之電子裝置及其控制方法 | |
JP2013114647A (ja) | ジェスチャー入力システム | |
CN103543825B (zh) | 摄像机光标系统 | |
JP6008904B2 (ja) | 表示制御装置、表示制御方法、及び、プログラム | |
TW201925989A (zh) | 互動系統 | |
WO2023031988A1 (ja) | 電子機器及びプログラム | |
JP2005352580A (ja) | ポインタ制御信号発生方法及び装置 | |
KR20110100987A (ko) | 시선 추적을 이용한 사용자 인터페이스 방법 및 이를 적용한 단말 | |
JP7504839B2 (ja) | ユーザインターフェースシステム | |
TW201033858A (en) | A non-contact mouse apparatus and method for the same | |
EP4398072A1 (en) | Electronic apparatus and program |