TWI639931B - 眼動追蹤式選擇性強調顯示器之一部分 - Google Patents

眼動追蹤式選擇性強調顯示器之一部分 Download PDF

Info

Publication number
TWI639931B
TWI639931B TW102115717A TW102115717A TWI639931B TW I639931 B TWI639931 B TW I639931B TW 102115717 A TW102115717 A TW 102115717A TW 102115717 A TW102115717 A TW 102115717A TW I639931 B TWI639931 B TW I639931B
Authority
TW
Taiwan
Prior art keywords
focal
focus
region
subsequent
display
Prior art date
Application number
TW102115717A
Other languages
English (en)
Other versions
TW201411413A (zh
Inventor
麥可 雅各
巴拉克 賀維茲
吉拉 肯西
Original Assignee
英特爾股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 英特爾股份有限公司 filed Critical 英特爾股份有限公司
Publication of TW201411413A publication Critical patent/TW201411413A/zh
Application granted granted Critical
Publication of TWI639931B publication Critical patent/TWI639931B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Abstract

說明包括用於眼動追蹤式選擇性強調顯示器之一部分之操作的系統、設備、物品及方法。

Description

眼動追蹤式選擇性強調顯示器之一部分
本發明係關於一種眼動追蹤式顯示器。
訓練材料通常用於廣泛採用所有類型的應用。因此，企業通常對產生包括有效地記錄訓練會話的線上展示及/或呈現之訓練材料的方法感興趣。通常使用應需求互動的訓練和支援視頻來推出新軟體、導向新員工、對客戶顯示如何使用你的產品、或建立「自助」的辦公桌。它也許能夠記錄現場演出或演講，並給予學生課程的倒轉按鈕且協助他們以他們自己的步調來學習或因缺席而趕上。在其他實作中，演出者和觀賞者可能都在相同時間觀看相同顯示。
促進有效地記錄演出、展示或訓練的軟體具有幾個優點。這類訓練/展示記錄軟體可作為有效提升及訓練軟體封包和應用程式的方法。學員能以他/她自己的步調來觀察離線的訓練材料，並可專注於他/她的興趣之特定區。此外，這類訓練/展示記錄軟體可用於傳遞訓練會話給廣 大的觀眾；因為訓練傳遞不必受訓練者或學員的可用性所限制。
現今的訓練/展示記錄軟體，如Microsoft® LiveMeeting、Camtasia® Recorder或之類，可記錄包括訓練者演說之全部或定制部分的畫面。在訓練者傳遞或離線時的實際訓練會話能被擷取/記錄，且接著被編輯和公佈以供公眾使用。替代地，大部分的記錄軟體(例如，Camtasia® Recorder)可提供擷取具有特殊效果的訓練會話以記錄由專家演出者提供使用者線上訓練之經驗的會話。在一些情況下，軟體可利用語音辨識技術來自動地產生能由訓練者之後修改或固定的標題。除了音頻之外，滑鼠點擊也可用於特殊效果(例如，聚焦或變焦觀察區)。因此，訓練/展示記錄軟體可提供聚焦(藉由基於滑鼠點擊來決定畫面的哪個區域放大/縮小)。
100‧‧‧選擇性強調系統
102‧‧‧顯示器
104‧‧‧成像裝置
110‧‧‧使用者
112‧‧‧第一使用者
114‧‧‧第二使用者
120‧‧‧分離顯示元素
130‧‧‧注視
132‧‧‧掃視
134‧‧‧注視
140‧‧‧觀察區
150‧‧‧聚焦區
152‧‧‧第二聚焦區
160‧‧‧加框
162‧‧‧上色
200‧‧‧程序
202-208‧‧‧方塊
300‧‧‧程序
310-340‧‧‧動作
306‧‧‧邏輯模組
406‧‧‧處理器
408‧‧‧記憶體儲存
412‧‧‧資料接收邏輯模組
414‧‧‧眼動追蹤邏輯模組
416‧‧‧觀察區邏輯模組
418‧‧‧選擇性強調邏輯模組
500‧‧‧系統
502‧‧‧平台
505‧‧‧晶片組
510‧‧‧處理器
512‧‧‧記憶體
514‧‧‧儲存器
515‧‧‧圖形子系統
516‧‧‧應用程式
518‧‧‧無線電
520‧‧‧顯示器
522‧‧‧使用者介面
530‧‧‧內容服務裝置
540‧‧‧內容傳送裝置
550‧‧‧導航控制器
560‧‧‧網路
600‧‧‧裝置
602‧‧‧外殼
604‧‧‧顯示器
606‧‧‧輸入/輸出裝置
608‧‧‧天線
612‧‧‧導航特徵
本文所描述的材料經由在附圖中的舉例，而非限定來說明。為求說明之簡單和清楚起見，圖示中所示之元件不一定按比例繪製。例如，為求清楚起見，有些元件的維度相對於其他元件可能被擴大。此外，在適當考量下，已在圖示之間重覆參考標記以指示出對應或類似的元件。在圖示中：第1圖係示範選擇性強調系統的示意圖；第2圖係繪示示範選擇性強調程序的流程圖； 第3圖係操作中之示範選擇性強調系統的示意圖；第4圖係示範選擇性強調系統的示意圖；第5圖係示範系統的示意圖；及第6圖係全部依照本揭露之至少一些實作來佈置之示範系統的示意圖。
【發明內容及實施方式】
現在參考所揭露之圖示來說明一或更多實施例或實作。儘管討論了具體的配置和佈置，但應了解這樣做僅係為了說明之目的。相關技術領域之熟知技術者將認為在不脫離本說明書之精神和範圍下可採用其他配置和佈置。相關技術領域之熟知技術者將清楚明白亦可在除了本文所述之外的多種其他系統和應用程式中採用本文所描述的技術及/或佈置。
儘管下面的說明提出了例如可表現在如單晶片系統(SoC)架構之架構中的各種實作，但本文所描述的技術及/或佈置之實作並不限於特定架構及/或計算系統且可藉由用於類似目的的任何架構及/或計算系統來實作。例如，採用例如多個積體電路(IC)晶片及/或封裝、及/或各種計算裝置及/或如機上盒、智慧型手機等的消費電子(CE)裝置的各種架構可實作本文所描述的技術及/或佈置。此外，儘管下面的說明可能提出了許多具體的細節，例如邏輯實作、系統元件的類型和相互關係、邏輯分割/整合選擇等，但無需上述具體的細節仍可實行所主張的主 題。在其他情況下，可能不會詳細顯示例如控制結構和全軟體指令序列的某實質內容以免模糊本文所揭露之實質內容。
本文所揭露之實質內容可以硬體、韌體、軟體、或以上之任何組合來實作。本文所揭露之實質內容亦可實作成儲存在機器可讀媒體上的指令，其可被一或更多處理器讀取和執行。機器可讀媒體可包括用於以機器(例如，計算裝置)可讀之形式來儲存或傳輸資訊的任何媒體及/或機制。例如，機器可讀媒體可包括唯讀記憶體(ROM)、隨機存取記憶體(RAM)、磁碟儲存媒體、光學儲存媒體、快閃記憶體裝置、電子、光學、聲波或其他形式的傳播信號(例如，載波、紅外線信號、數位信號等)、及其他。
在本說明書中提及「一個實作」、「一實作」、「一示範實作」等表示所述之實作可包括特定特徵、結構、或特性，但每個實作可能不一定包括特定特徵、結構、或特性。此外，上述用詞不一定係指相同的實作。此外，當針對一實作來說明特定特徵、結構、或特性時，無論是否明確說明都主張落在本領域之熟知技術者的知識範圍內以影響針對其他實作的上述特徵、結構、或特性。
下面說明包括用於基於至少部分的眼動追蹤來選擇性強調顯示器之部分之操作的系統、設備、物品及方法。
如上所述，在一些情況下，訓練/展示記錄軟體可利用滑鼠點擊來產生特殊效果(例如，聚焦或變焦觀察區)。因此，訓練/展示記錄軟體可提供聚焦(藉由基於 滑鼠點擊來判斷畫面的哪個區域放大/縮小)。然而，基於游標位置或滑鼠點擊的自動聚焦(也稱為智慧聚焦)可能不一定提供正確的焦點，因為在工具之出現或展示的傳遞期間，游標可能不一定指向聚焦區。此外，在經由訓練員之明確點擊來微調輸出(訓練記錄)的情況下，記錄將包括會使學員感到惱人的多餘游標顯示。
如將於下更加詳細所述，選擇性強調顯示器之一部分的操作可利用眼睛視線追蹤來隱性且準確地識別觀察區以作強調。換言之，使用者視線可隱性地控制強調；由此，僅自然地強調使用者故意看之畫面上的區域(例如，相對於使用者在瞬間不自覺或不由自主看一眼的區域之使用者之焦點的主要區域)。相較於其他傳統方法(亦即，鍵盤或滑鼠點擊)，使用這類視線資訊係為一種更準確的方法用來判斷電腦前面的使用者活動。替代地，使用者視線資訊可提供更自然且對使用者方便的方法來實作選擇性強調顯示器之一部分的操作。
例如，選擇性強調顯示器之一部分的操作可經由訓練者的視線而非滑鼠點擊來判斷畫面上的哪個區域給予聚焦(例如，放大/縮小)。凝視可以是較為自然的方式來跟隨訓練者，並提供記錄最自然有效的使用者(學員)經驗。在畫面經由訓練者之自動記錄來擷取的情況下，假設訓練者主要在看學員必須專注於哪裡(例如，專注於訓練者想要學員專注的重要區域)，便能自然地由訓練者的視線推動必須放在出現或展示上的焦點。由此，在記錄產品 展示、銷售人員演出的期間，眼動追蹤可用於隱性且準確地識別觀察區，或替代地經由編輯記錄(再次使用眼動追蹤)將聚焦效果加入畫面記錄。
同樣地，在兩個人都坐在相同電腦前面、觀察相同顯示器的情況下，訓練員可對學員顯示如何使用應用程式、閱覽文件、網站或之類。在這種情況下，顯示可以是多樣的且是完整的詳細資訊。對於訓練者而言，觀察區是什麼，以及顯示器中的哪裡有相關資訊是很顯然的。然而，學員不分享此知識。顯示器可能擠滿了資訊；因此偵測訓練者所瞄準的相關點對於學員而言可能並非顯然的，除非訓練者明確地指出它們。通常會由身體上以手指指向的訓練者或藉由使用滑鼠來改善這種情況。然而，身體上的指向是費時、費力的，且往往不夠準確。同樣地，滑鼠指向可能並不快，且可能不一定提供正確的焦點，因為在工具之出現或展示的傳遞期間，游標可能不一定指向聚焦區。
因此，如將於下更加詳細所述，利用眼動追蹤之選擇性強調顯示器之一部分的操作亦可應用於現場演出，其中訓練者和學員同時看著相同的顯示工具。例如，眼動追蹤可藉由凸顯凝視點來作為一種指向觀察區的自然方式，其可指出訓練者正瞄準的明確資訊區。上述眼動追蹤式凸顯可引導學員到所欲之畫面位置，並可使得更直覺地跟隨訓練者。為了這個目的，可追蹤訓練者的眼睛注視。由此，可藉由基於訓練者的眼動追蹤而選擇性強調顯示器之一部分而非掃描整個文件，立即地將學員導向正確點。此外， 上述眼動追蹤式凸顯可釋放滑鼠並允許滑鼠與眼動追蹤式凸顯不同步地分開使用。請注意當同時坐在電腦顯示器前面時，例如，訓練者和學員也能不時地切換角色，或能同時凸顯(例如，以不同顏色)這兩者的觀察區。
第1圖係依照本揭露之至少一些實作來佈置之示範選擇性強調系統100的示意圖。在所示之實作中，選擇性強調系統100可包括顯示器102和成像裝置104。在一些實例中，為了清楚起見，選擇性強調系統100可包括未顯示在第1圖中的額外項目。例如，選擇性強調系統100可包括處理器、射頻型(RF)收發器、及/或天線。再者，為了清楚起見，選擇性強調系統100可包括未顯示在第1圖的額外項目，如揚聲器、麥克風、加速度計、記憶體、路由器、網路介面邏輯、等等。
成像裝置104可配置以從選擇性強調系統100的一或更多使用者110擷取眼球移動資料。例如，成像裝置104可配置以從第一使用者112、第二使用者114、從一或更多額外使用者等、及/或以上之組合擷取眼球移動資料。在一些實例中，成像裝置104可位於選擇性強調系統100上，以便能夠當使用者110正觀看顯示器102時觀看使用者110。
在一些實例中，可經由相機感測型成像裝置104或之類(例如，互補金屬氧化物半導體型影像感測器(CMOS)、電荷耦合裝置型影像感測器(CCD)、紅外線發光二極體(IR-LED)及IR型相機感測器及/或之類) 來擷取第一使用者的眼球移動資料，而無需使用紅-綠-藍(RGB)深度相機及/或麥克風陣列來找出誰正在說話。在其他實例中，除了或替代於相機感測器，還可使用RGB-Depth相機及/或麥克風陣列。在一些實例中，成像裝置104可經由周邊眼動追蹤相機或作為整合的周邊眼動追蹤相機來設置在選擇性強調系統100中。
在操作中，選擇性強調系統100可利用眼球移動資料輸入，以便能夠判斷選擇性強調顯示器102的哪個部分。因此，選擇性強調系統100也許能夠藉由影響視覺資訊處理技術來進行選擇性強調。例如，選擇性強調系統100可從一或更多使用者110接收來自成像裝置104的眼球移動資料。可基於至少部分收到的眼球移動資料來判斷關於選擇性強調顯示器102的哪個部分。
在一些實例中，上述眼動追蹤可包括追蹤注視130及/或凝視。如本文所使用，「凝視」之詞可指可能是眼球追蹤器以一定頻率所給予之樣本的凝視點，而注視可能是從視線資料推斷出對某點一段時間量的觀察。
注視130可指視野中之某一點的觀察。跨越約兩度視野的此輸入由具有銳利度、清晰度和準確度(例如，與周邊視力相比較的準確度)的人腦處理。每秒通常約有三到四個注視130，各經過約兩百到三百毫秒。例如，注視130可包括數個被緊密分組的凝視點(例如，所採樣的頻率為60Hz，亦即，每隔16.7毫秒一次)。
掃視132可指注視點的重定位。掃視132可以是第一 注視130和第二注視134之間的快速彈道移動(例如，目標係在開始之前決定)。掃視132通常具有高達約二十度的幅度和約四十毫秒的期間(有視覺刺激之抑制的期間)。
注視130/134及/或掃視132可用來聚集和整合視覺資訊。注視130/134及/或掃視132也可反映出一或更多使用者110的意圖和認知狀態。
在一些實例中，可對一或更多使用者110之至少一者進行眼動追蹤。例如，可基於至少部分收到的眼球移動資料130來進行眼動追蹤。可決定觀察區140，其中觀察區可關聯於選擇性強調系統100的顯示器102之一部分。例如，可基於至少部分所進行的眼動追蹤來決定觀察區140。
在一些實例中，上述選擇性強調可包括基於至少部分將觀察區140關聯於一分離顯示元素120來選擇性地強調顯示器102區。如本文所使用，「分離顯示元素」之術語可指所顯示之可識別且獨立的項目。例如，分離顯示元素120可包括文字方塊、文字段落、預設數量的文字行、圖片、選單等及/或以上之組合。如圖所示，分離顯示元素120可能包括數個文字段落及/或數個圖片。例如，可決定對顯示元素120的凝視期間。上述凝視期間可基於判斷看特定顯示元素120所花費的時間比例。替代地，所判斷之觀察區140可能不關聯於任何特定分離顯示元素120。在上述實例中，觀察區140可以如預設矩形、橢圓形或其他 形狀的預設形狀及/或比例來定義。
可選擇性地強調關聯於所判斷之觀察區140之顯示器102之一部分(例如，聚焦區150)。在一些實例中，選擇性強調系統100可操作，使得選擇性強調包括基於至少部分將觀察區140關聯於一分離顯示元素120來選擇性地強調對應於觀察區140的聚焦區150。此外或替代地，選擇性強調系統100可操作，使得選擇性強調可包括基於至少部分之可集中於觀察區140的預設區大小來選擇性地強調對應於觀察區140的聚焦區150。例如，對應於觀察區140的聚焦區150可能具有如預設矩形、橢圓形或其他形狀的預設形狀和比例。
此外或替代地，選擇性強調系統100可操作，使得選擇性強調包括選擇性地強調第二聚焦區152。例如，第二聚焦區152可相當於關聯於所判斷之第二觀察區之顯示器102之部分。此外或替代地，選擇性強調可包括圖示地說明聚焦區150和第二聚焦區152之間的轉變(如可能由掃視所示134)。選擇性強調可包括反應於目前觀察區位在顯示器102之外之判斷，移除聚焦區150的選擇性強調。在一些實例中，可將兩個區域(例如，聚焦區150和第二聚焦區152)判斷為聚焦區，即使在它們之間沒有進行任何直接掃視。可同時強調數個區域(兩個以上)，若它們隨著時間的推移被判斷為焦點。藉由繪示強調聚焦區之組合的改變可進行圖示地說明一組聚焦區到另一組聚焦區之間的轉變。
選擇性強調可包括一或更多下列強調技術：放大聚焦區150、外擴(例如，加疊一放大聚焦區150，以便在下層影像上方出現)聚焦區150、凸顯聚焦區150。例如，凸顯聚焦區可包括框住聚焦區150(例如，經由加框160)、重上色聚焦區150(例如，經由上色162)、框住並重上色聚焦區150等、及/或以上之組合。
如將於下更加詳細所述，選擇性強調系統100可用以進行下面關聯於第2及/或3圖所述的各種功能之一些或所有者。
第2圖係依照本揭露之至少一些實作來佈置之示範選擇性強調程序200的流程圖。在所示之實作中，程序200可包括如方塊202、204、206、及/或208之一或更多者所示的一或更多操作、功能或動作。透過非限制實例，本文將參考第1及/或4圖之示範選擇性強調系統100來說明程序200。
程序200可開始於方塊202，「接收眼球移動資料」，其中可收到眼球移動資料。例如，可經由CMOS型影像感測器、CCD型影像感測器、RGB-Depth相機、具有IR-LED的IR型成像感測器、及/或之類來擷取收到的眼球移動資料。
處理可從操作202繼續進行至操作204，「進行眼動追蹤」，其中可進行眼動追蹤。例如，可基於至少部分收到的眼球移動資料來進行對一或更多使用者之至少一者的眼動追蹤。
在一些實例中，上述眼動追蹤可包括凝視點樣本，能從中推斷注視、掃視、及其他眼球移動類型。例如，可決定對顯示元素(例如，單字、句子、位於文字區的特定行/列、及/或影像)的凝視期間。例如，上述凝視期間可基於看特定顯示元素所判定花費的時間比例。
在另一實例中，上述眼球移動資料的分析可包括為關於一特定顯示元素之特定時間視窗(例如，最後一分鐘)決定對觀察區的注視數量。例如，上述注視可繪示顯示元素(例如，單字、句子、位於文字區的特定行/列、及/或影像)之觀察區相較於文字或顯示區中之其他區域的有關比例。此度量可指出區域的「重要性」給觀賞者且可能直接關於凝視率。
在另一實例中，上述眼動追蹤可包括為一特定時間視窗決定對觀察區的凝視數量。凝視可稱為由連續注視組成之區域的連續觀察。因此，對某個時間視窗中之觀察區的凝視數量將稱為返回此區域的數量。例如，上述返回數量的判斷可繪示顯示元素之觀察區相較於文字或顯示區中之其他區域的觀察比例。凝視數量能被測量為掃視到觀察區(定義顯示或文字元素)的返回數量且提供顯示項目之重要性的指示(例如，作為許多可能指示中的唯一一個實例)給使用者，並可用以觸發選擇性強調。
處理可從操作204繼續進行至操作206，「決定觀察區」，其中可以下列之眼球移動資料的分析來決定觀察區。例如，基於至少部分所進行的眼動追蹤來決定關聯於 電腦系統之顯示器之一部分的觀察區。
處理可從操作206繼續進行至操作208，「選擇性地強調關聯於所判斷之觀察區的聚焦區」，其中可選擇性地強調關聯於所判斷之觀察區的聚焦區。例如，可選擇性地強調對應於關聯於所判斷之觀察區之顯示器之一部分的聚焦區。
在操作中，程序200可對使用者視覺佇列利用智能和情境感知反應。例如，程序200也許能夠告訴使用者的注意力集中到哪裡以反應地選擇性只強調一特定顯示的一部分。
在於下參考第3圖更加詳細所述之實作的一或更多實例中可說明關於程序200的一些額外及/或替代細節。
第3圖係依照本揭露之至少一些實作來佈置之操作中之示範選擇性強調系統100和選擇性強調程序300的示意圖。在所示之實作中，程序300可包括如動作310、311、312、314、316、318、320、322、324、326、328、330、332、334、336、338及/或340之一或更多者所示的一或更多操作、功能或動作。透過非限制實例，本文將參考第1及/或4圖之示範選擇性強調系統100來說明程序300。
在所示之實作中，選擇性強調系統100可包括顯示器102、成像裝置104、邏輯模組306等、及/或以上之組合。雖然如第3圖所示之選擇性強調系統100可包括關聯於特定模組的一組特定方塊或動作，但這些方塊或動作可 關聯於與這裡所示之特定模組不同的模組。
程序300可開始於方塊310，「判斷應用程式是否已指定用於眼動追蹤的」，其中可判斷有關於是否已指定用於眼動追蹤的特定應用程式。例如，目前正顯示在顯示器102上的應用程式可能或可能未指定用於以眼動追蹤式選擇性強調來操作。
在一些實例中，特定應用程式可具有一預設模式(例如，眼動追蹤啟動或眼動追蹤關閉)，其將啟動所有應用程式的特徵、應用程式的某些類別(例如，文字式應用程式可被預設為具有眼動追蹤啟動，而視頻式的應用程式可被預設為具有眼動追蹤關閉)、或依各應用程式而有所不同的基礎。此外或替代地，使用者選擇可用來啟動或去能所有應用程式的特徵、應用程式的某些類別、或依各應用程式而有所不同的基礎。例如，可提示使用者致能或去能特徵。
處理可從操作310繼續進行至操作312，「擷取眼球移動資料」，其中可擷取眼球移動資料。例如，可經由成像裝置104來擷取眼球移動資料。在一些實例中，可反應於在操作310中判斷目前正顯示在顯示器102上的應用程式已指定用於以眼動追蹤式選擇性強調來操作而進行上述擷取眼球移動資料。
處理可從操作312繼續進行至操作314，「轉移眼球移動資料」，其中可轉移眼球移動資料。例如，眼球移動資料可從成像裝置104轉移至邏輯模組306。
處理可從操作314繼續進行至操作316，「接收眼球移動資料」，其中可收到眼球移動資料。例如，可經由CMOS型影像感測器、CCD型影像感測器、RGB-Depth相機、具有IR-LED的IR型成像感測器、及/或之類來擷取收到的眼球移動資料。
處理可從操作316繼續進行至操作318，「判斷使用者存在」，其中可判斷使用者存在或不存在。例如，可基於至少部分收到的眼球移動資料來判斷是否存在一或更多使用者之至少一者，其中反應於在操作310中判斷已指定用於以眼動追蹤操作的應用程式而發生是否存在一或更多使用者之至少一者的判定。
例如，程序300可包括臉部偵測，其中可偵測使用者的臉。例如，可基於至少部分的眼球移動資料來偵測一或更多使用者的臉。在一些實例中，上述臉部偵測(例如，其可選擇性地包括臉部辨識)可配置以在一或更多使用者之間作區分。替代地或此外，眼球移動樣式的差異可用以在兩個或更多使用者之間作區分。這類臉部偵測技術可使得相對累積包括臉部偵測、眼動追蹤、地標偵測、臉部對齊、微笑/眨眼/性別/年齡偵測、臉部辨識、偵測兩個或更多臉、及/或之類。
處理可從操作316及/或318繼續進行至操作320，「進行眼動追蹤」，其中可進行眼動追蹤。例如，可基於至少部分收到的眼球移動資料來進行對一或更多使用者之至少一者的眼動追蹤。例如，可反應於在操作318中為一 或更多使用者之至少一者判斷一或更多使用者之至少一者存在而發生眼動追蹤的實行。此外或替代地，可反應於在操作310中判斷已指定用於以眼動追蹤操作的應用程式而發生眼動追蹤的實行。
處理可從操作320繼續進行至操作322，「決定觀察區」，其中可決定觀察區。例如，關聯於電腦系統之顯示器之一部分的觀察區可基於至少部分所進行的眼動追蹤。
處理可從操作322繼續進行至操作324，「選擇性強調」，其中可選擇性地強調關聯於所判斷之觀察區的聚焦區。例如，可選擇性地強調對應於關聯於所判斷之觀察區之顯示器之一部分的聚焦區。
在一些實例中，程序300可操作，使得可基於以凝視位置為中心之特定半徑所定義的鄰近、從中央凝視位置上移和下移的預定行數、從中央凝視位置之總顯示的特定百分比區、整個文字段落、及整個影像或之類來決定聚焦區。在其他實例中，程序300可操作，使得可基於至少部分決定聚焦區大小以容納分離顯示元素來決定聚焦區，其中分離顯示元素可包括文字方塊、文字段落、預設數量的文字行、圖片、選單等、及/或以上之組合。
在一些實例中，程序300可操作，使得聚焦區之選擇性強調包括一或更多下列強調技術：放大聚焦區、外擴聚焦區、凸顯聚焦區等、及/或以上之組合。例如，凸顯聚焦區包括框住聚焦區、重上色聚焦區、框住並重上色聚焦區、及/或之類。
處理可從操作324繼續進行至操作326，「強調聚焦區」，其中顯示器102可強調顯示器102的聚焦區部分。例如，選擇性強調可包括基於至少部分的預設區大小來選擇性地強調區域。此外或替代地，選擇性強調可包括基於至少部分將觀察區關聯於一分離顯示元素來選擇性地強調區域。
處理可從操作326繼續進行至操作328，「決定更新的觀察區」，其中可決定更新的觀察區。例如，關聯於電腦系統之顯示器之一部份之更新的觀察區可基於至少部分如可藉由繼續所進行之眼動追蹤所指的使用者視線之改變。例如，當使用者的眼球變成新的注視、或作為使用者之一連串注視的結果時，可決定上述更新的觀察區。
處理可從操作328繼續進行至操作330，「更新選擇性強調」，其中可選擇性地強調關聯於更新的判斷之觀察區的第二聚焦區。例如，可選擇性地強調對應於關聯於所判斷之更新的觀察區之顯示器之一部分的第二聚焦區。在一些實例中，可連續地強調一或更多隨後聚焦區。
處理可從操作330繼續進行至操作332，「強調第二聚焦區及/或說明轉變」，其中顯示器102可顯示強調的第二聚焦區及/或轉變(例如，從第一聚焦區掃視到第二聚焦區)。例如，可經由顯示器102來選擇性地強調對應於關聯於更新的判斷之觀察區的顯示器之一部分的第二聚焦區。此外或替代地，可經由顯示器102來圖示地說明聚焦區和一或更多隨後聚焦區之間的轉變。
替代地，每個注視只有當其一次一個發生時顯示，且凸顯的聚焦區可根據時間線而改變。例如，能連續地顯示注視，或能顯示由以出現順序而連接至前面注視的注視所組成之注視的連續路徑(例如，注視本身的路徑或掃視所連接之注視的路徑)。在一些實例中，能分開追蹤掃視與聚焦區，因為沒有必要一定要顯示關於所強調聚焦區的掃視(因為不必顯示注視)。而且，在如上述之一些實例中，在多個聚焦區之間不必存在直接掃視(亦即，可能在其它地方有中間注視)。
如將於下更加詳細所述，記錄強調的聚焦區及/轉變可允許以所欲之速度來重播使用者的一連串注視，以閱覽離線的資訊或行動階段(例如，找到內部選單中的相關欄位)。因此，學員可能有機會多次且以所希望之明確的步調來自己閱覽展示。此外，例如，能調整重播速度以緩慢地重覆展示。
處理可從操作332繼續進行至操作334，「決定視線顯示器」，其中可判斷使用者的視線不再在顯示器上及/或主動應用程式上。例如，可基於至少部分如可藉由繼續所進行之眼動追蹤所指示的使用者視線之改變來判斷使用者的視線不再在顯示器上及/或主動應用程式上。例如，可當使用者之眼球變成新的注視時判斷使用者之視線不再在顯示器上及/或在主動應用程式上之辨識。
在一些實例中，可在使用者的視線不在聚焦區上的情況下(例如，缺少對聚焦區的視線停留時間)，或換言 之，當它不再為聚焦區時，移除強調效果。這個步驟可確保應用程式不會不必要地強調。例如，可在使用者對先前聚焦區的凝視比例小時；或當未在顯示器上觀察使用者的視線一段時間時(其中系統配置可決定「對顯示器不注視」的週期臨界值)，移除強調效果。
處理可從操作334繼續進行至操作336，「更新選擇性強調」，其中可決定更新的選擇性強調。例如，可傳送更新的選擇性強調給顯示器102，其中已判斷使用者之視線不再在顯示器上及/或在主動應用程式上。
處理可從操作336繼續進行至操作338，「移除選擇性強調」，其中可從顯示器102移除任何選擇性強調。例如，可反應於目前觀察區位在顯示器之外及/或位在主動應用程式之外之判斷，從顯示器102移除任何選擇性強調。此外或替代地，可反應於判斷已從聚焦區變成第二聚焦區(例如，當不再集中於聚焦區且尚未建立之後聚焦區時)，從顯示器102移除聚焦區的選擇性強調。
處理可從操作338繼續進行至操作340，「記錄連續選擇性強調」，其中可記錄任何選擇性強調。例如，可記錄聚焦區之連續選擇性強調、聚焦區和第二聚焦區之間的轉變、及第二聚焦區之選擇性強調。此外或替代地，上述記錄可記錄其他呈現的態樣，例如使用者之聲音的音頻資料、使用者之臉的視覺資料、顯示器102的外觀變化等、及/或以上之組合。例如，記錄操作340可在觀察和引導程序期間，同步地記錄使用者的聲音、使用者的眼球移 動、並顯示影像。例如，記錄的資料可之後用來動態地顯示並凸顯加疊在顯示內容上之注視的軌跡。
在一些實例中，可在已判斷已指定用於眼動追蹤式選擇性強調之主動應用程式的任何時間下記錄操作340。此外或替代地，可例如經由對使用者指出是否應記錄的提示來選擇性地啟動或關閉記錄操作340。
在一些實例中，上述記錄可在傳遞實際演出會話期間擷取線上訓練會話(例如，整合成視訊會議及/或如Microsoft® LiveMeeting或專用軟體(例如，CamtasiaTM))之電話會議軟體的訓練會話。在其它實例中，上述記錄可擷取離線訓練會話，例如訓練員之前準備利用專用軟體之記錄離線的地方。在這兩種情況下，程序300可允許訓練員編輯及/或修改並公佈如記錄的程序。
在操作中，程序300可判斷將註冊哪個應用程式來隨眼動追蹤進行。程序300可藉由當眼動追蹤對主動應用程式(例如，在系統100之前景上的應用程式)「啟動」及/或判斷使用者存在時，追蹤使用者的視線來判斷待選擇性強調的區域。程序300可計算視線資料(例如，對顯示器102凝視的x,y座標和視線的關聯時間戳)。在視線的x,y座標在所顯示應用程式之區域外部的情況下，可從顯示器102移除任何選擇性強調效果。
在一些實作中，當啟動眼動追蹤模式時可追蹤並記錄使用者的眼球移動。可經由軟體畫面擷取/記錄應用程式所提供的數個預定控制參數(例如，強調規模、強調期 間、注視參數、掃視參數、及/或之類)來配置眼動追蹤式強調(例如，放大智能聚焦效果)。例如，放大/縮小型強調可基於規模的預設系統臨界值。此外或替代地，上述放大/縮小型強調可基於期間的預設系統臨界值。在線上/離線演出/展示記錄期間，可基於使用者對顯示器102凝視來判斷聚焦區。
在其他實作中，在兩個人都坐在相同電腦前面、觀察相同顯示器的情況下，訓練員可對學員顯示如何使用應用程式、閱覽文件、網站或之類。在這種情況下，第一和第二使用者可能會在他們之間切換關於誰控制眼動追蹤輸出的角色。例如，兩個或更多使用者能使用切換模式、允許在兩個人之間改變眼動追蹤，在他們之間切換角色。在實際方面，眼動追蹤器能事先對兩個人校正-這是可能的，因為當兩個人並肩坐時，通常他們的頭彼此間有足夠大的距離。一些眼動追蹤器解決方法可使用一種頭部追蹤機制，允許跟隨所選個人的眼球。
儘管如第2和3圖所示之示範程序200和300的實作可包括以所示之順序來進行所示的所有方塊，但本揭露並不限於此，且在各種實例中，程序200和300的實作可包括只進行及/或以不同於所示之順序來進行所示之方塊的子集。
此外，可反應於由一或多個電腦程式產品提供的指令而進行第2和3圖的任一或更多方塊。這類程式產品可包括提供指令的信號乘載媒體，當指令被例如處理器執行時 可提供本文所述之功能。可在任何形式的電腦可讀媒體中提供電腦程式產品。因此，例如，包括一或多個處理器核心的處理器可反應於被電腦可讀媒體傳送至處理器的指令而進行第2和3圖所示之一或多個方塊。
如本文所述之任何實作中使用，「模組」之術語係指配置以提供本文所述之功能的軟體、韌體及/或硬體之任何組合。軟體可實作成軟體封包、代碼及/或指令集或指令，而如本文所述之任何實作中使用的「硬體」可包括例如固線式電路、可程式電路、狀態機電路、及/或儲存可程式電路所執行之指令的韌體之單獨或任何組合。模組可共同地或單獨地實作成形成例如積體電路(IC)、單晶片系統(SoC)等較大系統之部分的電路。
第4圖係依照本揭露之至少一些實作來佈置之示範選擇性強調系統100的示意圖。在所示之實作中，選擇性強調系統100可包括顯示器102、成像裝置104、及/或邏輯模組306。邏輯模組306可包括眼動資料邏輯模組412、眼動追蹤邏輯模組414、觀察區邏輯模組416、選擇性強調邏輯模組418等、及/或以上之組合。如圖所示，顯示器102、成像裝置104、處理器406及/或記憶體儲存408也許能夠彼此通訊及/或與邏輯模組306之一部分通訊。雖然如第4圖所示之選擇性強調系統100可包括關聯於特定模組的一組特定方塊或動作，但這些方塊或動作可關聯於與這裡所示之特定模組不同的模組。
在一些實例中，成像裝置104可配置以擷取眼球移動 資料。處理器406可通訊地耦接顯示器102和成像裝置104。記憶體儲存408可通訊地耦接處理器406。資料接收邏輯模組412、眼動追蹤邏輯模組414、觀察區邏輯模組416、及/或選擇性強調邏輯模組418可通訊地耦接處理器406及/或記憶體儲存408。
在一些實例中，資料接收邏輯模組412可配置以接收一或更多使用者之眼球移動資料。眼動追蹤邏輯模組414可配置以基於至少部分收到的眼球移動資料來進行對一或更多使用者之至少一者的眼動追蹤。觀察區邏輯模組416可配置以基於至少部分所進行的眼動追蹤來決定關聯於顯示器102之部分的觀察區。選擇性強調邏輯模組418可配置以選擇性地強調聚焦區，其中聚焦區對應於關聯於所判斷之觀察區之顯示器102之部分。
在一些實例中，邏輯模組306可包括一記錄邏輯模組(未顯示)，其可耦接處理器406及/或記憶體儲存408。記錄邏輯模組可配置以記錄聚焦區之連續選擇性強調、聚焦區和第二聚焦區之間的轉變、第二聚焦區之選擇性強調、及/或之類。此外或替代地，記錄邏輯模組可配置以記錄其他呈現的態樣，例如使用者之聲音的音頻資料、使用者之臉的視覺資料、顯示器102的外觀變化等、及/或以上之組合。
在各種實施例中，選擇性強調邏輯模組418可以硬體來實作，而軟體可實作資料接收邏輯模組412、眼動追蹤邏輯模組414、觀察區邏輯模組416、及/或記錄邏輯模組 (未顯示)。例如，在一些實施例中，選擇性強調邏輯模組418可由ASIC邏輯實作，而資料接收邏輯模組412、眼動追蹤邏輯模組414、觀察區邏輯模組416、及/或記錄邏輯模組可由如處理器406之邏輯所執行的軟體指令提供。然而，本揭露並不限於此方面，且眼動追蹤邏輯模組414、觀察區邏輯模組416、選擇性強調邏輯模組418、及/或記錄邏輯模組可由硬體、韌體及/或軟體之任何組合實作。此外，記憶體儲存408可以是任何類型的記憶體，如揮發性記憶體(例如，靜態隨機存取記憶體(SRAM)、動態隨機存取記憶體(DRAM)等)或非揮發性記憶體(例如，快閃記憶體等)、等等。在非限制實例中，記憶體儲存408可由快取記憶體實作。
第5圖繪示依照本揭露之示範系統500。在各種實作中，系統500可以是媒體系統，雖然系統500並不限於此內文。例如，系統500可併入個人電腦(PC)、膝上型電腦、纖薄膝上型電腦、平板電腦、觸控墊、可攜式電腦、手持電腦、掌上型電腦、個人數位助理(PDA)、蜂巢式電話、組合蜂巢式電話/PDA、電視、智慧型裝置(例如，智慧型手機、智慧型平板電腦或智慧型電視)、行動上網裝置(MID)、通信裝置、資料通訊裝置、等等。
在各種實作中，系統500包括耦接顯示器520的平台502。平台502可從如內容服務裝置530或內容傳送裝置540或其他類似內容來源的內容裝置接收內容。包括一或多個導航特徵的導航控制器550可用來與例如平台502及 /或顯示器520互動。於下更加詳細說明這些元件之各者。
在各種實作中，平台502可包括晶片組505、處理器510、記憶體512、儲存器514、圖形子系統515、應用程式516及/或無線電518之任何組合。晶片組505可在處理器510、記憶體512、儲存器514、圖形子系統515、應用程式516及/或無線電518之間提供內部通信。例如，晶片組505可包括能夠提供與儲存器514內部通信的儲存配接器(未顯示)。
處理器510可實作成複雜指令集電腦(CISC)或精簡指令集電腦(RISC)處理器：x86指令集相容處理器、多核心、或任何其他微處理器或中央處理單元(CPU)。在各種實作中，處理器510可以是雙核心處理器、雙核心行動處理器等等。
記憶體512可實作成揮發性記憶體裝置，例如但不限於隨機存取記憶體(RAM)、動態隨機存取記憶體(DRAM)、或靜態RAM(SRAM)。
儲存器514可實作成非揮發性儲存裝置，例如但不限於磁碟機、光碟機、磁帶機、內部儲存裝置、附接儲存裝置、快閃記憶體、電池備份SDRAM(同步DRAM)、及/或網路可存取儲存裝置。在各種實作中，例如，當包括多個硬碟機時，儲存器514可包括用來對有用的數位媒體提高儲存效能強化保護的技術。
圖形子系統515可進行如靜止或視頻的影像之處理以 供顯示。圖形子系統515可以是例如圖形處理單元(GPU)或視覺處理單元(VPU)。類比或數位介面可用來通訊地耦接圖形子系統515和顯示器520。例如，介面可以是高解析多媒體介面、顯示埠口(Display Port)、無線HDMI、及/或無線HD相容技術之任一者。圖形子系統515可整合至處理器510或晶片組505中。在一些實作中，圖形子系統515可以是通訊地耦接至晶片組505的獨立卡。
本文所述之圖形及/或視頻處理技術可以各種硬體架構來實作。例如，圖形及/或視頻功能可整合在晶片組內。替代地，可使用分離的圖形及/或視頻處理器。作為又一實作，可藉由包括多核心處理器的通用處理器來提供圖形及/或視頻功能。在又一實施例中，可在消費電子裝置中實作功能。
無線電518可包括能夠使用各種適當之無線通訊技術來傳送和接收信號的一或多個無線電。這類技術可涉及跨一或多個無線網路的通訊。示範無線網路包括(但不限於)無線區域網路(WLAN)、無線個人區域網路(WPAN)、無線都會區域網路(WMAN)、蜂巢式網路、及衛星網路。在跨上述網路的通訊中，無線電518可依照任何版本的一或多個適用標準來操作。
在各種實作中，顯示器520可包括任何電視型的監視器或顯示器。顯示器520可包括例如電腦顯示螢幕、觸控螢幕顯示器、視頻監視器、電視類的裝置、及/或電視。 顯示器520可以是數位及/或類比的。在各種實作中，顯示器520可以是全像式顯示器。而且，顯示器520可以是可接收視覺投影的透明表面。上述投影可傳送各種形式的資訊、影像、及/或物件。例如，上述投影可以是用於行動擴增實境(MAR)應用程式的視覺重疊。在一或多個軟體應用程式516的控制下，平台502可在顯示器520上顯示使用者介面522。
在各種實作中，內容服務裝置530可由任何國家、國際及/或獨立服務來控制而由此可透過例如網際網路被平台502存取。內容服務裝置530可耦接平台502及/或顯示器520。平台502及/或內容服務裝置530可耦接網路560以將媒體資訊傳遞(例如，發送及/或接收)至網路560並從網路560傳遞。內容傳送裝置540亦可耦接平台502及/或顯示器520。
在各種實作中，內容服務裝置530可包括有線電視盒、個人電腦、網路、電話、網路啟動裝置或能夠傳送數位資訊及/或內容的電器、及任何其他能夠透過網路560或直接地在內容提供者與平台502及/顯示器520之間單向或雙向傳遞內容的類似裝置。將了解可經由網路560將內容單向及/或雙向地傳遞至系統500中的任一元件和內容提供者並從中單向及/或雙向地傳遞。內容之實例可包括任何媒體資訊，包括例如視頻、音樂、醫療和遊戲資訊、等等。
內容服務裝置530可接收如包括媒體資訊、數位資 訊、及/或其他內容之有線電視節目的內容。內容提供者之實例可包括任何有線或衛星電視或無線電或網際網路內容提供者。所提出的實例並非意味著以任何方式來限制依照本揭露的實作。
在各種實作中，平台502可從具有一或多個導航特徵的導航控制器550接收控制信號。例如，控制器550的導航特徵可用來與使用者介面522互動。在實施例中，導航控制器550可以是定位裝置，其可以是允許使用者將空間(例如，連續的和多維的)資料輸入電腦中的電腦硬體元件(具體而言，是人性化介面裝置)。如圖形使用者介面(GUI)、及電視和監控器的許多系統允許使用者使用實體手勢來控制和提供資料給電腦或電視。
控制器550之導航特徵的移動可透過顯示於顯示器上的指標、游標、聚焦環、或其他目測指示器來複製在顯示器(例如，顯示器520)上。例如，在軟體應用程式516的控制下，位於導航控制器550上的導航特徵可被映射至顯示於例如使用者介面522上的虛擬導航特徵。在實施例中，控制器550可能不是單獨元件，而是可整合至平台502及/或顯示器520。然而，本揭露並不受限於該等元件，亦不於本文所述或所示的內文中受限。
在各種實作中，例如，當啟動驅動程式(未顯示)時，驅動程式可包括讓使用者能在啟動開機之後以觸碰按鈕來立即打開和關閉如同電視的平台502之技術。即便「關閉」平台，程式邏輯仍可允許平台502將內容流至媒 體配接器或其他內容服務裝置530或內容傳送裝置540。此外，晶片組505可包括支援例如(5.1)環繞立體聲音頻及/或高解析(7.1)環繞立體聲音頻的硬體及/或軟體。驅動程式可包括用於整合圖形平台的圖形驅動程式。在實施例中，圖形驅動程式可包含周邊元件互連(PCI)快捷圖形卡。
在各種實施例中，可整合系統500所示的任一或更多元件。例如，可整合平台502和內容服務裝置530、或可整合平台502和內容傳送裝置540、或例如可整合平台502、內容服務裝置530、和內容傳送裝置540。在各種實施例中，平台502和顯示器520可以是整合單元。例如，可整合顯示器520和內容服務裝置530、或可整合顯示器520和內容傳送裝置540。這些實例並非意味著限制本揭露。
在各種實施例中，系統500可實作成無線系統、有線系統、或這兩者之組合。當實作成無線系統時，系統500可包括適用於透過無線共享媒體來傳遞的元件和介面，如一或多個天線、傳送器、接收器、收發器、放大器、濾波器、控制邏輯等。無線共享媒體之實例可包括如RF頻譜之類的無線頻譜之部分。當實作成有線系統時，系統500可包括適用於透過有線通訊媒體來傳遞的元件和介面，如輸入/輸出(I/O)配接器、用來將I/O配接器與對應有線通訊媒體連接的實體連接器、網路介面卡(NIC)、磁碟控制器、視頻控制器、音頻控制器等。有線通訊媒體之實 例可包括導線、電線、金屬導線、印刷電路板(PCB)、底板、交換結構、半導體材料、雙扭線、同軸電纜、光纖、等等。
平台502可建立一或多個用來傳遞資訊的邏輯或實體通道。資訊可包括媒體資訊和控制資訊。媒體資訊可指預定給使用者之表示內容的任何資料。內容之實例可包括例如來自語音會話、視訊會議、串流視訊、電子郵件(「email」)信息、語音郵件信息、字母數字符號、圖形、影像、視頻、文字等的資料。來自語音會話的資料可以是例如語音資訊、靜默時間、背景雜音、舒適雜音、音調等。控制資訊可指預定給自動化系統之表示命令、指令或控制字的任何資料。例如，控制資訊可用來路由通過系統的媒體資訊、或指示節點以預定方式來處理媒體資訊。然而，本實施例並不限於第5圖所示或所述之元件或內文。
如上所述，系統500可以不同實體式樣或形狀因數來實作。第6圖繪示可實作系統500之小型形狀因數裝置600的實作。在實施例中，例如，裝置600可實作成具有無線能力的行動計算裝置。例如，行動計算裝置可指具有處理系統以及如一或多個電池之行動電源或供電的任何裝置。
如上所述，行動計算裝置之實例可包括個人電腦(PC)、膝上型電腦、纖薄膝上型電腦、平板電腦、觸控墊、可攜式電腦、手持電腦、掌上型電腦、個人數位助理 (PDA)、蜂巢式電話、組合蜂巢式電話/PDA、電視、智慧型裝置(例如，智慧型手機、智慧型平板電腦或智慧型電視)、行動上網裝置(MID)、通信裝置、資料通訊裝置等等。
行動計算裝置之實例亦可包括被配置由人們穿戴的計算機，例如手腕計算機、手指計算機、戒形計算機、眼鏡計算機、皮帶夾計算機、臂帶計算機、鞋子計算機、衣服計算機、及其他可穿戴式計算機。在各種實施例中，例如，行動計算裝置可實作成能夠執行電腦應用程式以及語音通訊及/或資料通訊的智慧型手機。舉例來說，雖然有些實施例可以實作成智慧型手機的行動計算裝置來說明，但可了解其他實施例仍可同樣使用其他無線行動計算裝置來實作。本實施例並不限於此內文。
如第6圖所示，裝置600可包括外殼602、顯示器604、輸入/輸出(I/O)裝置606、及天線608。裝置600亦可包括導航特徵612。顯示器604可包括任何適當顯示單元來顯示適用於行動計算裝置之資訊。I/O裝置606可包括任何適當I/O裝置來將資訊輸入行動計算裝置。I/O裝置606的實例可包括字母數字鍵盤、數字小鍵盤、觸控墊、輸入鍵、按鍵、開關、搖桿開關、麥克風、揚聲器、語音辨識裝置及軟體、等等。資訊亦可透過麥克風(未顯示)輸入至裝置600。可透過語音辨識裝置(未顯示)來數位化上述資訊。本實施例並不限於此內文。
各種實施例可使用硬體元件、軟體元件、或這兩者之 組合來實作。硬體元件之實例可包括處理器、微處理器、電路、電路元件(例如，電晶體、電阻器、電容器、電感器等等)、積體電路、專用積體電路(ASIC)、可程式邏輯裝置(PLD)、數位信號處理器(DSP)、現場可程式閘陣列(FPGA)、邏輯閘、暫存器、半導體裝置、晶片、微晶片、晶片組等等。軟體之實例可包括軟體元件、程式、應用、電腦程式、應用程式、系統程式、機器程式、作業系統軟體、中間軟體、韌體、軟體模組、常式、副常式、函數、方法、程序、軟體介面、應用程式介面(API)、指令集、計算碼、計算機碼、碼段、計算機碼段、字組、值、符號、或以上之任何組合。判定實施例是否使用硬體元件及/或軟體元件來實作可依照如所欲之計算率、功率級、耐熱性、處理週期預算、輸入資料率、輸出資料率、記憶體資源、資料匯流排速度及其他設計或效能限制的一些因素而有所不同。
至少一實施例的一或更多態樣可藉由儲存在機器可讀媒體上的代表指令來實作，其描述在處理器內的各種邏輯，當指令被機器讀取時會使機器組裝邏輯來進行本文描述的技術。這樣的表現，稱為「IP核心」，可儲存在有形的機器可讀媒體上並供應至各種顧客或製造廠來下載至實際做成邏輯或處理器的製造機器中。
僅管已參考各種實作來說明本文所提出的某些功能，本說明書將不被解釋成限制性的意義。因此，本領域之熟知技術者應清楚明白關於本揭露之本文所述之實作以及其 他實作的各種修改被視為是落在本揭露之精神和範圍內。
下面的實例涉及其他實施例。
在一個實例中，一種電腦實作方法，用於選擇性地強調在一電腦之一顯示器上的一聚焦區，方法可包括接收一或更多使用者之眼球移動資料。可進行對一或更多使用者之至少一者的眼動追蹤。例如，基於至少部分收到的眼球移動資料來進行眼動追蹤。可決定一觀察區，其中觀察區可關聯於電腦系統之顯示器之一部分。例如，可基於至少部分所進行的眼動追蹤來決定觀察區。可選擇性地強調關聯於所決定之觀察區的聚焦區。例如，聚焦區可對應於關聯於所判斷之觀察區之顯示器之部分。
在一些實例中，方法可包括判斷是否已指定用於以眼動追蹤操作的一應用程式，其中反應於已指定用於以眼動追蹤操作的應用程式之判斷而發生眼動追蹤的實行。
在一些實例中，方法可包括選擇性地強調一或更多隨後聚焦區，其中一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之顯示器之部分。
在一些實例中，方法可包括圖示地說明聚焦區和一或更多隨後聚焦區之間的轉變。
在一些實例中，方法可包括記錄聚焦區之連續選擇性強調、聚焦區和一或更多隨後聚焦區之間的轉變、和一或更多隨後聚焦區之選擇性強調。
在一些實例中，方法可包括反應於一目前觀察區位在顯示器之外之判斷及/或當不再集中於聚焦區且尚未建立 一隨後聚焦區時，移除聚焦區的選擇性強調。
在一些實例中，方法可操作，使得聚焦區之選擇性強調包括一或更多下列強調技術：放大聚焦區、外擴聚焦區、及凸顯聚焦區；其中凸顯聚焦區包括框住聚焦區、重上色聚焦區、及/或框住並重上色聚焦區，
在一些實例中，方法可操作，使得聚焦區的選擇性強調包括基於至少部分的一預設區大小及/或基於至少部分將觀察區關聯於一分離顯示元素來選擇性地強調聚焦區，其中分離顯示元素包括一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單。
在其他實例中，一種在電腦上用於選擇性強調的系統可包括一顯示器、一成像裝置、一或更多處理器、一或更多記憶體儲存，一資料接收邏輯模組、一眼動追蹤邏輯模組、一觀察區邏輯模組、一選擇性強調邏輯模組等、及/或以上之組合。成像裝置可配置以擷取眼球移動資料。一或更多處理器可通訊地耦接顯示器和成像裝置。一或更多記憶體儲存可通訊地耦接一或更多處理器。資料接收邏輯模組可通訊地耦接一或更多處理器及一或更多記憶體儲存，並可配置以接收一或更多使用者之眼球移動資料。眼動追蹤邏輯模組可通訊地耦接一或更多處理器及一或更多記憶體儲存，並可配置以基於至少部分收到的眼球移動資料來進行對一或更多使用者之至少一者的眼動追蹤。觀察區邏輯模組可通訊地耦接一或更多處理器及一或更多記憶體儲存，並可配置以基於至少部分所進行的眼動追蹤來決 定關聯於顯示器之一部分的一觀察區。選擇性強調邏輯模組可通訊地耦接一或更多處理器及一或更多記憶體儲存，並可配置以選擇性地強調聚焦區，其中聚焦區對應於關聯於所判斷之觀察區之顯示器之部分。
在一些實例中，系統可操作，使得反應於已指定用於以眼動追蹤操作的應用程式之判斷而發生眼動追蹤的實行。聚焦區的選擇性強調可包括選擇性地強調一或更多隨後聚焦區，其中一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之顯示器之部分。聚焦區的選擇性強調可包括圖示地說明聚焦區和一或更多隨後聚焦區之間的轉變。聚焦區的選擇性強調可包括反應於一目前觀察區位在顯示器之外之判斷及/或當不再集中於聚焦區且尚未建立一隨後聚焦區時，移除聚焦區的選擇性強調。聚焦區之選擇性強調可包括一或更多下列強調技術：放大聚焦區、外擴聚焦區、及凸顯聚焦區；其中凸顯聚焦區可包括框住聚焦區、重上色聚焦區、及/或框住並重上色聚焦區。聚焦區的選擇性強調可包括基於至少部分的一預設區大小及/或基於至少部分將觀察區關聯於一分離顯示元素來選擇性地強調聚焦區。分離顯示元素可包括一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單，及/或以上之組合。在一些實例中，系統可包括一記錄邏輯模組，通訊地耦接一或更多處理器及一或更多記憶體儲存，並可配置以記錄聚焦區之連續選擇性強調、聚焦區和一或更多隨後聚焦區之間的轉變、和一或更多隨後聚焦區之選 擇性強調。
在另一實例中，至少一種機器可讀媒體可包括複數個指令，其反應於執行在一計算裝置上而使計算裝置進行根據上述實例之任一項所述之方法。
在又一實例中，一種設備可包括用於進行根據上述實例之任一項所述之工具。
上述實例可包括特定的特徵組合。然而，上述實例並不限於此方面，且在各種實作中，上述實例可包括只進行上述特徵的子集、進行上述特徵的不同順序、進行上述特徵的不同組合、及/或進行明確列出之那些特徵的額外特徵。例如，可關於示範設備、示範系統、及/或示範物品來實作參考示範方法來說明的所有特徵，而反之亦然。

Claims (26)

  1. 一種電腦實作方法(200)，用於選擇性地強調在一電腦系統之一顯示器(102)上的一聚焦區(150)，該方法包含：接收(202)一或更多使用者(112；114)之眼球移動資料；基於至少部分收到的該眼球移動資料來進行(204)對該一或更多使用者之至少一者的眼動追蹤；基於至少部分所進行的該眼動追蹤來決定(206)關聯於該電腦系統之該顯示器之一部分的一觀察區(140)；及選擇性地強調(208)該聚焦區，其中該聚焦區對應於關聯於所判斷之該觀察區之該顯示器之部分；選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；及圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變。
  2. 如申請專利範圍第1項所述之方法，其中該聚焦區的選擇性強調包含放大該聚焦區。
  3. 如申請專利範圍第1項所述之方法，其中該聚焦區的選擇性強調包含外擴該聚焦區。
  4. 如申請專利範圍第1項所述之方法，其中該聚焦區的選擇性強調包含凸顯該聚焦區，其中凸顯該聚焦區包含框住該聚焦區、重上色該聚焦區、及/或框住並重上色該聚焦區。
  5. 如申請專利範圍第1項所述之方法，其中該聚焦區的選擇性強調包含基於至少部分的一預設區大小來選擇性地強調該聚焦區。
  6. 如申請專利範圍第1項所述之方法，其中該聚焦區的選擇性強調包含基於至少部分將該觀察區關聯於一分離顯示元素來選擇性地強調該聚焦區，其中該分離顯示元素包含一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單。
  7. 如申請專利範圍第1項所述之方法，其中該眼動追蹤的步驟包含決定於某個時間窗在該觀察區上注視的數目。
  8. 如申請專利範圍第1項所述之方法，更包含：選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；及記錄連續的該聚焦區之選擇性強調和該一或更多隨後聚焦區之選擇性強調。
  9. 如申請專利範圍第1項所述之方法，更包含：選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變；及記錄該聚焦區之連續選擇性強調、該聚焦區和該一或 更多隨後聚焦區之間的轉變、和該一或更多隨後聚焦區之選擇性強調。
  10. 如申請專利範圍第1項所述之方法，更包含：反應於一目前觀察區位在該顯示器之外之判斷及/或當不再集中於該聚焦區且尚未建立一隨後聚焦區時，移除該聚焦區的選擇性強調。
  11. 如申請專利範圍第1項所述之方法，更包含：判斷是否已指定用於以眼動追蹤操作的一應用程式；及其中反應於已指定用於以眼動追蹤操作的該應用程式之判斷而發生眼動追蹤的實行。
  12. 如申請專利範圍第1項所述之方法，更包含：判斷是否已指定用於以眼動追蹤操作的一應用程式，其中反應於已指定用於以眼動追蹤操作的該應用程式之判斷而發生眼動追蹤的實行；選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變；反應於一目前觀察區位在該顯示器之外之判斷及/或當不再集中於該聚焦區且尚未建立一隨後聚焦區時，移除該聚焦區的選擇性強調；及記錄該聚焦區之連續選擇性強調、該聚焦區和該一或 更多隨後聚焦區之間的轉變、和該一或更多隨後聚焦區之選擇性強調，其中該聚焦區之選擇性強調包含一或更多下列強調技術：放大該聚焦區、外擴該聚焦區、及凸顯該聚焦區，其中凸顯該聚焦區包含框住該聚焦區、重上色該聚焦區、及/或框住並重上色該聚焦區，其中該聚焦區的選擇性強調包含基於至少部分的一預設區大小及/或基於至少部分將該觀察區關聯於一分離顯示元素來選擇性地強調該聚焦區，其中該分離顯示元素包含一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單。
  13. 一種用於選擇性強調一電腦顯示器的一聚焦區(150)之系統(100)，包含：一顯示器(102)；一成像裝置(104)，配置以擷取眼球移動資料；一或更多處理器(406)，通訊地耦接該顯示器和該成像裝置；一或更多記憶體儲存(408)，通訊地耦接該一或更多處理器；一資料接收邏輯模組(412)，通訊地耦接該一或更多處理器及該一或更多記憶體儲存，並配置以接收一或更多使用者(112；114)之眼球移動資料；一眼動追蹤邏輯模組(414)，通訊地耦接該一或更多處理器及該一或更多記憶體儲存，並且組態以基於至少部 分收到的該眼球移動資料來進行對該一或更多使用者之至少一者的眼動追蹤；一觀察區邏輯模組(416)，通訊地耦接該一或更多處理器及該一或更多記憶體存儲，並且組態以基於至少部分所進行的該眼動追蹤來決定關聯於該顯示器之一部分的一觀察區(140)；及一選擇性強調邏輯模組(418)，通訊地耦接該一或更多處理器及該一或更多記憶體儲存，並且組態以選擇性地強調該聚焦區，其中該聚焦區對應於關聯於所判斷之該觀察區之該顯示器之部分，其中：該選擇性強調邏輯模組更組態以選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；及圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變。
  14. 如申請專利範圍第13項所述之系統，其中該聚焦區的選擇性強調包含放大該聚焦區。
  15. 如申請專利範圍第13項所述之系統，其中該聚焦區的選擇性強調包含外擴該聚焦區。
  16. 如申請專利範圍第13項所述之系統，其中該聚焦區的選擇性強調包含凸顯該聚焦區，其中凸顯該聚焦區包含框住該聚焦區、重上色該聚焦區、及/或框住並重上色該聚焦區。
  17. 如申請專利範圍第13項所述之系統，其中該聚焦區的選擇性強調包含基於至少部分的一預設區大小來選擇 性地強調該聚焦區。
  18. 如申請專利範圍第13項所述之系統，其中該聚焦區的選擇性強調包含基於至少部分將該觀察區關聯於一分離顯示元素來選擇性地強調該聚焦區，其中該分離顯示元素包含一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單。
  19. 如申請專利範圍第13項所述之系統，其中該眼動追蹤的步驟包含決定於某個時間窗在該觀察區上注視的數目。
  20. 如申請專利範圍第13項所述之系統，其中該邏輯模組更配置以：選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；及記錄連續的該聚焦區之選擇性強調和該一或更多隨後聚焦區之選擇性強調。
  21. 如申請專利範圍第13項所述之系統，其中該選擇性強調邏輯模組更配置以：選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分；圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變；及記錄該聚焦區之連續選擇性強調、該聚焦區和該一或 更多隨後聚焦區之間的轉變、和該一或更多隨後聚焦區之選擇性強調。
  22. 如申請專利範圍第13項所述之系統，其中該邏輯模組更配置以反應於一目前觀察區位在該顯示器之外之判斷及/或當不再集中於該聚焦區且尚未建立一隨後聚焦區時，移除該聚焦區的選擇性強調。
  23. 如申請專利範圍第13項所述之系統，其中反應於已指定用於以眼動追蹤操作的應用程式之判斷而發生眼動追蹤的實行。
  24. 如申請專利範圍第13項所述之系統，更包含：其中反應於已指定用於以眼動追蹤操作的應用程式之判斷而發生眼動追蹤的實行，其中該聚焦區的選擇性強調包含選擇性地強調一或更多隨後聚焦區，其中該一或更多隨後聚焦區對應於關聯於一或更多隨後判斷之觀察區之該顯示器之部分，其中該聚焦區的選擇性強調包含圖示地說明該聚焦區和該一或更多隨後聚焦區之間的轉變，其中該聚焦區的選擇性強調包含反應於一目前觀察區位在該顯示器之外之判斷及/或當不再集中於該聚焦區且尚未建立一隨後聚焦區時，移除該聚焦區的選擇性強調，其中該聚焦區之選擇性強調包含一或更多下列強調技術：放大該聚焦區、外擴該聚焦區、及凸顯該聚焦區；其中凸顯該聚焦區包含框住該聚焦區、重上色該聚焦區、及/或框住並重上色該聚焦區， 其中該聚焦區的選擇性強調包含基於至少部分的一預設區大小及/或基於至少部分將該觀察區關聯於一分離顯示元素來選擇性地強調該聚焦區，其中該分離顯示元素包含一文字方塊、一文字段落、預設數量的文字行、一圖片、及/或一選單，及其中該邏輯模組更配置以記錄該聚焦區之連續選擇性強調、該聚焦區和該一或更多隨後聚焦區之間的轉變、和該一或更多隨後聚焦區之選擇性強調。
  25. 一種非暫態機器可讀媒體，包含：複數個指令，其反應於執行在一計算裝置上而使該計算裝置進行如申請專利範圍第1-12項之任一項所述之方法。
  26. 一種設備，包含：用於進行如申請專利範圍第1-12項之任一項所述之方法的工具。
TW102115717A 2012-05-09 2013-05-02 眼動追蹤式選擇性強調顯示器之一部分 TWI639931B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
??PCT/US12/37017 2012-05-09
PCT/US2012/037017 WO2013169237A1 (en) 2012-05-09 2012-05-09 Eye tracking based selective accentuation of portions of a display

Publications (2)

Publication Number Publication Date
TW201411413A TW201411413A (zh) 2014-03-16
TWI639931B true TWI639931B (zh) 2018-11-01

Family

ID=49551088

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102115717A TWI639931B (zh) 2012-05-09 2013-05-02 眼動追蹤式選擇性強調顯示器之一部分

Country Status (6)

Country Link
US (1) US20140002352A1 (zh)
EP (1) EP2847648A4 (zh)
JP (1) JP6165846B2 (zh)
CN (1) CN104395857A (zh)
TW (1) TWI639931B (zh)
WO (1) WO2013169237A1 (zh)

Families Citing this family (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2432218B1 (en) * 2010-09-20 2016-04-20 EchoStar Technologies L.L.C. Methods of displaying an electronic program guide
US8687840B2 (en) * 2011-05-10 2014-04-01 Qualcomm Incorporated Smart backlights to minimize display power consumption based on desktop configurations and user eye gaze
US20130325546A1 (en) * 2012-05-29 2013-12-05 Shopper Scientist, Llc Purchase behavior analysis based on visual history
US9398229B2 (en) 2012-06-18 2016-07-19 Microsoft Technology Licensing, Llc Selective illumination of a region within a field of view
US9674436B2 (en) * 2012-06-18 2017-06-06 Microsoft Technology Licensing, Llc Selective imaging zones of an imaging sensor
WO2014089542A1 (en) 2012-12-06 2014-06-12 Eyefluence, Inc. Eye tracking wearable devices and methods for use
EP2940985A4 (en) * 2012-12-26 2016-08-17 Sony Corp IMAGE PROCESSING DEVICE, AND IMAGE PROCESSING METHOD AND PROGRAM
KR20160005013A (ko) 2013-03-01 2016-01-13 토비 에이비 지연 워프 시선 상호작용
US9864498B2 (en) 2013-03-13 2018-01-09 Tobii Ab Automatic scrolling based on gaze detection
US10109258B2 (en) * 2013-07-18 2018-10-23 Mitsubishi Electric Corporation Device and method for presenting information according to a determined recognition degree
DE102013013698A1 (de) * 2013-08-16 2015-02-19 Audi Ag Verfahren zum Betreiben einer elektronischen Datenbrille und elektronische Datenbrille
US10558262B2 (en) 2013-11-18 2020-02-11 Tobii Ab Component determination and gaze provoked interaction
US10317995B2 (en) 2013-11-18 2019-06-11 Tobii Ab Component determination and gaze provoked interaction
US20150169048A1 (en) * 2013-12-18 2015-06-18 Lenovo (Singapore) Pte. Ltd. Systems and methods to present information on device based on eye tracking
US10180716B2 (en) 2013-12-20 2019-01-15 Lenovo (Singapore) Pte Ltd Providing last known browsing location cue using movement-oriented biometric data
US9804753B2 (en) * 2014-03-20 2017-10-31 Microsoft Technology Licensing, Llc Selection using eye gaze evaluation over time
US10409366B2 (en) * 2014-04-28 2019-09-10 Adobe Inc. Method and apparatus for controlling display of digital content using eye movement
US10564714B2 (en) 2014-05-09 2020-02-18 Google Llc Systems and methods for biomechanically-based eye signals for interacting with real and virtual objects
KR102173699B1 (ko) * 2014-05-09 2020-11-03 아이플루언스, 인크. 안구 신호들의 인식 및 지속적인 생체 인증을 위한 시스템과 방법들
CN105320422B (zh) * 2014-08-04 2018-11-06 腾讯科技（深圳）有限公司 一种信息数据显示方法和装置
US10133348B2 (en) * 2014-10-23 2018-11-20 Koninklijke Philips N.V. Gaze-tracking driven region of interest segmentation
US9674237B2 (en) 2014-11-02 2017-06-06 International Business Machines Corporation Focus coordination in geographically dispersed systems
CN105607730A (zh) * 2014-11-03 2016-05-25 航天信息股份有限公司 基于眼球追踪的增强显示方法及装置
US9535497B2 (en) 2014-11-20 2017-01-03 Lenovo (Singapore) Pte. Ltd. Presentation of data on an at least partially transparent display based on user focus
CN104850317A (zh) * 2014-12-31 2015-08-19 华为终端（东莞）有限公司 可穿戴设备的屏幕的显示方法及可穿戴设备
WO2016112531A1 (en) * 2015-01-16 2016-07-21 Hewlett-Packard Development Company, L.P. User gaze detection
JP6557981B2 (ja) * 2015-01-30 2019-08-14 富士通株式会社 表示装置、表示プログラム及び表示方法
US10242379B2 (en) * 2015-01-30 2019-03-26 Adobe Inc. Tracking visual gaze information for controlling content display
JP2016151798A (ja) * 2015-02-16 2016-08-22 ソニー株式会社 情報処理装置および方法、並びにプログラム
CN104866785B (zh) * 2015-05-18 2018-12-18 上海交通大学 结合眼动跟踪的基于非拥塞窗口信息安全系统及方法
JP6553418B2 (ja) * 2015-06-12 2019-07-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示制御方法、表示制御装置及び制御プログラム
US9898865B2 (en) * 2015-06-22 2018-02-20 Microsoft Technology Licensing, Llc System and method for spawning drawing surfaces
EP3335096B1 (en) * 2015-08-15 2022-10-05 Google LLC System and method for biomechanically-based eye signals for interacting with real and virtual objects
EP3156880A1 (en) * 2015-10-14 2017-04-19 Ecole Nationale de l'Aviation Civile Zoom effect in gaze tracking interface
EP3156879A1 (en) * 2015-10-14 2017-04-19 Ecole Nationale de l'Aviation Civile Historical representation in gaze tracking interface
US10223233B2 (en) 2015-10-21 2019-03-05 International Business Machines Corporation Application specific interaction based replays
CN105426399A (zh) * 2015-10-29 2016-03-23 天津大学 一种基于眼动的提取图像兴趣区域的交互式图像检索方法
JP2017117384A (ja) 2015-12-25 2017-06-29 東芝テック株式会社 情報処理装置
TWI578183B (zh) * 2016-01-18 2017-04-11 由田新技股份有限公司 身分驗證方法、裝置、系統及電腦程式產品
US10775882B2 (en) 2016-01-21 2020-09-15 Microsoft Technology Licensing, Llc Implicitly adaptive eye-tracking user interface
US10394316B2 (en) 2016-04-07 2019-08-27 Hand Held Products, Inc. Multiple display modes on a mobile device
CN106155316A (zh) * 2016-06-28 2016-11-23 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
KR20230133940A (ko) 2016-07-25 2023-09-19 매직 립, 인코포레이티드 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화
JP6933455B2 (ja) * 2016-09-29 2021-09-08 株式会社東芝 関心維持システム及びサーバ
CN106412563A (zh) * 2016-09-30 2017-02-15 珠海市魅族科技有限公司 一种图像显示方法以及装置
US10867445B1 (en) * 2016-11-16 2020-12-15 Amazon Technologies, Inc. Content segmentation and navigation
US10311641B2 (en) * 2016-12-12 2019-06-04 Intel Corporation Using saccadic eye movements to improve redirected walking
CN108604128B (zh) * 2016-12-16 2021-03-30 华为技术有限公司 一种处理方法及移动设备
KR20180074180A (ko) 2016-12-23 2018-07-03 삼성전자주식회사 가상현실 영상에 대한 정보를 제공하는 장치 및 방법
CN106652972B (zh) 2017-01-03 2020-06-05 京东方科技集团股份有限公司 显示屏的处理电路、显示方法及显示器件
US10929860B2 (en) * 2017-03-28 2021-02-23 Adobe Inc. Viewed location metric generation and engagement attribution within an AR or VR environment
US10643485B2 (en) * 2017-03-30 2020-05-05 International Business Machines Corporation Gaze based classroom notes generator
DE102017213005A1 (de) * 2017-07-27 2019-01-31 Audi Ag Verfahren zum Darstellen eines Anzeigeinhalts
TWI646466B (zh) * 2017-08-09 2019-01-01 宏碁股份有限公司 視覺範圍映射方法及相關眼球追蹤裝置與系統
US10795671B2 (en) 2017-11-21 2020-10-06 International Business Machines Corporation Audiovisual source code documentation
GB2571106A (en) * 2018-02-16 2019-08-21 Sony Corp Image processing apparatuses and methods
CN109324689A (zh) * 2018-09-30 2019-02-12 平安科技（深圳）有限公司 基于眼球运动轨迹的测试题目放大方法、系统及设备
TWI704473B (zh) 2018-11-16 2020-09-11 財團法人工業技術研究院 視線向量偵測方向與裝置
WO2020171637A1 (en) 2019-02-20 2020-08-27 Samsung Electronics Co., Ltd. Apparatus and method for displaying contents on an augmented reality device
CN109919065A (zh) * 2019-02-26 2019-06-21 浪潮金融信息技术有限公司 一种使用眼球追踪技术在屏幕上获取关注点的方法
CN110248254A (zh) * 2019-06-11 2019-09-17 Oppo广东移动通信有限公司 显示控制方法及相关产品
CN111190486B (zh) * 2019-12-27 2023-07-25 季华实验室 一种基于眼睛控制的分区显示方法及装置
US20230015224A1 (en) * 2020-01-14 2023-01-19 Hewlett-Packard Development Company, L.P. Face orientation-based cursor positioning on display screens
CN111563432A (zh) * 2020-04-27 2020-08-21 歌尔科技有限公司 一种显示方法及增强现实显示设备
TWI795823B (zh) * 2020-06-29 2023-03-11 仁寶電腦工業股份有限公司 電子裝置及其操作方法
CN111782202A (zh) * 2020-06-30 2020-10-16 京东数字科技控股有限公司 一种应用数据的编辑方法和装置
US11490968B2 (en) 2020-07-29 2022-11-08 Karl Storz Se & Co. Kg Devices, systems, and methods for labeling objects of interest during a medical procedure
KR102408941B1 (ko) * 2020-10-07 2022-06-14 ㈜ 한국공학기술연구원 수어 통역을 제공하는 양방향 대화 시스템
US11474598B2 (en) * 2021-01-26 2022-10-18 Huawei Technologies Co., Ltd. Systems and methods for gaze prediction on touch-enabled devices using touch interactions
US11775060B2 (en) * 2021-02-16 2023-10-03 Athena Accessible Technology, Inc. Systems and methods for hands-free scrolling
CN113010017B (zh) * 2021-03-29 2023-06-30 武汉虹信技术服务有限责任公司 一种多媒体信息交互显示方法、系统及电子设备
EP4297393A1 (en) * 2022-06-21 2023-12-27 Nokia Technologies Oy Object-dependent image illumination
US20240061561A1 (en) * 2022-08-22 2024-02-22 Microsoft Technology Licensing, Llc Visually-deemphasized effect for computing devices
CN115686199B (zh) * 2022-10-11 2023-05-23 北京津发科技股份有限公司 一种群体眼动轨迹生成方法、装置、计算设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100231504A1 (en) * 2006-03-23 2010-09-16 Koninklijke Philips Electronics N.V. Hotspots for eye track control of image manipulation
US20110043644A1 (en) * 2008-04-02 2011-02-24 Esight Corp. Apparatus and Method for a Dynamic "Region of Interest" in a Display System

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0759000A (ja) * 1993-08-03 1995-03-03 Canon Inc 画像送信システム
JPH07140967A (ja) * 1993-11-22 1995-06-02 Matsushita Electric Ind Co Ltd 画像表示装置
US5990954A (en) * 1994-04-12 1999-11-23 Canon Kabushiki Kaisha Electronic imaging apparatus having a functional operation controlled by a viewpoint detector
US6712468B1 (en) * 2001-12-12 2004-03-30 Gregory T. Edwards Techniques for facilitating use of eye tracking data
JP4301774B2 (ja) * 2002-07-17 2009-07-22 株式会社リコー 画像処理方法及びプログラム
US20050047629A1 (en) * 2003-08-25 2005-03-03 International Business Machines Corporation System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking
WO2005046465A1 (en) * 2003-11-14 2005-05-26 Queen's University At Kingston Method and apparatus for calibration-free eye tracking
US7365738B2 (en) * 2003-12-02 2008-04-29 International Business Machines Corporation Guides and indicators for eye movement monitoring systems
JP4352980B2 (ja) * 2004-04-23 2009-10-28 オムロン株式会社 拡大表示装置及び拡大画像制御装置
JP2006031359A (ja) * 2004-07-15 2006-02-02 Ricoh Co Ltd 画面共有方法、及び会議支援システム
US8020993B1 (en) * 2006-01-30 2011-09-20 Fram Evan K Viewing verification systems
US20070188477A1 (en) * 2006-02-13 2007-08-16 Rehm Peter H Sketch pad and optical stylus for a personal computer
US8793620B2 (en) * 2011-04-21 2014-07-29 Sony Computer Entertainment Inc. Gaze-assisted computer interface
US8406457B2 (en) * 2006-03-15 2013-03-26 Omron Corporation Monitoring device, monitoring method, control device, control method, and program
JP5044237B2 (ja) * 2006-03-27 2012-10-10 富士フイルム株式会社 画像記録装置、画像記録方法、および画像記録プログラム
WO2008012717A2 (en) * 2006-07-28 2008-01-31 Koninklijke Philips Electronics N. V. Gaze interaction for information display of gazed items
JP4961914B2 (ja) * 2006-09-08 2012-06-27 ソニー株式会社 撮像表示装置、撮像表示方法
JP2008083289A (ja) * 2006-09-27 2008-04-10 Sony Corp 撮像表示装置、撮像表示方法
US8947452B1 (en) * 2006-12-07 2015-02-03 Disney Enterprises, Inc. Mechanism for displaying visual clues to stacking order during a drag and drop operation
JP5230120B2 (ja) * 2007-05-07 2013-07-10 任天堂株式会社 情報処理システム、情報処理プログラム
US20100079508A1 (en) * 2008-09-30 2010-04-01 Andrew Hodge Electronic devices with gaze detection capabilities
WO2010118292A1 (en) * 2009-04-09 2010-10-14 Dynavox Systems, Llc Calibration free, motion tolerant eye-gaze direction detector with contextually aware computer interaction and communication methods
JP2011053587A (ja) * 2009-09-04 2011-03-17 Sharp Corp 画像処理装置
JP2011070511A (ja) * 2009-09-28 2011-04-07 Sony Corp 端末装置、サーバ装置、表示制御方法、及びプログラム
US9507418B2 (en) * 2010-01-21 2016-11-29 Tobii Ab Eye tracker based contextual action
WO2011100436A1 (en) * 2010-02-10 2011-08-18 Lead Technology Capital Management, Llc System and method of determining an area of concentrated focus and controlling an image displayed in response
CN101779960B (zh) * 2010-02-24 2011-12-14 沃建中 刺激信息认知能力值测试系统及其方法
US9461834B2 (en) * 2010-04-22 2016-10-04 Sharp Laboratories Of America, Inc. Electronic document provision to an online meeting
US8749557B2 (en) * 2010-06-11 2014-06-10 Microsoft Corporation Interacting with user interface via avatar
WO2012107892A2 (en) * 2011-02-09 2012-08-16 Primesense Ltd. Gaze detection in a 3d mapping environment
US8605034B1 (en) * 2011-03-30 2013-12-10 Intuit Inc. Motion-based page skipping for a mobile device
CN102221881A (zh) * 2011-05-20 2011-10-19 北京航空航天大学 基于仿生代理与视线追踪兴趣区域分析的人机交互方法
CN102419828A (zh) * 2011-11-22 2012-04-18 广州中大电讯科技有限公司 一种视频点播可用性测试方法
US9071727B2 (en) * 2011-12-05 2015-06-30 Cisco Technology, Inc. Video bandwidth optimization
US9024844B2 (en) * 2012-01-25 2015-05-05 Microsoft Technology Licensing, Llc Recognition of image on external display

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100231504A1 (en) * 2006-03-23 2010-09-16 Koninklijke Philips Electronics N.V. Hotspots for eye track control of image manipulation
US20110043644A1 (en) * 2008-04-02 2011-02-24 Esight Corp. Apparatus and Method for a Dynamic "Region of Interest" in a Display System

Also Published As

Publication number Publication date
JP6165846B2 (ja) 2017-07-19
EP2847648A4 (en) 2016-03-02
JP2015528120A (ja) 2015-09-24
WO2013169237A1 (en) 2013-11-14
EP2847648A1 (en) 2015-03-18
CN104395857A (zh) 2015-03-04
US20140002352A1 (en) 2014-01-02
TW201411413A (zh) 2014-03-16

Similar Documents

Publication Publication Date Title
TWI639931B (zh) 眼動追蹤式選擇性強調顯示器之一部分
EP3465620B1 (en) Shared experience with contextual augmentation
TWI605433B (zh) 基於眼睛追蹤選擇性背光照明一顯示器的技術
US10171929B2 (en) Positional audio assignment system
EP3466058A1 (en) Video pinning
US20130187835A1 (en) Recognition of image on external display
US9696798B2 (en) Eye gaze direction indicator
CN106716302A (zh) 用于显示图像的方法、设备和计算机程序
CN110546601B (zh) 信息处理装置、信息处理方法和程序
US20190051055A1 (en) An Apparatus and Associated Methods
US10521013B2 (en) High-speed staggered binocular eye tracking systems
CN109154862B (zh) 用于处理虚拟现实内容的装置、方法和计算机可读介质
US20190149886A1 (en) An apparatus and associated methods
US20190346994A1 (en) Displaying content without obscuring key details on a computer screen
US10254850B1 (en) Apparatus and method to navigate media content using repetitive 3D gestures
US10694145B1 (en) Presenting a portion of a first display on a second display positioned relative to the first display
US20240094819A1 (en) Devices, methods, and user interfaces for gesture-based interactions
TWI792444B (zh) 攝像頭的控制方法、裝置、介質和電子設備
US20230368327A1 (en) Capturing and storing an image of a physical environment
WO2024064016A1 (en) Devices, methods, and user interfaces for gesture-based interactions