TW201812521A - 根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統 - Google Patents

根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統 Download PDF

Info

Publication number
TW201812521A
TW201812521A TW106124600A TW106124600A TW201812521A TW 201812521 A TW201812521 A TW 201812521A TW 106124600 A TW106124600 A TW 106124600A TW 106124600 A TW106124600 A TW 106124600A TW 201812521 A TW201812521 A TW 201812521A
Authority
TW
Taiwan
Prior art keywords
content
display
gaze
steps
interest
Prior art date
Application number
TW106124600A
Other languages
English (en)
Inventor
忠穩 羅
Original Assignee
忠穩 羅
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 忠穩 羅 filed Critical 忠穩 羅
Publication of TW201812521A publication Critical patent/TW201812521A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F13/00—Shop or like accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F10/00—Furniture or installations specially adapted to particular types of service systems, not otherwise provided for
    • A47F10/02—Furniture or installations specially adapted to particular types of service systems, not otherwise provided for for self-service type systems, e.g. supermarkets
    • A47F2010/025—Furniture or installations specially adapted to particular types of service systems, not otherwise provided for for self-service type systems, e.g. supermarkets using stock management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0693—Calibration of display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/06—Remotely controlled electronic signs other than labels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • G09G5/32—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory with means for controlling the display position

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Psychiatry (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Game Theory and Decision Science (AREA)
  • Ophthalmology & Optometry (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種根據使用者的興趣(interest)互動地顯示內容的系統。一互動式顯示系統包含一顯示器，及一成像單元或攝影機。該互動式顯示系統追蹤一使用者的眼睛或頭部移動，以判定一使用者的興趣。接著，該系統將分析該使用者的行為，且基於該使用者的興趣來決定將何種內容顯示於一螢幕上。

Description

根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統
本發明係關於電子顯示器領域，且更明確言之係關於一種互動式顯示系統，其可以不引人注意的方式追蹤一使用者的眼睛或頭部移動及分析使用者的行為，從而判定該使用者的興趣。
電子顯示器包含電視、電腦顯示器、電子廣告牌、行動裝置螢幕(例如，智慧型電話或平板電腦螢幕)，且越來越多被廣泛採用。用作看板的電子顯示器亦用於工作場所、家庭及住宅、商業設施(包含商店、商場及餐飲設施)，及戶外位置(包含大型號誌、廣告看板、體育館及公共聚集區)中。 一顯示器通常為一電腦之一僅供顯示用的周邊裝置。一使用者經由一人機輸入裝置(human input device，諸如一鍵盤或滑鼠)而與電腦互動。且來自電腦之輸出被顯示於螢幕上。一些螢幕具有一觸碰介面且使用者可通過觸碰進行輸入。目前一使用者無法在不實體觸碰一人機輸入裝置或顯示器的情況下控制一顯示器的輸出。 現有電子顯示器被用作看板。這些顯示器通常是固定號誌，或以一設定順序循環播放先前儲存的內容。這些顯示器不能依反應使用者行為之一方式改變其顯示的內容。 因此，需要一種改良式顯示系統，以便能夠在使用者不實體觸碰顯示器的情況下與使用者的回饋進行互動。
一種根據使用者的動作互動地顯示內容的系統。該互動式顯示系統偵測且追蹤一使用者的眼睛、頭部及身體移動。該系統將分析使用者的行為且基於使用者的興趣來決定將何種內容顯示於一螢幕上。該系統試圖學習該使用者對何種內容感興趣且顯示內容以便維持或獲得更多該使用者的興趣。 一顯示系統能夠偵測人的存在。一旦偵測到人，則該顯示內容將波動、移動、播放視訊或依其他方式自情境量測改變內容以獲得注意。 一顯示系統能夠藉由偵測人的行為(諸如身體、頭部及眼睛移動)而偵測人的注意程度。一顯示系統主動與一人(或一使用者)互動。該系統偵測該人(潛在使用者)的存在及人與該顯示器的距離。接著，該顯示器可據此修改內容的大小(例如改變圖片大小或字體大小)，使得該內容在被偵測到的人所在之距離處可讀。 一顯示系統主動與一人(或使用者)互動且找到該人對何種內容最感興趣。一顯示螢幕被劃分成若干區段。各個區段之內容可事前被儲存於該系統中或先自雲端下載。該系統基於人顯現出興趣的一動作(例如，眼睛或頭部追蹤)而選擇一內容以顯示於各區段中。針對該人對一特定區段的內容表現出不感興趣或較小興趣時，該區段中的內容將被替換該人可能更感興趣的內容。 另一實施方式是一顯示螢幕依序顯示內容且找到人對何種內容最感興趣，然後顯示人可能更感興趣的類似內容。 為了量化一人的興趣，會先偵測一人臉。接著，偵測並分析眼睛以自頭部姿勢及虹膜位置來判定一注視方向。若該人注視在顯示器的區段之一者中的內容上達一段時間，則此行為被用於指示感興趣。感興趣內容將停留於該顯示器上，且剩餘顯示區段的內容將由關於或與該感興趣內容相關聯的其他內容替換。各區段中的內容將連續改變並根據該人的感興趣程度而更新，直到該人離開為止(例如，該系統不再偵測到該人)。 多個顯示系統亦可並排放置且與人互動。針對該人對一顯示系統的內容不怎麼感興趣或不感興趣，該顯示系統中的內容將由系統判定而以該人可能更感興趣的內容替換。這些多個顯示系統可受一或多個本地或遠端樞紐(hubs)或一組合控制。 為了提高注視偵測的準確度，因此揭示用於具多個區段之一顯示器的若干校準方法。針對多個顯示系統，校準係以類似於具多個區段之一顯示器的方式完成。各顯示器將循序顯示內容以自行校準。 在考量以下實施方案及附圖之後將明白本發明的其他目的、特徵及優點，其中所有圖式的類似元件符號表示類似特徵。
相關申請案之交叉參考 本專利申請案主張2016年7月21日申請之美國專利申請案62/365,234之權利，該案連同此申請案中提及之所有其他參考文獻一起以引用的方式併入本文中。 圖1係併入本發明之一實施例的一分散式電腦網路100之一簡化方塊圖。電腦網路100包含數個用戶端系統113、116及119，及經由複數個通信鏈路128而耦合至一通信網路124之一伺服器系統122。通信網路124提供允許分散式網路100之各種組件彼此通信且交換資訊的一機構。 通信網路124自身可由諸多互連電腦系統及通信鏈路組成。通信鏈路128可為硬線(hardwire)鏈路、光學鏈路、衛星或其他無線通信鏈路、波傳播鏈路或用於資訊通信之任何其他機構。通信鏈路128可為DSL、纜線、乙太網路或其他硬線鏈路、被動或主動光學鏈路、3G、3.5G、4G及其他行動設備、衛星或其他無線通信鏈路、波傳播鏈路或用於資訊通信之任何其他機構。 各種通信協定可用以促進圖1中所展示之各種系統之間的通信。這些通信協定可包含VLAN、MPLS、TCP/IP、穿隧(Tunneling)、HTTP協定、無線應用協定(WAP)、供應商特定協定、自訂協定及其他者。儘管在一項實施例中，通信網路124為網際網路，然在其他實施例中，通信網路124可為任何合適通信網路，包含一區域網路(LAN)、一廣域網路(WAN)、一無線網路、一內部網路、一私人網路、一公用網絡、一切換式網路，及此等之組合及類似者。 圖1中之分散式電腦網路100僅繪示併入本發明之一實施例且不限制如申請專利範圍中所敘述之本發明的範疇。本領域具通常知識者將認知其他變體、修改及替代不會脫離本發明的範疇。例如，一個以上伺服器系統122可連接至通信網路124。作為另一實例，數個用戶端系統113、116及119可經由一存取提供器(未顯示)或經由一些其他伺服器系統而耦合至通信網路124。 用戶端系統113、116及119通常向提供資訊的一伺服器系統請求資訊。為此，伺服器系統通常具有多於用戶端系統之運算及儲存容量。然而，一特定電腦系統可充當一用戶端或一伺服器兩者，取決於該電腦系統是正在請求資訊還是正在提供資訊。另外，儘管已使用一用戶端伺服器環境描述本發明之態樣，然應明白，本發明亦可體現於一獨立電腦系統中。 伺服器122負責接收來自用戶端系統113、116及119之資訊請求、執行滿足該等請求所需之處理及用於將對應於該等請求之結果饋送回至該請求用戶端系統。滿足該請求所需之處理可由伺服器系統122執行或可替代地委託給連接至通信網路124之其他伺服器。 用戶端系統113、116及119能夠讓使用者存取並查詢伺服器系統122儲存之資訊。在一特定實施例中，用戶端系統可作為一獨立應用程式而運行，諸如一桌面應用程式或行動智慧型電話或平板電腦應用程式。在另一實施例中，對一用戶端系統執行之一「網頁瀏覽器」應用程式能夠讓使用者選擇、存取、檢索或查詢伺服器系統122儲存的資訊。網頁瀏覽器之實例包含由Microsoft Corporation提供之Internet Explorer瀏覽器程式、由Mozilla提供之Firefox瀏覽器、由Google提供之Chrome瀏覽器、由Apple提供之Safari瀏覽器及其他者。 在一用戶端伺服器環境中，一些資源(例如，檔案、音樂、視訊或資料)儲存於用戶端處，而其他者儲存於網路中之別處(諸如一伺服器)或自該網路中之別處遞送且可經由網路(例如網際網路)存取。因此，使用者的資料可儲存於網路中或「雲端」。例如，使用者可在一用戶端裝置上處理遠端儲存於雲端(例如伺服器)上之檔案。用戶端裝置上之資料可與雲端同步。 圖2展示本發明之一例示性用戶端或伺服器系統。在一實施例中，一使用者與該系統通過一電腦工作站系統(諸如圖2中所展示)而介接。圖2展示一電腦系統201，其包含一監視器203、螢幕205、機箱207 (亦可指一系統單元、機櫃或機殼)、鍵盤或其他人機輸入裝置209及滑鼠或其他指向裝置211。滑鼠211可具有一或多個按鈕，諸如滑鼠按鈕213。該系統可包含一或多個成像單元或攝影機(未顯示)，諸如一網路攝影機。 應理解，本發明不限於呈一特定外觀尺寸(例如桌上型電腦外觀尺寸)的任何運算裝置，而是可包含呈各種外觀尺寸之所有類型的運算裝置。一使用者可與任何運算裝置介接，包含智慧型電話、個人電腦、膝上型電腦、電子平板裝置、全球定位系統(GPS)接收器、可攜式媒體播放器、個人數位助理(PDA)、其他網路存取裝置及能夠接收或傳輸資料之其他處理裝置。 例如，在一特定實施方案中，該用戶端裝置可為一智慧型電話或平板裝置，諸如Apple iPhone (例如，Apple iPhone 6)、Apple iPad (例如，Apple iPad或Apple iPad mini) 、Apple iPod (例如，Apple iPod Touch) 、Samsung Galaxy產品(例如，Galaxy S系列產品或Galaxy Note系列產品) 、Google Nexus裝置(例如，Google Nexus 4、Google Nexus 7或Google Nexus 10)及Microsoft裝置(例如，Microsoft Surface平板電腦)。通常，一智慧型電話包含一電話部分(及相關聯收音機)及一電腦部分，其等可經由一觸控螢幕顯示器存取。 該用戶端裝置包含用以儲存電話部分的資料(例如，連絡人及電話號碼)及電腦部分(例如，應用程式，包含一瀏覽器、圖片、遊戲、視訊及音樂)之非揮發性記憶體。智慧型電話通常包含用於拍照及錄影之一攝影機(例如，前置攝影機或後置攝影機或兩者)。例如，一智慧型電話或平板電腦可用以錄直播視訊，其等可經串流至一或多個其他裝置。 機箱207容置類似電腦組件(其中一些未顯示)，諸如一處理器、記憶體、大容量儲存裝置217及類似者。大容量儲存裝置217可包含大容量硬碟、軟碟、磁碟、光碟、磁光碟、固定磁碟、硬碟、CD-ROM、可記錄CD、DVD、可記錄DVD (例如，DVD-R、DVD+R、DVD-RW、DVD+RW、HD-DVD或藍光光碟)、快閃記憶體及其他非揮發性固態儲存(例如，USB快閃隨身碟或固態磁碟(SSD))、電池備援揮發性記憶體、磁帶儲存器、閱讀器及其他類似媒體及此等之組合。 本發明之一電腦實施或電腦可執行版本或電腦程式產品可係使用電腦可讀媒體來體現、被儲存於電腦可讀媒體上，或係與電腦可讀媒體相關聯。一電腦可讀媒體可包含參與提供指令至一或多個處理器以供執行的任何媒體。此一媒體可呈任何形式，包含(但不限於)非揮發性、揮發性及傳輸媒體。非揮發性媒體包含(例如)快閃記憶體或光碟或磁碟。揮發性媒體包含靜態記憶體或動態記憶體，諸如快取記憶體或RAM。傳輸媒體包含同軸纜線、銅線、光纖線，及經配置於一匯流排中之線。傳輸媒體亦可呈電磁、射頻、聲音或光波之形式，諸如在無線電波及紅外資料通信期間產生之波。 例如，本發明之軟體的二進位機器可執行版本可被儲存或停駐於RAM或快取記憶體中或在大容量儲存裝置217上。本發明之軟體的原始碼亦可被儲存於或停駐於大容量儲存裝置217 (例如，硬碟、磁片、磁帶或CD-ROM)上。作為一進一步實例，本發明之程式碼可經由線、無線電波或通過一網路(諸如網際網路)來傳輸。 圖3顯示用以執行本發明之軟體的電腦系統201之一系統方塊圖。如在圖2中，電腦系統201包含監視器203、鍵盤209及大容量儲存裝置217。電腦系統201進一步包含子系統，諸如中央處理器302、系統記憶體304、輸入/輸出(I/O)控制器306、顯示轉接器308、串列或通用串列匯流排(USB)埠312、網路介面318，及揚聲器320。本發明亦可與具額外或更少子系統之電腦系統一起使用。例如，一電腦系統可包含一個以上處理器302 (即，一多處理器系統)，或一系統可包含一快取記憶體。 一匯流排或交換器網狀架構322可表示任何匯流排、開關、交換器網狀架構、互連或該系統之組件之間的其他連接機構或路徑。例如，諸如322之箭頭可表示電腦系統201之一系統匯流排架構。然而，此等箭頭繪示用於連結子系統之任何互連方案。例如，揚聲器320可透過一埠而被連接至其他子系統，或具有至中央處理器302之一內部直接連接。該處理器可包含多個處理器或一多核處理器，其可容許對資訊進行平行處理。圖2中所展示之電腦系統201係(但)適於與本發明一起使用之一電腦系統的一實例。本領域具通常知識者將容易明白適於與本發明一起使用之子系統的其他組態。 可以各種合適程式設計語言之任何者來撰寫電腦軟體產品，諸如C、C++、C#、Pascal、Fortran、Perl、Matlab (來自MathWorks, www.mathworks.com)、SAS、SPSS、JavaScript、AJAX、Java、Python、Erlang及Ruby on Rails。電腦軟體產品可為具資料輸入及資料顯示模組之一獨立應用程式。或者，電腦軟體產品可為軟體組件，其等可用作分散式物件。電腦軟體產品亦可為組件軟體，諸如Java Beans (來自Oracle Corporation)或Enterprise Java Beans (來自Oracle Corporation之EJB)。 用於該系統之一作業系統可為Microsoft Windows®系統系列(例如，Windows 95、98、Me、Windows NT、Windows 2000、Windows XP、Windows XP x64 Edition、Windows Vista、Windows 7、Windows 8、Windows 10、Windows CE、Windows Mobile、Windows RT) 、Symbian OS、Tizen、Linux、HP-UX、UNIX、Sun OS、Solaris、Mac OS X、Apple iOS、Android、Alpha OS、AIX、IRIX32或IRIX64之一者。可使用其他作業系統。Microsoft Windows係Microsoft公司之一商標。 此外，該電腦可被連接至一網路，且可使用此網路來介接至其他電腦。該網路尤其可為一內部網路、網際網路。該網路可為一有線網路(例如，使用銅線)、電話網路、封包網路、一光學網路(例如，使用光纖)或一無線網路，或此等之任何組合。例如，資料及其他資訊可使用一無線網路、使用一協定(諸如，WiFi (例如，IEEE標準802.11、802.11a、802.11b、802.11e、802.11g、802.11i、802.11n、802.11ac及802.11ad)、近場通信(NFC)、射頻識別(RFID)、行動或蜂巢式無線 (例如，2G、3G、4G、3GPP LTE、WiMAX、LTE、LTE Advanced、Flash-OFDM、HIPERMAN、iBurst、EDGE Evolution、UMTS、UMTS-TDD、1xRDD及EV-DO)而在電腦與本發明之一系統之組件(或步驟)之間傳遞。例如，來自一電腦之信號可至少部分無線地被傳輸至組件或其他電腦。 在一實施例中，就一網頁瀏覽器執行於一電腦工作站系統而言，一使用者通過一網路(諸如網際網路)來存取全球資訊網(WWW)上的一系統。該網頁瀏覽器係用於下載呈包含HTML、XML、純文字(text)、PDF及postscript之各種格式的網頁或其他內容，且可用於上傳資訊至系統的其他部分。該網頁瀏覽器可使用統一資源識別符(URL)以識別網頁上的資源，及該網頁上之傳輸檔案中的超文字傳輸協定(HTTP)。 在其他實施方案中，該使用者通過原始及非原始應用程式之任一者或兩者來存取系統。原始應用程式經本機安裝於特定運算系統上，且為作業系統或該運算系統之一或多個硬體裝置或此等之一組合所特有。這些應用程式(有時亦稱為「app」)可經由一直接網際網路更新修補機構或通過一應用程式商店(例如，Apple iTunes及App商店、Google Play商店、Windows Phone商店及Blackberry App World商店)來(例如，週期性地)更新。 該系統可運行於與平臺無關的非原始應用程式中。例如，用戶端可通過來自一或多個伺服器之一網頁應用程式，使用與該伺服器或該等伺服器之一網路連接來存取該系統，且將該網頁應用程式載入於一網頁瀏覽器中。例如，一網頁應用程式可通過網際網路，由一網頁瀏覽器自一應用程式伺服器下載。非原始應用程式亦可自其它來源(諸如一碟)獲得。 有一問題是零售商店沒有有效的方法在實際銷售之前量測客戶的興趣。一些解決方案包含：自線上搜尋及小型文字檔案(cookie)來追蹤客戶的興趣，而非在零售商店中。放置一海報或數位媒體，而無回饋量測。放置一數位媒體，且要求客戶經由手勢或觸控螢幕輸入。 圖4展示使用眼睛追蹤以根據使用者的興趣顯示內容之一互動式顯示系統410。顯示系統410包含一顯示螢幕415及一攝影機419。可存在一或多個顯示器415 (例如，兩個、三個、四個、五個或六個或六個以上顯示器)及一或多個攝影機419 (例如，兩個、三個、四個、五個或六個或六個以上攝影機)。該顯示器可為任何類型之顯示螢幕，包含LCD、LED、電漿、OLED、CRT、投影機或可顯示資訊之任何其他裝置。該系統可經由一網路連接423而連接至一伺服器427。當使用於一商場位置或類似位置中時，該系統可經連接至數個商店或其他零售場所，商店A、商店B及商店C。 人群446可走到顯示器前面且觀看螢幕上顯示之內容。攝影機可偵測人群中之一特定人(或使用者)且可基於該使用者的眼睛、頭部或身體移動或此等之任何組合而改變內容。該使用者的眼睛、頭部或身體移動被該系統用於判定對顯示於螢幕上之內容是感興趣或不感興趣。 有一問題是缺乏對戶外(OOH)廣告之有效量測。有一問題是零售商店沒有有效的方法在實際銷售之前量測客戶的興趣。一解決方案為： 1. 自線上搜尋及小型文字檔案追蹤客戶的興趣，而非在零售商店中。 2. 放置一海報或數位媒體，而無回饋量測。 3. 放置一數位媒體且要求客戶經由手勢或觸控螢幕輸入。 簡言之，對此問題的解決方案是一數位顯示系統，其包含一或多個數位顯示器，及具有一或多個攝影機之一成像系統。該成像系統將獲取並即時分析影像，且基於分析結果改變顯示內容。本專利申請案揭示該成像系統與顯示器之內容之間的互動機構。 圖5A展示基於所偵測情境感知而顯示內容以引起注意的一流程。在一步驟503中，顯示一內容圖框於一螢幕上。在一步驟506中，使用一攝影機擷取一影像。在一步驟509中，判定一情境偵測。若情境偵測判定未偵測到一使用者，則流程返回至步驟506以擷取另一影像。若情境偵測判定偵測到一使用者，則流程繼續至一步驟512。 在步驟512中，該系統分析使用者、距離、性別、年齡、外貌、移動行為、色彩、服裝類型或其他因數或此等之任何組合。在一步驟513中，執行群組分類。群組分類包含透過(例如)性別、年齡、外貌或姿勢或此等之任何組合分類使用者。外貌包含(例如)服裝色彩、服裝形狀或褲子或裙子。姿勢(例如)包含前視或側視。 移動行為或模式之一些實例包含：人是否正在移動或站立；相對於一參考位置遠移或近移(例如，走出去或走進來)；自左側移動至右側或自右側移動至左側；或更近或更遠。 在一步驟515中，基於分析，該系統判定是否更新螢幕上的內容。若否，則流程返回至步驟506。若是，則流程繼續至一步驟518。在步驟518中，基於所偵測之情境之結果及一內容推薦引擎而改變內容圖框。 該流程基於所偵測情境感知而判定一顯示內容以引起注意。在各種實施方案中，所顯示之內容係基於所偵測之情境感知，諸如使用者距離、群組分類。最近者及女性在使用者選擇中具有較高權重。將根據觀察者距離(諸如臉部特徵大小)而更新內容大小。將使用內容色彩更新內容以匹配觀察者之衣服色彩。一旦偵測客戶在一距離內，則內容將閃現，移動以獲得注意。臉部特徵大小可用以判定或估計至該使用者之一距離。一旦偵測一注視，則移動內容將暫停或凍結(例如，展示一靜止影像)，所以使用者可更容易讀取內容。 圖5B展示基於臉部特徵大小之內容大小。在一步驟531中，顯示一內容。在一步驟534中，使用一攝影機或其他成像裝置來擷取一影像。在一步驟537中，判定一臉部偵測。若臉部偵測判定出未偵測到一臉部，則流程返回至步驟534以擷取另一影像。若臉部偵測判定出偵測到一臉部，則流程繼續至一步驟540。在步驟540中，計算一臉部特徵大小(FS)。在一步驟543中，判定一顯示更新。若顯示未更新，則流程返回至步驟534以擷取另一影像。若顯示已經更新，則流程繼續至一步驟546。在一步驟546中，各區段中之內容大小依臉部特徵大小而調整。流程返回至步驟531。 圖5C展示用於臉部偵測、注視偵測及一視我條件(look-at-me condition)之一流程。在一步驟571中，該流程開始。在一步驟574中，使用成像裝置擷取一影像。該成像裝置可與該顯示器整合，如上文所描述。然而，在其他實施方案中，該成像裝置可經定位成與顯示器分離。例如，可存在一人體模型或其他成像裝置固持器或支架(例如靠近該顯示器)，其併入該系統之成像裝置。在另一實施方案中，該成像裝置可僅與一零售商店中之視野內之一或多個不同商品相關聯，且追蹤此等商品被多頻繁觀察到且其中哪一商品是最受關注的項目。 在一步驟577中，判定一臉部偵測。若未偵測到一臉部，則流程返回至步驟574。若偵測到一臉部，則流程繼續至一步驟580。在步驟580中，判定一注視偵測。若未偵測到一注視，則流程返回至步驟574。若偵測到一注視，則流程繼續至一步驟583。在步驟583中，該系統分析頭部姿勢及虹膜以判定一注視方向。在一步驟587中，該系統判定一注視是否朝向一特定方向。若注視不朝向一特定方向，則流程返回至步驟574。若注視朝向一特定方向，則流程繼續至一步驟590。在步驟590中，一「視我」變數加1 (例如，累加)。接著，流程前進至步驟574。流程判定一視我偵測。在各種實施方案中，獲得一視我特徵。成像裝置可包含獨立硬體，其可經安裝於一物件(諸如一人體模型之眼睛)上。 圖6A展示用於藉由頭部旋轉之注意分類量測之一流程。在一步驟601中，顯示一注意圖框。在一步驟604中，Attention_HR經設定為0。在一步驟607中，使用一攝影機來擷取一影像。在一步驟610中，判定一臉部偵測。若臉部偵測判定出未偵測到一臉部，則流程返回至步驟607以擷取另一影像。若臉部偵測判定出偵測到一臉部，則流程繼續至一步驟613。 在步驟613中，系統針對偵測到的各臉部計算並記錄頭部旋轉。在一步驟616中，與早期圖框相比較，頭部旋轉朝向顯示器。若否，則流程繼續至一步驟622處結束。若是，則流程繼續至一步驟619以使與各臉部相關聯之Attention_HR加1。流程接著繼續至一步驟622處結束。 該流程針對頭部旋轉判定一注意分類量測。在各種實施方案中，頭部旋轉朝向目標作為注意特徵之一者。臉部偵測包含：頭部轉動，朝向90度內。持續時間，變慢，向前移動(例如，指示由使用者之更大或經提高的注意程度)。可應用至多個觀察者。一頭部旋轉感測器可判定該使用者是否正面朝螢幕。 圖6B展示用於當一觀察者更靠近時注意分類量測之一流程。在一步驟625中，顯示一注意圖框。在一步驟628中，Attention_C經設定為0。在一步驟631中，使用一攝影機擷取一影像。在一步驟634中，判定一臉部偵測。若臉部偵測判定出未偵測到一臉部，則流程繼續至一步驟631以擷取另一影像。若臉部偵測判定出偵測到一臉部，則流程繼續至一步驟637以計算臉部大小(F0)。在一步驟640中，等待時間w(0)。在步驟643中，擷取一影像。 在一步驟647中，若未偵測在先前臉部偵測634中之相同臉部，則流程返回以在步驟631處擷取另一影像。若偵測到臉部偵測634之相同臉部，則流程繼續至一步驟650以計算臉部大小(F1)。在一步驟653中，判定F1-F0是否大於Dthreshold。若否，則流程繼續至步驟659處結束。若是，則流程繼續至一步驟656 Attention_C加1。該流程接著繼續至步驟659處結束。 該流程判定該觀察更靠近之一注意量測。在各種實施方案中，識別一所偵測臉部大小增加指示受該使用者注意之一增加。一距離感測器可判定是否相同臉部，接著相同個人及臉部大小變大意謂客戶移動更靠近。 圖6C展示類似於圖6B之一流程的一流程，除該流程之最後四個步驟外。代替其中計算臉部大小(F0)中之一步驟637，存在一步驟661，其中計算臉部大小(F0)及臉部旋轉(FR0)。代替其中計算臉部大小(F1)之一步驟650，存在一步驟662，其中計算臉部大小(F1)及臉部旋轉(FR1)。代替其中判定F1-F0是否大於Dthreshold之一步驟653，存在一步驟665，其中使用者臉部保持朝向目標。代替其中attention_C加1之一步驟656，存在一步驟668，其中attention_T加1。在圖6C中之一步驟671中，該流程到達結束，類似於圖6B中在步驟659結束。 該流程判定關於時間持續時間之一注意分類量測。在各種實施方案中，一所偵測時間持續時間可指示更受使用者注意。 圖6D展示基於使用者何時移動更慢之注意分類量測。除圖6B之步驟647之後的步驟(其中判定相同臉部偵測(經由臉部追蹤))外，圖6D類似於圖6C。在圖6D中，在一步驟647之後，流程繼續至一步驟674，其中計算臉部大小。在一步驟677中，等待相同w0。在一步驟680中，使用一攝影機擷取一影像。在一步驟683中，判定一相同臉部偵測。若未判定相同臉部偵測，則流程返回至一步驟628，其中擷取另一影像。若判定相同臉部偵測，則流程繼續至一步驟686。在步驟686中，計算臉部大小(F2)且An=(F0+F2)/F1。在一步驟689中，判定An是否小於Dthreshold且F2是否大於F0。若否，則流程繼續至步驟695處結束。若是，則流程繼續至一步驟692，其中Attention_SD加1。在圖6D中之一步驟695中，該流程到達結束，類似於圖6B中在步驟659結束。 該流程判定該使用者正移動緩慢之一注意分類量測。在各種實施方案中，使用者之一減速指示更受使用者注意。均勻間隔開三次(由W0毫秒)擷取單一客戶臉部大小(F0、F1及F2)以計算加速指示A_normalized A=(F2-F1)-(F1-F0)=F2+F0-2xF1。變慢A＜0。A_normalized=(F2+F0-2xF1)/F1=(F2+F0)/F1-2。變慢(F2+F0)/F1＜2。 圖6A至圖6D中之程序可應用以追蹤擷取到的影像中之一或多個臉部且應用至多個觀察者。 為了判定在各種條件下人朝向顯示系統之注視方向，利用三個校準方案。圖7A展示一注視校準方案，其中顯示被顯示於螢幕之中心處的內容。在一步驟701中，顯示一中心校準圖框。在一步驟704中，使用一攝影機擷取一影像。在一步驟707中，判定一臉部偵測。若未偵測到一臉部，則流程返回至步驟704。若偵測到一臉部，則流程繼續至一步驟710。在一步驟710中，判定一注視偵測。若注視偵測判定出未偵測到一注視，則流程返回至步驟704。若注視偵測判定出偵測到一注視，則流程繼續至步驟713。在一步驟713中，該系統記錄眼睛標誌(landmark)及頭部姿勢作為中心視野之一參考。此等參考參數將用以判定注視方向相對向左、向右或保持在中心處。 在各種實施方案中，獲得眼睛標誌作為中心處之內容顯示器之一參考。該參考點將用以判定觀察者是否正水平地看著中心、右邊或左邊。顯示中心、右邊及左邊區段中之內容以簡化注視偵測。校準方案應用於一系統內之所有成像單元。將在必要時完成校準。 圖7B展示使用校準2之注視偵測。在一步驟706中，顯示一校準圖框。在一步驟719中，使用一攝影機擷取一影像。在一步驟707中，判定一臉部偵測。若未偵測到一臉部，則流程返回至步驟719以擷取另一影像。若偵測到一臉部，則流程繼續至步驟710，其中判定注視偵測。若注視偵測判定出未偵測到一注視，則流程返回至步驟719以擷取另一影像。若注視偵測判定出偵測到一注視，則流程繼續至一步驟722。在步驟722中，顯示其中一物件自左側移動至右側(或反之亦然)之內容。在一步驟725中，當物件係在該螢幕之兩側上時，擷取一影像。在一步驟728中，記錄眼睛及頭部姿勢資訊以作為兩側之參考。 在各種實施方案中，藉由顯示自一側移動至另一側之內容而獲得眼睛標誌作為一參考。此等邊緣參考點將用以判定觀察者在何處水平注視顯示器。內容被顯示於多個水平區段中以簡化注視偵測。 圖7C展示使用校準3之注視偵測且係類似於圖7B，除步驟722外。在圖7C中，存在一步驟731，其中在一側顯示內容且接著在另一側顯示內容。 在各種實施方案中，藉由在顯示器之邊緣處顯示內容而獲得眼睛標誌作為一參考。此等邊緣參考點將用以判定觀察者在何處水平注視顯示器。可水平顯示內容以簡化注視偵測。 上文所描述之校準方法可依一類似方式應用至具多個顯示器之一系統。 圖8展示自擷取到的人影像擷取之68個點人臉特徵點之實例。若可自擷取到的影像擷取人臉特徵點，則臉部被偵測到。 圖9A展示使用注視偵測之一顯示內容。在一步驟904中，顯示單元中之一內容圖框被顯示。在907中，使用一攝影機擷取一影像。在一步驟910中，判定一臉部偵測。若臉部偵測判定出未偵測到一臉部，則流程返回至步驟907以擷取影像。若臉部偵測判定出一臉部經判定，則流程繼續至一步驟913。 在一步驟913中，判定一注視偵測。若注視偵測判定出未偵測到一注視，則流程返回至一步驟907以擷取影像。若判定出注視偵測，則流程繼續至一步驟916。在一步驟916中，標識注視內容係基於注視方向。在一步驟919中，系統使各注視內容累加器加1。在一步驟922中，判定一時間是否大於一先前指定t (或其他值)。若否，則流程返回至步驟904以顯示內容圖框於顯示單元中。若是，則流程繼續至步驟924以將時間戳記、所有內容累加器及臉部ID記錄至客戶資料庫中，且重設所有累加器。 流程繼續至一步驟925且判定是否更新內容。若不要更新內容，則流程返回至步驟904以顯示內容圖框於顯示單元中。若要更新內容，則流程繼續至一步驟928。在步驟928中，系統基於內容推薦引擎而使用與具有來自非揮發性記憶體(NVM)或內容伺服器之累加器中最高計數之內容相關的內容來替換具有顯示器中最少內容累加器的內容。 該流程使用注視偵測判定顯示內容。該流程可應用至多個觀察者。在各種實施方案中，可經由臉部偵測假設觀察者存在。互動式顯示注視及注視相關內容，且找到觀察者最感興趣內容。設置臉部ID及相關聯消費者資料庫於客戶個人檔案中。內容圖框含有依注視方向水平顯示之兩個或兩個以上項目，其等可僅為自中心校準位置向左或向右偏移。 圖9A中之流程可應用於單一或多個螢幕中之單一或多個內容。各螢幕可僅具有一個內容用於單一或多個螢幕。具最少注視內容累加器之各螢幕或N個螢幕中的M個螢幕的內容可被替換。 圖9B展示用於注視持續時間及注視點選之一流程。在一步驟941中，將內容圖框顯示於一顯示單元中。在一步驟944中，設定Gaze_T=0，n=0，Gaze_click=0。在一步驟947中，執行一影像擷取。在一步驟950中，判定是否存在一臉部或注視偵測。若否，則流程返回至步驟947以擷取一影像。若是，則流程繼續至步驟953，臉部位置L(0)。在一步驟956中，等待Tw。在一步驟959中，n=n+1。 在一步驟962中，執行一影像擷取。在一步驟965中，判定是否已存在一臉部或注視偵測。若否，則流程返回至步驟947以擷取一影像。若是，則流程繼續至步驟968，臉部位置L(n)。在一步驟971中，判定L(n)是否在估計範圍L(n-1)內。若否，則流程返回至步驟980以記錄個人檔案、持續時間、各者之移動行為、所偵測注視，且流程結束於983。 若是，則流程繼續至步驟974，以判定是否Gaze_T＞=Tth。若否，則流程進行至步驟977，以使各相關聯臉部之Gaze_T加1。接著，流程進行至步驟956以等待Tw。若是，則流程進行至步驟986，且Gaze_click=1。 在眼睛注視程序期間，系統將偵測人眼眨眼，其係用以判定是否為一真人(例如，人體模型或圖片)。 一些注視術語係：注視指示=在一單一圖框中所偵測到之注視； 所偵測到之注視=注視指示之m/n；注視持續時間=#自相同臉部所偵測到之注視的時間；注視點選= (注視持續時間＞/=Click_Threshold)；及注視點選次數=注視點選+權重因數。 圖10展示使用臉部識別之顯示內容。在一步驟1010中，將顯示單元中的內容圖框顯示出來。在一步驟1013中，使用一攝影機來擷取一影像。在一步驟1016中，臉部偵測基於所偵測到的人臉特徵點之特性來指派臉部ID。一臉部ID被發送至遠端伺服器。在一步驟1019中，判定此是否係現有客戶個人檔案中之一舊臉。若否，則系統接著繼續至一步驟1022。若是，則系統繼續以呼叫客戶個人檔案，且基於內容推薦引擎而使用來自NVM或遠端伺服器之臉部ID相關聯感興趣內容來替換顯示器中之內容。 該流程使用臉部識別判定顯示內容。此流程可應用於多個使用者。在各種實施方案中，基於臉部ID來識別返回客戶。顯示來自返回客戶個人檔案資訊之初始內容。 圖11A展示具一顯示單元1101之一互動式顯示系統1100，其經劃分成三個區段，例如水平區段1111、1112及1113。圖11A亦展示與一系統(諸如系統1100)相關聯之一運算單元1103。該運算單元包含一處理器模組1106、記憶體模組1107，及累加器模組1108。該運算單元經連接至顯示單元1101，以及一成像單元1102、網路單元1104及NVM單元1105。該運算單元可係由硬體、軟體或韌體實施。 圖11B展示一遠端伺服器單元1120，其係與一系統(諸如系統1100)相關聯。該遠端伺服器單元包含一消費者資料庫1121、報告引擎1122，及內容推薦引擎1123，其等將在下文描述。 該系統係具臉部及注視偵測能力之一互動式網路內容顯示系統硬體。在各種實施方案中，互動式網路內容顯示系統具臉部及注視偵測能力。遠端伺服器具消費者資料庫、報告引擎及推薦引擎。 代替一單一面板上之多個區段，圖11C展示經連接至一運算單元之多個顯示單元。圖11E展示具多個成像單元或攝影機及多個顯示單元之一實施方案。在一實施方案中，存在與一或多個顯示單元相關聯之一個成像單元。例如，每顯示器一個成像單元，或每兩個顯示器一個成像單元。各顯示器可經劃分於兩個或兩個以上區段中，諸如在圖11A中。在一實施方案中，存在與一個顯示單元相關聯之兩個或兩個以上成像單元，或與兩個或兩個以上顯示單元相關聯之兩個或兩個以上成像單元。在具多個成像單元之系統中，具最少視我計數之內容將被替換。圖11D及圖11F係類似於圖11B。 圖11G展示眼睛注視偵測系統。一顯示器1165包含或經連接至一成像單元或攝影機1162。此係連接至一1171或一系統單元或控制器。此單元可整合於顯示器中，或可為連接至顯示器及成像單元之一單獨箱。例如，顯示器可係由一視訊連接(諸如HDMI)而連接至一呈現者區塊1156。成像單元可係由一資料連接(諸如USB)而連接至一即時處理器區塊1159。即時處理器可作為一點選偵測器、群組分類及位置估計器執行。該位置估計器包含臉部識別及臉部追蹤。 該位置估計器估計觀察者下一距離及一移動方程式內之角速度，且使用估計誤差來更新移動方程式參數。當對一觀察識別符不存在新的更新時，估計器決定是否繼續估計程序、將觀察者參數傳遞至另一成像系統(例如跳躍)，或終止(例如無法到達)。當偵測到一新的觀察者時，估計器將核查此是否係檔案上之一現有觀察者(例如該系統已知)，或若為新的觀察者，則產生一新的觀察識別符。 處理器經連接至一報告者區塊1153。該處理器傳輸或發送注視或點選資料或一組合至報告者。該報告者經連接至呈現者。報告者發送點選或命令資料或一組合至該呈現者。該報告者接收來自該呈現者之影像識別資訊。 此伺服器儲存客戶影像於一推薦引擎1168中。該等影像係經由一安全路徑自一伺服器發送至控制器，且被儲存於一緩衝器或儲存位置中。該呈現者自一緩衝器或控制器之儲存位置接收影像。該報告者產生報告且儲存於一緩衝器或儲存位置中。該等報告係經由一安全路徑被發送至一伺服器中之報告引擎1150，其儲存客戶報告。 在各種實施方案中，成像單元可為一單獨單元或與顯示單元整合。就僅使用一個攝影機而言，在視野與距離之間存在一折衷。此可藉由對攝影機改變或選擇一不同焦距而處理。使用、選擇或調整一攝影機以具有相對較長焦距可允許較遠距離及掃描以獲得更廣視野。一攝影機可在前面使用一旋轉鏡以獲得快速掃描及更廣視野。具長焦距且面向不同方向之多個攝影機可用以獲得一更廣視野。多個成像單元或攝影機可嵌入於顯示單元(諸如LED顯示器)內。 在一系統之一實施方案中，多個顯示單元及多個成像單元被連接在一起。當使用者自一顯示單元A之覆蓋區移動至一顯示單元B之覆蓋區時，一使用者之眼睛被追蹤，使得當在單元A中偵測到使用者之注視時，顯示單元B將顯示與單元A中所顯示之內容相關的內容。 圖12A展示用於更新來自遠端伺服器之內容之一流程。在一步驟1201中，裝置係處在操作模式中。在一步驟1204中，裝置經由網路單元連接至一遠端伺服器。在一步驟1207中，系統決定是否更新內容。若否，則流程返回至步驟1201。若是，則流程繼續至步驟1210。在一步驟1210中，內容推薦引擎。在一步驟1213中，該裝置自遠端伺服器下載新的內容ID或內容至裝置NVM。在一步驟1216中，更新自裝置至遠端伺服器之所有經記錄資料。 圖12B展示用於將來自裝置之資料上傳至遠端伺服器的一流程。在一步驟1231中，裝置係處在操作模式中。在一步驟1234中，裝置經由網路單元而連接至一遠端伺服器。在一步驟1237中，系統決定是否上傳資料。若否，則流程返回至步驟1231。若是，則流程繼續至步驟1243。在一步驟1243中，裝置更新自裝置至遠端伺服器之所有經記錄資料。 為維持資料之機密性且改良安全性、使個人資訊不被盜取，資料(諸如步驟1243中之上傳及下載資料)可在通過一網路或通信鏈路發送之前予以加密。特定言之，未加密資料使用一加密演算法予以加密。接著在接收端處，資料經解密以恢復未經加密資料，其可接著如此申請案中所描述而處理。 圖13展示一報告引擎。在步驟1301中，遠端伺服器報告引擎。在步驟1304中，注意量測具相關聯內容圖框及情境資料。在一步驟1307中，興趣量測、觀察者群組特性及相關聯感興趣項目。在一步驟1310中，觀察者特性及返回客戶。 圖14展示一遠端伺服器之通用消費者資料庫1426。儲存於該消費者資料庫中之資訊包含：(1)資訊類型1432：所記錄資料之群組及季節當中之經分析感興趣項目及來自經部署顯示單元之衍生物。(2)資訊類型1435：針對群組當中最受關注項目之經分析社交媒體。(3)資訊類型1438：來自群組當中之媒體內之雜誌或新聞之專業推薦。 圖15展示用於即時判定一使用者對媒體內容之興趣程度之一系統。遠端伺服器之通用消費者資料庫1426係至一遠端伺服器內容推薦引擎1506之一輸入。至該遠端伺服器內容推薦引擎之其他輸入包含群組、個人且儲存專業輸入。該遠端伺服器內容推薦引擎可產生並發送推薦1509至顯示單元。 一群組輸入之一實例係一客戶資料庫1514，其可儲存關於來自客戶個人檔案之過去感興趣及最受歡迎項目之資訊。進一步言之，客戶資料庫可儲存群組特性及各內容注視、注視持續時間、注視點選及注視點選次數計數。個人輸入之實例包含一觀察者情境量測、特性及當前感興趣項目1517。關於儲存專業，資訊可來自一零售商店1521，其由一軟體設計工具組或軟體發展商組(SDK) 1524聚集。零售商店產品資料庫、目錄、產品特性1527被輸入至遠端伺服器內容推薦引擎。 圖16展示與經偵測情境1606、注意1610及興趣1614互動之顯示內容1602。來自使用者之初始情境偵測(諸如服裝、色彩、距離、性別及年齡)將致使顯示內容據此改變。來自顯示內容之任何使用者之動作(諸如頭部轉動、減緩及靠近)將被偵測及追蹤。顯示內容將基於由注視時間及頭部姿勢角度量測之使用者之興趣程度而與使用者互動。 圖17展示用於注視點選次數之一流程。在一步驟1701中，顯示在主要影像循環播放中之影像。在一步驟1704中，執行影像擷取。在一步驟1707中，判定是否已發生一注視偵測。若否，則返回至步驟1701。若是，則進行至步驟1710，判定注視持續時間是否大於Tth；Gaze_click權重因數估計。若否，則返回至步驟1701。若是，則進行至步驟1713以顯示在次要影像循環播放中的影像。在一步驟1716中，執行影像擷取。在一步驟1719中，判定是否已發生一注視偵測或逾時。若否，則返回至步驟1701。若是，則返回至步驟1713。 數位看板中之媒體播放器中之一媒體顯示器通常顯示媒體或影像於一預定一個循環播放序列中。使用注視點選次數、注視點選次數被用以觸發多循環播放影像以供定向顯示。在一實施方案中，注視點選次數被用以選擇定向顯示內容、定向於引起注視點選次數事件發生之人。 在一實施方案中，主要影像將為A1、B1、C1、D1等。次要影像將為a1、a2、a3等或b1、b2、b3等或c1、c2、c3等及其他循環播放影像。一些Gaze_click權重因數包含(例如)來自特定區域中之觀察者之點選；來自靠近觀察者之點選(眼睛距離小於臨限值)；來自特定性別之點選；來自年齡群組之點選；觀察者#n僅可點選一次；及觀察者#n優先點選(若靠近點選，等待觀察者#n點選)；來自移動行為之點選(快速移動對緩慢或不移動)。 前述內容已為圖解說明及描述之目的而描述本發明。然前述內容並非意欲窮盡或限制本發明於所描述之精確形式，且鑑於上文教示，許多修改及變動係可行的。實施例係經選擇並描述以便最佳解釋本發明之原理及其實踐應用。前述內容將使得熟習此項技術者最佳利用並實踐本發明於各種實施例中及使用如適於一特定使用之各種修改。本發明之範疇由以下申請專利範圍界定。
100‧‧‧電腦網路
113‧‧‧用戶端系統
116‧‧‧用戶端系統
119‧‧‧用戶端系統
122‧‧‧伺服器系統
124‧‧‧通信網路
128‧‧‧通信鏈路
201‧‧‧電腦系統
203‧‧‧監視器
205‧‧‧螢幕
207‧‧‧機箱
209‧‧‧人機輸入裝置
211‧‧‧指向裝置/滑鼠
213‧‧‧滑鼠按鈕
217‧‧‧大容量儲存裝置
302‧‧‧中央處理器
304‧‧‧系統記憶體
306‧‧‧輸入/輸出(I/O)控制器
308‧‧‧顯示轉接器
312‧‧‧串列或通用串列匯流排(USB)埠
318‧‧‧網路介面
320‧‧‧揚聲器
322‧‧‧匯流排或交換器網狀架構
410‧‧‧顯示系統
415‧‧‧顯示螢幕/顯示器
419‧‧‧攝影機
423‧‧‧網路連接
427‧‧‧伺服器
446‧‧‧人群
503‧‧‧步驟
506‧‧‧步驟
509‧‧‧步驟
512‧‧‧步驟
513‧‧‧步驟
515‧‧‧步驟
518‧‧‧步驟
531‧‧‧步驟
534‧‧‧步驟
537‧‧‧步驟
540‧‧‧步驟
543‧‧‧步驟
546‧‧‧步驟
571‧‧‧步驟
574‧‧‧步驟
577‧‧‧步驟
580‧‧‧步驟
583‧‧‧步驟
587‧‧‧步驟
590‧‧‧步驟
601‧‧‧步驟
604‧‧‧步驟
607‧‧‧步驟
610‧‧‧步驟
613‧‧‧步驟
616‧‧‧步驟
619‧‧‧步驟
622‧‧‧步驟
625‧‧‧步驟
628‧‧‧步驟
631‧‧‧步驟
634‧‧‧步驟
637‧‧‧步驟
640‧‧‧步驟
643‧‧‧步驟
647‧‧‧步驟
650‧‧‧步驟
653‧‧‧步驟
656‧‧‧步驟
659‧‧‧步驟
661‧‧‧步驟
662‧‧‧步驟
665‧‧‧步驟
668‧‧‧步驟
674‧‧‧步驟
677‧‧‧步驟
680‧‧‧步驟
683‧‧‧步驟
686‧‧‧步驟
689‧‧‧步驟
692‧‧‧步驟
695‧‧‧步驟
701‧‧‧步驟
704‧‧‧步驟
706‧‧‧步驟
707‧‧‧步驟
710‧‧‧步驟
713‧‧‧步驟
719‧‧‧步驟
722‧‧‧步驟
725‧‧‧步驟
728‧‧‧步驟
731‧‧‧步驟
904‧‧‧步驟
907‧‧‧步驟
910‧‧‧步驟
913‧‧‧步驟
916‧‧‧步驟
919‧‧‧步驟
922‧‧‧步驟
924‧‧‧步驟
925‧‧‧步驟
928‧‧‧步驟
941‧‧‧步驟
944‧‧‧步驟
947‧‧‧步驟
950‧‧‧步驟
953‧‧‧步驟
956‧‧‧步驟
959‧‧‧步驟
962‧‧‧步驟
965‧‧‧步驟
968‧‧‧步驟
971‧‧‧步驟
974‧‧‧步驟
977‧‧‧步驟
980‧‧‧步驟
983‧‧‧步驟
986‧‧‧步驟
1010‧‧‧步驟
1013‧‧‧步驟
1016‧‧‧步驟
1019‧‧‧步驟
1022‧‧‧步驟
1100‧‧‧互動式顯示系統
1101‧‧‧顯示單元
1102‧‧‧成像單元
1103‧‧‧運算單元
1104‧‧‧網路單元
1105‧‧‧NVM單元
1106‧‧‧處理器模組
1107‧‧‧記憶體模組
1108‧‧‧累加器模組
1111‧‧‧區段
1112‧‧‧區段
1113‧‧‧區段
1120‧‧‧遠端伺服器單元
1121‧‧‧客戶資料庫
1122‧‧‧報告引擎
1123‧‧‧內容推薦引擎
1150‧‧‧報告引擎
1153‧‧‧報告者區塊
1156‧‧‧呈現者區塊
1159‧‧‧即時處理器區塊
1162‧‧‧成像單元或攝影機
1165‧‧‧顯示器
1168‧‧‧推薦引擎
1171‧‧‧系統單元或控制器
1201‧‧‧步驟
1204‧‧‧步驟
1207‧‧‧步驟
1210‧‧‧步驟
1213‧‧‧步驟
1231‧‧‧步驟
1234‧‧‧步驟
1237‧‧‧步驟
1243‧‧‧步驟
1301‧‧‧步驟
1304‧‧‧步驟
1307‧‧‧步驟
1310‧‧‧步驟
1426‧‧‧遠端伺服器一般客戶資料庫
1432‧‧‧資訊類型
1435‧‧‧資訊類型
1438‧‧‧資訊類型
1506‧‧‧遠端伺服器內容推薦引擎
1509‧‧‧推薦
1514‧‧‧客戶資料庫
1517‧‧‧當前感興趣項目
1521‧‧‧零售商店
1524‧‧‧軟體設計工具組或軟體發展商組(SDK)
1527‧‧‧產品特性
1602‧‧‧顯示內容
1606‧‧‧經偵測情境
1610‧‧‧注意
1614‧‧‧興趣
1701‧‧‧步驟
1704‧‧‧步驟
1707‧‧‧步驟
1710‧‧‧步驟
1713‧‧‧步驟
1716‧‧‧步驟
1719‧‧‧步驟
圖1展示本發明之一實施例可實施於其中之一用戶端伺服器系統及網路之一簡化方塊圖。 圖2展示可用於本發明之一實施方案中之一例示性用戶端或伺服器之一更詳細圖式。 圖3展示一電腦系統之一系統方塊圖。 圖4展示根據使用者的興趣顯示內容之具嵌入式成像感測器或攝影機的一互動式顯示系統之一實例。 圖5A展示基於所偵測情境感知(context awareness)而顯示內容以引起注意(attention)之方案。 圖5B展示由來自情境量測之群組分類的內容。 圖5C展示用於臉部偵測、注視偵測及一視我條件之一流程。 圖6A展示用於藉由頭部旋轉之注意分類量測之一流程。 圖6B展示用於當觀察者更靠近時注意分類量測之一流程。 圖6C展示用於藉由固定時間持續時間之注意分類量測之一流程。 圖6D展示用於當使用者移動更慢時注意分類量測之一流程。 圖7A展示用於使用校準1之注視(gaze)偵測之一流程。 圖7B展示用於使用校準2之注視偵測之一流程。 圖7C展示用於使用校準3之注視偵測之一流程。 圖8展示68個點人臉特徵點之一實例。 圖9A展示用於使用注視偵測之顯示內容之一流程。 圖9B展示用於使用注視點選之注視偵測之一流程。 圖10展示用於使用臉部識別之顯示內容之一流程。 圖11A至圖11F展示具臉部及注視偵測能力之一互動式網路內容顯示系統硬體。圖11A展示具若干區段之一顯示單元。圖11C展示經連接至一運算單元之多個顯示單元。圖11E展示使用多個成像單元或攝影機之一實施方案。圖11B、圖11D及圖11F展示一遠端伺服器單元。 圖11G展示眼睛注視偵測系統。 圖12A展示用於更新來自遠端伺服器之內容之一流程。 圖12B展示用於將來自裝置之資料上傳至遠端伺服器之一流程。 圖13展示一報告引擎及其報告項目之一實例。 圖14展示一遠端伺服器之通用消費者資料庫。 圖15展示用於即時判定一使用者對媒體內容之興趣程度之一系統。 圖16展示系統之顯示內容、情境、注意及興趣態樣之一氣泡(bubble)圖。 圖17展示於多個循環播放中顯示內容之一流程。

Claims (19)

  1. 一種系統，其包括： 至少一第一顯示器；及 至少一第一成像裝置； 一控制器區塊，其經耦合至該顯示器及該成像裝置，其中該控制器區塊： 自該成像裝置獲取多個影像； 分析來自該成像裝置之該等影像，以獲得一第一分析；及 基於該等影像之該第一分析來更換經展示於該顯示器上之內容。
  2. 如請求項1之系統，其包括： 一網路，其經耦合至該控制器區塊，其中該控制器傳輸該第一分析至一伺服器；及 致使一第二顯示器基於該第一分析來展示一內容，該第二顯示器耦合至該網路且與該第一顯示器分離。
  3. 如請求項1之系統，其中該分析來自該成像裝置之該等影像以獲得一第一分析包括： 針對經展示於該顯示器上之一第一內容或一第二內容，偵測一人之一注視事件； 一旦判定該注視事件係針對該第一內容，則顯示與該第一內容相關聯之一第三內容；及 一旦判定該注視事件係針對該第二內容，則顯示與該第二內容相關聯之第四內容。
  4. 如請求項1之系統，其中該控制器使用一校準方案，其在一圖框中心處具有一受關注點。
  5. 如請求項1之系統，其中該控制器使用具有一受關注點之一校準方案，該受關注點自一圖框左邊緣移動至圖框右邊緣，或自圖框右邊緣移動至圖框左邊緣。
  6. 如請求項1之系統，其中該控制器使用具有受關注點之一校準方案，該受關注點在一圖框之一側處，且接著在該圖框之一相對側處。
  7. 如請求項1之系統，其中該控制器包括一即時處理器，且該處理器執行注視點選偵測、群組分類、移動偵測及位置估計器之影像分析。
  8. 如請求項1之系統，其中該控制器包括自一伺服器發送之內容影像之嵌入式儲存或外部儲存，供一呈現者及一報告者以組合影像分析資料及相關聯顯示內容。
  9. 如請求項1之系統，其中該影像分析包括一注視持續時間、臉部位置估計，且當一持續時間長於一預定時間時，產生一gaze_click旗標。
  10. 如請求項1之系統，其中該影像分析包括眼睛、頭部及身體移動、性別、年齡、移動行為或模式、與第一顯示器之距離、頭髮顏色、服裝顏色、服裝類型(諸如褲子、裙子或其他)、外貌、姿勢、臉部識別或臉部追蹤，或此等之任何組合。
  11. 如請求項1之系統，其中藉由一gaze_click_through旗標來啟用該更換內容程序，該gaze_click_through旗標包括一gaze_click及權重因數，諸如特定性別、年齡群組、特定區域、距離、優先觀察者或其他因數，或此等之任何組合。
  12. 如請求項1之系統，其中該經更換內容自一主要內容群組遷移至次要內容群組，以匹配至該經分類觀察者之群組。
  13. 如請求項1之系統，其中該經更換內容可為根據觀察者之距離而更新之一內容大小、用以匹配觀察者之服裝色彩之內容色彩、用以得到注意之內容波動、從波動到靜止之內容、或不同內容，或此等之任何組合。
  14. 如請求項1之系統，其中該成像裝置經定位於與該顯示器分離之一位置。
  15. 如請求項1之系統，其中該成像裝置經定位於與該顯示器分離之一成像裝置、一人體模型、一商品、一固持器或一支架之至少一者中。
  16. 如請求項1之系統，其中該成像裝置併入一馬達，以使該成像裝置本身旋轉，或使一前鏡頭旋轉以增加其視野(field of view)。
  17. 如請求項1之系統，其中多個顯示單元及成像單元經連結在一起，使得當一使用者自一顯示單元A之覆蓋區移動至一顯示單元B之覆蓋區時，一使用者之眼睛被追蹤，使得當在單元A中偵測到該使用者之注視時，顯示單元B將顯示與單元A中所顯示之內容相關的內容。
  18. 如請求項1之系統，其中與擷取到的影像相關聯之各顯示內容經分析，以找到該興趣程度，使得在一單一顯示器或使用多個顯示單元中，較低興趣內容將由類似於高興趣內容的內容替換。
  19. 如請求項1之系統，其中該影像分析包括一注視眨眼，其用以判定是否為一真人。
TW106124600A 2016-07-21 2017-07-21 根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統 TW201812521A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201662365234P 2016-07-21 2016-07-21
US62/365,234 2016-07-21

Publications (1)

Publication Number Publication Date
TW201812521A true TW201812521A (zh) 2018-04-01

Family

ID=60988495

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106124600A TW201812521A (zh) 2016-07-21 2017-07-21 根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統

Country Status (3)

Country Link
US (3) US20180024633A1 (zh)
TW (1) TW201812521A (zh)
WO (1) WO2018018022A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109858399A (zh) * 2019-01-15 2019-06-07 上海理工大学 一种基于眼神注视的喜好判别方法及判别系统
TWI688913B (zh) * 2018-05-09 2020-03-21 大陸商連雲港伍江數碼科技有限公司 儲物裝置中人機互動方法、裝置、儲物裝置以及儲存媒體
TWI699671B (zh) * 2018-12-12 2020-07-21 國立臺灣大學 減低眼球追蹤運算的方法和其眼動追蹤裝置
TWI758162B (zh) * 2021-04-15 2022-03-11 和碩聯合科技股份有限公司 生物形體的追蹤系統及方法
TWI768704B (zh) * 2021-02-05 2022-06-21 宏碁股份有限公司 計算關注焦點的方法及電腦程式產品

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6249263B2 (ja) * 2015-09-08 2017-12-20 日本電気株式会社 顔認識システム、顔認識方法、表示制御装置、表示制御方法および表示制御プログラム
JP6404196B2 (ja) 2015-09-16 2018-10-10 グリー株式会社 仮想画像表示プログラム、仮想画像表示装置及び仮想画像表示方法
US10537244B1 (en) 2017-09-05 2020-01-21 Amazon Technologies, Inc. Using eye tracking to label computer vision datasets
TWI704501B (zh) * 2018-08-09 2020-09-11 宏碁股份有限公司 可由頭部操控的電子裝置與其操作方法
JP2020113075A (ja) * 2019-01-11 2020-07-27 沖電気工業株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
JP7441673B2 (ja) * 2020-02-21 2024-03-01 シャープ株式会社 学習用データ生成装置、再生スケジュール学習システム、及び学習用データ生成方法
US11580657B2 (en) 2020-03-30 2023-02-14 Snap Inc. Depth estimation using biometric data
US11893206B2 (en) * 2020-09-02 2024-02-06 Autodesk, Inc. Transitions between states in a hybrid virtual reality desktop computing environment
CN113506132B (zh) * 2021-07-06 2023-08-01 树蛙信息科技(南京)有限公司 线下关注度的确定方法及装置
US20230351975A1 (en) * 2021-08-16 2023-11-02 Beijing Boe Optoelectronics Technology Co., Ltd. Method for controlling display apparatus, display apparatus, device, and computer storage medium

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008132741A2 (en) * 2007-04-30 2008-11-06 Trumedia Technologies Inc. Apparatus and method for tracking human objects and determining attention metrics
US9658687B2 (en) * 2011-09-30 2017-05-23 Microsoft Technology Licensing, Llc Visual focus-based control of coupled displays
US8810513B2 (en) * 2012-02-02 2014-08-19 Kodak Alaris Inc. Method for controlling interactive display system
US9823742B2 (en) * 2012-05-18 2017-11-21 Microsoft Technology Licensing, Llc Interaction and management of devices using gaze detection
US20140033774A1 (en) * 2012-08-06 2014-02-06 Kevin OFCHUS Anti-theft system and method for fuel or other cargo in mobile storage containers
US20140210707A1 (en) * 2013-01-25 2014-07-31 Leap Motion, Inc. Image capture system and method
US20140313103A1 (en) * 2013-04-19 2014-10-23 Qualcomm Incorporated Coordinating a display function between a plurality of proximate client devices
KR20140132246A (ko) * 2013-05-07 2014-11-17 삼성전자주식회사 오브젝트 선택 방법 및 오브젝트 선택 장치
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
US9269012B2 (en) * 2013-08-22 2016-02-23 Amazon Technologies, Inc. Multi-tracker object tracking
US9355489B2 (en) * 2013-11-14 2016-05-31 Intel Corporation Land grid array socket for electro-optical modules
US10242379B2 (en) * 2015-01-30 2019-03-26 Adobe Inc. Tracking visual gaze information for controlling content display
US9355499B1 (en) * 2015-04-20 2016-05-31 Popcards, Llc Augmented reality content for print media
CN106327142A (zh) * 2015-06-30 2017-01-11 阿里巴巴集团控股有限公司 一种信息展示方法及装置
KR20170009205A (ko) * 2015-07-16 2017-01-25 현대자동차주식회사 이중 고주파 열처리용 과열 둔감형 미세립 합금강 및 그 제조방법
US9900602B2 (en) * 2015-08-20 2018-02-20 Citrix Systems, Inc. Optimizing remote graphics delivery and presentation
US10884503B2 (en) * 2015-12-07 2021-01-05 Sri International VPA with integrated object recognition and facial expression recognition
US10277671B2 (en) * 2016-06-03 2019-04-30 Logitech Europe S.A. Automatic multi-host discovery in a flow-enabled system

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI688913B (zh) * 2018-05-09 2020-03-21 大陸商連雲港伍江數碼科技有限公司 儲物裝置中人機互動方法、裝置、儲物裝置以及儲存媒體
TWI699671B (zh) * 2018-12-12 2020-07-21 國立臺灣大學 減低眼球追蹤運算的方法和其眼動追蹤裝置
CN109858399A (zh) * 2019-01-15 2019-06-07 上海理工大学 一种基于眼神注视的喜好判别方法及判别系统
TWI768704B (zh) * 2021-02-05 2022-06-21 宏碁股份有限公司 計算關注焦點的方法及電腦程式產品
US11793435B2 (en) 2021-02-05 2023-10-24 Acer Incorporated Method and non-transitory computer-readable storage medium for detecting focus of attention
TWI758162B (zh) * 2021-04-15 2022-03-11 和碩聯合科技股份有限公司 生物形體的追蹤系統及方法

Also Published As

Publication number Publication date
US20180024633A1 (en) 2018-01-25
US20180024631A1 (en) 2018-01-25
US20180024632A1 (en) 2018-01-25
WO2018018022A1 (en) 2018-01-25

Similar Documents

Publication Publication Date Title
TW201812521A (zh) 根據使用者的興趣顯示內容之具有眼動追蹤之互動式顯示系統
US10382670B2 (en) Cognitive recording and sharing
US9952427B2 (en) Measurement method and system
US10055756B2 (en) Determining user engagement
US10991004B2 (en) Utilizing population density to facilitate providing offers
US10216997B2 (en) Augmented reality information system
US20170228804A1 (en) Personalizing Experiences for Visitors to Real-World Venues
US20190340817A1 (en) Learning opportunity based display generation and presentation
TWI505195B (zh) 眼球關注點確定方法、裝置和系統
US20140222558A1 (en) Facilitating electronic commercial transactions in an augmented reality environment
US20170366950A1 (en) Mobile content delivery optimization
Ravnik et al. Audience measurement of digital signage: Quantitative study in real-world environment using computer vision
US20150324635A1 (en) Methods, systems, and apparatuses for visitor monitoring
JP6879379B2 (ja) 接客支援装置、接客支援方法、及びプログラム
US20140156394A1 (en) Targeted Advertisement Generation For Travelers
US20190222890A1 (en) Interactive content management
US10296786B2 (en) Detecting hand-eye coordination in real time by combining camera eye tracking and wearable sensing
US10776827B2 (en) System, method, and recording medium for location-based advertisement
US10963914B2 (en) System, method, and recording medium for advertisement remarketing
US20230206631A1 (en) Real-Time Media Valuation System and Methods
Ataseven A scenario-based approach for the evaluation of video object tracking algorithms’ performance
WO2019119747A1 (en) Behavior prediction systems and methods
US20170236151A1 (en) Systems, devices, and methods of providing targeted advertising
JP2023519608A (ja) ユーザデバイスからデータを収集するシステム及び方法
FR3105508A1 (fr) Procédé de collecte de données relatives à un parcours d’un utilisateur dans un environnement