TWI498769B - 頭戴式顯示裝置及其登入方法 - Google Patents

頭戴式顯示裝置及其登入方法 Download PDF

Info

Publication number
TWI498769B
TWI498769B TW102141931A TW102141931A TWI498769B TW I498769 B TWI498769 B TW I498769B TW 102141931 A TW102141931 A TW 102141931A TW 102141931 A TW102141931 A TW 102141931A TW I498769 B TWI498769 B TW I498769B
Authority
TW
Taiwan
Prior art keywords
light source
auxiliary light
optical axis
mounted display
display device
Prior art date
Application number
TW102141931A
Other languages
English (en)
Other versions
TW201520807A (zh
Inventor
wen chu Yang
Original Assignee
Quanta Comp Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Quanta Comp Inc filed Critical Quanta Comp Inc
Priority to TW102141931A priority Critical patent/TWI498769B/zh
Priority to CN201310656211.6A priority patent/CN104657648B/zh
Priority to US14/164,944 priority patent/US9355314B2/en
Publication of TW201520807A publication Critical patent/TW201520807A/zh
Application granted granted Critical
Publication of TWI498769B publication Critical patent/TWI498769B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Vascular Medicine (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Eye Examination Apparatus (AREA)
  • Position Input By Displaying (AREA)

Description

頭戴式顯示裝置及其登入方法
本發明是有關於一種電子裝置,且特別是有關於一種頭戴式顯示裝置及其登入方法。
隨著科技日新月異,人們對於資訊的吸收也日漸增加。一般常見的多媒體播放裝置、網路通訊裝置及電腦裝置等都係搭配CRT或LCD顯示器來顯示影像。但是其所能顯示的影像畫素及大小,係受限於顯示器的尺寸大小及其效能。目前傳統的CRT或LCD顯示器,皆無法兼顧尺寸及攜帶輕便的需求。為解決上述問題,市場上推出一種頭戴式顯示裝置(Head-Mounted Display,HMD)。頭戴式顯示裝置係在左右眼睛前方各放置有一小型映像管或是液晶顯示器。頭戴式顯示裝置例如是利用兩眼視差的立體效果,將各別映像管或是液晶顯示器所輸出的影像經過分光鏡(Beam Splitter)投射至使用者的視網膜。
頭戴式顯示裝置於開機時需要輸入密碼來辨識使用者身份。但是頭戴式顯示裝置並無鍵盤等輸入裝置讓使用者鍵入密碼。另一種辨識使用者身份的方式是輸入語音密碼。然而,語 音密碼易受使用者身體狀況及背景雜訊干擾,所以辨識準確度不高。此外,語音密碼易受有心人士盜錄,而無法正確地驗證使用者身份。
本發明係有關於一種頭戴式顯示裝置及其登入方法。
根據本發明,提出一種頭戴式顯示裝置之登入方法。頭戴式顯示裝置之登入方法包括:經由影像擷取裝置擷取第一眼球影像;判斷第一眼球影像是否通過虹膜辨識;當第一眼球影像通過虹膜辨識,控制微投影機投影軌跡圖樣;經由影像擷取裝置對應軌跡圖樣擷取第二眼球影像;根據第二眼球影像產生瞳孔軌跡;判斷瞳孔軌跡是否與軌跡圖樣相符;以及當瞳孔軌跡與軌跡圖樣相符,允許一登入請求。
根據本發明,提出一種頭戴式顯示裝置。頭戴式顯示裝置包括影像擷取裝置、微投影機、特殊應用積體電路(Application Specific Integrated Circuit,ASIC)及應用處理器。影像擷取裝置擷取第一眼球影像及對應軌跡圖樣擷取第二眼球影像。特殊應用積體電路判斷第一眼球影像是否通過虹膜辨識。當第一眼球影像通過虹膜辨識,應用處理器控制微投影機投影軌跡圖樣,並根據第二眼球影像產生瞳孔軌跡。應用處理器判斷瞳孔軌跡是否與軌跡圖樣相符。當瞳孔軌跡與軌跡圖樣相符,應用處理器允許一登入請求。
為了對本發明之上述及其他方面有更佳的瞭解,下文特舉較佳實施例,並配合所附圖式,作詳細說明如下:
1、3‧‧‧頭戴式顯示裝置
10‧‧‧眼鏡架
11a、11b‧‧‧影像擷取裝置
12‧‧‧微投影機
13‧‧‧特殊應用積體電路
14‧‧‧應用處理器
15a、15b、16a、16b‧‧‧輔助光源
51‧‧‧直線軌跡圖樣
52、53‧‧‧原始瞳孔軌跡
201~208‧‧‧步驟
A‧‧‧起始點
B‧‧‧凝視點
C‧‧‧終點
第1圖繪示係為依照第一實施例之一種頭戴式顯示裝置之方塊圖。
第2圖繪示係為依照第一實施例之一種頭戴式顯示裝置之登入方法之流程圖。
第3圖繪示係為第一種軌跡圖樣之示意圖。
第4圖繪示係為第二種軌跡圖樣之示意圖。
第5圖繪示係為直線軌跡圖樣之示意圖。
第6圖繪示係為影像擷取裝置位於眼球上方之原始瞳孔軌跡之示意圖。
第7圖繪示係為影像擷取裝置位於眼球下方之原始瞳孔軌跡之示意圖。
第8圖繪示係為依照第一實施例之頭戴式顯示裝置之第一種外觀示意圖。
第9圖繪示係為依照第一實施例之頭戴式顯示裝置之第二種外觀示意圖。
第10圖繪示係為依照第一實施例之頭戴式顯示裝置之第三種外觀示意圖。
第11圖繪示係為依照第一實施例之頭戴式顯示裝置之第四種外觀示意圖。
第12圖繪示係為依照第二實施例之一種頭戴式顯示裝置之方塊圖。
第13圖繪示係為依照第二實施例之頭戴式顯示裝置之第一種外觀示意圖。
第14圖繪示係為依照第二實施例之頭戴式顯示裝置之第二種外觀示意圖。
第一實施例
請參照第1圖,第1圖繪示係為依照第一實施例之一種頭戴式顯示裝置之方塊圖。頭戴式顯示裝置1包括影像擷取裝置11a、微投影機12、特殊應用積體電路(Application Specific Integrated Circuit,ASIC)13、應用處理器14、輔助光源15a及輔助光源16a。影像擷取裝置11a經由行動產業處理器介面(Mobile Interface Processor Interface,MIPI)或並列式介面(Parallel I/F)與特殊應用積體電路13溝通。特殊應用積體電路13經由通用輸入輸出(General Purpose Input Output,GPIO)介面開啟或關閉輔助光源15a及輔助光源16a。應用處理器14經由顯示介面控制微投影機12。應用處理器14經由通用序列匯流排(Universal Serial Bus,USB)與特殊應用積體電路13溝通。輔助光源15a及輔助光源16a之種類係不相同。舉例來說,輔助光源15a為白光發光二極體,而輔助光源16a為紅外線發光二極體。或者,輔助光源15a為紅外線 發光二極體,而第二輔助光源為16a為白光發光二極體。當頭戴式顯示裝置1配置紅外線發光二極體及白光發光二極體將有助於降低錯誤拒絕率(False Rejection Rate,FRR)。錯誤拒絕率表示應該辨識通過的卻沒通過的比率。
請同時參照第1圖及第2圖,第2圖繪示係為依照第一實施例之一種頭戴式顯示裝置之登入方法之流程圖。頭戴式顯示裝置1之登入方法包括如下步驟:首先如步驟201所示,影像擷取裝置11a擷取使用者之第一眼球影像。接著如步驟202所示,特殊應用積體電路13判斷第一眼球影像是否通過虹膜辨識。當第一眼球影像未通過虹膜辨識則執行步驟208。如步驟208所示,特殊應用積體電路13切換輔助光源。舉例來說,特殊應用積體電路13將原先開啟之輔助光源15a關閉,並將原先關閉之輔助光源16a開啟。或者,特殊應用積體電路13將原先開啟之輔助光源16a關閉,並將原先關閉之輔助光源15a開啟。接著重複執行步驟201及202。虹膜的特徵點可高達240個,因此於辨識使用者身份而言,其準確度極高。
當第一眼球影像通過虹膜辨識,特殊應用積體電路13將辨識結果輸出至應用處理器14,並執行步驟203。如步驟203所示,應用處理器14控制微投影機12投影軌跡圖樣。使用者之眼睛注視點隨軌跡圖樣移動,接著如步驟204所示,影像擷取裝置11a對應軌跡圖樣擷取第二眼球影像。跟著如步驟205所示,特殊應用積體電路13根據第二眼球影像產生瞳孔軌跡。特 殊應用積體電路13例如係先偵測各第二眼球影像之瞳孔大小,再計算各瞳孔大小之瞳孔中心點。特殊應用積體電路13計算瞳孔中心點分別於第二眼球影像之瞳孔座標,並根據瞳孔座標產生瞳孔軌跡。然後如步驟206所示,應用處理器14判斷瞳孔軌跡是否與軌跡圖樣相符。當瞳孔軌跡與軌跡圖樣相符,則執行步驟207。如步驟207所示,應用處理器14允許使用者之登入請求。
需說明的是,影像擷取裝置11a擷取第一眼球影像或第二眼球影像後,特殊應用積體電路13還能進一步先對第一眼球影像或第二眼球影像先進行影像處理再執行虹膜辨識或產生瞳孔軌跡。前述影像處理例如包括如下步驟:首先,特殊應用積體電路13將第一眼球影像進行透視校正以產生眼球正向影像。特殊應用積體電路13根據眼球正向影像能更方便地取得眼球及瞳孔位置,並能修正原先因投影所造成的失真。接著,特殊應用積體電路13進行眼球偵測,以避免影像擷取裝置11a擷取到使用者眨眼時之影像而造成分析誤判。跟著,特殊應用積體電路13去除眼球正向影像之雜訊並排除睫毛和陰影的干擾。然後,特殊應用積體電路13進行影像強化。影像強化例如為強化影像中虹膜之紋理。上述說明雖以第一眼球影像例如說明,但不侷限於此,第二眼球影像亦可適用前述影像處理流程。
請同時參照第1圖、第3圖及第4圖,第3圖繪示係為第一種軌跡圖樣之示意圖,第4圖繪示係為第二種軌跡圖樣之示意圖。軌跡圖樣包括起始點A、凝視點B及終點C。凝視點B位於起始 點A與終點C之間。軌跡圖樣指示使用者將眼睛注視點由起始點A向凝視點B移動,並於凝視點B停留一預設時間後,再向終點C移動。舉例來說,預設時間例如為0.5秒。第二眼球影像包括對應凝視點B之凝視影像。當眼睛注視點停留凝視點B時,特殊應用積體電路13判斷凝視影像是否通過虹膜辨識。當凝視影像通過虹膜辨識,軌跡圖樣再指示眼睛注視點向終點C移動。於使用者移動眼睛注視點的過程再次進行虹膜辨識,能有效地杜絕他人以眼睛照片惡意登入頭戴式顯示裝置1的行為。
請參照第1圖、第5圖、第6圖及第7圖,第5圖繪示係為直線軌跡圖樣之示意圖,第6圖繪示係為影像擷取裝置位於眼球上方之原始瞳孔軌跡之示意圖,第7圖繪示係為影像擷取裝置位於眼球下方之原始瞳孔軌跡之示意圖。由於使用者之眼球本身為一個球體,因此當影像擷取裝置11a的取像角度與眼球形成角度差時,雖然使用者之瞳孔沿直線移動,但經由影像擷取裝置11a擷取之第二眼球影像所產生之瞳孔軌跡卻不是直線。以第6圖為例,當影像擷取裝置11a位於眼球上方時,經由影像擷取裝置11a擷取之第二眼球影像所產生之原始瞳孔軌跡52則非線性。頭戴式顯示裝置1能於校正模式下進行校正以取得校正參數,後續當頭戴式顯示裝置1執行登入方法時,即能根據校正參數修正瞳孔軌跡。
進一步來說,應用處理器14於校正模式下,控制微投影機12投影直線軌跡圖樣51。影像擷取裝置11a對應直線軌跡圖樣51擷取第三眼球影像。特殊應用積體電路13根據第三眼 球影像產生原始瞳孔軌跡52,並根據原始瞳孔軌跡52、影像擷取裝置11a之位置、眼球位置及理想直線軌跡圖樣51進行校正以產生校正參數。前述校正例如包括水平方向及垂直方向之軌跡校正。相似地,當影像擷取裝置11a位於眼球下方時,應用處理器14所產生之原始瞳孔軌跡53將如第7圖繪示且非線性。於校正模式下,特殊應用積體電路13根據第三眼球影像產生原始瞳孔軌跡53,並根據原始瞳孔軌跡53、影像擷取裝置11a之位置、眼球位置及理想直線軌跡圖樣51進行校正以產生校正參數。垂直方向之軌跡校正概念亦同,在此不另行贅述。
請參照第8圖,第8圖繪示係為依照第一實施例之頭戴式顯示裝置之第一種外觀示意圖。於第8圖繪示中,輔助光源15a為白光發光二極體,且輔助光源16a為紅外線發光二極體。影像擷取裝置11a及輔助光源16a設置於眼鏡架之鏡框右上角,且輔助光源15a設置於眼鏡架之鏡框右下角。影像擷取裝置11a之光軸與輔助光源16a之光軸平行,且輔助光源16a之光軸與輔助光源15a之光軸形成一夾角。當眼球影像擷取裝置11a之光軸與輔助光源16a之光軸平行時,會因為輔助光源16a所發出之輔助光源被視網膜反射而形成亮瞳效應。亮瞳效應可降低睫毛或陰影之干擾,且有助於低環境亮度下的瞳孔偵測。此外,亮瞳效應有助於偵測有藍色或灰色眼睛的使用者。
請參照第9圖,第9圖繪示係為依照第一實施例之頭戴式顯示裝置之第二種外觀示意圖。於第9圖繪示中,輔助光 源15a為白光發光二極體,且輔助光源16a為紅外線發光二極體。影像擷取裝置11a及輔助光源15a設置於眼鏡架之鏡框右上角,且輔助光源16a設置於眼鏡架之鏡框右下角。影像擷取裝置11a之光軸與輔助光源15a之光軸平行,且輔助光源15a之光軸與輔助光源16a之光軸形成一夾角。當影像擷取裝置11a之光軸與輔助光源16a之光軸形成一夾角,瞳孔上反射之光源無法進入影像擷取裝置11a而形成暗瞳效應。暗瞳效應有助於高環境亮度下或有自然光時的瞳孔偵測。此外,暗瞳效應有助於偵測有深色眼睛的使用者。除此之外,於其他實施例之頭戴式顯示裝置可更包括另一輔助光源,且此另一輔助光源為紅外線發光二極體。影像擷取裝置11a之光軸與此另一輔助光源之光軸平行。如此一來,特殊應用積體電路16可視環境條件選擇開啟輔助光源16a或此另一輔助光源,以選擇配合亮瞳效應或暗瞳效應來偵測使用者之瞳孔。
請參照第10圖,第10圖繪示係為依照第一實施例之頭戴式顯示裝置之第三種外觀示意圖。於第10圖繪示中,輔助光源15a為白光發光二極體,且輔助光源16a為紅外線發光二極體。影像擷取裝置11a及輔助光源16a設置於眼鏡架之鏡框左下角,且輔助光源15a設置於眼鏡架之鏡框左上角。影像擷取裝置11a之光軸與輔助光源16a之光軸平行,且輔助光源16a之光軸與輔助光源15a之光軸形成一夾角。當影像擷取裝置11a之光軸與輔助光源16a之光軸平行時,會因為輔助光源16a所發出之 輔助光源被視網膜反射而形成亮瞳效應。亮瞳效應可降低睫毛或陰影之干擾,且有助於低環境亮度下的瞳孔偵測。此外,亮瞳效應有助於偵測有藍色或灰色眼睛的使用者。
請參照第11圖,第11圖繪示係為依照第一實施例之頭戴式顯示裝置之第四種外觀示意圖。於第11圖繪示中,輔助光源15a為白光發光二極體,且輔助光源16a為紅外線發光二極體。影像擷取裝置11a及輔助光源15a設置於眼鏡架之鏡框左下角,且輔助光源16a設置於眼鏡架之鏡框左上角。影像擷取裝置11a之光軸與輔助光源15a之光軸平行,且輔助光源15a之光軸與輔助光源16a之光軸形成一夾角。當影像擷取裝置11a之光軸與輔助光源16a之光軸形成一夾角,瞳孔上反射之光源無法進入影像擷取裝置11a而形成暗瞳效應。暗瞳效應有助於高環境亮度下或有自然光時的瞳孔偵測。此外,暗瞳效應有助於偵測有深色眼睛的使用者。
第二實施例
請參照第12圖,第12圖繪示係為依照第二實施例之一種頭戴式顯示裝置之方塊圖。頭戴式顯示裝置3除影像擷取裝置11a、微投影機12、特殊應用積體電路13、應用處理器14、輔助光源15a及輔助光源16a外,更包括影像擷取裝置11b、輔助光源15b及輔助光源16b。影像擷取裝置11b經由行動產業處理器介面(Mobile Interface Processor Interface,MIPI)或並列式介面 (Parallel I/F)與特殊應用積體電路13溝通。特殊應用積體電路13經由通用輸入輸出(General Purpose Input Output,GPIO)介面開啟或關閉輔助光源15b及輔助光源16b。輔助光源15b及輔助光源16b之種類係不相同。舉例來說,輔助光源15b為白光發光二極體,而輔助光源16b為紅外線發光二極體。或者,輔助光源15b為紅外線發光二極體,而輔助光源16b為白光發光二極體。當頭戴式顯示裝置3配置影像擷取裝置11a及影像擷取裝置11b將有助於降低錯誤接收率(False Acceptance Rate,FAR),錯誤接收率表示原本應該不能通過辨識的卻通過了。
請同時參照第8圖、第12圖及第13圖,第13圖繪示係為 依照第二實施例之頭戴式顯示裝置之第一種外觀示意圖。於第13圖繪示中,輔助光源15a及輔助光源15b為白光發光二極體,且輔助光源16a及輔助光源16b為紅外線發光二極體。第13圖與第8圖主要不同之處在於影像擷取裝置11b及輔助光源16b設置於眼鏡架之鏡框左上角,且輔助光源15b設置於眼鏡架之鏡框左下角。 影像擷取裝置11b之光軸與輔助光源16b之光軸平行,且輔助光源16b之光軸與輔助光源15b之光軸形成一夾角。
請同時參照第11圖、第12圖及第14圖,第14圖繪示係為 依照第二實施例之頭戴式顯示裝置之第二種外觀示意圖。於第14圖繪示中,輔助光源15a及輔助光源15b為白光發光二極體,且輔助光源16a及輔助光源16b為紅外線發光二極體。第14圖與第11圖主要不同之處在於影像擷取裝置11b及輔助光源15b設置於 眼鏡架之鏡框右下角,且輔助光源16b設置於眼鏡架之鏡框右上角。影像擷取裝置11b之光軸與輔助光源15b之光軸平行,且輔助光源15b之光軸與輔助光源16b之光軸形成一夾角。
前述實施例所載之頭戴式顯示裝置及其登入方法僅 為舉例說明,於其他實施例中頭戴式顯示裝置亦可搭配兩個以上的紅外線發光二極體。如使用兩個紅外線發光二極體,則兩個紅外線發光二極體之光軸形成一夾角。此外,於偵測使用者之目前瞳孔大小時,並不侷限於一次開啟一個紅外線發光二極體,亦可同時開啟多個紅外線發光二極體。除此之外,實施方式並不侷限於紅外線發光二極體,亦可使用其他種類發光二極體,如白光發光二極體。上述實施例藉由虹膜辨識及瞳孔軌跡偵測能驗證使用者身份是否合法,以避免他人惡意登入頭戴式顯示裝置。
綜上所述,雖然本發明已以較佳實施例揭露如上,然其並非用以限定本發明。本發明所屬技術領域中具有通常知識者,在不脫離本發明之精神和範圍內,當可作各種之更動與潤飾。因此,本發明之保護範圍當視後附之申請專利範圍所界定者為準。
201~208‧‧‧步驟

Claims (22)

  1. 一種頭戴式顯示裝置之登入方法,包括:經由一影像擷取裝置擷取一第一眼球影像;判斷該第一眼球影像是否通過一虹膜辨識;當該第一眼球影像通過該虹膜辨識,控制一微投影機投影一軌跡圖樣;經由該影像擷取裝置對應該軌跡圖樣擷取複數個第二眼球影像;根據該些第二眼球影像產生一瞳孔軌跡;判斷該瞳孔軌跡是否與該軌跡圖樣相符;以及當該瞳孔軌跡與該軌跡圖樣相符,允許一登入請求。
  2. 如申請專利範圍第1項所述之頭戴式顯示裝置之登入方法,其中該軌跡圖樣包括一起始點、一凝視點及一終點,該凝視點位於該起始點與該終點之間,該軌跡圖樣指示將一眼睛注視點由該起始點向該凝視點移動,並於該凝視點停留一預設時間後,再向該終點移動。
  3. 如申請專利範圍第2項所述之頭戴式顯示裝置之登入方法,其中該些第二眼球影像包括對應該凝視點之一凝視影像,當該眼睛注視點停留該凝視點時,判斷該凝視影像是否通過該虹膜辨識,當該凝視影像通過該虹膜辨識,該軌跡圖樣再指示該眼睛注視點向該終點移動。
  4. 如申請專利範圍第1項所述之頭戴式顯示裝置之登入方 法,更包括:當該第一眼球影像未通過該虹膜辨識,將一第一輔助光源關閉並將一第二輔助光源開啟,該第二輔助光源與該第一輔助光源之種類係不相同。
  5. 如申請專利範圍第4項所述之頭戴式顯示裝置之登入方法,其中該第一輔助光源為白光發光二極體,且該第二輔助光源為紅外線發光二極體。
  6. 如申請專利範圍第5項所述之頭戴式顯示裝置之登入方法,其中該影像擷取裝置之光軸與該第二輔助光源之光軸平行,該第二輔助光源之光軸與該第一輔助光源之光軸形成一夾角。
  7. 如申請專利範圍第5項所述之頭戴式顯示裝置之登入方法,其中該影像擷取裝置之光軸與該第一輔助光源之光軸平行,該第一輔助光源之光軸與該第二輔助光源之光軸形成一夾角。
  8. 如申請專利範圍第4項所述之頭戴式顯示裝置之登入方法,其中該第一輔助光源為紅外線發光二極體,且該第二輔助光源為白光發光二極體。
  9. 如申請專利範圍第8項所述之頭戴式顯示裝置之登入方法,其中該影像擷取裝置之光軸與該第二輔助光源之光軸平行,該第二輔助光源之光軸與該第一輔助光源之光軸形成一夾角。
  10. 如申請專利範圍第8項所述之頭戴式顯示裝置之登入方法,其中該影像擷取裝置之光軸與該第一輔助光源之光軸平行,該第一輔助光源之光軸與該第二輔助光源之光軸形成一夾角。
  11. 如申請專利範圍第1項所述之頭戴式顯示裝置之登入方法,更包括:於一校正模式下,控制該微投影機投影一直線軌跡圖樣;經由該影像擷取裝置對應該直線軌跡圖樣擷取複數個第三眼球影像;根據該些第三眼球影像產生一原始瞳孔軌跡;以及根據該原始瞳孔軌跡、該影像擷取裝置之位置及一眼球位置進行校正以產生複數個校正參數,該些校正參數用以修正該瞳孔軌跡。
  12. 一種頭戴式顯示裝置,包括:一影像擷取裝置,用以擷取一第一眼球影像及對應一軌跡圖樣擷取複數個第二眼球影像;一微投影機;一特殊應用積體電路(Application Specific Integrated Circuit,ASIC),用以判斷該第一眼球影像是否通過一虹膜辨識;以及一應用處理器,用以當該第一眼球影像通過該虹膜辨識,控制該微投影機投影該軌跡圖樣,並根據該些第二眼球影像產生一瞳孔軌跡,該應用處理器判斷該瞳孔軌跡是否與該軌跡圖樣相符,並當該瞳孔軌跡與該軌跡圖樣相符,允許一登入請求。
  13. 如申請專利範圍第12項所述之頭戴式顯示裝置,其中該軌跡圖樣包括一起始點、一凝視點及一終點,該凝視點位於該起始點與該終點之間,該軌跡圖樣指示將一眼睛注視點由該起始點 向該凝視點移動,並於該凝視點停留一預設時間後,再向該終點移動。
  14. 如申請專利範圍第13項所述之頭戴式顯示裝置,其中該些第二眼球影像包括對應該凝視點之一凝視影像,當該眼睛注視點停留該凝視點時,判斷該凝視影像是否通過該虹膜辨識,當該凝視影像通過該虹膜辨識,該軌跡圖樣再指示該眼睛注視點向該終點移動。
  15. 如申請專利範圍第12項所述之頭戴式顯示裝置,更包括:一第一輔助光源;以及一第二輔助光源,當該第一眼球影像未通過該虹膜辨識,該特殊應用積體電路關閉該第一輔助光源,且開啟該第二輔助光源,該第二輔助光源與該第一輔助光源之種類係不相同。
  16. 如申請專利範圍第15項所述之頭戴式顯示裝置,其中該第一輔助光源為白光發光二極體,且該第二輔助光源為紅外線發光二極體。
  17. 如申請專利範圍第16項所述之頭戴式顯示裝置,其中該影像擷取裝置之光軸與該第二輔助光源之光軸平行,該第二輔助光源之光軸與該第一輔助光源之光軸形成一夾角。
  18. 如申請專利範圍第16項所述之頭戴式顯示裝置,其中該影像擷取裝置之光軸與該第一輔助光源之光軸平行,該第一輔助光源之光軸與該第二輔助光源之光軸形成一夾角。
  19. 如申請專利範圍第15項所述之頭戴式顯示裝置,其中該第一輔助光源為紅外線發光二極體,且該第二輔助光源為白光發光二極體。
  20. 如申請專利範圍第19項所述之頭戴式顯示裝置,其中該影像擷取裝置之光軸與該第二輔助光源之光軸平行,該第二輔助光源之光軸與該第一輔助光源之光軸形成一夾角。
  21. 如申請專利範圍第19項所述之頭戴式顯示裝置,其中該影像擷取裝置之光軸與該第一輔助光源之光軸平行,該第一輔助光源之光軸與該第二輔助光源之光軸形成一夾角。
  22. 如申請專利範圍第12項所述之頭戴式顯示裝置,其中該應用處理器於一校正模式下,控制該微投影機投影一直線軌跡圖樣,該影像擷取裝置對應該直線軌跡圖樣擷取複數個第三眼球影像,該特殊應用積體電路根據該些第三眼球影像產生一原始瞳孔軌跡,並根據該原始瞳孔軌跡、該影像擷取裝置之位置及一眼球位置進行校正以產生複數個校正參數,該些校正參數用以修正該瞳孔軌跡。
TW102141931A 2013-11-18 2013-11-18 頭戴式顯示裝置及其登入方法 TWI498769B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW102141931A TWI498769B (zh) 2013-11-18 2013-11-18 頭戴式顯示裝置及其登入方法
CN201310656211.6A CN104657648B (zh) 2013-11-18 2013-12-06 头戴式显示装置及其登录方法
US14/164,944 US9355314B2 (en) 2013-11-18 2014-01-27 Head-mounted display apparatus and login method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW102141931A TWI498769B (zh) 2013-11-18 2013-11-18 頭戴式顯示裝置及其登入方法

Publications (2)

Publication Number Publication Date
TW201520807A TW201520807A (zh) 2015-06-01
TWI498769B true TWI498769B (zh) 2015-09-01

Family

ID=53173356

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102141931A TWI498769B (zh) 2013-11-18 2013-11-18 頭戴式顯示裝置及其登入方法

Country Status (3)

Country Link
US (1) US9355314B2 (zh)
CN (1) CN104657648B (zh)
TW (1) TWI498769B (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6417676B2 (ja) * 2014-03-06 2018-11-07 ソニー株式会社 情報処理装置、情報処理方法、アイウェア端末および認証システム
US10546183B2 (en) 2015-08-10 2020-01-28 Yoti Holding Limited Liveness detection
US9794260B2 (en) 2015-08-10 2017-10-17 Yoti Ltd Liveness detection
JP6918781B2 (ja) 2015-08-21 2021-08-11 マジック リープ, インコーポレイテッドMagic Leap,Inc. 眼ポーズ測定を用いた眼瞼形状推定
CN105138890B (zh) * 2015-09-30 2018-11-30 宇龙计算机通信科技(深圳)有限公司 鉴权方法、鉴权装置和终端
NZ741863A (en) * 2015-10-16 2019-05-31 Magic Leap Inc Eye pose identification using eye features
EP3405829A4 (en) * 2016-01-19 2019-09-18 Magic Leap, Inc. COLLECTION, SELECTION AND COMBINATION OF EYE IMAGES
CN107066079A (zh) 2016-11-29 2017-08-18 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务实现方法及装置
CN107122642A (zh) * 2017-03-15 2017-09-01 阿里巴巴集团控股有限公司 基于虚拟现实环境的身份认证方法及装置
US10809796B2 (en) 2017-09-29 2020-10-20 Apple Inc. Monitoring a user of a head-wearable electronic device
US10930709B2 (en) 2017-10-03 2021-02-23 Lockheed Martin Corporation Stacked transparent pixel structures for image sensors
US10510812B2 (en) 2017-11-09 2019-12-17 Lockheed Martin Corporation Display-integrated infrared emitter and sensor structures
GB2569794A (en) 2017-12-21 2019-07-03 Yoti Holding Ltd Biometric user authentication
US10979699B2 (en) 2018-02-07 2021-04-13 Lockheed Martin Corporation Plenoptic cellular imaging system
US10129984B1 (en) 2018-02-07 2018-11-13 Lockheed Martin Corporation Three-dimensional electronics distribution by geodesic faceting
US10951883B2 (en) 2018-02-07 2021-03-16 Lockheed Martin Corporation Distributed multi-screen array for high density display
US10652529B2 (en) 2018-02-07 2020-05-12 Lockheed Martin Corporation In-layer Signal processing
US10594951B2 (en) 2018-02-07 2020-03-17 Lockheed Martin Corporation Distributed multi-aperture camera array
US10690910B2 (en) 2018-02-07 2020-06-23 Lockheed Martin Corporation Plenoptic cellular vision correction
US10838250B2 (en) 2018-02-07 2020-11-17 Lockheed Martin Corporation Display assemblies with electronically emulated transparency
US11616941B2 (en) 2018-02-07 2023-03-28 Lockheed Martin Corporation Direct camera-to-display system
CN109063448A (zh) * 2018-08-20 2018-12-21 中国联合网络通信集团有限公司 身份验证方法和系统
CN109145566A (zh) * 2018-09-08 2019-01-04 太若科技(北京)有限公司 基于注视点信息解锁ar眼镜的方法、装置及ar眼镜
US10866413B2 (en) 2018-12-03 2020-12-15 Lockheed Martin Corporation Eccentric incident luminance pupil tracking
CN109726687A (zh) * 2018-12-29 2019-05-07 武汉虹识技术有限公司 Asic集成电路及虹膜识别系统
US10698201B1 (en) 2019-04-02 2020-06-30 Lockheed Martin Corporation Plenoptic cellular axis redirection
CN112099615B (zh) * 2019-06-17 2024-02-09 北京七鑫易维科技有限公司 注视信息确定方法、装置、眼球追踪设备及存储介质
CN110287687A (zh) * 2019-06-26 2019-09-27 Oppo广东移动通信有限公司 注册方法、注册装置、头戴设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7391887B2 (en) * 2001-08-15 2008-06-24 Qinetiq Limited Eye tracking systems
TWM422125U (en) * 2011-10-19 2012-02-01 Wen-Jun Wu Headset identity recognition device
WO2012154418A1 (en) * 2011-05-11 2012-11-15 Google Inc. Gaze tracking system

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5341181A (en) * 1992-11-20 1994-08-23 Godard Roger R Systems and methods for capturing and presentng visual information
DK1285409T3 (da) * 2000-05-16 2005-08-22 Swisscom Mobile Ag Fremgangsmåde ved biometrisk identificering og autentificering
CN1197517C (zh) * 2001-09-07 2005-04-20 昆明利普机器视觉工程有限公司 数字视频眼动分析仪
US20060115130A1 (en) * 2004-11-29 2006-06-01 Douglas Kozlay Eyewear with biometrics to protect displayed data
WO2007085682A1 (en) * 2006-01-26 2007-08-02 Nokia Corporation Eye tracker device
US7986816B1 (en) * 2006-09-27 2011-07-26 University Of Alaska Methods and systems for multiple factor authentication using gaze tracking and iris scanning
JP2008094221A (ja) * 2006-10-11 2008-04-24 Denso Corp 目状態検出装置および目状態検出装置の取り付け方法
US20090224874A1 (en) * 2008-03-05 2009-09-10 International Business Machines Corporation Apparatus, system, and method for providing authentication and activation functions to a computing device
CN101872237B (zh) * 2009-04-23 2012-04-18 由田新技股份有限公司 瞳孔追踪方法与系统及用于瞳孔追踪的校正方法与模组
GB2495328B (en) * 2011-10-07 2018-05-30 Irisguard Inc Improvements relating to Iris cameras
US8913789B1 (en) * 2012-01-06 2014-12-16 Google Inc. Input methods and systems for eye positioning using plural glints
CN104094197B (zh) * 2012-02-06 2018-05-11 索尼爱立信移动通讯股份有限公司 利用投影仪的注视追踪
US9096920B1 (en) * 2012-03-22 2015-08-04 Google Inc. User interface method
US9082011B2 (en) * 2012-03-28 2015-07-14 Texas State University—San Marcos Person identification using ocular biometrics with liveness detection
US9171198B1 (en) * 2012-04-02 2015-10-27 Google Inc. Image capture technique
CN102622087B (zh) * 2012-04-28 2015-01-21 上海华勤通讯技术有限公司 移动终端及其解锁方法
CN102842040A (zh) * 2012-08-13 2012-12-26 高艳玲 运用眼球跟踪进行活体化检测的方法
US8856541B1 (en) * 2013-01-10 2014-10-07 Google Inc. Liveness detection
CN103312509A (zh) * 2013-05-16 2013-09-18 彭汉儒 动态令牌、动态口令显示方法和装置
US20140341441A1 (en) * 2013-05-20 2014-11-20 Motorola Mobility Llc Wearable device user authentication
US9480397B2 (en) * 2013-09-24 2016-11-01 Sony Interactive Entertainment Inc. Gaze tracking variations using visible lights or dots

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7391887B2 (en) * 2001-08-15 2008-06-24 Qinetiq Limited Eye tracking systems
WO2012154418A1 (en) * 2011-05-11 2012-11-15 Google Inc. Gaze tracking system
TWM422125U (en) * 2011-10-19 2012-02-01 Wen-Jun Wu Headset identity recognition device

Also Published As

Publication number Publication date
US9355314B2 (en) 2016-05-31
CN104657648B (zh) 2017-12-29
US20150139509A1 (en) 2015-05-21
CN104657648A (zh) 2015-05-27
TW201520807A (zh) 2015-06-01

Similar Documents

Publication Publication Date Title
TWI498769B (zh) 頭戴式顯示裝置及其登入方法
US10796178B2 (en) Method and device for face liveness detection
TWI516804B (zh) 頭戴式顯示裝置及其背光調整方法
US11693475B2 (en) User recognition and gaze tracking in a video system
US9288388B2 (en) Method and portable terminal for correcting gaze direction of user in image
US11163995B2 (en) User recognition and gaze tracking in a video system
US9369658B2 (en) Image correction of surface projected image
US9622654B2 (en) Device for and method of corneal imaging
TWI610571B (zh) 顯示方法及其系統與電腦可讀取記錄媒體
US10521662B2 (en) Unguided passive biometric enrollment
US20160025983A1 (en) Computer display device mounted on eyeglasses
WO2012137801A1 (ja) 入力装置及び入力方法並びにコンピュータプログラム
TWI507729B (zh) 頭戴式視覺輔助系統及其成像方法
US11080888B2 (en) Information processing device and information processing method
KR20170001430A (ko) 디스플레이 장치 및 이의 영상 보정 방법
JP6701631B2 (ja) 表示装置、表示装置の制御方法、表示システム、及び、プログラム
KR20140125183A (ko) 프로젝터 장착 안경 및 그 제어 방법
TWI637288B (zh) 用於眼球視線校正的影像處理方法及其系統
WO2021095277A1 (ja) 視線検出方法、視線検出装置、及び制御プログラム
JP2021077333A (ja) 視線検出方法、視線検出装置、及び制御プログラム
CN116529786A (zh) 多相机生物识别成像系统
US11948402B2 (en) Spoof detection using intraocular reflection correspondences
WO2024021250A1 (zh) 身份信息采集方法、装置、电子设备和存储介质
CN114220123B (zh) 一种姿态矫正方法、装置、投影设备及存储介质
WO2024021251A1 (zh) 身份校验方法、装置、电子设备以及存储介质