TW202041001A - 頭戴式顯示裝置以及其眼球追蹤裝置 - Google Patents

Abstract

頭戴式顯示裝置以及其眼球追蹤裝置被提出。眼球追蹤裝置包括第一波導元件、電控偏光器、第一偏光器以及攝像裝置。電控偏光器在第一時間區間，依據控制信號以在攝像裝置、電控偏光器以及目標區間提供第一光路徑。電控偏光器在第二時間區間依據控制信號以在攝像裝置、第一波導元件、第一偏光器以及目標區間提供第二光路徑。攝像裝置透過第一光路徑以及第二光路徑以分別擷取目標區的第一影像以及第二影像。

Description

頭戴式顯示裝置以及其眼球追蹤裝置

本發明是有關於一種頭戴式顯示裝置以及眼球追蹤裝置，且特別是有關於一種具單一攝像裝置的眼球追蹤裝置。

資訊保密在商業、金融、國土危安上是非常重要的，特別是在資訊經常在雲端分享的現代。在資訊保密中，虹膜辨識（Iris recognition）無疑是最高信用的保密技術，虹膜辨識的基礎是藉由一個相機與近紅外光照射眼球，並透過擷取眼球的二維虹膜影像，並經處理後作為加密資訊。然而，在現今的技術領域中，最常遇到的問題就是如何防偽。目前辨認真假眼球的方法有硬體跟軟體的改進方法，硬體的方式是透過增加更多的相機以擷取更多眼球資訊，造成硬體成本增加。軟體的方式則是增加更多的演算法，但軟體的方法有人工處理的疑慮，並被視為是一種間接辨認的方式，可信度不高。

本發明提供一種頭戴式顯示裝置以及眼球追蹤裝置，可有效重建三維的虹膜影像。

本發明的眼球追蹤裝置包括第一波導元件、電控偏光器、第一偏光器以及攝像裝置。電控偏光器設置在第一波導元件的第一端，目標區位於電控偏光器的第一側邊的外側。第一偏光器設置在第一波導元件的第二端。攝像裝置位於電控偏光器的第二側邊的外側，第一側邊與第二側邊不相同。電控偏光器在第一時間區間，依據控制信號以在攝像裝置、電控偏光器以及目標區間提供第一光路徑。電控偏光器在第二時間區間依據控制信號以在攝像裝置、第一波導元件、第一偏光器以及目標區間提供第二光路徑。攝像裝置透過第一光路徑以及第二光路徑以分別擷取目標區的第一影像以及第二影像。

本發明的頭戴式顯示裝置包括主體部以及如上所述的眼球追蹤裝置。眼球追蹤裝置設置在主體部中。

基於上述，本發明的眼球追蹤裝置透過設置單一攝像裝置，配合波導元件，以及電控偏光器所可產生的多個光路徑，以透過多個不同角度來對目標區的度進行影像擷取動作。並藉由所獲得的多個影像來進行三維影像重建動作，以執行目標區的眼球追蹤動作。

為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。

請參照圖1，圖1繪示本發明一實施例的眼球追蹤裝置的示意圖。眼球追蹤裝置100包括波導元件110、電控偏光器120、偏光器130、透鏡131、攝像裝置140以及光源LS。在本實施例中，波導元件110具有弧形結構。電控偏光器120設置在波導元件110的第一端S1上，偏光器130則設置在波導元件110的第二端S2上，其中，第一端S1與第二端S2為不相同的兩端。此外，目標區TG位於電控偏光器120的第一側邊A1的外側，且攝像裝置140位於電控偏光器120的第二側邊A2的外側，其中第一側邊A1與第二側邊A2不同。在本實施例中，目標區TG為使用者眼睛的所在位置。透鏡131設置在偏光器130與目標區TG間，透鏡131與偏光器130構成一成像裝置。

在此請注意，電控偏光器120為可調變偏光器（modulated beam splitter, MBS），電控偏光器120可接收為電氣信號的一控制信號，並依據控制信號的電壓值大小，以被組態為透光元件或反射元件。在本實施例中，電控偏光器120可在第一時間區間中，依據控制信號以被組態為透光元件。在此同時，攝像裝置140、電控偏光器120以及目標區TG間可形成一第一光路徑LP1。攝像裝置140則可藉由第一光路徑以對目標區上的物件（例如使用者的眼球）進行一第一影像的擷取動作。

在另一方面，電控偏光器120可在第二時間區間中，依據控制信號以被組態為反射元件。在此同時，攝像裝置140、電控偏光器120、波導元件110、偏光器130以及目標區TG間可提供一第二光路徑LP2。攝像裝置140則可藉由第二光路徑LP2以對目標區上的物件（使用者的眼球）進行一第二影像的擷取動作。

在本實施例中，第一影像與第二影像，是分別透過不同角度以針對使用者的眼球所擷取的影像。也因此第一影像與第二影像可提供以作為三維影像重建動作的資訊，並藉此獲得眼球的三維影像。透過眼球的三維影像，可以建立包括眼球深度、位置、眼皮大小以及三維的虹膜特徵的模型，並可執行安全認證動作。

另外，在本實施例中，光源LS用以發射光線至目標區TG，並使使用者的眼球上可產生反射的光點。如此一來，攝像裝置140所擷取的第一影像以及第二影像中，可為具有反射的光點的影像。透過第一影像以及第二影像中的反射光點的影像，可以判斷眼球的移動狀態，並執行眼球的追蹤動作。在本實施例中，光源LS可以為一紅外線光源，攝像裝置140則為可拍攝紅外線影像的照相機。在此，光源LS的位置沒有特定的限制，只需可有效的發送光線至目標區即可。

在此請注意，上述說明的第一時間區間以及第二時間區間沒有順序上的限制。在本實施例中，第一時間區間以及第二時間區間可以連續或不連續的發生。另外，電控偏光器120可應用本領域具通常知識者所熟知的可調變偏光器（MBS）來實施，沒有特別的限制。

請參照圖2，圖2繪示本發明另一實施例的眼球追蹤裝置的示意圖。眼球追蹤裝置200包括波導元件210、電控偏光器220、偏光器230、透鏡231、攝像裝置240、處理器270以及光源LS。與圖1實施例不相同的，在本實施例中，攝像裝置240並耦接至處理器270。處理器270接收攝像裝置240所產生的第一影像以及第二影像，並依據第一影像以及第二影像以進行三維影像重建動作，並產生目標區TG的三維影像。

在硬體結構上，處理器270可以為具運算能力的處理器晶片。或者處理器270可以是透過硬體描述語言（Hardware Description Language, HDL）或是其他任意本領域具通常知識者所熟知的數位電路的設計方式來進行設計，並透過現場可程式邏輯門陣列（Field Programmable Gate Array, FPGA）、複雜可程式邏輯裝置（Complex Programmable Logic Device, CPLD）或是特殊應用積體電路（Application-specific Integrated Circuit, ASIC）的方式來實現的硬體電路。

以下請參照圖3A，圖3A繪示本發明另一實施例的眼球追蹤裝置的示意圖。眼球追蹤裝置300包括波導元件311、312、電控偏光器321、偏光器331、332、攝像裝置340以及透鏡3311、3321及350。在本實施例中，波導元件311、312設置在相同的平面上，例如為三維座標系統的x-z平面。波導元件311、312的第一端S11、S21相鄰，波導元件311、312的第一端S11、S21間，並設置電控偏光器321。波導元件311、312的第二端S12、S22上分別設置偏光器331、332。眼球追蹤裝置300的目標區具有物件EYE（例如為眼球），透鏡3311設置在偏光器331與物件EYE間；透鏡3321設置在偏光器332與物件EYE間；透鏡350則設置在電控偏光器321與物件EYE間。

在動作方面，電控偏光器321可在第一時間區間被組態為透光元件，並使攝像裝置340可透過電控偏光器321、透鏡350以及物件EYE間的第一光路徑以獲得物件EYE的第一影像。電控偏光器321可在第二時間區間被組態為反射元件，並使攝像裝置340、電控偏光器321、波導元件311、偏光器331、透鏡3311以及物件EYE間形成一第二光路徑。攝像裝置340可透過第二光路徑以獲得物件EYE的第二影像。並且，電控偏光器321可在第三時間區間被組態為反射元件，並使攝像裝置340、電控偏光器321、波導元件312、偏光器332、透鏡3321以及物件EYE間形成一第三光路徑。攝像裝置340可透過第三光路徑以獲得物件EYE的第三影像。

在本發明實施例中，上述的第一影像、第二影像以及第三影像可以提供以作為三維影像重建動作的資訊，並藉以建立物件EYE的三維影像。

接著請參照圖3B，圖3B繪示本發明圖3A實施例的眼球追蹤裝置的延伸實施方式的示意圖。在圖3B中，眼球追蹤裝置300更包括波導元件313、314、偏光器333、334以及透鏡3331、3341。波導元件313、314設置在另一平面上，例如為三維座標系統的y-z平面。圖3A的波導元件311、312所在的平面（例如為第一平面）與波導元件313、314所在的平面（例如為第二平面）不互相重疊也不互相平行，並相交於一直線（例如為z軸）。

波導元件313、314的第一端S31、S41相鄰，波導元件313、314的第一端S31、S41間設置電控偏光器321。波導元件313、314的第二端S32、S42上分別設置偏光器333、334。眼球追蹤裝置300的目標區具有物件EYE（例如為眼球），透鏡3331設置在偏光器333與物件EYE間；透鏡3341設置在偏光器334與物件EYE間。

在動作細節方面，承續圖3A的動作細節，電控偏光器321並可在第四時間區間被組態為反射元件，並使攝像裝置340、電控偏光器321、波導元件313、偏光器333、透鏡3331以及物件EYE間形成一第四光路徑。攝像裝置340可透過第四光路徑以獲得物件EYE的第四影像。並且，電控偏光器321可在第五時間區間被組態為反射元件，並使攝像裝置340、電控偏光器321、波導元件314、偏光器334、透鏡3341以及物件EYE間形成一第五光路徑。攝像裝置340可透過第五光路徑以獲得物件EYE的第五影像。

在圖3A以及圖3B的實施例中，電控偏光器321為一多通道式電控偏光器，並可依據不同電壓的控制信號，以調整光線的行進方向。

本發明圖3A、3B的實施例可透過多個波導元件311~314，以使單一攝像裝置340可擷取物件EYE的多個不同角度的影像，並藉以建立更為精確的三維影像。而關於本發明實施例的影像擷取動作中，上述的第一光路徑至第五光路徑可以分時被產生，以擷取到物件EYE的多個不同角度的影像。

以下請參照圖4A以及圖4B，圖4A以及圖4B繪示本發明另一實施例的眼球追蹤裝置的示意圖。在圖4A中，眼球追蹤裝置400包括波導元件411、412、電控偏光器421、偏光器431、432、攝像裝置440以及透鏡4311、4321及451。在本實施例中，波導元件411、412設置在相同的平面上，例如為三維座標系統的x-z平面。波導元件411、412的第一端S11、S21相鄰，波導元件411、412的第一端S11、S21間設置電控偏光器421。波導元件411、412的第二端S12、S22上分別設置偏光器431、432。眼球追蹤裝置400的目標區具有物件EYE（例如為眼球），透鏡4311設置在偏光器431與物件EYE間；透鏡4321設置在偏光器432與物件EYE間；透鏡451則設置在電控偏光器421與物件EYE間。

在動作方面，透過電控偏光器421的光線偏移動作，攝像裝置440可透過透鏡451擷取物件EYE的一第一影像，透過波導元件411、偏光器431以及透鏡4311以擷取物件EYE的一第二影像，以及透過波導元件412、偏光器432以及透鏡4321以擷取物件EYE的一第三影像。

此外，在圖4B中，眼球追蹤裝置400更包括波導元件413、偏光器433、透鏡4331以及電控偏光器441。其中波導元件413的第一端S31鄰近電控偏光器441以進行設置。偏光器433設置在波導元件413的第二端S32上。透鏡4331設置在偏光器433與目標區的物件EYE間，電控偏光器441與物EYE間另設置透鏡452、453。在圖4B中，波導元件413設置在三維座標系統的y-z平面上。

對應圖4A的繪示，圖4B中的電控偏光器441以及圖4A中的電控偏光器421可以為相同構件，但具有不同的視角。並且，透鏡453與透鏡451則可以為相同的構件。電控偏光器421、441為多通道式電控偏光器。

在本實施例中，電控偏光器441可作為透光元件，或作為反射元件以將來自於波導元件411、412、413其中之一的光線傳送至攝像裝置440中。在圖4B中，在第四時間區間中，攝像裝置440可透過與電控偏光器441、波導元件413、偏光器433、透鏡4331以及物件EYE間所形成第四光路徑來進行物件EYE的影像擷取動作，並獲得一第四影像。

在本實施例中，透過電控偏光器421以及441的動作，攝像裝置440可同時透過第一光路徑至第四光路徑來獲取第一影像至第四影像。在本實施例中，第一影像至第四影像可以分別為物件EYE的四個不同區域的部分影像。依據第一影像至第四影像，可建立更為精確的三維影像。

請參照圖5，圖5繪示本發明實施例的攝像裝置所擷取的影像的示意圖。在圖4A、圖4B的實施例中，攝像裝置440所擷取的第一影像至第四影像，可以分別為物件EYE的四個完整影像。或者，在本發明實施例中，攝像裝置440所擷取的第一影像至第四影像可如圖5繪示的為物件EYE的完整影像IMG中的四個部分影像SIMG1~SIMG4。眼球追蹤裝置並可依據部分影像SIMG1~SIMG4來重建出物件EYE的三維影像。

圖5中，關於部分影像SIMG1~SIMG4在完整影像IMG中的位置關係僅只是一個範例，部分影像SIMG1~SIMG4在完整影像IMG中的位置關係可以依據波導元件與物件間位置關係來決定，沒有一定的限制。

以下請參照圖6，圖6繪示本發明一實施例的頭戴式顯示裝置的示意圖。頭戴式顯示裝置600包括主體部610、眼球追蹤裝置620以及顯示器630。眼球追蹤裝置620以及顯示器630均設置在主體部610中。眼球追蹤裝置620相對於目標區TG，並用以偵測目標區TG上的使用者眼球的位置資訊。眼球追蹤裝置620可應用如圖1、2、3A、3B、4A、4B所示的眼球追蹤裝置100、200、300或400來實施。並且，透過眼球追蹤裝置620所產生的多個眼球的影像，可有效建立出使用者眼球的三維立體影像，並可獲得使用者眼球的虹膜資訊，以應用於安全認證。

綜上所述，本發明透過一個或多個的導光元件，以使單一攝像裝置可擷取目標區物件的多個角度的影像，並藉以進行三維影像的重建動作，有效獲得眼球的三維影像資訊。

雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。

100、200、300、400、620:眼球追蹤裝置 110、210、311、312、313、314、411、412、413:波導元件 120、220、321、421、441:電控偏光器 130、331、332、333、334、431、432、433:偏光器 131、231、3311、3321、350、3331、3341、4311、4321、4331、451、452、453:透鏡 140、240、340、440:攝像裝置 270:處理器 600:頭戴式顯示裝置 610:主體部 LP1、LP2:光路徑 LS:光源 S1、S11、S21、S31、S41:第一端 S2、S12、S22、S32、S42:第二端 TG:目標區 EYE:物件 IMG:完整影像 SIMG1~SIMG4:部分影像 A1、A2:側邊

圖1繪示本發明一實施例的眼球追蹤裝置的示意圖。 圖2繪示本發明另一實施例的眼球追蹤裝置的示意圖。 圖3A繪示本發明另一實施例的眼球追蹤裝置的示意圖。 圖3B繪示本發明圖3A實施例的眼球追蹤裝置的延伸實施方式的示意圖。 圖4A以及圖4B繪示本發明另一實施例的眼球追蹤裝置的示意圖。 圖5繪示本發明實施例的攝像裝置所擷取的影像的示意圖。 圖6繪示本發明一實施例的頭戴式顯示裝置的示意圖。

100:眼球追蹤裝置

110:波導元件

120:電控偏光器

130:偏光器

131:透鏡

140:攝像裝置

LP1、LP2:光路徑

LS:光源

S1:第一端

S2:第二端

TG:目標區

A1、A2:側邊

Claims (13)

1. 一種眼球追蹤裝置，包括： 一第一波導元件； 一電控偏光器，設置在該第一波導元件的第一端，其中一目標區位於該電控偏光器的一第一側邊的外側； 一第一偏光器，設置在該第一波導元件的第二端； 一攝像裝置，位於該電控偏光器的一第二側邊的外側，該第一側邊與該第二側邊不相同， 其中，該電控偏光器在一第一時間區間，依據一控制信號以在該攝像裝置、該電控偏光器以及該目標區間提供一第一光路徑，該電控偏光器在一第二時間區間依據該控制信號以在該攝像裝置、該第一波導元件、該第一偏光器以及該目標區間提供一第二光路徑；其中該攝像裝置透過該第一光路徑以及該第二光路徑以分別擷取該目標區的一第一影像以及一第二影像。
2. 如申請專利範圍第1項所述的眼球追蹤裝置，其中該電控偏光器在該第一時間區間依據該控制信號以為一透光元件，並形成該第一光路徑；該電控偏光器在該第二時間區間依據該控制信號以為一反射元件，並形成該第二光路徑。
3. 如申請專利範圍第1項所述的眼球追蹤裝置，更包括： 一處理器，接收該第一影像以及該第二影像，依據該第一影像以及該第二影像以進行三維影像重建動作，並產生該目標區的三維影像。
4. 如申請專利範圍第1項所述的眼球追蹤裝置，更包括： 一第二波導元件，與該第一波導元件設置在相同的一第一平面上，該電控偏光器設置在該第二波導元件的第一端；以及 一第二偏光器，設置在該第二波導元件的第二端， 其中，該電控偏光器在一第三時間區間依據該控制信號以在攝像裝置、該第二波導元件、該第二偏光器以及該目標區間提供一第三光路徑，該攝像裝置並透過該第三光路徑以擷取該目標區的一第三影像。
5. 如申請專利範圍第4項所述的眼球追蹤裝置，更包括： 一第三波導元件，其中該第三波導元件的第一端與該電控偏光器相鄰配置；以及 一第三偏光器，設置在該第三波導元件的第二端。
6. 如申請專利範圍第5項所述的眼球追蹤裝置，其中該電控偏光器在一第四時間區間依據該控制信號以在該攝像裝置、該第三波導元件、該第三偏光器以及該目標區間提供一第四光路徑，該攝像裝置並透過該第四光路徑以擷取該目標區的一第四影像。
7. 如申請專利範圍第6項所述的眼球追蹤裝置，其中該第一影像至該第四影像為該目標區的不同角度的多個部分影像。
8. 如申請專利範圍第6項所述的眼球追蹤裝置，其中該第一時間區間至該第四時間區間可以相互重疊或者兩兩不相重疊。
9. 如申請專利範圍第6項所述的眼球追蹤裝置，更包括： 一第四波導元件，其中該第四波導元件的第一端與該電控偏光器相鄰配置，並與該第三波導元件設置在相同的一第二平面上；以及 一第四偏光器，設置在該第四波導元件的第二端； 其中，該電控偏光器在一第五時間區間依據該控制信號以在該攝像裝置、該第四波導元件、該第四偏光器以及該目標區間提供一第五光路徑，該攝像裝置並透過該第五光路徑以擷取該目標區的一第五影像。
10. 如申請專利範圍第9項所述的眼球追蹤裝置，其中該第一平面與該第二平面相交於一直線。
11. 如申請專利範圍第9項所述的眼球追蹤裝置，其中該電控偏光器為一多通道式電控偏光器。
12. 如申請專利範圍第1項所述的眼球追蹤裝置，更包括： 一第一透鏡，設置在該第一偏光器與該目標區間；以及 一第二透鏡，設置在該電控偏光器與該目標區間。
13. 一種頭戴式顯示裝置，包括： 一主體部；以及 如申請專利範圍第1項所述的眼球追蹤裝置，設置在該主體部中。

Images