TWI691735B - 近眼顯示裝置 - Google Patents
近眼顯示裝置 Download PDFInfo
- Publication number
- TWI691735B TWI691735B TW108110503A TW108110503A TWI691735B TW I691735 B TWI691735 B TW I691735B TW 108110503 A TW108110503 A TW 108110503A TW 108110503 A TW108110503 A TW 108110503A TW I691735 B TWI691735 B TW I691735B
- Authority
- TW
- Taiwan
- Prior art keywords
- eye
- display
- camera module
- image
- light
- Prior art date
Links
Images
Abstract
一種近眼顯示裝置,包括至少一顯示器、至少一透鏡組及至少一相機模組。顯示器用以發出一影像光束及一結構光。透鏡組配置於影像光束與結構光的傳遞路徑上,用以將影像光束會聚於一使用者的眼睛,以使眼睛觀察到一虛像。結構光經由透鏡組照射於眼睛上以形成一光圖案,而相機模組用以拍攝光圖案,且相機模組所拍攝到的光圖案用以分析眼睛的距離。
Description
本發明是有關於一種光學裝置,且特別是有關於一種近眼顯示裝置。
近眼顯示器(near-eye display)一般可分為虛擬實境顯示器(virtual reality display, VR display)與擴增實境顯示器(augmented reality display, AR display),其在近年來蓬勃地發展,提供了使用者不同以往的視覺體驗。
目前的虛擬實境顯示器的軟體可作到根據使用者的雙眼瞳距(inter-pupillary distance, IPD)與適眼距(eye relief)來調整影像,以顯示正確的顯示內容,但卻需要額外加裝一個獨立且完整的深度感測模組來達成。然而,額外增加一個獨立且完整的深度感測模組會增加成本。若不增加額外的深度感測模組,則影像的校正會耗費大量的時間,且需對不同的使用者作校正,甚至是對使用者配戴的不同配件(例如處方眼鏡或帽子)作校正。
此外,一些頭戴式顯示器(head mounted display, HMD)採用單一感測器作眼動追蹤(eye tracking)與接近感測(proximity detection)。然而,此單一感測器不足以偵測出準確的深度,因此無法提供雙眼瞳距與適眼距。
本發明提供一種近眼顯示裝置,其能夠在不犧牲對人眼感測的準確率的情況下降低成本。
本發明的一實施例提出一種近眼顯示裝置,包括至少一顯示器、至少一透鏡組及至少一相機模組。顯示器用以發出一影像光束及一結構光(structured light)。透鏡組配置於影像光束與結構光的傳遞路徑上,用以將影像光束會聚於一使用者的眼睛,以使眼睛觀察到一虛像。結構光經由透鏡組照射於眼睛上以形成一光圖案,而相機模組用以拍攝光圖案,且相機模組所拍攝到的光圖案用以分析眼睛的距離。
在本發明的實施例的近眼顯示裝置中,由於是採用提供影像的顯示器來作為結構光發射源,因此相機模組不必利用額外的光源來提供結構光。如此一來,便能夠在不犧牲對人眼感測的準確率的情況下降低成本,且可以縮小近眼顯示裝置的體積。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
圖1是本發明的一實施例的近眼顯示裝置的光路示意圖,圖2A是圖1的近眼顯示裝置的顯示器所顯示的對應於一種結構光的顯示畫面,而圖2B是圖1的近眼顯示裝置的顯示器所顯示的對應於另一種結構光的顯示畫面。圖3是圖1的近眼顯示裝置的系統方塊圖。請參照圖1、圖2A、圖2B及與圖3,本實施例的近眼顯示裝置100包括至少一顯示器110、至少一透鏡組120及至少一相機模組130。在本實施例中,如圖3,是以分別對應於使用者的左眼與右眼的兩個顯示器110a與110b為例,而圖1僅示意性地繪示一個顯示器110作代表。此外,在本實施例中,是以分別對應於使用者的左眼與右眼的兩個透鏡組120為例,而圖1僅示意性地繪示一個透鏡組120作代表。再者,在本實施例中,如圖3,是以分別對應於使用者的左眼與右眼的兩個相機模組130a與130b為例,而圖1僅示意性地繪示一個相機模組130作代表。
顯示器110用以發出一影像光束111及一結構光113。在本實施例中,顯示器110例如是液晶顯示器(liquid crystal display, LCD)、有機發光二極體顯示器(organic light-emitting diode display, OLED display)、微發光二極體顯示器(micro-LED display)或被照明系統照亮的矽基液晶面板(liquid-crystal-on-silicon panel, LCoS panel)、數位微鏡元件(digital micro-mirror device, DMD)或其他空間光調變器(spatial light modulator, SLM)。
透鏡組120配置於影像光束111與結構光113的傳遞路徑上,用以將影像光束111會聚於使用者的眼睛50,以使眼睛觀察到一虛像。透鏡組120可包括一或多個透鏡,而在本實施例中,透鏡組120是以包括一個透鏡為例。結構光113經由透鏡組120照射於眼睛50上以在眼睛50上形成光圖案,而相機模組130用以拍攝光圖案。相機模組130所拍攝到的光圖案用以分析眼睛50的距離。舉例而言,在顯示器110提供結構光113時,顯示器110可呈現如圖2A的顯示畫面,則經由透鏡組120的投影作用,眼睛上便會形成有對應於此顯示畫面的光圖案。相較於原本的顯示畫面上的圖案,光圖案會隨著眼睛表面的凹凸與距離而產生變形,藉由分析此變形的方向與變形的呈度便可計算出眼睛50的距離(例如是眼睛50至透鏡組120的距離)。
近眼顯示裝置100例如是頭戴式顯示器。在本實施例的近眼顯示裝置100中,由於是採用提供影像的顯示器110來作為結構光113發射源,因此相機模組130不必利用額外的光源來提供結構光113。如此一來,便能夠在不犧牲對人眼感測的準確率的情況下降低成本,且可以縮小近眼顯示裝置100的體積。
在本實施例中,近眼顯示裝置100可更包括驅動器(driver)140,用以驅動顯示器110來顯示出畫面。具體而言,在一顯示模式下,驅動器140可驅動顯示器110顯示對應於讓使用者觀看的虛像的畫面,也就是使顯示器110發出影像光束111。另一方面,在一測距模式下,驅動器140可驅動顯示器110顯示如圖2A或圖2B的畫面,也就是使顯示器110發出結構光113,以在使用者的眼睛50上形成對應於顯示器110所顯示的畫面之光圖案,而供相機模組130拍攝。當驅動器140驅動顯示器110提供結構光113或結束提供結構光113時,驅動器140用以發出一通知訊號S1至相機模組130,且相機模組130根據通知訊號S1來啟動拍照功能來拍攝結構光113所形成的光圖案,或結束拍照功能。
在本實施例中,近眼顯示裝置100更包括至少一影像處理器160,電性連接至上述至少一相機模組130,並根據相機模組130所拍攝到的光圖案計算出眼睛50的距離與位置,例如可計算出眼睛50或其瞳孔在空間中的三維座標。相機模組130的像素可用以偵測可見光或紅外光,而顯示器110則可發出可見光或紅外光,也就是說,結構光113可以是可見光或紅外光。在本實施例中,如圖3所示,是以兩個影像處理器160為例,且這兩個影像處理器160分別電性連接至對應於左眼的相機模組130a與對應於右眼的相機模組130b。在本實施例中,對應於左眼的影像處理器160的運算可得到左眼或其瞳孔在空間中的三維座標,而對應於右眼的影像處理器160的運算可得到右眼或其瞳孔在空間中的三維座標。影像處理器160例如是影像訊號處理器(image signal processor, ISP)或圖像處理器(graphics processing unit, GPU)。
在本實施例中,近眼顯示裝置100更包括一處理器190,電性連接至上述分別對應於左眼與右眼的二個影像處理器160,且根據此二個影像處理器160所提供的左眼的距離與位置及右眼的距離與位置(例如左眼或其瞳孔的三維座標與右眼或其瞳孔的三維座標)而計算出使用者的雙眼瞳距與適眼距。其中,適眼距是指眼睛50至透鏡組120的間距。根據計算出的雙眼瞳距與適眼距,處理器190便可以調整顯示器110的顯示內容,或調整透鏡組120的焦距,以產生對應於此雙眼瞳距與適眼距的適當且清晰的虛像,而產生正確且良好的影像內容。
在本實施例中,處理器190例如為中央處理單元(central processing unit, CPU)、微處理器(microprocessor)、數位訊號處理器(digital signal processor, DSP)、可程式化控制器、可程式化邏輯裝置(programmable logic device, PLD)或其他類似裝置或這些裝置的組合,本發明並不加以限制。此外,在本實施例中,處理器190的各功能可被實作為多個程式碼。這些程式碼會被儲存在一個記憶體中,由處理器190來執行這些程式碼。
在本實施例中,顯示器110依序發出多種不同的結構光113(例如依序發出對應於圖2A的畫面的結構光113與對應於圖2B的畫面的結構光113),以在眼睛50上形成多種不同的光圖案(例如對應於圖2A的畫面的光圖案與對應於圖2B的畫面的光圖案)。影像處理器160根據相機模組130所拍攝到的多種不同的光圖案計算出眼睛50的距離與位置(例如計算出眼睛或其瞳孔在空間中的三維座標)。當相機模組130依序拍攝多種不同的光圖案時,影像處理器160可更為精確地計算出眼睛50的距離與位置。然而,當對眼睛50的距離與位置的精確度的要求較不高時,顯示器110也可以只發出一種結構光113,而影像處理器160則根據相機模組130所拍攝到的一種光圖案來計算出眼睛50的距離與位置即可。
在圖2A與圖2B中,對應於兩種不同的結構光113的兩者不同的畫面是分別以兩者不同方向的條紋畫面為例,此條紋畫面可包括規則排列或等寬度的條紋,或包括不規則排列或不等寬度的條紋。此外,對應於結構光113的畫面還可以是點陣列畫面,或不規則排列的多點畫面,而畫面中多個點的大小可以是相同或不同。或者,對應於結構光113的畫面亦可以是任意適當形狀或任意適當排列的畫面,只要其便於讓影像處理器160分析出眼睛50的距離與位置即可。
綜上所述,在本發明的實施例的近眼顯示裝置中,由於是採用提供影像的顯示器來作為結構光發射源,因此相機模組不必利用額外的光源來提供結構光。如此一來,便能夠在不犧牲對人眼感測的準確率的情況下降低成本,且可以縮小近眼顯示裝置的體積。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
50:眼睛
100:近眼顯示裝置
110、110a、110b:顯示器
111:影像光束
113:結構光
120:透鏡組
130、130a、130b:相機模組
140:驅動器
160:影像處理器
190:處理器
S1:通知訊號
圖1是本發明的一實施例的近眼顯示裝置的光路示意圖。
圖2A是圖1的近眼顯示裝置的顯示器所顯示的對應於一種結構光的顯示畫面。
圖2B是圖1的近眼顯示裝置的顯示器所顯示的對應於另一種結構光的顯示畫面。
圖3是圖1的近眼顯示裝置的系統方塊圖。
50:眼睛
100:近眼顯示裝置
110:顯示器
111:影像光束
113:結構光
120:透鏡組
130:相機模組
Claims (5)
- 一種近眼顯示裝置,包括:至少一顯示器,用以發出一影像光束及一結構光;至少一透鏡組,配置於該影像光束與該結構光的傳遞路徑上,用以將該影像光束會聚於一使用者的眼睛,以使該眼睛觀察到一虛像;至少一相機模組,其中該結構光經由該透鏡組照射於該眼睛上以形成一光圖案,而該相機模組用以拍攝該光圖案,該相機模組所拍攝到的該光圖案用以分析該眼睛的距離;以及一驅動器,電性連接至該顯示器,且用以驅動該顯示器顯示影像,而提供該影像光束及該結構光,其中當該驅動器驅動該顯示器提供該結構光或結束提供該結構光時,該驅動器用以發出一通知訊號至該相機模組,且該相機模組根據該通知訊號來啟動拍照功能或結束拍照功能。
- 如申請專利範圍第1項所述的近眼顯示裝置,更包括至少一影像處理器,電性連接至該至少一相機模組,並根據該相機模組所拍攝測到的該光圖案計算出該眼睛的距離與位置。
- 如申請專利範圍第2項所述的近眼顯示裝置,其中該至少一影像處理器為影像訊號處理器或圖像處理器。
- 如申請專利範圍第2項所述的近眼顯示裝置,其中該至少一顯示器為二個顯示器,該至少一透鏡組為二個透鏡組,該至少一相機模組為二個相機模組,該二個顯示器所發出的二個結構 光分別經由該二個透鏡組而照射於該使用者的左眼與右眼以分別形成二個光圖案,該二個相機模組分別用以拍攝該二個光圖案,該至少一影像處理器為分別電性連接至該二個相機模組的二個影像處理器,該近眼顯示裝置更包括一處理器,電性連接至該二個影像處理器,且根據該二個影像處理器所提供的該左眼的距離與位置及該右眼的距離與位置而計算出該使用者的雙眼瞳距與適眼距。
- 如申請專利範圍第1項所述的近眼顯示裝置,其中該顯示器依序發出多種不同的結構光,以在該眼睛上形成多種不同的光圖案,且該近眼顯示裝置更包括至少一影像處理器,電性連接至該至少一相機模組,並根據該相機模組所拍攝到的該多種不同的光圖案計算出該眼睛的距離與位置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW108110503A TWI691735B (zh) | 2019-03-26 | 2019-03-26 | 近眼顯示裝置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW108110503A TWI691735B (zh) | 2019-03-26 | 2019-03-26 | 近眼顯示裝置 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI691735B true TWI691735B (zh) | 2020-04-21 |
TW202036081A TW202036081A (zh) | 2020-10-01 |
Family
ID=71134472
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW108110503A TWI691735B (zh) | 2019-03-26 | 2019-03-26 | 近眼顯示裝置 |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWI691735B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201314263A (zh) * | 2011-09-26 | 2013-04-01 | Microsoft Corp | 整合眼睛追蹤及顯示系統 |
WO2013103443A1 (en) * | 2012-01-06 | 2013-07-11 | Google Inc. | Structured light for eye-tracking |
CN104950445A (zh) * | 2014-03-27 | 2015-09-30 | 精工爱普生株式会社 | 虚像显示装置以及头戴式显示器 |
WO2017066556A1 (en) * | 2015-10-15 | 2017-04-20 | Osterhout Group, Inc. | Compact optical system for head-worn computer |
-
2019
- 2019-03-26 TW TW108110503A patent/TWI691735B/zh active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201314263A (zh) * | 2011-09-26 | 2013-04-01 | Microsoft Corp | 整合眼睛追蹤及顯示系統 |
WO2013103443A1 (en) * | 2012-01-06 | 2013-07-11 | Google Inc. | Structured light for eye-tracking |
CN104950445A (zh) * | 2014-03-27 | 2015-09-30 | 精工爱普生株式会社 | 虚像显示装置以及头戴式显示器 |
WO2017066556A1 (en) * | 2015-10-15 | 2017-04-20 | Osterhout Group, Inc. | Compact optical system for head-worn computer |
Also Published As
Publication number | Publication date |
---|---|
TW202036081A (zh) | 2020-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10698482B2 (en) | Gaze tracking using non-circular lights | |
TWI486631B (zh) | 頭戴式顯示裝置及其控制方法 | |
CN107735719B (zh) | 偏振分束系统 | |
TWI545347B (zh) | Adjustable head-mounted display for visual distance | |
US10854583B1 (en) | Foveated rendering display devices and methods of making the same | |
US10684674B2 (en) | Tracking portions of a user's face uncovered by a head mounted display worn by the user | |
US11360315B2 (en) | Augmented reality eyeglasses having structured light detecting function | |
US10592739B2 (en) | Gaze-tracking system and method of tracking user's gaze | |
US10528128B1 (en) | Head-mounted display devices with transparent display panels for eye tracking | |
US9946343B2 (en) | Motion tracker with an array of distinct light sources | |
US11747523B1 (en) | Dynamic dot array illuminators | |
US11626390B1 (en) | Display devices and methods of making the same | |
US10248842B1 (en) | Face tracking using structured light within a head-mounted display | |
CN115280218A (zh) | 高分辨率液晶显示器 | |
JP7539187B2 (ja) | 拡張現実用画像の映像補正装置 | |
US11747626B1 (en) | Display system with extended display area | |
JP7046347B2 (ja) | 画像処理装置及び画像処理方法 | |
US10511832B1 (en) | Calibration of virtual image system with extended nasal field of view | |
JP5170072B2 (ja) | 頭部装着型表示装置 | |
US20180267601A1 (en) | Light Projection for Guiding a User within a Physical User Area During Virtual Reality Operations | |
TWI691735B (zh) | 近眼顯示裝置 | |
US11924536B2 (en) | Augmented reality device including variable focus lenses and operating method thereof | |
TWI691738B (zh) | 近眼顯示裝置 | |
TWI669537B (zh) | 顯示裝置 | |
TWI661231B (zh) | 頭戴式顯示裝置 |