JP7273720B2 - 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム - Google Patents
光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム Download PDFInfo
- Publication number
- JP7273720B2 JP7273720B2 JP2019551616A JP2019551616A JP7273720B2 JP 7273720 B2 JP7273720 B2 JP 7273720B2 JP 2019551616 A JP2019551616 A JP 2019551616A JP 2019551616 A JP2019551616 A JP 2019551616A JP 7273720 B2 JP7273720 B2 JP 7273720B2
- Authority
- JP
- Japan
- Prior art keywords
- eye
- image frame
- eyepiece
- light
- reflected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003287 optical effect Effects 0.000 title claims description 151
- 238000000034 method Methods 0.000 title claims description 128
- 230000004424 eye movement Effects 0.000 title description 12
- 239000000835 fiber Substances 0.000 claims description 81
- 238000012512 characterization method Methods 0.000 claims description 39
- 238000010168 coupling process Methods 0.000 claims description 34
- 238000005859 coupling reaction Methods 0.000 claims description 34
- 230000008878 coupling Effects 0.000 claims description 33
- 239000011521 glass Substances 0.000 claims description 8
- 210000001747 pupil Anatomy 0.000 claims description 7
- 230000000875 corresponding effect Effects 0.000 description 23
- 230000006870 function Effects 0.000 description 23
- 210000004087 cornea Anatomy 0.000 description 17
- 238000010586 diagram Methods 0.000 description 14
- 238000012986 modification Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 14
- 210000001525 retina Anatomy 0.000 description 14
- 239000003086 colorant Substances 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 8
- 239000013307 optical fiber Substances 0.000 description 8
- 230000002596 correlated effect Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 4
- 230000001902 propagating effect Effects 0.000 description 4
- 230000005855 radiation Effects 0.000 description 4
- 230000003595 spectral effect Effects 0.000 description 4
- 206010034962 Photopsia Diseases 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 230000010355 oscillation Effects 0.000 description 3
- 229910000065 phosphene Inorganic materials 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005253 cladding Methods 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000002329 infrared spectrum Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0081—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for altering, e.g. enlarging, the entrance or exit pupil
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/10—Scanning systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/28—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B6/00—Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
- G02B6/24—Coupling light guides
- G02B6/26—Optical coupling means
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/02—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes by tracing or scanning a light beam on a screen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/334—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spectral multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/64—Constructional details of receivers, e.g. cabinets or dust covers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
- G02C11/10—Electronic devices other than hearing aids
Landscapes
- Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Eye Examination Apparatus (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Diffracting Gratings Or Hologram Optical Elements (AREA)
- Mechanical Optical Scanning Systems (AREA)
- Mechanical Light Control Or Optical Switches (AREA)
Description
本願は、2017年3月21日に出願され”Method and System for Tracking Eye Movement in Conjunction with a Fiber Scanning Projector”と題された米国仮特許出願第62/474,497号に対する優先権を主張するものであり、該米国仮特許出願の開示は、あらゆる目的のためにその全体が本明細書中に援用される。
本願明細書は、例えば、以下の項目も提供する。
(項目1)
眼追跡システムであって、
光走査プロジェクタと、
前記光走査プロジェクタに光学的に結合される接眼レンズと、
光学センサと、
前記光走査プロジェクタおよび前記光学センサに結合されるプロセッサと
を備える、眼追跡システム。
(項目2)
前記光走査プロジェクタは、走査点光源を備える、項目1に記載の眼追跡システム。
(項目3)
前記光走査プロジェクタは、走査導波管プロジェクタを備える、項目2に記載の眼追跡システム。
(項目4)
前記走査導波管プロジェクタは、ファイバ走査プロジェクタを備える、項目3に記載の眼追跡システム。
(項目5)
フレームを有する眼鏡をさらに備え、前記光走査プロジェクタ、前記接眼レンズ、および前記光学センサは、前記フレーム内に搭載される、項目1に記載の眼追跡システム。
(項目6)
前記接眼レンズは、複数の平面導波管を備える、項目1に記載の眼追跡システム。
(項目7)
前記複数の平面導波管は、4つの平面導波管を備える、項目6に記載の眼追跡システム。
(項目8)
前記光学センサは、光検出器を備える、項目1に記載の眼追跡システム。
(項目9)
前記光走査プロジェクタは、表示信号および特性評価信号を出力するように動作可能である、項目1に記載の眼追跡システム。
(項目10)
前記表示信号は、1つ以上の可視波長を含み、前記特性評価信号は、1つ以上の不可視波長を含む、項目9に記載の眼追跡システム。
(項目11)
前記1つ以上の可視波長は、赤色、緑色、および青色波長を含み、前記1つ以上の不可視波長は、赤外波長を含む、項目10に記載の眼追跡システム。
(項目12)
前記接眼レンズは、複数の平面導波管を備え、
前記複数の平面導波管は、
赤色波長に対応する第1の平面導波管と、
緑色波長に対応する第2の平面導波管と、
青色波長に対応する第3の平面導波管と、
赤外波長に対応する第4の平面導波管と
を含む、項目11に記載の眼追跡システム。
(項目13)
光走査プロジェクタと、接眼レンズと、光学センサとを含む、眼追跡システムを動作させる方法であって、前記方法は、
前記光走査プロジェクタを使用して、光学信号を生成することと、
前記光学信号の少なくとも一部を前記接眼レンズの中に結合することと、
前記接眼レンズから、ユーザの眼によって視認可能な画像を投影することと、
前記光学センサを使用して、前記ユーザの眼から反射された光を検出することと、
前記ユーザの眼の位置を追跡することと
を含む、方法。
(項目14)
前記光走査プロジェクタは、ファイバ走査プロジェクタを備える、項目13に記載の方法。
(項目15)
前記光学信号は、表示信号と、特性評価信号とを含む、項目13に記載の方法。
(項目16)
前記表示信号は、1つ以上の可視波長を含み、前記特性評価信号は、1つ以上の不可視波長を含む、項目15に記載の方法。
(項目17)
前記1つ以上の可視波長は、赤色、緑色、および青色波長を含み、前記1つ以上の不可視波長は、赤外波長を含む、項目16に記載の方法。
(項目18)
前記接眼レンズは、複数の平面導波管を備える、項目13に記載の方法。
(項目19)
前記複数の平面導波管は、4つの平面導波管を備える、項目18に記載の方法。
(項目20)
前記光学センサは、光検出器を備える、項目13に記載の方法。
(項目21)
前記ユーザの眼の位置を追跡することは、前記画像の一連のピクセルの位置を前記ユーザの眼から反射された前記光の一連の強度と相関させることを含む、項目13に記載の方法。
(項目22)
第1の配向から第2の配向への眼移動を追跡する方法であって、前記方法は、
ビデオ画像の第1の画像フレームを形成するために、光走査プロジェクタの出力ビームを走査することであって、第1の一連のピクセルが、前記第1の画像フレームを定義する、ことと、
前記第1の画像フレームを複数の平面導波管を含む接眼レンズの中に結合することと、
前記第1の画像フレームの少なくとも一部をユーザの眼に透過することと、
第1の一連の反射強度を検出することであって、前記第1の一連のものはそれぞれ、前記第1の一連のピクセルのうちのピクセルと関連付けられる、ことと、
前記第1の一連の反射強度を前記第1の一連のピクセルと相関させることと、
前記眼の第1の配向を決定することと、
前記ビデオ画像の第2の画像フレームを形成するために、前記出力ビームを走査することであって、第2の一連のピクセルが、前記第2の画像フレームを定義する、ことと、
前記第2の画像フレームを前記接眼レンズの中に結合することと、
前記第2の画像フレームの少なくとも一部を前記ユーザの眼に透過することと、
第2の一連の反射強度を検出することであって、前記第2の一連のものはそれぞれ、前記第2の一連のピクセルのうちのピクセルと関連付けられる、ことと、
前記第2の一連の反射強度を前記第2の一連のピクセルと相関させることと、
前記眼の第2の配向を決定することと
を含む、方法。
(項目23)
前記第1の配向および前記第2の配向に関連する軌道を出力することをさらに含む、項目22に記載の方法。
(項目24)
前記複数の平面導波管は、
赤色波長に対応する第1の平面導波管と、
緑色波長に対応する第2の平面導波管と、
青色波長に対応する第3の平面導波管と、
赤外波長に対応する第4の平面導波管と
を含む、項目22に記載の方法。
(項目25)
前記第1の画像フレームおよび前記第2の画像フレームは、前記ビデオ画像の連続フレームである、項目22に記載の方法。
(項目26)
1つ以上の付加的画像フレームが、前記第1の画像フレームと前記第2の画像フレームとの間に位置付けられる、項目22に記載の方法。
(項目27)
前記第1の画像フレームを前記接眼レンズの中に結合することおよび前記第2の画像フレームを前記接眼レンズの中に結合することは、回折光学要素を使用して、前記第1の画像フレームおよび前記第2の画像フレームを回折することを含む、項目22に記載の方法。
(項目28)
前記第1の画像フレームの少なくとも一部を前記ユーザの眼に透過することおよび前記第2の画像フレームの少なくとも一部を前記ユーザの眼に透過することは、1つ以上の回折光学要素を使用して、前記第1の画像フレームの少なくとも一部および前記第2の画像フレームの少なくとも一部を回折することを含む、項目22に記載の方法。
(項目29)
前記1つ以上の回折光学要素は、前記接眼レンズの平面内で光を回折するように動作可能な第1の回折光学要素と、前記接眼レンズの平面から光を回折するように動作可能な第2の回折光学要素とを備える、項目28に記載の方法。
(項目30)
眼配向を特性評価する方法であって、前記方法は、
ビデオ画像の画像フレームの第1の部分を形成するために、ファイバ走査プロジェクタのファイバを走査することであって、第1の一連のピクセルが、前記画像フレームの第1の部分を定義する、ことと、
前記画像フレームの第1の部分を複数の平面導波管を含む接眼レンズの中に結合することと、
前記画像フレームの第1の部分の少なくとも一部をユーザの眼に透過することと、
複数の光学検出器のそれぞれにおいて、時間的反射信号を検出することと、
前記複数の時間的反射信号を前記第1の一連のピクセルと相関させることと、
前記ビデオ画像の画像フレームの第2の部分を形成するために、前記ファイバを走査することであって、第2の一連のピクセルが、前記画像フレームの第2の部分を定義する、ことと、
前記画像フレームの第2の部分を前記接眼レンズの中に結合することと、
前記画像フレームの第2の部分の少なくとも一部を前記ユーザの眼に透過することと、
前記複数の光学検出器のそれぞれにおいて、第2の時間的反射信号を検出することと、
前記複数の第2の時間的反射信号を前記第2の一連のピクセルと相関させることと、
前記眼配向を決定することと
を含む、方法。
(項目31)
前記複数の光学検出器は、複数の光検出器を備える、項目30に記載の方法。
(項目32)
前記複数の光検出器は、前記眼の周辺領域の周囲に整列される、項目31に記載の方法。
(項目33)
前記接眼レンズは、周辺を有するフレーム内に搭載される、項目31に記載の方法。
(項目34)
前記複数の光検出器は、前記フレームの周辺に配置される、項目33に記載の方法。
(項目35)
前記複数の光検出器は、前記フレームに結合されるテンプル内に配置される、項目33に記載の方法。
(項目36)
前記複数の平面導波管は、
赤色波長に対応する第1の平面導波管と、
緑色波長に対応する第2の平面導波管と、
青色波長に対応する第3の平面導波管と、
赤外波長に対応する第4の平面導波管と
を含む、項目30に記載の方法。
(項目37)
眼追跡システムであって、
2つのフレームを含む眼鏡と、
前記眼鏡に結合され、光のビームを走査するように動作可能である光走査プロジェクタと、
前記2つのフレームのうちの1つの中に搭載され、前記光走査プロジェクタに光学的に結合される接眼レンズであって、前記接眼レンズは、前記光のビームの少なくとも一部をユーザの眼に向かって指向するように動作可能な射出瞳エキスパンダを含む、接眼レンズと、
前記眼鏡に結合される1つ以上の光検出器と、
前記光走査プロジェクタおよび前記1つ以上の光検出器に結合されるプロセッサと
を備える、眼追跡システム。
(項目38)
前記光走査プロジェクタは、ファイバ走査プロジェクタを備える、項目37に記載の眼追跡システム。
(項目39)
前記眼鏡は、テンプルを含み、前記光走査プロジェクタは、前記2つのフレームのうちの1つの中に搭載され、前記1つ以上の光検出器は、前記テンプル内に搭載される、項目37に記載の眼追跡システム。
(項目40)
前記1つ以上の光検出器は、前記接眼レンズと前記ユーザの眼との間の縦方向位置において前記テンプル内に搭載される、項目39に記載の眼追跡システム。
(項目41)
前記接眼レンズは、複数の平面導波管を備える、項目37に記載の眼追跡システム。
(項目42)
前記光走査プロジェクタは、表示信号および特性評価信号を出力するように動作可能である、項目37に記載の眼追跡システム。
(項目43)
前記表示信号は、1つ以上の可視波長を含み、前記特性評価信号は、1つ以上の不可視波長を含む、項目42に記載の眼追跡システム。
(項目44)
眼追跡を実施する方法であって、前記方法は、
光走査プロジェクタ、フレーム内に搭載される接眼レンズ、および前記フレームの周辺の周囲に整列される1つ以上の光学検出器を提供することと、
前記光走査プロジェクタおよび前記接眼レンズを使用して、第1の画像フレームを眼に投影することと、
前記1つ以上の光学検出器を使用して、複数の時変反射信号を検出することと、
第1の眼配向を決定することと、
前記光走査プロジェクタおよび前記接眼レンズを使用して、第2の画像フレームを前記眼に投影することと、
前記1つ以上の光学検出器を使用して、第2の複数の時変反射信号を検出することと、
第2の眼配向を決定することと
を含む、方法。
(項目45)
前記1つ以上の光学検出器は、前記接眼レンズと前記眼との間の縦方向位置に配置される、項目44に記載の方法。
(項目46)
前記1つ以上の光学検出器は、前記フレームに機械的に結合されるテンプル内に搭載される、項目45に記載の方法。
(項目47)
前記第1の眼配向および前記第2の眼配向に関連する軌道を出力することをさらに含む、項目44に記載の方法。
(項目48)
前記複数の時変反射信号は、前記第1の画像フレームの間の前記光走査プロジェクタの増加する走査角度と関連付けられる、項目44に記載の方法。
(項目49)
前記第2の複数の時変反射信号は、前記第2の画像フレームの間の前記光走査プロジェクタの増加する走査角度と関連付けられる、項目44に記載の方法。
(項目50)
前記接眼レンズは、複数の平面導波管を含む、項目44に記載の方法。
(項目51)
前記第1の画像フレームを前記眼に投影することは、
前記第1の画像フレームの一部を前記複数の平面導波管のそれぞれの中に結合することと、
前記結合された部分の少なくとも一部を前記眼に透過することと
を含む、項目50に記載の方法。
(項目52)
前記第2の画像フレームを前記眼に投影することは、
前記第2の画像フレームの一部を前記複数の平面導波管のそれぞれの中に結合することと、
前記結合された部分の少なくとも一部を前記眼に透過することと
を含む、項目50に記載の方法。
(項目53)
前記第1の画像フレームおよび前記第2の画像フレームは、ビデオ画像の連続フレームである、項目44に記載の方法。
(項目54)
1つ以上の付加的画像フレームが、前記第1の画像フレームと前記第2の画像フレームとの間に位置付けられる、項目44に記載の方法。
Claims (18)
- 眼追跡システムであって、
2つのフレームを含む眼鏡と、
前記眼鏡に結合され、光のビームを走査して複数のピクセルを含む画像フレームを投影するように動作可能である光走査プロジェクタであって、前記複数のピクセルのそれぞれは、前記画像フレーム内のピクセル位置と関連付けられる、光走査プロジェクタと、
前記2つのフレームのうちの1つの中に搭載され、前記光走査プロジェクタに光学的に結合される接眼レンズであって、前記接眼レンズは、前記光のビームの少なくとも一部をユーザの眼に向かって指向するように動作可能な射出瞳エキスパンダを含む、接眼レンズと、
前記眼鏡に結合され、1つ以上の時変反射信号を検出するように動作可能である1つ以上の光検出器であって、前記1つ以上の時変反射信号のそれぞれは、前記画像フレームの前記複数のピクセルと関連付けられ、一連の反射強度を含む、1つ以上の光検出器と、
前記光走査プロジェクタおよび前記1つ以上の光検出器に結合されるプロセッサと
を備え、
前記プロセッサは、前記1つ以上の時変反射信号のそれぞれの前記一連の反射強度の中の前記反射強度を前記複数のピクセルのそれぞれの前記ピクセル位置と相関させることにより、前記複数のピクセルのそれぞれの前記ピクセル位置と前記1つ以上の時変反射信号のそれぞれの前記一連の反射強度の中の前記反射強度との間の空間マップを形成し、第1の眼配向を決定するように動作可能である、眼追跡システム。 - 前記光走査プロジェクタは、ファイバ走査プロジェクタを備える、請求項1に記載の眼追跡システム。
- 前記眼鏡は、テンプルを含み、前記光走査プロジェクタは、前記2つのフレームのうちの前記1つの中に搭載され、前記1つ以上の光検出器は、前記テンプル内に搭載される、請求項1に記載の眼追跡システム。
- 前記1つ以上の光検出器は、前記接眼レンズと前記ユーザの眼との間の縦方向位置において前記テンプル内に搭載される、請求項3に記載の眼追跡システム。
- 前記接眼レンズは、複数の平面導波管を備える、請求項1に記載の眼追跡システム。
- 前記光走査プロジェクタは、表示信号および特性評価信号を出力するように動作可能である、請求項1に記載の眼追跡システム。
- 前記表示信号は、1つ以上の可視波長を含み、前記特性評価信号は、1つ以上の不可視波長を含む、請求項6に記載の眼追跡システム。
- 眼追跡を実施する方法であって、前記方法は、
光走査プロジェクタ、フレーム内に搭載される接眼レンズ、および前記フレームの周辺の周囲に位置付けられる1つ以上の光学検出器を提供することと、
前記光走査プロジェクタおよび前記接眼レンズを使用して、第1の複数のピクセルを含む第1の画像フレームを眼に投影することであって、前記第1の複数のピクセルのそれぞれは、前記第1の画像フレーム内のピクセル位置と関連付けられる、ことと、
前記1つ以上の光学検出器を使用して、1つ以上の時変反射信号のセットを検出することであって、前記セットにおける前記1つ以上の時変反射信号のそれぞれは、前記第1の画像フレームの前記第1の複数のピクセルと関連付けられ、一連の第1の反射強度を含む、ことと、
前記セットにおける前記1つ以上の時変反射信号のそれぞれの前記一連の第1の反射強度の中の前記第1の反射強度を前記第1の複数のピクセルのそれぞれの前記ピクセル位置と相関させることにより、前記第1の複数のピクセルのそれぞれの前記ピクセル位置と前記1つ以上の時変反射信号のそれぞれの前記一連の第1の反射強度の中の前記第1の反射強度との間の第1の空間マップを形成することと、
第1の眼配向を決定することと、
前記光走査プロジェクタおよび前記接眼レンズを使用して、第2の複数のピクセルを含む第2の画像フレームを前記眼に投影することであって、前記第2の複数のピクセルのそれぞれは、前記第2の画像フレーム内のピクセル位置と関連付けられる、ことと、
前記1つ以上の光学検出器を使用して、1つ以上の時変反射信号の第2のセットを検出することであって、前記第2のセットにおける前記1つ以上の時変反射信号のそれぞれは、前記第2の画像フレームの前記第2の複数のピクセルと関連付けられ、一連の第2の反射強度を含む、ことと、
前記第2のセットにおける前記1つ以上の時変反射信号のそれぞれの前記一連の第2の反射強度の中の前記第2の反射強度を前記第2の複数のピクセルのそれぞれの前記ピクセル位置と相関させることにより、前記第2の複数のピクセルのそれぞれの前記ピクセル位置と前記1つ以上の時変反射信号の第2のセットのそれぞれの前記一連の第2の反射強度の中の前記第2の反射強度との間の第2の空間マップを形成することと、
第2の眼配向を決定することと
を含む、方法。 - 前記1つ以上の光学検出器は、前記接眼レンズと前記眼との間の縦方向位置に配置される、請求項8に記載の方法。
- 前記1つ以上の光学検出器は、前記フレームに機械的に結合されるテンプル内に搭載される、請求項9に記載の方法。
- 前記第1の眼配向および前記第2の眼配向に関連する軌道を出力することをさらに含む、請求項8に記載の方法。
- 前記1つ以上の時変反射信号のセットは、前記第1の画像フレームの間の前記光走査プロジェクタの増加する走査角度と関連付けられる、請求項8に記載の方法。
- 前記1つ以上の時変反射信号の第2のセットは、前記第2の画像フレームの間の前記光走査プロジェクタの増加する走査角度と関連付けられる、請求項8に記載の方法。
- 前記接眼レンズは、複数の平面導波管を含む、請求項8に記載の方法。
- 前記第1の画像フレームを前記眼に投影することは、
前記第1の画像フレームの部分を前記複数の平面導波管のそれぞれの中に結合することと、
前記結合された部分の少なくとも一部を前記眼に透過することと
を含む、請求項14に記載の方法。 - 前記第2の画像フレームを前記眼に投影することは、
前記第2の画像フレームの部分を前記複数の平面導波管のそれぞれの中に結合することと、
前記結合された部分の少なくとも一部を前記眼に透過することと
を含む、請求項14に記載の方法。 - 前記第1の画像フレームおよび前記第2の画像フレームは、ビデオ画像の連続フレームである、請求項8に記載の方法。
- 1つ以上の付加的画像フレームが、前記第1の画像フレームと前記第2の画像フレームとの間に位置付けられる、請求項8に記載の方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023074415A JP2023101505A (ja) | 2017-03-21 | 2023-04-28 | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762474497P | 2017-03-21 | 2017-03-21 | |
US62/474,497 | 2017-03-21 | ||
PCT/US2018/023512 WO2018175548A1 (en) | 2017-03-21 | 2018-03-21 | Method and system for tracking eye movement in conjunction with a light scanning projector |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023074415A Division JP2023101505A (ja) | 2017-03-21 | 2023-04-28 | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020514831A JP2020514831A (ja) | 2020-05-21 |
JP2020514831A5 JP2020514831A5 (ja) | 2021-04-30 |
JP7273720B2 true JP7273720B2 (ja) | 2023-05-15 |
Family
ID=63583782
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019551616A Active JP7273720B2 (ja) | 2017-03-21 | 2018-03-21 | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム |
JP2023074415A Pending JP2023101505A (ja) | 2017-03-21 | 2023-04-28 | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023074415A Pending JP2023101505A (ja) | 2017-03-21 | 2023-04-28 | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム |
Country Status (9)
Country | Link |
---|---|
US (4) | US10715794B2 (ja) |
EP (2) | EP3602178B1 (ja) |
JP (2) | JP7273720B2 (ja) |
KR (2) | KR102594058B1 (ja) |
CN (2) | CN110446965B (ja) |
AU (1) | AU2018239359A1 (ja) |
CA (1) | CA3056657A1 (ja) |
IL (2) | IL301719A (ja) |
WO (1) | WO2018175548A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2018239359A1 (en) * | 2017-03-21 | 2019-10-03 | Magic Leap, Inc. | Method and system for tracking eye movement in conjunction with a light scanning projector |
US10698204B1 (en) * | 2017-10-16 | 2020-06-30 | Facebook Technologies, Llc | Immersed hot mirrors for illumination in eye tracking |
JP2020071429A (ja) * | 2018-11-01 | 2020-05-07 | セイコーエプソン株式会社 | 表示装置 |
US10886702B2 (en) * | 2018-11-09 | 2021-01-05 | Facebook Technologies, Llc | Vertical-cavity surface-emitting laser for near-field illumination of an eye |
US11435584B2 (en) * | 2019-03-13 | 2022-09-06 | Hong Kong Applied Science And Technology Research Institute Co., Ltd. | Large field of view see through head mounted display having magnified curved intermediate image |
JP7163230B2 (ja) * | 2019-03-25 | 2022-10-31 | 株式会社日立製作所 | 視線検出装置、視線検出方法、及び表示装置 |
CN112130321B (zh) * | 2019-06-24 | 2023-06-27 | 成都理想境界科技有限公司 | 一种波导模组及基于波导的近眼显示模组及设备 |
US11120258B1 (en) * | 2019-07-18 | 2021-09-14 | Facebook Technologies, Llc | Apparatuses, systems, and methods for scanning an eye via a folding mirror |
EP4066044A4 (en) * | 2019-11-26 | 2023-12-27 | Magic Leap, Inc. | ENHANCED EYE TRACKING FOR AUGMENTED OR VIRTUAL REALITY DISPLAY SYSTEMS |
CN110989166A (zh) | 2019-12-25 | 2020-04-10 | 歌尔股份有限公司 | 一种近眼显示设备的眼球追踪系统及近眼显示设备 |
IL294102A (en) * | 2019-12-25 | 2022-08-01 | Lumus Ltd | Optical systems and methods for tracking eyes based on directing light from the eye through an optical arrangement associated with a light-directing optical element |
WO2021157204A1 (ja) * | 2020-02-04 | 2021-08-12 | ソニーグループ株式会社 | 映像追従情報検出装置、映像追従装置、映像追従情報検出方法及び映像追従方法 |
US11998275B2 (en) | 2020-07-15 | 2024-06-04 | Magic Leap, Inc. | Eye tracking using aspheric cornea model |
JPWO2022196650A1 (ja) * | 2021-03-15 | 2022-09-22 | ||
US11669159B2 (en) * | 2021-03-22 | 2023-06-06 | Microsoft Technology Licensing, Llc | Eye tracker illumination through a waveguide |
WO2023215112A1 (en) * | 2022-05-04 | 2023-11-09 | Apple Inc. | Retinal reflection tracking for gaze alignment |
US11892638B2 (en) | 2022-06-03 | 2024-02-06 | Meta Platforms Technologies, Llc | Scanning near-eye imaging and sensing system |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090268045A1 (en) | 2007-08-02 | 2009-10-29 | Sudipto Sur | Apparatus and methods for configuration and optimization of image sensors for gaze tracking applications |
CN103793045A (zh) | 2012-10-31 | 2014-05-14 | 原相科技股份有限公司 | 瞳孔追踪装置 |
WO2015008654A1 (ja) | 2013-07-19 | 2015-01-22 | ソニー株式会社 | 検出装置および方法 |
US20160349516A1 (en) | 2015-05-28 | 2016-12-01 | Thalmic Labs Inc. | Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays |
Family Cites Families (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5309272A (en) | 1992-12-11 | 1994-05-03 | Xerox Corporation | Dual pass binary diffractive optical element scanner |
US5416876A (en) * | 1994-01-28 | 1995-05-16 | Hughes Training, Inc. | Fiber optic ribbon subminiature display for head/helmet mounted display |
US5727098A (en) | 1994-09-07 | 1998-03-10 | Jacobson; Joseph M. | Oscillating fiber optic display and imager |
US5694230A (en) | 1995-06-07 | 1997-12-02 | Digital Optics Corp. | Diffractive optical elements as combiners |
JP4372891B2 (ja) * | 1999-06-22 | 2009-11-25 | オリンパス株式会社 | 映像表示装置 |
US6307995B1 (en) * | 2000-04-05 | 2001-10-23 | James T. Veligdan | Planar optical waveguides for optical panel having gradient refractive index core |
JP4772204B2 (ja) * | 2001-04-13 | 2011-09-14 | オリンパス株式会社 | 観察光学系 |
DE10196499D2 (de) * | 2001-05-22 | 2004-07-01 | Physoptics Opto Electronic Gmb | Verfahren und Vorrichtung zur Anpassung eines optischen Systems an die Blickrichtung des menschlichen Auges |
US7197165B2 (en) | 2002-02-04 | 2007-03-27 | Canon Kabushiki Kaisha | Eye tracking using image data |
US7110180B2 (en) | 2002-10-09 | 2006-09-19 | Ricoh Company, Ltd. | Diffraction grating, method of fabricating diffraction optical element, optical pickup device, and optical disk drive |
US7145722B2 (en) | 2003-04-24 | 2006-12-05 | Banpil Photonics, Inc. | Optical filter and method of manufacturing thereof |
US7206107B2 (en) | 2004-12-13 | 2007-04-17 | Nokia Corporation | Method and system for beam expansion in a display device |
EP1932051A1 (en) | 2005-09-14 | 2008-06-18 | Mirage Innovations Ltd. | Diffraction grating with a spatially varying duty-cycle |
US7817176B2 (en) | 2005-12-26 | 2010-10-19 | Ricoh Company, Ltd. | Light source device, optical scanning device, and image forming apparatus |
US20100149073A1 (en) * | 2008-11-02 | 2010-06-17 | David Chaum | Near to Eye Display System and Appliance |
US8248178B2 (en) | 2009-12-03 | 2012-08-21 | The Aerospace Corporation | High power waveguide polarizer with broad bandwidth and low loss, and methods of making and using same |
US8467643B2 (en) | 2010-08-13 | 2013-06-18 | Toyota Motor Engineering & Mfg. North America, Inc. | Optical device using double-groove grating |
US20120057235A1 (en) | 2010-09-03 | 2012-03-08 | Massachusetts Institute Of Technology | Method for Antireflection in Binary and Multi-Level Diffractive Elements |
US8998414B2 (en) | 2011-09-26 | 2015-04-07 | Microsoft Technology Licensing, Llc | Integrated eye tracking and display system |
US9297996B2 (en) * | 2012-02-15 | 2016-03-29 | Microsoft Technology Licensing, Llc | Laser illumination scanning |
US8736963B2 (en) * | 2012-03-21 | 2014-05-27 | Microsoft Corporation | Two-dimensional exit-pupil expansion |
US9456744B2 (en) * | 2012-05-11 | 2016-10-04 | Digilens, Inc. | Apparatus for eye tracking |
US9671566B2 (en) * | 2012-06-11 | 2017-06-06 | Magic Leap, Inc. | Planar waveguide apparatus with diffraction element(s) and system employing same |
US10629003B2 (en) * | 2013-03-11 | 2020-04-21 | Magic Leap, Inc. | System and method for augmented and virtual reality |
US9040923B2 (en) * | 2012-09-04 | 2015-05-26 | Innovega, Inc. | Eye tracking system and related methods |
US9418480B2 (en) | 2012-10-02 | 2016-08-16 | Augmented Reailty Lab LLC | Systems and methods for 3D pose estimation |
JP6057743B2 (ja) * | 2013-01-29 | 2017-01-11 | オリンパス株式会社 | 光走査装置 |
US9737209B2 (en) * | 2013-05-15 | 2017-08-22 | The Johns Hopkins University | Eye tracking and gaze fixation detection systems, components and methods using polarized light |
US10262462B2 (en) * | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
EP4220999A3 (en) * | 2013-11-27 | 2023-08-09 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
US10191279B2 (en) * | 2014-03-17 | 2019-01-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
JP6270674B2 (ja) * | 2014-02-27 | 2018-01-31 | シチズン時計株式会社 | 投影装置 |
US9389424B1 (en) * | 2014-04-02 | 2016-07-12 | Magic Leap, Inc. | Methods and systems for implementing a high resolution color micro-display |
US9477079B2 (en) * | 2014-06-25 | 2016-10-25 | Thalmic Labs Inc. | Systems, devices, and methods for wearable heads-up displays |
US9513480B2 (en) | 2015-02-09 | 2016-12-06 | Microsoft Technology Licensing, Llc | Waveguide |
US20160231567A1 (en) | 2015-02-09 | 2016-08-11 | Pasi Saarikko | Display System |
EP3062142B1 (en) * | 2015-02-26 | 2018-10-03 | Nokia Technologies OY | Apparatus for a near-eye display |
EP3359999A1 (en) * | 2015-10-05 | 2018-08-15 | Popovich, Milan Momcilo | Waveguide display |
US10983340B2 (en) * | 2016-02-04 | 2021-04-20 | Digilens Inc. | Holographic waveguide optical tracker |
US10067344B2 (en) * | 2016-07-01 | 2018-09-04 | Intel Corporation | Variable transmissivity virtual image projection system |
JP6993405B2 (ja) | 2016-08-22 | 2022-01-13 | マジック リープ, インコーポレイテッド | ウェアラブルディスプレイデバイスのためのディザリング方法および装置 |
AU2017348084B2 (en) | 2016-10-26 | 2021-08-19 | Magic Leap, Inc. | Outcoupling grating for augmented reality system |
AU2018239359A1 (en) | 2017-03-21 | 2019-10-03 | Magic Leap, Inc. | Method and system for tracking eye movement in conjunction with a light scanning projector |
-
2018
- 2018-03-21 AU AU2018239359A patent/AU2018239359A1/en not_active Abandoned
- 2018-03-21 CN CN201880019662.XA patent/CN110446965B/zh active Active
- 2018-03-21 WO PCT/US2018/023512 patent/WO2018175548A1/en unknown
- 2018-03-21 US US15/927,855 patent/US10715794B2/en active Active
- 2018-03-21 CA CA3056657A patent/CA3056657A1/en active Pending
- 2018-03-21 JP JP2019551616A patent/JP7273720B2/ja active Active
- 2018-03-21 CN CN202210423224.8A patent/CN114755824A/zh active Pending
- 2018-03-21 KR KR1020197030310A patent/KR102594058B1/ko active IP Right Grant
- 2018-03-21 IL IL301719A patent/IL301719A/en unknown
- 2018-03-21 IL IL269101A patent/IL269101B2/en unknown
- 2018-03-21 EP EP18772388.7A patent/EP3602178B1/en active Active
- 2018-03-21 EP EP23171485.8A patent/EP4235258A3/en active Pending
- 2018-03-21 KR KR1020237035884A patent/KR20230151053A/ko not_active Application Discontinuation
-
2020
- 2020-06-03 US US16/892,184 patent/US11025897B2/en active Active
-
2021
- 2021-05-03 US US17/306,732 patent/US11838496B2/en active Active
-
2023
- 2023-04-28 JP JP2023074415A patent/JP2023101505A/ja active Pending
- 2023-10-24 US US18/383,417 patent/US20240146897A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090268045A1 (en) | 2007-08-02 | 2009-10-29 | Sudipto Sur | Apparatus and methods for configuration and optimization of image sensors for gaze tracking applications |
CN103793045A (zh) | 2012-10-31 | 2014-05-14 | 原相科技股份有限公司 | 瞳孔追踪装置 |
WO2015008654A1 (ja) | 2013-07-19 | 2015-01-22 | ソニー株式会社 | 検出装置および方法 |
US20160349516A1 (en) | 2015-05-28 | 2016-12-01 | Thalmic Labs Inc. | Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays |
Also Published As
Publication number | Publication date |
---|---|
EP3602178B1 (en) | 2023-05-10 |
US20200366887A1 (en) | 2020-11-19 |
JP2020514831A (ja) | 2020-05-21 |
AU2018239359A1 (en) | 2019-10-03 |
US20210344897A1 (en) | 2021-11-04 |
KR20190126880A (ko) | 2019-11-12 |
CN110446965A (zh) | 2019-11-12 |
IL269101B1 (en) | 2023-05-01 |
US11838496B2 (en) | 2023-12-05 |
US20180278924A1 (en) | 2018-09-27 |
EP3602178A4 (en) | 2020-04-08 |
KR102594058B1 (ko) | 2023-10-24 |
IL269101A (en) | 2019-11-28 |
CN114755824A (zh) | 2022-07-15 |
EP4235258A2 (en) | 2023-08-30 |
EP4235258A3 (en) | 2023-09-27 |
KR20230151053A (ko) | 2023-10-31 |
WO2018175548A1 (en) | 2018-09-27 |
CN110446965B (zh) | 2022-05-03 |
JP2023101505A (ja) | 2023-07-21 |
IL301719A (en) | 2023-05-01 |
US11025897B2 (en) | 2021-06-01 |
EP3602178A1 (en) | 2020-02-05 |
US10715794B2 (en) | 2020-07-14 |
CA3056657A1 (en) | 2018-09-27 |
US20240146897A1 (en) | 2024-05-02 |
IL269101B2 (en) | 2023-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7273720B2 (ja) | 光走査プロジェクタと連動した眼移動の追跡のための方法およびシステム | |
US11209659B2 (en) | Augmented reality head-mounted display with beam shifter for pupil steering | |
CA2863754C (en) | Image generation systems and image generation methods | |
US20220357583A1 (en) | Optical Systems and Methods for Eye Tracking Based on Redirecting Light from Eye Using an Optical Arrangement Associated with a Light-Guide Optical Element | |
CN117043658A (zh) | 通过波导的眼睛跟踪器照明 | |
CN109983393A (zh) | 平铺波导显示器 | |
US11927758B1 (en) | Multi-laser illuminated mixed waveguide display with volume Bragg grating (VBG) and mirror | |
US20230314716A1 (en) | Emission of particular wavelength bands utilizing directed wavelength emission components in a display system | |
US20240210677A1 (en) | Ultrafast illumination for structured light based eye tracking |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210312 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210312 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220328 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220627 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230330 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230428 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7273720 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |