JP2018518709A - 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法 - Google Patents

視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法 Download PDF

Info

Publication number
JP2018518709A
JP2018518709A JP2017561261A JP2017561261A JP2018518709A JP 2018518709 A JP2018518709 A JP 2018518709A JP 2017561261 A JP2017561261 A JP 2017561261A JP 2017561261 A JP2017561261 A JP 2017561261A JP 2018518709 A JP2018518709 A JP 2018518709A
Authority
JP
Japan
Prior art keywords
light
refractive power
laser
hologram
eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017561261A
Other languages
English (en)
Inventor
アレクサンダー スティーブン
アレクサンダー スティーブン
チャペスキー ジェイク
チャペスキー ジェイク
フレデリック ホランド ロイド
フレデリック ホランド ロイド
マホーン トーマス
マホーン トーマス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
North Inc
Original Assignee
North Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by North Inc filed Critical North Inc
Publication of JP2018518709A publication Critical patent/JP2018518709A/ja
Priority to JP2021184139A priority Critical patent/JP2022031715A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0189Sight systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0816Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
    • G02B26/0833Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements the reflecting element being a micromechanical device, e.g. a MEMS mirror, DMD
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/32Holograms used as optical elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/315Modulator illumination systems
    • H04N9/3161Modulator illumination systems using laser light sources
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • G02B2027/0105Holograms with particular structures
    • G02B2027/0107Holograms with particular structures with optical power
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B27/0103Head-up displays characterised by optical features comprising holographic elements
    • G02B2027/0109Head-up displays characterised by optical features comprising holographic elements comprising details concerning the making of holograms
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0149Head-up displays characterised by mechanical features
    • G02B2027/015Head-up displays characterised by mechanical features involving arrangement aiming to get less bulky devices
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • G02B2027/0174Head mounted characterised by optical features holographic
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Abstract

視標追跡能力を走査レーザプロジェクタ(「SLP」)ベースのウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法が説明されている。赤外レーザダイオードがRGB SLPに追加され、赤外光検出器は、眼の特徴からの赤外光の反射を検出するよう位置調整されている。ホログラフィック光学素子(「HOE」)が、可視光、赤外光、及び環境光をユーザの「視野」に組み合わせるために用いられてもよい。HOEは、異種であってもよく、正の屈折力を可視光に、そして、ゼロ又は負の屈折力を赤外光に印加するよう多重化されてもよい。

Description

本システム、デバイス、及び方法は、一般に、走査レーザに基づく視標追跡技術に関し、特に、視標追跡機能を走査レーザプロジェクタに基づくウェアラブルヘッドアップディスプレイに統合することに関する。
ウェアラブルヘッドアップディスプレイ
ヘッドマウントディスプレイは、ユーザの頭部に装着され、そのように装着されている場合、ユーザの頭部の位置又は配向に関わらず、少なくとも1つの電子ディスプレイをユーザの眼の少なくとも1つの可視界内部に固定する電子デバイスである。ウェアラブルヘッドアップディスプレイは、ユーザが表示された内容を見ることを可能にするが、ユーザが彼らの外部環境を見ることができることを妨げないヘッドマウントディスプレイである。ウェアラブルヘッドアップディスプレイの「表示する」内容は、それが、ユーザが彼らの外部環境を見ることができることを完全に妨害しないように、透明か、ユーザの視野の周囲にあるかのどちらか一方である。ウェアラブルヘッドアップディスプレイの例は、幾つか挙げると、Google Glass(登録商標)、Optinvent Ora(登録商標)、Epson モベリオ(Moverio)(登録商標)、及びSony グラストロン(Glasstron)(登録商標)を含む。
ウェアラブルヘッドアップディスプレイの光学性能は、その意匠において重要な要因である。しかし、それが顔に装着するデバイスとなると、ユーザは美的感覚についても多くを考慮する。これは、広大な(サングラスを含む)眼鏡フレーム産業によって明らかに強調されている。それらの性能限界とは関係なく、ウェアラブルヘッドアップディスプレイの多くの前記例は、少なくとも部分的に、それらがファッションへのアピールを欠いているため、消費者市場における牽引力を見出そうと奮闘している。今日までに発表された大多数のウェアラブルヘッドアップディスプレイは、大型のディスプレイコンポーネントを採用しており、結果として、今日までに発表された大多数のウェアラブルヘッドアップディスプレイは、従来の眼鏡フレームよりも相当にかさばり、洗練されていない。
ウェアラブルヘッドアップディスプレイの意匠における挑戦は、顔に装着する装置の大きさを最小化しつつも、表示される内容を十分な表示品位で提供することにある。当該技術において、ユーザの外部環境を見る彼らの能力を制限することなく、高品質画像をユーザに提供することができる、より美的にアピールする意匠のウェアラブルヘッドアップディスプレイに対するニーズが存在している。
視標追跡
視標追跡は、それによって眼の位置、向き、及び/又は動きが測定され、検出され、検知され、判断される(総称して、「測定される」)か、及び/又は監視されてもよいプロセスである。眼の位置、向き、及び/又は動きは、異なる様々な方法で測定されてもよく、そのうちの最も侵襲的でないものが、通常、1つ以上の光学センサ(例えば、カメラ)を利用して、光学的に眼を追跡する。共通する技法は、眼全体に一挙に赤外光を当てるか、照らし、赤外光に対して敏感であるように調整された少なくとも1つの光学センサで反射を測定することを含む。赤外光が眼から反射する方法についての情報は、角膜、瞳孔、虹彩、及び/又は網膜血管等の1つ以上の眼の特徴の位置、向き、及び/又は動きを判断するよう分析される。
視標追跡機能は、ウェアラブルヘッドアップディスプレイ用途において高度に有利である。ウェアラブルヘッドアップディスプレイにおける視標追跡の有用性の幾つかの例は、内容がユーザの視野内に表示される場所に影響を及ぼすこと、ユーザの視野の外側にある内容を表示しないことによって電力を保全すること、何の内容がユーザに表示されるかに影響を及ぼすこと、どこをユーザが見ているかを判断すること、ユーザがディスプレイ上の表示されている内容を見ているか、ディスプレイを通して彼らの外部環境を見ているかどうかを判断すること、及び、それを介してユーザが表示された内容を制御/対話できる手段を提供すること、を含む。しかし、視標追跡機能をウェアラブルヘッドアップディスプレイに組み込むことは、従来から、望まない大きさをシステムに加えている。今日利用できる視標追跡システムは、概して、極めて厳しい位置決め要件と共に多数の専用コンポーネントを実装しており、それらは、ウェアラブルヘッドアップディスプレイに組み込まれた場合に、システムの全体の大きさ及びフォームファクタを不必要に増加させる。当該技術において、システムの大きさ及びフォームファクタへの最小効果でウェアラブルヘッドアップディスプレイに統合できる視標追跡のシステム、デバイス、及び方法に対するニーズが存在している。
統合された視標追跡装置を有するレーザプロジェクタは、赤外光を出力する赤外レーザダイオード及び可視光を出力する少なくとも1つの可視光レーザダイオードを含むレーザモジュールと、赤外光及び可視光の両方を受け、且つ、赤外光及び可視光の両方を制御可能に反射するよう、レーザモジュールの出力と位置調整される走査ミラーと、走査ミラーから反射された赤外光及び可視光の両方を受け、且つ、赤外光及び可視光の両方をユーザの眼に向け直すよう位置調整される波長多重化ホログラフィック光学素子であって、可視光に反応し、赤外光に反応しない第1のホログラムと、赤外光に反応し、可視光に反応しない第2のホログラムとを含む波長多重化ホログラフィック光学素子と、ユーザの眼から反射された赤外光の少なくとも一部を受けるよう位置調整される赤外検出器と、を含むように要約されてもよい。前記波長多重化ホログラフィック光学素子は、ホログラフィック材料の少なくとも2つの異なる層、第1のホログラムを含むホログラフィック材料の第1の層及び第2のホログラムを含むホログラフィック材料の第2の層を備えていてもよい。代替として、波長多重化ホログラフィック光学素子は、第1のホログラム及び第2のホログラムの両方を含むホログラフィック材料の単一ボリュームを備えていてもよい。レーザモジュールにおける少なくとも1つの可視光レーザダイオードは、赤色レーザダイオード、緑色レーザダイオード、青色レーザダイオード、及び、赤色レーザダイオード、緑色レーザダイオード、及び/又は青色レーザダイオードの任意の組み合わせからなる群から選択される少なくとも1つの可視光レーザダイオードを含んでいてもよい。
第1のホログラムは第1の屈折力を可視光に印加してもよく、第2のホログラムは第2の屈折力を赤外光に印加してもよく、第2の屈折力は第1の屈折力とは異なる。第1の屈折力は正の屈折力であってもよく、第1の屈折力は第2の屈折力よりも大きくてもよい。第2の屈折力はゼロ以下であってもよい。
レーザプロジェクタは、更に、一対の眼鏡レンズの一般的形状及び外観を有する支持フレームを含んでいてもよく、レーザモジュール、走査ミラー、波長多重化ホログラフィック光学素子、及び赤外検出器は全て前記支持フレームによって担持され、波長多重化ホログラフィック光学素子は、環境光に対して略透明であり、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼の視野内に位置決めされる。
ウェアラブルヘッドアップディスプレイは、使用中、ユーザの頭部に装着される支持フレームと、支持フレームによって担持されるレーザモジュールであって、赤外光を出力する赤外レーザダイオード及び可視光を出力する少なくとも1つの可視光レーザダイオードを含むレーザモジュールと、支持フレームによって担持され、且つ、レーザモジュールによって出力される赤外光及び可視光の両方を受け、赤外光及び可視光の両方を制御可能に反射するよう、レーザモジュールの出力と位置調整される走査ミラーと、支持フレームによって担持され、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼の視野内部に位置決めされる波長多重化ホログラフィック光学素子であって、支持フレームがユーザの頭部に装着される場合、走査ミラーから反射された赤外光及び可視光の両方を受け、且つ、赤外光及び可視光の両方をユーザの少なくとも1つの眼に向け直すよう位置調整され、可視光に反応し、赤外光に反応しない第1のホログラムと、赤外光に反応し、可視光に反応しない第2のホログラムとを含み、そして、環境光に対して略透明である波長多重化ホログラフィック光学素子と、支持フレームによって担持され、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼から反射される赤外光の少なくとも一部を受けるよう位置調整される赤外検出器と、を含むように要約されてもよい。支持フレームは一対の眼鏡レンズの一般的形状及び外観を有していてもよい。波長多重化ホログラフィック光学素子は、ホログラフィック材料の少なくとも2つの異なる層、第1のホログラムを含むホログラフィック材料の第1の層及び第2のホログラムを含むホログラフィック材料の第2の層を備えていてもよい。代替として、波長多重化ホログラフィック光学素子は、第1のホログラム及び第2のホログラムの両方を含むホログラフィック材料の単一ボリュームを備えていてもよい。レーザモジュールにおける少なくとも1つの可視光レーザダイオードは、赤色レーザダイオード、緑色レーザダイオード、青色レーザダイオード、及び、赤色レーザダイオード、緑色レーザダイオード、及び/又は青色レーザダイオードの任意の組み合わせからなる群から選択される少なくとも1つの可視光レーザダイオードを含んでいてもよい。
第1のホログラムは第1の屈折力を可視光に印加してもよく、第2のホログラムは第2の屈折力を赤外光に印加してもよく、第2の屈折力は第1の屈折力とは異なる。第1の屈折力は正の屈折力であってもよく、第1の屈折力は第2の屈折力よりも大きくてもよい。第2の屈折力はゼロ以下であってもよい。
画像をユーザの眼に投影し、且つ、ユーザの眼を追跡するようレーザプロジェクタを操作する方法は、レーザプロジェクタの少なくとも第1のレーザダイオードによって可視光を出力することであって、可視光は画像の少なくとも一部を表すことと、レーザプロジェクタの赤外レーザダイオードによって赤外光を出力することと、レーザプロジェクタの走査ミラーによって可視光及び赤外光の両方を制御可能に、且つ、反射して走査することと、波長多重化ホログラフィック光学素子によってユーザの眼に可視光及び赤外光の両方を向け直すことと、赤外光検出器によってユーザの眼からの赤外光の少なくとも一部の反射を検出することと、赤外光検出器によって検出されたユーザの眼からの赤外光の少なくとも一部の反射に基づいて眼の少なくとも1つの特徴の位置を判断することと、を含むように要約されてもよい。
波長多重化ホログラフィック光学素子によってユーザの眼に可視光及び赤外光の両方を向け直すことは、波長多重化ホログラフィック光学素子の第1のホログラムによって第1の屈折力を可視光に印加することと、波長多重化ホログラフィック光学素子の第2のホログラムによって第2の屈折力を赤外光に印加することであって、第2の屈折力は第1の屈折力とは異なることと、を含んでいてもよい。波長多重化ホログラフィック光学素子の第1のホログラムによって第1の屈折力を可視光に印加することは、波長多重化ホログラフィック光学素子の第1のホログラムによって第1の正の屈折力を可視光に印加することを含んでいてもよい。波長多重化ホログラフィック光学素子の第2のホログラムによって第2の屈折力を赤外光に印加することは、波長多重化ホログラフィック光学素子の第2のホログラムによって第1の屈折力よりも小さい第2の屈折力を赤外光に印加することを含んでいてもよい。波長多重化ホログラフィック光学素子の第2のホログラムによって第1の屈折力よりも小さい第2の屈折力を赤外光に印加することは、波長多重化ホログラフィック光学素子の第2のホログラムによってゼロ以下の第2の屈折力を赤外光に印加することを含んでいてもよい。赤外光検出器によって検出されたユーザの眼からの赤外光の反射に基づいて眼の少なくとも1つの特徴の位置を判断することは、プロセッサによってユーザの眼からの赤外光の反射に基づいて眼の少なくとも1つの特徴の位置を判断することを含んでいてもよい。レーザプロジェクタの少なくとも第1のレーザダイオードによって可視光を出力することは、レーザプロジェクタの赤色レーザダイオードによって赤色光を出力すること、レーザプロジェクタの緑色レーザダイオードによって緑色光を出力すること、及び/又は、レーザプロジェクタの青色レーザダイオードによって青色光を出力すること、のうちの少なくとも1つを含んでいてもよい。
統合された視標追跡装置を有するレーザプロジェクタは、レーザ光を出力するレーザモジュールであって、レーザモジュールは第1の狭周波数帯内の第1の可視レーザ光をレーザモジュールによって出力されるレーザ光に付与する第1のレーザダイオードを含み、第1の可視レーザ光は画像の少なくとも第1の部分を表す、レーザモジュールと、レーザモジュールによって出力されるレーザ光を受け、且つ、レーザモジュールによって出力されるレーザ光を制御可能に反射するよう、レーザモジュールの出力と位置調整される走査ミラーと、走査ミラーから反射されるレーザ光を受け、且つ、レーザ光をユーザの眼に向け直すよう位置調整されるホログラフィック光学素子であって、第1の狭周波数帯内の第1の可視レーザ光に反応し、第1の狭周波数帯の外側の光に反応しない第1のホログラムを含むホログラフィック光学素子と、ユーザの眼から反射されるレーザ光の少なくとも一部を受けるよう位置調整される第1の狭周波数帯光検出器であって、第1の狭周波数帯内の第1の可視レーザ光に反応し、第1の狭周波数帯の外側の光に反応しない第1の狭周波数帯光検出器と、を含むように要約されてもよい。レーザモジュールは、第2の狭周波数帯内の第2の可視レーザ光をレーザモジュールによって出力されるレーザ光に付与する第2のレーザダイオードを含んでいてもよく、第2の狭周波数帯は第1の狭周波数帯とは異なる。第2の可視レーザ光は画像の少なくとも第2の部分を表してもよい。第1のホログラムは、第2の狭周波数帯内の第2の可視レーザ光に反応しなくてもよい。ホログラフィック光学素子は、第2の狭周波数帯内の第2の可視レーザ光に反応し、第1の狭周波数帯内の第1の可視レーザ光に反応しない少なくとも第2のホログラムを含む波長多重化ホログラフィック光学素子であってもよい。レーザプロジェクタは、更に、第2の狭周波数帯光検出器を含んでいてもよく、第2の狭周波数帯光検出器は、第2の狭周波数帯内の第2の可視レーザ光に反応し、第2の狭周波数帯の外側の光に反応しない。レーザモジュールは、第3の狭周波数帯内の第3の可視レーザ光をレーザモジュールによって出力されるレーザ光に付与する第3のレーザダイオードを含んでいてもよく、第3の狭周波数帯は、第1の狭周波数帯及び第2の狭周波数帯の両方と異なる。第3の可視レーザ光は画像の少なくとも第3の部分を表してもよい。第1のホログラムは、第3の狭周波数帯内の第3の可視レーザ光に反応しなくてもよい。第2のホログラムは、第3の狭周波数帯内の第3の可視レーザ光に反応しなくてもよい。波長多重化ホログラフィック光学素子は、第3の狭周波数帯内の第3の可視レーザ光に反応し、第1の狭周波数帯内の第1の可視レーザ光及び第2の狭周波数帯内の第2の可視レーザ光の両方に反応しない第3のホログラムを含んでいてもよい。レーザプロジェクタは、更に、第3の狭周波数帯光検出器を含んでいてもよく、第3の狭周波数帯光検出器は、第3の狭周波数帯内の第3の可視レーザ光に反応し、第3の狭周波数帯の外側の光に反応しない。
第1のレーザダイオードは赤色レーザダイオードであってもよく、第1の狭周波数帯は、ユーザの眼に赤色として見える第1の波長範囲に対応してもよい。第2のレーザダイオードは緑色レーザダイオードであってもよく、第2の狭周波数帯は、ユーザの眼に緑色として見える第2の波長範囲に対応してもよい。第3のレーザダイオードは青色レーザダイオードであってもよく、第3の狭周波数帯は、ユーザの眼に青色として見える第3の波長範囲に対応してもよい。
ホログラフィック光学素子は、ホログラフィック材料の少なくとも3つの異なる層:第1のホログラムを含むホログラフィック材料の第1の層、第2のホログラムを含むホログラフィック材料の第2の層、及び第3のホログラムを含むホログラフィック材料の第3の層を備えていてもよい。代替として、ホログラフィック光学素子は、第1のホログラム、第2のホログラム、及び第3のホログラムの3つ全てを含むホログラフィック材料の単一ボリュームを備えていてもよい。
第1のホログラムは第1の屈折力を第1の狭周波数帯内の第1の可視レーザ光に印加してもよく、第2のホログラムは同じ第1の屈折力を第2の狭周波数帯内の第2の可視光に印加してもよく、そして、第3のホログラムは同じ第1の屈折力を第3の狭周波数帯内の第3の可視レーザ光に印加してもよい。
レーザプロジェクタは、更に、一対の眼鏡レンズの一般的形状及び外観を有する支持フレームを含んでいてもよく、レーザモジュール、走査ミラー、波長多重化ホログラフィック光学素子、及び第1の狭周波数帯光検出器は全て支持フレームによって担持され、波長多重化ホログラフィック光学素子は、環境光に対して略透明であり、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼の視野内に位置決めされる。
ウェアラブルヘッドアップディスプレイは、使用中、ユーザの頭部に装着される支持フレームと、支持フレームによって担持されるレーザモジュールであって、レーザモジュールは第1の狭周波数帯内の第1の可視レーザ光を出力する第1のレーザダイオードを含み、第1の可視レーザ光は画像の少なくとも第1の部分を表す、レーザモジュールと、支持フレームによって担持され、第1の可視レーザ光を受け、且つ、第1の可視レーザ光を制御可能に反射するよう、レーザモジュールの出力と位置調整される走査ミラーと、支持フレームによって担持され、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼の視野内部に位置決めされるホログラフィック光学素子であって、支持フレームがユーザの頭部に装着される場合、走査ミラーから反射された第1の可視レーザ光を受け、且つ、第1の可視レーザ光をユーザの少なくとも1つの眼に向け直すよう位置調整され、第1の狭周波数帯内の第1の可視レーザ光に反応し、第1の狭周波数帯の外側の光に反応しない第1のホログラムを含み、そして、環境光に対して略透明であるホログラフィック光学素子と、支持フレームによって担持され、支持フレームがユーザの頭部に装着される場合に、ユーザの少なくとも1つの眼から反射される第1の可視レーザ光の少なくとも一部を受けるよう位置調整される第1の狭周波数帯光検出器であって、第1の狭周波数帯内の第1の可視レーザ光に反応し、第1の狭周波数帯の外側の光に反応しない第1の狭周波数帯光検出器と、を含むように要約されてもよい。支持フレームは一対の眼鏡レンズの一般的形状及び外観を有していてもよい。
ウェアラブルヘッドアップディスプレイのレーザモジュールは、第2の狭周波数帯内の第2の可視レーザ光を出力する第2のレーザダイオードを含んでいてもよく、第2の狭周波数帯は第1の狭周波数帯とは異なり、第2の可視レーザ光は画像の少なくとも第2の部分を表している。第1のホログラムは、第2の狭周波数帯内の第2の可視レーザ光に反応しなくてもよい。ホログラフィック光学素子は、第2の狭周波数帯内の第2の可視レーザ光に反応し、第1の狭周波数帯内の第1の可視レーザ光に反応しない少なくとも第2のホログラムを含む波長多重化ホログラフィック光学素子であってもよい。ウェアラブルヘッドアップディスプレイは、更に、第2の狭周波数帯光検出器を含んでいてもよく、第2の狭周波数帯光検出器は、第2の狭周波数帯内の第2の可視レーザ光に反応し、第2の狭周波数帯の外側の光に反応しない。ウェアラブルヘッドアップディスプレイのレーザモジュールは、第3の狭周波数帯内の第3の可視レーザ光を出力する第3のレーザダイオードを含んでいてもよく、第3の狭周波数帯は第1の狭周波数帯及び第2の狭周波数帯の両方と異なり、第3の可視レーザ光は画像の少なくとも第3の部分を表している。第1のホログラムは、第3の狭周波数帯内の第3の可視レーザ光に反応しなくてもよい。第2のホログラムは、第3の狭周波数帯内の第3の可視レーザ光に反応しなくてもよい。波長多重化ホログラフィック光学素子は、第3の狭周波数帯内の第3の可視レーザ光に反応し、第1の狭周波数帯内の第1の可視レーザ光及び第2の狭周波数帯内の第2の可視レーザ光の両方に反応しない第3のホログラムを含んでいてもよい。ウェアラブルヘッドアップディスプレイは、更に、第3の狭周波数帯光検出器を含んでいてもよく、第3の狭周波数帯光検出器は、第3の狭周波数帯内の第3の可視レーザ光に反応し、第3の狭周波数帯の外側の光に反応しない。
第1のレーザダイオードは赤色レーザダイオードであってもよく、第1の狭周波数帯は、ユーザの眼に赤色として見える第1の波長範囲に対応してもよい。第2のレーザダイオードは緑色レーザダイオードであってもよく、第2の狭周波数帯は、ユーザの眼に緑色として見える第2の波長範囲に対応してもよい。第3のレーザダイオードは青色レーザダイオードであってもよく、第3の狭周波数帯は、ユーザの眼に青色として見える第3の波長範囲に対応してもよい。
ウェアラブルヘッドアップディスプレイのホログラフィック光学素子は、ホログラフィック材料の少なくとも3つの異なる層:第1のホログラムを含むホログラフィック材料の第1の層、第2のホログラムを含むホログラフィック材料の第2の層、及び第3のホログラムを含むホログラフィック材料の第3の層を備えていてもよい。代替として、ウェアラブルヘッドアップディスプレイのホログラフィック光学素子は、第1のホログラム、第2のホログラム、及び第3のホログラムの3つ全てを含むホログラフィック材料の単一ボリュームを備えていてもよい。
第1のホログラムは第1の屈折力を第1の狭周波数帯内の第1の可視レーザ光に印加してもよく、第2のホログラムは同じ第1の屈折力を第2の狭周波数帯内の第2の可視光に印加してもよく、そして、第3のホログラムは同じ第1の屈折力を第3の狭周波数帯内の第3の可視レーザ光に印加してもよい。
画像をユーザの眼に投影し、且つ、ユーザの眼を追跡するようレーザプロジェクタを操作する方法は、レーザモジュールによって可視レーザ光を出力することであって、レーザモジュールは少なくとも第1のレーザダイオードを含み、レーザモジュールによって可視レーザ光を出力することは、レーザモジュールの第1のレーザダイオードから第1の狭周波数帯内の第1の可視レーザ光を出力することを含み、第1の可視レーザ光は画像の少なくとも第1の部分を表すことと、走査ミラーによって可視レーザ光を制御可能に、且つ、反射して走査することと、ホログラフィック光学素子によってユーザの眼に可視レーザ光を向け直すことと、少なくとも第1の狭周波数帯光検出器によってユーザの眼からの可視レーザ光の少なくとも一部の反射を検出することであって、第1の狭周波数帯光検出器は、第1の狭周波数帯内の光に反応し、第1の狭周波数帯の外側の光に実質的に反応せず、少なくとも第1の狭周波数帯光検出器によってユーザの眼からの可視レーザ光の少なくとも一部の反射を検出することは、第1の狭周波数帯光検出器によって画像の第1の部分の反射を検出することを含むことと、第1の狭周波数帯光検出器によって検出されたユーザの眼からの画像の第1の部分の反射に少なくとも基づいて、眼の少なくとも1つの特徴の位置を判断することと、を含むように要約されてもよい。
レーザモジュールは第2のレーザダイオードを含んでいてもよく、レーザモジュールによって可視レーザ光を出力することは、更に、レーザモジュールの第2のレーザダイオードによって第2の狭周波数帯内の第2の可視レーザ光を出力することを含んでいてもよく、第2の狭周波数帯は第1の狭周波数帯とは異なる。第2の可視レーザ光は画像の少なくとも第2の部分を表してもよい。走査ミラーによって可視レーザ光を制御可能に、且つ、反射して走査することは、走査ミラーによって画像の第1の部分及び画像の第2の部分の両方を制御可能に、且つ、反射して走査することを含んでいてもよい。ホログラフィック光学素子は、第1の狭周波数帯内の光に反応し、第1の狭周波数帯の外側の光に反応しない第1のホログラムと、第2の狭周波数帯内の光に反応し、第2の狭周波数帯の外側の光に反応しない第2のホログラムとを備える波長多重化ホログラフィック光学素子であってもよい。ホログラフィック光学素子によってユーザの眼に可視レーザ光を向け直すことは、波長多重化ホログラフィック光学素子の第1のホログラムによってユーザの眼に画像の第1の部分を向け直すことと、波長多重化ホログラフィック光学素子の第2のホログラムによってユーザの眼に画像の第2の部分を向け直すこととを含んでいてもよい。少なくとも第1の狭周波数帯光検出器によってユーザの眼からの可視レーザ光の少なくとも一部の反射を検出することは、更に、第2の狭周波数帯光検出器によってユーザの眼からの画像の第2の部分の反射を検出することを含んでいてもよく、第2の狭周波数帯光検出器は、第2の狭周波数帯内の光に反応し、第2の狭周波数帯の外側の光に実質的に反応しない。第1の狭周波数帯光検出器によって検出されたユーザの眼からの画像の第1の部分の反射に少なくとも基づいて眼の少なくとも1つの特徴の位置を判断することは、更に、第2の狭周波数帯光検出器によって検出されたユーザの眼からの画像の第2の部分の反射に基づいて眼の少なくとも1つの特徴の位置を判断することを含んでいてもよい。
レーザモジュールは第3のレーザダイオードを含んでいてもよく、レーザモジュールによって可視光を出力することは、更に、レーザモジュールの第3のレーザダイオードによって第3の狭周波数帯内の第3の可視レーザ光を出力することを含んでいてもよく、第3の狭周波数帯は第1の狭周波数帯及び第2の狭周波数帯の両方と異なる。第3の可視レーザ光は画像の少なくとも第3の部分を表してもよい。走査ミラーによって可視レーザ光を制御可能に、且つ、反射して走査することは、更に、走査ミラーによって画像の第3の部分を制御可能に、且つ、反射して走査することを含んでいてもよい。波長多重化ホログラフィック光学素子は、更に、第3の狭周波数帯内の光に反応し、第3の狭周波数帯の外側の光に反応しない第3のホログラムを含んでいてもよい。HOEによってユーザの眼に可視レーザ光を向け直すことは、更に、波長多重化ホログラフィック光学素子の第3のホログラムによってユーザの眼に画像の第3の部分を向け直すことを含んでいてもよい。少なくとも第1の狭周波数帯光検出器によってユーザの眼からの可視レーザ光の少なくとも一部の反射を検出することは、更に、第3の狭周波数帯光検出器によってユーザの眼からの画像の第3の部分の反射を検出することを含んでいてもよく、第3の狭周波数帯光検出器は、第3の狭周波数帯内の光に反応し、第3の狭周波数帯の外側の光に実質的に反応しない。第1の狭周波数帯光検出器によって検出されたユーザの眼からの画像の第1の部分の反射に少なくとも基づいて眼の少なくとも1つの特徴の位置を判断することは、更に、第3の狭周波数帯光検出器によって検出されたユーザの眼からの画像の第3の部分の反射に基づいて眼の少なくとも1つの特徴の位置を判断することを含んでいてもよい。
第1のレーザダイオードは赤色レーザダイオードであってもよく、レーザモジュールの第1のレーザダイオードによって第1の狭周波数帯内の第1の可視レーザ光を出力することは、赤色レーザダイオードによって赤色レーザ光を出力することを含んでいてもよい。画像の第1の部分は画像の赤色部分であってもよい。
第2のレーザダイオードは緑色レーザダイオードであってもよく、レーザモジュールの第2のレーザダイオードによって第2の狭周波数帯内の第2の可視レーザ光を出力することは、緑色レーザダイオードによって緑色レーザ光を出力することを含んでいてもよい。画像の第2の部分は画像の緑色部分であってもよい。
第3のレーザダイオードは青色レーザダイオードであってもよく、レーザモジュールの第3のレーザダイオードによって第3の狭周波数帯内の第3の可視レーザ光を出力することは、青色レーザダイオードによって青色レーザ光を出力することを含んでいてもよい。画像の第3の部分は画像の青色部分であってもよい。
異種ホログラフィック光学素子はホログラフィック材料の少なくとも1つの層を含むように要約されてもよく、ホログラフィック材料の少なくとも1つの層は、第1の波長を有する光に第1の屈折力を印加する第1のホログラムと、第2の波長を有する光に第2の屈折力を印加する少なくとも第2のホログラムとを含み、第2の屈折力は第1の屈折力とは異なり、第2の波長は第1の波長とは異なる。第1のホログラムは、第1の波長を有する光を向け直し、第1の波長を有する光の向け直し時に、第1の波長を有する光に第1の屈折力を印加してもよい。第2のホログラムは、第2の波長を有する光を向け直し、第2の波長を有する光の向け直し時に、第2の波長を有する光に第2の屈折力を印加してもよい。
第1の屈折力は正の屈折力であってもよく、第1のホログラムは、第1の波長を有する光を第1の集束率で集束させてもよい。第2の屈折力はゼロであってもよい。第2の屈折力は負の屈折力であってもよく、第2のホログラムは、第2の波長を有する光を発散させてもよい。第2の屈折力は正で、第1の屈折力より小さくてもよく、第2のホログラムは、第2の波長を有する光を、第1の集束率よりも小さい第2の集束率で集束させてもよい。第1の屈折力は40ジオプター以上であってもよく、第2の屈折力は0ジオプター以下であってもよい。
第1の波長は人間の眼で見ることができてもよく、第2の波長は人間の眼で見ることができなくてもよい。第1の波長は390nm〜700nmの第1の範囲から選択されてもよく、第2の波長は700nm〜10umの第2の範囲から選択されてもよい。
ホログラフィック材料の少なくとも1つの層はホログラフィック材料の単一層を含んでいてもよく、第1のホログラム及び少なくとも第2のホログラムは、両方、ホログラフィック材料の単一層内に含まれてもよい。代替として、ホログラフィック材料の少なくとも1つの層は、ホログラフィック材料の第1の層と、ホログラフィック材料の少なくとも第2の層とを含んでいてもよく、ホログラフィック材料の第1の層は第1のホログラムを含んでいてもよく、ホログラフィック材料の第2の層は第2のホログラムを含んでいてもよい。
ホログラフィック材料の少なくとも1つの層は、更に、第3の波長を有する光に第1の屈折力を印加する少なくとも第3のホログラムを含んでいてもよく、第3の波長は第1の波長及び第2の波長の両方と実質的に異なる。第1のホログラムは第1の屈折力を赤色光に印加する赤色ホログラムであってもよく、第2のホログラムは第2の屈折力を赤外光に印加する赤外ホログラムであってもよく、第3のホログラムは第1の屈折力を緑色光に印加する緑色ホログラムであってもよく、ホログラフィック材料の少なくとも1つの層は、更に、第1の屈折力を青色光に印加する青色ホログラムであってもよい。
異種ホログラフィック光学素子は、更に、眼鏡レンズを含んでいてもよく、ホログラフィック材料の少なくとも1つの層は眼鏡レンズによって担持される。
図において、同一の参照番号は、同様の構成要素又は行動を特定している。図中の構成要素の大きさ及び相対位置は、必ずしも正確な縮尺で描かれてはいない。例えば、様々な構成要素の形状及び角度は、必ずしも正確な縮尺で描かれてはおらず、これらの構成要素のいくつかは、図面の見やすさを向上するために任意に拡大され、位置決めされている。更に、図示の構成要素の特定の形状は、必ずしも、特定の構成要素の実際の形状に関する何らかの情報を伝達する意図はなく、図面内での認識の容易さのためだけに選択されている。
図1は、走査レーザプロジェクタを採用するウェアラブルヘッドアップディスプレイの側面図を示す例示の線図である。 図2は、走査レーザプロジェクタ及び別体の視標追跡システムを採用するウェアラブルヘッドアップディスプレイの側面図を示す例示の線図である。 図3は、本システム、デバイス、及び方法による、視標追跡機能を統合するようなされた走査レーザプロジェクタを含むウェアラブルヘッドアップディスプレイを示す例示の線図である。 図4は、本システム、デバイス、及び方法による、視標追跡機能を走査レーザ投影システムに統合するようなされているウェアラブルヘッドアップディスプレイの側面図を示す例示の線図である。 図5は、本システム、デバイス、及び方法による、最小限のコンポーネント追加により視標追跡及び走査レーザ投影を統合したウェアラブルヘッドアップディスプレイの斜視図である。 図6は、本システム、デバイス、及び方法による、走査プロジェクタの出力を3つの角度分離コピーに分離させるために適合させた光学スプリッタの略図である。 図7は、本システム、デバイス、及び方法による、ユーザの眼に画像を投影し、ユーザの眼を追跡するよう、レーザプロジェクタを操作する方法を示すフロー図である。 図8は、本システム、デバイス、及び方法による、画像投影及び視標追跡機能の両方を可能にする多重化ホログラフィック光学素子を含むウェアラブルヘッドアップディスプレイの側面図を示す例示の線図である。
以下の説明において、ある特定の詳細を、様々な開示する実施形態の完全な理解を提供するために説明する。しかし、当業者は、実施形態が、1つ以上のこれらの特定の詳細が無いか、他の方法、構成部品、材料等により、実施されてもよいことを認識するであろう。他の例では、ポータブル電子デバイス及び頭部着用デバイスに関連する周知の構造は、実施形態の説明を不必要に曖昧にすることを避けるよう、詳細に示されていないか、説明されていなかった。
特に文脈で必要としない限り、以下に続く明細書及び特許請求の範囲全体を通して、用語「comprise」並びに「comprises」及び「comprising」等のその変形例は、「以下を含むが、それらに限定されない」のような、オープンで、包括的な意味で解釈されるものとする。
本明細書全体を通して、「一実施形態」又は「実施形態」に対する引用は、特定の特徴、構造、又は特性が、1つ以上の実施形態において何らかの適切な方法で組み合わされてもよいことを意味している。
本明細書及び添付の特許請求の範囲で用いるように、単数形「a」、「an」、及び「the」は、内容で明確に規定しない限り、複数の指示対象を含んでいる。また、用語「又は」は、一般に、内容で明確に規定しない限り、「及び/又は」の意味と同じその最も幅広い意味で用いられることにも注意されたい。
本明細書中で提供する見出し及び要約書は、便宜のためだけであり、実施形態の適用範囲又はその意味に解釈しない。
本明細書中に説明する様々な実施形態は、視標追跡機能を走査レーザプロジェクタ(「SLP」)に統合するためのシステム、デバイス、及び方法を提供する。本明細書の態様は、プロジェクタ及び視標追跡装置のコンポーネントの両方としてSLPを操作することを含む。多くの異なる使用事例に適用できる一方で、本システム、デバイス、及び方法は、少なくとも1つのSLPを既に採用しているウェアラブルヘッドアップディスプレイ(「WHUD」)における使用に特に良好に適している。システム、デバイス、及び方法によれば、WHUD内のSLPは、少数の目立たず、邪魔にならないコンポーネントのみの追加により、表示目的のための可視光と視標追跡目的のための赤外光とを同時に提供し、それによってWHUDにおける視標追跡機能を可能にするようなされていてもよい。
本システム、デバイス、及び方法は、WHUDにおいて、特に、少なくとも1つのSLPを既に採用しているWHUDにおける使用に良好に適している。かかるディスプレイの実施例は、米国仮特許出願第62/017,089号明細書、米国仮特許出願第62/053,598号明細書、米国仮特許出願第62/117,316号明細書、米国仮特許出願第62/134,347号明細書(現在、米国非仮特許出願第15/070,887号明細書)、米国仮特許出願第62/156,736号明細書、米国仮特許出願第62/242,844号明細書、米国特許出願公開第US2015−0378164A1号明細書、米国特許出願公開第US2015−0378161A1号明細書、米国特許出願公開第US2015−0378162A1号明細書、米国非仮特許出願第15/145,576号明細書、米国非仮特許出願第15/145,609号明細書、米国非仮特許出願第15/145,583号明細書、米国非仮特許出願第15/046,234号明細書、米国非仮特許出願第15/046,254号明細書、及び米国非仮特許出願第15/046,269号明細書に説明されている。視標追跡能力を有していないかかるWHUDアーキテクチャの一般化された例を、図1に提供する。
図1は、SLP110を採用しているWHUD100の側面図を示す例示の線図である。SLP110は、赤色レーザダイオード(図1において「R」と表記)、緑色レーザダイオード(図1において「G」と表記)、及び青色レーザダイオード(図1において「B」と表記)、を含むレーザモジュール111と、2つの自由軸線を中心として制御可能に回動自在な走査ミラー112とを備えている。2つの自由軸線を中心として回動自在な単一の走査ミラー112は、本明細書中で例示的な実施例としてのみ用いられ、当業者は、類似の機能が、例えば、2つの直交する自由軸線のそれぞれ1つを中心としてそれぞれ制御可能に回動自在であり、レーザ光120の光学経路に対して順にそれぞれ位置決めされる2つの走査ミラー等の異なるミラー構成を用いて実現されてもよいことを正しく認識するであろう。SLP110によって出力されるレーザ光120は、赤色レーザ光(赤色レーザダイオードによって出力)、緑色レーザ光(緑色レーザダイオードによって出力)、及び/又は青色レーザ光(青色レーザダイオードによって出力)の任意に変調された組み合わせを備えていてもよい。走査ミラー112から反射したレーザ光120は、レーザ光120をユーザの眼190に戻すよう向け直すホログラフィック光学素子(「HOE」)130に入射する。概して、本システム、デバイス、及び方法において、用語「ユーザ」とはSLPのユーザを指す。図1の特定の文脈において、用語「ユーザ」とはWHUD100を装着又は使用している人物を指す。当業者は、WHUD100がユーザの頭部に装着される場合に、少なくともHOE130がユーザの少なくとも1つの眼190の視野内に位置決めされるように、ユーザが図1に示す構成要素を装着することを可能にする支持フレーム及び/又は他の支持/位置調整構造を、WHUD100が含んでいてもよいことを正しく認識するであろう。
HOE130は、レーザ光120と比べて、HOE130の反対側から入射する環境光140に対して略光学的に透明(すなわち、環境光140を構成する波長の大部分に対して光学的に透明)であってもよい。HOE130は投影されたレーザ光120と外部環境光140とをユーザの視野内で効果的に組み合わせるため、HOE130は、「コンバイナ」若しくは「透明コンバイナ」、「ホログラフィック光学コンバイナ」、又は類似物等の関連する変形体と称されてもよい。WHUD100の支持フレーム(図示せず)が眼鏡の一般的形状、外観、及び/又は寸法形状を有している場合、HOE130は、WHUD100の1つ以上の透明レンズ(1つ以上の処方レンズ又は1つ以上の非処方レンズ等)上に担持されていてもよい。HOE130の構成(例えば、HOE130の例示的な多重化構成を含む)及びHOE130がレーザ光120を眼190に向け直してもよい方法(例えば、例示的な射出瞳及びアイボックス構成)に関する更なる詳細は、少なくとも上に列挙した特許出願に説明されている。
WHUD100は、SLP110を用いるが、いずれかの視標追跡機能も提供しないWHUDの例である。従来の視標追跡機能がWHUD100に追加されてもよい方法の実施例を、図2に示す。
図2は、SLP210及び別体の視標追跡システムを採用しているWHUD200の側面図を示す例示の線図である。WHUD200は、WHUD200がWHUD200における視標追跡機能を可能にするよう追加コンポーネント240及び250を備える視標追跡システムを含むことを除いて、図1によるWHUD100に略類似している。WHUD200の視標追跡システムは、赤外光源240及び赤外光検出器250を含んでいる。使用中、赤外光源240は、単一で大きなスポットの赤外光222(赤外光222が眼290に見えないことを意味し、SLP210によって出力される可視光221とは区別するために破線で描く)を眼290に完全に当てるか、「照らす」。赤外光検出器250は、ユーザの眼290からの赤外光222の反射を検出する。眼290の異なる特徴(例えば、角膜、瞳孔、虹彩、及び/又は網膜血管)は、単一で大きなスポットの入射赤外光222の一部を眼290から異なる方向に反射させることができ、従って、赤外光源240及び光検出器250に対する眼290のかかる特徴の位置は、光検出器250によって検出された赤外光222の強度に影響を及ぼす可能性がある。赤外光源240が眼290を赤外光で照らす際に、光検出器250は、眼290の位置/向きによって決まる反射赤外光222の強度パターン又はマップを検出する。すなわち、光検出器250によって検出される赤外光222の強度は、眼290の位置/向き(又は、角膜、瞳孔、等のような眼290の特徴の位置/向き)によって決まる。光検出器250によって検出される強度パターン/マップは、眼290が見ている場所によって決まる。このようにして、WHUD200の視標追跡システムにおける単品コンポーネントの組み合わせ(赤外光源240及び赤外光検出器250)は、眼290の注視方向及び動きの両方が測定され、追跡されることを可能にする。
WHUD200は、SLP210及び(赤外光源240及び赤外光検出器250を備える)視標追跡システムが完全に別体で、独立したサブシステムとして両方含まれている構築例を示している。かかる実装は幾つかのシステムに対して許容されてもよいが、一般に、WHUDにとって、フォームファクタ及び処理/電力要件の両方の観点から、可能な限りコンパクトで、スリム化されることが有利である。本明細書中に説明する様々な実施形態は、視標追跡機能をSLPに統合して、フォームファクタ及び処理/電力要件の両方の観点から、より効率的なシステムを提供するためのシステム、デバイス、及び方法を提供する。
図3は、本システム、デバイス、及び方法による統合された視標追跡機能を有するSLP310を含むWHUD300を示す例示の線図である。WHUD300は、WHUD300において、走査レーザ投影及び視標追跡が単一のパッケージ/モジュール310に両方統合されていることを除いて、図2によるWHUD200に略類似している。特に、SLP310は、赤色レーザダイオード(図3において「R」と表記)、緑色レーザダイオード(図3において「G」と表記)、及び青色レーザダイオード(図3において「B」と表記)を含むレーザモジュール311と、図1のWHUD100のために説明したものと類似の構成における走査ミラー312とを備えている。しかし、加えて、レーザモジュール311は、また、WHUD200において赤外光源240のために説明したものと類似の方法で視標追跡において用いるための赤外レーザダイオード(図3において「IR」と表記)も含んでいる。走査ミラー312は、(図1のWHUD100による走査ミラー112と類似の方法での)レーザ投影用の走査ミラー及び視標追跡用の走査ミラーの両方としての役割を同時に果たし、それによって、走査ミラー312は、眼390の全域を順次照明するよう(例えば、IR光のラスター走査を介して)眼390の領域にわたって赤外レーザ光(図3において破線322で表す)を走査する。WHUD200がプロジェクタレーザモジュール211から切り離された赤外光源240を含む一方で、WHUD300において、赤外レーザダイオード341はSLP310のレーザモジュール311に統合され、走査ミラー312は、可視(R、G、及び/又はB)並びに赤外(IR)レーザ光の両方を眼390の上で走査するのに役立つ。
走査ミラー312は、1つ又は多数の(例えば、DLP構成における)デジタル微小電気機械システム(「MEMS」)ミラーを有利に含んでいてもよい。一般的な操作において、SLP310の走査ミラー312は、その全体の位置範囲にわたって繰り返し走査し、ディスプレイの視野全体にわたって効果的に走査する。画像/ピクセルが各走査位置に投影されるか否かは、レーザモジュール311の制御された変調及び走査ミラー312とのその同期によって決まる。走査ミラー312が、概して、レーザプロジェクタとして操作中にその範囲全体にわたって走査するという事実は、SLP310の走査ミラー312を視標追跡目的のための使用に適合させる。SLP310は、その動作をSLPとして妥協、修正する必要なく、視標追跡機能を提供するよう適合する。動作において、走査ミラー312はその全体の位置範囲にわたって繰り返し走査する一方で、RGBレーザダイオードは、走査された画像のピクセルに対応する可視光321を提供するよう変調される。同時に、赤外レーザダイオードは、ユーザの眼390(1度に1つのスポット又はピクセル、それぞれはそれぞれの走査ミラー位置に対応する)を視標追跡目的のために赤外レーザ光322で照明するよう作動させてもよい。実装に応じて、赤外レーザダイオードは、単純に、常に、赤外レーザ光322で眼390を完全に照明する(すなわち、その領域全体にわたって走査する)ようにしてもよいか、若しくは、赤外レーザダイオードは、照明パターン(例えば、グリッド、1組の平行線、十字線、又はその他の形状/パターン)を眼390の上に提供するよう変調されてもよい。赤外レーザ光322はユーザの眼390に見えないため、赤外レーザ光322は、SLP310によって投影される走査画像を妨げない。
眼390から反射する赤外レーザ光322(例えば、その一部)を検出するために、WHUD300は、図2のWHUD200による光検出器250と類似した少なくとも1つの赤外光検出器350を含んでいる。1つだけの光検出器350が図3に示されているが、代替の実施形態において、任意の数の光検出器350が用いられ(例えば、光検出器350のアレイ、又は、赤外波長域内の光に反応する電荷結合素子ベースのカメラ)、任意の編成内に位置決めされ、実装に応じて任意の所望位置にあってもよい。
走査ミラー312が、R、G、及び/又はBレーザダイオードの変調に基づいて表示画像を生成するために眼390の上で変調されたR、G、及び/又はB光321を走査する際に、走査ミラー312は、また、IRレーザダイオードの変調に基づいて眼390の上で赤外レーザ光322も走査する。光検出器350は、眼390の位置/向きによって決まる反射された赤外レーザ光322の強度パターン又はマップを検出する。すなわち、走査ミラー312のそれぞれ別個の位置は、結果として、眼390の位置/向き(又は、角膜、虹彩、瞳孔、等のような眼390の特徴の位置/向き)によって決まる、光検出器350によって検出される赤外レーザ光322のそれぞれの強度を生じてもよい。光検出器350によって検出される強度パターン/マップは、眼390が見ている場所によって決まる。このようにして、WHUD300内の同じSLP310は、i)画像投影、及びii)眼390の注視方向及び動きが測定され、追跡されることの両方を可能にする。
視標追跡機能をSLP310に統合する目的のためのWHUD200と比較したWHUD300への別の適合は、HOE330の波長多重化である。WHUD100のHOE130のために説明したものと同じように、WHUD300も、SLP310のレーザモジュール311から出力されたレーザ光を眼390に向け直すHOE330を含んでいるが、しかし、WHUD300において、HOE330は、少なくとも2つの波長多重化ホログラム:少なくとも、レーザモジュール311によって出力される可視光321に反応し(すなわち、第1のホログラムの再生効率に応じた部分の大きさの少なくとも一部を向け直し)、レーザモジュール311によって出力される赤外光322に反応しない(すなわち、透過させる)第1のホログラム331と、レーザモジュール311によって出力される赤外光322に反応し(すなわち、第2のホログラムの再生効率に応じた部分の大きさの少なくとも一部を向け直し)、レーザモジュール311によって出力される可視光321に反応しない(すなわち、透過させる)第2のホログラム332とを含むよう(図1のHOE130と比較して)なされている。図3は、第1のホログラム331を単一のホログラムとして示す一方で、実際には、レーザモジュール311によって出力される可視光321に反応するHOE330の態様は、波長多重化(すなわち、レーザモジュール311の赤色レーザダイオードからの赤色光にのみ反応する「赤色」ホログラム、レーザモジュール311の緑色レーザダイオードからの緑色光にのみ反応する「緑色」ホログラム、レーザモジュール311の青色レーザダイオードからの青色光にのみ反応する「青色」ホログラム)、角度多重化(例えば、アイボックス拡張/複製の目的のため)、位相多重化、空間多重化、時間多重化、等を含むが、これらに限定されない様々な異なる方法で多重化されてもよい任意の数のホログラムを含んでいてもよい。可視光321の向け直し時、第1のホログラム331は第1の屈折力を可視光321に印加してもよい。有利に、第1のホログラム331によって(又は、実装が可視光321を向け直すために多重化ホログラムのセットを採用していた場合、多重化ホログラムの第1のセットによって)印加される第1の屈折力は、可視光321を、例えば、広い視野を有する明瞭で焦点の合った画像を提供する目的のため、ユーザの眼390において1センチメートル未満(例えば、6mm、5mm、4mm、3mm)の直径を有する射出瞳に焦点を合わせるか、集束させる正の屈折力であってもよい。赤外光322の向け直し時、第2のホログラム332は第2の屈折力を赤外光322に印加してもよく、ここで第2のホログラム332によって印加される第2の屈折力は第1のホログラム331によって印加される第1の屈折力とは異なっている。有利に、第2のホログラム332が、眼390における可視光321の射出瞳よりも大きい眼390の領域の上に赤外光322を向け直すように、第1の屈折力は第2の屈折力より大きくてもよく(及び、従って、第2の屈折力は第1の屈折力より小さくてもよい)。例えば、第2のホログラム332の第2の屈折力は、第1のホログラム331の第1の屈折力によって可視光321に印加される集束率よりも小さい集束率を赤外光322に印加してもよいか、又は、第2の屈折力は、第2のホログラム332が何の集束もそれらに加えることなく赤外光322を眼390に向け直すように、ゼロであってもよいか、又は、第2のホログラム332の第2の屈折力が、眼390の領域全体を照明し、その照明された領域内部の全ての眼の位置/動きを追跡する目的のために、赤外光322を集束させて(すなわち、集束率をそれらに加えて)、例えば、眼390の領域全体を(及び、必要に応じて、それを超えて)覆う覆うように、第2の屈折力は負(すなわち、ゼロ未満)であってもよい。
特定の実装に応じて、HOE330は、第1のホログラム331及び第2のホログラム332の両方を符号化するか、担持するか、その内部又はその上に埋め込まれたか、概して含む単一ボリュームのホログラフィック材料(例えば、フォトポリマー又はハロゲン化銀化合物)を備えていてもよいか、又は、代替として、HOE330は、第1のホログラム331を含むホログラフィック材料の第1の層及び第2のホログラム332を含むホログラフィック材料の第2の層を、積層されるか、概して共に層状に積み重ねられるホログラフィック材料(例えば、フォトポリマー及び/又はハロゲン化銀化合物)の少なくとも2つの異なる層を備えていてもよい。例示的な多重化HOEの詳細は、図8を参照して後に説明する。
この明細書及び添付特許請求の範囲全体を通して、用語「赤外」は、「近赤外」を含み、一般に、平均的な人間の眼で通常見ることのできる光の最大波長よりも大きい光の波長を指す。平均的な人間の眼で見ることのできる光(すなわち、本明細書において「可視光」)は、一般に、400nm〜700nmの範囲にあり、本明細書中で用いるように、用語「赤外」とは、700nmより大きく、最大1mmの波長を指す。本明細書中及び特許請求の範囲において用いられるように、可視とは、光が通常、略400nm(青紫)から略700nm(赤色)までの電磁スペクトルの人間への可視部内の波長を含むことを意味する。
赤外光は(平均的な)人間の眼に見えず、そのため、ユーザに表示される他の光学的内容を邪魔するか、干渉しないため、赤外光の使用は視標追跡システムにおいて有利である。赤外レーザダイオードをSLPに統合することは、本システム、デバイス、及び方法によれば、可視のレーザ投影及び不可視の視標追跡がWHUDの実質的に同じハードウェアによって同時に行われることを可能にし、それによって、システムの全体の大きさ及び処理/電力要件を最小化している。しかし、本明細書中に説明する様々な実施形態は、また、可視スペクトルで(すなわち、赤外光無しで)完全に動作するSLPに視標追跡機能を統合するシステム、デバイス、及び方法も含んでいる。
図4は、本システム、デバイス、及び方法による、視標追跡機能を走査レーザ投影システムに統合するようなされているWHUD400の側面図を示す例示の線図である。WHUD400は、WHUD400がユーザの眼490から反射された可視レーザ光420を検出し(赤外レーザ光を検出する少なくとも1つの赤外光検出器350とは対照的な)、結果として生じる強度パターン/マップを用いて眼490の位置及び/又は動きを判断する少なくとも3つの狭周波数帯光検出器451、452、及び453を含むことを除いて、図1によるWHUD100に略類似している。
WHUD400は、3つの狭周波数帯光源:赤色レーザダイオード(図4において「R」と表記)、緑色レーザダイオード(図4において「G」と表記)、及び青色レーザダイオード(図4において「B」と表記)を含むSLP410を備えている。この明細書及び添付特許請求の範囲全体を通して、用語「狭周波数帯」とは、特定の文脈を与える比較的小さい範囲の波長(又は波長帯域幅)を指す。レーザダイオード等の光源の文脈において、狭周波数帯光は約10nm以下の帯域幅内の光であり、光検出器の文脈において、狭周波数帯光検出器は約200nm以下の帯域幅内の光に反応する。SLP410からのレーザ光420は、図1のWHUD100のために説明したように、変調されて画像をユーザの眼490に投影する。しかし、WHUD400は、また、SLP410の赤色レーザダイオードによって出力される光に対応する狭周波数帯内のレーザ光420に反応する第1の狭周波数帯光検出器451と、SLP410の緑色レーザダイオードによって出力される光に対応する狭周波数帯内のレーザ光420に反応する第2の狭周波数帯光検出器452と、SLP410の青色レーザダイオードによって出力される光に対応する狭周波数帯内のレーザ光420に反応する第3の狭周波数帯光検出器453とを含んでいる。光検出器451、452、及び453のそれぞれは、眼490の位置及び/又は動きが判断されることを可能にするよう、ユーザの眼490から反射したレーザ光420を受けるために位置調整されている。各光検出器は、1つ以上の光学帯域フィルタ等のもう1つの光学フィルタを用いて光のそれぞれの「狭周波数帯」に反応するようなされていてもよい。光検出器451、452、及び453は、検出された環境光からのノイズを最小化する有利な「狭周波数帯」である。
WHUD400は、SLP410からユーザの眼490に投影される画像/ピクセルにも対応する同じ可視レーザ光420を用いるレーザ視標追跡を実装している。このスキームの利点は、何の赤外レーザダイオードも必要とせず、SLP410が変更なく原則的に用いられてもよい点にあるが、しかし、欠点は、眼の位置/動きを、赤外光によって与えられる完全な不可視の照明を用いる代わりに、投影された画像/ピクセルからの光に曝して判断しなければならないという点にある。本システム、デバイス、及び方法によれば、SLPの画像生成システム(すなわち、レーザ光420の変調を走査ミラーの位置に同期させて制御するシステム)と、狭周波数帯光検出器451、452、及び453によって検出された反射光に基づいて眼490の位置/動きを判断する視標追跡システムとの間の通信が利点である。かかる通信は、例えば、どのレーザダイオードが各ミラー位置においてアクティブなのかについての情報を含んでいてもよい。この情報を用いて、視標追跡システムは、現在の走査ミラー位置及びレーザ変調パターンに基づいて、眼490の様々な位置及び/又は動きに対する光検出器451、452、及び/又は453からの検出した強度情報をマッピングすることが可能である。
本明細書中に説明する視標追跡システム及びデバイスの様々な実施形態は、幾つかの実装において、「グリント」及び/又は「プルキニエ像」を利用してもよく、及び/又は、米国仮特許出願第62/245,792号明細書に説明されている視標追跡の「角膜影に基づく(corneal shadow based)」方法を採用してもよい。
本システム、デバイス、及び方法によれば、視標追跡システム(又は「視標追跡装置」)は、1つ以上の(狭周波数帯)光検出器に、及び、1つ以上のプロセッサ読取可能ストレージ媒体又はメモリに通信可能に結合される1つ以上のデジタルプロセッサを含んでいてもよい。メモリは、プロセッサ実行可能命令、及び/又は、プロセッサによって実行される場合、プロセッサが、1つ以上の光検出器によって提供される情報(例えば、強度パターン/マップ等の強度情報)に基づいて、ユーザの眼の位置及び/又は動きを判断することを可能にするデータを格納してもよい。
図5は、本システム、デバイス、及び方法による、最小限のコンポーネント追加により視標追跡及び走査レーザ投影を統合したWHUD500の斜視図である。WHUD500は、図1、2、3、及び4に示した構成要素の多く、すなわち、可視レーザ光521(例えば、少なくとも第1の狭周波数帯での)及び赤外レーザ光522を出力するようなされたレーザモジュール511と、レーザモジュールから出力されたレーザ光を受け、レーザ光を制御可能に反射(すなわち、走査)するよう位置調整された走査ミラーと、レーザ光521及び522をユーザの眼590に向け直すよう位置調整された波長多重化HOE530と、赤外レーザ光522に反応する少なくとも1つの赤外光検出器550とを含んでいる。実装に応じて、可視レーザ光521は、赤色レーザ光、緑色レーザ光、及び/又は青色レーザ光のいずれか、単独又は何らかの組み合わせのいずれか一方に対応してもよい。WHUD500は、また、支持フレーム580がユーザの頭部に装着される場合に、HOE530がユーザの眼590の視野内に位置決めされるような、一般的形状及び外観を有する支持フレーム580又は一対の眼鏡レンズも含んでいる。
WHUD500は、更に、光検出器550に通信可能に結合されるデジタルプロセッサ560と、デジタルプロセッサ570に通信可能に結合される非一時的プロセッサ読取可能ストレージ媒体又はメモリ570とを含んでいる。メモリ570は、プロセッサ実行可能命令、及び/又は、プロセッサ560によって実行される場合、光検出器550からプロセッサ560に通信される眼590から反射された赤外光522についての情報に基づいて、プロセッサ560に眼590の1つ以上の位置及び/又は運動を判断させるデータを格納する。
本明細書中に説明する様々な実施形態は、概して、ユーザの単一の眼(すなわち、単眼用途)を参照し、図示しているが、当業者は、本システム、デバイス、及び方法が、ユーザの両眼(すなわち、双眼用途)のための走査レーザ投影及び走査レーザ視標追跡を提供するために、WHUDにおいて重複してもよいことを容易に正しく認識するであろう。
幾つかのWHUD(例えば、ある特定のアイボックス複製/拡張スキームを実装するもの)は、SLPによって出力されるレーザ光の経路内に様々な光学素子を含んでもよい。本システム、デバイス、及び方法によれば、視標追跡目的のために赤外レーザダイオードをSLPに統合するWHUDは、可視及び赤外レーザのそれぞれの経路を位置調整/分離させるために、必要に応じて、ホット光学素子及び/又はコールド光学素子を有利に採用してもよい。実施例を図6に示す。
図6は、米国仮特許出願第62/156,736号明細書及び米国仮特許出願第62/242,844号明細書(現在、米国非仮特許出願第15/046,254号明細書)に説明されているようなSLPの出力を3つの角度分離コピーに分離させるために適合させた光学スプリッタ600の略図である。スプリッタ600は、それぞれ異なる角度で配向される2つの反射面671及び672とその間の透過範囲673とを有する光学構造670を含んでいる。SLP610(図3によるSLP310と略類似していてもよい)は、図6に示すようなサブレンジA、B、及びCを含む走査範囲を有する。SLP610は、3つの画像コピー:走査範囲A内の第1のコピー、走査範囲B内の第2のコピー、及び走査範囲C内の第3のコピーにわたって可視光を走査するよう操作されてもよい。走査範囲Aにわたって投影される第1の画像コピーは、光学構造670の透過範囲673を通って透過されて、例えば、角度多重化ホログラフィックコンバイナに衝突する。走査範囲Bにわたって投影される第2の画像コピーは、光学構造670の第1の反射面671によって反射され、次いで、第2のリフレクタ(例えば、ミラー)681によって再度反射される。第2のリフレクタ681は、走査範囲Bに対応する光をホログラフィックコンバイナ(混乱を減らすため、図6に図示せず)に向け直すよう配向される。走査範囲Cにわたって投影される第3の画像コピーは、光学構造670の第2の反射面672によって反射され、次いで、第3のリフレクタ(例えば、ミラー)682によって再度反射される。第3のリフレクタ682は、走査範囲Cに対応する光をホログラフィックコンバイナに向け直すよう配向される。レーザ光の同じ変調パターン(例えば、時間、強度、及び/又は空間)が、範囲A、B、及びCのそれぞれにわたってSLP610によって繰り返されてもよく、このように、3つの画像コピーは、SLP610によって生成され、それぞれ異なる角度で角度多重化ホログラフィックコンバイナに向けられてもよい。光学スプリッタ600は、射出瞳複製によって網膜走査ディスプレイシステムのアイボックスを拡張するために、それに応じて適合されるSLP動作モード及び角度多重化ホログラフィックコンバイナと併用して用いられてもよい光学スプリッタの構成例を表している。赤外レーザ光を視標追跡目的のためにかかるスプリッタを用いるシステムに統合するために、スプリッタは、例えば、赤外光が、スプリッタを「見ること」又はそれに影響されることなく、本質的にそれを通って透過されるように、コールド光学素子から構成されてもよい。この場合、赤外光(図6において破線で表現)はA+B+Cの範囲全体にわたって走査されてもよい。代替として、スプリッタ600は、赤外光がそれによって反射されるように、ホット光学素子から構成されてもよい。この場合、赤外光は、3つの走査範囲A、B、又はCのうちの1つのためにオンに変調され、他の2つの走査範囲のためにオフに変調される必要だけがあってもよい。
図7は、本システム、デバイス、及び方法によって、ユーザの眼に画像を投影し、ユーザの眼を追跡するよう、レーザプロジェクタを操作する方法700を示すフロー図である。方法700は、6つの行動701、702、703、704、705、及び706を含んでいるが、当業者は、代替の実施形態において、ある特定の行動が省略されてもよく、及び/又は、追加行動が追加されてもよいことを正しく認識するであろう。当業者は、また、図示の順序の行動が、例示的な目的のためだけに示されており、代替の実施形態において変更してもよいことを正しく認識するであろう。方法700の目的のために、用語「ユーザ」とは、レーザプロジェクタによって投影された画像を観察している人物を指す。
701において、レーザプロジェクタの少なくとも第1のレーザダイオードは可視光を出力する。可視光は、画像の少なくとも一部を表すか、具現化するか、又はそうでなければ、それに対応する。例えば、可視光は、完全な画像又は画像の1つ以上のピクセルを表すか、具現化するか、又はそうでなければ、それに対応してもよい。可視光は、レーザ光の完全な変調されたパターン(完全な画像を符号化する)、レーザ光の変調されたパターンの一部、又は、レーザ光の変調されたパターンの単一要素のみを含んでいてもよい。レーザプロジェクタは、赤色レーザダイオード、緑色レーザダイオード、及び青色レーザダイオードを含んでいてもよく、701において出力される可視光は、赤色レーザダイオードによって出力される赤色レーザ光、緑色レーザダイオードによって出力される緑色レーザ光、青色レーザダイオードによって出力される青色レーザ光、又はそれらの任意の組み合わせを含んでいてもよい。
702において、レーザプロジェクタの赤外レーザダイオードは赤外光を出力する。特定の実装に応じて、赤外レーザダイオードは赤外レーザ光のパターンを出力するよう変調しても、しなくてもよい。
703において、レーザプロジェクタの走査ミラーは、可視光(すなわち、701においてレーザプロジェクタによって出力された可視光)及び赤外光(すなわち、702においてレーザプロジェクタによって出力された赤外光)の両方を制御可能に、反射して走査する。
704において、波長多重化HOEは703において走査ミラーから反射した可視光及び赤外光の両方を受け、HOEは可視光及び赤外光の両方をユーザの眼に向け直す。可視光はユーザに投影/表示されるビジュアルコンテンツを表す一方で、赤外光は視標追跡目的のために用いられる。先に説明したように、少なくとも、可視光の波長に反応し、赤外光に反応しない波長多重化HOEの第1のホログラムは、可視光をユーザの眼に向け直してもよく、赤外光に反応し、可視光の波長に反応しない波長多重化HOEの第2のホログラムは、赤外光をユーザの眼に向け直してもよい。かかる実装において、少なくとも、波長多重化HOEの第1のホログラムは、それによる又はそれからの可視光の向け直し時に、第1の屈折力を可視光に印加する一方で、波長多重化HOEの第2のホログラムは、それによる又はそれからの赤外光の向け直し時に、第2の屈折力を赤外光に印加する。第2の屈折力は第1の屈折力よりも小さくてもよい。例えば、第1の屈折力は正の屈折力であってもよい一方で、第2の屈折力はゼロ以下であってもよい。
705において、赤外光検出器は、ユーザの眼からの赤外光の少なくとも一部の反射を検出する。赤外光検出器によって検出された赤外光の強度は、赤外光が反射される眼の1つ以上の特徴の位置、向き、及び/又は運動によって決まってもよい。
706において、眼の少なくとも1つの特徴の位置は、705において赤外光検出器によって検出された赤外光の少なくとも一部の少なくとも反射に基づいて判断される。眼の少なくとも1つの特徴は、眼の瞳孔、虹彩、角膜、又は網膜血管を含んでいてもよいが、これらに限定されない。この文脈において、用語「位置」は、光検出器の空間位置及び/又は向き、若しくは、少なくとも1つの特徴の前もって公知の空間位置及び/又は向き等の、基準点に対する眼の少なくとも1つの特徴の一般的な空間位置及び/又は向きを指すために大まかに用いられる。従って、706において判断される眼の少なくとも1つの特徴の位置は、眼自体の位置、向き、及び/又は動きを表すものであってもよい(及び/又は、その後判断されるために用いられてもよい)。幾つかの実装において、眼の少なくとも1つの特徴の位置(及び/又は、眼自体の対応する位置、向き、及び/又は動き)は、赤外光検出器と通信するプロセッサによって判断されてもよい。
幾つかの実装において、多数の赤外光検出器が、ユーザの眼からの赤外光の少なくとも一部(又は複数部分)の反射を検出するために用いられてもよく、多数の赤外光検出器は、共に物理的にクラスター化されるか、WHUDの支持フレームを中心として空間的に分離されてもよい(例えば、HOEの全周)。
赤外光が視標追跡目的のために眼の全て又は一部を照明するために用いられる場合、眼の全領域は全面ラスター走査を介して完全に照明されてもよいか、又は、(プロジェクタは各フレームを素早くリフレッシュし、全視標追跡はユーザへの顕著な遅延無しに多数のフレームにわたって広げることができるため)眼の一部は様々なパターンのいずれかで照明されてもよい。例えば、グリッド又は1組の平行線等の受動パターンが採用されてもよいか、又は、能動パターンが採用されてもよい。能動的照明パターンの例は、眼の領域がバイナリ範囲に分割され、視標追跡装置が、2つの範囲のうちのどちらが特徴(例えば、瞳孔又は角膜)を含んでいるかを判断し、その範囲が、その後、バイナリ範囲に分割され、特徴の位置が所望の解像度で識別されるまで、処理がより小さな範囲で継続される「バイナリスタイル検索」;信頼できる眼の位置が見つかると、後続の走査が既知の眼の位置の位置を含む全走査領域のサブセットに限定され、そのサブセットは、信頼できる眼の位置が特定されてからの時間内に眼が動く可能性に基づいている「最新領域焦点合わせ」;及び/又は、眼の領域が連続して走査されるくさび形又はパイ状の一片に分割される「回転走査」を含む。
赤外光の使用は、かかる光がレーザプロジェクタによって提供される可視光と容易に区別できるため、有利である。しかし、赤外光は環境内でも一般的であるため、赤外光に反応するよう最適化されている狭周波数帯光検出器は、それでもやはり、環境赤外ノイズを検出する可能性がある。この効果を軽減することを補助するために(赤外レジームにおいて、及び、例えば、図4に示すような、可視光が視標追跡のために用いられる実装において)、視標追跡目的のために用いられるレーザ光は、かかる光が類似波長の環境光と区別されることを可能にするよう、様々な異なる方法のいずれかで符号化されてもよい。例えば、視標追跡目的のために用いられる狭周波数帯光(赤外又は可視)は意図的に偏光されてもよく、対応する偏光フィルタは、光検出器が、狭周波数帯内にあり、適正な偏光の光のみに反応するように、狭周波数帯(例えば、赤外)光検出器に適用されてもよい。別の実施例として、視標追跡目的のために用いられる狭周波数帯光は意図的な変調パターンで変調されてもよく、このパターンを提供する光は、光検出器出力の信号処理及び解析中に光検出器によって提供される強度マップから抽出することができる。幾つかの実装において、赤外フィルタがWHUDのレンズ(透明コンバイナ)に適用されるか、又はそうでなければ、それに統合されて、ユーザの外部環境からの赤外光がレンズ/透明コンバイナを通過せず、ユーザの眼に当たらないように妨害してもよく、その結果、眼から反射し、赤外光検出器によって検出される環境赤外光の量が低減される。
先に説明したように、視標追跡目的のために赤外レーザ光をWHUDのSLPに統合することは、それが可視レーザ光に付与する光学機能から赤外レーザ光に異なる光学機能(例えば、屈折力)を付与するよう設計されるHOEを有利に用いてもよい。
図8は、本システム、デバイス、及び方法による、画像投影及び視標追跡機能の両方を可能にする波長多重化HOE830を含むWHUD800の側面図を示す例示の線図である。WHUD800は図3によるWHUD300と略類似しており、HOE830の幾つかの詳細が説明のために強調されている。簡単に説明すると、WHUD800は、視標追跡目的のための赤外レーザダイオード(図8において「IR」と表記)を含むようなされたSLP810と、眼鏡レンズ860と統合される(例えば、積層されるか、又はそうでなければ、層状に積み重ねられるか、若しくは、内部に注型される)波長多重化HOE830を備える透明コンバイナとを含んでいる。レンズ860とのHOE830の統合は、米国仮特許出願第62/214,600号明細書及び/又は米国仮特許出願第62/268,892号明細書に説明されているシステム、デバイス、及び方法を含むか、及び/又は、採用してもよい。
HOE830は、それに入射する光の異なる波長に異なって反応する(すなわち、異なる屈折力を印加する)よう波長多重化されている。より詳細には、HOE830は、第1の波長(例えば、少なくとも第1の可視波長)を有する光821に第1の屈折力を印加する第1のホログラムと、第2の波長(例えば、赤外波長)を有する光822に第2の屈折力を印加する第2のホログラムとを少なくとも含む異種HOEである。第2の屈折力は第1の屈折力とは異なり、第2の波長は第1の波長とは異なっている。HOE830は、幾つものホログラムを担持するか、符号化するか、包含するか、又はそうでなければ含むホログラフィック材料(例えば、フォトポリマー、ハロゲン化銀化合物)の幾つもの層を含んでいてもよい。ホログラフィック材料の単一層は多数のホログラムを含んでもよいか、及び/又は、個々のホログラムはホログラフィック材料のそれぞれ個々の層上又はその中に含まれていてもよい。
図8に示す実施例において、「第1の波長を有する光」及び「第2の波長を有する光」は、それぞれ、両方ともSLP810によって出力される可視レーザ光821及び赤外レーザ光822に対応する。SLP810は、画像投影の目的のための可視レーザ光821(図8において実線で表現)と視標追跡の目的のための赤外レーザ光822(図8において破線で表現)とを出力する。実施例のように、可視レーザ光821は、約390nmから約700nmの範囲の少なくとも1つの波長を有する光(例えば、赤色、緑色、又はそれ未満;若しくは、赤色、緑色、及び/又は青色の任意の組み合わせ)を含んでいてもよく、赤外レーザ光822は、約700nmから約10umの範囲の少なくとも1つの波長を有する光を含んでいてもよい。可視レーザ光821及び赤外レーザ光822の両方は、波長多重化HOE830に入射し、それによって、WHUD800のユーザの眼890に向け直されるが、しかし、画像投影及び視標追跡の要件が異なるため、波長多重化HOE830は、波長多重化HOE830が赤外レーザ光822を眼890に向け直す方法とは異なる方法で、可視レーザ光821を眼に向け直す。波長多重化HOE830は、i)眼890に向かう可視レーザ光821(すなわち、可視スペクトル内の少なくとも第1の波長を有する光)に反応する(すなわち、向け直し、第1の屈折力を印加する)少なくとも第1のホログラムと、及びii)眼890に向かう赤外レーザ光822(すなわち、赤外スペクトル内の第2の波長を有する光)に反応する(すなわち、向け直し、第2の屈折力を印加する)第2のホログラムと含んでいる。第1の屈折力(すなわち、波長多重化HOE830の少なくとも第1のホログラムによって可視レーザ光821に印加される屈折力)は、波長多重化HOE830における少なくとも第1のホログラムが、可視レーザ光821をユーザの眼890において又はその近傍で第1の射出瞳に集束させるように、正である。この集束は、ユーザが表示された内容を適度な視野で見ることを可能にするために有利である。波長多重化HOEがレンズ860と統合されているため、波長多重化HOE830は、眼890に近接して位置決めされてもよく、第1の屈折力は、必要な集束を提供するために、比較的高くてもよい(例えば、約40ジオプター以上)。同時に、第2の屈折力(すなわち、波長多重化HOE830の第2のホログラムによって赤外レーザ光822に印加される屈折力)は、波長多重化HOE830の少なくとも第1のホログラムによって可視光に印加された第1の屈折力よりも小さい。波長多重化HOE830の第2のホログラムによって印加される第2の屈折力は、赤外光822が可視光821の射出瞳よりも大きい直径を眼890において有する射出瞳に集束するように、正であってもよく、波長多重化HOE830の少なくとも第1のホログラムによって印加された第1の屈折力より小さくてもよい(例えば、その発散を低減するか、視準するか、又は集束するために十分な、約40ジオプター未満)。代替として、第2のホログラムによって印加される第2の屈折力は、ゼロであってもよいか、又は、波長多重化HOE830の第2のホログラムが赤外レーザ光822を集束無しに(すなわち、平面ミラーからのように)890に向け直させるか、又は、発散させるように、負であってもよい。言い換えれば、第2の屈折力は約0ジオプター以下であってもよい。眼890において可視光821よりも大きい射出瞳を赤外光822のために提供することは、SLP810が視標追跡目的のために赤外レーザ光822で眼890の全領域を照明することを可能にするために有利である。
本システム、デバイス、及び方法によれば、可視光に反応する波長多重化HOE830における少なくとも第1のホログラムは、幾つもの波長多重化ホログラムを含んでいてもよく、そのぞれぞれは、それぞれの波長又は可視光の波長のそれぞれの範囲に反応してもよい。例えば、可視光に反応する波長多重化HOE830における少なくとも第1のホログラムは、SLP810によって提供される赤色光に反応する赤色ホログラム、SLP810によって提供される緑色光に反応する緑色ホログラム、及び/又は、SLP810によって提供される青色光に反応する青色ホログラムを含んでいてもよい。有利に、波長多重化HOE830の少なくとも第1のホログラムに含まれる可視光に反応する各ホログラムは、その同じ第1の屈折力をホログラムが反応する特定の可視光に印加してもよい。
表示目的のためにSLP及びホログラフィックコンバイナを用いるWHUDへの視標追跡機能の統合は、本システム、デバイス、及び方法によれば、多くの新規コンポーネントの大半を追加することとは対照的に、既存のハードウェアコンポーネントの大部分を目立たないように適合させることによって達成されてもよい。特に、i)赤外レーザダイオードはSLPに対してであってもよく(赤外ダイオードはプロジェクタにおいて可視光ダイオードとは無関係に変調される)、ii)赤外ホログラムは、ホログラフィックコンバイナに追加されてもよく(赤外ホログラムは、ホログラフィックコンバイナによって可視レーザ光に印加される比較的大きい屈折力とは対照的に、眼の全領域をカバーするために低い屈折力(ゼロ又は負の屈折力を含む)を赤外レーザ光に印加する)、そして、iii)少なくとも1つの赤外光検出器が、ユーザの眼からの赤外レーザ光の反射を監視するためにWHUDに追加されてもよい。
先に説明したように、波長多重化HOE830の第1のホログラム及び第2のホログラムの両方は、ホログラフィック材料(例えば、フィルム)の単一層内に、又は、その上に含まれていてもよく、若しくは、代替として、第1のホログラムはホログラフィック材料の第1の層内に、又は、その上に含まれていてもよく、第2のホログラムはホログラフィック材料の第2の層内に、又は、その上に含まれていてもよい。後者の場合、ホログラフィック材料の第1の層及びホログラフィック材料の第2の層は、直接若しくは幾つもの介在層/材料を介してのどちらか一方で、積層されるか、又はそうでなければ、共に層状に積み重ねられてもよい。
幾つかの実装において、波長多重化HOE830は、幾つもの層の上に分散される幾つもの追加ホログラムを含んでもよい。例えば、波長多重化HOE830は、可視レーザ光821の赤色成分に反応する第1のホログラムと、赤外レーザ光822に反応する第2のホログラムと、可視レーザ光821の緑色成分に反応する第3のホログラムと、可視レーザ光821の青色成分に反応する第4のホログラムとを含んでもよい。この構成において、第1、第3、及び第4のホログラムは、それぞれ、同じ第1の屈折力を各ホログラムが反応するそれぞれの可視光に印加してもよく、第2のホログラムは第2の屈折力を赤外光に印加してもよい。
本明細書中に説明した様々な実施形態は、視標追跡以外にも他の検知用途に対して用いられてもよい。例えば、本明細書中で可能にした高解像度及び高感度視標追跡は、眼の衝動性運動及び/又はユーザの心拍及び/又はユーザの血圧等の眼の運動の微妙な要因を抽出するために処理されてもよい。
視標追跡をSLPに統合することに対する1つの結果は、結果として生じる視標追跡能力が、SLP自体が動作している場合にのみ、動作することである。幾つかの状況において、SLPの電源がオフにされた場合でさえも、粗い視標追跡機能を提供することが望まれるかもしれない。この目的を達成するために、本明細書中に説明した様々な実施形態(例えば、図3、4、及び5に示した構成)は、ユーザが1つ以上の特定位置に視線を向けることによってSLPを起動することを可能にするよう、別体の視標追跡システム(図2に示したもの等)を任意選択的に含んでもよい。本システム、デバイス、及び方法のSLPに基づく視標追跡を用いてWHUDに組み合わせられてもよい適切な粗い、補助的な、若しくは、第2の視標追跡システムの例は、米国仮特許出願第62/281,041号明細書に説明されている。
本明細書及び添付の特許請求の範囲全体を通して、レーザモジュールを備えるレーザプロジェクタ(SLP又はその他)のように「レーザモジュール」に対して、参照が頻繁に行われている。特に特定の文脈が要求しない限り、用語「レーザモジュール」は、「少なくとも1つのレーザモジュール」を意味するよう大まかに解釈すべきであり、本明細書中に説明され、主張された様々な実装は、用いられた別個のレーザモジュールの多くに対して一般的なものである。例えば、SLPは幾つものレーザダイオードを含む単一のレーザモジュールを採用してもよく、又は、SLPは、それぞれが幾つものレーザダイオードを含む多数のレーザモジュール(又は、マルチチップレーザモジュール等のマルチチップモジュールに相当するレーザ)を採用してもよい。
本明細書及び添付の特許請求の範囲全体を通して、用語「約」は場合によっては特定の値又は量に関係して用いられる。例えば、「約10nm以下の帯域幅内の光」。特に特定の文脈が要求しない限り、用語約は概して±15%を意味する。
本明細書中に説明するWHUDは、ユーザの環境からデータを収集するための1つ以上のセンサ(例えば、マイクロフォン、カメラ、温度計、コンパス、及び/又はその他)を含んでいてもよい。例えば、1つ以上のカメラが用いられて、ウェアラブルヘッドアップディスプレイのプロセッサにフィードバックを提供し、透明ディスプレイ上のどこに任意の画像が表示されるべきかに影響を及ぼしてもよい。
本明細書中に説明するWHUDは、1つ以上のオンボード電源(例えば、1つ以上のバッテリ)、無線通信を送信/受信するための無線送受信機、及び/又は、コンピュータに結合及び/又は1つ以上のオンボード電源を充電するための有線式コネクタポートを含んでいてもよい。
本明細書及び添付の特許請求の範囲全体を通して、「通信経路」、「通信結合」内のような、及び、「通信可能に結合」等の変形内の用語「通信」は、情報を転送及び/又は交換するための何らかの工学的な配置を指すよう概して用いられる。例示の通信経路は、導電性経路(例えば、導電性ワイヤ、導電性トレース)、磁気経路(例えば、磁気媒体)、及び/又は光学経路(例えば、光ファイバ)を含むが、これらに限定されず、例示の通信結合は、電気結合、磁気結合、及び/又は光学的結合を含むが、これらに限定されない。
本明細書及び添付の特許請求の範囲全体を通して、不定動詞形を頻繁に使用する。例には、「to detect(検出する)」、「to provide(提供する)」、「to transmit(送信する)」、「to communicate(通信する)」、「to process(処理する)」、「to route(ルーティングする)」等を含むが、これらに限定されない。特定の文脈が特に必要としない限り、かかる不定動詞形は、すなわち、「少なくとも検出する」、「少なくとも提供する」、「少なくとも送信する」等のオープンな、包含的な感覚で用いられる。
要約書で説明されるものを含む図示の実施形態の上記説明は、開示する精確な形態に対して網羅又は制限する意図は無い。特定の実施形態及び実施例は、実例となる目的のために本明細書中で説明され、種々の同等の修正は、当業者によって認識されるように、開示の精神及び適用範囲から逸脱すること無く行うことができる。様々な実施形態の本明細書中で提供する教示は、上記で概して説明した例示のウェアラブル電子デバイスに限らず、他のポータブル及び/又はウェアラブル電子デバイスに適用することができる。
例えば、前記の詳細な説明は、ブロック図、略図、及び実施例を用いることにより、デバイス及び/又はプロセスの様々な実施形態を説明してきた。かかるブロック図、略図、及び実施例が1つ以上の機能及び/又は動作を含む限り、かかるブロック図、フロー図、及び実施例内の各機能及び/又は動作が、幅広いハードウェア、ソフトウェア、ファームウェア、又は、実質的にそれらの組み合わせによって、個々に、及び/又は、総体的に、実装できることは、当業者によって理解されるであろう。一実施形態において、本主題は、特定用途向け集積回路(ASIC)により実装されてもよい。しかし、当業者は、本明細書中で開示した実施形態が、全体又は一部として、1つ以上のコンピュータによって実行される1つ以上のコンピュータプログラムとして(例えば、1つ以上のコンピュータシステム上で動作する1つ以上のプログラムとして)、1つ以上のコントローラ(例えば、マイクロコントローラ)によって実行される1つ以上のプログラムとして、1つ以上のプロセッサ(例えば、マイクロプロセッサ、中央処理ユニット、グラフィック処理ユニット)によって実行される1つ以上のプログラムとして、ファームウェアとして、又は実質的な何らかのそれらの組み合わせとして、標準の集積回路において同等に実装できること、及び、回路を設計すること及び/又はソフトウェア及び/又はファームウェアのためのコードを記述することは、本開示の教示を踏まえて、当業者の技能により良好に行われることを認識するであろう。
ロジックがソフトウェアとして実装され、メモリに格納される場合、ロジック又は情報は、何らかのプロセッサ関連システム又は方法によって、又は、それに関連して使用するために何らかのプロセッサ読取可能媒体に格納できる。本開示の文脈において、メモリは、コンピュータ及び/又はプロセッサプログラムを含むか、格納する電子的、磁気的、光学的、又は他の物理的デバイス又は手段であるプロセッサ読取可能媒体である。ロジック及び/又は情報は、コンピュータベースのシステム、プロセッサを含むシステム、又は、命令実行システム、装置、又はデバイスからの命令を取り出し、ロジック及び/又は情報に関連する命令を実行することができる他のシステム等の命令実行システム、装置、又はデバイスによって、又は、それに関連して使用するために、何らかのプロセッサ読取可能媒体において具現化できる。
本明細書の文脈において、「非一時的プロセッサ読取可能媒体」は、命令実行システム、装置、及び/又はデバイスによって、又は、それに関連して使用するために、ロジック及び/又は情報に関連するプログラムを格納できる何らかの構成要素であってもよい。プロセッサ読取可能媒体は、例えば、電子的、磁気的、光学的、電磁的、赤外光、又は半導体システム、装置、又はデバイスであってもよいが、これらに限定されない。コンピュータ読取可能媒体のより詳細な実施例(限定的リスト)は以下を含む:ポータブルコンピュータディスケット(磁気、コンパクトフラッシュ(登録商標)カード、セキュアデジタル等)、ランダムアクセスメモリ(RAM)、読出し専用メモリ(ROM)、消去可能プログラマブル読出し専用メモリ(EPROM、EEPROM、又はフラッシュメモリ)、ポータブルコンパクトディスク読出し専用メモリ(CDROM)、デジタルテープ、及び他の非一時的媒体。
上記で説明した様々な実施形態は、更なる実施形態を提供するために組み合わされてもよい。本明細書中の特定の教示及び定義と一致しない程度に対して、Thalmic Labs Inc.が所有する、本明細書に引用し、及び/又は、出願データシートに挙げられた、以下を含むが、これらに限定されない米国特許、米国特許出願公開、米国特許出願、外国特許、外国特許出願、及び非特許文献:米国仮特許出願第62/167,767号明細書;米国仮特許出願第62/271,135号明細書;米国仮特許出願第62/017,089号明細書;米国仮特許出願第62/053,598号明細書;米国仮特許出願第62/117,316号明細書;米国仮特許出願第62/134,347号明細書(現在、米国非仮特許出願第15/070,887号明細書);米国仮特許出願第62/156,736号明細書;米国仮特許出願第62/242,844号明細書;米国特許出願公開US2015−0378164A1号明細書;米国特許出願公開US2015−0378161A1号明細書;米国特許出願公開US2015−0378162A1号明細書;米国非仮特許出願第15/145,576号明細書;米国非仮特許出願第15/145,609号明細書;米国非仮特許出願第15/145,583号明細書;米国非仮特許出願第15/046,234号明細書;米国非仮特許出願第15/046,254号明細書;米国非仮特許出願第15/046,269号明細書;米国仮特許出願第62/245,792号明細書;米国仮特許出願第62/214,600号明細書;米国仮特許出願第62/268,892号明細書;及び米国仮特許出願第62/281,041号明細書は、その全てを引用して、本明細書に組み込む。実施形態の態様は、必要であれば、更なる実施形態を提供するために、種々の特許、出願、及び公報のシステム、回路、及び概念を採用するよう変更してもよい。
これら及び他の変更は、上記詳細な説明を踏まえて、実施形態に行うことができる。一般に、以下の特許請求の範囲において、使用する用語は、特許請求の範囲を明細書及び特許請求の範囲に開示する特定の実施形態に制限するものと解釈すべきではないが、かかる特許請求の範囲が権利を受ける均等物の完全な適用範囲と共にすべての可能な実施形態を含むものと解釈すべきである。従って、特許請求の範囲は、開示によって制限されない。

Claims (22)

  1. 統合された視標追跡装置を有するレーザプロジェクタであって、
    赤外光を出力する赤外レーザダイオード及び可視光を出力する少なくとも1つの可視光レーザダイオードを含むレーザモジュールと、
    前記赤外光及び前記可視光の両方を受け、且つ、前記赤外光及び前記可視光の両方を制御可能に反射するよう、前記レーザモジュールの出力と位置調整される走査ミラーと、
    前記走査ミラーから反射された前記赤外光及び前記可視光の両方を受け、且つ、前記赤外光及び前記可視光の両方をユーザの眼に向け直すよう位置調整される波長多重化ホログラフィック光学素子(「HOE」)であって、前記可視光に反応し、前記赤外光に反応しない第1のホログラムと、前記赤外光に反応し、前記可視光に反応しない第2のホログラムとを含む波長多重化HOEと、
    前記ユーザの前記眼から反射された赤外光の少なくとも一部を受けるよう位置調整される赤外検出器と、を備える、
    レーザプロジェクタ。
  2. 前記波長多重化HOEは、ホログラフィック材料の少なくとも2つの異なる層、前記第1のホログラムを含むホログラフィック材料の第1の層及び前記第2のホログラムを含むホログラフィック材料の第2の層を備える、請求項1に記載のレーザプロジェクタ。
  3. 前記波長多重化HOEは、前記第1のホログラム及び前記第2のホログラムの両方を含むホログラフィック材料の単一ボリュームを備える、請求項1に記載のレーザプロジェクタ。
  4. 前記レーザモジュールにおける前記少なくとも1つの可視光レーザダイオードは、赤色レーザダイオード、緑色レーザダイオード、青色レーザダイオード、及び、赤色レーザダイオード、緑色レーザダイオード、及び/又は青色レーザダイオードの任意の組み合わせからなる群から選択される少なくとも1つの可視光レーザダイオードを含む、請求項1に記載のレーザプロジェクタ。
  5. 前記第1のホログラムは第1の屈折力を前記可視光に印加し、前記第2のホログラムは第2の屈折力を前記赤外光に印加し、前記第2の屈折力は前記第1の屈折力とは異なる、請求項1に記載のレーザプロジェクタ。
  6. 前記第1の屈折力は正の屈折力であり、前記第1の屈折力は前記第2の屈折力よりも大きい、請求項5に記載のレーザプロジェクタ。
  7. 前記第2の屈折力はゼロ以下である、請求項6に記載のレーザプロジェクタ。
  8. 更に、一対の眼鏡レンズの一般的形状及び外観を有する支持フレームを備え、前記レーザモジュール、前記走査ミラー、前記波長多重化HOE、及び前記赤外検出器は全て前記支持フレームによって担持され、前記波長多重化HOEは、環境光に対して略透明であり、前記支持フレームが前記ユーザの頭部に装着される場合に、前記ユーザの少なくとも1つの眼の視野内に位置決めされる、請求項1に記載のレーザプロジェクタ。
  9. ウェアラブルヘッドアップディスプレイ(「WHUD」)であって、
    使用中、ユーザの頭部に装着される支持フレームと、
    前記支持フレームによって担持されるレーザモジュールであって、赤外光を出力する赤外レーザダイオード及び可視光を出力する少なくとも1つの可視光レーザダイオードを含むレーザモジュールと、
    前記支持フレームによって担持され、且つ、前記レーザモジュールによって出力される前記赤外光及び前記可視光の両方を受け、前記赤外光及び前記可視光の両方を制御可能に反射するよう、前記レーザモジュールの出力と位置調整される走査ミラーと、
    前記支持フレームによって担持され、前記支持フレームが前記ユーザの前記頭部に装着される場合に、前記ユーザの少なくとも1つの眼の視野内部に位置決めされる波長多重化HOEであって、前記支持フレームが前記ユーザの頭部に装着される場合、前記走査ミラーから反射された前記赤外光及び前記可視光の両方を受け、且つ、前記赤外光及び前記可視光の両方を前記ユーザの前記少なくとも1つの眼に向け直すよう位置調整され、前記可視光に反応し、前記赤外光に反応しない第1のホログラムと、前記赤外光に反応し、前記可視光に反応しない第2のホログラムとを含み、そして、環境光に対して略透明である波長多重化HOEと、
    前記支持フレームによって担持され、前記支持フレームが前記ユーザの前記頭部に装着される場合に、前記ユーザの前記少なくとも1つの眼から反射される赤外光の少なくとも一部を受けるよう位置調整される赤外検出器と、を備える、
    ウェアラブルヘッドアップディスプレイ。
  10. 前記支持フレームは一対の眼鏡レンズの一般的形状及び外観を有する、請求項9に記載のWHUD。
  11. 前記波長多重化HOEは、ホログラフィック材料の少なくとも2つの異なる層、前記第1のホログラムを含むホログラフィック材料の第1の層及び前記第2のホログラムを含むホログラフィック材料の第2の層を備える、請求項9に記載のWHUD。
  12. 前記波長多重化HOEは、前記第1のホログラム及び前記第2のホログラムの両方を含むホログラフィック材料の単一ボリュームを備える、請求項9に記載のWHUD。
  13. 前記レーザモジュールにおける前記少なくとも1つの可視光レーザダイオードは、赤色レーザダイオード、緑色レーザダイオード、青色レーザダイオード、及び、赤色レーザダイオード、緑色レーザダイオード、及び/又は青色レーザダイオードの任意の組み合わせからなる群から選択される少なくとも1つの可視光レーザダイオードを含む、請求項9に記載のWHUD。
  14. 前記第1のホログラムは第1の屈折力を前記可視光に印加し、前記第2のホログラムは第2の屈折力を前記赤外光に印加し、前記第2の屈折力は前記第1の屈折力とは異なる、請求項9に記載のWHUD。
  15. 前記第1の屈折力は正の屈折力であり、前記第1の屈折力は前記第2の屈折力よりも大きい、請求項14に記載のWHUD。
  16. 前記第2の屈折力はゼロ以下である、請求項15に記載のWHUD。
  17. 画像をユーザの眼に投影し、且つ、前記ユーザの前記眼を追跡するようレーザプロジェクタを操作する方法であって、
    前記レーザプロジェクタの少なくとも第1のレーザダイオードによって可視光を出力することであって、前記可視光は前記画像の少なくとも一部を表すことと、
    前記レーザプロジェクタの赤外レーザダイオードによって赤外光を出力することと、
    前記レーザプロジェクタの走査ミラーによって前記可視光及び前記赤外光の両方を制御可能に、且つ、反射して走査することと、
    波長多重化HOEによって前記ユーザの前記眼に前記可視光及び前記赤外光の両方を向け直すことと、
    赤外光検出器によって前記ユーザの前記眼からの前記赤外光の少なくとも一部の反射を検出することと、
    前記赤外光検出器によって検出された前記ユーザの前記眼からの前記赤外光の少なくとも一部の反射に基づいて前記眼の少なくとも1つの特徴の位置を判断することと、を含む、
    方法。
  18. 波長多重化HOEによって前記ユーザの前記眼に前記可視光及び前記赤外光の両方を向け直すことは、
    前記波長多重化HOEの第1のホログラムによって第1の屈折力を前記可視光に印加することと、
    前記波長多重化HOEの第2のホログラムによって第2の屈折力を前記赤外光に印加することであって、前記第2の屈折力は前記第1の屈折力とは異なることと、を含む、請求項17に記載の方法。
  19. 前記波長多重化HOEの第1のホログラムによって第1の屈折力を前記可視光に印加することは、前記波長多重化HOEの前記第1のホログラムによって第1の正の屈折力を前記可視光に印加することを含み、前記波長多重化HOEの第2のホログラムによって第2の屈折力を前記赤外光に印加することは、前記波長多重化HOEの前記第2のホログラムによって前記第1の屈折力よりも小さい第2の屈折力を前記赤外光に印加することを含む、請求項18に記載の方法。
  20. 前記波長多重化HOEの前記第2のホログラムによって前記第1の屈折力よりも小さい第2の屈折力を前記赤外光に印加することは、前記波長多重化HOEの前記第2のホログラムによってゼロ以下の第2の屈折力を前記赤外光に印加することを含む、請求項19に記載の方法。
  21. 前記赤外光検出器によって検出された前記ユーザの前記眼からの前記赤外光の前記反射に基づいて前記眼の少なくとも1つの特徴の位置を判断することは、プロセッサによって前記ユーザの前記眼からの前記赤外光の前記反射に基づいて前記眼の少なくとも1つの特徴の前記位置を判断することを含む、請求項19に記載の方法。
  22. 前記レーザプロジェクタの少なくとも第1のレーザダイオードによって可視光を出力することは、
    前記レーザプロジェクタの赤色レーザダイオードによって赤色光を出力すること、
    前記レーザプロジェクタの緑色レーザダイオードによって緑色光を出力すること、及び/又は、
    前記レーザプロジェクタの青色レーザダイオードによって青色光を出力すること、のうちの少なくとも1つを含む、請求項19に記載の方法。
JP2017561261A 2015-05-28 2016-05-27 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法 Pending JP2018518709A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021184139A JP2022031715A (ja) 2015-05-28 2021-11-11 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562167767P 2015-05-28 2015-05-28
US62/167,767 2015-05-28
US201562271135P 2015-12-22 2015-12-22
US62/271,135 2015-12-22
PCT/US2016/034713 WO2016191709A1 (en) 2015-05-28 2016-05-27 Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021184139A Division JP2022031715A (ja) 2015-05-28 2021-11-11 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法

Publications (1)

Publication Number Publication Date
JP2018518709A true JP2018518709A (ja) 2018-07-12

Family

ID=57394258

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017561261A Pending JP2018518709A (ja) 2015-05-28 2016-05-27 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法
JP2021184139A Pending JP2022031715A (ja) 2015-05-28 2021-11-11 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021184139A Pending JP2022031715A (ja) 2015-05-28 2021-11-11 視標追跡及び走査レーザ投影をウェアラブルヘッドアップディスプレイに統合するシステム、デバイス、及び方法

Country Status (8)

Country Link
US (9) US10078220B2 (ja)
EP (1) EP3304172A4 (ja)
JP (2) JP2018518709A (ja)
KR (1) KR102474236B1 (ja)
CN (1) CN107710048A (ja)
AU (1) AU2016267275B2 (ja)
CA (1) CA2984138A1 (ja)
WO (1) WO2016191709A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210109008A (ko) * 2018-12-29 2021-09-03 후아웨이 테크놀러지 컴퍼니 리미티드 다초점 평면 디스플레이 시스템 및 장치
JP7465204B2 (ja) 2020-12-24 2024-04-10 株式会社Nttドコモ 眼鏡型画像表示装置
JP7467623B2 (ja) 2019-11-26 2024-04-15 マジック リープ, インコーポレイテッド 拡張または仮想現実ディスプレイシステムのための向上された眼追跡

Families Citing this family (131)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180048750A1 (en) * 2012-06-15 2018-02-15 Muzik, Llc Audio/video wearable computer system with integrated projector
US10528135B2 (en) 2013-01-14 2020-01-07 Ctrl-Labs Corporation Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
US9699433B2 (en) * 2013-01-24 2017-07-04 Yuchen Zhou Method and apparatus to produce re-focusable vision with detecting re-focusing event from human eye
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
US10188309B2 (en) 2013-11-27 2019-01-29 North Inc. Systems, articles, and methods for electromyography sensors
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
US9874744B2 (en) 2014-06-25 2018-01-23 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays
KR102617849B1 (ko) 2015-02-17 2023-12-26 구글 엘엘씨 웨어러블 헤드-업 디스플레이 내의 아이박스 확장을 위한 시스템, 장치, 및 방법
US9958682B1 (en) 2015-02-17 2018-05-01 Thalmic Labs Inc. Systems, devices, and methods for splitter optics in wearable heads-up displays
US10175488B2 (en) 2015-05-04 2019-01-08 North Inc. Systems, devices, and methods for spatially-multiplexed holographic optical elements
WO2016191709A1 (en) 2015-05-28 2016-12-01 Thalmic Labs Inc. Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays
WO2017041010A1 (en) 2015-09-04 2017-03-09 Thalmic Labs Inc. Systems, articles, and methods for integrating holographic optical elements with eyeglass lenses
CA3007196A1 (en) 2015-10-01 2017-04-06 Thalmic Labs Inc. Systems, devices, and methods for interacting with content displayed on head-mounted displays
US10437071B2 (en) * 2015-10-12 2019-10-08 North Inc. Adjustable pupil distance wearable display
US10409076B2 (en) * 2015-10-12 2019-09-10 North Inc. Adjustable pupil distance wearable display
US9904051B2 (en) 2015-10-23 2018-02-27 Thalmic Labs Inc. Systems, devices, and methods for laser eye tracking
US10802190B2 (en) 2015-12-17 2020-10-13 Covestro Llc Systems, devices, and methods for curved holographic optical elements
US10303246B2 (en) 2016-01-20 2019-05-28 North Inc. Systems, devices, and methods for proximity-based eye tracking
US10151926B2 (en) 2016-01-29 2018-12-11 North Inc. Systems, devices, and methods for preventing eyebox degradation in a wearable heads-up display
CA3020631A1 (en) 2016-04-13 2017-10-19 Thalmic Labs Inc. Systems, devices, and methods for focusing laser projectors
US20180003961A1 (en) * 2016-07-01 2018-01-04 Intel Corporation Gaze detection in head worn display
US20190121306A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation Systems and methods for identifying biological structures associated with neuromuscular source signals
US10277874B2 (en) 2016-07-27 2019-04-30 North Inc. Systems, devices, and methods for laser projectors
US10459221B2 (en) 2016-08-12 2019-10-29 North Inc. Systems, devices, and methods for variable luminance in wearable heads-up displays
WO2018057660A2 (en) * 2016-09-20 2018-03-29 Apple Inc. Augmented reality system
US10215987B2 (en) 2016-11-10 2019-02-26 North Inc. Systems, devices, and methods for astigmatism compensation in a wearable heads-up display
WO2018098579A1 (en) 2016-11-30 2018-06-07 Thalmic Labs Inc. Systems, devices, and methods for laser eye tracking in wearable heads-up displays
US10664049B2 (en) 2016-12-09 2020-05-26 Nvidia Corporation Systems and methods for gaze tracking
DE102016124538A1 (de) * 2016-12-15 2018-06-21 tooz technologies GmbH Datenbrille, Brillenglas für eine Datenbrille und Verfahren zum Generieren eines Bildes auf der Netzhaut
US10365492B2 (en) 2016-12-23 2019-07-30 North Inc. Systems, devices, and methods for beam combining in wearable heads-up displays
US10366674B1 (en) 2016-12-27 2019-07-30 Facebook Technologies, Llc Display calibration in electronic displays
US10437074B2 (en) 2017-01-25 2019-10-08 North Inc. Systems, devices, and methods for beam combining in laser projectors
EP3566091A4 (en) * 2017-02-17 2020-09-30 Cogni Trax METHOD AND SYSTEM FOR DISPLAYING IMAGES
CN106873159A (zh) 2017-02-27 2017-06-20 阿里巴巴集团控股有限公司 虚拟现实头戴设备
AU2018239359A1 (en) * 2017-03-21 2019-10-03 Magic Leap, Inc. Method and system for tracking eye movement in conjunction with a light scanning projector
JP7043048B2 (ja) * 2017-03-28 2022-03-29 株式会社Qdレーザ レーザモジュール及び画像投影装置
JP7043049B2 (ja) * 2017-03-28 2022-03-29 株式会社Qdレーザ レーザ投射装置
WO2018186046A1 (ja) * 2017-04-04 2018-10-11 国立大学法人福井大学 映像生成装置及び映像生成方法
US20180292896A1 (en) * 2017-04-06 2018-10-11 Intel Corporation Head-mounted display device
US20180307046A1 (en) * 2017-04-19 2018-10-25 Thalmic Labs Inc. Systems, devices, and methods for holographic optical elements
US10303248B2 (en) * 2017-04-28 2019-05-28 Microsoft Technology Licensing, Llc Eye tracking using scanned beam and multiple detectors
US20180373046A1 (en) * 2017-06-27 2018-12-27 Thalmic Labs Inc. Systems, devices, and methods for optical waveguides
WO2019006735A1 (en) * 2017-07-07 2019-01-10 Guangdong Virtual Reality Technology Co., Ltd. METHODS, DEVICES AND SYSTEMS FOR IDENTIFYING AND FOLLOWING AN OBJECT USING MULTIPLE CAMERAS
US11409105B2 (en) 2017-07-24 2022-08-09 Mentor Acquisition One, Llc See-through computer display systems
US11122256B1 (en) 2017-08-07 2021-09-14 Apple Inc. Mixed reality system
US10976811B2 (en) * 2017-08-11 2021-04-13 Microsoft Technology Licensing, Llc Eye-tracking with MEMS scanning and reflected light
CN107422474B (zh) * 2017-08-14 2020-12-01 京东方科技集团股份有限公司 一种光束扩展结构及光学显示模组
CN107515466B (zh) 2017-08-14 2019-11-26 华为技术有限公司 一种眼球追踪系统和眼球追踪方法
US10394034B2 (en) * 2017-08-15 2019-08-27 Microsoft Technology Licensing, Llc Eye-tracking with MEMS scanning and optical relay
US11589745B2 (en) 2017-09-05 2023-02-28 Neurolens, Inc. Method and system for measuring binocular alignment
US10420467B2 (en) * 2017-09-05 2019-09-24 eyeBrain Medical, Inc. Method and system for measuring binocular alignment
US11307656B2 (en) 2017-09-15 2022-04-19 Trustees Of Dartmouth College View-through sensors and apparatuses for tracking eye movement, and methods and software therefor
US10901216B2 (en) 2017-10-23 2021-01-26 Google Llc Free space multiple laser diode modules
US20190121139A1 (en) 2017-10-25 2019-04-25 North Inc. Free space multiple laser diode module with fast axis collimator
US10732427B2 (en) * 2017-11-20 2020-08-04 Microsoft Technology Licensing, Llc Eye-tracking system positioning diffractive couplers on waveguide
US11003134B2 (en) * 2017-11-30 2021-05-11 Google Llc Systems, devices, and methods for aperture-free hologram recording
US10571703B2 (en) * 2017-12-11 2020-02-25 North Inc. Wavelength combiner method using photonic integrated circuit with respective input facets for corresponding lasers
EP3514606A1 (en) * 2018-01-23 2019-07-24 BAE SYSTEMS plc Eye tracking for head-worn display
JP7187561B2 (ja) * 2017-12-21 2022-12-12 ビ-エイイ- システムズ パブリック リミテッド カンパニ- 頭部装着型ディスプレイのためのアイトラッキング
US10674141B1 (en) * 2018-01-23 2020-06-02 Facebook Technologies, Llc Apparatuses, systems, and methods for determining interpupillary distances of head-mounted displays
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US10627899B2 (en) * 2018-02-09 2020-04-21 Microsoft Technology Licensing, Llc Eye tracking system for use in a visible light display device
US10551914B2 (en) * 2018-02-09 2020-02-04 Microsoft Technology Licensing, Llc Efficient MEMs-based eye tracking system with a silicon photomultiplier sensor
JP6966075B2 (ja) * 2018-02-13 2021-11-10 国立大学法人福井大学 画像投影装置
US11042031B2 (en) * 2018-02-20 2021-06-22 Google Llc Eye tracking system and method, eyeglass lens, and wearable heads-up display
JP7109540B2 (ja) * 2018-05-30 2022-07-29 株式会社ソニー・インタラクティブエンタテインメント 画像表示システム
US10866634B2 (en) * 2018-06-19 2020-12-15 Sony Interactive Entertainment Inc. Eye tracking system with holographic film decoder
EP3586723A1 (en) * 2018-06-29 2020-01-01 Tobii AB Holographic eye imaging device
US20210263321A1 (en) * 2018-06-29 2021-08-26 Panacea Corp. Wearable smart optical system using hologram optical element
GB2575658B (en) * 2018-07-18 2020-12-23 Envisics Ltd Head-up display
CN108957753A (zh) * 2018-07-25 2018-12-07 上海乐相科技有限公司 一种头戴式显示设备
US10955677B1 (en) 2018-08-06 2021-03-23 Apple Inc. Scene camera
WO2020042843A1 (en) * 2018-08-27 2020-03-05 Shenzhen GOODIX Technology Co., Ltd. Eye tracking based on imaging eye features and assistance of structured illumination probe light
CN110603513B (zh) * 2018-08-27 2023-08-29 深圳市汇顶科技股份有限公司 一种眼睛跟踪设备及利用光学成像跟踪眼睛的方法
DE102018214637A1 (de) 2018-08-29 2020-03-05 Robert Bosch Gmbh Verfahren zum Ermitteln einer Blickrichtung eines Auges
EP3627194A1 (en) * 2018-09-20 2020-03-25 Essilor International An optical device with reduced reflection in deep red, near infrared and visible ranges
US11087701B1 (en) 2018-10-26 2021-08-10 Facebook Technologies, Llc Head mounted display with angle compensation
US11093034B2 (en) * 2018-11-01 2021-08-17 Google Llc Eye tracking method and system and integration of the same with wearable heads-up displays
DE102018220034B4 (de) * 2018-11-22 2021-10-21 Robert Bosch Gmbh Optische Kombinationsvorrichtung und Projektionssystem
CN113423341A (zh) 2018-11-27 2021-09-21 脸谱科技有限责任公司 用于可穿戴电极传感器系统的自动校准的方法和装置
US10838214B2 (en) 2018-12-14 2020-11-17 Facebook Technologies, Llc Angle compensating lens and display
US11409240B2 (en) 2018-12-17 2022-08-09 Meta Platforms Technologies, Llc Holographic pattern generation for head-mounted display (HMD) eye tracking using a diffractive optical element
US11281160B2 (en) 2018-12-17 2022-03-22 Facebook Technologies, Llc Holographic pattern generation for head-mounted display (HMD) eye tracking using a fiber exposure
US10942489B2 (en) 2018-12-17 2021-03-09 Facebook Technologies, Llc Wide-field holographic pattern generation for head-mounted display (HMD) eye tracking
US11256213B2 (en) 2018-12-17 2022-02-22 Facebook Technologies, Llc Holographic pattern generation for head-mounted display (HMD) eye tracking using an array of parabolic mirrors
US10816809B2 (en) * 2018-12-17 2020-10-27 Facebook Technologies, Llc Holographic in-field illuminator
US10838362B2 (en) 2018-12-17 2020-11-17 Facebook Technologies, Llc Holographic pattern generation for head-mounted display (HMD) eye tracking using a prism array
US10948873B2 (en) 2018-12-17 2021-03-16 Facebook Technologies, Llc Holographic pattern generation for head-mounted display (HMD) eye tracking using a lens array
US20190146223A1 (en) * 2018-12-21 2019-05-16 Tuotuo LI Multifocal dynamic lens for head mounted display
US11181979B2 (en) 2019-01-08 2021-11-23 Avegant Corp. Sensor-based eye-tracking using a holographic optical element
US10783819B1 (en) * 2019-01-22 2020-09-22 Facebook Technologies, Llc Digital color dispersion correction
US11624906B2 (en) * 2019-03-04 2023-04-11 Microsoft Technology Licensing, Llc IR illumination module for MEMS-based eye tracking
US10838489B2 (en) * 2019-03-04 2020-11-17 Microsoft Technology Licensing, Llc IR illumination module for MEMS-based eye tracking
US10832052B2 (en) 2019-03-04 2020-11-10 Microsoft Technology Licensing, Llc IR illumination module for MEMS-based eye tracking
US11353698B1 (en) 2019-05-29 2022-06-07 Facebook Technologies, Llc Dual Purkinje imaging with ellipsoidal lensing structure
US10860093B1 (en) * 2019-08-28 2020-12-08 GM Global Technology Operations LLC Eye location tracking device integrated with head-up display
US11822081B2 (en) * 2019-08-29 2023-11-21 Apple Inc. Optical module for head-mounted device
US20210068652A1 (en) * 2019-09-09 2021-03-11 Apple Inc. Glint-Based Gaze Tracking Using Directional Light Sources
US11885965B1 (en) 2019-09-23 2024-01-30 Apple Inc. Head-mounted display and display modules thereof
IL269809B (en) 2019-10-03 2021-12-01 Eyejets Ltd A compact retinal scanning device for tracking pupil movements of a user's eye and its applications
EP4066044A4 (en) * 2019-11-26 2023-12-27 Magic Leap, Inc. ENHANCED EYE TRACKING FOR AUGMENTED OR VIRTUAL REALITY DISPLAY SYSTEMS
DE112021000488T5 (de) 2020-01-09 2022-11-03 OSRAM Opto Semiconductors Gesellschaft mit beschränkter Haftung Verbesserungen der lichtdetektion mit halbleiter-fotodioden
US11209657B2 (en) 2020-01-24 2021-12-28 Valve Corporation Position tracking system for head-mounted display systems that includes angle sensitive detectors
US11073906B1 (en) 2020-01-27 2021-07-27 Valve Corporation Eye tracking system for head-mounted display devices
EP4100781A4 (en) 2020-02-03 2023-12-27 Valve Corporation SPATIAL VARIATION POLARIZER FOR DISPLAY BACKLIGHT
WO2021158971A1 (en) 2020-02-06 2021-08-12 Valve Corporation Micro-lens array polarization recycling optic for illumination optics
JP2023512877A (ja) 2020-02-06 2023-03-30 バルブ コーポレーション 空間変動偏光子を使用した視野ベースの光学補正
WO2021158679A1 (en) 2020-02-06 2021-08-12 Valve Corporation Spatially and time varying polarization correction optic for scan beam systems
EP4100782A4 (en) 2020-02-06 2024-03-06 Valve Corp VARIABLE OPTICAL CORRECTION USING SPATIAL VARIATION POLARIZERS
EP4100785A4 (en) 2020-02-06 2024-03-06 Valve Corp POLARIZATION MULTIPLEXED OPTICS FOR HEAD-MOUNTED DISPLAY SYSTEMS
WO2021158970A1 (en) 2020-02-06 2021-08-12 Valve Corporation Correction polarization compensation optic for display systems
CN114945854A (zh) 2020-02-06 2022-08-26 威尔乌集团 头戴式显示系统的位置跟踪系统
CN114868052A (zh) 2020-02-06 2022-08-05 威尔乌集团 头戴式显示系统的线栅偏振器的偏振补偿
JP2023512878A (ja) 2020-02-11 2023-03-30 バルブ コーポレーション 照明オプティクスのための回折素子の偏光ベース多重化
JP2023512887A (ja) 2020-02-11 2023-03-30 バルブ コーポレーション 高忠実度の表面キャラクタリゼーション測定用の偏光分析カメラ
WO2021188926A1 (en) 2020-03-20 2021-09-23 Magic Leap, Inc. Systems and methods for retinal imaging and tracking
US20220269079A1 (en) * 2020-04-01 2022-08-25 Google Llc Systems, devices, and methods for inputting light from a scanning projector into a waveguide
CN111708163B (zh) * 2020-04-26 2022-06-03 北京理工大学 具有眼动跟踪功能的抬头显示系统和方法
DE102020206451A1 (de) 2020-05-25 2021-11-25 Robert Bosch Gesellschaft mit beschränkter Haftung Optische Anordnung einer Datenbrille
KR20220036759A (ko) 2020-09-16 2022-03-23 삼성전자주식회사 다중 영상 디스플레이 장치
DE102021108354A1 (de) * 2021-04-01 2022-10-06 Carl Zeiss Jena Gmbh Holographische Projektionsvorrichtung
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof
US20220413603A1 (en) * 2021-06-25 2022-12-29 Microsoft Technology Licensing, Llc Multiplexed diffractive elements for eye tracking
US11662811B2 (en) * 2021-08-11 2023-05-30 GM Global Technology Operations LLC Holographic display system
CN114019679A (zh) * 2021-10-22 2022-02-08 小派科技(上海)有限责任公司 光学模组/系统、显示装置、头戴式显示设备和显示系统
CN113933998A (zh) * 2021-10-22 2022-01-14 小派科技(上海)有限责任公司 光学模组/系统、显示装置、头戴式显示设备和显示系统
WO2023191554A1 (ko) * 2022-03-31 2023-10-05 삼성전자 주식회사 투명 디스플레이를 구비한 웨어러블 장치 및 그 동작 방법
DE102022210271A1 (de) * 2022-09-28 2024-03-28 Robert Bosch Gesellschaft mit beschränkter Haftung Eye-Tracking-Vorrichtung, Datenbrille und Eye-Tracking-Verfahren
CN115933172B (zh) * 2022-11-29 2023-09-12 大连海事大学 一种基于偏振多光谱成像的人眼视线追踪装置及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003029198A (ja) * 2001-07-16 2003-01-29 Denso Corp スキャン型ディスプレイ装置
JP2007011057A (ja) * 2005-06-30 2007-01-18 Sony Corp 光学装置及び虚像表示装置
US20070109619A1 (en) * 2000-10-07 2007-05-17 Physoptics Opto-Electronic Gmbh Information system and method for providing information using a holographic element
JP2014038239A (ja) * 2012-08-17 2014-02-27 Seiko Epson Corp 画像表示装置および頭部装着型画像表示装置
WO2014155288A2 (en) * 2013-03-25 2014-10-02 Ecole Polytechnique Federale De Lausanne (Epfl) Method and apparatus for head worn display with multiple exit pupils

Family Cites Families (183)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001242411A (ja) 1999-05-10 2001-09-07 Asahi Glass Co Ltd ホログラム表示装置
US3408133A (en) 1964-01-23 1968-10-29 Electro Optical Systems Inc Kerr-cell camera shutter
US3712716A (en) 1971-04-09 1973-01-23 Stanford Research Inst Eye tracker
JPS61198892A (ja) 1985-02-27 1986-09-03 Nec Corp 表示装置
WO1989001756A1 (en) 1987-08-26 1989-03-09 El Hage Sami G Apparatus for determining the contour of the cornea of a human eye
US5231674A (en) 1989-06-09 1993-07-27 Lc Technologies, Inc. Eye tracking method and apparatus
US5103323A (en) 1990-04-18 1992-04-07 Holographic Optics, Inc. Multi-layer holographic notch filter
US5257094A (en) * 1991-07-30 1993-10-26 Larussa Joseph Helmet mounted display system
US5334991A (en) * 1992-05-15 1994-08-02 Reflection Technology Dual image head-mounted display
JP3151766B2 (ja) 1992-07-31 2001-04-03 キヤノン株式会社 画像表示装置
US5467104A (en) 1992-10-22 1995-11-14 Board Of Regents Of The University Of Washington Virtual retinal display
US5596339A (en) 1992-10-22 1997-01-21 University Of Washington Virtual retinal display with fiber optic point source
US6008781A (en) 1992-10-22 1999-12-28 Board Of Regents Of The University Of Washington Virtual retinal display
WO1994014098A1 (en) 1992-12-14 1994-06-23 Nippondenso Co., Ltd. Image display
JP3141737B2 (ja) 1995-08-10 2001-03-05 株式会社セガ 仮想画像生成装置及びその方法
US5742421A (en) 1996-03-01 1998-04-21 Reflection Technology, Inc. Split lens video display system
EP1808722A3 (en) * 1996-10-08 2007-07-25 The Microoptical Corporation Image Combining System for Eyeglasses and Face Masks
KR100227179B1 (ko) 1997-04-11 1999-10-15 박호군 고품질 반사형 홀로그래픽 광학 소자 제작 장치
JPH10319240A (ja) 1997-05-22 1998-12-04 Fuji Xerox Co Ltd ヘッドマウンテッドディスプレイ
JP3632392B2 (ja) * 1997-08-14 2005-03-23 富士ゼロックス株式会社 網膜ディスプレイ装置
US6027216A (en) 1997-10-21 2000-02-22 The Johns University School Of Medicine Eye fixation monitor and tracker
US6139146A (en) 1997-12-29 2000-10-31 Novartis Ag Programmable corrective lenses
US6043799A (en) 1998-02-20 2000-03-28 University Of Washington Virtual retinal display with scanner array for generating multiple exit pupils
US6396461B1 (en) * 1998-08-05 2002-05-28 Microvision, Inc. Personal display with vision tracking
JP2002525769A (ja) 1998-09-22 2002-08-13 ヴェガ ヴィスタ インコーポレイテッド 携帯型データディスプレイの直接的コントロール方法
US7640007B2 (en) 1999-02-12 2009-12-29 Fisher-Rosemount Systems, Inc. Wireless handheld communicator in a process control environment
US6972734B1 (en) 1999-06-11 2005-12-06 Canon Kabushiki Kaisha Mixed reality apparatus and mixed reality presentation method
JP2003502711A (ja) 1999-06-21 2003-01-21 ザ マイクロオプティカル コーポレイション 軸から外れている光学設計を使用する接眼レンズ・ディスプレイ・レンズ・システム
US6924476B2 (en) 2002-11-25 2005-08-02 Microvision, Inc. Resonant beam scanner with raster pinch compensation
JP4168221B2 (ja) 1999-09-06 2008-10-22 株式会社島津製作所 身体装着型表示システム
JP3828328B2 (ja) * 1999-12-28 2006-10-04 ローム株式会社 ヘッドマウントディスプレー
AU2001234987A1 (en) 2000-02-10 2001-08-20 Digilens Inc. Switchable hologram and method of producing the same
US6330064B1 (en) 2000-03-13 2001-12-11 Satcon Technology Corporation Doubly-differential interferometer and method for evanescent wave surface detection
US6443900B2 (en) 2000-03-15 2002-09-03 Olympus Optical Co., Ltd. Ultrasonic wave transducer system and ultrasonic wave transducer
US6813085B2 (en) 2000-06-26 2004-11-02 Angus Duncan Richards Virtual reality display device
US20020093701A1 (en) 2000-12-29 2002-07-18 Xiaoxiao Zhang Holographic multifocal lens
US20020120916A1 (en) 2001-01-16 2002-08-29 Snider Albert Monroe Head-up display system utilizing fluorescent material
GB0212011D0 (en) * 2002-05-24 2002-07-03 Univ Heriot Watt Process for fabricating a security device
KR100495326B1 (ko) 2002-07-13 2005-06-14 삼성아이텍 주식회사 캐스팅 방식에 의한 내구성 편광렌즈의 제조방법 및제조도구
SE524003C2 (sv) 2002-11-21 2004-06-15 Tobii Technology Ab Förfarande och anläggning för att detektera och följa ett öga samt dess blickvinkel
US20040174287A1 (en) 2002-11-21 2004-09-09 Deak David G. Self-contained switch
WO2004049037A1 (ja) 2002-11-27 2004-06-10 Brother Kogyo Kabushiki Kaisha 画像表示装置
EP1634155A2 (en) 2003-06-12 2006-03-15 Control Bionics Method, system, and software for interactive communication and analysis
GB2407378B (en) 2003-10-24 2006-09-06 Lein Applied Diagnostics Ltd Ocular property measuring apparatus and method therefor
CN100410727C (zh) 2004-03-29 2008-08-13 索尼株式会社 光学装置以及虚像显示装置
WO2006056810A2 (en) 2004-11-24 2006-06-01 Ver-Tec Security Systems Limited Holograms and hologram fabrication methods and apparatus
US7684105B2 (en) 2005-02-24 2010-03-23 National Research Council Of Canada Microblinds and a method of fabrication thereof
US7773111B2 (en) 2005-03-16 2010-08-10 Lc Technologies, Inc. System and method for perceived image processing in a gaze tracking system
US20070132785A1 (en) 2005-03-29 2007-06-14 Ebersole John F Jr Platform for immersive gaming
JP2007058095A (ja) 2005-08-26 2007-03-08 Fujifilm Corp ホログラム記録方法、ホログラム記録材料、光記録媒体、光記録媒体への記録方法、3dディスプレイホログラム、及び3dディスプレイホログラムの製造方法
US9681800B2 (en) 2005-10-27 2017-06-20 The Arizona Board Of Regents On Behalf Of The University Of Arizona Holographic adaptive see-through phoropter
KR20090025234A (ko) 2006-05-12 2009-03-10 시리얼 테크놀로지즈 에스.에이. 반사 광학 시스템, 트래킹 시스템 및 홀로그래픽 투영 시스템 및 방법
EP1905996B1 (de) * 2006-09-26 2011-01-05 ThyssenKrupp Metalúrgica Campo Limpo Ltda. Verfahren zum Herstellen eines Kolbens für Verbrennungsmotoren und Kolben für einen Verbrennungsmotor
GB0622325D0 (en) 2006-11-09 2006-12-20 Optos Plc Improvements in or relating to retinal scanning
DE102007005823A1 (de) * 2007-01-31 2008-08-07 Seereal Technologies S.A. Optische Wellenfrontkorrektur für ein holographisches Projektionssystem
WO2009014086A1 (ja) 2007-07-25 2009-01-29 Hoya Corporation プラスチックレンズの製造方法
US7925100B2 (en) 2007-07-31 2011-04-12 Microsoft Corporation Tiled packaging of vector image data
JP5216761B2 (ja) 2007-09-26 2013-06-19 パナソニック株式会社 ビーム走査型表示装置
CN101874222B (zh) 2007-10-25 2012-09-26 欧球眼镜股份有限公司 偏光镜和偏光镜制法
JP4989417B2 (ja) 2007-10-26 2012-08-01 キヤノン株式会社 画像表示システム、画像表示装置及びその制御方法、コンピュータプログラム
JP2009134276A (ja) * 2007-11-05 2009-06-18 Panasonic Corp 表示装置、表示方法、表示プログラム、集積回路、眼鏡型ヘッドマウントディスプレイ、自動車、単眼鏡、及び据置型ディスプレイ
US8355671B2 (en) 2008-01-04 2013-01-15 Kopin Corporation Method and apparatus for transporting video signal over Bluetooth wireless interface
JP5094430B2 (ja) 2008-01-10 2012-12-12 キヤノン株式会社 画像処理方法、画像処理装置、システム
US20100149073A1 (en) 2008-11-02 2010-06-17 David Chaum Near to Eye Display System and Appliance
US8023571B2 (en) 2008-04-15 2011-09-20 Hong Nie Impulse ultra-wideband radio communication system
EP2138886A3 (en) 2008-06-25 2011-10-05 Samsung Electronics Co., Ltd. Compact virtual display
US9037530B2 (en) 2008-06-26 2015-05-19 Microsoft Technology Licensing, Llc Wearable electromyography-based human-computer interface
US7736000B2 (en) 2008-08-27 2010-06-15 Locarna Systems, Inc. Method and apparatus for tracking eye movement
US7850306B2 (en) 2008-08-28 2010-12-14 Nokia Corporation Visual cognition aware display and visual data transmission architecture
US8922898B2 (en) 2008-09-04 2014-12-30 Innovega Inc. Molded lens with nanofilaments and related methods
US10274660B2 (en) * 2008-11-17 2019-04-30 Luminit, Llc Holographic substrate-guided wave-based see-through display
JP4780186B2 (ja) 2008-12-09 2011-09-28 ソニー株式会社 ホログラム記録フィルム及びその製造方法、並びに、画像表示装置
US8965152B2 (en) * 2008-12-12 2015-02-24 Bae Systems Plc Waveguides
GB0902468D0 (en) 2009-02-16 2009-04-01 Light Blue Optics Ltd Optical systems
EP2465004A2 (en) 2009-08-13 2012-06-20 BAE Systems PLC Head up display system
US8233204B1 (en) 2009-09-30 2012-07-31 Rockwell Collins, Inc. Optical displays
KR20110050929A (ko) * 2009-11-09 2011-05-17 삼성전자주식회사 착용형 디스플레이장치
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
GB201004346D0 (en) * 2010-03-16 2010-04-28 Qinetiq Ltd Eye tracking apparatus
JP2013127489A (ja) 2010-03-29 2013-06-27 Panasonic Corp シースルーディスプレイ
WO2011135848A1 (ja) 2010-04-28 2011-11-03 パナソニック株式会社 走査型画像表示装置
US8634119B2 (en) 2010-07-09 2014-01-21 Tipd, Llc System for holography
US9135708B2 (en) 2010-08-09 2015-09-15 National University Corporation Shizuoka University Gaze point detection method and gaze point detection device
JP5953311B2 (ja) 2010-11-08 2016-07-20 シーリアル テクノロジーズ ソシエテ アノニムSeereal Technologies S.A. 表示装置
US20120182309A1 (en) 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
US8666212B1 (en) 2011-04-28 2014-03-04 Google Inc. Head mounted display using a fused fiber bundle
US8760499B2 (en) 2011-04-29 2014-06-24 Austin Russell Three-dimensional imager and projection device
US8510166B2 (en) 2011-05-11 2013-08-13 Google Inc. Gaze tracking system
KR101252169B1 (ko) 2011-05-27 2013-04-05 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
US20130198694A1 (en) 2011-06-10 2013-08-01 Aliphcom Determinative processes for wearable devices
US20130009853A1 (en) 2011-07-05 2013-01-10 The Board Of Trustees Of The Leland Stanford Junior University Eye-glasses mounted display
US8817379B2 (en) 2011-07-12 2014-08-26 Google Inc. Whole image scanning mirror display system
US8179604B1 (en) 2011-07-13 2012-05-15 Google Inc. Wearable marker for passive interaction
US8471967B2 (en) 2011-07-15 2013-06-25 Google Inc. Eyepiece for near-to-eye display with multi-reflectors
EP2748670B1 (en) 2011-08-24 2015-11-18 Rockwell Collins, Inc. Wearable data display
CN103814325A (zh) 2011-08-31 2014-05-21 皇家飞利浦有限公司 光控制面板
US8767306B1 (en) * 2011-09-22 2014-07-01 Google Inc. Display system
US8998414B2 (en) * 2011-09-26 2015-04-07 Microsoft Technology Licensing, Llc Integrated eye tracking and display system
US20130088413A1 (en) 2011-10-05 2013-04-11 Google Inc. Method to Autofocus on Near-Eye Display
US8934160B2 (en) 2011-10-25 2015-01-13 National Central University Optical head-mounted display with mechanical one-dimensional scanner
KR101167094B1 (ko) * 2011-10-26 2012-07-20 한국 천문 연구원 Eo 및 ir 겸용 광학장치
US8704882B2 (en) 2011-11-18 2014-04-22 L-3 Communications Corporation Simulated head mounted display system and method
US8611015B2 (en) * 2011-11-22 2013-12-17 Google Inc. User interface
JP5906692B2 (ja) 2011-11-29 2016-04-20 セイコーエプソン株式会社 表示装置
US8235529B1 (en) 2011-11-30 2012-08-07 Google Inc. Unlocking a screen using eye tracking information
TWI446896B (zh) 2011-12-23 2014-08-01 Ind Tech Res Inst 肌能參數感測器
US10013053B2 (en) 2012-01-04 2018-07-03 Tobii Ab System for gaze interaction
US8971023B2 (en) 2012-03-21 2015-03-03 Google Inc. Wearable computing device frame
JP5464219B2 (ja) 2012-02-03 2014-04-09 株式会社デンソー 車両用ヘッドアップディスプレイ装置
US9297996B2 (en) * 2012-02-15 2016-03-29 Microsoft Technology Licensing, Llc Laser illumination scanning
US8970571B1 (en) 2012-03-13 2015-03-03 Google Inc. Apparatus and method for display lighting adjustment
US9158113B2 (en) * 2012-03-14 2015-10-13 Google Inc. Integrated display and photosensor
CN104169778A (zh) 2012-03-15 2014-11-26 松下电器产业株式会社 光学反射元件和致动器
US8922481B1 (en) 2012-03-16 2014-12-30 Google Inc. Content annotation
US9116545B1 (en) * 2012-03-21 2015-08-25 Hayes Solos Raffle Input detection
US8994672B2 (en) 2012-04-09 2015-03-31 Sony Corporation Content transfer via skin input
KR20130121303A (ko) 2012-04-27 2013-11-06 한국전자통신연구원 원거리 시선 추적 시스템 및 방법
US8746898B2 (en) 2012-05-07 2014-06-10 Microvision, Inc. Projector with shutter
US20130332196A1 (en) 2012-06-07 2013-12-12 The Government Of The United States As Represented By The Secretary Of The Army Diabetes Monitoring Using Smart Device
US9398229B2 (en) 2012-06-18 2016-07-19 Microsoft Technology Licensing, Llc Selective illumination of a region within a field of view
US8754829B2 (en) * 2012-08-04 2014-06-17 Paul Lapstun Scanning light field camera and display
US9250445B2 (en) * 2012-08-08 2016-02-02 Carol Ann Tosaya Multiple-pixel-beam retinal displays
US9729687B2 (en) 2012-08-10 2017-08-08 Silverplus, Inc. Wearable communication device
WO2014033306A1 (en) * 2012-09-03 2014-03-06 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Head mounted system and method to compute and render a stream of digital images using a head mounted system
US9338370B2 (en) 2012-11-05 2016-05-10 Honeywell International Inc. Visual system having multiple cameras
KR101984590B1 (ko) 2012-11-14 2019-05-31 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US10528135B2 (en) 2013-01-14 2020-01-07 Ctrl-Labs Corporation Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
JP2014142423A (ja) 2013-01-22 2014-08-07 Denso Corp ヘッドアップディスプレイ装置
US20150362734A1 (en) 2013-01-28 2015-12-17 Ecole Polytechnique Federale De Lausanne (Epfl) Transflective holographic film for head worn display
US9223139B2 (en) 2013-02-15 2015-12-29 Google Inc. Cascading optics in optical combiners of head mounted displays
US9223152B1 (en) * 2013-02-15 2015-12-29 Google Inc. Ambient light optics for head mounted display
US9392129B2 (en) 2013-03-15 2016-07-12 John Castle Simmons Light management for image and data control
KR102082702B1 (ko) * 2013-03-28 2020-02-28 엘지전자 주식회사 레이저 영상표시장치
CN104321682B (zh) * 2013-03-28 2017-09-22 松下知识产权经营株式会社 图像显示装置
KR102043200B1 (ko) 2013-05-07 2019-11-11 엘지전자 주식회사 스마트 워치 및 제어 방법
US20150036221A1 (en) 2013-08-04 2015-02-05 Robert S. Stephenson Wide-field head-up display (HUD) eyeglasses
CA2921104C (en) 2013-09-04 2022-04-26 Amandine DEBIEUVRE Navigation method based on a see-through head-mounted device
EP3074923A4 (en) * 2013-11-27 2017-07-05 Shenzhen Huiding Technology Co., Ltd. Eye tracking and user reaction detection
AU2014354673B2 (en) 2013-11-27 2019-04-11 Magic Leap, Inc. Virtual and augmented reality systems and methods
US8958158B1 (en) 2013-12-03 2015-02-17 Google Inc. On-head detection for head-mounted display
US9360935B2 (en) * 2013-12-20 2016-06-07 Hong Kong Applied Science And Technology Research Institute Co. Ltd. Integrated bi-sensing optical structure for head mounted display
US20170139209A9 (en) * 2014-01-06 2017-05-18 Avegant Corp. System, method, and apparatus for displaying an image using a curved mirror and partially transparent plate
KR102227284B1 (ko) * 2014-01-16 2021-03-12 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US20150205134A1 (en) 2014-01-17 2015-07-23 Thalmic Labs Inc. Systems, articles, and methods for wearable heads-up displays
US9766463B2 (en) 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
US20150205135A1 (en) * 2014-01-21 2015-07-23 Osterhout Group, Inc. See-through computer display systems
US9494800B2 (en) * 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
WO2015123775A1 (en) 2014-02-18 2015-08-27 Sulon Technologies Inc. Systems and methods for incorporating a real image stream in a virtual image stream
WO2015131009A1 (en) * 2014-02-28 2015-09-03 The Johns Hopkins University Eye alignment monitor and method
EP3114525A4 (en) * 2014-03-03 2018-03-07 Eyeway Vision Ltd. Eye projection system
WO2015143073A1 (en) * 2014-03-19 2015-09-24 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods integrating eye gaze tracking for stereo viewer
US9804753B2 (en) 2014-03-20 2017-10-31 Microsoft Technology Licensing, Llc Selection using eye gaze evaluation over time
EP3126896A1 (en) * 2014-03-28 2017-02-08 Alma Mater Studiorum - Università di Bologna Augmented reality glasses for medical applications and corresponding augmented reality system
US20150325202A1 (en) 2014-05-07 2015-11-12 Thalmic Labs Inc. Systems, devices, and methods for wearable computers with heads-up displays
US9874744B2 (en) 2014-06-25 2018-01-23 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays
US9958680B2 (en) * 2014-09-30 2018-05-01 Omnivision Technologies, Inc. Near-eye display device and methods with coaxial eye imaging
US9541998B2 (en) * 2015-01-29 2017-01-10 Samsung Electronics Co., Ltd. Electronic system with gaze alignment mechanism and method of operation thereof
KR102617849B1 (ko) 2015-02-17 2023-12-26 구글 엘엘씨 웨어러블 헤드-업 디스플레이 내의 아이박스 확장을 위한 시스템, 장치, 및 방법
US9652047B2 (en) 2015-02-25 2017-05-16 Daqri, Llc Visual gestures for a head mounted device
JP6520209B2 (ja) 2015-02-27 2019-05-29 セイコーエプソン株式会社 画像表示装置
KR101734094B1 (ko) * 2015-03-09 2017-05-11 국립암센터 증강현실영상 투영 시스템
US20160274365A1 (en) 2015-03-17 2016-09-22 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays with heterogeneous display quality
US20160274758A1 (en) 2015-03-20 2016-09-22 Thalmic Labs Inc. Systems, devices, and methods for mitigating false positives in human-electronics interfaces
JP2016188907A (ja) * 2015-03-30 2016-11-04 セイコーエプソン株式会社 体積ホログラフィック素子、体積ホログラフィック素子の製造方法、および表示装置
US10078435B2 (en) 2015-04-24 2018-09-18 Thalmic Labs Inc. Systems, methods, and computer program products for interacting with electronically displayed presentation materials
EP3147699B1 (en) 2015-04-30 2020-11-04 Sony Corporation Display apparatus
US10175488B2 (en) 2015-05-04 2019-01-08 North Inc. Systems, devices, and methods for spatially-multiplexed holographic optical elements
WO2016191709A1 (en) 2015-05-28 2016-12-01 Thalmic Labs Inc. Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays
WO2017041010A1 (en) 2015-09-04 2017-03-09 Thalmic Labs Inc. Systems, articles, and methods for integrating holographic optical elements with eyeglass lenses
CA3007196A1 (en) 2015-10-01 2017-04-06 Thalmic Labs Inc. Systems, devices, and methods for interacting with content displayed on head-mounted displays
US9904051B2 (en) 2015-10-23 2018-02-27 Thalmic Labs Inc. Systems, devices, and methods for laser eye tracking
US20170153701A1 (en) 2015-12-01 2017-06-01 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays as wireless controllers
US20170212290A1 (en) 2015-12-17 2017-07-27 Thalmic Labs Inc. Systems, devices, and methods for curved holographic optical elements
US9693029B1 (en) 2015-12-22 2017-06-27 Microvision, Inc. System and method for feedback control in scanning projectors
US10303246B2 (en) 2016-01-20 2019-05-28 North Inc. Systems, devices, and methods for proximity-based eye tracking
US10151926B2 (en) 2016-01-29 2018-12-11 North Inc. Systems, devices, and methods for preventing eyebox degradation in a wearable heads-up display
CA3020631A1 (en) 2016-04-13 2017-10-19 Thalmic Labs Inc. Systems, devices, and methods for focusing laser projectors
EP3479564A1 (en) 2016-06-30 2019-05-08 Thalmic Labs Inc. Image capture systems, devices, and methods that autofocus based on eye-tracking
US10277874B2 (en) 2016-07-27 2019-04-30 North Inc. Systems, devices, and methods for laser projectors
US10459221B2 (en) 2016-08-12 2019-10-29 North Inc. Systems, devices, and methods for variable luminance in wearable heads-up displays
US20180129055A1 (en) 2016-11-10 2018-05-10 Thalmic Labs Inc. Systems, devices, and methods for field shaping in wearable heads-up display
US10215987B2 (en) 2016-11-10 2019-02-26 North Inc. Systems, devices, and methods for astigmatism compensation in a wearable heads-up display
US20180129054A1 (en) 2016-11-10 2018-05-10 Thalmic Labs Inc. Systems, devices, and methods for beam shaping in a wearable heads-up display

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070109619A1 (en) * 2000-10-07 2007-05-17 Physoptics Opto-Electronic Gmbh Information system and method for providing information using a holographic element
JP2003029198A (ja) * 2001-07-16 2003-01-29 Denso Corp スキャン型ディスプレイ装置
JP2007011057A (ja) * 2005-06-30 2007-01-18 Sony Corp 光学装置及び虚像表示装置
JP2014038239A (ja) * 2012-08-17 2014-02-27 Seiko Epson Corp 画像表示装置および頭部装着型画像表示装置
WO2014155288A2 (en) * 2013-03-25 2014-10-02 Ecole Polytechnique Federale De Lausanne (Epfl) Method and apparatus for head worn display with multiple exit pupils

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210109008A (ko) * 2018-12-29 2021-09-03 후아웨이 테크놀러지 컴퍼니 리미티드 다초점 평면 디스플레이 시스템 및 장치
JP2022515547A (ja) * 2018-12-29 2022-02-18 華為技術有限公司 多焦点平面ディスプレイシステム及び装置
JP7167348B2 (ja) 2018-12-29 2022-11-08 華為技術有限公司 多焦点平面ディスプレイシステム及び装置
KR102584692B1 (ko) * 2018-12-29 2023-10-05 후아웨이 테크놀러지 컴퍼니 리미티드 다초점 평면 디스플레이 시스템 및 장치
JP7467623B2 (ja) 2019-11-26 2024-04-15 マジック リープ, インコーポレイテッド 拡張または仮想現実ディスプレイシステムのための向上された眼追跡
JP7465204B2 (ja) 2020-12-24 2024-04-10 株式会社Nttドコモ 眼鏡型画像表示装置

Also Published As

Publication number Publication date
JP2022031715A (ja) 2022-02-22
KR102474236B1 (ko) 2022-12-05
US10073268B2 (en) 2018-09-11
US10078220B2 (en) 2018-09-18
KR20180003629A (ko) 2018-01-09
US20180067322A1 (en) 2018-03-08
EP3304172A4 (en) 2019-01-02
US10180578B2 (en) 2019-01-15
US10114222B2 (en) 2018-10-30
EP3304172A1 (en) 2018-04-11
US20180136469A1 (en) 2018-05-17
CA2984138A1 (en) 2016-12-01
WO2016191709A1 (en) 2016-12-01
US20180067323A1 (en) 2018-03-08
AU2016267275B2 (en) 2021-07-01
US10488661B2 (en) 2019-11-26
US10078219B2 (en) 2018-09-18
US10534182B2 (en) 2020-01-14
US20180067321A1 (en) 2018-03-08
US20160349514A1 (en) 2016-12-01
US10139633B2 (en) 2018-11-27
CN107710048A (zh) 2018-02-16
US20190004322A1 (en) 2019-01-03
US20160349516A1 (en) 2016-12-01
US20160349515A1 (en) 2016-12-01
US10429655B2 (en) 2019-10-01
US20190004323A1 (en) 2019-01-03
AU2016267275A1 (en) 2017-11-30

Similar Documents

Publication Publication Date Title
US10534182B2 (en) Optical splitter for integrated eye tracking and scanning laser projection in wearable heads-up displays
US10459220B2 (en) Systems, devices, and methods for laser eye tracking in wearable heads-up displays
US11042031B2 (en) Eye tracking system and method, eyeglass lens, and wearable heads-up display
US11828946B2 (en) Systems and methods for retinal imaging and tracking
JP6641361B2 (ja) 切換え式回折格子を利用した導波路アイトラッキング
US8767306B1 (en) Display system
US20230087535A1 (en) Wavefront sensing from retina-reflected light
US11205069B1 (en) Hybrid cornea and pupil tracking
US11617508B2 (en) Eye-tracking fundus imaging system
US11782279B2 (en) High efficiency pancake lens
US11579425B1 (en) Narrow-band peripheral see-through pancake lens assembly and display device with same
CN117242387A (zh) 高效率薄饼透镜

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190522

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200407

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20200707

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20200901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201007

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20201007

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20210422

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210614

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210712