JP6250547B2 - ３次元仮想現実および拡張現実表示システム - Google Patents

３次元仮想現実および拡張現実表示システム Download PDF

Info

Publication number
JP6250547B2
JP6250547B2 JP2014543465A JP2014543465A JP6250547B2 JP 6250547 B2 JP6250547 B2 JP 6250547B2 JP 2014543465 A JP2014543465 A JP 2014543465A JP 2014543465 A JP2014543465 A JP 2014543465A JP 6250547 B2 JP6250547 B2 JP 6250547B2
Authority
JP
Japan
Prior art keywords
eye
projection device
image
viewer
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014543465A
Other languages
English (en)
Other versions
JP2015501101A5 (ja
JP2015501101A (ja
Inventor
ジョン グラハム マクナマラ，
ジョン グラハム マクナマラ，
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magic Leap Inc
Original Assignee
Magic Leap Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magic Leap Inc filed Critical Magic Leap Inc
Publication of JP2015501101A publication Critical patent/JP2015501101A/ja
Publication of JP2015501101A5 publication Critical patent/JP2015501101A5/ja
Application granted granted Critical
Publication of JP6250547B2 publication Critical patent/JP6250547B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/39—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34—Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
    • G02B30/52—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels the 3D volume being constructed from a stack or sequence of 2D planes, e.g. depth sampling systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1876—Diffractive Fresnel lenses; Zone plates; Kinoforms
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/08—Stereoscopic photography by simultaneous recording
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/18—Stereoscopic photography by simultaneous viewing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/18—Diffraction gratings
    • G02B5/1828—Diffraction gratings having means for producing variable diffraction

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)
  • User Interface Of Digital Computer (AREA)

Description

（関連出願データ）
本願は、米国特許法§１１９のもと、米国仮特許出願第６１／５６３，４０３号（２０１１年１１月２３日出願）の利益を主張する。これによって、上述の出願は、その全体が本願に参照によって援用される。
（発明の分野）
本発明は、仮想現実および拡張現実画像化および可視化システムに関する。
（背景）
３Ｄディスプレイが、真の深度感、より具体的には、模擬表面深度感をもたらすために、ディスプレイの視野内の各点が、その仮想深度に対応する適応的応答を生成することが望ましい。ディスプレイ点への適応的応答が、輻輳および立体視の双眼深度の手かがりによって決定されるような、その点の仮想深度に対応しない場合、人間の眼は、適応対立を被り得、不安定な結像、有害な眼精疲労、頭痛、および適応情報がない場合は、表面深度の完全な欠如をもたらす。図１を参照すると、拡張現実シナリオ（８）が、ユーザの現実内の実際のオブジェクト（例えば、公園設定におけるコンクリート台座オブジェクト（１１２０）を含む結像アイテム）についてのユーザの眺め、および、「拡張」現実の眺めをもたらすように眺めの中に追加された仮想オブジェクトの眺めとともに描写されている。ここでは、ロボット像（１１１０）が、台座オブジェクト（１１２０）の上に仮想的に立って示され、ハチのキャラクタ（２）がユーザの頭部付近で空中を飛んで示されている。好ましくは、拡張現実システムは、３Ｄ能力があり、その場合、像（１１１０）が台座（１１２０）の上に立っていて、かつ、ハチのキャラクタ（２）がユーザの頭部の近くを飛んでいるという知覚をユーザに提供する。この知覚は、視覚オブジェクト（２、１１１０）が異なる焦点深度を有し、ロボット像（１１１０）の焦点深度または焦点半径が台座（１１２０）のものとほぼ同一であるという、ユーザの眼および脳への視覚適応手かがりを利用することによって大きく増進され得る。図２で描写されるもの等の従来の立体３Ｄシミュレーション表示システムは、典型的には、一定の半径方向焦点距離（１０）で、各眼に１つずつ、２つのディスプレイ（７４、７６）を有する。上記のように、この従来の技術は、３次元における深度を検出して解釈するために人間の眼によって利用される、有益な手掛かり（眼に関する異なる焦点深度に到達するための眼球複合体内の水晶体についての眼の再配置と関連付けられる適応手がかりを含む）の多くが欠けている。人間の眼／脳の画像処理複合体の適応局面を考慮する、適応が正確な表示システムの必要性がある。
（概要）
一実施形態は、３次元画像可視化システムを対象とし、その３次元画像可視化システムは、見る人の眼に関する空間内の投影デバイス位置から見る人の眼に向かって画像を投影するための選択的に透明な投影デバイスであって、その投影デバイスは、いかなる画像も投影されないときに実質的に透明な状態をなすことが可能である、投影デバイスと、投影デバイスに結合された遮閉マスクデバイスであって、その遮閉マスクデバイスは、投影デバイスによって投影される画像と相関する遮閉パターンで見る人の眼から、投影デバイスの反対側の１つ以上の位置から眼に向かって進む光を選択的に遮断するように構成されている、遮閉マスクデバイスと、見る人の眼と投影デバイスとの間に挿入されたゾーンプレート回折パターン形成デバイスであって、そのゾーンプレート回折パターン形成デバイスは、投影デバイスからの光が眼へ進む場合に、投影デバイスからの光に、選択可能な幾何学形状を有する回折パターンを通過させ、回折パターンの選択的な幾何学形状に少なくとも部分的に基づいて、眼からの模擬焦点距離で眼に進入させるように構成されている、ゾーンプレート回折パターン形成デバイスとを備える。本システムは、投影デバイスと、遮閉マスクデバイスと、ゾーンプレート回折パターン形成デバイスとに動作可能に結合されたコントローラをさらに備え得、そのコントローラは、画像の投影および関連遮閉パターン、ならびに選択可能な幾何学形状における回折パターンの挿入を調整するように構成されている。コントローラは、マイクロプロセッサを備えてもよい。投影デバイスは、ディスプレイ面を実質的に占めている、実質的に平面的な透明デジタルディスプレイを備えてもよい。ディスプレイ面は、見る人の眼の視軸から実質的に垂直に配向されてもよい。実質的に平面的な透明デジタルディスプレイは、液晶ディスプレイを備えてもよい。実質的に平面的な透明デジタルディスプレイは、有機発光ダイオードディスプレイを備えてもよい。投影デバイスは、見る人の眼の焦点深度が無限遠焦点深度であるように、コリメートされた形態で眼に向かって画像を投影するように構成されてもよい。投影デバイスは、見る人の眼への送達前に画像のサイズを拡張するように構成された基板誘導型遅延射出瞳拡張デバイスに結合された高速小型プロジェクタを備えてもよい。小型プロジェクタは、見る人の眼の視軸と実質的に垂直に装着されてもよく、基板誘導型遅延射出瞳拡張デバイスは、小型プロジェクタから画像を受け取り、眼の視軸と実質的に整合した配向で拡張されたサイズにおいて、画像をゾーンプレート回折パターン形成デバイスに送達して、見る人の眼に送達するように構成される。ゾーンプレート回折パターン形成デバイスおよび投影デバイスは、少なくとも１つの共通構造を備えてもよい。ゾーンプレート回折パターン形成デバイスは、導波路に組み込まれ、投影デバイスは、導波路に結合された高速小型プロジェクタを備え、高速小型プロジェクタは、画像が見る人の眼へ向かう途中で導波路から出る前に、回折パターンを通して画像を進ませるように構成され得る。小型プロジェクタは、見る人の眼の視軸と実質的に垂直に装着されてもよく、導波路は、小型プロジェクタから画像を受け取り、眼の視軸と実質的に整合した配向で拡張されたサイズにおいて、画像を見る人の眼に送達するように構成されてもよい。遮閉マスクデバイスは、ディスプレイを備え、ディスプレイは、ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されてもよい。遮閉マスクデバイスは、１つ以上の液晶ディスプレイを備えてもよい。ゾーンプレート回折パターン形成デバイスは、高周波数バイナリディスプレイを備え、高周波数バイナリディスプレイは、ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されてもよい。ゾーンプレート回折パターン形成デバイスは、約５００Ｈｚから約２，０００Ｈｚの間のリフレッシュレートを有してもよい。ゾーンプレート回折パターン形成デバイスは、約７２０Ｈｚのリフレッシュレートを有してもよい。コントローラは、毎秒約３０フレームから約６０フレームの間で投影デバイスおよび遮閉マスクデバイスを動作させるように構成され、コントローラは、投影デバイスおよび遮閉マスクデバイスの各フレームに対して最大約１２の異なる回折パターンをデジタル表示するように、ゾーンプレート回折パターン形成デバイスを動作させるように構成されてもよい。投影デバイス、遮閉マスクデバイス、およびゾーンプレート回折パターン形成デバイスは、見る人の１つの眼のための結像モジュールを集合的に備えてもよく、本システムは、見る人の別の眼のための第２の結像モジュールをさらに備えてもよい。
本発明は、例えば、以下を提供する。
（項目１）
３次元画像可視化システムであって、前記３次元画像可視化システムは、
ａ．見る人の眼に関する空間内の投影デバイス位置から前記見る人の前記眼に向かって画像を投影するための選択的に透明な投影デバイスであって、前記投影デバイスは、いかなる画像も投影されないときに実質的に透明な状態をなすことが可能である、投影デバイスと、
ｂ．前記投影デバイスに結合された遮閉マスクデバイスであって、前記遮閉マスクデバイスは、前記投影デバイスによって投影される前記画像と相関する遮閉パターンで、前記見る人の前記眼から、前記投影デバイスの反対側の１つ以上の位置から前記眼に向かって進む光を選択的に遮断するように構成されている、遮閉マスクデバイスと、
ｃ．前記見る人の前記眼と前記投影デバイスとの間に挿入されたゾーンプレート回折パターン形成デバイスであって、前記ゾーンプレート回折パターン形成デバイスは、前記投影デバイスからの光が眼へ進む場合に、前記投影デバイスからの光に、選択可能な幾何学形状を有する回折パターンを通過させ、前記回折パターンの前記選択的な幾何学形状に少なくとも部分的に基づいて、前記眼からの模擬焦点距離で前記眼に進入させるように構成されている、ゾーンプレート回折パターン形成デバイスと
を備える、３次元画像可視化システム。
（項目２）
前記投影デバイスと、前記遮閉マスクデバイスと、前記ゾーンプレート回折パターン形成デバイスとに動作可能に結合されたコントローラをさらに備え、前記コントローラは、前記画像の投影および関連遮閉パターン、ならびに前記選択可能な幾何学形状における前記回折パターンの挿入を調整するように構成されている、項目１に記載のシステム。
（項目３）
前記コントローラは、マイクロプロセッサを備える、項目２に記載のシステム。
（項目４）
前記投影デバイスは、ディスプレイ面を実質的に占めている、実質的に平面的な透明デジタルディスプレイを備える、項目１に記載のシステム。
（項目５）
前記ディスプレイ面は、前記見る人の前記眼の視軸から実質的に垂直に配向されている、項目４に記載のシステム。
（項目６）
前記実質的に平面的な透明デジタルディスプレイは、液晶ディスプレイを備える、項目４に記載のシステム。
（項目７）
前記実質的に平面的な透明デジタルディスプレイは、有機発光ダイオードディスプレイを備える、項目４に記載のシステム。
（項目８）
前記投影デバイスは、前記見る人の前記眼の焦点深度が無限遠焦点深度であるように、コリメートされた形態で前記眼に向かって前記画像を投影するように構成されている、項目１に記載のシステム。
（項目９）
前記投影デバイスは、前記見る人の前記眼への送達前に前記画像のサイズを拡張するように構成された基板誘導型遅延射出瞳拡張デバイスに結合された高速小型プロジェクタを備える、項目１に記載のシステム。
（項目１０）
前記小型プロジェクタは、前記見る人の前記眼の視軸と実質的に垂直に装着され、前記基板誘導型遅延射出瞳拡張デバイスは、前記小型プロジェクタから前記画像を受け取り、前記眼の前記視軸と実質的に整合した配向で拡張されたサイズにおいて、前記画像を前記ゾーンプレート回折パターン形成デバイスに送達して、前記見る人の前記眼に送達するように構成されている、項目９に記載のシステム。
（項目１１）
前記ゾーンプレート回折パターン形成デバイスおよび投影デバイスは、少なくとも１つの共通構造を備える、項目１に記載のシステム。
（項目１２）
前記ゾーンプレート回折パターン形成デバイスは、導波路に組み込まれ、前記投影デバイスは、前記導波路に結合された高速小型プロジェクタを備え、前記高速小型プロジェクタは、前記画像が前記見る人の前記眼へ向かう途中で前記導波路から出る前に、前記回折パターンを通して前記画像を進ませるように構成されている、項目１１に記載のシステム。
（項目１３）
前記小型プロジェクタは、前記見る人の前記眼の視軸と実質的に垂直に装着され、前記導波路は、前記小型プロジェクタから前記画像を受け取り、前記眼の前記視軸と実質的に整合した配向で拡張されたサイズにおいて、前記画像を前記見る人の前記眼に送達するように構成されている、項目１２に記載のシステム。
（項目１４）
前記遮閉マスクデバイスは、ディスプレイを備え、前記ディスプレイは、前記ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されている、項目１に記載のシステム。
（項目１５）
前記遮閉マスクデバイスは、１つ以上の液晶ディスプレイを備える、項目１４に記載のシステム。
（項目１６）
前記ゾーンプレート回折パターン形成デバイスは、高周波数バイナリディスプレイを備え、前記高周波数バイナリディスプレイは、ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されている、項目１に記載のシステム。
（項目１７）
前記ゾーンプレート回折パターン形成デバイスは、約５００Ｈｚから約２，０００Ｈｚの間のリフレッシュレートを有する、項目２に記載のシステム。
（項目１８）
前記ゾーンプレート回折パターン形成デバイスは、約７２０Ｈｚのリフレッシュレートを有する、項目１７に記載のシステム。
（項目１９）
前記コントローラは、毎秒約３０フレームから約６０フレームの間で前記投影デバイスおよび遮閉マスクデバイスを動作させるように構成され、前記コントローラは、前記投影デバイスおよび遮閉マスクデバイスの各フレームに対して最大約１２の異なる回折パターンをデジタル表示するように、前記ゾーンプレート回折パターン形成デバイスを動作させるように構成されている、項目２に記載のシステム。
（項目２０）
前記投影デバイス、遮閉マスクデバイス、および前記ゾーンプレート回折パターン形成デバイスは、前記見る人の１つの眼のための結像モジュールを集合的に備え、前記システムは、前記見る人の別の眼のための第２の結像モジュールをさらに備える、項目１に記載のシステム。
図１は、人によって視認される特定の仮想現実オブジェクトおよび特定の実際の現実オブジェクトを有する拡張現実シナリオの例証を描写する。 図２は、ユーザのために３次元結像をシミュレートする従来の立体視システムを図示する。 図３Ａおよび３Ｂは、適応が正確な表示構成の局面を図示する。 図３Ａおよび３Ｂは、適応が正確な表示構成の局面を図示する。 図４Ａ〜図４Ｃは、曲率半径と焦点半径との間の関係を図示する。 図５〜図６Ｃは、対象の構成に適用されるような回折格子の局面を図示する。 図５〜図６Ｃは、対象の構成に適用されるような回折格子の局面を図示する。 図７Ａ〜図７Ｃは、３つの異なる焦点機構を図示する。 図７Ａ〜図７Ｃは、３つの異なる焦点機構を図示する。 図７Ａ〜図７Ｃは、３つの異なる焦点機構を図示する。 図７Ｄは、フレネルゾーンプレートを図示する。 図８Ａ〜図８Ｃは、回折システムの焦点合わせ問題の種々の局面を図示する。 図８Ａ〜図８Ｃは、回折システムの焦点合わせ問題の種々の局面を図示する。 図８Ａ〜図８Ｃは、回折システムの焦点合わせ問題の種々の局面を図示する。 図９は、組み込まれた回折格子を有する導波路の一実施形態を図示する。 図１０は、漏れ出る一方のモードと、導波路内に捕捉されたままにする他方のモードとを可能にするように設計されている、組み込まれた回折格子を有する導波路の一実施形態を図示する。 図１１Ａ〜図１１Ｂは、回折結像モジュールの実施形態の局面を図示する。 図１２Ａ〜図１２Ｂは、回折結像モジュールの実施形態の局面を図示する。 図１３Ａ〜図１３Ｂは、回折結像モジュールの実施形態の局面を図示する。
（詳細な説明）
図３Ａおよび図３Ｂを参照すると、ＡＡＤシステムの種々の局面が描写されている。図３Ａを参照すると、単純な説明図が、立体視（図２）の場合のような２つの従来のディスプレイの代わりに、各画像の種々の局面（１４）に対する種々の半径方向焦点深度（１２）を有する、各眼に１つずつ、２つの複合画像が、知覚された画像内の３次元深度層の知覚を各眼に提供するために利用され得ることを示す。
図３Ｂを参照して、発明者らは、典型的な人間の眼が、半径方向距離に基づいて、深度の約１２層（図３の層Ｌ１〜Ｌ１２（図面の要素１６））を解釈することができると判定した。約０．２５メートルの近視野限界（７８）が、ほぼ最も近い焦点深度であり、約３メートルの遠視野限界（８０）は、人間の眼から約３メートルよりも遠い任意のアイテムが無限遠焦点を受けることを意味する。焦点の層は、眼に近づくにつれて、ますます薄くなり、換言すると、眼は、比較的眼に近く極めて小さい焦点距離の差を知覚することができ、この効果は、図３Ｂに示されるように、オブジェクトが眼からさらに遠く離れるにつれて消散する。要素８２は、無限遠オブジェクト位置において、焦点深度／屈折間隔値が約１／３ジオプタであることを図示する。図３Ｂの重要性を説明する１つの他の方法では、ユーザの眼と無限遠との間に約１２の焦点面がある。人間の眼が、深度を知覚するために焦点面を利用するように常に動き回っているため、これらの焦点面、および描写された関係内のデータは、ユーザの眺めのための拡張現実シナリオ内で仮想要素を位置決めするために利用され得る。
図４Ａ〜図４Ｃを参照して、Ｋ（Ｒ）が１／Ｒに等しい曲率の動的パラメータであり、Ｒが表面に対するアイテムの焦点半径である場合には、半径の増加（Ｒ３、Ｒ２へ、最大でＲ１）とともに、減少するＫ（Ｒ）を有する。点によって生成される光照射野は、点がユーザの眼からどれだけ遠くにあるかという関数である、球面曲率を有する。この関係はまた、ＡＡＤシステムに利用されてもよい。
図５を参照すると、従来の回折格子（２２）が示され、光が、回折次数（ｎ）と、空間周波数と、１／ｄに等しいＫ係数とに関係する角度（θ−２０）で格子間隔（１８）を通過し、方程式：ｄ＊ｓｉｎ（θ）＝ｎ＊波長（または代替として、Ｋ係数を代入して、ｓｉｎ（θ）＝ｎ＊波長＊Ｋ）を使用する。図６Ａ〜図６Ｃは、回折パターン（２２、２４、２６）における間隔（１８、２８、３０）の減少とともに、角度（２０、３２、３４）がより大きくなることを図示する。
図７Ａ〜図７Ｃを参照すると、レンズ（３６）を通した屈折、曲面鏡（３８）を用いた反射、および図７Ｄでも示されるフレネルゾーンプレート（４０）を用いた回折の３つの異なる焦点機構が描写されている。
図８Ａを参照すると、Ｎ＝−１モードが仮想画像に対応することができ、Ｎ＝＋１モードが実画像に対応することができ、Ｎ＝０モードが無限遠集束画像に対応することができることを図示するように、回折の簡単化されたバージョンが示されている。これらの画像は、人間の眼および脳にとって紛らわしく、特に、図８Ｂに示されるように、全てが軸上で集束した場合に問題となり得る。図８Ｃを参照すると、所望されないモード／画像の遮断を可能にするために、軸外焦点構成が利用されてもよい。例えば、コリメートされた（ｒ＝無限遠）画像がＮ＝０モードによって形成されてもよく、発散仮想画像がＮ＝−１モードによって形成されてもよく、収束画像がＮ＝＋１モードによって形成されてもよい。これらのモード／画像の空間位置およびそれらの軌道の差は、オーバーレイ、ゴースト発生、および「多重露光」の知覚効果等の回折結像と関連付けられる前述の問題を防止するように、フィルタリングまたは分離を可能にする。
図９を参照すると、組み込まれた回折格子を有する導波路が示されている。そのような導波路は、例えば、ＢＡＥ Ｓｙｓｔｅｍｓ ＰＬＣ（Ｌｏｎｄｏｎ，Ｕ．Ｋ．）等の供給業者から入手可能であり、示されるように図９の左側から画像を取り込み、組み込まれた回折格子（４４）を通して画像を送り、結果として生じた画像をある角度で（例えば、図９では、導波路の側面を通して）放出するために利用されてもよい。したがって、方向変更および回折の２つの用途が、そのような要素を用いて達成されてもよい。実際に、図８Ｃを参照して説明されるもの等の軸外焦点技法は、図９に示されるもの等の回折導波路要素と組み合わせられることにより、図１０に示されるもの等の構成をもたらし、描写された実施形態では、回折導波路の幾何学形状が、Ｎ＝−１モード（例えば、仮想画像）が導波路からユーザの眼の中へ通過させられ、他の２つのモード（Ｎ＝０およびＮ＝＋１）が反射によって導波路の内側に捕捉されるようなものであるため、方向変更および回折だけでなく、フィルタリングも達成される。
図１１Ａ〜図１３Ｃを参照すると、上記の概念が、種々の拡張現実表示構成で実践されている。
図１１Ａを参照すると、ＡＡＤシステムは、各眼（４、６）の前の結像モジュール（４６、４８）を備え、それを通してユーザが世界を見る。図１１Ｂは、マイクロプロセッサ、マイクロコントローラ、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、または同様のものであり得る、その関連コントローラ（６６）（描写された電子制御導線を介して結合され、導線は無線でもあり得る）を有するモジュール（４６）のより大きい図を図示する。コントローラは、好ましくは、電力供給部と、さらに、外部世界とコントローラ（６６）との間で情報の交換を可能にする情報交換デバイス（例えば、無線インターネットまたはＢｌｕｅｔｏｏｔｈ（登録商標）アダプタ）とに結合される。本システムは、毎秒３０フレームから６０フレームの間の速度等の画像リフレッシュレートで動作するように構成されてもよい。コントローラは、高リフレッシュレートのデジタル高解像度ディスプレイ（５２）（例えば、フェロリキッド（ｆｅｒｒｏ−ｌｉｑｕｉｄ）、ブルーフェーズ、またはベントコアディスプレイ）を動作させることにより、約１２の深度層のそれぞれに関して、種々のゾーンプレート幾何学形状を連続して迅速に表示するように構成されてもよい。例えば、毎秒６０フレームの全体的性能が所望される実施形態では、ゾーンプレートディスプレイ（５２）は、図３Ｂに示されるように１２の深度層のそれぞれに模擬適応を提供することができるように、これの１２倍、つまり７２０Ｈｚで動作させられ得る。遮閉マスクディスプレイ（５４）は、その前で透明プロジェクタ層（５６）において表示される画像に幾何学的に対応する、暗化された画像を表示するように構成され、それは、遮閉マスクディスプレイの反対側からの光が、プロジェクタ層（５６）内の所望の仮想または拡張画像の表示を通って漏出すること、またはそれに干渉することを防止するように暗化される。したがって、示されるような拡張現実構成では、現実背景からの光は、遮閉マスク（５４）の覆われていない部分を通り、透明プロジェクタ層（５６）の透明な（すなわち、画像の一部分をブロードキャストしない）部分を通り、適応処理のためにゾーンプレート層（５２）の中へ通過する。投影層（５６）で投影される画像は、遮閉層（５４）で背景光からのマスク遮断を受け、適応処理のためにゾーンプレート層（５２）の中へ前方に投影される。これらの組み合わせ、またはユーザにとっての拡張現実の関連知覚は、「真の３Ｄ」に非常に近い。
図１２Ａ〜図１２Ｂは、別の実施形態を描写し、結像モジュール（５８）が、眼の視軸とほぼ垂直な角度で配向された高解像度小型プロジェクタを備え、基板誘導型遅延射出瞳拡張デバイス（７０）を備える導波路が、小さな小型プロジェクタからの画像を拡大してゾーンプレート層（５２）の中へ向け直し、遮閉層（５４）が背景照明から投影画像の知覚を保護するように同様のマスキング機能を提供する。
図１３Ａ〜図１３Ｂは、別の実施形態を描写し、ゾーンプレートおよび投影層が、小型プロジェクタ（６８）から小さい画像を取り込み、それを向け直して拡大し、さらに、眼まで通過させるためにそれを回折する、同一の統合モジュール（７２）内に本質的に収納されるように、要素５２および７０が組み合わせられ、遮閉層（５４）が、背景照明から投影画像の知覚を保護するように同様のマスキング機能を提供する。
本発明の種々の例示的実施形態が、本明細書で説明される。非限定的な意味で、これらの実施例が参照される。それらは、本発明のより広くて利用可能な局面を例証するように提供される。種々の変更が、説明される本発明に行われてもよく、本発明の真の精神および範囲から逸脱することなく、同様のものが置換されてもよい。加えて、特定の状況、材料、物質組成、プロセス、プロセス行為、またはステップを本発明の目的、精神、または範囲に適合させるように、多くの修正が行われてもよい。さらに、当業者によって理解されるように、本明細書で説明および例証される個々の変形例のそれぞれは、本発明の範囲からも精神からも逸脱することなく、他のいくつかの実施形態のうちのいずれかの特徴から容易に分離され、またはそれらと組み合わせられ得る、別個の構成要素および特徴を有する。全てのそのような修正は、本開示と関連付けられる特許請求の範囲内にあることを意図としている。
本発明は、対象デバイスを使用して行われ得る方法を含む。本方法は、そのような好適なデバイスを提供するという行為を含んでもよい。そのような提供は、エンドユーザによって行われてもよい。換言すれば、「提供する」行為は、エンドユーザが、対象方法において必須デバイスを提供するように、取得し、アクセスし、接近し、位置決めし、設定し、起動し、電源を入れ、または別様に作用することを、単に要求する。本明細書で記載される方法は、事象の記載された順番のみならず、論理的に可能である記載された事象の任意の順番で実行されてもよい。
本発明の例示的局面が、材料選択および製造に関する詳細とともに、上記で記載されている。本発明の他の詳細に関しては、これらは、上記で参照された特許および刊行物と関連して理解されるとともに、概して、当業者によって公知であり、または理解され得る。一般的または論理的に採用されるような付加的な行為の観点から、本発明の方法ベースの局面に関して、同じことが当てはまり得る。
加えて、本発明は、種々の特徴を必要に応じて組み込むいくつかの実施例を参照して説明されているが、本発明は、本発明の各変形例に関して想定されるように、説明および指示されるものに限定されるものではない。種々の変更が、説明された本発明に行われてもよく、本発明の真の精神および範囲から逸脱することなく、同等物が（本明細書に記載されようと、いくらか簡単にするために含まれていなかろうと）置換されてもよい。加えて、値の範囲が提供される場合、その範囲の上限と下限との間の全ての介在値、およびその規定範囲内の任意の他の規定値または介在値が、本発明内に包含されることを理解されたい。
また、説明される本発明の変形例の任意の必要に応じた特徴が、独立して、または本明細書で説明される特徴のうちのいずれか１つ以上と組み合わせて、記載および請求されてもよいことが想定される。単数形のアイテムへの参照は、複数の同一のアイテムが存在するという可能性を含む。より具体的には、本明細書で、および本明細書に関連付けられる特許請求の範囲で使用される場合、「１つの」（「ａ」、「ａｎ」）、「前記（ｓａｉｄ）」、および該（「ｔｈｅ」）という単数形は、特に規定がない限り、複数形の指示対象を含む。換言すれば、冠詞の使用は、上記の説明ならびに本開示と関連付けられる特許請求の範囲において、対象アイテムの「少なくとも１つ」を可能にする。さらに、そのような特許請求の範囲は、任意の随意的な要素を除外するように起草され得ることに留意されたい。したがって、この記述は、特許請求の範囲の要素の記載と関連して、「単に」、「のみ」、および同様のもののような排他的用語の使用、または「否定的」制限の使用のために、先行詞としての機能を果たすことを目的としている。
そのような排他的用語を使用することなく、本開示と関連付けられる特許請求の範囲における「備える」という用語は、所与の数の要素がそのような請求項で列挙されるか、または特徴の追加をそのような請求項に記載される要素の性質の変換として見なすことができるかにかかわらず、任意の付加的な要素を含むことを可能にするものとする。本明細書で具体的に定義される場合を除いて、本明細書で使用される全ての技術および化学用語は、特許請求の範囲の有効性を維持しながら、可能な限り広い一般的に理解されている意味を与えられるものである。
本発明の幅は、提供される実施例および／または対象の明細書に限定されるものではなく、むしろ、本開示と関連付けられる特許請求の範囲の言葉の範囲のみによって限定されるものである。

Claims (20)

  1. ３次元画像可視化システムであって、前記３次元画像可視化システムは、
    ａ．見る人の眼に関する空間内の投影デバイス位置から前記見る人の前記眼に向かって画像を投影するための選択的に透明な投影デバイスであって、前記投影デバイスは、いかなる画像も投影されないときに実質的に透明な状態をなすことが可能である、投影デバイスと、
    ｂ．前記投影デバイスに結合された遮閉マスクデバイスであって、前記遮閉マスクデバイスは、前記投影デバイスの前記見る人の前記眼とは反対側の１つ以上の位置から前記眼に向かって、前記遮閉マスクデバイスおよび前記投影デバイスを通る軸上を進む光を、前記投影デバイスによって投影される前記画像と相関する遮閉パターンで選択的に遮断するように構成されている、遮閉マスクデバイスと、
    ｃ．前記見る人の前記眼と前記投影デバイスとの間に挿入されたゾーンプレート回折パターン形成デバイスであって、前記ゾーンプレート回折パターン形成デバイスは、前記投影デバイスからの光が眼へ進む場合に、前記投影デバイスからの光に、選択可能な幾何学形状を有する回折パターンを通過させ、前記回折パターンの前記選択的な幾何学形状に少なくとも部分的に基づいて、前記眼からの模擬焦点距離で前記眼に進入させるように構成されている、ゾーンプレート回折パターン形成デバイスと
    を備える、３次元画像可視化システム。
  2. 前記投影デバイスと、前記遮閉マスクデバイスと、前記ゾーンプレート回折パターン形成デバイスとに動作可能に結合されたコントローラをさらに備え、前記コントローラは、前記画像の投影および関連遮閉パターン、ならびに前記選択可能な幾何学形状における前記回折パターンの挿入を調整するように構成されている、請求項１に記載のシステム。
  3. 前記コントローラは、マイクロプロセッサを備える、請求項２に記載のシステム。
  4. 前記投影デバイスは、ディスプレイ面を実質的に占めている、実質的に平面的な透明デジタルディスプレイを備える、請求項１に記載のシステム。
  5. 前記ディスプレイ面は、前記見る人の前記眼の視軸から実質的に垂直に配向されている、請求項４に記載のシステム。
  6. 前記実質的に平面的な透明デジタルディスプレイは、液晶ディスプレイを備える、請求項４に記載のシステム。
  7. 前記実質的に平面的な透明デジタルディスプレイは、有機発光ダイオードディスプレイを備える、請求項４に記載のシステム。
  8. 前記投影デバイスは、前記見る人の前記眼の焦点深度が無限遠焦点深度であるように、コリメートされた形態で前記眼に向かって前記画像を投影するように構成されている、請求項１に記載のシステム。
  9. 前記投影デバイスは、前記見る人の前記眼への送達前に前記画像のサイズを拡張するように構成された基板誘導型遅延射出瞳拡張デバイスに結合された高速小型プロジェクタを備える、請求項１に記載のシステム。
  10. 前記小型プロジェクタは、前記見る人の前記眼の視軸と実質的に垂直に装着され、前記基板誘導型遅延射出瞳拡張デバイスは、前記小型プロジェクタから前記画像を受け取り、前記眼の前記視軸と実質的に整合した配向で拡張されたサイズにおいて、前記画像を前記ゾーンプレート回折パターン形成デバイスに送達して、前記見る人の前記眼に送達するように構成されている、請求項９に記載のシステム。
  11. 前記ゾーンプレート回折パターン形成デバイスおよび投影デバイスは、少なくとも１つの共通構造を備える、請求項１に記載のシステム。
  12. 前記ゾーンプレート回折パターン形成デバイスは、導波路に組み込まれ、前記投影デバイスは、前記導波路に結合された高速小型プロジェクタを備え、前記高速小型プロジェクタは、前記画像が前記見る人の前記眼へ向かう途中で前記導波路から出る前に、前記回折パターンを通して前記画像を進ませるように構成されている、請求項１１に記載のシステム。
  13. 前記小型プロジェクタは、前記見る人の前記眼の視軸と実質的に垂直に装着され、前記導波路は、前記小型プロジェクタから前記画像を受け取り、前記眼の前記視軸と実質的に整合した配向で拡張されたサイズにおいて、前記画像を前記見る人の前記眼に送達するように構成されている、請求項１２に記載のシステム。
  14. 前記遮閉マスクデバイスは、ディスプレイを備え、前記ディスプレイは、前記ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されている、請求項１に記載のシステム。
  15. 前記遮閉マスクデバイスは、１つ以上の液晶ディスプレイを備える、請求項１４に記載のシステム。
  16. 前記ゾーンプレート回折パターン形成デバイスは、高周波数バイナリディスプレイを備え、前記高周波数バイナリディスプレイは、ディスプレイの複数の部分の各々において光を遮閉するか、または通過させるかのいずれかを、各部分において光を遮閉し、または通過させる関連コマンドに応じて、行うように構成されている、請求項１に記載のシステム。
  17. 前記ゾーンプレート回折パターン形成デバイスは、約５００Ｈｚから約２，０００Ｈｚの間のリフレッシュレートを有する、請求項２に記載のシステム。
  18. 前記ゾーンプレート回折パターン形成デバイスは、約７２０Ｈｚのリフレッシュレートを有する、請求項１７に記載のシステム。
  19. 前記コントローラは、毎秒約３０フレームから約６０フレームの間で前記投影デバイスおよび遮閉マスクデバイスを動作させるように構成され、前記コントローラは、前記投影デバイスおよび遮閉マスクデバイスの各フレームに対して最大約１２の異なる回折パターンをデジタル表示するように、前記ゾーンプレート回折パターン形成デバイスを動作させるように構成されている、請求項２に記載のシステム。
  20. 前記投影デバイス、遮閉マスクデバイス、および前記ゾーンプレート回折パターン形成デバイスは、前記見る人の１つの眼のための結像モジュールを集合的に備え、前記システムは、前記見る人の別の眼のための第２の結像モジュールをさらに備える、請求項１に記載のシステム。
JP2014543465A 2011-11-23 2012-11-23 ３次元仮想現実および拡張現実表示システム Active JP6250547B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161563403P 2011-11-23 2011-11-23
US61/563,403 2011-11-23
PCT/US2012/000560 WO2013077895A1 (en) 2011-11-23 2012-11-23 Three dimensional virtual and augmented reality display system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017022805A Division JP6422518B2 (ja) 2011-11-23 2017-02-10 ３次元仮想現実および拡張現実表示システム

Publications (3)

Publication Number Publication Date
JP2015501101A JP2015501101A (ja) 2015-01-08
JP2015501101A5 JP2015501101A5 (ja) 2016-01-14
JP6250547B2 true JP6250547B2 (ja) 2017-12-20

Family

ID=48426562

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2014543465A Active JP6250547B2 (ja) 2011-11-23 2012-11-23 ３次元仮想現実および拡張現実表示システム
JP2017022805A Active JP6422518B2 (ja) 2011-11-23 2017-02-10 ３次元仮想現実および拡張現実表示システム
JP2018127444A Active JP6646712B2 (ja) 2011-11-23 2018-07-04 ３次元仮想現実および拡張現実表示システム
JP2018189007A Active JP6785277B2 (ja) 2011-11-23 2018-10-04 ３次元仮想現実および拡張現実表示システム
JP2020136613A Withdrawn JP2020181225A (ja) 2011-11-23 2020-08-13 ３次元仮想現実および拡張現実表示システム

Family Applications After (4)

Application Number Title Priority Date Filing Date
JP2017022805A Active JP6422518B2 (ja) 2011-11-23 2017-02-10 ３次元仮想現実および拡張現実表示システム
JP2018127444A Active JP6646712B2 (ja) 2011-11-23 2018-07-04 ３次元仮想現実および拡張現実表示システム
JP2018189007A Active JP6785277B2 (ja) 2011-11-23 2018-10-04 ３次元仮想現実および拡張現実表示システム
JP2020136613A Withdrawn JP2020181225A (ja) 2011-11-23 2020-08-13 ３次元仮想現実および拡張現実表示システム

Country Status (11)

Country Link
US (8) US8950867B2 (ja)
EP (3) EP2783352B1 (ja)
JP (5) JP6250547B2 (ja)
KR (6) KR102116697B1 (ja)
CN (2) CN107664847B (ja)
AU (5) AU2012341069B2 (ja)
BR (1) BR112014012615A2 (ja)
CA (2) CA2858208C (ja)
IL (2) IL232746A (ja)
RU (1) RU2628164C2 (ja)
WO (1) WO2013077895A1 (ja)

Families Citing this family (236)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0522968D0 (en) 2005-11-11 2005-12-21 Popovich Milan M Holographic illumination device
GB0718706D0 (en) 2007-09-25 2007-11-07 Creative Physics Ltd Method and apparatus for reducing laser speckle
US9335604B2 (en) 2013-12-11 2016-05-10 Milan Momcilo Popovich Holographic waveguide display
US11726332B2 (en) 2009-04-27 2023-08-15 Digilens Inc. Diffractive projection apparatus
US11204540B2 (en) 2009-10-09 2021-12-21 Digilens Inc. Diffractive waveguide providing a retinal image
US9274349B2 (en) 2011-04-07 2016-03-01 Digilens Inc. Laser despeckler based on angular diversity
WO2013027004A1 (en) 2011-08-24 2013-02-28 Milan Momcilo Popovich Wearable data display
WO2016020630A2 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Waveguide laser illuminator incorporating a despeckler
US10670876B2 (en) 2011-08-24 2020-06-02 Digilens Inc. Waveguide laser illuminator incorporating a despeckler
US20150010265A1 (en) 2012-01-06 2015-01-08 Milan, Momcilo POPOVICH Contact image sensor using switchable bragg gratings
CN103562802B (zh) 2012-04-25 2016-08-17 罗克韦尔柯林斯公司 全息广角显示器
WO2013167864A1 (en) 2012-05-11 2013-11-14 Milan Momcilo Popovich Apparatus for eye tracking
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9933684B2 (en) * 2012-11-16 2018-04-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration
US11490809B2 (en) 2013-01-25 2022-11-08 Wesley W. O. Krueger Ocular parameter-based head impact measurement using a face shield
US11504051B2 (en) 2013-01-25 2022-11-22 Wesley W. O. Krueger Systems and methods for observing eye and head information to measure ocular parameters and determine human health status
US12042294B2 (en) 2013-01-25 2024-07-23 Wesley W. O. Krueger Systems and methods to measure ocular parameters and determine neurologic health status
US10209517B2 (en) 2013-05-20 2019-02-19 Digilens, Inc. Holographic waveguide eye tracker
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
WO2015006784A2 (en) 2013-07-12 2015-01-15 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9952042B2 (en) 2013-07-12 2018-04-24 Magic Leap, Inc. Method and system for identifying a user location
US9727772B2 (en) 2013-07-31 2017-08-08 Digilens, Inc. Method and apparatus for contact image sensing
US9701530B2 (en) 2013-11-22 2017-07-11 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9527716B2 (en) 2013-11-22 2016-12-27 Michael J. Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
US9633504B2 (en) 2013-11-22 2017-04-25 Michael J Kline System, method, and apparatus for purchasing, dispensing, or sampling of products
CN110542938B (zh) 2013-11-27 2023-04-18 奇跃公司 虚拟和增强现实系统与方法
US9857591B2 (en) 2014-05-30 2018-01-02 Magic Leap, Inc. Methods and system for creating focal planes in virtual and augmented reality
CN103676175A (zh) * 2013-12-26 2014-03-26 无锡锡飞光电科技有限公司 裸眼3d显示方法
NZ722903A (en) * 2014-01-31 2020-05-29 Magic Leap Inc Multi-focal display system and method
CN106461955B (zh) 2014-01-31 2019-08-13 奇跃公司 显示增强现实的方法
US10430985B2 (en) 2014-03-14 2019-10-01 Magic Leap, Inc. Augmented reality systems and methods utilizing reflections
US11138793B2 (en) 2014-03-14 2021-10-05 Magic Leap, Inc. Multi-depth plane display system with reduced switching between depth planes
WO2015161307A1 (en) * 2014-04-18 2015-10-22 Magic Leap, Inc. Systems and methods for augmented and virtual reality
NZ727361A (en) 2014-05-30 2020-05-29 Magic Leap Inc Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality
NZ764960A (en) * 2014-05-30 2022-05-27 Magic Leap Inc Methods and system for creating focal planes in virtual and augmented reality
WO2016020632A1 (en) 2014-08-08 2016-02-11 Milan Momcilo Popovich Method for holographic mastering and replication
US10241330B2 (en) 2014-09-19 2019-03-26 Digilens, Inc. Method and apparatus for generating input images for holographic waveguide displays
EP3198192A1 (en) 2014-09-26 2017-08-02 Milan Momcilo Popovich Holographic waveguide opticaltracker
KR102295496B1 (ko) 2014-09-29 2021-09-01 매직 립, 인코포레이티드 상이한 파장의 광을 도파관 밖으로 출력하기 위한 아키텍쳐 및 방법
KR102547307B1 (ko) * 2014-12-29 2023-06-22 매직 립, 인코포레이티드 음향-광학 제어 디바이스를 사용하는 광 프로젝터
WO2016113533A2 (en) 2015-01-12 2016-07-21 Milan Momcilo Popovich Holographic waveguide light field displays
CN107873086B (zh) 2015-01-12 2020-03-20 迪吉伦斯公司 环境隔离的波导显示器
CN107533137A (zh) 2015-01-20 2018-01-02 迪吉伦斯公司 全息波导激光雷达
US10657780B1 (en) 2015-01-29 2020-05-19 Transparensee Llc System, method, and apparatus for mixing, blending, dispensing, monitoring, and labeling products
US9632226B2 (en) 2015-02-12 2017-04-25 Digilens Inc. Waveguide grating device
US11468639B2 (en) 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US10838207B2 (en) 2015-03-05 2020-11-17 Magic Leap, Inc. Systems and methods for augmented reality
WO2016141373A1 (en) 2015-03-05 2016-09-09 Magic Leap, Inc. Systems and methods for augmented reality
US10180734B2 (en) 2015-03-05 2019-01-15 Magic Leap, Inc. Systems and methods for augmented reality
NZ773826A (en) 2015-03-16 2022-07-29 Magic Leap Inc Methods and systems for diagnosing and treating health ailments
WO2016146963A1 (en) 2015-03-16 2016-09-22 Popovich, Milan, Momcilo Waveguide device incorporating a light pipe
US10404975B2 (en) 2015-03-20 2019-09-03 Tilt Five, Inc Retroreflective light field display
US10591756B2 (en) 2015-03-31 2020-03-17 Digilens Inc. Method and apparatus for contact image sensing
CN106293561B (zh) 2015-05-28 2020-02-28 北京智谷睿拓技术服务有限公司 显示控制方法和装置、显示设备
CN106303315B (zh) 2015-05-30 2019-08-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303499B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
CN106303498B (zh) 2015-05-30 2018-10-16 北京智谷睿拓技术服务有限公司 视频显示控制方法和装置、显示设备
KR20230025933A (ko) 2015-06-15 2023-02-23 매직 립, 인코포레이티드 멀티플렉싱된 광 스트림들을 인-커플링하기 위한 광학 엘리먼트들을 가진 디스플레이 시스템
US10149958B1 (en) 2015-07-17 2018-12-11 Bao Tran Systems and methods for computer assisted operation
US10492981B1 (en) 2015-07-17 2019-12-03 Bao Tran Systems and methods for computer assisted operation
US10335572B1 (en) 2015-07-17 2019-07-02 Naveen Kumar Systems and methods for computer assisted operation
US10176642B2 (en) 2015-07-17 2019-01-08 Bao Tran Systems and methods for computer assisted operation
US10685488B1 (en) 2015-07-17 2020-06-16 Naveen Kumar Systems and methods for computer assisted operation
IL256838B2 (en) 2015-07-20 2023-10-01 Magic Leap Inc Tuning such as a fiber scanner with inward aiming angles in a virtual/augmented reality system
KR102511490B1 (ko) 2015-08-18 2023-03-16 매직 립, 인코포레이티드 가상 및 증강 현실 시스템들 및 방법들
AU2016310452B2 (en) 2015-08-21 2021-04-22 Magic Leap, Inc. Eyelid shape estimation
CN112836664A (zh) 2015-08-21 2021-05-25 奇跃公司 使用眼睛姿态测量的眼睑形状估计
WO2017048713A1 (en) 2015-09-16 2017-03-23 Magic Leap, Inc. Head pose mixing of audio files
CN118584664A (zh) 2015-09-23 2024-09-03 奇跃公司 采用离轴成像器的眼睛成像
US10690916B2 (en) 2015-10-05 2020-06-23 Digilens Inc. Apparatus for providing waveguide displays with two-dimensional pupil expansion
IL257984B (en) 2015-10-05 2022-08-01 Magic Leap Inc Microlens collimator for optical fiber scanning in a virtual/augmented reality system
JP7216547B2 (ja) 2015-10-06 2023-02-01 マジック リープ， インコーポレイテッド 逆角度回折格子を有する仮想／拡張現実システム
CA3170014A1 (en) 2015-10-16 2017-04-20 Magic Leap, Inc. Eye pose identification using eye features
AU2016341196B2 (en) 2015-10-20 2021-09-16 Magic Leap, Inc. Selecting virtual objects in a three-dimensional space
US9709807B2 (en) 2015-11-03 2017-07-18 Motorola Solutions, Inc. Out of focus notifications
US10260864B2 (en) 2015-11-04 2019-04-16 Magic Leap, Inc. Dynamic display calibration based on eye-tracking
US11231544B2 (en) 2015-11-06 2022-01-25 Magic Leap, Inc. Metasurfaces for redirecting light and methods for fabricating
CN108604383A (zh) 2015-12-04 2018-09-28 奇跃公司 重新定位系统和方法
US10877438B2 (en) * 2016-01-07 2020-12-29 Magic Leap, Inc. Dynamic fresnel projector
KR20230134159A (ko) 2016-01-07 2023-09-20 매직 립, 인코포레이티드 깊이 평면들에 걸쳐 분포된 동일하지 않은 수의 컴포넌트 컬러 이미지들을 갖는 가상 및 증강 현실 시스템들 및 방법들
WO2017127366A1 (en) 2016-01-19 2017-07-27 Magic Leap, Inc. Eye image collection, selection, and combination
JP6952713B2 (ja) 2016-01-19 2021-10-20 マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． 反射を利用する拡張現実システムおよび方法
CN108474904B (zh) 2016-01-20 2021-07-06 奇跃公司 虚拟/增强现实系统中的偏振保持光纤
US10536690B2 (en) 2016-01-29 2020-01-14 Magic Leap, Inc. Display for three-dimensional image
US10983340B2 (en) 2016-02-04 2021-04-20 Digilens Inc. Holographic waveguide optical tracker
JP6991981B2 (ja) 2016-02-24 2022-01-13 マジック リープ， インコーポレイテッド 光エミッタのための薄型相互接続子
KR102682340B1 (ko) 2016-02-24 2024-07-04 매직 립, 인코포레이티드 낮은 광 누설을 가진 편광 빔 분할기 및 이를 포함하는 디스플레이 시스템
US10775545B2 (en) 2016-02-26 2020-09-15 Magic Leap, Inc. Display system having a plurality of light pipes for a plurality of light emitters
IL261148B2 (en) 2016-02-26 2023-12-01 Magic Leap Inc Light output system with reflector and lenses for high spatially uniform light output
AU2017227598B2 (en) 2016-03-01 2022-03-17 Magic Leap, Inc. Reflective switching device for inputting different wavelengths of light into waveguides
NZ745738A (en) 2016-03-04 2020-01-31 Magic Leap Inc Current drain reduction in ar/vr display systems
EP3427185B1 (en) * 2016-03-07 2024-07-31 Magic Leap, Inc. Blue light adjustment for biometric security
US10867314B2 (en) 2016-03-22 2020-12-15 Magic Leap, Inc. Head mounted display system configured to exchange biometric information
EP3433659B1 (en) 2016-03-24 2024-10-23 DigiLens, Inc. Method and apparatus for providing a polarization selective holographic waveguide device
AU2017238847A1 (en) 2016-03-25 2018-10-04 Magic Leap, Inc. Virtual and augmented reality systems and methods
KR20230098927A (ko) 2016-03-31 2023-07-04 매직 립, 인코포레이티드 포즈들 및 멀티-dof 제어기들을 사용하는 3d 가상 객체들과상호작용들
CA3019946C (en) 2016-04-08 2023-02-28 Magic Leap, Inc. Augmented reality systems and methods with variable focus lens elements
JP6734933B2 (ja) 2016-04-11 2020-08-05 ディジレンズ インコーポレイテッド 構造化光投影のためのホログラフィック導波管装置
KR102548818B1 (ko) 2016-04-21 2023-06-28 매직 립, 인코포레이티드 시야 주위의 시각적 아우라
AU2017257549B2 (en) 2016-04-26 2021-09-09 Magic Leap, Inc. Electromagnetic tracking with augmented reality systems
US10046229B2 (en) 2016-05-02 2018-08-14 Bao Tran Smart device
CN113484944A (zh) 2016-05-06 2021-10-08 奇跃公司 具有用于重定向光的非对称光栅的超表面及其制造方法
CN115177208A (zh) 2016-05-09 2022-10-14 奇跃公司 用于用户健康分析的增强现实系统和方法
US9904058B2 (en) 2016-05-12 2018-02-27 Magic Leap, Inc. Distributed light manipulation over imaging waveguide
US11328484B2 (en) 2016-05-20 2022-05-10 Magic Leap, Inc. Contextual awareness of user interface menus
IL299710A (en) 2016-06-03 2023-03-01 Magic Leap Inc Identity verification in augmented reality
KR102448938B1 (ko) 2016-06-10 2022-09-28 매직 립, 인코포레이티드 텍스처 투사 전구용 적분 점광원
JP7385993B2 (ja) 2016-06-20 2023-11-24 マジック リープ， インコーポレイテッド 視覚的処理および知覚の疾患を含む神経学的疾患の評価および修正のための拡張現実ディスプレイシステム
NZ749449A (en) 2016-06-30 2023-06-30 Magic Leap Inc Estimating pose in 3d space
KR102442569B1 (ko) 2016-07-14 2022-09-08 매직 립, 인코포레이티드 각막 곡률을 이용한 홍채 경계 추정
KR102648770B1 (ko) 2016-07-14 2024-03-15 매직 립, 인코포레이티드 홍채 식별을 위한 딥 뉴럴 네트워크
CN109788901B (zh) 2016-07-25 2024-01-02 奇跃公司 光场处理器系统
KR20230133940A (ko) 2016-07-25 2023-09-19 매직 립, 인코포레이티드 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화
CA3032282A1 (en) 2016-07-29 2018-02-01 Magic Leap, Inc. Secure exchange of cryptographically signed records
US10649211B2 (en) 2016-08-02 2020-05-12 Magic Leap, Inc. Fixed-distance virtual and augmented reality systems and methods
CA3033344A1 (en) 2016-08-11 2018-02-15 Magic Leap, Inc. Automatic placement of a virtual object in a three-dimensional space
CN117198277A (zh) 2016-08-12 2023-12-08 奇跃公司 单词流注释
JP6813666B2 (ja) 2016-08-22 2021-01-13 マジック リープ， インコーポレイテッドＭａｇｉｃ Ｌｅａｐ，Ｉｎｃ． 多層回折接眼レンズ
KR102529137B1 (ko) 2016-08-22 2023-05-03 매직 립, 인코포레이티드 딥 러닝 센서들을 갖는 증강 현실 디스플레이 디바이스
CN106131541A (zh) * 2016-08-26 2016-11-16 广州巧瞳科技有限公司 基于增强现实的智能显示装置及方法
AU2017328161B2 (en) 2016-09-13 2022-02-17 Magic Leap, Inc. Sensory eyewear
CN112987303A (zh) 2016-09-21 2021-06-18 奇跃公司 用于具有出瞳扩展器的光学系统的系统和方法
KR102266343B1 (ko) 2016-09-22 2021-06-17 매직 립, 인코포레이티드 증강 현실 분광기
KR20240011881A (ko) 2016-09-26 2024-01-26 매직 립, 인코포레이티드 가상 현실 또는 증강 현실 디스플레이 시스템에서 자기 및 광학 센서들의 교정
WO2018064169A1 (en) 2016-09-28 2018-04-05 Magic Leap, Inc. Face model capture by a wearable device
RU2016138608A (ru) 2016-09-29 2018-03-30 Мэджик Лип, Инк. Нейронная сеть для сегментации изображения глаза и оценки качества изображения
US10489680B2 (en) 2016-10-04 2019-11-26 Magic Leap, Inc. Efficient data layouts for convolutional neural networks
IL295059A (en) 2016-10-05 2022-09-01 Magic Leap Inc A blind eye test for mixed reality calibration
KR102603745B1 (ko) 2016-10-21 2023-11-17 매직 립, 인코포레이티드 다수의 동공내 시차 뷰들을 제공함으로써 다수의 깊이평면들 상에 이미지 콘텐츠를 제공하기 위한 시스템 및 방법
CN106657970A (zh) * 2016-10-25 2017-05-10 乐视控股（北京）有限公司 一种深度图成像装置
KR102217797B1 (ko) 2016-11-11 2021-02-18 매직 립, 인코포레이티드 전체 얼굴 이미지의 안구주위 및 오디오 합성
AU2017361061B2 (en) 2016-11-15 2022-02-03 Magic Leap, Inc. Deep learning system for cuboid detection
KR102595171B1 (ko) 2016-11-16 2023-10-26 매직 립, 인코포레이티드 웨어러블 컴포넌트들을 위한 열 관리 시스템들
AU2017361424B2 (en) 2016-11-18 2022-10-27 Magic Leap, Inc. Spatially variable liquid crystal diffraction gratings
JP7019695B2 (ja) 2016-11-18 2022-02-15 マジック リープ， インコーポレイテッド 広入射角範囲の光を再指向するための多層液晶回折格子
US11067860B2 (en) 2016-11-18 2021-07-20 Magic Leap, Inc. Liquid crystal diffractive devices with nano-scale pattern and methods of manufacturing the same
CN110199220B (zh) 2016-11-18 2022-11-01 奇跃公司 使用交叉光栅的波导光复用器
US11513350B2 (en) 2016-12-02 2022-11-29 Digilens Inc. Waveguide device with uniform output illumination
EP3549109B1 (en) 2016-12-05 2023-04-19 Magic Leap, Inc. Virtual user input controls in a mixed reality environment
US10531220B2 (en) 2016-12-05 2020-01-07 Magic Leap, Inc. Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems
IL304304B2 (en) 2016-12-08 2024-08-01 Magic Leap Inc Light beam breaking devices based on cholesteric liquid crystal
EP3555865B1 (en) 2016-12-13 2024-09-18 Magic Leap, Inc. 3d object rendering using detected features
CN110291453B (zh) 2016-12-14 2022-11-01 奇跃公司 使用具有表面对准图案的软压印复制对液晶图案化
US10371896B2 (en) 2016-12-22 2019-08-06 Magic Leap, Inc. Color separation in planar waveguides using dichroic filters
US10746999B2 (en) 2016-12-28 2020-08-18 Magic Leap, Inc. Dual depth exit pupil expander
CN117251053A (zh) 2016-12-29 2023-12-19 奇跃公司 基于外部条件的可穿戴显示装置的自动控制
US10545346B2 (en) 2017-01-05 2020-01-28 Digilens Inc. Wearable heads up displays
JP7071374B2 (ja) 2017-01-05 2022-05-18 マジック リープ， インコーポレイテッド プラズマエッチングによる高屈折率ガラスのパターン化
EP3568783A4 (en) 2017-01-11 2020-11-11 Magic Leap, Inc. MEDICAL ASSISTANT
IL268135B2 (en) 2017-01-23 2024-03-01 Magic Leap Inc Eyepiece for virtual, augmented or mixed reality systems
US10812936B2 (en) 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems
US10841724B1 (en) 2017-01-24 2020-11-17 Ha Tran Enhanced hearing system
WO2018140502A1 (en) 2017-01-27 2018-08-02 Magic Leap, Inc. Antireflection coatings for metasurfaces
IL307294A (en) 2017-01-27 2023-11-01 Magic Leap Inc Diffraction gratings produced using a surface cell with differently oriented nanobeams
US11347054B2 (en) 2017-02-16 2022-05-31 Magic Leap, Inc. Systems and methods for augmented reality
IL307602A (en) 2017-02-23 2023-12-01 Magic Leap Inc Variable focus virtual imagers based on polarization conversion
IL301886A (en) 2017-03-14 2023-06-01 Magic Leap Inc Waveguides with light absorbing layers and processes for their creation
CA3054619C (en) 2017-03-17 2024-01-30 Magic Leap, Inc. Mixed reality system with virtual content warping and method of generating virtual content using same
AU2018233733B2 (en) 2017-03-17 2021-11-11 Magic Leap, Inc. Mixed reality system with multi-source virtual content compositing and method of generating virtual content using same
US10657376B2 (en) 2017-03-17 2020-05-19 Magic Leap, Inc. Room layout estimation methods and techniques
EP3596705A4 (en) 2017-03-17 2020-01-22 Magic Leap, Inc. COLOR VIRTUAL CONTENT DEFORMATION MIXED REALITY SYSTEM AND VIRTUAL CONTENT GENERATION METHOD USING THE SAME
EP4246214A3 (en) 2017-03-21 2023-12-06 Magic Leap, Inc. Methods, devices, and systems for illuminating spatial light modulators
WO2018175344A1 (en) 2017-03-21 2018-09-27 Magic Leap, Inc. Depth sensing techniques for virtual, augmented, and mixed reality systems
KR20240069826A (ko) 2017-03-21 2024-05-20 매직 립, 인코포레이티드 저-프로파일 빔 스플리터
IL303471B2 (en) 2017-03-21 2024-08-01 Magic Leap Inc An eye imaging device that uses optical refractive elements
WO2018175625A1 (en) 2017-03-22 2018-09-27 Magic Leap, Inc. Depth based foveated rendering for display systems
JP7516048B2 (ja) 2017-04-18 2024-07-16 マジック リープ， インコーポレイテッド 反射性流動可能材料によって形成された反射性層を有する導波管
AU2018256365A1 (en) 2017-04-19 2019-10-31 Magic Leap, Inc. Multimodal task execution and text editing for a wearable system
US10388077B2 (en) 2017-04-25 2019-08-20 Microsoft Technology Licensing, Llc Three-dimensional environment authoring and generation
US11163416B2 (en) 2017-04-27 2021-11-02 Magic Leap, Inc. Light-emitting user input device for calibration or pairing
US10412378B2 (en) 2017-05-08 2019-09-10 Microsoft Technology Licensing, Llc Resonating optical waveguide using multiple diffractive optical elements
US10222615B2 (en) 2017-05-26 2019-03-05 Microsoft Technology Licensing, Llc Optical waveguide with coherent light source
KR102627882B1 (ko) 2017-05-30 2024-01-22 매직 립, 인코포레이티드 전자 디바이스를 위한 팬 조립체를 갖는 전력 공급기 조립체
US10671160B2 (en) 2017-05-31 2020-06-02 Magic Leap, Inc. Eye tracking calibration techniques
US10338400B2 (en) 2017-07-03 2019-07-02 Holovisions LLC Augmented reality eyewear with VAPE or wear technology
US10859834B2 (en) 2017-07-03 2020-12-08 Holovisions Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear
US10908680B1 (en) 2017-07-12 2021-02-02 Magic Leap, Inc. Pose estimation using electromagnetic tracking
AU2018308418A1 (en) 2017-07-26 2020-01-16 Magic Leap, Inc. Training a neural network with representations of user interface devices
CA3068612A1 (en) 2017-07-28 2019-01-31 Magic Leap, Inc. Fan assembly for displaying an image
US10521661B2 (en) 2017-09-01 2019-12-31 Magic Leap, Inc. Detailed eye shape model for robust biometric applications
US10719951B2 (en) 2017-09-20 2020-07-21 Magic Leap, Inc. Personalized neural network for eye tracking
WO2019060741A1 (en) 2017-09-21 2019-03-28 Magic Leap, Inc. INCREASED REALITY DISPLAY HAVING A WAVEGUIDE CONFIGURED TO CAPTURE IMAGES OF THE EYE AND / OR THE ENVIRONMENT
KR102481884B1 (ko) 2017-09-22 2022-12-28 삼성전자주식회사 가상 영상을 표시하는 방법 및 장치
CN107682686B (zh) * 2017-10-11 2019-03-12 京东方科技集团股份有限公司 一种虚拟现实显示装置、显示设备及显示方法
CN116149058A (zh) 2017-10-16 2023-05-23 迪吉伦斯公司 用于倍增像素化显示器的图像分辨率的系统和方法
KR102695589B1 (ko) 2017-10-22 2024-08-14 루머스 리미티드 광학 벤치를 사용하는 헤드 장착형 증강 현실 장치
CA3078530A1 (en) 2017-10-26 2019-05-02 Magic Leap, Inc. Gradient normalization systems and methods for adaptive loss balancing in deep multitask networks
WO2019118930A1 (en) 2017-12-15 2019-06-20 Magic Leap, Inc. Eyepieces for augmented reality display system
KR20200104402A (ko) 2018-01-08 2020-09-03 디지렌즈 인코포레이티드. 도파관 셀을 제조하기 위한 시스템 및 방법
KR20200108030A (ko) 2018-01-08 2020-09-16 디지렌즈 인코포레이티드. 도파관 셀 내의 홀로그래픽 격자의 높은 처리능력의 레코딩을 위한 시스템 및 방법
WO2019136476A1 (en) 2018-01-08 2019-07-11 Digilens, Inc. Waveguide architectures and related methods of manufacturing
US11567627B2 (en) 2018-01-30 2023-01-31 Magic Leap, Inc. Eclipse cursor for virtual content in mixed reality displays
US10540941B2 (en) 2018-01-30 2020-01-21 Magic Leap, Inc. Eclipse cursor for mixed reality displays
CN108366250B (zh) * 2018-02-06 2020-03-17 深圳市鹰硕技术有限公司 影像显示系统、方法以及数字眼镜
IL312231A (en) 2018-02-06 2024-06-01 Magic Leap Inc Systems and methods for augmented reality
US10735649B2 (en) 2018-02-22 2020-08-04 Magic Leap, Inc. Virtual and augmented reality systems and methods using display system control information embedded in image data
EP4212222A1 (en) 2018-03-07 2023-07-19 Magic Leap, Inc. Visual tracking of peripheral devices
JP7381482B2 (ja) 2018-03-16 2023-11-15 マジック リープ， インコーポレイテッド ディスプレイシステムのための深度ベースの中心窩化レンダリング
US10690851B2 (en) 2018-03-16 2020-06-23 Digilens Inc. Holographic waveguides incorporating birefringence control and methods for their fabrication
US11480467B2 (en) 2018-03-21 2022-10-25 Magic Leap, Inc. Augmented reality system and method for spectroscopic analysis
US11157159B2 (en) 2018-06-07 2021-10-26 Magic Leap, Inc. Augmented reality scrollbar
USD875729S1 (en) 2018-06-27 2020-02-18 Magic Leap, Inc. Portion of an augmented reality headset
WO2020018938A1 (en) 2018-07-19 2020-01-23 Magic Leap, Inc. Content interaction driven by eye metrics
EP3824622A4 (en) 2018-07-20 2021-09-08 Flex-N-gate Advanced Product Development, LLC FLOATING IMAGE GENERATION
WO2020018899A1 (en) * 2018-07-20 2020-01-23 Flex-N-Gate Advanced Product Development, Llc Animated 3d image multiplier
CN112513712B (zh) 2018-07-23 2023-05-09 奇跃公司 具有虚拟内容翘曲的混合现实系统和使用该系统生成虚拟内容的方法
US10943521B2 (en) 2018-07-23 2021-03-09 Magic Leap, Inc. Intra-field sub code timing in field sequential displays
CN112513711B (zh) 2018-07-23 2023-03-07 奇跃公司 用于使用位置向量解析半球模糊度的方法和系统
USD924204S1 (en) 2018-07-24 2021-07-06 Magic Leap, Inc. Totem controller having an illumination region
USD918176S1 (en) 2018-07-24 2021-05-04 Magic Leap, Inc. Totem controller having an illumination region
US11567336B2 (en) 2018-07-24 2023-01-31 Magic Leap, Inc. Display systems and methods for determining registration between display and eyes of user
USD930614S1 (en) 2018-07-24 2021-09-14 Magic Leap, Inc. Totem controller having an illumination region
US11402801B2 (en) 2018-07-25 2022-08-02 Digilens Inc. Systems and methods for fabricating a multilayer optical structure
US11914148B2 (en) 2018-09-07 2024-02-27 Adeia Semiconductor Inc. Stacked optical waveguides
US11141645B2 (en) 2018-09-11 2021-10-12 Real Shot Inc. Athletic ball game using smart glasses
US11103763B2 (en) 2018-09-11 2021-08-31 Real Shot Inc. Basketball shooting game using smart glasses
JP7455121B2 (ja) 2018-10-26 2024-03-25 マジック リープ， インコーポレイテッド 電磁追跡のための周囲電磁歪み補正
EP3877831A4 (en) 2018-11-09 2022-08-03 Beckman Coulter, Inc. MAINTENANCE GOGGLES WITH SELECTIVE DATA SUPPLY
US11237393B2 (en) 2018-11-20 2022-02-01 Magic Leap, Inc. Eyepieces for augmented reality display system
KR20210138609A (ko) 2019-02-15 2021-11-19 디지렌즈 인코포레이티드. 일체형 격자를 이용하여 홀로그래픽 도파관 디스플레이를 제공하기 위한 방법 및 장치
JP7518844B2 (ja) 2019-02-28 2024-07-18 マジック リープ， インコーポレイテッド 光エミッタアレイによって形成される複数の瞳孔内視差ビューを使用して可変遠近調節キューを提供するためのディスプレイシステムおよび方法
JP2022525165A (ja) 2019-03-12 2022-05-11 ディジレンズ インコーポレイテッド ホログラフィック導波管バックライトおよび関連する製造方法
CN114008514A (zh) 2019-04-15 2022-02-01 奇跃公司 用于电磁跟踪的传感器融合
WO2020214897A1 (en) 2019-04-18 2020-10-22 Beckman Coulter, Inc. Securing data of objects in a laboratory environment
USD962981S1 (en) 2019-05-29 2022-09-06 Magic Leap, Inc. Display screen or portion thereof with animated scrollbar graphical user interface
CN114207492A (zh) 2019-06-07 2022-03-18 迪吉伦斯公司 带透射光栅和反射光栅的波导及其生产方法
EP3987343A4 (en) 2019-06-20 2023-07-19 Magic Leap, Inc. EYEWEARS FOR AUGMENTED REALITY DISPLAY SYSTEM
KR20220024410A (ko) 2019-06-27 2022-03-03 루머스 리미티드 도광 광학 소자를 통한 눈 이미징에 기초한 시선 추적 장치 및 방법
KR20220038452A (ko) 2019-07-29 2022-03-28 디지렌즈 인코포레이티드. 픽셀화된 디스플레이의 이미지 해상도와 시야를 증배하는 방법 및 장치
KR20220054386A (ko) 2019-08-29 2022-05-02 디지렌즈 인코포레이티드. 진공 브래그 격자 및 이의 제조 방법
JP2023509305A (ja) 2019-12-25 2023-03-08 ルムス エルティーディー． 光ガイド光学素子と関連付けられた光学配置を使用して、眼からの光を方向転換することに基づく、アイトラッキングのための光学システムおよび方法
JP7545564B2 (ja) 2020-07-15 2024-09-04 マジック リープ， インコーポレイテッド 非球面角膜モデルを使用した眼追跡
WO2023023628A1 (en) * 2021-08-18 2023-02-23 Advanced Neuromodulation Systems, Inc. Systems and methods for providing digital health services
TW202323949A (zh) * 2021-09-30 2023-06-16 以色列商魯姆斯有限公司 用於控制有源遮擋子系統的裝置、方法和電腦可讀存儲裝置
KR20230103379A (ko) 2021-12-31 2023-07-07 삼성전자주식회사 Ar 처리 방법 및 장치

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2728994B2 (ja) 1991-07-30 1998-03-18 三菱電機株式会社 開閉機器の動作異常検出装置
JP2786352B2 (ja) * 1991-10-02 1998-08-13 シャープ株式会社 焦点可変光学装置
JPH0536327U (ja) * 1991-10-21 1993-05-18 三菱電機株式会社 撮像装置
JPH05328260A (ja) * 1992-05-26 1993-12-10 Olympus Optical Co Ltd 頭部装着式ディスプレイ装置
US5572343A (en) 1992-05-26 1996-11-05 Olympus Optical Co., Ltd. Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions
JP3630746B2 (ja) * 1994-12-05 2005-03-23 キヤノン株式会社 画像観察装置
JP3556389B2 (ja) * 1996-05-01 2004-08-18 日本電信電話株式会社 ヘッドマウントディスプレイ装置
EP1798592A3 (en) 1996-01-17 2007-09-19 Nippon Telegraph And Telephone Corporation Optical device and three-dimensional display device
WO1997035223A1 (en) * 1996-03-15 1997-09-25 Retinal Display Cayman Limited Method of and apparatus for viewing an image
GB9713658D0 (en) * 1997-06-28 1997-09-03 Travis Adrian R L View-sequential holographic display
US20040108971A1 (en) * 1998-04-09 2004-06-10 Digilens, Inc. Method of and apparatus for viewing an image
JP2000171750A (ja) * 1998-12-03 2000-06-23 Sony Corp ヘッドマウントディスプレイ、表示方法、および提供媒体
US6546438B1 (en) 1999-06-08 2003-04-08 Siemens Energy & Automation System for interfacing components
US6456438B1 (en) * 1999-08-12 2002-09-24 Honeywell Inc. Variable immersion vignetting display
GB0000589D0 (en) 2000-01-13 2000-03-01 Guiver Matthew Cutting guide
FI114945B (fi) * 2002-09-19 2005-01-31 Nokia Corp Sähköisesti säädettävä diffraktiivinen hilaelementti
EP2482103B1 (en) * 2005-02-22 2020-10-28 Nikon Corporation Method of manufacturing a diffractive optical element
DE102005045174A1 (de) 2005-09-21 2007-03-22 Bayer Cropscience Ag Steigerung der Pathogenabwehr in Pflanzen
JPWO2007037089A1 (ja) * 2005-09-27 2009-04-02 コニカミノルタホールディングス株式会社 頭部装着型映像表示装置
JP4810949B2 (ja) * 2005-09-29 2011-11-09 ソニー株式会社 光学装置及び画像表示装置
US7702468B2 (en) 2006-05-03 2010-04-20 Population Diagnostics, Inc. Evaluating genetic disorders
US7936489B2 (en) * 2007-02-09 2011-05-03 GM Global Technology Operations LLC Holographic information display
CN101029968A (zh) * 2007-04-06 2007-09-05 北京理工大学 可寻址光线屏蔽机制光学透视式头盔显示器
DE102007023738A1 (de) * 2007-05-16 2009-01-08 Seereal Technologies S.A. Verfahren und Einrichtung zum Rekonstruieren einer dreidimensionalen Szene in einem holographischen Display
CN101688977B (zh) * 2007-06-04 2011-12-07 诺基亚公司 衍射扩束器和基于衍射扩束器的虚拟显示器
BRPI0701380E2 (pt) 2007-06-29 2009-10-06 Valmor Da Cunha Gravio redutor mecánico de velocidade por correia
EP2170698B1 (en) 2007-07-31 2017-10-11 B/E Aerospace, Inc. Aircraft cargo door
RU2359297C1 (ru) * 2007-12-21 2009-06-20 Олег Леонидович Головков Виртуальный шлем
US20100011368A1 (en) 2008-07-09 2010-01-14 Hiroshi Arakawa Methods, systems and programs for partitioned storage resources and services in dynamically reorganized storage platforms
US20100011036A1 (en) 2008-07-09 2010-01-14 The Go Daddy Group, Inc. Document storage access on a per-approval basis
WO2010062481A1 (en) * 2008-11-02 2010-06-03 David Chaum Near to eye display system and appliance
WO2010067117A1 (en) * 2008-12-12 2010-06-17 Bae Systems Plc Improvements in or relating to waveguides
JP4674634B2 (ja) * 2008-12-19 2011-04-20 ソニー株式会社 頭部装着型ディスプレイ
JP5316391B2 (ja) * 2009-08-31 2013-10-16 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
JP5333067B2 (ja) * 2009-08-31 2013-11-06 ソニー株式会社 画像表示装置及び頭部装着型ディスプレイ
KR101099137B1 (ko) 2010-01-29 2011-12-27 주식회사 팬택 이동 통신 시스템에서 증강 현실 정보를 제공하기 위한 장치 및 방법
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
KR101479262B1 (ko) 2010-09-02 2015-01-12 주식회사 팬택 증강현실 정보 이용 권한 부여 방법 및 장치
KR101260576B1 (ko) 2010-10-13 2013-05-06 주식회사 팬택 Ａｒ 서비스를 제공하기 위한 사용자 단말기 및 그 방법
KR101407670B1 (ko) 2011-09-15 2014-06-16 주식회사 팬택 증강현실 기반 모바일 단말과 서버 및 그 통신방법

Also Published As

Publication number Publication date
US20170023794A1 (en) 2017-01-26
IL252284B (en) 2018-07-31
US20130128230A1 (en) 2013-05-23
JP2017108444A (ja) 2017-06-15
KR20200061416A (ko) 2020-06-02
CA2858208A1 (en) 2013-05-30
EP4036862A1 (en) 2022-08-03
JP6785277B2 (ja) 2020-11-18
EP3503035A1 (en) 2019-06-26
JP2020181225A (ja) 2020-11-05
AU2022202379A1 (en) 2022-05-05
JP2018207542A (ja) 2018-12-27
AU2018203318B2 (en) 2020-03-12
AU2022202379B2 (en) 2023-08-17
US20190339539A1 (en) 2019-11-07
KR102095220B1 (ko) 2020-03-31
AU2020257062A1 (en) 2020-11-19
KR20140101385A (ko) 2014-08-19
IL252284A0 (en) 2017-07-31
KR20220036997A (ko) 2022-03-23
US20190072775A1 (en) 2019-03-07
JP6646712B2 (ja) 2020-02-14
US11822102B2 (en) 2023-11-21
RU2014125226A (ru) 2015-12-27
US8950867B2 (en) 2015-02-10
US10191294B2 (en) 2019-01-29
KR20170122285A (ko) 2017-11-03
EP2783352A1 (en) 2014-10-01
AU2012341069A1 (en) 2014-06-12
US11474371B2 (en) 2022-10-18
EP2783352A4 (en) 2015-07-22
CA3024054C (en) 2020-12-29
CN107664847A (zh) 2018-02-06
KR102440195B1 (ko) 2022-09-02
IL232746A0 (en) 2014-07-31
KR102116697B1 (ko) 2020-05-29
KR102227381B1 (ko) 2021-03-11
AU2020257062B2 (en) 2022-02-03
CN107664847B (zh) 2021-04-06
JP2018151674A (ja) 2018-09-27
US20150124317A1 (en) 2015-05-07
BR112014012615A2 (pt) 2017-06-13
US20200233232A1 (en) 2020-07-23
KR20220124294A (ko) 2022-09-13
US10444527B2 (en) 2019-10-15
AU2018203318A1 (en) 2018-05-31
AU2018203315B2 (en) 2020-07-23
IL232746A (en) 2017-06-29
AU2012341069B2 (en) 2018-04-05
WO2013077895A1 (en) 2013-05-30
KR102376368B1 (ko) 2022-03-17
AU2018203315A1 (en) 2018-05-31
CA3024054A1 (en) 2013-05-30
CN104067316B (zh) 2017-10-27
US10670881B2 (en) 2020-06-02
JP2015501101A (ja) 2015-01-08
CA2858208C (en) 2019-01-15
EP3503035B1 (en) 2022-03-23
JP6422518B2 (ja) 2018-11-14
RU2628164C2 (ru) 2017-08-15
CN104067316A (zh) 2014-09-24
US20230004018A1 (en) 2023-01-05
NZ625509A (en) 2015-03-27
US20240027785A1 (en) 2024-01-25
KR102513896B1 (ko) 2023-03-23
KR20210029842A (ko) 2021-03-16
EP2783352B1 (en) 2019-03-27

Similar Documents

Publication Publication Date Title
JP6422518B2 (ja) ３次元仮想現実および拡張現実表示システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151116

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160810

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20161109

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170106

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170727

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170927

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20171005

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171122

R150 Certificate of patent or registration of utility model

Ref document number: 6250547

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250