JP7145284B2 - 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法 - Google Patents

深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法 Download PDF

Info

Publication number
JP7145284B2
JP7145284B2 JP2021094109A JP2021094109A JP7145284B2 JP 7145284 B2 JP7145284 B2 JP 7145284B2 JP 2021094109 A JP2021094109 A JP 2021094109A JP 2021094109 A JP2021094109 A JP 2021094109A JP 7145284 B2 JP7145284 B2 JP 7145284B2
Authority
JP
Japan
Prior art keywords
waveguides
light
waveguide
depth planes
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021094109A
Other languages
English (en)
Other versions
JP2021152670A (ja
Inventor
ティー. ショーウェンゲルト ブライアン
フア ホン
チェン フイ-チュアン
ペロズ クリストフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Magic Leap Inc
Original Assignee
Magic Leap Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Magic Leap Inc filed Critical Magic Leap Inc
Publication of JP2021152670A publication Critical patent/JP2021152670A/ja
Priority to JP2022147921A priority Critical patent/JP7460715B2/ja
Application granted granted Critical
Publication of JP7145284B2 publication Critical patent/JP7145284B2/ja
Priority to JP2023197270A priority patent/JP2024022601A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/18Diffraction gratings
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/10Scanning systems
    • G02B26/103Scanning systems having movable or deformable optical fibres, light guides or waveguides as scanning elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0033Means for improving the coupling-out of light from the light guide
    • G02B6/0035Means for improving the coupling-out of light from the light guide provided on the surface of the light guide or in the bulk of it
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/0001Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems
    • G02B6/0011Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings specially adapted for lighting devices or systems the light guides being planar or of plate-like form
    • G02B6/0075Arrangements of multiple light guides
    • G02B6/0076Stacked arrangements of multiple light guides of the same or different cross-sectional area
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0112Head-up displays characterised by optical features comprising device for genereting colour display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • G02B2027/0125Field-of-view increase by wavefront division
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0127Head-up displays characterised by optical features comprising devices increasing the depth of field
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0185Displaying image at variable distance

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Eyeglasses (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

(関連出願の援用)
本願は、米国仮出願第62/275987号(2016年1月7日出願)の米国特許法§119(e)に基づく優先権の利益を主張し、上記出願の全開示は、参照により本明細書に援用される。
(関連出願の援用)
本願は、以下の特許出願の各々の全内容を参照により本明細書に援用する:米国出願第14/641,376号(2015年3月7日出願)、米国出願第14/555,585号(2014年11月27日出願)、米国出願第14/690,401号(2015年4月18日出願)、米国出願第14/212,961号(2014年3月14日出願)、米国出願第14/331,218号(2014年7月14日出願)、および米国仮出願第62/156,809号(2015年5月4日出願)。
(分野)
本開示は、仮想現実および拡張現実結像ならびに可視化システムに関する。
(関連技術の説明)
現代のコンピューティングおよびディスプレイ技術は、いわゆる「仮想現実」または「拡張現実」体験のためのシステムの開発を促進しており、デジタル的に再現された画像またはその一部が、現実であるように見え得る様式、もしくはそのように知覚され得る様式でユーザに提示される。仮想現実または「VR」シナリオは、典型的には、他の実際の実世界の視覚的入力に対する透明性を伴わずに、デジタルまたは仮想画像情報の提示を伴う。拡張現実または「AR」シナリオは、典型的には、ユーザの周囲の実際の世界の可視化に対する拡張としてのデジタルまたは仮想画像情報の提示を伴う。例えば、図1を参照すると、拡張現実場面(1)が、描写されており、AR技術のユーザは、背景における人々、木々、建物を特徴とする実世界公園状設定(1100)と、コンクリートプラットフォーム(1120)とを見る。これらのアイテムに加え、AR技術のユーザは、実世界プラットフォーム(1120)上に立っているロボット像(1110)と、マルハナバチの擬人化のように見える、飛んでいる漫画のようなアバタキャラクタ(1130)とも「見ている」と知覚するが、これらの要素(1130、1110)は、実世界には存在しない。ヒトの視知覚系は、複雑であるので、他の仮想または実世界画像要素間における仮想画像要素の快適で、自然のような感覚で、かつ豊かな提示を促進する、VRまたはAR技術の生成は、困難である。
本明細書に開示されるシステムおよび方法は、VRならびにAR技術に関連する種々の課題に対処する。
(要約)
いくつかの実施形態では、ディスプレイシステムが、提供される。システムは、各々が第1の波長範囲の光を出力することによって画像を生成するように構成される第1の複数の導波管と、各々が第2の波長範囲の光を出力することによって画像を生成するように構成される第2の複数の導波管とを含む、導波管のスタックを含む。第1の複数の導波管は、第2の複数の導波管を形成する導波管の総数より多い導波管の総数を有する。システムは、各々が第3の波長範囲に対応する光を出力することによって画像を表示するように構成される第3の複数の導波管も含み得る。第3の複数の導波管は、第1または第2の複数の導波管内の導波管の数と異なる導波管の総数を含み得る。いくつかの実施形態では、第1の波長範囲は、緑色の色の光を包含し、第2の波長範囲は、赤色の色の光を包含し、第3の波長範囲は、青色の色の光を包含する。
いくつかの他の実施形態では、ディスプレイシステムが、提供される。ディスプレイシステムは、複数の成分色画像を出力するように構成されるディスプレイを備え、成分色画像は、複数の深度平面に対応する。第1の色の成分色画像は、合計で、第2の色の成分色画像より大きい数になる。第1の色の成分色画像は、第1の波長範囲内の波長を有する光によって形成され、第2の色の成分色画像は、第2の波長範囲内の波長を有する光によって形成される。
システムは、各々が第1の色に対応する光を出力することによって画像を生成するように構成される第1の複数の導波管と、各々が第1の色と異なる第2の色に対応する光を出力することによって画像を生成するように構成される第2の複数の導波管とを含む導波管のスタックを含む。システムは、第1または第2の複数の導波管のうちの導波管によって生成されるべき画像のコンテンツに基づいて、ぼやけと、ピクセルサイズの変化とのうちの1つ以上のものを画像に導入するように構成されるコントローラも含む。
他の実施形態では、ディスプレイシステムは、第1の波長範囲の光を外部結合し、第1の複数の成分色画像を生成するように構成される第1の複数の回折光学要素と、第2の波長範囲の光を外部結合し、第2の複数の成分色画像を生成するように構成される第2の複数の回折光学要素とを備えている1つ以上の導波管を備えている。第1の複数の成分色画像の画像は、第1の複数の回折光学要素のためのX個の最大可能深度平面のうちの1つ上に設定され、第2の複数の成分色画像の画像は、第2の複数の回折光学要素のためのY個の最大可能深度平面のうちの1つ上に設定される。XおよびYは、異なる整数である。
いくつかの他の実施形態では、ディスプレイシステムが、提供される。システムは、瞳孔サイズを決定するためのカメラと、導波管のスタックと、コントローラとを含む。導波管のスタックは、各々が第1の色に対応する光を出力することによって画像を生成するように構成される第1の複数の導波管と、各々が第1の色と異なる第2の色に対応する光を出力することによって画像を生成するように構成される第2の複数の導波管とを含む。コントローラは、決定された瞳孔サイズに基づいて、出力される光の特性を変動させるように構成される。
本発明は、例えば、以下を提供する。
(項目1)
ディスプレイシステムであって、前記システムは、導波管のスタックを備え、前記導波管のスタックは、
第1の複数の導波管であって、各々は、第1の波長範囲の光を出力することによって画像を生成するように構成されている、第1の複数の導波管と、
第2の複数の導波管であって、各々は、第2の波長範囲の光を出力することによって画像を生成するように構成されている、第2の複数の導波管と
を備え、
前記第1の複数の導波管は、合計で、前記第2の複数の導波管より多い導波管の数になる、システム。
(項目2)
第3の複数の導波管をさらに備え、各々は、第3の波長範囲の光を出力することによって画像を表示するように構成されている、項目1に記載のシステム。
(項目3)
前記第3の複数の導波管は、合計で、前記第1または第2の複数の導波管と異なる導波管の数になる、項目2に記載のシステム。
(項目4)
前記第1、第2、および第3の波長範囲は、それぞれ、異なる第1、第2、および第3の色に対応し、前記第3の色は、赤色である、項目2に記載のシステム。
(項目5)
前記第2の色は、青色および緑色から成る群から選択され、前記第1の色は、前記青色および緑色から成る群からの他方の色である、項目4に記載のシステム。
(項目6)
前記第3の複数の導波管は、合計で、前記第1または第2の複数の導波管のうちの1つと同一の導波管の数になる、項目5に記載のシステム。
(項目7)
前記第1の複数の導波管の各導波管は、関連付けられた深度平面を有し、前記第1の複数の導波管の各導波管は、その導波管の関連付けられた深度平面から生じているように見える画像を生成するように構成され、前記第1の複数の導波管の各導波管は、前記第1の複数の導波管のうちの少なくとも1つの他の導波管と異なる関連付けられた深度平面を有し、
前記第2の複数の導波管の各導波管は、関連付けられた深度平面を有し、前記第2の複数の導波管の各導波管は、その導波管の関連付けられた深度平面から生じているように見える画像を生成するように構成され、前記第2の複数の導波管の各導波管は、前記第2の複数の導波管のうちの少なくとも1つの他の導波管と異なる関連付けられた深度平面を有し、
前記第3の複数の導波管の各導波管は、関連付けられた深度平面を有し、前記第3の複数の導波管の各導波管は、その導波管の関連付けられた深度平面から生じているように見える画像を生成するように構成され、前記第3の複数の導波管の各導波管は、前記第3の複数の導波管のうちの少なくとも1つの他の導波管と異なる関連付けられた深度平面を有する、
項目2に記載のシステム。
(項目8)
深度平面間の間隔は、前記第1、第2、および第3の複数の導波管の各々に対して異なる、項目7に記載のシステム。
(項目9)
前記第1、第2、および第3の複数の導波管の各導波管は、光抽出光学要素を備え、前記光抽出光学要素のための構成は、前記導波管に関連付けられた前記深度平面に応じて変動する、項目7に記載のシステム。
(項目10)
前記光抽出光学要素は、発散ビームを提供するような屈折力を有する、項目9に記載のシステム。
(項目11)
前記光抽出光学要素は、回折格子を備えている、項目10に記載のシステム。
(項目12)
異なる深度平面のための前記光抽出光学要素は、各深度平面に対して出射光の異なる発散を提供するような異なる屈折力を有する、項目10に記載のシステム。
(項目13)
前記導波管のスタックは、N個の色を出力するように構成され、前記導波管のスタックは、各々が前記N個の色のうちの1つに対応する光を出力することによって画像を表示するように構成されているN個の複数の導波管を備え、各複数の導波管は、合計で、前記複数の導波管のうちの他と異なる数になり、Nは、正の整数である、項目2に記載のシステム。
(項目14)
前記第1および第2の複数の導波管の各導波管に関連付けられた射出瞳をさらに備え、前記第1の複数の導波管のうちの導波管のための射出瞳サイズは、前記第2の複数の導波管のうちの導波管のための射出瞳サイズより大きい、項目1に記載のシステム。
(項目15)
前記第1および第2の複数の導波管の各導波管は、ある出射ビームサイズを伴う光を出力し、前記出射ビームサイズは、前記第1および第2の複数の導波管のうちの導波管間で異なる、項目1に記載のシステム。
(項目16)
前記第1および第2の複数の導波管の各導波管は、ある出射ビームサイズを伴う光を出力し、前記第1の複数の導波管のうちの導波管のための出射ビームサイズは、5mmより小さい、項目1に記載のシステム。
(項目17)
前記第1の複数の導波管のうちの導波管は、前記第2の複数の導波管のうちの導波管と異なる出射ビームサイズを伴う光を出力する、項目1に記載のシステム。
(項目18)
第3の複数の導波管をさらに備え、各々は、第3の波長範囲の光を出力することによって画像を生成するように構成され、前記第3の複数の導波管のうちの導波管は、前記第1または第2の複数の導波管のうちの導波管と異なる出射ビームサイズを伴う光を出力する、項目1に記載のシステム。
(項目19)
画像投入デバイスをさらに備え、各画像投入デバイスは、画像情報を前記第1および第2の複数の導波管の各々の対応する入力縁の中に投入するように構成されている、項目1に記載のシステム。
(項目20)
前記画像投入デバイスは、前記第1および第2の複数の導波管の対応する入力縁の中に投入される光のための可変開口を備えている、項目19に記載のシステム。
(項目21)
前記システムは、視認者によって装着されるように構成されているフレームを備え、前記導波管のスタックは、前記フレームに取り付けられている、項目1に記載のシステム。(項目22)
別の導波管のスタックをさらに備え、
前記導波管のスタックは、画像情報を視認者の第1の眼に向かわせるように構成され、前記導波管の他方のスタックは、画像情報を前記視認者の第2の眼に向かわせるように構成されている、項目1に記載のシステム。
(項目23)
前記導波管のスタックおよび前記導波管の他方のスタックは、画像組を複数の深度平面上に生成するように構成され、
深度平面間の距離の進度と、
深度平面の総数と、
深度平面のための焦点距離と
のうちの1つ以上のものは、前記導波管のスタックの前記深度平面と前記導波管の他のスタックの前記深度平面との間で異なる、項目22に記載のシステム。
(項目24)
前記導波管の各々は、全内部反射によってその中で光を伝搬するように構成され、各導波管は、
前記導波管から外へ視認者の方に前記導波管内を伝搬する光を向け直すように構成されている回折光学要素を備えている、項目1に記載のシステム。
(項目25)
ぼやけを前記導波管の中に投入される画像情報に導入するための光学要素または画像処理モジュールをさらに備えている、項目1に記載のシステム。
(項目26)
前記光学要素または画像処理モジュールは、異なる量のぼやけを前記第1および第2の複数の導波管のうちの導波管に導入するように構成されている、項目1に記載のシステム。
(項目27)
第3の複数の導波管をさらに備え、各々は、第3の波長範囲の光を出力することによって画像を生成するように構成され、光学要素または画像処理モジュールは、異なる量のぼやけを前記第1、第2、および第3の複数の導波管のうちの導波管に導入するように構成されている、項目1に記載のシステム。
(項目28)
前記第1の複数の導波管によって生成される画像のための第1のピクセルサイズは、前記第2の複数の導波管によって生成される画像のための第2のピクセルサイズより小さい、項目1に記載のシステム。
(項目29)
第3の複数の導波管をさらに備え、前記第3の複数の導波管によって生成される画像のための第3のピクセルサイズは、前記第1または第2のピクセルサイズと異なる、項目1に記載のシステム。
(項目30)
2つの近隣深度平面間において、前記近隣深度平面間の点の輝度を分布させるように構成されているコントローラをさらに備えている、項目1に記載のシステム。
(項目31)
ディスプレイシステムであって、前記システムは、
複数の成分色画像を出力するように構成されているディスプレイを備え、前記成分色画像は、複数の深度平面に対応し、
第1の色の成分色画像は、合計で、第2の色の成分色画像より大きい数になり、前記第1の色の成分色画像は、第1の波長範囲内の波長を有する光によって形成され、前記第2の色の成分色画像は、第2の波長範囲内の波長を有する光によって形成される、システム。
(項目32)
第3の色の成分色画像は、合計で、前記第2の色の成分色画像より少ない数になり、前記第3の色の成分色画像は、第3の波長範囲内の波長を有する光によって形成される、項目31に記載のシステム。
(項目33)
前記システムは、複数の導波管を備え、各導波管は、単一色の成分色画像を出力するように構成されている、項目31に記載のシステム。
(項目34)
各導波管は、単一の関連付けられた深度平面のための成分色画像を出力するようにさらに構成されている、項目33に記載のシステム。
(項目35)
各導波管は、異なる深度平面の知覚を提供するように構成されている屈折力を伴う光学要素を備えている、項目33に記載のシステム。
(項目36)
深度平面間の間隔は、前記第1、第2、および第3の色の成分色画像のための複数の深度平面の各々に対して異なる、項目31に記載のシステム。
(項目37)
射出瞳が、各成分色画像を形成する光に関連付けられており、前記射出瞳サイズは、前記成分色画像の色に伴って変動する、項目31に記載のシステム。
(項目38)
各成分色画像を形成する光は、ある出射ビームサイズを有し、前記出射ビームサイズは、5mmより小さい、項目31に記載のシステム。
(項目39)
前記出射ビームサイズは、前記成分色画像の色に伴って変動する、項目38に記載のシステム。
(項目40)
前記システムは、視認者によって装着されるように構成されているフレームを備え、前記ディスプレイは、前記フレームに取り付けられている、項目31に記載のシステム。
(項目41)
前記ディスプレイは、各眼のために1組の2組の成分色画像を出力するように構成され、
深度平面間の距離の進度と、
深度平面の総数と、
深度平面のための焦点距離と
のうちの1つ以上のものは、各組の深度平面間で異なる、項目31に記載のシステム。(項目42)
ぼやけを前記成分色画像に導入するための光学要素または画像処理モジュールをさらに備えている、項目31に記載のシステム。
(項目43)
前記光学要素または画像処理モジュールは、異なる量のぼやけを異なる色の成分色画像に導入するように構成されている、項目42に記載のシステム。
(項目44)
前記第1の色の成分色画像のための第1のピクセルサイズは、前記第2の色の成分色画像のための第2のピクセルサイズと異なる、項目31に記載のシステム。
(項目45)
第3の色の成分色画像をさらに備え、前記第3の色の成分色画像のための第3のピクセルサイズは、前記第1または第2のピクセルサイズと異なる、項目44に記載のシステム。
(項目46)
前記成分色画像は、4つ以上の色を備えている、項目44に記載のシステム。
(項目47)
2つの近隣深度平面間において、前記近隣深度平面間の点の輝度を分布させるように構成されているコントローラをさらに備えている、項目31に記載のシステム。
(項目48)
ディスプレイシステムであって、前記システムは、
1つ以上の導波管を備え、前記1つ以上の導波管は、
第1の波長範囲の光を外部結合し、第1の複数の成分色画像を生成するように構成されている第1の複数の回折光学要素であって、各画像は、前記第1の複数の回折光学要素のためのX個の最大可能深度平面のうちの1つに設定される、第1の複数の回折光学要素と、
第2の波長範囲の光を外部結合し、第2の複数の成分色画像を生成するように構成されている第2の複数の回折光学要素であって、各画像は、前記第2の複数の回折光学要素のためのY個の最大可能深度平面のうちの1つ上に設定される、第2の複数の回折光学要素と
を備え、
XおよびYは、整数であり、XおよびYは、異なる、システム。
(項目49)
前記第1および第2の複数の回折光学要素は、単一導波管の一部である、項目48に記載のシステム。
(項目50)
前記第1および第2の複数の回折光学要素のうちの回折光学要素は、光学的回折状態と非回折状態との間で切り替え可能である、項目49に記載のシステム。
(項目51)
前記第1および第2の複数の回折光学要素は、液晶を備えている、項目49に記載のシステム。
(項目52)
前記第1の複数の回折光学要素のうちの回折光学要素は、前記第1の複数の回折光学要素のうちの回折光学要素と異なる1つ以上の導波管の一部であり、前記第1および第2の複数の回折光学要素のうちの回折光学要素は、光学的回折状態と非回折状態との間で切り替え可能である、項目48に記載のシステム。
(項目53)
第3の波長範囲の光を外部結合し、第3の複数の成分色画像を生成するように構成されている第3の複数の回折光学要素をさらに備え、各画像は、前記第3の複数の回折光学要素のためのZ個の最大可能深度平面のうちの1つ上に設定される、項目48に記載のシステム。
(項目54)
Zは、XおよびYと異なる、項目53に記載のシステム。
(項目55)
前記第1、第2、および第3の波長範囲の光は、それぞれ、赤色、緑色、および青色着色光を備えている、項目53に記載のシステム。
(項目56)
前記第1の複数の回折光学要素のための深度平面間の間隔の進度は、前記第2の複数の回折光学要素のための深度平面間の間隔の進度と異なる、項目48に記載のシステム。
(項目57)
前記システムは、外部結合される光の波長に応じて異なる射出瞳サイズを用いて、前記光を外部結合するように構成されている、項目48に記載のシステム。
(項目58)
各成分色画像を形成する光は、ある出射ビームサイズを有し、前記出射ビームサイズは、5mmより小さい、項目48に記載のシステム。
(項目59)
前記出射ビームサイズは、前記成分色画像の色に伴って変動する、項目58に記載のシステム。
(項目60)
前記システムは、視認者によって装着されるように構成されているフレームを備え、前記ディスプレイは、前記フレームに取り付けられている、項目48に記載のシステム。
(項目61)
前記ディスプレイシステムは、各眼のために1組の2組の成分色画像を出力するように構成され、
深度平面間の距離の進度と、
深度平面の総数と、
深度平面のための焦点距離と
のうちの1つ以上のものは、各組の前記深度平面間で異なる、項目48に記載のシステム。
(項目62)
ぼやけを前記成分色画像に導入するための光学要素または画像処理モジュールをさらに備えている、項目48に記載のシステム。
(項目63)
前記光学要素または画像処理モジュールは、異なる量のぼやけを異なる色の成分色画像に導入するように構成されている、項目62に記載のシステム。
(項目64)
前記第1の波長範囲の光を使用して生成される前記成分色画像のための第1のピクセルサイズは、前記第2の波長範囲の光を使用して生成される前記成分色画像のための第2のピクセルサイズと異なる、項目48に記載のシステム。
(項目65)
第3の色の成分色画像をさらに備え、前記第3の色の成分色画像のための第3のピクセルサイズは、前記第1または第2のピクセルサイズと異なる、項目64に記載のシステム。
(項目66)
2つの近隣深度平面間において、前記2つの近隣深度平面間の点の輝度を分布させるように構成されているコントローラをさらに備えている、項目48に記載のシステム。
(項目67)
ディスプレイシステムであって、前記ディスプレイシステムは、
複数の成分色画像を出力するように構成されているディスプレイであって、前記成分色画像は、複数の深度平面に対応する、ディスプレイと、
コントローラと
を備え、
前記コントローラは、前記深度平面のうちの少なくとも1つのために表示されるべき画像のコンテンツに基づいて、
ぼやけと、
ピクセルサイズの変化と
のうちの1つ以上のものを前記画像に導入するように構成されている、ディスプレイシステム。
(項目68)
前記ディスプレイは、導波管のスタックを備え、前記導波管のスタックは、
第1の複数の導波管であって、各々は、第1の色に対応する光を出力することによって、成分色画像を生成するように構成されている、第1の複数の導波管と、
第2の複数の導波管であって、各々は、前記第1の色と異なる第2の色に対応する光を出力することによって、成分色画像を生成するように構成されている、第2の複数の導波管と
を備えている、項目67に記載のディスプレイシステム。
(項目69)
ディスプレイシステムであって、前記ディスプレイシステムは、
瞳孔サイズを決定するためのカメラと、
光を出力し、複数の成分色画像を表示するように構成されているディスプレイであって、前記成分色画像は、複数の深度平面に対応する、ディスプレイと、
前記決定された瞳孔サイズに基づいて、前記出力される光の特性を変動させるように構成されているコントローラと
を備えている、ディスプレイシステム。
(項目70)
前記ディスプレイは、
第1の複数の導波管であって、各々は、第1の色に対応する光を出力することによって成分画像を生成するように構成されている、第1の複数の導波管と、
第2の複数の導波管であって、各々は、前記第1の色と異なる第2の色に対応する光を出力することによって成分画像を生成するように構成されている、第2の複数の導波管と
を備えている、項目69に記載のディスプレイシステム。
図1は、ARデバイスを通した拡張現実(AR)のユーザのビューを図示する。 図2は、ウェアラブルディスプレイシステムの例を図示する。 図3は、ユーザのための3次元画像をシミュレートするための従来のディスプレイシステムを図示する。 図4は、複数の深度平面を使用して3次元画像をシミュレートするためのアプローチの側面を図示する。 図5A-5Cは、曲率半径と焦点半径との間の関係を図示する。 図6は、画像情報をユーザに出力するための導波管スタックの例を図示する。 図7は、導波管によって出力される出射ビームの例を示す。 図8は、各深度平面が、各々が異なる色の光を出力する3つの関連付けられた導波管を有する導波管スタックの例を図示する。 図9は、異なる成分色が異なる数の関連付けられた導波管を有する導波管スタックの例を図示する。 図10は、異なる成分色が異なる数の関連付けられた導波管を有する導波管スタックの別の例を図示する。 図11は、瞳孔サイズを監視するように構成されたディスプレイシステムの例を図示する。
(詳細な説明)
VRおよびAR体験は、複数の深度平面に対応する画像が視認者に提供されるディスプレイを有するディスプレイシステムによって提供されることができる。画像は、深度平面ごとに異なり得(例えば、場面またはオブジェクトの若干異なる提示を提供する)、視認者の眼によって別個に集中させられ得る。その結果、ユーザは、異なる深度平面上に位置する場面のための異なる画像特徴に焦点を合わせるために要求される眼の遠近調節に基づいて、および/または、焦点から外れている異なる深度平面上の異なる画像特徴の観察に基づいて、深度の手掛かりを提供される。本明細書のいずれかに議論されるように、そのような深度の手掛かりは、深度の真実味のある知覚を提供する。
いくつかの構成では、各深度平面において、フルカラー画像が、各々が特定の成分色を有する成分画像をオーバーレイすることによって形成され得る。例えば、赤色、緑色、および青色画像の各々が、各フルカラー画像を形成するために出力され得る。その結果、各深度平面は、それに関連付けられた複数の成分色画像を有し得る。その結果、多数の成分色画像が、望ましくなく、所望の数の深度平面のためのフルカラー画像を提供するために要求され得る。
深度の真実味のある知覚および実質的フルカラー画像の知覚が、ディスプレイによって提示される全ての深度平面において全ての成分色のための成分色画像を提供することなく達成され得ることが見出されている。理論によって限定されるわけではないが、異なる色のための被写界深度は、変動し得ると考えられる。換言すると、ヒトの眼は、異なる波長の光を結像するとき、異なる感度を有し得、それによって、ある色において異なる深度平面上にあると明白に判別可能な画像または特徴が、別の色において異なる深度平面上にあると知覚されないこともある。例えば、異なる深度平面上の2つの画像は、ある色に対して十分に焦点が合って現れ得るが、別の色に対して焦点が合っていない。したがって、被写界深度(または代替として、焦点深度)は、異なる色に対して異なると考えられる。加えて、本明細書に開示されるように、異なる色に対する知覚される被写界深度を操作すること、または、異なる成分色に対する深度の手掛を判別することに対する眼の感度を操作することが可能であり得る。そのような操作は、眼によって判別され得る深度平面の数を低減させることができる。
いくつかの実施形態では、実質的にフルカラーであると感知されるべき画像は、複数の深度平面にわたって等しくない数で分配される成分色画像を使用して形成され得る。例えば、ディスプレイによって提示される各深度平面に対して各成分色の画像を提供するのではなく、深度平面にわたる成分色画像の分配は、色に基づいて変動し得る。例えば、深度平面にわたって分配される第1の成分色の画像の総数は、第2の成分色の画像の総数と異なり得る。いくつかの実施形態では、第3の成分色の画像の総数は、第1または第2の成分色の総数と異なり得る。いくつかの実施形態では、少なくとも1つの成分色は、別の成分色と異なる画像の総数を有する。いくつかの他の実施形態では、全ての成分色は、互いに異なる画像の総数を有する。いくつかの実施形態では、特定の成分色の画像の総数は、その色に対応する光の波長を使用して、異なる深度平面を区別するための眼の感度に基づいて選定される。例えば、成分色が、赤色、緑色、および青色である場合、緑色成分画像の総数は、赤色成分画像の総数を上回り、赤色成分画像の総数は、青色成分画像の総数を上回り得る。その結果、いくつかの実施形態では、緑色成分画像間の深度における分離は、赤色成分画像より短くあり得る。この構成は、実行可能であり得る。何故なら、眼が、緑色光と比較して、赤色光に対して増加させられた被写界また焦点深度を有し得、それによって、2つの赤色画像が、同様に位置する緑色画像に対する被写界深度または焦点深度を越える深度によって分離されているにもかかわらず、焦点が合うからである。
いくつかの実施形態では、画像情報は、導波管のスタックによって投影または出力され得る。いくつかの実施形態では、ディスプレイシステムは、各々が特定の色の光を出力する導波管を含み、上で議論されたように、いくつかの色は、他の色より少ない数の関連付けられた導波管を有する。例えば、ディスプレイシステムは、複数個の複数(例えば、第1および第2の複数)の導波管によって形成される導波管のスタックを含み得る。各複数の導波管は、特定の色に対応する光を出力することによって、画像を生成するように構成される。第2の複数の導波管における導波管の総数は、第1の複数の導波管における導波管の総数未満である。フルカラー画像が3つ以上の成分色によって形成され得るいくつかの実施形態では、対応して、3つ以上の複数の導波管(例えば、第1、第2、および第3の複数の導波管)が存在し得る。
いくつかの実施形態では、第1の複数の導波管は、緑色光(すなわち、知覚される色である緑色に対応する波長の光)を出力するように構成され得、第2の複数の導波管は、青色光(知覚される色である緑色に対応する波長の光)を出力するように構成され得、第3の複数の導波管は、赤色光(知覚される色である緑色に対応する波長の光)を出力するように構成され得る。第2の複数の導波管(青色光を出力するため)は、第1または第3の複数の導波管(それぞれ、緑色および赤色光を出力するため)より少ない導波管の総数を含み得る。加えて、いくつかの実施形態では、第3の複数の導波管における導波管の総数は、第1の複数の導波管におけるより少ないか、またはその逆であり得る。
いくつかの実施形態では、1つ以上の導波管は、光を外部結合し、2つ以上の深度平面のための画像を形成するように構成される光学要素を含み得る。例えば、導波管は、回折光学要素等の光学要素を含み得、光学要素は、光を外部結合または向け直すように構成される「オン」状態と、光を認識できるほど外部結合しない「オフ」状態との間で切り替え可能である。いくつかの実施形態では、単一導波管、または導波管のスタックのうちの個々の導波管は、複数の光学要素の組を含み得、各組は、特定の深度平面のための特定の色の画像を形成するように構成される。光学要素のある組が、光を外部結合し、特定の成分色画像を特定の深度平面上に形成すると、オフに切り替えられ得、光学要素の別の組が、別の特定の成分色画像を特定の深度平面上に形成するためにオンにされ得る。
いくつかの実施形態では、ディスプレイは、オン状態とオフ状態との間で切り替え可能である光学要素を伴わずに、複数の異なる色の光を外部結合するように構成される光学要素を伴う少なくとも1つの導波管を含み得る。例えば、単一導波管は、複数の光学要素の組を含み得、各組は、異なる色の光を外部結合するように構成される。異なる組は、1つ以上の特定の光の波長のために選択的である光学活性を有し、それによって、異なる成分色画像が、単一導波管を使用して形成されることを可能にし得る。
本明細書に開示される実施形態は、以下の利点のうちの1つ以上のものを提供し得ることを理解されたい。例えば、外界からの光およびいくつかの導波管からの光が、導波管のスタックを通して伝搬し、視認者に到達するので、反射および/または他の歪み等の光学アーチファクトが、光が導波管を通して伝搬し、それと相互作用するにつれて生じ得る。その結果、導波管の数を低減させることは、これらの光学アーチファクトを低減させ得る。導波管の数を低減させることは、例えば、ディスプレイシステム内で利用される部品の数を低減させ、それによって、ディスプレイシステムの構造および電気複雑性を低減させることによって、製造性および収率も改良し、デバイスコストを低減させ得る。加えて、導波管の数が低減させられない場合でも、深度平面あたりの成分色画像の数を低減させることは、システムがより少ない画像情報を処理することが要求されるであろうため(処理するためのより少ない総成分色画像が存在するため)、補助画像処理システム上の処理または計算負荷を低減させ得る。これは、例えば、画像を処理するためのシステムリソースの関わりを低減させることにより、応答性を改良し、待ち時間を低減させることによって、ディスプレイシステム性能も改良し得る。
本明細書に開示される実施形態は、概して、ディスプレイシステムを含む。いくつかの実施形態では、ディスプレイシステムは、装着可能であり、それは、有利には、より没入型のVRまたはAR体験を提供し得る。例えば、複数の深度平面を表示するための導波管、例えば、導波管のスタックを含むディスプレイは、ユーザまたは視認者の眼の正面に位置付けられるよう装着されるように構成され得る。いくつかの実施形態では、複数の導波管、例えば、2つの導波管のスタック(視認者の各眼のために1つ)が、異なる画像を各眼に提供するために利用され得る。
図2は、ウェアラブルディスプレイシステム(80)の例を図示する。ディスプレイシステム(80)は、ディスプレイ(62)と、そのディスプレイ(62)の機能サポートをするための種々の機械および電子モジュールならびにシステムとを含む。ディスプレイ(62)は、ディスプレイシステムユーザまたは視認者(60)によって装着可能であり、ディスプレイ(62)をユーザ(60)の眼の正面に位置付けるように構成されるフレーム(64)に結合され得る。いくつかの実施形態では、スピーカ(66)が、フレーム(64)に結合され、ユーザの外耳道に隣接して位置付けられる(いくつかの実施形態では、示されない別のスピーカが、ユーザの他の外耳道に隣接して位置付けられ、ステレオ/成形可能音制御を提供する)。ディスプレイ(62)は、有線導線または無線接続性等によって、ローカルデータ処理モジュール(70)に動作可能に結合され(68)、ローカルデータ処理モジュールは、フレーム(64)に固定して取り付けられる構成、ユーザによって装着されるヘルメットまたは帽子に固定して取り付けられる構成、ヘッドホン内に内蔵される構成、または、そうでなければ、ユーザ(60)に除去可能に取り付けられる構成(例えば、バックパック式構成、ベルト結合式構成において)等、種々の構成で搭載され得る。
ローカル処理およびデータモジュール(70)は、プロセッサと、不揮発性メモリ(例えば、フラッシュメモリ)等のデジタルメモリとを備え得、両方とも、データの処理、キャッシュ、および記憶を補助するために利用され得る。データは、a)画像捕捉デバイス(カメラ等)、マイクロホン、慣性測定ユニット、加速度計、コンパス、GPSユニット、無線デバイス、および/またはジャイロスコープ等のセンサ(例えば、フレーム(64)に動作可能に結合され、または別様に、ユーザ(60)に取り付けられ得る)から捕捉されたデータ、および/または、b)可能性として、処理または読み出し後、ディスプレイ(62)への通過のために、遠隔処理モジュール(72)および/または遠隔データリポジトリ(74)を使用して取得および/または処理されたデータを含む。ローカル処理およびデータモジュール(70)は、遠隔モジュール(72、74)が、互いに動作可能に結合され、ローカル処理およびデータモジュール(70)にリソースとして利用可能であるように、通信リンク(76、78)によって、有線または無線通信リンク等を介して、これらの遠隔処理モジュール(72)および遠隔データリポジトリ(74)に動作可能に結合され得る。
いくつかの実施形態では、遠隔処理モジュール(72)は、データおよび/または画像情報を分析ならびに処理するように構成される、1つ以上のプロセッサを備え得る。いくつかの実施形態では、遠隔データリポジトリ(74)は、インターネットまたは「クラウド」リソース構成における他のネットワーキング構成を通して利用可能であり得るデジタルデータ記憶設備を備え得る。いくつかの実施形態では、ローカル処理およびデータモジュール内で、全てのデータが記憶され、全ての計算が行われ、遠隔モジュールからの完全に自律的使用を可能にする。
「3次元」または「3-D」であるような画像の知覚は、視認者の各眼への画像の若干異なる提示を提供することによって達成され得る。図3は、ユーザのための3次元画像をシミュレートするための従来のディスプレイシステムを図示する。各眼(4および6)のために1つの2つの異なる画像(5および7)が、ユーザに出力される。画像(5および7)は、視認者の視線と平行な光学またはz-軸に沿って距離(10)だけ眼(4および6)から間隔を置かれる。画像(5および7)は、平坦であり、眼(4および6)は、単一の遠近調節された状態をとることによって、画像上に焦点を合わせる。そのようなシステムは、画像(5および7)を組み合わせるヒトの視覚系に依拠して、組み合わせられた画像のための深度の知覚を提供する。
しかしながら、ヒトの視覚系は、より複雑であり、深度の現実的知覚を提供することは、より困難であることを理解されたい。例えば、従来の「3-D」ディスプレイシステムの多くの視認者は、そのようなシステムが不快であることを見出すか、または深度の感知を全く知覚しないこともある。理論によって限定されるわけではないが、オブジェクトの視認者は、両眼離反運動と遠近調節との組み合わせにより、オブジェクトを「3次元」として知覚し得ると考えられる。互いに対する2つの眼の両眼離反運動移動(すなわち、眼の視線を収束させ、オブジェクトに固定するための、互いに向かって、またはそこから離れる瞳孔の転動運動)は、眼の水晶体の焦点調節(または「遠近調節」)と緊密に関連付けられる。正常条件下では、眼の水晶体の焦点を変化させること、または眼を遠近調節し、焦点を1つのオブジェクトから異なる距離における別のオブジェクトに変化させることは、自動的に、「遠近調節-両眼離反運動反射」として知られる関係下、同一距離までの両眼離反運動における整合変化を生じさせるであろう。同様に、両眼離反運動の変化は、正常条件下では、遠近調節の整合変化も誘起するであろう。本明細書に記載されるように、多くの立体視または「3-D」ディスプレイシステムは、3次元透視画がヒトの視覚系によって知覚されるように、各眼への若干異なる提示(したがって、若干異なる画像)を使用して場面を表示する。しかしながら、それらが、とりわけ、単に場面の異なる提示を提供するが、眼が全ての画像情報を単一の遠近調節された状態において視認した状態では、「遠近調節-両眼離反運動反射」に逆らうので、そのようなシステムは、多くの視認者にとって不快である。遠近調節と両眼離反運動との間のより良好な整合を提供するディスプレイシステムは、3次元画像のより現実的かつ快適なシミュレーションを形成し得る。
図4は、複数の深度平面を使用して3次元画像をシミュレートするためのアプローチの側面を図示する。図4Aを参照すると、z-軸上の眼(4および6)から種々の距離におけるオブジェクトは、それらのオブジェクトが焦点があっているように、眼(4、6)によって遠近調節される。眼(4および6)は、特定の遠近調節された状態をとることにより、z-軸に沿って異なる距離におけるオブジェクトに焦点を合わせる。その結果、特定の遠近調節された状態は、特定の深度平面におけるオブジェクトまたはオブジェクトの一部が、眼がその深度平面のための遠近調節された状態にあるとき、焦点が合うように、関連付けられた焦点距離を有する深度平面(14)のうちの特定の1つに関連付けられていると言え得る。いくつかの実施形態では、3次元画像は、眼(4、6)の各々のために画像の異なる提示を提供することによってシミュレートされ、および、深度平面の各々に対応する画像の異なる提示を提供することによってもシミュレートされ得る。例証を明確にするために、別個であるように示されるが、眼(4、6)の視野は、例えば、z-軸に沿った距離が増加するにつれて、重複し得ることを理解されたい。加えて、例証を容易にするために、平坦であるように示されるが、深度平面の輪郭は、深度平面内の全ての特徴が特定の遠近調節された状態における眼に関して焦点が合うように、物理的空間内で湾曲させられ得ることを理解されたい。
オブジェクトと眼(4または6)との間の距離は、その眼によって視認されるにつれて、そのオブジェクトからの光の発散の量を変化させることもできる。図5A-5Cは、距離と光線の発散との間の関係を図示する。オブジェクトと眼(4)との間の距離は、減少距離の順序において、R1、R2、およびR3によって表される。図5A-5Cに示されるように、光線は、オブジェクトまでの距離が減少するにつれて、より発散する。距離が増加するにつれて、光線は、よりコリメートされる。換言すると、点(オブジェクトまたはオブジェクトの一部)によって生成される光場は、ユーザの眼からの点の距離の関数である球状波面曲率を有すると言え得る。曲率は、オブジェクトと眼(4)との間の距離の減少に伴って増加する。その結果、異なる深度平面では、光線の発散度も、異なり、発散の程度は、深度平面と視認者の眼4との間の距離の減少に伴って増加する。単一眼(4)のみが、図5A-5Cおよび本明細書の他の図では、例証を明確にするために図示されるが、眼(4)に関する議論は、視認者の両眼(4および6)に適用され得ることを理解されたい。
理論によって限定されるわけではないが、ヒトの眼は、典型的には、有限数の深度平面を解釈し、深度知覚を提供することができると考えられる。その結果、知覚された深度の高度に真実味のあるシミュレーションは、眼に、これらの限定数の深度平面の各々に対応する画像の異なる提示を提供することによって達成され得る。
図6は、画像情報をユーザに出力するための導波管スタックの例を図示する。ディスプレイシステム1000は、複数の導波管(182、184、186、188、190)を使用して、3次元知覚を眼/脳に提供するために利用され得る導波管のスタックまたはスタックされた導波管アセンブリ(178)を含む。いくつかの実施形態では、ディスプレイシステム(1000)は、図2のシステム(80)であり、図6は、そのシステム(80)のいくつかの部分をより詳細に図式的に示す。例えば、導波管アセンブリ(178)は、図2のディスプレイ(62)の中に統合され得る。
図6を継続して参照すると、導波管アセンブリ(178)は、複数の特徴(198、196、194、192)を導波管間に含み得る。いくつかの実施形態では、特徴(198、196、194、192)は、レンズであり得る。導波管(182、184、186、188、190)および/または複数のレンズ(198、196、194、192)は、種々のレベルの波面曲率または光線発散を伴って、画像情報を眼に送信するように構成され得る。各導波管レベルは、特定の深度平面に関連付けられ得、その深度平面に対応する画像情報を出力するように構成され得る。画像投入デバイス(200、202、204、206、208)は、導波管(182、184、186、188、190)の中に画像情報を投入するために利用され得、それらの各々は、本明細書に説明されるように、眼4に向かって出力するために、入射光を各それぞれの導波管にわたって分配するように構成され得る。光は、画像投入デバイス(200、202、204、206、208)の出力表面(300、302、304、306、308)から出射し、導波管(182、184、186、188、190)の対応する入力縁(382、384、386、388、390)の中に投入される。いくつかの実施形態では、光の単一ビーム(例えば、コリメートされたビーム)が、各導波管の中に投入され、特定の導波管に関連付けられた深度平面に対応する特定の角度(および発散量)において眼(4)に向かわせられる、クローン化され、コリメートされたビームの場全体を出力し得る。
いくつかの実施形態では、画像投入デバイス(200、202、204、206、208)は、各々が対応する導波管(それぞれ、182、184、186、188、190)の中への投入のための画像情報を生成する個別的なディスプレイである。いくつかの他の実施形態では、画像投入デバイス(200、202、204、206、208)は、単一の多重化されたディスプレイの出力端であり、それは、例えば、画像投入デバイス(200、202、204、206、208)の各々に1つ以上の光学導管(光ファイバケーブル等)を介して、画像情報を運び得る。
コントローラ210は、スタックされた導波管アセンブリ(178)および画像投入デバイス(200、202、204、206、208)の動作を制御する。いくつかの実施形態では、コントローラ210は、例えば、本明細書に開示される種々のスキームのいずれかに従って、導波管(182、184、186、188、190)への画像情報のタイミングおよび提供を調整するプログラミング(例えば、非一過性媒体内の命令)を含む。いくつかの実施形態では、コントローラは、単一一体型デバイスまたは有線もしくは無線通信チャネルによって接続される分散型システムであり得る。コントローラ210は、いくつかの実施形態では、処理モジュール(70または72)(図2)の一部であり得る。
導波管(182、184、186、188、190)は、全内部反射(TIR)によって、各それぞれの導波管内で光を伝搬するように構成され得る。導波管(182、184、186、188、190)の各々は、平面であるか、または別の形状(例えば、湾曲)を有し、主要上部および底部表面と、それらの主要上部および底部表面間に延びている縁とを伴い得る。図示される構成では、導波管(182、184、186、188、190)の各々は、光を向け直し、各それぞれの導波管内で伝搬し、導波管から、画像情報を眼4に出力することによって、光を導波管の外に抽出するように構成される光抽出光学要素(282、284、286、288、290)を含み得る。抽出光は、外部結合される光とも称され得、光抽出光学要素は、外部結合光学要素とも称され得る。光の抽出されるビームは、導波管内で伝搬する光が光向け直し要素に衝打する場所において、導波管によって出力される。光抽出光学要素(282、284、286、288、290)は、例えば、反射および/または回折光学特徴であり得る。いくつかの実施形態では、説明の容易性および図面の明確性のために、導波管(182、184、186、188、190)の底部主要表面に配置されて図示されるが、光抽出光学要素(282、284、286、288、290)は、上部および/または底部主要表面に配置され得、および/または導波管(182、184、186、188、190)の体積内に直接配置され得る。いくつかの実施形態では、光抽出光学要素(282、284、286、288、290)は、透明基板に取り付けられ、導波管(182、184、186、188、190)を形成する材料の層内に形成され得る。いくつかの他の実施形態では、導波管(182、184、186、188、190)は、モノリシック材料片であり得、光抽出光学要素(282、284、286、288、290)は、その材料片の表面上および/または内部に形成され得る。
図6を継続して参照すると、本明細書に議論されるように、各導波管(182、184、186、188、190)は、光を出力し、特定の深度平面に対応する画像を形成するように構成される。例えば、眼の最近傍の導波管(182)は、コリメートされた光を、そのような導波管(182)の中に投入されるにつれて、眼(4)に送達するように構成され得る。コリメートされた光は、光学無限遠焦点面を表し得る。次の上方導波管(184)は、眼(4)に到達し得る前に、第1のレンズ(192;例えば、負のレンズ)を通過するコリメートされた光を送出するように構成され得る。そのような第1のレンズ(192)は、眼/脳が、その次の上方導波管(184)から生じる光を光学無限遠から眼(4)に向かって内向きにより近い第1の焦点面から生じるよう解釈するように、若干の凸面波面曲率を作成するように構成され得る。同様に、第3の上方導波管(186)は、眼(4)に到達する前に、その出力光を第1の(192)および第2の(194)レンズの両方を通過させる。第1の(192)および第2の(194)レンズの組み合わせられた屈折力は、眼/脳が、第3の導波管(186)から生じる光を次の上方導波管(184)から生じるものより光学無限遠から人物に向かって内向きにさらに近い第2の焦点面から生じるよう解釈するように別の増分量の波面曲率を作成するように構成され得る。
他の導波管層(188、190)およびレンズ(196、198)も同様に構成され、スタック内の最高導波管(190)は、人物に最も近い焦点面を表す集約焦点力のために、その出力をそれと眼との間のレンズの全てを通して送出する。スタックされた導波管アセンブリ(178)の他の側の世界(144)から生じる光を視認/解釈するとき、レンズ(198、196、194、192)のスタックを補償するために、補償レンズ層(180)が、スタックの上部に配置され、下方のレンズスタック(198、196、194、192)の集約力を補償し得る。そのような構成は、利用可能な導波管/レンズペアと同数の知覚される焦点面を提供する。導波管の光抽出光学要素とレンズの焦点調節側面との両方は、静的(すなわち、非動的または電気活性)であり得る。いくつかの代替実施形態では、いずれかまたは両方は、電気活性特徴を使用して、動的であり得る。
図6を継続して参照すると、光抽出光学要素(282、284、286、288、290)は、それらのそれぞれの導波管の外に光を向け直すことと、導波管に関連付けられた特定の深度平面のための適切な量の発散またはコリメーションを伴って、この光を出力することとの両方を行うように構成され得る。その結果、異なる関連付けられた深度平面を有する導波管は、異なる構成の光抽出光学要素(282、284、286、288、290)を有し得、それらは、関連付けられた深度平面に応じて、異なる量の発散を伴う光を出力する。いくつかの実施形態では、本明細書に議論されるように、光抽出光学要素(282、284、286、288、290)は、光を特定の角度で出力するように構成され得る立体または表面特徴であり得る。例えば、光抽出光学要素(282、284、286、288、290)は、体積ホログラム、表面ホログラム、および/または回折格子であり得る。回折格子等の光抽出光学要素は、2015年3月7日に出願された米国特許出願第14/641,376号(参照することによってその全体として本明細書に組み込まれる)に説明される。いくつかの実施形態では、特徴(198、196、194、192)は、レンズでないこともある。むしろ、それらは、単に、スペーサ(例えば、クラッディング層および/または空気間隙を形成するための構造)であり得る。
いくつかの実施形態では、光抽出光学要素(282、284、286、288、290)は、回折パターンを形成する回折特徴、すなわち、「回折光学要素」(本明細書では、「DOE」とも称される)である。好ましくは、DOEは、ビームの光の一部のみが、DOEの各交差点で、眼(4)に向かって偏向され、残りは、全内部反射を介して、導波管を通して移動し続けるように、比較的に低回折効率を有する。画像情報を搬送する光は、したがって、多数の場所において導波管から出射するいくつかの関連出射ビームに分割され、その結果、導波管内でバウンスするこの特定のコリメートされたビームに対して、眼(4)に向かう非常に均一な出射放出パターンをもたらす。
いくつかの実施形態では、1つ以上のDOEは、それらが能動的に回折する「オン」状態と、それらが有意に回折しない「オフ」状態との間で切り替え可能であり得る。例えば、切り替え可能なDOEは、ポリマー分散液晶の層を備え得、微小液滴は、ホスト媒体の中で回折パターンを備え、微小液滴の屈折率は、ホスト材料の屈折率と実質的に一致するように切り替えられることができるか(その場合、パターンは、入射光を著しく回折しない)、または微小液滴は、ホスト媒体のそれと一致しない屈折率に切り替えられることができる(その場合、パターンは、入射光を能動的に回折する)。
図7は、導波管によって出力される出射ビームの例を示す。1つの導波管が図示されるが、導波管アセンブリ(178)内の他の導波管も、同様に機能し得、導波管アセンブリ(178)は、複数の導波管を含むことを理解されたい。光(400)は、導波管(182)の入力縁(382)において導波管の(182)中に投入され、TIRによって導波管(182)内を伝搬する。光(400)がDOE(282)に衝突する点において、光の一部は、出射ビーム(402)として導波管から出射する。出射ビーム(402)は、略平行として図示されるが、本明細書に議論されるように、それらは導波管(182)に関連付けられた深度平面に応じて、ある角度(例えば、発散出射ビームを形成する)で眼(4)に伝搬するように向け直され得る。略平行出射ビームは、光を外部結合し、眼(4)から長距離(例えば、光学無限遠)において深度平面上に設定されるように現れる画像を形成する、光抽出光学要素を伴う導波管を示し得ることを理解されたい。他の導波管または他の光抽出光学要素の組は、眼(4)が、より近い距離に遠近調節し、網膜上に焦点を合わせることを要求し、光学無限遠より眼(4)に近い距離からの光として脳によって解釈されるであろう、より発散する、出射ビームパターンを出力し得る。
図8は、スタックされた導波管アセンブリの例を図式的に図示し、各深度平面は、各々が異なる色の光を出力する3つの関連付けられた導波管を有する。フルカラー画像は、複数の成分色、例えば、3つ以上の成分色の各々における画像をオーバーレイすることによって、各深度平面において形成され得る。いくつかの実施形態では、成分色は、赤色と、緑色と、青色とを含む。いくつかの他の実施形態では、マゼンタ色およびシアン色を含む他の色が、赤色、緑色、または青色のうちの1つ以上のものと併せて使用され得るか、またはそれに取って代わり得る。いくつかの実施形態では、各導波管は、特定の成分色を出力するように構成され得、その結果、各深度平面は、それに関連付けられた複数の導波管を有し得る。各深度平面は、例えば、1つ目は、赤色光を出力するために、第2つ目は、緑色光を出力するために、3つ目は、青色光を出力するために、それに関連付けられた3つの導波管を有し得る。本開示全体を通して光の所与の色の言及は、その所与の色であるように視認者によって知覚される、光の波長の範囲内の1つ以上の波長の光を包含するものと理解されるであろうことを理解されたい。例えば、赤色光は、約620~780nmの範囲内である1つ以上の波長の光を含み得、緑色光は、約492~577nmの範囲内である1つ以上の波長の光を含み得、青色光は、約435~493nmの範囲内である1つ以上の波長の光を含み得る。
図8を継続して参照すると、深度平面14a-14fが、示される。図示される実施形態では、各深度平面は、第1の色Gの第1の画像、第2の色Rの第2の画像、および第3の色Bの第3の画像のそれに関連付けられた3つの成分色画像を有する。本明細書の慣例として、これらの文字の各々に続く数字は、ジオプタ(1/m)、すなわち、視認者からの深度平面の距離を示し、図中の各ボックスは、個々の成分色画像を表す。いくつかの実施形態では、Gは、緑色の色であり、Rは赤色の色であり、Bは、青色の色である。
いくつかの配列では、各成分色画像は、導波管のスタック内の異なる導波管によって出力され得る。例えば、各深度平面は、第1の色Gを出力するための第1の導波管、第2の色Rを出力するための第2の導波管、および第3の色Bを出力するための第3の導波管のそれに関連付けられた3つの成分色画像を有し得る。導波管が成分色画像を出力するために使用される配列では、図中の各ボックスは、個々の導波管を表すように理解され得る。
各深度平面に関連付けられた導波管は、この概略図では、説明を容易にするために、互いに隣接して示されるが、物理的デバイスでは、導波管は全て、レベルあたり1つの導波管を伴って、スタック内に配列され得ることを理解されたい。異なる深度平面が、文字G、R、およびBに続くジオプタのための異なる数字によって図に示される。しかしながら、本明細書に議論されるように、導波管スタック内の導波管の総数を低減させることが有益であろう。
成分色を使用してフルカラー画像を形成するために、各成分色が各画像を形成するように出力されるべきであると考えられている。その結果、専用導波管が特定の成分色を出力する、ディスプレイを使用するとき、画像を特定の深度平面上に形成するために、少なくとも1つの導波管が各成分色を出力するために利用可能であるべきであると考えられている。しかしながら、低減させられた数の導波管が、依然として良好な色分解能を提供しながら、利用され得ることが見出されている。
いくつかの実施形態では、本明細書ではスタックされた導波管アセンブリとも称される、導波管のスタックは、異なる色または波長範囲の光を出力するための等しくない数の導波管を含む。図9は、導波管スタックの例を図示し、異なる成分色は、異なる数の関連付けられた導波管を有する。導波管スタックは、導波管アセンブリ178(図6)の一部であり得る。導波管のスタックは、全てGによって示される第1の複数の導波管と、全て文字Rによって示される第2の複数の導波管と、全て文字Bによって示される第3の複数の導波管とを含む。例証を明確にするために、深度平面14a-14fが、示されるが、しかしながら、より少ないまたはそれを上回る数の深度平面も、想定される。加えて、3つの成分色が図示されるが、より少ない(例えば、2つ)またはそれを上回る数(例えば、4つ以上の)の成分色も、想定される。
理論によって限定されるわけではないが、フルカラー画像を形成することは、好ましくは、画像の各成分色のための画像情報を利用するが、これは、各深度平面が全ての成分色のための関連付けられた導波管を有することを要求しないことが見出されている。むしろ、眼は、光の異なる波長または色を使用して焦点を合わせるとき、異なる感度を有すると考えられる。例えば、眼は、緑色光を使用して焦点を合わせることに非常に敏感であり、例えば、赤色光より短い焦点深度および被写界深度を有すると考えられる。その結果、眼は、赤色光と比較して、緑色光のための波長では、より多くの数のより近接して間隔を置かれる深度平面を別個に区別し得る。眼は、赤色光を使用して焦点を合わせることにあまり敏感ではなく、青色光を用いて焦点を合わせることにはさらに敏感ではないと考えられる。その結果、オブジェクトが焦点が合っているように眼によって知覚される距離の範囲も、色に伴って変動し、同様に、知覚される深度平面の数も、色に伴って変動する。すなわち、青色光に対するより低い感度は、光を使用して提示される画像が、赤色光または緑色光を使用して提示される画像より大きい深度範囲に対して焦点が合っているように知覚され、赤色光を使用して提示される画像は、緑色光を使用して提示される画像より大きい深度範囲に対して焦点が合っているように知覚されるであろうことを示す。その結果、図9に図示されるように、関連付けられた導波管を有する全ての深度平面において各成分色のための光を出力せずに、良好な範囲の色を有するように知覚される画像を提示することが可能である。
図9を継続して参照すると、第1の複数の導波管Gは、第2の複数の導波管Rを上回る導波管の総数を含む。この差異が、単独で、図8に示される構成と比較して、導波管アセンブリ内の導波管の総数を有益に低減させることを理解されたい。いくつかの実施形態では、第3の複数の導波管Bは、第1または第2の複数の導波管GもしくはRと異なる導波管の総数を有し得る。いくつかの実施形態では、各成分色に対応する導波管の総数は、本明細書に議論されるように、それらの色に対応する光を集中させることに対する眼の感度および関連付けられた被写界深度に基づいて選択され得る。例えば、緑色光を出力するための導波管の総数は、赤色光を出力するためのそれを上回り得、赤色光を出力するためのそれは、青色光を出力するためのそれを上回る。
いくつかの実施形態では、各成分色のための導波管は、等しく間隔を置かれた深度平面に対応し得る。例えば、図示されるように、導波管Gは、0.50ジオプタ間隔を置かれる深度平面に関連付けられ得る一方、導波管Rは、0.75ジオプタ間隔を置かれる深度平面に関連付けられ、導波管Bは、1.0ジオプタ間隔を置かれる深度平面に関連付けられる。いくつかの実施形態では、導波管のための深度平面は、必ずしも、同一ではないので、それらによって出力される画像情報も、若干異なり得、その導波管に関連付けられた特定の深度平面に対応し得ることを理解されたい。
いくつかの他の実施形態では、近隣深度平面に関連付けられた導波管によって出力される画像情報は、色以外、同じであり得る。例えば、G,0.25;R,0.375;およびB,0.5によって示される導波管の各々は、色以外同一である画像情報を出力するように構成され得る。例えば、コントローラ210(図6)は、そうでなければ同一である画像情報をこれらの異なる導波管に提供するようにプログラムされ得る。そのような実施形態では、深度平面間の間隔は、類似画像情報を出力する導波管が、異なる画像の提示のための画像情報を別の深度平面上に出力する導波管より短い距離だけ互いから分離されるように選定される。
異なる色が、等しく間隔を置かれない深度平面上に最もはっきりと集中させられ得ることを理解されたい。いくつかの実施形態では、特定の導波管および色に関連付けられた特定の深度平面は、その導波管によって出力される色の光を使用して特定の深度平面をはっきりと集中させる眼の能力に基づいて選択され得る。特定の色光のための導波管に関連付けられた特定の深度平面およびz-軸上のその場所は、その色に対する眼の焦点深度または被写界深度に基づいて選定され得る。その結果、いくつかの実施形態では、第1、第2、および第3の複数の導波管のうちの導波管のうちの少なくともいくつかは、対応する導波管によって出力される光の色を使用して高度に集中させられる画像を提供するように選定される、深度平面に関連付けられる。加えて、ある実施形態では、第1の複数の導波管のうちの導波管は、非均一に間隔を置かれる深度平面のための画像を提供するように構成され得る。すなわち、第1の複数の導波管に関連付けられた深度平面は、非均一に間隔を置かれ得る。同様に、第2および/または第3の複数の導波管に関連付けられた深度平面も、非均一に間隔を置かれ得る。図9等の概略プロットを参照して本明細書で使用されるように、2つの深度平面間の間隔は、それらの深度平面間のジオプタにおける差異である。
図10は、導波管スタックの別の例を図示し、異なる成分色は、異なる数の関連付けられた導波管を有する。図9の構成と比較して、図10の構成は、より少ない導波管を含み、より少ない深度平面のための画像情報を提供する。その結果、異なる成分色のための深度平面間の間隔も、図9に図示されるものと異なる。いくつかの実施形態では、導波管の数のこのさらなる低減は、z-軸における分解能の減少または被写界深度における増加によって達成され得る。前述のように、図示される導波管スタックは、導波管アセンブリ178(図6)の一部であり得る。
導波管を参照して議論されるが、図9および10ならびに関連説明は、概して、図8に関して前述のように、深度平面に関連付けられた成分色画像に関すると理解され得ることを理解されたい。例えば、図9および10は、導波管と深度平面および/または色との間の1対1対応の有無にかかわらず、異なる深度平面に関連付けられた成分色画像を図示すると理解され得る。例えば、異なる画像は、ディスプレイによって視認者に直接出力されるか、または図6に図示されるもの等の導波管スタックを使用せずに、代替光学手段によって中継され得る。例えば、いくつかの実施形態では、画像を生成するための空間光変調器等の光変調器が、可変焦点要素に結合され得、異なる成分色画像またはサブフレームは、可変焦点要素によって、異なる焦点距離(および異なる深度平面)に配置される。そのような空間光変調器および可変焦点要素に関するさらなる詳細は、2015年3月7日に出願された米国特許出願第14/641,376号(本明細書に記載されるように、参照することによって組み込まれる)に開示される。
いくつかの実施形態では、複数の光学要素、例えば、異なる成分色の画像および/または複数の深度平面上に設定される画像のための光を出力するように構成されるDOEが、共有導波管上に常駐し得る。共有導波管上の個々の光学要素は、光を外部結合し、特定の深度平面上に設定される成分色画像を生成するように切り替えられ、次いで、特定の深度平面のための画像が所望されないとき、オフに切り替えられ得る。異なる光学要素は、異なる時間においてオンおよびオフに切り替えられ、全て共有導波管から、複数の異なる深度平面および/または異なる波長範囲に対応する画像を出力し得る。共有導波管上の光学要素に関する追加の詳細は、2015年3月7日に出願された米国特許出願第14/641,376号に見出される。ある実施形態では、切り替え可能な光学要素は、他の導波管(例えば、導波管184、186、180、および190)を省略し、導波管アセンブリ(178)が、単一導波管(例えば、導波管182)のみを含むことを可能にし得る。
いくつかの実施形態では、光抽出光学要素は、光の特定の波長に対して選択的であり得、各組が光の異なる波長に対して選択的である複数の光抽出光学要素の組は、導波管の一部を形成し得る。いくつかの実施形態では、これらの光学要素は、オン状態とオフ状態との間で切り替え可能ではない。異なる成分色画像を形成するための光は、導波管に提供される、画像情報を時間的に配列することによって、異なる時間において外部結合され得る。いくつかの実施形態では、これらの光学要素は、回折光学要素であり得る。
前述のように、導波管スタック内の導波管の数(または複数の深度平面にわたって利用される成分色画像の総数)は、有利には、光の特定の波長または色を集中させるための眼の感度を利用することによって低減させられ得る。いくつかの他の実施形態では、導波管または成分色画像の数のこの低減(例えば、図9および10に図示されるように)は、異なる色を使用して焦点を合わせること、および眼に対する関連付けられた異なる被写界深度に対する眼の非均一感度に関する考慮点に加え、またはその代替として、ディスプレイシステムの他の性質を操作することによっても促進され得る。
いくつかの実施形態では、眼によって知覚される深度平面の数は、眼の被写界深度または焦点深度を増加させることによって操作され得る。例えば、1つ以上の導波管のための射出瞳が、焦点深度を増加させるために減少させられ得る。光がディスプレイシステム(1000)を通して導波管から抜け出て眼(4)に伝搬することを理解されたい。この光は、光源から眼(4)に伝搬するとき、射出瞳を通過する。いくつかの実施形態では、射出瞳は、導波管の出力表面と導波管の中に投入されるべき画像情報を生成するためのディスプレイとの間の光学経路内に配置される開口によって設定され得る。いくつかの実施形態では、開口は、固定サイズを有し得る。
いくつかの他の実施形態では、開口は、コントローラ(210)(図6)によって設定され得る動的可変サイズを有し得る。例えば、可変開口は、電子的に調節可能な虹彩、空間光変調器、同心ゾーンを伴うシャッタ(例えば、液晶シャッタ)等を備え得る。いくつかの他の実施形態では、異なる特性(例えば、異なる開口数)の複数の光源が、光を同じ導波管の中に結合するように構成されることができる。照明される光源を切り替えること、または交互に入れ替えることによって、導波管投入エリアにおける(続いて、導波管を通して伝搬する)開口数およびビーム径は、変更され得る。ファイバ走査ディスプレイ(FSD)を画像源として使用するいくつかの実施形態では、FSDは、異なるモードフィールド径および開口数値を伴う複数のコアを備え得る。照明されるコアを変化させることによって、ビーム径が、変更され得、したがって、導波管の中に結合され、導波管を通して伝搬する光ビームのサイズが、変更され得る。異なる特性を有する光源の例は、2015年5月4日に出願された米国仮出願第62/156,809号(本開示全体は、参照することによって本明細書に組み込まれる)に開示される。
いくつかの実施形態では、全ての成分色に対応する導波管のための射出瞳を低減させることは、概して、知覚される深度平面の数を低減させることができる。例えば、導波管に関連付けられた6つの深度平面が図示される図8を参照すると、射出瞳サイズを低減させることによって、関連付けられた深度平面の総数を低減させることが可能であり得る。したがって、全ての成分色のための導波管が全ての関連付けられた深度平面のために提供される場合でも、導波管の総数の低減が、達成され得る。しかしながら、本明細書に議論されるように、眼は、いくつかの色に対して、その他より少ない深度平面を区別し得るので、いくつかの色に対応する深度平面の数は、低減させられ得る。故に、いくつかの例示的実施形態では、視認者の眼のための被写界深度を低減させることによって、画質または深度の知覚における著しい低減を伴わずに、図9の構成から図10のさらに低減させられた構成に移行することが可能であり得る。いくつかの実施形態では、射出瞳は、導波管によって出力される光の色または波長に応じて、異なり得る。例えば、光のいくつかの色を出力するための導波管は、光の他の色を出力する導波管より小さい射出瞳を有し得る。
視認者の眼の被写界深度が眼の瞳孔サイズを低減させることによっても変更され得ることを理解されたい。いくつかの実施形態では、これは、例えば、導波管によって出力される画像の明るさを増加させ、それによって、視認者の瞳孔に収縮させることによって、達成され得る。
いくつかの実施形態では、導波管は、視認者の瞳孔のサイズより小さい光ビーム(図7)を出力するように構成され得る。視認者の瞳孔より小さい出射ビームは、被写界深度に対して、小射出瞳の使用または視認者の瞳孔のサイズの収縮と同様の効果を提供することができる。いくつかの実施形態では、出射ビームの幅は、導波管によって出力される光の色または波長に応じて、変動し、異なり得る。例えば、光のいくつかの色(例えば、眼が焦点を合わせるためにより敏感な色)を出力するための導波管は、光の他の色(例えば、眼が焦点を合わせるためにあまり敏感ではない色)を出力する導波管より小さい出射ビーム幅を有し得る。
小ビームサイズの場合、複数の類似ビームが、眼に入射し得ることが可能であり、これは、望ましくない視覚的アーチファクトを生じさせ得る。いくつかの実施形態では、導波管の光抽出光学要素は、例えば、出射ビームの場所の間隔を適切に空けることによって、一度に光の単一ビームのみを眼に向かわせるように構成され得る。いくつかの実施形態では、出射ビームの幅は、光のコリメートされたビームを導波管の中に投入することによって設定され得、コリメートされたビームは、出射ビームのための所望の幅を有する。投入される光ビームがコリメートされるので、出射ビームの幅は、導波管の出力エリア全体にわたって実質的に類似したままであることが予期され得る。いくつかの実施形態では、光抽出光学要素は、投入される光ビームと相互作用し、所望のサイズの出射ビームを提供するように構成され得る。例えば、光抽出光学要素は、投入される光ビームの幅と比較して、出射ビームの幅を修正(例えば、低減)するように構成され得る。例えば、直列の2つの光抽出光学要素(1つは、ビームを収束させ、1つは、再コリメートさせる)が、出射ビームのサイズを低減させるために使用され得るか、または2つの光抽出光学要素が、ビームを発散させるための1つと、再コリメートする(幅を増加させる)ための1つとを含み得る。幅の低減は、被写界深度を増加させるであろうことを理解されたい。同様に、向け直し要素の間隔を空けるとも、1つのみのビームが眼の瞳孔を通過するように、出射ビームの間隔を空けるために使用されることができる。加えて、出射ビーム間の間隔は、TIRによって導波管を通して伝搬するにつれて、コリメートされるビームが光向け直し要素に衝打する周波数を制御することによって制御され得る。
いくつかの実施形態では、光のコリメートされたビームが光向け直し要素に衝打する回数は、コリメートされたビームが導波管の中に投入される角度を選択することによって、および/または投入される光を受け取り、光を所望の角度において導波管を通して向かわせる光ターニング特徴を使用することによって、選択され得る。例えば、導波管の中に投入され、浅い角度(主要表面に対して)で導波管の主要表面に衝打するコリメートされたビームは、導波管の中に投入され、主要表面の法線に対して測定されたより小さい角度において主要表面に衝打する光と比較して、主要表面に再び衝打する前に、より長い距離まで伝搬することが予期され得る。いくつかのシステムでは、光が導波管の中に投入される角度は、それが表すピクセルを決定する。そのようなシステムでは、導波管(例えば、切り替え可能なDOE)内の活性光学要素が、ビームをその意図される角度に戻るように偏向させ、空間内で正しいピクセルを表すために使用され得る。
出射ビームの場所および間隔は、種々の他のスキームを使用して調節され得ることを理解されたい。例えば、体積位相ホログラムを組み込む導波管は、非常に角度選択的であることができる。そのようなホログラムは、他の場所において他のビームを選択的に外部結合しながら、いくつかの場所におけるいくつかのビームの外部結合を抑制するように構成され得る。外部結合するための切り替え可能なDOEを伴う導波管のいくつかの他の実施形態では、DOEは、DOEのある領域が、オフにされ得る(ビームがその領域から外部結合することを防止する)一方、他の領域が、オンにされ、1つ以上のビームを外部結合するように、局所的にアドレス可能なセルまたは領域に分割され得る。いくつかの実施形態では、ファイバ走査ディスプレイ等の走査ビームディスプレイが、局所的にアドレス可能な導波管の中に結合され、異なるDOEセルが活性化されるように同期され得る。異なるDOEセルは、導波管の中に投入されるビーム角度の関数として活性化され得る。いくつかの他の実施形態では、シャッタアレイ(またはSLM)が、導波管と眼との間に配置され、その他が通過することを可能にしながら、いくつかのビームを選択的に減衰させ得る。
いくつかの実施形態では、出射ビーム幅は、約7mmもしくはそれ未満、約5mmもしくはそれ未満、約3mmもしくはそれ未満、2mmもしくはそれ未満、1mmもしくはそれ未満、またはこれらの値の任意の組み合わせ間の範囲である。いくつかの実施形態では、出射ビームの幅は、光源と導波管の中への光の投入との間の光の光学経路内に可変開口を使用して変動させられ得る。例えば、可変開口は、画像投入デバイス(200、202、204、206、208)(図6)内に提供され得る。例えば、可変開口は、画像投入デバイス(200、202、204、206、208)の出力表面(300、302、304、306、308)に提供され得る。
被写界深度を増加させるための本明細書に開示される種々のアプローチは、有利には、1つ以上の特定の色をそれぞれ出力するための1つ以上の複数の導波管に適用され、それらの色のための導波管の数が減少させられることを可能にし得る。いくつかの実施形態では、被写界深度を増加させるためのこれらのアプローチは、異なる色の光を集中させるための眼の感度の差異と併せて適用され、それによって、総導波管数の減少をさらに可能にし得る。例えば、図9は、異なる色に対する眼の感度の差異を利用する導波管スタックと見なされ得、図10は、低減させられた開口サイズおよびまた異なる色に対する眼の感度の差異を用いて、被写界深度を増加させるためのアプローチを利用する導波管スタックと見なされ得る。
いくつかの実施形態では、被写界深度を増加させるための本明細書に開示されるアプローチは、所望に応じて、選定される色に関連付けられた導波管の数(または成分色画像)を減少させるために適用され得る。例えば、緑色着色画像情報を導波管に提供するための緑色光エミッタは、赤色光エミッタよりコストがかかり得る。緑色光を用いて焦点を合わせる眼の感度は、緑色光を出力するための導波管の数が最大となるであろうことを決定付けることが予期されるであろう。しかしながら、緑色の色のために導波管までの被写界深度を増加させる(例えば、開口サイズを低減させる)ための本明細書に開示されるアプローチのうちの1つ以上のものを適用することによって、それらの導波管の総数は、減少させられ(例えば、赤色導波管の数未満の数まで)、それによって、緑色光エミッタの数を低減させ得、これは、ひいては、これらの部品を使用するシステムのコストを低減させる。その結果、いくつかの実施形態では、異なる色を出力するための種々の複数の導波管内の導波管は、異なる関連付けられた射出瞳サイズおよび/または異なる出射ビームサイズを有し得る。例えば、特定の複数の導波管における導波管の総数は、特定の複数の導波管のうちの導波管に関連付けられた射出瞳サイズおよび/またはビームサイズに直接関連し得る。いくつかの実施形態では、比較的に大きい関連付けられた射出瞳サイズを有する導波管は、比較的に小さい射出瞳サイズを有する導波管を上回る総数を有する。
導波管によって表される深度平面の数の低減は、いくつかの導波管によって出力される画像が同じ深度平面のための他の色の画像と比較して焦点がずれるようにし得ることを理解されたい。異なる色を集中させるため、および/または一部もしくは全部の導波管のための被写界深度を操作するための眼の異なる感度の利用と併せて、またはその代替として、焦点をずらすための眼の感度も、いくつかの実施形態では、減少させられ得る。感度は、導波管スタック内の一部または全部の導波管によって出力される画像に対してぼやけ等の収差を意図的に導入することによって、減少させられ得る。例えば、ぼやけは、比較的に低総数を有する1つ以上の複数の導波管に対して導入され得る。いくつかの実施形態では、赤色-緑色-青色成分色を使用するディスプレイシステムに対して、ぼやけは、赤色または緑色の色に関連付けられた導波管より少ない導波管の総数を有し得る青色の色に関連付けられた導波管によって出力される画像に導入され得る。いくつかの実施形態では、導入されるぼやけの量は、導波管によって出力される色光に伴って変動し得る。例えば、導入されるぼやけの量は、特定の色に関連付けられた導波管の数に直接関連し得る。特定の色に対する導波管の数が少ないほど、それらの導波管によって出力される画像に導入されるぼやけの量は、多くなる。いくつかの実施形態では、ぼやけは、色に応じて変動するぼやけの量に伴って、各成分色の画像に対して導入され得る。例えば、ヒトの眼が非常に敏感である色の成分色画像は、眼が比較的にあまり敏感ではない色の成分色画像より高いレベルの導入されるぼやけを有し得る。
いくつかの実施形態では、ぼやけは、1つ以上の光学要素および/または画像処理電子機器によって導入され得る。例えば、画像情報が、光のビームを導波管の中に内部結合することによって、導波管に提供される場合(FSD等を用いて)、導波管の中に結合されるべきビームの焦点は、コリメーションから離れるように調節され得る。コリメートされたビームは、導波管から外に結合され、視認されるビームのための最小スポットを作成する。導波管の中に投入されるコリメートされないビームは、依然として、正しい場所においてピクセルを生成するであろうが、スポットサイズは、大きくなり、ぼやけを追加するであろう。いくつかの実施形態では、光学要素が、コリメーションから離れるように調節され、それによって、ぼやけを画像投入デバイス(200、202、204、206、208)(図6)および/または画像投入デバイス(200、202、204、206、208)から受信された画像情報に導入するように、光ビームを内部結合する前に使用され(例えば、導波管の光入力表面に配置され)、光ビームの焦点を調節する。いくつかの他の実施形態では、ぼやけを導入するための光学要素は、画像を発生させるためのディスプレイと導波管から視認者の眼への画像情報の出力との間の光学経路の他の部分に配置され得る。
ぼやけを導入するための光学要素の使用に加え、またはその代替として、ぼやけは、例えば、処理モジュール(70)または(72)(図2)内の画像処理において、電子的に導入され得る。ぼやけの電子的導入は、ぼやけが動的ベースで、例えば、画像コンテンツに応じて変化させられることを可能にすることができる。例えば、いくつかの画像は、知覚される鮮明度の損失をあまり被らないと決定され得る画像、例えば、より少ない詳細または情報を有する画像である。そのような画像に対して、ぼやけの量は、いくつかの実施形態では、画質を著しく減少させることなく増加させられ得る。
いくつかの実施形態では、焦点ずれに対する感度は、導波管によって出力される画像のx-y分解能(例えば、ピクセル分解能)を減少させることによって、減少させられ得る。例えば、これは、個々のピクセルのサイズを増加させることによって、効果的に達成され得る。いくつかの実施形態では、ピクセルサイズは、画像情報を導波管に提供する光ファイバのサイズを増加させることによって増加させられ得る。例えば、走査ファイバディスプレイは、複数のファイバコアを含み得、それらの各々は、異なるモードフィールド径、したがって、異なる効果的スポットサイズまたはピクセルサイズを有する。いくつかの実施形態では、ピクセルのサイズは、導波管スタックの導波管によって出力される光の色に応じて変動し得る。例えば、特定の色のための導波管の数が少ないほど、それらの導波管によって出力される画像に対する個々のピクセルのサイズは、大きくなる(かつx-y分解能は、低くなる)。いくつかの実施形態では、ピクセルのサイズの差異は、異なるようにサイズを決定されるサブピクセルを画像を生成する空間光変調器(SLM)において使用して確立され得る。例えば、例えば、青色サブピクセルは、緑色サブピクセルより物理的に大きくあり得、および/または数がより少なく、ならびに/もしくはSLMにわたってより疎らに分配され得る。代替として、または加えて、ピクセル分解能は、いくつかの実施形態では、画像処理モジュールによって動的に変更され得ることを理解されたい。例えば、ぼやけと同様に、いくつかの画像は、知覚されるピクセル分解能の損失をあまり被らないと決定され得る画像、例えば、より少ない詳細または情報を有する画像である。その結果、ピクセル分解能は、いくつかの実施形態では、画質の著しい減少を伴わずに減少させられ得る。
いくつかの実施形態では、深度平面および/または被写界深度の数ならびに分配は、視認者の眼の瞳孔サイズに基づいて、動的に変動させられ得る。図11は、瞳孔サイズを監視するように構成されるディスプレイシステムの例を図示する。カメラ(500)(例えば、デジタルカメラ)が、眼(4)の画像を捕捉し、眼4の瞳孔のサイズを決定する。いくつかの実施形態では、カメラ(500)は、フレーム(64)(図2)に取り付けられ得、カメラ(500)からの画像情報を処理し、ユーザ(60)の眼の瞳孔径を決定し得る処理モジュール(70)および/または(72)と電気通信し得る。いくつかの実施形態では、1つのカメラ(500)が、各眼のため利用され、各眼の瞳孔サイズを別個に決定し、それによって、各眼への画像情報の提示がその眼に対して動的に調整されることを可能にし得る。いくつかの他の実施形態では、片眼(4)のみの瞳孔径(例えば、対の眼あたり単一カメラ(500)のみを使用して)が、決定され、視認者(60)の両眼に対して類似すると仮定される。
本明細書に議論されるように、被写界深度は、視認者の瞳孔サイズに反比例して変化し得る。その結果、視認者の眼の瞳孔のサイズが減少するにつれて、被写界深度が、増加し、それによって、その平面の場所が眼の焦点深度を越えるため判別不可能な1つの平面が、瞳孔サイズの低減および匹敵する被写界深度の増加に伴って、判別可能となり、より焦点が合って現れ得る。同様に、異なる画像を視認者に提示するために使用される間隔を置かれた深度平面の数も、減少させられた瞳孔サイズの減少に伴って減少し得る。例えば、再び図8を参照すると、視認者は、1つの深度平面から離れ、他の深度平面への眼の遠近調節を調節せずに、1つの瞳孔サイズにおいて深度平面14aおよび14bの両方の詳細を明確に知覚することができないこともある。しかしながら、これらの2つの深度平面は、遠近調節を変化させずに、別の瞳孔サイズにおいて、ユーザに同時に十分に焦点が合い得る。
いくつかの実施形態では、ディスプレイシステムは、瞳孔サイズの決定に基づいて、または特定の瞳孔サイズを示す電気信号の受信に応じて、画像情報を受信する導波管の数を変動させ得る。例えば、ユーザの眼が、2つの導波管に関連付けられた2つの深度平面間で区別不可能である場合、コントローラ(210)(図6)は、画像情報をこれらの導波管のうちの1つに提供することを中止するように構成またはプログラムされ得る。有利には、これは、システムにかかる処理負担を低減させ、それによって、システムの応答性を増加させ得る。導波管のためのDOEがオン状態とオフ状態との間で切り替え可能である実施形態では、DOEは、導波管が画像情報を受信するときに、オフ状態に切り替えられ得る。
本明細書に議論されるように、いくつかの実施形態では、出射ビームに、視認者の眼の直径未満の直径を有するという条件を満足させることが望ましくあり得る。しかしながら、この条件を満たすことは、視認者の瞳孔のサイズの変動性に照らして、困難であり得る。いくつかの実施形態では、この条件は、視認者の瞳孔のサイズの決定に応答して出射ビームのサイズを変動させることによって、広範囲の瞳孔サイズにわたって満たされる。例えば、瞳孔サイズが減少するにつれて、出射ビームのサイズも、減少し得る。いくつかの実施形態では、出射ビームサイズは、本明細書に議論されるように、可変開口を使用して変動させられ得る。
本発明の種々の例示的実施形態が、本明細書に説明される。これらの例は、非限定的意味において参照される。それらは、本発明のより広義に適用可能な側面を図示するために提供される。種々の変更が、説明される本発明に行われ得、均等物が、本発明の真の精神および範囲から逸脱することなく、代用され得る。
例えば、個々の導波管は、いくつかの実施形態では、光の1つの特定の色を出力するように議論されるが、いくつかの他の実施形態では、導波管のうちの少なくともいくつかは、2つ以上の色の光を出力するように構成され得る。例えば、いくつかの実施形態では、光抽出光学要素をその中に有する立体材料(例えば、体積ホログラム)が、異なる波長の光を導波管の外に選択的に向け直すために利用され得る。異なる色の光を出力するための導波管の使用は、より少ない現在の導波管が導波管スタック内で使用されることを可能にすることができる。
深度平面間の間隔の1つの目標は、オブジェクトが、知覚される焦点における顕著な飛躍を伴わずに、近場から遠場に平滑に遷移するように現れる間隔を提供することであることを理解されたい。「深度混成」アプローチが、オブジェクトのより近い部分とより遠い部分との間の視認遷移の平滑性を増加させるために使用され得る。例えば、本明細書に開示されるように、有限数の深度平面を前提として、オブジェクト上のいくつかの点が、2つの深度平面間にあり得、これらの点に関する画像情報が、利用可能であり得ることが可能である。いくつかの実施形態では、これらの点は、2つの近隣平面間に分布させられたその輝度を有し得る。例えば、ジオプタ空間内の2つの深度平面間の途中の点は、それらの2つの平面の第1のものにおけるその輝度の半分と、それらの2つの平面の第2のものにおける半分とを有することができる。それらの深度平面間で、すぐ近隣の深度平面の間にある、点の輝度を分布させることによって、深度平面間の遷移の平滑性は、増加させられ得る。
いくつかの実施形態では、導波管スタック内の複数の導波管は、同一の関連付けられた深度平面を有し得る。例えば、同一色を出力するように構成される複数の導波管が、同一深度平面に設定され得る。これは、タイル画像を形成し、拡張された視野をその深度平面に提供する利点を提供することができる。
本明細書に議論されるように、いくつかの実施形態では、ディスプレイは、視認者の左および右眼に対して同一進度の焦点距離を伴う、同一数の同様に間隔を置かれた深度平面を提示し得る。いくつかの他の実施形態では、視認者の左および右眼に提示される深度平面に関連付けられた総数、それらの間の分離、および焦点距離のうちの1つ以上のものは、異なり得る。例えば、より多数の深度平面が、左眼より右眼またはその逆に提示され得、右眼と左眼との深度平面間の焦点距離の進度が異なる。理論によって限定されるわけではないが、立体視は、片方の眼において低減させられた数の深度平面をマスクし得ると考えられる。深度平面数、分離、および/または焦点距離の差異は、全ての成分色に対して存在し得るか、または1つ以上の特定の成分色、例えば、緑色に限定され得る。例として、いくつかの実施形態では、片方の眼は、図9に示されるような深度平面が提示され得る一方、別の眼は、図10に示されるような深度平面が提示され得る。
有利な例として、装着可能システムとして図示されるが、本明細書に開示される導波管ならびに関連構造およびモジュールは、非装着可能ディスプレイを形成するように適用され得る。例えば、装着可能フレーム(64)(図2)内に収容されるのではなく、ディスプレイ(62)は、ディスプレイ(62)を支持し、ディスプレイ(62)が、視認者(60)によって装着されずに、画像を視認者(60)に提供することを可能にする、スタンド、マウント、または他の構造に取り付けられ得る。
加えて、特定の状況、材料、物質組成、プロセス、プロセス行為、またはステップを本発明の目的、精神、もしくは範囲に適合させるように、多くの修正が行われ得る。さらに、当業者によって理解されるように、本明細書で説明および例証される個々の変形例のそれぞれは、本発明の範囲または精神から逸脱することなく、他のいくつかの実施形態のうちのいずれかの特徴から容易に分離され、またはそれらと組み合わせられ得る、個別的な構成要素および特徴を有する。全てのそのような修正は、本開示に関連付けられる請求項の範囲内にあることを目的としている。
本発明は、対象デバイスを使用して行われ得る方法を含む。方法は、そのような好適なデバイスを提供するという行為を含み得る。そのような提供は、エンドユーザによって行われ得る。換言すれば、「提供する」行為は、単に、エンドユーザが、対象方法において必須デバイスを提供するように、取得し、アクセスし、接近し、位置付けし、設定し、起動し、電源を入れ、または別様に作用することを要求する。本明細書で記載される方法は、論理的に可能である記載された事象の任意の順番で、ならびに事象の記載された順番で実行され得る。
本発明の例示的側面が、材料選択および製造に関する詳細とともに、上で記載されている。本発明の他の詳細に関しては、これらは、上で参照された特許および出版物と関連して理解されるとともに、概して、当業者によって公知または理解されたい。一般的または論理的に採用されるような追加の行為の観点から、本発明の方法ベースの側面に関して、同じことが当てはまり得る。
加えて、本発明は、種々の特徴を随意的に組み込むいくつかの例を参照して説明されているが、本発明は、本発明の各変形例に関して考慮されるような説明および指示されるものに限定されるものではない。種々の変更が、説明される本発明に行われてもよく、本発明の真の精神および範囲から逸脱することなく、均等物(本明細書に記載されようと、いくらか簡単にするために含まれていなかろうと)が置換され得る。加えて、値の範囲が提供される場合、その範囲の上限と下限との間の全ての介在値、およびその規定範囲内の任意の他の規定または介在値が、本発明内に包含されることを理解されたい。
また、説明される本発明の変形例の任意の随意的な特徴が、独立して、または本明細書で説明される特徴のうちのいずれか1つ以上のものと組み合わせて、記載および請求され得ることが考慮される。単数形のアイテムへの参照は、複数形の同一のアイテムが存在するという可能性を含む。より具体的には、本明細書で、および本明細書に関連付けられる請求項で使用されるように、「1つの(「a」、「an」)」、「該(said)」、および「the(the)」という単数形は、特に規定がない限り、複数形の指示対象を含む。換言すれば、冠詞の使用は、上記の説明ならびに本開示に関連付けられる請求項において、対象アイテムの「少なくとも1つ」を可能にする。さらに、そのような請求項は、任意の随意的な要素を除外するように起草され得ることに留意されたい。したがって、この記述は、請求項の要素の記載と関連して、「単に」、「のみ」、および同等物等の排他的用語の使用、または「否定的」制限の使用のために、先行詞としての機能を果たすことを目的としている。
そのような排他的用語を使用することなく、本開示に関連付けられる請求項での「備えている」という用語は、所与の数の要素がそのような請求項で列挙されるか、または特徴の追加をそのような請求項に記載される要素の性質の変換として見なすことができるかにかかわらず、任意の追加の要素を含むことを可能にするものとする。本明細書で具体的に定義される場合を除いて、本明細書で使用される全ての技術および科学用語は、請求項の有効性を維持しながら、可能な限り広い一般的に理解されている意味を与えられるものである。
本発明の範疇は、提供される例示的および/または対象の明細書に限定されるものではなく、むしろ、本開示に関連付けられる請求項の言葉の範囲のみによって限定されるものである。

Claims (17)

  1. ディスプレイシステムであって、前記システムは、
    複数の成分色画像を出力することによってフルカラー画像を形成するように構成されているディスプレイを備え、前記成分色画像は、複数の深度平面に対応し、
    前記複数の深度平面にわたる第1の色の分色画像は、合計で、前記複数の深度平面にわたる第2の色の分色画像より大きい数になり、前記第1の色の前記成分色画像は、第1の波長範囲内の波長を有する光によって形成され、前記第2の色の前記成分色画像は、第2の波長範囲内の波長を有する光によって形成され、
    前記複数の深度平面にわたる第3の色の分色画像は、合計で、前記第2の色の前記成分色画像より少ない数になり、前記第3の色の前記成分色画像は、第3の波長範囲内の波長を有する光によって形成される、システム。
  2. 前記システムは、複数の導波管を備え、各導波管は、前記第1、第2、または第3の色のうちの単一の色のみの成分色画像を出力するように構成されている、請求項1に記載のシステム。
  3. 各導波管は、単一の関連付けられた深度平面のための成分色画像を出力するようにさらに構成されている、請求項2に記載のシステム。
  4. 前記ディスプレイは、異なる深度平面の知覚を提供するように構成されている屈折力を伴う光学要素を備えている、請求項2に記載のシステム。
  5. 前記光学要素は、前記異なる深度平面に対応する波面発散を伴う光を出力するように構成されている回折格子である、請求項4に記載のシステム。
  6. 深度平面間の間隔は、前記第1、第2、および第3の色の前記成分色画像のための前記複数の深度平面の各々に対して異なる、請求項1に記載のシステム。
  7. 射出瞳が、各成分色画像を形成する光に関連付けられており、前記射出瞳サイズは、前記成分色画像の色に伴って変動する、請求項1に記載のシステム。
  8. 各成分色画像を形成する光は、ある出射ビームサイズを有し、前記出射ビームサイズは、5mmより小さい、請求項1に記載のシステム。
  9. 前記出射ビームサイズは、前記成分色画像の色に伴って変動する、請求項8に記載のシステム。
  10. 前記システムは、視認者によって装着されるように構成されているフレームを備え、前記ディスプレイは、前記フレームに取り付けられている、請求項1に記載のシステム。
  11. 前記ディスプレイは、各眼のために1組の、2組の成分色画像を出力するように構成され、
    深度平面の分配と、
    深度平面の総数と
    のうちの1つ以上のものは、各組の深度平面間で異なる、請求項1に記載のシステム。
  12. ぼやけを前記成分色画像に導入するための光学要素または画像処理モジュールをさらに備えている、請求項1に記載のシステム。
  13. 前記光学要素または画像処理モジュールは、異なる量のぼやけを異なる色の成分色画像に導入するように構成されている、請求項12に記載のシステム。
  14. 前記第1の色の前記成分色画像のための第1のピクセルサイズは、前記第2の色の前記成分色画像のための第2のピクセルサイズと異なる、請求項1に記載のシステム。
  15. 記第3の色の成分色画像のための第3のピクセルサイズは、前記第1または第2のピクセルサイズと異なる、請求項14に記載のシステム。
  16. 前記成分色画像は、4つ以上の色を備えている、請求項14に記載のシステム。
  17. 2つの近隣深度平面間にある点の輝度を前記2つの近隣深度平面間で分布させ、これにより、前記点の輝度の半分が前記2つの近接深度平面のうちの第1の平面へ分割され、前記点の輝度の半分が前記2つの近接深度平面のうちの第2の平面へ分割されるようにするように構成されているコントローラをさらに備えている、請求項1に記載のシステム。
JP2021094109A 2016-01-07 2021-06-04 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法 Active JP7145284B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022147921A JP7460715B2 (ja) 2016-01-07 2022-09-16 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
JP2023197270A JP2024022601A (ja) 2016-01-07 2023-11-21 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662275987P 2016-01-07 2016-01-07
US62/275,987 2016-01-07
JP2018533872A JP6894904B2 (ja) 2016-01-07 2017-01-05 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018533872A Division JP6894904B2 (ja) 2016-01-07 2017-01-05 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022147921A Division JP7460715B2 (ja) 2016-01-07 2022-09-16 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Publications (2)

Publication Number Publication Date
JP2021152670A JP2021152670A (ja) 2021-09-30
JP7145284B2 true JP7145284B2 (ja) 2022-09-30

Family

ID=59273994

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2018533872A Active JP6894904B2 (ja) 2016-01-07 2017-01-05 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
JP2021094109A Active JP7145284B2 (ja) 2016-01-07 2021-06-04 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
JP2022147921A Active JP7460715B2 (ja) 2016-01-07 2022-09-16 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
JP2023197270A Pending JP2024022601A (ja) 2016-01-07 2023-11-21 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018533872A Active JP6894904B2 (ja) 2016-01-07 2017-01-05 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2022147921A Active JP7460715B2 (ja) 2016-01-07 2022-09-16 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
JP2023197270A Pending JP2024022601A (ja) 2016-01-07 2023-11-21 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法

Country Status (10)

Country Link
US (5) US10466480B2 (ja)
EP (2) EP3400478B1 (ja)
JP (4) JP6894904B2 (ja)
KR (3) KR20230134159A (ja)
CN (2) CN108474960B (ja)
AU (3) AU2017206021B2 (ja)
CA (1) CA3010237A1 (ja)
IL (3) IL301785B1 (ja)
NZ (1) NZ743884A (ja)
WO (1) WO2017120372A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230134159A (ko) 2016-01-07 2023-09-20 매직 립, 인코포레이티드 깊이 평면들에 걸쳐 분포된 동일하지 않은 수의 컴포넌트 컬러 이미지들을 갖는 가상 및 증강 현실 시스템들 및 방법들
IL295059A (en) 2016-10-05 2022-09-01 Magic Leap Inc A blind eye test for mixed reality calibration
US11454815B2 (en) * 2017-06-01 2022-09-27 NewSight Reality, Inc. Transparent optical module using pixel patches and associated lenslets
US10338400B2 (en) 2017-07-03 2019-07-02 Holovisions LLC Augmented reality eyewear with VAPE or wear technology
US10859834B2 (en) 2017-07-03 2020-12-08 Holovisions Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear
KR20200116941A (ko) * 2018-01-14 2020-10-13 라이트 필드 랩 인코포레이티드 정렬된 구조를 사용해 에너지 릴레이의 횡방향 에너지 편재를 위한 시스템 및 방법
CA3088116A1 (en) * 2018-01-17 2019-07-25 Magic Leap, Inc. Display systems and methods for determining registration between a display and a user's eyes
IL275822B2 (en) 2018-01-17 2024-02-01 Magic Leap Inc Eye center for determining rotation, choosing depth plane and processing camera position in display systems
US10942355B2 (en) 2018-01-22 2021-03-09 Facebook Technologies, Llc Systems, devices, and methods for tiled multi-monochromatic displays
US11567336B2 (en) 2018-07-24 2023-01-31 Magic Leap, Inc. Display systems and methods for determining registration between display and eyes of user
WO2020028867A1 (en) 2018-08-03 2020-02-06 Magic Leap, Inc. Depth plane selection for multi-depth plane display systems by user categorization
CN110888233B (zh) * 2018-09-07 2021-10-22 华为技术有限公司 显示模组及成像方法
US10859861B2 (en) * 2018-12-03 2020-12-08 Disney Enterprises, Inc. Virtual reality and/or augmented reality viewer having variable transparency
CN110308566B (zh) * 2019-06-28 2021-12-03 上海慧希电子科技有限公司 显示系统及双目系统
KR20210107220A (ko) * 2020-02-21 2021-09-01 삼성디스플레이 주식회사 증강현실 표시장치
CN113848644B (zh) * 2021-09-14 2022-08-19 歌尔光学科技有限公司 Ar眼镜的焦距调节方法、装置、设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115812A (ja) 1998-10-02 2000-04-21 Nippon Telegr & Teleph Corp <Ntt> 三次元表示方法および装置
WO2015012024A1 (ja) 2013-07-26 2015-01-29 シチズンホールディングス株式会社 光源装置および投影装置
US20150178939A1 (en) 2013-11-27 2015-06-25 Magic Leap, Inc. Virtual and augmented reality systems and methods
US20150234477A1 (en) 2013-07-12 2015-08-20 Magic Leap, Inc. Method and system for determining user input based on gesture
JP2015525491A (ja) 2012-05-09 2015-09-03 ノキア コーポレイション フォーカス距離に基づいて表示情報の表現を決定する方法および装置

Family Cites Families (77)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6222525B1 (en) 1992-03-05 2001-04-24 Brad A. Armstrong Image controllers with sheet connected sensors
JP3379797B2 (ja) * 1992-11-12 2003-02-24 オリンパス光学工業株式会社 画像表示装置
US5670988A (en) 1995-09-05 1997-09-23 Interlink Electronics, Inc. Trigger operated electronic device
USD514570S1 (en) 2004-06-24 2006-02-07 Microsoft Corporation Region of a fingerprint scanning device with an illuminated ring
WO2006017771A1 (en) 2004-08-06 2006-02-16 University Of Washington Variable fixation viewing distance scanned light displays
US7697750B2 (en) * 2004-12-06 2010-04-13 John Castle Simmons Specially coherent optics
US7511716B2 (en) 2005-04-29 2009-03-31 Sony Corporation High-resolution micro-lens 3D display with shared sub-pixel color signals
WO2007025362A1 (en) 2005-09-02 2007-03-08 Neptec Imaging system and method
US20070081123A1 (en) 2005-10-07 2007-04-12 Lewis Scott W Digital eyewear
US11428937B2 (en) 2005-10-07 2022-08-30 Percept Technologies Enhanced optical and perceptual digital eyewear
US8696113B2 (en) 2005-10-07 2014-04-15 Percept Technologies Inc. Enhanced optical and perceptual digital eyewear
EP1775723A1 (en) * 2005-10-13 2007-04-18 Deutsche Thomson-Brandt Gmbh Holographic storage medium
US8937766B2 (en) 2008-03-13 2015-01-20 Eastman Kodak Company Stereoscopic display using multi-linear electromechanical modulator
US20100149073A1 (en) * 2008-11-02 2010-06-17 David Chaum Near to Eye Display System and Appliance
WO2010067117A1 (en) * 2008-12-12 2010-06-17 Bae Systems Plc Improvements in or relating to waveguides
US20110188116A1 (en) * 2010-02-02 2011-08-04 Nikolay Ledentsov Ledentsov Device for generation of three-demensional images
US20130278631A1 (en) * 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
US9304319B2 (en) 2010-11-18 2016-04-05 Microsoft Technology Licensing, Llc Automatic focus improvement for augmented reality displays
US10156722B2 (en) 2010-12-24 2018-12-18 Magic Leap, Inc. Methods and systems for displaying stereoscopy with a freeform optical system with addressable focus for virtual and augmented reality
CA2822978C (en) 2010-12-24 2019-02-19 Hong Hua An ergonomic head mounted display device and optical system
JP6316186B2 (ja) 2011-05-06 2018-04-25 マジック リープ, インコーポレイテッドMagic Leap,Inc. 広範囲同時遠隔ディジタル提示世界
DE102011102079A1 (de) * 2011-05-19 2012-11-22 Ingeneric Gmbh Einkoppelvorrichtung für einen Lichtwellenleiter
GB201114149D0 (en) * 2011-08-17 2011-10-05 Bae Systems Plc Projection display
EP2751611B1 (en) * 2011-08-29 2018-01-10 Vuzix Corporation Controllable waveguide for near-eye display applications
JP2015504616A (ja) * 2011-09-26 2015-02-12 マイクロソフト コーポレーション 透過近眼式ディスプレイのセンサ入力に基づく映像表示修正
US10795448B2 (en) 2011-09-29 2020-10-06 Magic Leap, Inc. Tactile glove for human-computer interaction
RU2017115669A (ru) 2011-10-28 2019-01-28 Мэджик Лип, Инк. Система и способ для дополненной и виртуальной реальности
KR102116697B1 (ko) 2011-11-23 2020-05-29 매직 립, 인코포레이티드 3차원 가상 및 증강 현실 디스플레이 시스템
EP2605519A1 (en) 2011-12-15 2013-06-19 Thomson Licensing Anaglyphic stereoscopic image capture device
US8985803B2 (en) * 2012-03-21 2015-03-24 Microsoft Technology Licensing, Llc Freeform-prism eyepiece with illumination waveguide
KR102028732B1 (ko) 2012-04-05 2019-10-04 매직 립, 인코포레이티드 능동 포비에이션 능력을 갖는 와이드-fov(field of view) 이미지 디바이스들
US20130286053A1 (en) * 2012-04-25 2013-10-31 Rod G. Fleck Direct view augmented reality eyeglass-type display
CN104471463B (zh) * 2012-05-03 2018-02-13 诺基亚技术有限公司 图像提供装置、方法和计算机程序
US10502876B2 (en) * 2012-05-22 2019-12-10 Microsoft Technology Licensing, Llc Waveguide optics focus elements
US9310559B2 (en) * 2012-06-11 2016-04-12 Magic Leap, Inc. Multiple depth plane three-dimensional display using a wave guide reflector array projector
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9430055B2 (en) * 2012-06-15 2016-08-30 Microsoft Technology Licensing, Llc Depth of field control for see-thru display
WO2014014135A1 (ko) * 2012-07-17 2014-01-23 인텔 코오퍼레이션 촬영된 이미지의 리포커싱 방법, 장치, 및 컴퓨터 판독 가능한 기록 매체
US9841563B2 (en) * 2012-08-04 2017-12-12 Paul Lapstun Shuttered waveguide light field display
US8885997B2 (en) * 2012-08-31 2014-11-11 Microsoft Corporation NED polarization system for wavelength pass-through
AU2013315607A1 (en) 2012-09-11 2015-04-02 Magic Leap, Inc Ergonomic head mounted display device and optical system
US9933684B2 (en) * 2012-11-16 2018-04-03 Rockwell Collins, Inc. Transparent waveguide display providing upper and lower fields of view having a specific light output aperture configuration
US20140168260A1 (en) * 2012-12-13 2014-06-19 Paul M. O'Brien Waveguide spacers within an ned device
CN105163268B (zh) 2012-12-22 2020-03-10 华为技术有限公司 一种眼镜式通信装置、系统及方法
IL293789B2 (en) 2013-01-15 2023-08-01 Magic Leap Inc A system for scanning electromagnetic imaging radiation
US9699433B2 (en) * 2013-01-24 2017-07-04 Yuchen Zhou Method and apparatus to produce re-focusable vision with detecting re-focusing event from human eye
CN105188516B (zh) 2013-03-11 2017-12-22 奇跃公司 用于增强和虚拟现实的系统与方法
US9392129B2 (en) * 2013-03-15 2016-07-12 John Castle Simmons Light management for image and data control
KR102458124B1 (ko) 2013-03-15 2022-10-21 매직 립, 인코포레이티드 디스플레이 시스템 및 방법
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9664905B2 (en) * 2013-06-28 2017-05-30 Microsoft Technology Licensing, Llc Display efficiency optimization by color filtering
IL302408B2 (en) 2013-10-16 2024-09-01 Magic Leap Inc An augmented or virtual reality head device with intrapupillary distance adjustment
CN110542938B (zh) 2013-11-27 2023-04-18 奇跃公司 虚拟和增强现实系统与方法
US9857591B2 (en) 2014-05-30 2018-01-02 Magic Leap, Inc. Methods and system for creating focal planes in virtual and augmented reality
US11402629B2 (en) 2013-11-27 2022-08-02 Magic Leap, Inc. Separated pupil optical systems for virtual and augmented reality and methods for displaying images using same
JP6234208B2 (ja) * 2013-12-18 2017-11-22 マイクロソフト テクノロジー ライセンシング,エルエルシー 波長通過のためのned偏光システム
TWI516804B (zh) 2014-01-02 2016-01-11 廣達電腦股份有限公司 頭戴式顯示裝置及其背光調整方法
US9766463B2 (en) * 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
NZ722903A (en) 2014-01-31 2020-05-29 Magic Leap Inc Multi-focal display system and method
CN106461955B (zh) 2014-01-31 2019-08-13 奇跃公司 显示增强现实的方法
US10203762B2 (en) 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
WO2016018488A2 (en) 2014-05-09 2016-02-04 Eyefluence, Inc. Systems and methods for discerning eye signals and continuous biometric identification
USD759657S1 (en) 2014-05-19 2016-06-21 Microsoft Corporation Connector with illumination region
NZ764960A (en) 2014-05-30 2022-05-27 Magic Leap Inc Methods and system for creating focal planes in virtual and augmented reality
CN113253476B (zh) 2014-05-30 2022-12-27 奇跃公司 采用虚拟或增强现实装置生成虚拟内容显示的方法和系统
USD752529S1 (en) 2014-06-09 2016-03-29 Comcast Cable Communications, Llc Electronic housing with illuminated region
US9494799B2 (en) * 2014-09-24 2016-11-15 Microsoft Technology Licensing, Llc Waveguide eye tracking employing switchable diffraction gratings
US9640120B2 (en) * 2014-10-30 2017-05-02 Oculus Vr, Llc Diffractive element for reducing fixed pattern noise in a virtual reality headset
USD758367S1 (en) 2015-05-14 2016-06-07 Magic Leap, Inc. Virtual reality headset
US10210844B2 (en) * 2015-06-29 2019-02-19 Microsoft Technology Licensing, Llc Holographic near-eye display
US10359630B2 (en) * 2015-06-30 2019-07-23 Massachusetts Institute Of Technology Display apparatus comprising first and second optical phased arrays and method for augmented reality
US10670862B2 (en) * 2015-07-02 2020-06-02 Microsoft Technology Licensing, Llc Diffractive optical elements with asymmetric profiles
US10429645B2 (en) * 2015-10-07 2019-10-01 Microsoft Technology Licensing, Llc Diffractive optical element with integrated in-coupling, exit pupil expansion, and out-coupling
US11609427B2 (en) * 2015-10-16 2023-03-21 Ostendo Technologies, Inc. Dual-mode augmented/virtual reality (AR/VR) near-eye wearable displays
KR20230134159A (ko) 2016-01-07 2023-09-20 매직 립, 인코포레이티드 깊이 평면들에 걸쳐 분포된 동일하지 않은 수의 컴포넌트 컬러 이미지들을 갖는 가상 및 증강 현실 시스템들 및 방법들
USD805734S1 (en) 2016-03-04 2017-12-26 Nike, Inc. Shirt
USD794288S1 (en) 2016-03-11 2017-08-15 Nike, Inc. Shoe with illuminable sole light sequence

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000115812A (ja) 1998-10-02 2000-04-21 Nippon Telegr & Teleph Corp <Ntt> 三次元表示方法および装置
JP2015525491A (ja) 2012-05-09 2015-09-03 ノキア コーポレイション フォーカス距離に基づいて表示情報の表現を決定する方法および装置
US20150234477A1 (en) 2013-07-12 2015-08-20 Magic Leap, Inc. Method and system for determining user input based on gesture
WO2015012024A1 (ja) 2013-07-26 2015-01-29 シチズンホールディングス株式会社 光源装置および投影装置
US20150178939A1 (en) 2013-11-27 2015-06-25 Magic Leap, Inc. Virtual and augmented reality systems and methods

Also Published As

Publication number Publication date
IL312868A (en) 2024-07-01
NZ743884A (en) 2019-11-29
JP2021152670A (ja) 2021-09-30
KR20230134159A (ko) 2023-09-20
US10466480B2 (en) 2019-11-05
US20200018972A1 (en) 2020-01-16
CN108474960A (zh) 2018-08-31
EP3400478A1 (en) 2018-11-14
IL301785B1 (en) 2024-07-01
KR102439768B1 (ko) 2022-09-01
AU2022200301B2 (en) 2022-08-11
AU2017206021A1 (en) 2018-07-19
US12001021B2 (en) 2024-06-04
AU2022200301A1 (en) 2022-02-10
CN108474960B (zh) 2021-11-16
EP4273616A3 (en) 2024-01-10
NZ757577A (en) 2021-05-28
US11500208B2 (en) 2022-11-15
CA3010237A1 (en) 2017-07-13
AU2022259815A1 (en) 2022-12-01
NZ757580A (en) 2021-05-28
WO2017120372A1 (en) 2017-07-13
KR20180100198A (ko) 2018-09-07
EP3400478A4 (en) 2019-08-28
US20170212351A1 (en) 2017-07-27
NZ757582A (en) 2021-05-28
US20210132393A1 (en) 2021-05-06
US10890773B2 (en) 2021-01-12
JP7460715B2 (ja) 2024-04-02
EP4273616A2 (en) 2023-11-08
NZ757576A (en) 2021-05-28
KR102579794B1 (ko) 2023-09-18
IL260280B2 (en) 2023-09-01
JP2019508724A (ja) 2019-03-28
KR20220123566A (ko) 2022-09-07
US20240280821A1 (en) 2024-08-22
AU2017206021B2 (en) 2021-10-21
IL301785A (en) 2023-05-01
CN114167608A (zh) 2022-03-11
JP2024022601A (ja) 2024-02-16
IL260280A (en) 2018-07-31
IL260280B1 (en) 2023-05-01
EP3400478B1 (en) 2023-08-16
US20230004007A1 (en) 2023-01-05
JP2022180482A (ja) 2022-12-06
JP6894904B2 (ja) 2021-06-30

Similar Documents

Publication Publication Date Title
JP7145284B2 (ja) 深度平面にわたって分配される等しくない数の成分色画像を有する仮想および拡張現実システムおよび方法
US20220099976A1 (en) Inline in-coupling optical elements
NZ757576B2 (en) Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
NZ757577B2 (en) Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
NZ757582B2 (en) Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
NZ757580B2 (en) Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
NZ757614B2 (en) Virtual and augmented reality systems and methods having unequal numbers of component color images distributed across depth planes
NZ757729A (en) Propeller
NZ757614A (en) System and method for encryption key management, federation and distribution
NZ757729B2 (en) System and method for encryption key management, federation and distribution

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210604

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220330

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220331

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220628

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220817

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220916

R150 Certificate of patent or registration of utility model

Ref document number: 7145284

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150