JP2018528452A - 拡張現実のための方法とシステム - Google Patents

拡張現実のための方法とシステム Download PDF

Info

Publication number
JP2018528452A
JP2018528452A JP2017568288A JP2017568288A JP2018528452A JP 2018528452 A JP2018528452 A JP 2018528452A JP 2017568288 A JP2017568288 A JP 2017568288A JP 2017568288 A JP2017568288 A JP 2017568288A JP 2018528452 A JP2018528452 A JP 2018528452A
Authority
JP
Japan
Prior art keywords
wearer
array
hmd
mirror
types
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017568288A
Other languages
English (en)
Other versions
JP6930929B2 (ja
Inventor
ブシエ オード
ブシエ オード
カノ ジャン−ポール
カノ ジャン−ポール
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EssilorLuxottica SA
Original Assignee
Essilor International Compagnie Generale dOptique SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Essilor International Compagnie Generale dOptique SA filed Critical Essilor International Compagnie Generale dOptique SA
Publication of JP2018528452A publication Critical patent/JP2018528452A/ja
Application granted granted Critical
Publication of JP6930929B2 publication Critical patent/JP6930929B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/1066Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B3/00Simple or compound lenses
    • G02B3/0006Arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/04Prisms
    • G02B5/045Prism arrays
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/15Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on an electrochromic effect
    • G02F1/163Operation of electrochromic cells, e.g. electrodeposition cells; Circuit arrangements therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0127Head-up displays characterised by optical features comprising devices increasing the depth of field
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • G02B2027/0174Head mounted characterised by optical features holographic
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2270/00Substrate bearing the hologram
    • G03H2270/55Substrate bearing the hologram being an optical element, e.g. spectacles

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Nonlinear Science (AREA)
  • Lenses (AREA)

Abstract

本発明は一般に、頭部装着型機器を備える画像ディスプレイのための方法とシステムを提供する。一般的には、本発明はライトフィールドディスプレイの使用に関する。このようなディスプレイは、拡張現実を提供するのに有益である。

Description

本発明は、拡張現実のための方法とシステムに関する。
本発明は、より詳しくはコンピュータ生成画像の表示に関する。
表示機能付き頭部装着型機器は当業界で知られている。このような機器はいわゆる「スマートグラス」を含み、これによってその装着者は拡張現実のための画像やテキストを視覚化できる。
国際公開第2015/032824号パンフレット及び国際公開第2015/032828号パンフレットは、コンピュータ生成ホログラフィック画像を表示するための空間光変調器を含む頭部装着型機器を開示している。装着者にとっての見やすさを改善するために、画像とテキストが特に装着者及び/又は装着された機器に合わせてカスタム化された方法で表示される方法とシステムを提供することが望ましい。
さらに、実際の拡張現実を経験するためには、コンピュータ生成画像を可変的に視覚化できる方法とシステムを提供することが望ましい。特に、装着者による視覚化の距離及び/又は方向をダイナミックに、例えばタイムラプス方式でカスタム化できることが望ましい。これにより、異なる視線方向へ、言い換えれば装着者の視野の様々な位置で画像をダイナミックに表示でき、及び/又は視覚化距離(焦点)をダイナミックに調節できる。視覚化された画像の大きさと視野を調整することも好ましい。さらに、屈折異常のある装着者の場合か、正常視の装着者の場合かにかかわらず、おそらくは眼の調節能力の低下を考慮して、装着者の視力に合わせて拡張現実を調節できることが望ましい。また、非球面化や像面収差等の二次収差を少なくとも部分的に補正することが望ましい。
本発明は一般に、頭部装着型機器を用いた画像表示のための方法とシステムを提供する。
一般的に、本発明はライトフィールドディスプレイの使用を含む。このようなディスプレイは、拡張現実を提供するために有益である。
発明の装置
1つの態様において、本発明は装着者により装着されることが意図される頭部装着型機器(HMD)に関し、頭部装着型装置は、装着者がコンピュータ生成画像を表示し、視覚化するように構成され、前記頭部装着型機器(HMD)は、画像源(IS)であって、ライトフィールドディスプレイを含む画像源(IS)と、装着者の片眼の正面に位置付けられるホモグラフィックミラー(HM)等のシースルーミラー(M)と、を含み、画像源(IS)は光ビームを前記ミラー(M)に向かって発するように構成され、前記発せられた光ビームは前記ミラー(M、HM)で反射され、それによって装着者の前記眼に向かって方向付けられて、装着者によりコンピュータ生成画像が視覚化されるようにする。
いくつかの実施形態において、シースルーミラー及び/又は画像源は、前記表示されたコンピュータ生成画像の視覚化のために装着者の視力を少なくとも部分的に調節するように構成され、例えば、装着者に屈折異常がある場合、シースルーミラー及び/又は画像源は、前記表示されたコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するように構成されていてもよい。
いくつかの実施形態において、シースルーミラーはホログラフィックミラーであり、ライトフィールドディスプレイは、光学微細素子のアレイであって、光学微細素子がアクティブでもパッシブでもよく、マイクロレンズアレイ、マイクロホールアレイ、マイクロプリズムアレイ、液晶、例えばLCD又はLCoSアレイ、回折格子アレイ、及び位相マスクアレイから選択される光学微細素子アレイと、LED、OLED、LCoS、LCD、及びSLM表示スクリーン等のデジタル表示スクリーンから選択されるデジタル表示素子と、を含む。
いくつかの実施形態において、ライトフィールドディスプレイは、光学微細素子アレイと、複数のピクセルを含むデジタル表示素子と、を含み、光学微細素子アレイの中で、各光学微細素子はデジタル表示素子の中のピクセル小集合に対応する。
いくつかの実施形態において、光学微細素子アレイの中のすべての光学微細素子が同じである。
いくつかの実施形態において、光学微細素子アレイはマイクロレンズアレイであって、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイ、又はマイクロホールアレイであって、少なくとも2種類のマイクロホールを含むマイクロレンズアレイ、又はマイクロプリズムアレイであって、少なくとも2種類のマイクロプリズムを含むマイクロプリズムアレイ、又は液晶アレイであって、少なくとも2種類の液晶を含む液晶アレイ、又は回折格子アレイであって、少なくとも2種類の回折格子を含む回折格子アレイ、又は位相マスクアレイであって、少なくとも2種類の位相マスクを含む位相マスクアレイである。
いくつかの実施形態において、光学微細素子アレイは、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイであり、前記少なくとも2種類のマイクロレンズは、マイクロレンズの直径、マイクロレンズの屈折力、マイクロレンズのプロファイル、例えば球面、非球、シリドリカル、両凸、平凸、凹面、平凹、両凹、正メニスカス、負メニスカス等、マイクロレンズからデジタル表示素子の中のそれぞれのピクセル小集合までの相対距離、マイクロレンズの性質がアクティブかパッシブか、のうちの1つ又は複数において異なる。
いくつかの実施形態において、光学微細素子アレイは、少なくとも2種類のマイクロホールを含むマイクロホールアレイであり、前記少なくとも2つの種類のマイクロホールは、マイクロホールの寸法、例えば直径、マイクロホールの形状、マイクロホールからデジタル表示素子の中のそれぞれのピクセル小集合までの相対距離のうちの1つ又は複数において異なる。
いくつかの実施形態において、少なくとも2種類の光学微細素子(前記少なくとも2種類のマイクロレンズ、又は前記少なくとも2種類のマイクロホール、又は前記少なくとも2種類のμプリズム、又は前記少なくとも2種類の液晶、又は前記少なくとも2種類の回折格子、又は前記少なくとも2種類の位相マスク)は、前記画像源の、前記光ビームを発する光源と共に、光学微細素子アレイの中に少なくとも2つの異なる領域を画定するように配置される。
いくつかの実施形態において、頭部装着型機器(HMD)は、1つ又は複数のシーンカメラ、1つ又は複数の照度センサ及びルミノシティセンサ、ならびに1つ又は複数のアイトラッカから選択される少なくとも1つのセンサをさらに含む。
発明の使用と方法
1つの態様において、本発明は装着者により装着されることが意図されるシースルー頭部装着型機器におけるライトフィールドディスプレイの使用に関し、前記頭部装着型機器はミラーを含み、前記ライトフィールドディスプレイは、光ビームを前記ミラーに向かって発するように構成され、前記発せられた光ビームは前記ミラー(M、HN)で反射され、それによって装着者の前記眼に向かって方向付けられ、装着者によるコンピュータ生成画像の視覚化が行われるようにし、その使用は、装着者によるコンピュータ生成画像の視覚化の距離を調節するため、及び/又は装着者によるコンピュータ生成画像の視覚化の視線方向を調節するため、及び/又は視覚化された画像の大きさ及び視野を調節するため、及び/又は装着者によるコンピュータ生成画像の視覚化における二次光学収差、例えば非球面化、像面収差等を補正するため、及び/又は装着者に屈折異常がある場合、装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するためである。
1つの態様において、本発明は、コンピュータ生成画像の表示と視覚化のための方法に関し、
(a)装着者に本明細書に記載されている頭部装着型機器(HMD)を提供するステップと、
(b)ライトフィールドディスプレイを、装着者によるコンピュータ生成画像の視覚化の距離を調節するため、及び/又は装着者によるコンピュータ生成画像の視覚化の視線方向を調節するため、及び/又は装着者によるコンピュータ生成画像の視覚化における二次光学収差、例えば非球面化、像面収差等を補正するため、及び/又は装着者に屈折異常がある場合、装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するために制御するステップと、
を含む。
本発明の方法のいくつかの実施形態において、頭部装着型機器(HMD)は少なくとも1つのシーンカメラをさらに含み、ステップ(b)は、
(i)自然の視野内のある物体の装着者による視覚化の距離及び/又は視線方向を、シーンカメラから収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向をステップ(i)で判断された距離及び/又は視線方向に応じて調節するように、ライトフィールドディスプレイのデジタル表示素子に関する光学微細素子アレイの位置を制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
本発明の方法のいくつかの実施形態において、頭部装着型機器(HMD)は、装着者の前記眼の正面に位置付けられる少なくとも1つの照度又はルミノシティセンサと、任意選択によりエレクトロクロミックセルをさらに含み、ステップ(b)は、
(i)照度又はルミノシティの少なくとも1つの値を、照度又はルミノシティセンサから収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の視線方向をステップ(i)で判断された値に応じて調節するようにライトフィールドディスプレイのデジタル表示素子に関する光学微細素子アレイの位置を制御するステップ、及び/又は任意選択により、ステップ(i)で判断された値に応じてエレクトロクロミックセルを制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
本発明の方法のいくつかの実施形態において、頭部装着機器(HMD)は少なくとも1つのアイトラッカをさらに含み、ステップ(b)は、
(i)自然の視野内のある物体の装着者による視覚化の距離及び/又は視線方向を、アイトラッカから収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向をステップ(i)で判断された値に応じて調節するようにライトフィールドディスプレイのデジタル表示素子に関する光学微細素子アレイの位置を制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
本発明の使用又は方法のいくつかの実施形態において、シースルーミラー及び/又は画像源は、前記表示されたコンピュータ生成画像の視覚化のための装着者の視力を少なくとも部分的に調節するように構成され、例えば、装着者に屈折異常がある場合、シースルーミラー及び/又は画像源は、前記表示されたコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するように構成されていてもよい。
本発明のHMDを示す(部分図)。 本発明のHMDと方法のためのレンズを示す。 本発明のHMDと方法のためのライトフィールドディスプレイの例示的な構造と実装を示す。 本発明のHMDと方法のためのライトフィールドディスプレイの例示的な構造と実装を示す。 本発明のHMDと方法のためのライトフィールドディスプレイの例示的な構造と実装を示す。 本発明のHMD及び方法で得られる可能性のある視覚化(視野ゾーン)を示す。 入射角を決定するためのプレノプティックカメラ(センサ)の使用を示す。 本発明のHMDと方法で得ることのできるタイムラプス方式の拡張現実を示す。 本発明の例示的なHMDを示す。 本発明の例示的なHMDを示す。 ホログラフィックミラーを記録するための原理(左)と、このミラーの、バーチャネル画像視覚化におけるその光学的機能の回復による利用(右)を示す。 ホログラフィックミラーを記録するための光学配置を示す。 ホログラフィックミラーを記録するための原理(左)と、このミラーの、バーチャネル画像視覚化におけるその光学的機能の回復による利用(右)を示す。 ホログラフィックミラーを記録するための光学配置を示す。 エレクトロクロミックセルを含むレンズにホログラフィックミラーを記録するための光学配置を示す。 レンズ上に拡張視野を持つホログラフィックミラーを記録するための光学配置を示す。 本発明によるホログラフィックミラーを記録するための光学配置を示す。
定義
本発明を説明するために、以下の定義を提供する。
「コンピュータ生成画像」は当業界で知られている。本発明によれば、コンピュータ生成画像はあらゆるコンピュータ生成画像を含み、例えば2D又は3D回折画像、2D又は3Dコンピュータ生成ホログラフィック画像、あらゆる振幅画像等である。コンピュータ生成画像はバーチャル画像として使用されてもよい。いくつかの実施形態において、画像(データ)は、ディスプレイの固定収差、自然の収差又はミラーの正面の画像の向き又は位置に関係する収差、及びディスプレイの所定の向き又は位置で使用されるミラーの収差等の光学収差を少なくとも部分的に補正するために計算できる。
「ホログラフィック画像」は当業界で知られている。このようなホログラフィック画像は、ホログラムを読み出す(照明する)ことによって表示できる。コンピュータ生成ホログラムは、合成又はデジタルホログラムとも呼ばれる。コンピュータ生成ホログラムは一般に、2D又は3D画像を選択し、そのホログラムをデジタル式に計算することによって取得される。ホログラフィック画像は、光学的再構築によって、すなわちホログラムを適当な光ビーム(ホログラムの参照ビーム)で照明する(読み出す)ことによって表示できる。ホログラフィック画像は2D又は3Dとすることができる。同じ計算を使って、所望のライトフィールドディスプレイを設計するためにディスプレイの正面で使用可能な位相マスクを定義してもよい。
「シースルーミラー」(M)は当業界で知られている。このようなミラーには、ホログラフィックミラー(HM)、半透明ミラー、ダイクロイックミラー等が含まれる。HMDの場合、これらのミラーは装着者の眼に向かって視覚化された画像を反射するような特定の形状を有していてもよい。好ましい例は、ホログラフィックミラーであって、特にその特定の形状が眼科用レンズの曲面上に記録されるホログラフィックミラーである。
「ホログラフィックミラー」(HM)は当業界で知られている。ミラーは、それがホログラフィプロセスを使って記録された場合、ホログラフィックミラーと定義される。しかし、本発明によれば、ホログラフィックミラーは視覚化を目的としたものである。このミラーは、画像源から生成された光ビームを反射して、装着者による画像の視覚化が行われるようにするために使用される。ホログラフィックミラーは、(従来のホログラムビューイングの場合のように)記録されたホログラフィック画像を再構築するためには使用されない。この記録により、有利な点として、本発明によれば、ミラーに光学的機能が付与され、これは、適当であれば画像源から発せられる光ビームの波面を前記ミラーでの反射時に変調させることができる。これによって装着者の仮想視野を補正できるが、それは、本発明のレンズ(ミラーを組み込んだもの)が装着者の眼の中で画像を生成する光ビームを変調できるからである。
バーチャル画像はそれゆえ、必ずしもホログラフィック画像であるとはかぎらない。これは、2D又は3D画像等の何れのバーチャル画像とすることもできる。画像の性質は、ホログラフィックミラーのホログラフィックの性質ではなく画像源の性質の結果である。画像源としてホログラフィック画像源を使用でき、この場合、バーチャル画像はホログラフィック画像である。
このようなホログラフィックミラーについては、後で詳しく説明する。
「頭部装着型機器」(HMD)は当業界で知られている。このような機器は、装着者の頭部に、又はその周辺に装着されるものであり、ヘルメット装着型ディスプレイ、光学的頭部装着型ディスプレイ、頭部装着型ディスプレイ及びその他が含まれる。これらは、装着者による視覚化のために画像を表示する光学的手段を含む。HMDは、コンピュータ生成画像と「実世界」の視野の重畳視覚化を提供してもよい。HMDは、単眼型(片眼用)又は双眼型(両眼用)であってもよい。本発明のHMDは、眼鏡、スキーやダイビングマスク等のマスク、ゴーグル等を含む各種の形態をとることができる。HMDは、1つ又は複数のレンズを含んでいてもよい。前記レンズは、処方レンズ等の眼鏡レンズから選択できる。好ましい実施形態において、HMDは、レンズを備える眼鏡である。
「空間光変調器」(SLM)は当業界で知られている。前記SLMは、phase SLM、phase−only SLM、amplitude−only SLM、又はphase and amplitude SLMとすることができる。それが存在する場合、振幅変調は好ましくは位相変調とは独立しており、それによって、画像スペックルを低減させ、グレイスケールの点での画像品質を改善できる。SLMは透過型にも反射型にもすることができる。これは、完全に、又は部分的にコヒーレンスな光源(例えば、レーザ、ダイオードレーザ)又はインコヒーレントな光源(例えば、LED、OELDディスプレイスクリーン)によって照明できる。
「画像源」(IS)は当業界で知られている。画像源は、装着者が視覚化するための画像を表示するのに適した(そのように配置、構成された)光ビームを発することのできるあらゆる光源である。視覚化は、画像源から発せられる照明ビームがシースルーミラーで反射された後に行われる。ホログラフィック画像の表示に関して、光ビームはホログラムのための参照ビームを含む。画像は、画像データ(例えば、コンピュータ生成画像データ)から表示できる。
本発明によれば、ISはライトフィールドディスプレイ(LFD)を含む。
本発明によれば、ISは有利な点として、コントローラ、グラフィックカード、1つ又は複数のバッテリ、配線等を含んでいてもよい。
本発明によれば、ISはまた、多層構造を有していてもよい。
本発明によれば、ISは、それが装着者のこめかみの横に、例えば眼鏡のテンプル部品等、HMDのテンプル部品上に配置されていてもよいという点で、「オフアクシス」であってもよい。
「ライトフィールドディスプレイ」(LFD)は当業界で知られている。これらはプレノプティックディスプレイ、又はインテグラルイメージングディスプレイとも呼ばれることがある。いくつかの実施形態において(マイクロホールアレイ、下記参照)、これらはマルチピューピル、マルチアパーチャ、又は開口合成ディスプレイと呼ばれてもよい。
いくつかの実施形態において、LFDはディスプレイ(マイクロスクリーン)を含み、その正面にマイクロレンズアレイが位置付けられる。図2a参照。マイクロスクリーン(デジタルディスプレイ、D.D.)は、複数のピクセルpを含む。あるピクセル集合p.s.はあるマイクロレンズ(μL)に対応する。アレイに関する画像の位置により、画像Iの表示の方向のほか、装着者による視覚化のための距離を設定(調節、調整)することが可能となる。マイクロスクリーンがマイクロレンズの焦点にあるとき、画像は無限遠∞に表示される。図2b参照。画像を有限距離(ある平面内)で視覚化するために、マイクロレンズアレイとマイクロスクリーンとの間の距離を変化させることが可能である。これは、表示されたピクセルp1の(マイクロスクリーン内の)位置を選択することにより実現されてもよい。このような場合、画像Iをある距離に、ある位置に(視線方向)に表示できる。図2c参照。マイクロレンズの焦点距離が非常に短い場合、その位置のわずかな差が焦点面における大きな差の原因となる。
いくつかの実施形態において、アレイがマイクロホール又はその他の光学微細素子を含む場合、アレイを一切移動させずに、表示画像を、それを視覚化の距離と位置の点で適応させるために計算することが可能である。
例えば、ライトフィールドディスプレイに関して、
− ディスプレイ:辺の長さ9μm(4000×4000px)(辺の長さ約36mm)
− 辺の長さ125μmの296×296のマイクロレンズアレイ
− これは、各マイクロレンズにつき12×12ピクセルのピクセル群に対応する。
本発明によれば、例えば、サイズが5μm又はそれ未満の高解像度(フルHD)ピクセルを、辺の長さ10〜50μmのマイクロレンズアレイと共に使用することが有利である。
図2a〜2cは、本明細書において開示されているように、マイクロレンズアレイの代わりにマイクロホールアレイ、又は他のあらゆる微細素子アレイが用いられる実施形態に移行されてもよい。
より一般的に、LFDのこの定義は時々、例示的なマイクロレンズアレイに基づいているが、本明細書において開示されている他の微細素子アレイにも当てはまる(及び/又は移行されてもよい)。
より一般的には、本発明によれば、LFDは、マイクロレンズアレイの代わりに、屈折及び/又は回折微細素子アレイを含んでいてもよい。
いくつかの実施形態において、複数の光学微細素子アレイを使用することができ、前記複数のアレイは、同じでも異なっていてもよく、積層されてもよい。同じ又は異なる光学微細素子の2つ又は複数のアレイを重ねることは、機能を追加する(複数の視野の距離、コントラスト等)を追加することが可能になるという点で有利である。
後で説明するように、いくつかの実施形態において、マイクロレンズアレイは同じマイクロレンズ(同じ焦点距離、同じ大きさ等)を含み、焦点の設定は、アレイの長さ方向の相対移動によって実行されてもよい。他の実施形態において、マイクロレンズはまた、視覚化されるべき画像の領域に応じて、例えば近方視野領域(NV)、又は遠方視野領域(FV)において表示するために、アレイを移動させることなく焦点距離が異なるようにしてもよい(焦点距離の勾配)。また、スクリーンに関するアレイの位置(距離、方位)を、ディスプレイのピクセル上の画像の位置がNV領域とFV領域を画定できるように計算することも可能である。
マイクロレンズはすべて、同じプロファイルまたは幾何学的種類であってもよく、例えば球面、非球面、シリンドリカル、両凸、平凸、凹、平凹、両凹、正メニスカス、負メニスカス、等から選択され、各々が独立して何れのプロファイル又は幾何学的種類のものであってもよい。
マイクロレンズはすべて同じ度数を有していても、そうでなくてもよい。これらはまた、その度数(同じ又は異なる)、例えば球面度数、乱視度数、プリズム度数等により定義されてもよい。
マイクロレンズはまた、アクティブ画像変調を提供するためにアクティブマイクロレンズ(液晶、メンブレン、フレネルレンズ、ピンホール、ホログラフィックレンズ等)であってもよい。これは、視覚化平面又は焦点領域を局所的に移動させることによって、それが装着者の屈折異常(眼科データ、処方データ等)を矯正してもよいという点で有利である。
「装着者眼科データ」又は「眼科データ」(OD)は当業界で知られている。装着者眼科データには、装着者処方データ(PD)、装着者の眼の感度データ(SD)、及び装着者眼科生体データ(BD)、及び一般にあらゆる装着者の視覚障害に関するデータ、例えば色目収差、眼球の水晶体の欠落(無水晶体症)、非球面化や像面収差等の二次収差等に関するデータ等が含まれる。
「処方データ」(PD)は当業界で知られている。処方データは、装着者について得られ、各眼に関して、各眼の屈折異常及び/又は老眼を矯正するのに適した、処方された遠方視平均屈折力PFV及び/又は処方された乱視度数CYLFV及び/又は処方された乱視軸AXEFV、及び/又は処方による加入度Aを示す1つ又は複数のデータを指す。平均屈折力PFVは、処方された乱視度数CYLFVの半値を処方された球面度数SPHFVに加算することによって得られ、すなわちPFV=SPHFV+CYLFV/2となる。すると、近接(近方)視のための各眼の平均屈折力は、処方された加入度Aを同じ眼について処方された遠方視平均屈折力PFVに加算することによって得られ、すなわちPNV=PFV+Aとなる。累進レンズの処方の場合、処方データは、各眼に関して、SPHFV、CYLFV、及びAを示す装着者データを含む。好ましい実施形態において、装着者処方データPDは、乱視モジュール、乱視軸、度数、プリズム及び加入度ならびに、より一般的には、ある視力障害の矯正を示すあらゆるデータから選択される。このような障害は、患者の部分的網膜剥離、網膜又は瞳孔又は角膜形成異常に起因するかもしれない。
「装着者の眼の感度データ」(SD)は当業界で知られている。装着者の眼の感度データには、(1つ又は複数の波長又はスペクトルバンドに対する)スペクトル感度、明るさに対する感度、例えば屋外の明るさに対する感度等の一般的な感度に関するデータが含まれる。このようなデータは、装着者による画像の視覚化のコントラストを最適化するために重要である。
「装着者眼科生体データ」又は「生体データ」(BD)は当業界で知られている。生体データは、装着者の形態に関するデータを含み、典型的には単眼瞳孔距離、瞳孔間距離、眼球軸長、眼球回転中心位置、遠点、近点その他を含む。
本発明の頭部装着型機器
本発明によれば、装着者により装着されることが意図された頭部装着型機器(HMD)が提供される。頭部装着型機器は、装着者がコンピュータ生成画像を表示し、視覚化するように構成される。前記頭部装着型機器(HMD)は、画像源(IS)であって、ライトフィールドディスプレイを含む画像源(IS)と、装着者の片眼の正面に位置付けられるホログラフィックミラー(HM)等のシースルーミラー(M)と、を含む。画像源(IS)は、光ビームを前記ミラーに向かって発するように構成され、前記発せられた光ビームは前記ミラー(M、HM)で反射され、それによって装着者の前記眼に向かって方向付けられ、装着者によるコンピュータ生成画像の視覚化が行われる。ミラーは、ISに関してオフアクシスで配置される。これは、ホログラフィックミラーHM等のミラーMを示す図1により説明されている。画像源ISは、眼鏡の形態のHMDのテンプル上に配置される。ISはまた、偏向器(例えば、ホログラフィック偏向器、H defl)も含んでいてよい。
いくつかの実施形態において、ミラーはホログラフィックミラーHMである。このHMは、本明細書において説明される通りであってもよい。前記HMは、装着者の視力を少なくとも部分的に矯正するように構成されてもよい。これには、屈折異常及び/又は調節機能の欠如等の考えられる視力障害が含まれる。特に、HMは、装着者の眼科データOD、例えば処方データPDを考慮に入れるように構成されてもよい。
HMは、眼鏡レンズの前面、後面、又は体積内に提供されてよい。これは図2に示されている(L、Rx:レンズ、例えば処方レンズ)、F:HMを提供するように記録されてもよいホログラフィック材料のフィルム、G:ガラス)。
レンズは何れの種類のレンズでもよく、好ましくは処方レンズである。
HMはまた、視線方向(例えば上、下、左、右)の点で、又は視野(近方視野、遠方視野、中間視野、中央視野、周辺視野)の点で、又は視覚化の距離の点で各種の視野ゾーンを画定してもよい。HMは、装着者の屈折異常又は、処方データを含む眼科データを考慮に入れるように構成されてもよい。
それゆえ、有利な点として、本発明によれば、シースルーミラー及び/又は画像源(LFD)は、前記表示されたコンピュータ生成画像の視覚化のために装着者の視力を少なくとも部分的に調節するように構成される。特に、装着者に屈折異常がある場合、シースルーミラー及び/又は画像源は、前記表示されたコンピュータ生成画像を視覚化するために装着者の屈折異常を少なくとも部分的に矯正するように構成されていてもよい。いくつかの実施形態において、視力を矯正するステップは、屈折異常を矯正するステップ及び/又は調節機能を最小化するステップを含む。いくつかの実施形態において、視力を矯正するステップは、シースルーミラーの構成、及び/又は画像源(LFD)の構成、及び/又は画像計算(画像源に入力されるコンピュータ生成画像データ)を通じて実現される。
いくつかの実施形態において、少なくとも部分的に視力を矯正するために、発せられた光ビームはゼロ以外の曲率を有していてもよい。例えば、発せられた光ビームは、少なくとも1つの軸に沿って、少なくとも0.25ディオプタの曲率を有していてもよい。
本発明のHMD及び方法におけるライトフィールドディスプレイ
いくつかの態様において、本発明の装置、方法、及び使用において、シースルーミラーはホログラフィックミラーであり、ライトフィールドディスプレイは、光学微細素子アレイと、LED、OLED、LCoS、及びLCDディスプレイスクリーン等のデジタル表示スクリーンから選択されたデジタル表示素子と、を含む。
いくつかの実施形態において、光学微細素子はアクティブでもパッシブでもよく、及び/又は前記光学微細素子アレイは、
− マイクロレンズアレイ
− マイクロホールアレイ
− マイクロプリズムアレイ
− 液晶(LCD又はLCoS等)アレイ
− 回折格子アレイ、及び
− 位相マスクアレイ等
から選択されてもよい。
いくつかの実施形態において、ライトフィールドディスプレイは、光学微細素子アレイと、複数のピクセルを含むデジタル表示素子と、を含む。有利な点として、本発明によれば、光学微細素子アレイの中で、各光学微細素子はデジタル表示素子の中のピクセル小集合に対応していてもよい(例えば、あるマイクロレンズはあるピクセル小集合に対応していてもよく、あるマイクロホールはあるピクセル小集合に対応していてもよく、あるマイクロプリズムはあるピクセル小集合に対応していてもよく、等々)。
いくつかの実施形態において、光学微細素子アレイの中のすべての光学微細素子は同じであってもよい。
いくつかの実施形態において、光学微細素子アレイは、
− マイクロレンズアレイであって、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイ
− マイクロホールアレイであって、少なくとも2種類のマイクロホールを含むマイクロホールアレイ
− マイクロプリズムアレイであって、少なくとも2種類のマイクロプリズムを含むマイクロプリズムアレイ
− 液晶アレイであって、少なくとも2種類の液晶を含む液晶アレイ
− 回折格子アレイであって、少なくとも2種類の回折格子を含む回折格子のアレイ
− 位相マスクのアレイであって、少なくとも2種類の位相マスクを含む位相マスクアレイ
のうちの1つ又は複数であってもよい。
「2種類」とは、微細素子アレイが、少なくとも1つの物理的特性、例えば寸法(大きさ、辺の長さ、直径、深さ等)、光学的特性(屈折率、度数等)、状態(オンかオフか、調整可能か固定か、等)、又は微細素子からデジタル表示素子内のそれぞれのピクセル小集合までの相対距離に関して異なる少なくとも2つの微細素子小集合を含むことを意味する。
例えば、いくつかの実施形態において、光学微細素子アレイは、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイであってもよく、前記少なくとも2種類のマイクロレンズは、
− マイクロレンズの直径
− マイクロレンズの度数(例えば、球面、乱視、又はプリズム度数等)
− マイクロレンズのプロファイル(例えば、球面、非球面、シリンドリカル、両凸、平凸、凹面、平凹、正メニスカス、負メニスカス、等)
− マイクロレンズから、デジタル表示素子内のそのそれぞれのピクセル小集合までの相対距離
− マイクロレンズの性質がアクティブかパッシブか(例えば、液晶かメンブレンか)
のうちの1つ又は複数において異なる。
例えば、いくつかの実施形態において、光学的微細素子アレイは、少なくとも2種類のマイクロホールを含むマイクロホールアレイであり、前記少なくとも2種類のマイクロホールは、
− マイクロホールの寸法、例えば直径
− マイクロホールの形状(正方形、円形、長方形、多角形等)
− マイクロホールから、デジタル表示素子内のそのそれぞれのピクセル小集合までの相対距離
のうちの1つ又は複数において異なる。
例えば、いくつかの実施形態において、光学微細素子アレイは液晶アレイであってもよく、前記液晶アレイは少なくとも2種類の液晶を含み、前記少なくとも2種類の液晶は、
− ピクセルの大きさ及び/又はピクセルの形状(例えば、正方形、長方形、ランダム形状等の異なる幾何学形状から選択される)
− 液晶の科学的性質又は属
− 光学的屈折率
− 制御電圧の数値
のうちの1つ又は複数が異なる。
有利な点として、本発明によれば、少なくとも2種類の光学微細素子(前記少なくとも2種類のマイクロレンズ、又は前記少なくとも2種類のマイクロホール、又は前記少なくとも2種類のマイクロプリズム、又は前記少なくとも2種類の液晶、又は前記少なくとも2種類の回折格子、又は前記少なくとも2種類の位相マスク)は、光学微細素子アレイの中の少なくとも2つの異なる領域を画定するように配置される。LFDの中のアレイにより、対応する視野領域を画定することが可能となる。視野領域は、1つ又は複数のコンピュータ生成画像の視覚化のための視野であってもよい。視野領域は、視覚化されるべき画像の区域に応じて、例えば視線方向(例えば、上、下、左、右、及びそれらの組合せ)の点で、又は視野(近方視野、遠方視野、中間視野、中央視野、周辺視野)の点で、又は視覚化の距離の点で画定されてもよい。
本発明のHMDは1つ又は複数のスマートセンサを含んでいてもよい。
いくつかの実施形態において、本発明のHMDは1つ又は複数のシーンカメラ、例えばライトフィールドカメラ又は魚眼カメラ又は標準的なカメラを含んでいてもよい。カメラは広角視野絞りを有していてもよく、これはプレノプティックカメラであってもよい。
HMDがカメラを含む場合、それによって光景内のあるアイテムを検出し(これには実世界のアイテムを見るための距離及び/又は視線方向を判断することを含む)、すると、同じ又は異なる視線方向に、及び/又は同じ又は異なる視覚化距離で、1つ又は複数のコンピュータ生成画像を表示することが可能となる。例えば、装着者が美術館の絵画を鑑賞するとき、カメラはその絵画(実世界)を見るための距離と視線方向を検出し、それに応じて、その絵画に関する情報を表示するための情報をその絵画のすぐ下に、例えば前述のような視野ゾーンに対応する同じ(又は異なる)視覚化距離で提供する。表示される情報は、タグ、情報、写真、画家の名前(拡張現実)を含んでいてもよい。
いくつかの実施形態において、本発明のHMDは1つ又は複数の照度センサ及び/又はルミノシティセンサ(明るさセンサ)、例えばALS=周辺光センサ、フォトダイオード、又は広角視野絞り若しくはプレノプティックカメラ等を含んでいてもよい。
HMDが照度センサ及び/又はルミノシティセンサを含む場合、それによって他の箇所より暗い視野ゾーンを検出することが可能となる。これによって、例えば上述のように視野ゾーンに対応するM、HMのより暗い領域に情報(コンピュータ生成画像)を表示することを選択できる。これは、有利な点として、コントラストが高くなることによって視野を改善する。
いくつかの実施形態において、本発明のHMDは1つ又は複数の1つ又は複数のアイトラッカ、例えばIRトラッカ又は(IR)ミラー若しくはカメラを含んでいてもよい。
HMDが1つ又は複数のアイトラッカを含む場合、それによって装着者が使用している視野ゾーンを検出する(視線方向を検出する)ことが可能となる。これによって、例えば上述のように視野ゾーンに対応するM、HMのある領域の中又は外に情報(コンピュータ生成画像)を表示することを選択できる。
このような場合、本発明のHMDはエレクトロクロミックセル(EC)をさらに含んでいてもよい。ECセルは、HMDのレンズの中又は上にあってもよい。ECセルはすると、有利な点として、レンズを暗くするために使用されてもよく、それによって視野のコントラストが高まり、装着者によるコンピュータ生成画像の視覚化が改善される。より一般的に、ECセルはまた、適応可能か否かを問わず、従来のソーラアイウェア又はソーラHMD内等で使用されてもよい。
本発明の方法と使用
本発明は、コンピュータ生成画像の視覚化のための使用と方法を提供する。これらは、拡張現実のために有益である。
本発明によれば、ライトフィールドディスプレイがHMDの中で、
− 装着者によるコンピュータ生成画像の視覚化の距離を調節するため、及び/又は
− 装着者によるコンピュータ生成画像の視覚化の視線方向を調節するため、及び/又は
− 視覚化されたコンピュータ生成画像の大きさと視野を調節するため、及び/又は
− 装着者によるコンピュータ生成画像の視覚化における二次光学収差、例えば非球面化、像面収差等を補正するため、及び/又は
− 装着者に屈折異常がある場合、装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するため、
に使用される。
本発明によれば、ライトフィールドディスプレイは、HMDの中で記録されたホログラフィックミラーと共に
− 装着者によるコンピュータ生成画像の視覚化の距離を調節するため、及び/又は
− 装着者によるコンピュータ生成画像の視覚化の視線方向を調節するため、及び/又は
− 視覚化されたコンピュータ生成画像の大きさと視野を調節するため、及び/又は
− 装着者によるコンピュータ生成画像の視覚化における二次光学収差、例えば非球面化、像面収差等を補正するため、及び/又は
− 装着者に屈折異常がある場合、装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するため、
に使用される。
コンピュータ生成画像の視覚化は、LFDにより発せられた光ビームをホログラフィックミラーで反射させることにより提供される。
いくつかの実施形態において、HMDはシーンカメラを含み、視覚化の方法は、
(i)装着者による自然の視野内のある物体の視覚化の距離及び/又は視線方向を、シーンカメラから収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向をステップ(i)で判断された距離及び/又は視線方向に応じて調節するようにライトフィールドディスプレイを制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
ステップ(ii)で、装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向はそれぞれ、ステップ(i)からの装着者による自然の視界の中の物体の視覚化の距離及び/又は視線方向のそれと等しくても等しくなくてもよい。ステップ(iii)により拡張現実の体験が向上するが、それは、情報がタイムラプス方式で収集され、時間に応じて、例えば装着者が視線方向を変えたとき、及び/又は頭を回転させたとき、及び/又は自然の視野内の物体が移動しているときに表示を更新できるからである。
いくつかの実施形態において、HMDは、装着者の前記眼の正面に位置付けられた少なくとも1つの照度又はルミノシティセンサ及び、任意選択によりエレクトロクロミックセルを含み、視覚化の方法において、ステップ(b)は、
(i)照度又はルミノシティの少なくとも1つの値を、照度又はルミノシティセンサから収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の視線方向を、ステップ(i)で判断された値に応じて調節するようにライトフィールドディスプレイを制御するステップ、及び/又は任意選択により、ステップ(i)で判断された値に応じてエレクトロクロミックセルを制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
ステップ(ii)により、装着者によるコンピュータ生成画像の視覚化のためのコントラストを制御(調整/調節)できる。ステップ(iii)により、拡張現実の体験が向上するが、これは、情報をタイムラプス方式で収集し、周辺ルミノシティの変化に応じて表示を更新できるからである。
いくつかの実施形態において、HMDは少なくとも1つのアイトラッカを含み、視覚化の方法において、ステップ(b)は、
(i)装着者による自然の視野内のある物体の視覚化の距離及び/又は視線方向を、アイトラッカにより収集したデータに基づいて判断するステップと、
(ii)装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向を、ステップ(i)で判断された値に応じて調節するようにライトフィールドディスプレイを制御するステップと、
(iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
を含む。
これによって、前述のように異なる視野ゾーンを選択し、使用することが可能となる。
本発明により実装されるホログラフィックミラー
ホログラフィックミラーの光学特性
ホログラフィ技術は当業界で知られている。これらは一般に、まず、ホログラフィックサポート等の適当な媒体上に記録するステップと、次に、ホログラフィック画像を再構築するステップを含む。記録するステップは一般に、媒体を参照ビームと照明ビームによる二重照明を含む。ホログラフィック画像を再構築するステップは、記録された媒体を参照ビームで照明することによって実行できる。
ミラーの原理は以下のとおりである(これは、装着者が正常視であり、視覚化された画像が無限遠にある状況を説明するためのものである。パッシブミラーは従来のホログラフィ記録装置(光学配置)を使って記録され、図7の左側を参照のこと。ミラーはスクリーン(画像源)上に表示された画像を反射させる。このスクリーンはガラスに比較的近く、それに関して角度をなす。これは、スクリーンの実際の距離と実際の傾斜から生じる発散波(ビーム)によりシミュレートされる。表示される予定の画像は、ガラスに垂直な方向の無限遠にある。第二の干渉ビームはガラスに垂直な方向への平面波である。スクリーンが位置決めされると、画像は無限遠に表示され、図7の右に示されるように、装着者から見える(ホログラムの回復)。2つのビーム間の干渉縞がインデックス格子の形態で感光材料内に記録される。このインデックス格子は、実装されることになる光学機能を反映する。
広い意味において、ホログラフィックミラーHMを提供するために、本発明は記録ステップを実行するが、前述のような再構築ステップを含まない。概して図7及び9に示される例を参照されたい。
本発明により実装されるHMを得るために、記録ステップは、ホログラフィック材料のフィルムFの光学機能を記録する(付与する)ために使用される。その結果(記録されたフィルム)は、画像源からのビームを反射させるために使用されるミラーであり、それによって装着者によりバーチャル画像の視覚化される。
これは、図7及び図9により説明されており、図中、ホログラフィック媒体はホログラフィックミラーであり、左側は媒体記録を示し、右側は装着者による(画像源からの)バーチャル画像の視覚化を示す。画像源ISは、ホログラフィックミラーを照明するビームを提供する。ISからのビームはミラーで、使用者の眼(E)に向かって反射される。図7において、視覚化されるバーチャル画像は装着者の無限遠の(すなわち、非常に長い)距離に配置される。図9は、瞳孔共役の場合のバーチャル画像の視覚化を説明している。バーチャル画像は眼球の瞳孔上に形成される。
いくつかの実施形態において、HMは複数の視野ゾーンを提供するように、及び/又は装着者の視力を少なくとも部分的に矯正するように構成されてもよい。特に、装着者に屈折異常がある場合、HMは装着者の視力を少なくとも部分的に矯正するように構成されてもよい。
このようなHMは、2015年4月3日に出願された欧州特許第15305504.1号明細書に記載されるように取得されてもよい。下記も参照のこと。
ホログラフィックミラーを製作するための材料:ホログラフィック材料のフィルム
このようなミラーは、重クロム酸ゼラチン又はフォトポリマ等の特定の材料から得ることができる。フォトポリマは、いずれの物理的状態(液体、固体、ペースト等)でもありえ、標準的条件下でのこれらの固体及びこれらの液体を含む。ミラー機能は、特定の材料の中にホログフラィ技術により記録される。
フォトポリマ配合物は一般に、少なくともエチレン性不飽和重合可能部と、照明の波長に対する感受性を有する少なくとも1つの成分を持つ光重合開始系を表す1種又は複数の種類のモノマ又はオリゴマを含む。これらは、可視光に対するスペクトル感度の範囲を増大させることのできる光重合開始剤と増感剤との組合せを含むことができる。これらのフォトポリマ配合物は各種の添加剤を含むことができ、その一部の例を挙げれば、ポリマ、溶媒、可塑剤、移動剤、界面活性剤、酸化防止剤、熱安定剤、消泡剤、増粘剤、レベリング剤、触媒等がある。フォトポリマの例には市販のフォトポリマ、例えばOmniDex(E.I.du Pont de Nemours(欧州特許出願公開第0377182A2号明細書))、Bayfol HX(Bayer)、Darol(Polygrama)又はSM−TR Photopolymer(Polygrama)が含まれる。
それらの組成、特に溶媒の有無及びそれらの粘性に応じて、異なる種類の処理が想定できる。フォトポリマ層の厚さは1〜100μm、好ましくは4〜50μmであってもよい。
溶媒を含む配合物は、所望の厚さを得るために、例えばスピンコーティング、平面ガラス基板(鉱物又は有機)のディップコーティングスプレイ若しくはバーコーティング、又は曲面ガラス基板(鉱物又は有機)上へのスピンコーティング、ディップコーティング、又はスプレイコーティング等の様々な方法で加工できる。コーティングの後、一般に、記録可能な状態のフォトポリマ層を得るために、溶媒を蒸発させるステップが必要である。図2を参照のこと(左側)。
配合物が溶媒を含まない場合、これらは、その粘性が高すぎなければ同様に使用できる。この場合、蒸発させるステップは不要である。それでもなお、好ましい方法は、平面又は曲面形状を有する2枚のガラス板(鉱物又は有機)間にフォトポリマを直接封入することである。図2を参照のこと(右側)。
この場合、2つの方法を使用できる。第一の方法では、フォトポリマに応じて、5〜50μmの厚さに必要な量の液体がガラス板の上に堆積される。液体は、最終的な所望の厚さに合わせられた5〜50μmの直径のガラス又はポリマからなるスペーサを含む。第二のガラス板が液滴の上に載せられる。それによって、フォトポリマを広げ、閉じ込めることができる。露光及び重合の後、フォトポリマは固体となり(又は少なくともゲル化し)、2つのガラス板を相互に接着させる。次に周辺シーリングが行われ、フォトポリマの縁辺が、時間の経過によりそれに損傷を与える可能性のある液体又は雰囲気と接触しないように保護される。
第二の方法では、セルが2枚のガラス板(平面又は曲面)と組み立てられ、セルに液体フォトポリマを充填できるようにするための穴を除き、周辺全体に沿ってシールされる。充填は、セルを低圧又は真空下に置き、それをフォトポリマの中に浸漬させることによって実行できる。その後、穴が有機接着剤、例えばUV又は熱処理により重合する接着剤でシールされる。
別の方法は、以下を含む:
− 例えばポリエステル等のポリマフィルムのような柔軟な基板上へのフォトポリマの堆積
− 蒸発又は加熱による残留溶媒の除去
− よく知られている移動プロセスを使用し、これを使用材料(フィルムとフォトポリマ)に適合させることによる、平面又は曲面形状を持つ基板(鉱物又は有機)上へのフォトポリマによる被覆フィルムの移動(例えば、ESSILORの特許出願である国際公開第2007144308A1号パンフレット、国際公開第2010010275A2号パンフレット)。フォトポリマは、この場合、移動したフィルムの表面上にあるか、基板と接触することができる。
フォトポリマの堆積後、及びその露光前に、典型的には15分〜2時間にわたり、これを放置する必要がある。堆積のプロセスに関連付けられる応力は、この期間中に消失する。ホログラフィックミラーを記録した後、残留モノマを重合させるためにUV下での後露光が行われる。
フォトポリマ層は、可視光の一部を吸収する光増感剤で着色することができる。これらの光増感剤は、好ましくは、可視光に露光された後にその色が完全に失われるように選択される。UV又は白色光下での後露光によって、残留吸収が減少する。
使用された材料に応じて熱処理を実行し、ホログラムの屈折率変調とその回折効率を増大させることができる。
いくつかの実施形態において、前記ホログラフィックミラー(HM)(又は、記録されていないホログラフィック媒体の前記フィルム(F))は眼鏡レンズの前面上、眼鏡レンズの後面上、又は眼鏡レンズの前面と後面との間に提供される。前記眼鏡レンズは単焦点レンズ、二焦点レンズ等の多焦点レンズ、及び累進屈折力レンズ、ならびにセミフィニッシュトレンズブランクから選択されてもよい。
ホログラフィックミラーの記録
ミラーの記録は、光学配置に従って実行できる。例示的な光学配置が図8に示されている。この図では、記録はレーザを利用する。偏光ビームスプリッタPBSによって、ビームを「分割」できる。参照記号PMFは偏光保持ファイバ(polarization−maintaining fiber)である。ビームの分割によって2つのビーム、すなわちホログラフィック記録媒体の片面を照明する参照ビームRBとホログラフィック媒体の反対面を照明する照明ビームIBが提供される。これによってホログラフィックミラーHMの記録が可能となる。光学配置が設定されると(例えば、形状、ビームの大きさ等)、ホログラフィックミラーの特徴は、2つのビームのパワーの比(縞のコントラストと回折効率に影響を与える)、露光時間(回折及び拡散効率に影響を与える)、及びファイバ端のための回転可能な支持手段の使用の可能性(PMFファイバから射出するときのビームの偏向に影響を与える)を含む1つ又は複数のパラメータを変化させることによって変更できる。光学配置と記録のためのパラメータの例は、実施例4で提供する。
眼鏡レンズに提供されるホログラフィックミラー:屈折異常の矯正
いくつかの実施形態において、HMDは1つ又は複数の眼鏡レンズを含み、HMは前記レンズのうちの1つ又は複数の中/上に提供される。このような実施形態では、HMは以下の方法にしたがって得られてもよい(一般に、図10〜13に示される非限定的な例を参照する)。
(1)前面と後面を有する眼鏡レンズを提供するステップであって、前記眼鏡レンズは記録されていないホログラフィック媒体のフィルム(F)を含み、前記眼鏡レンズは任意選択により、例えばエレクトロクロミックセル、偏光セル、及びフォトクロミックセルから選択される振幅変調セルをさらに含むようなステップ、
(2)参照ビーム(RB)と照明ビーム(IB)との間の干渉を発生させることによって前記ホログラフィック媒体のホログラフィック記録を実行し、ホログラフィックミラー(HM)を含む眼鏡レンズを提供するステップであって、ホログラフィック記録は少なくともHMDのフレームの(空間)配置を考慮に入れた光学配置で実行されるようなステップ、
(3)任意選択により、ステップ(2)で得られたレンズを切断するステップ。
有利な点として、ステップ(2)によれば、RBの構成は、フレームにはめ込まれたレンズのHMに関して、フレーム上のISの構成を模倣(シミュレート)する。特に、RBの空間構成は、レンズがフレームにはめ込まれたときの、ミラーの記録のために利用される空間構成を反映している(向き、距離、幅(レンズ上で突出するゾーンの形状と大きさ)等)。フレームに内蔵された画像源ISの物理的位置はそれゆえ、二次的な(再結像された)対応する画像源をさらに画定してもよい。それゆえ、IBの構成は、物理的な画像源ISからの、又は二次的な(再結像された)画像源からの発光を反射してもよい。
有利な点として、ステップ(2)の光学配置により、所望の光学的機能につながるホログラフィックミラーが提供され、すなわちステップ(2)により得られるホログラフィックミラーは、レンズを通じた仮想視野のために、装着者の屈折異常を少なくとも部分的に矯正するのに適した光学的機能を提供するように「自動的に」構成される。
図10の右側に示されるように、フィルムFがレンズLの前面上にある第一の場合、画像源ISからの光ビームはレンズLを通り、ホログラフィックミラーHMで反射される。反射された波面WFは照明ビームIBの波面と同じであり、これは、バーチャル画像が無限遠から「来ている」ように、すなわち自然の像として見えることを意味する。レンズはそれゆえ、自然の視野とバーチャル画像の視野を同時に補正する。フィルムFがレンズLの後面にある場合、照明ビームの波面は、レンズLを横断した後に、フィルムFで発散する。画像源ISのビームはそれゆえ、レンズLを通して見た実像と同じ波面を有して反射され、バーチャル画像はこの実像と同じ場所から発せられているように見える。これを実現するために、レンズは装着者の処方データPDと同じかそれに近い屈折力の値を有していてもよい。
いくつかの実施形態において、ステップ(2)の光学記録は、
− フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化の距離(D)及び/又は
− フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化の方向及び/又は
− ホログラフィックミラーのうち、フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化のための領域の数
をさらに考慮に入れる。
いくつかの実施形態において、装着者に屈折異常があり、ステップ(1)の眼鏡レンズは、自然の視力についての装着者の屈折異常を矯正するように構成され、単焦点レンズ、例えば二焦点レンズから選択される多焦点レンズ、及び累進屈折力レンズから選択される。
いくつかの実施形態において、ステップ(2)の光学配置は、照明ビーム(IB)が、
− 単焦点レンズ、二焦点レンズ等の多焦点レンズ、及び累進屈折力レンズから選択される1つ又は複数の記録レンズ(RL、RL1、RL2)、又はレンズマトリクス(LM)、又は位相変調されるアクティブレンズと、
− 任意選択により、不透明マスク(OM)
と共に空間的に構成される、というものである。
いくつかの実施形態において、ステップ(2)の光学配置は、
− 参照ビーム(RB)が前記ホログラフィックミラーを照明して、フレームを装着したときに装着者により視覚化されるべきバーチャル画像の表示が行われるようにするために使用される内蔵画像源のビームをシミュレートし、
− 照明ビーム(IB)が、
・ フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化の距離(D)及び/又は
・ フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化の方向及び/又は
・ ホログラフィックミラーのうち、フレームを装着したときの装着者による前記表示されたバーチャル画像の視覚化のための領域の数
を画定するように構成される
というものである。
いくつかの実施形態において、ステップ(2)の光学配置は、照明ビーム(IB)が未記録のホログラフィック媒体のフィルム(F)上の複数の領域(A1、A2、NV、FV)を異なる方法で記録するように構成される、というものであり、任意選択により、各領域(A1、A2;NV、FV)は装着者による前記表示されたバーチャル画像の視覚化の距離(D;D_nv、D_fv)の等しい、又は異なる値に対応し、及び/又は装着者による前記表示されたバーチャル画像の視覚化の等しい、又は異なる方向に対応する。
いくつかの実施形態において、ステップ(2)の光学配置は、照明ビーム(IB)がエルゴラマにしたがって構成されるというものであり、前記エルゴラマは、フレームを装着したときの視線方向に応じた装着者による前記表示されたバーチャル画像の視覚化の距離(D)及び/又は視覚化の方向を画定する。
いくつかの実施形態において、装着者に屈折異常があり、前記方法は累進屈折力レンズ(それぞれ二焦眼鏡レンズ等の多焦点レンズ、それぞれ単焦点レンズ)を提供する方法であり、ステップ(1)の眼鏡レンズは累進屈折力レンズ(それぞれ二焦点眼鏡レンズ等の多焦点レンズ、それぞれ単焦点レンズ)であり、ステップ(2)のホログラフィック記録は、ホログラフィックミラー(HM)が少なくとも装着者による表示されたバーチャル画像の視覚化の距離の異なる数値(D_nv、D_fv)に対応する近方視野領域(NV)と遠方視野領域(FV)を含むように実行される。
いくつかの実施形態において、装着者に屈折異常があり、前記方法はHMを持つ単焦点レンズを提供する方法であり、ステップ(1)の眼鏡レンズはセミフィニッシュトレンズブランクであり、ステップ(2)の眼鏡レンズは、装着者の屈折異常を矯正するのに必要な屈折力とセミフィニッシュトレンズブランクの屈折力を考慮に入れた屈折力を有する補助単焦点レンズ(AL)の実装を含み、補助単焦点レンズ(AL)は参照ビーム(RB)又は照明ビーム(IB)を空間的に構成するためのものである。
いくつかの実施形態において、前記方法はHMを持つ累進屈折力レンズ(それぞれ二焦点レンズ等の多焦点レンズ、それぞれ単焦点レンズ)を提供する方法であり、ステップ(1)の眼鏡レンズは累進屈折力レンズ(それぞれ二焦点眼鏡レンズ等の多焦点レンズ、それぞれ単焦点レンズ)であり、ステップ(2)のホログラフィック記録は、ホログラフィックミラーHMが少なくとも、装着者による表示されたバーチャル画像の視覚化の距離D_nv、D_fvの異なる値に対応する近方視野領域NVと遠方視野領域FVを含むようにして実行される。例として、図13を参照のこと。
有利な点として、上記の方法は、レンズ(例えば、単焦点、二焦点等の多焦点、累進屈折力)上に2つのバーチャル視野を提供するホログラフィックミラーを提供し、HMミラーは少なくともバーチャル近方視野領域と少なくともバーチャル遠方視野領域を含むように特に構成される。
いくつかの実施形態において、方法は、エレクトロクロミックセルEC等、本明細書に記載されているような振幅変調セルを含むHMを備えるレンズを提供する。例えば、図11の説明的な光学配置を参照のこと。
補助レンズ(AL)を実装する代わりに、変調位相を持つアクティブレンズ、例えば補償光学技術を使った可変屈折力レンズを使ってIB又はRBからの波面を直接変化させることが可能である。いくつかの実施形態において、IBは、それがレンズ上に拡張視野をカバーするというものである。例えば図12を参照のこと。
本発明を、以下の非限定的な例により説明する。
実施例1:屈折異常のある装着者のためのHMDと方法
HMDには光源としてLFDが設けられる。LFDは、移動しない(固定された位置の)パッシブ型の同じマイクロレンズのアレイを含み、その焦点距離は装着者の処方データに合わせて決定される。例えば、装着者に処方された乱視度数が1D、軸が30°である場合、パッシブレンズの乱視軸と屈折力の数値も30°/1Dに近い。
ディスプレイは、ホログラフィックミラーを直接照明するように方向付けることができる(図1の左側)。屈折用構成部品を使用して、LFDディスプレイを眼鏡のテンプルに平行な位置に配置することによってより小型化してもよい(図1の右側)。屈折用構成部品は、マイクロプリズムアレイ(移動式又は、マイクロレンズの動作に加えて又はその代わりにスクリーン上での画像位置を調節しない)か、又はホログラフィック構成部品(アレイ、コリメーティング、及び屈折レンズ、屈折マイクロレンズアレイ等)であってもよい。
あるいは、マイクロレンズアレイを移動させることによって、又はアクティブレンズを使って焦点を変化させることによって、ライトフィールドディスプレイにより生成された画像を直接、非移動型パッシブマイクロレンズアレイと共に使用して、装着者の屈折異常を矯正することが可能である。
1つの実施形態において、マイクロレンズの大きさは、瞳孔の直径より実質的に小さく、例えば約1mm程度として、網膜上に形成されるスポットの大きさが大きくなりすぎないようにすることができる。
以下は、近視の装着者(−1D)のための、1つの光スポットを表示する実施形態の例を提供しており、この場合、近視の装着者により鮮鋭な画像が視覚化されるように、画像は計算された距離(−1m)で表示される。例えば、5×5のマイクロレンズアレイを使用することが可能である。マイクロレンズは、ホログラフィックミラーを介し眼の瞳孔上に結像され、各マイクロレンズの像は約1mmの程度の大きさである。
したがって、各マイクロレンズは、眼の瞳孔の異なる部を「アドレス指定」する。光ビームは、各マイクロレンズの射出側でコリメートされるが、方向は異なり、これは−1mで交差する。すると、各マイクロレンズにより網膜に作られる光スポットは完全に重複し、すると、生成される最終的な1つの光スポットの大きさが小さくなる。この大きさは、マイクロレンズがより小さく、ピンホール効果を生成するために縮小される。
この構成により、プレノプティックスクリーン(LFD)により提供される仮想距離を変化させることによって、装着者の屈折異常を補償することができる。
距離は1/Sであり、S=球面補正であり、屈折異常のある装着者の場合、この距離は乱視軸に沿って1/Cminと1/Cmaxである。
実施例2:複数のゾーンの表示及び視覚化のためのHMDと方法
図3は、装着者による視覚化が可能な画像を示す。LFDによって異なる視野ゾーンを使用できる。このようなゾーン1、2、3、4、5は異なる視線方向に応じて画定されてもよい。例えば(図3の左側)、ゾーン5は中央の視野に対応し、ゾーン1〜4は周辺視野である。このようなゾーンはまた、コンピュータ生成画像の視覚化距離に関して画定されてもよい。
実施例3:スマートセンサを用いた表示及び視覚化のためのHMDと方法
本発明によれば、HMDは1つ又は複数のスマートセンサを含んでいてもよい。各センサは、装着者の環境(リアルタイムの環境と装着者)を分析するために使用されてもよく、それによって表示をある状況に合わせてカスタム化できる。表示は、有利な点として、タイムラプス方式で行い、「リアルタイム」で状況に合わせて調節することができる。
実施例3.1:スマートセンサをシーンカメラとして用いた表示及び視覚化のためのHMDと方法
拡張現実での応用のために、仮想物体(コンピュータ生成画像)を実世界に「統合する」ためのシーンカメラを有することが有利である。
このカメラは、従来のカメラとすることができる。カメラが人間の眼のそれと同様の視界を持つように、例えば魚眼型の広角レンズを使用できる。しかしながら、従来のカメラは一般に、観察された光景の被写界深度を正確に判断することができない。1つの方法は、可変焦点のレンズを使用し、焦点距離を連続的に測定することにより、距離を再構築(再現)することである。すると、3Dの光景の画像を視覚化し、物体までの距離を測定することが可能となる。第二の方法は、複数のカメラを使用することである。少なくとも2つのカメラを使用することにより、異なる視点から光景を見ることができ、それゆえ、三角法を用いて光景を説明することができる。第三の方法は、装着者の一定の移動を使用する。この場合、カメラの位置を知ることで(例えば加速度計)、物体の距離と位置をたどることができる。実際に、画像分析によって、光景からのビームの方向と、したがってカメラに関する物体の位置を判断できる。
プレノプティックカメラ(ライトフィールドカメラ、LFC)を使用することも可能である。図4は、プレノプティックカメラ(センサ)を使って入射角αiを判断するための原理を説明している。原理はプレノプティックディスプレイと同じである。十分に大きい立体角(sr 2π)で光景の低解像度画像を測定できるセンサが提供される。このために、マイクロレンズアレイ(又はマイクロホールアレイ等)を高解像度のセンサマトリクスの正面に設置する。各マイクロレンズはピクセルの集合(サブセット)に対応する。光景からのビームは各マイクロレンズによって、光景内のそれらの方向と物体の距離に応じてピクセル集合へと分散される。すると、(実際の)物体の位置、距離、及び方向を含む画像を得ることが可能となる。適切な画像処理は、収集したデータを使ってバーチャル物体を表示することができ、表示されたコンピュータ画像は実世界の光景の中で「進化」させることができる。これは、この実際の物体が装着者の環境内で固定されているとき(図5の上:エッフェル塔は実際の光景の中で固定されているが、装着者が頭を動かす:コンピュータ生成画像の表示、例えばエッフェル塔の上の注釈は装着者の視線方向に「追従し」、装着者の頭部の移動に応じて環境の視覚化に追従することができる)か、又はそれが移動しているとき(図5の下:装着者の頭部は移動しないが、自転車が実世界の光景の中で移動する(m))のいずれかで実行できる。すると、例えば実際の物体の位置を判断して、同じ位置、特に同じ距離にあるバーチャル画像(プレノプティックスクリーンを介して)を表示することができる。それによって、装着者はその位置に関係なく、実際の画像/バーチャル画像を同じ視覚化距離で鮮鋭に同時に視覚化できる。
実施例3.2:スマートセンサとして照度又はルミノシティセンサを使用した表示及び視覚化のHMDと方法
本発明のHMDは、光(明るさ)センサ、例えば照度又はルミノシティセンサを含んでいてもよい。装着者の見やすさを増大させるために、バーチャル画像の明るさ及び/又はコントラストを最適化して、これをそれが埋め込まれている実世界に適合させることが有利である。
本発明のHMDは、ミラー上の明るい領域の位置を判断するために、1つのセンサ、複数の個別のセンサ、又はセンサアレイ(例えば、CCD、CMOS)を含んでいてもよい。これは、センサアレイが人間の視野角と同様の、又は同じ広角光学システム(レンズ)を備えていると特に有利である。
シーンカメラを使って環境の明るさを測定することが可能である。実際に、光センサを校正することにより、視野の4Dフィールド(空間内の位置と明るさ)を得てもよい。このようなシステムは有利な点として、小型である。これは、シーンの明るさのマッピングを提供する。
この4Dフィールドはすると、瞳孔(又は眼モデルの場合は網膜)の照明のレイトレーシング計算のための拡張された情報源として使用されてもよい。この計算ではさらに、処方データ及び/又はHMD/フレームとベクトル光源に関する眼球の位置を含む装着者の眼科データを考慮してもよい。光景の分析結果(明るさの値が高いゾーンの存在、バーチャル画像について使用できる「キャリア」等)に応じて、画像を視覚化のために暗い領域に表示するように選択すること、又は表示された画像を非常に明るい領域から移動させること、又は必要に応じてスクリーンの明るさを変更すること等が可能である。
HMDがエレクトロクロミックガラスを備える場合(例えば、ECセルを取り込んだレンズを有する眼鏡)、明るさの測定は自動的にEC透過率を周辺条件に適合させてもよく、これは、レンズ/ガラスがピクセル化されている場合は局所的に、又はそうでなければ全体的に行われる。いずれの場合も、シーンカメラを通じて得られた4D照明マトリクスを使って、精神物理学的測定結果(例えば、処方データ又は眼の感度データを含む眼科データ)を考慮に入れるアルゴリズムを用いて、例えば中央視野の照明、周辺照明等、レンズ/ガラスの減光を計算してもよい。これは、判断される重み関数を使って実行されてもよい。レンズ/ガラスがピクセル化されている場合、領域(例えば、バーチャル画像領域の中のゾーン、非常に明るい領域の中のゾーン、中央又は周辺視野の中のゾーン等)を減光することが可能かもしれない。このように画像表示とカメラにより行われる環境分析とを結合したものはまた、例えばHMD/ガラスを完全に暗くすることが不要又は不適切又は危険である場合に、有益なスポットのみを減光するようにエレクトロクロミックガラスを制御するために使用することもできる。
プレノプティックディスプレイとプレノプティックシーンカメラ、ホログラフィックミラー、及びエレクトロクロミックセルを備える眼鏡が図6に示されている。これらは、実際の環境の中で、この環境を考慮して快適にバーチャル画像を表示するために使用される。図6aの凡例は以下のとおり:SA CAM:輝度センサとしても使用されるプレノプティックシーンカメラ。EC:光源の位置が管理されるエレクトロクロミックセル。HM,EC:ECセルを備えるホログラフィックミラー。IS:画像源としてのプレノプティックディスプレイ。
実施例3.3:スマートセンサとしてアイトラッカを用いた表示及び視覚化のためのHMDと方法
IRホググラフィックミラーを用いたアイトラッキング
視線方向とその輻輳に追従するために、したがってコンピュータ生成画像を装着者がすでに見ている距離と視線方向に表示するために、アイトラッキングシステムを追加することが可能である。赤外線(IR)LEDは装着者の眼を(眼の安全を考慮して)照明できる。カメラは眼球を捕捉し、その移動と視線方向を追うことができる。古典的に、このカメラは眼球の方向に向けられてもよい。
IRホログラフィックミラー
小型さの点で、アイトラッカIR LEDの赤外線反射をHMD/眼鏡のテンプルへと方向転換させるために、レンズ内にIRホログラフィックミラーを使用することが可能である。このミラーは、画像反射ミラーと同様に取得されてもよいが、装着者の処方データを考慮する必要がないという点が異なる。それゆえ、これは非常に簡単に実現できる。赤外線で反射されると、可視光スペクトル内の視野と表示を妨害せず、装着者にとって完全に透明となる。
例示的な実施形態が図6bに示されており、SC CAM:プレノプティックシーンカメラであり、輝度センサとしても使用される。EC:光源の位置が管理されるエレクトロクロミックセル。HM,EC:ECセルを備えるホログラフィックミラー[HMは実際には2つのHMを含み、すなわち画像視覚化用(可視波長に使用)の1つのHMと、1つのHMはアイトラッカe−tと共に使用されるIRホログラフィックミラーである(2つのHMは反射波長の差に加えて)異なる光学機能を有していてもよく、特に2つのHMは異なる反射形状を有していてもよい。]。IS:画像源としてのプレオブティックディスプレイ。LED IR:赤外線LED。IR C(e−t):赤外線カメラ(アイトラッカ)。
実施例4:HMDのためのホログラフィックミラーHM及び表示と視覚化のための方法
ホログラフィックミラーの記録の例は図8に示されており、これはホログラフィックミラーをレンズ上に記録するための例示的な光学配置を示している(レンズは図示せず)。この例において、レーザは532nm(100mW)で発光する。PMFは偏光保持ファイバ(460−HP Nufern)であり、パンダファイバ、コア径2.5μm、オン0.13、モード径:3.5μm@515nmである。偏光ビームスプリッタPBSの横にあるコリメートレンズはf=8mmである。照明ビームIBは1mW/cmである。参照ビームRBは0.5mW/cmである。RBを生成するレンズはf=4mmである。IBを生成するレンズ(参照レンズRL)はf=400mmである。
HMが形成されるレンズは示されていない。このレンズは以下のとおり:屈折力−3D、前面半径87mm、形状眼鏡レンズ40×50mm又は円の直径70mm。フィルムFは、2つのガラス層間に形成され、レンズの前面上に位置付けられる。フィルムFは以下のとおり:直径70mm、曲率半径87mm、ガラス層の厚さ850μm、フォトポリマFの厚さ:スペーサにより5〜50μm(例えば、40μm)、積層体全体の厚さ約1.65mm、露光時間:フォトポリマの性質に応じて30秒〜10分。
直径70mmのレンズのためのフィルムFの堆積:
− 50μLの液滴をガラス層に堆積させるステップ(スペーサ:5〜50μm、ガラス層:厚さ500μm、曲率半径87mm、円の直径70mm、反射防止処理又はコーティング、特に532nm)、
− 第二のガラス層を位置決めし、締め付けするステップ、
− 照明支持部材の上で20分間放置するステップ。
ビームの強度(図20を参照)、フォトポリマの性質及び厚さに応じて30秒〜6分間照明
− 可視光に15分間露光させることにより(例えば、50〜75Wのハロゲンランプ)退色させるステップ。
− 必要に応じて接着剤でシールするステップ。
照明中、
− 物理的妨害(空気の動き、機械的振動、埃等)からの保護
− 温度の安定化(空気の対流を防止)
− 暗黒室(暗室:例えば、緑色光を記録するためのinactinic照明)
− ガラスへのコーティング(反射防止)(寄生反射を回避)。
特徴
− スペクトル(反射及びミラー効率のための波長)
− 定性的光学特性(OLEDスクリーンを観察)
− 定量的光学特性(波面解析)。
ECセルと組み合わせることが可能である。
実施例5:アクティブ情報の表示と視覚化のためのHMDと方法
本発明のHMDは、様々な方法で操作し、又は使用してもよい。1つの実施形態によれば、ライトフィールドディスプレイは、ミラーまたはホログラフィックミラーHMの全体を覆うために使用されてもよい。すると、あるバーチャル画像を完全な表示の一部として表示することが可能である(完全な表示はミラーの全表面に対応するもので、図14の上側を参照のこと。F:ミラー全体での全面表示(ミラー全体はISにより照明される)。矢印:画像を全面表示Fの一部として付与。)。あるバーチャル画像を移動させるために(例えば、図14の上側の矢印(d))、ディスプレイのアクティブ部分が変化する。これによって、1つの集合の収差矯正だけ(装着者の眼、ディスプレイ、HM等)を使用することができる。光学微細素子のアレイは、例えばスクリーンの収差及び/又は装着者の処方等を直接、及び少なくとも部分的に補正するために、異なるレンズ(プロファイル、屈折力等)で計算されてもよい。すると、大きさ、視野、及び位置の変更を行いやすい。1つの制約は、解像度における損失である。
他の実施形態によれば、(全面)ライトフィールドディスプレイを使って、ミラーの小部分のみに、あるバーチャル画像を表示することが可能である。例えば、図14の下側を参照のこと(L:ミラーの局所的照明のみ。全面ISはミラー表面の小部分を照明するために使用されてもよい。)。位置、大きさ、視野、距離は、光学微細素子アレイ及び/又は画像データの計算によって管理されてもよい。それゆえ、解像度は高いが、バーチャル画像が変化するたびに収差の補正を再構築しなければならないかもしれない(例えば、図14の移動(d))。光学微細素子アレイはまた、スクリーンの収差及び/又は装着者の処方を直接、及び少なくとも部分的に補正するために異なるレンズで計算されてもよい。
上述の実施形態の何れについても、収差の補正、及び/又はバーチャル画像の位置、距離、又は大きさの調節は、画像ディスプレイのために全部又は部分的に計算されてもよい。この場合、光学微細素子アレイは、バーチャル画像に対して所望の動作を得るために移動させてもよい。バーチャル画像の変更の決定は、スマートセンサ(自動モード)に、又は手動もしくは音声もしくはジェスチャのコマンドを通じた装着者の動作に連結されてもよい。

Claims (13)

  1. 装着者により装着されることが意図された頭部装着型機器(HMD)において、
    前記頭部装着型機器は、前記装着者がコンピュータ生成画像を表示し、視覚化するように構成され、
    前記頭部装着型機器(HMD)は、
    − 画像源(IS)であって、ライトフィールドディスプレイを含む画像源(IS)と、
    − 前記装着者の片眼の正面に位置付けられるホログラフィックミラー(HM)等のシースルーミラー(M)と、
    を含み、
    前記画像源(IS)は、光ビームを前記ミラーに向かって発するように構成され、前記発せられた光ビームは前記ミラー(M、HM)で反射され、それによって前記装着者の前記眼に向かって方向付けられ、前記装着者による前記コンピュータ生成画像の視覚化が行われ、
    前記シースルーミラー及び/又は前記画像源は、前記装着者による前記表示されたコンピュータ生成画像の視覚化のために前記装着者の屈折異常を少なくとも部分的に矯正することにより、前記装着者の視力を少なくとも部分的に調節するように構成される頭部装着型機器(HMD)。
  2. 前記シースルーミラーはホログラフィックミラーであり、
    前記ライトフィールドディスプレイは、
    − 光学微細素子アレイであって、前記光学微細素子はアクティブでもパッシブでもよく、
    ・ マイクロレンズアレイ
    ・ マイクロホールアレイ
    ・ マイクロプリズムアレイ
    ・ 液晶(LCD又はLCoS等)アレイ
    ・ 回折格子アレイ、及び
    ・ 位相マスクアレイ等
    から選択される光学微細素子アレイと、
    − LED、OLED、LCoS、LCD、及びSLM表示スクリーンから選択されるデジタル表示素子と、
    を含む、
    請求項1に記載の頭部装着型機器(HMD)。
  3. 前記ライトフィールドディスプレイは、
    − 光学微細素子アレイと、
    − 複数のピクセルを含むデジタル表示素子と、
    を含み、前記光学微細素子アレイの中で、各光学微細素子は前記デジタル表示素子の中のピクセル小集合に対応する、
    請求項1又は請求項2に記載の頭部装着型機器(HMD)。
  4. 前記光学微細素子アレイの中のすべての光学微細素子は同じである、請求項3に記載の頭部装着型機器(HMD)。
  5. 前記光学微細素子アレイは、
    − マイクロレンズアレイであって、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイ、又は
    − マイクロホールアレイであって、少なくとも2種類のマイクロホールを含むマイクロホールアレイ、又は
    − マイクロプリズムアレイであって、少なくとも2種類のマイクロプリズムを含むマイクロプリズムアレイ、又は
    − 液晶アレイであって、少なくとも2種類の液晶を含む液晶アレイ、又は
    − 回折格子アレイであって、少なくとも2種類の回折格子を含む回折格子のアレイ、又は
    − 位相マスクのアレイであって、少なくとも2種類の位相マスクを含む位相マスクアレイ
    である、請求項3に記載の頭部装着型機器(HMD)。
  6. 前記光学微細素子アレイは、少なくとも2種類のマイクロレンズを含むマイクロレンズアレイであり、前記少なくとも2種類のマイクロレンズは、
    − マイクロレンズの直径
    − マイクロレンズの度数
    − マイクロレンズのプロファイル、例えば、球面、非球面、シリンドリカル、両凸、平凸、凹面、平凹、正メニスカス、負メニスカス、等
    − 前記マイクロレンズから、前記デジタル表示素子内のそのそれぞれのピクセル小集合までの相対距離
    − 前記マイクロレンズの性質がアクティブかパッシブか
    のうちの1つ又は複数において異なり、
    前記光学的微細素子アレイは、少なくとも2種類のマイクロホールを含むマイクロホールアレイであり、前記少なくとも2種類のマイクロホールは、
    − マイクロホールの寸法、例えば直径
    − マイクロホールの形状
    − 前記マイクロホールから、前記デジタル表示素子内のそのそれぞれのピクセル小集合までの相対距離
    のうちの1つ又は複数において異なる、
    請求項5に記載の頭部装着型機器(HMD)。
  7. 前記少なくとも2種類の光学微細素子(前記少なくとも2種類のマイクロレンズ、又は前記少なくとも2種類のマイクロホール、又は前記少なくとも2種類のマイクロプリズム、又は前記少なくとも2種類の液晶、又は前記少なくとも2種類の回折格子、又は前記少なくとも2種類の位相マスク)は、前記光学微細素子アレイの中の少なくとも2つの異なる領域を画定するように、前記光ビームを発する前記画像源の光源と共に配置される、請求項5又は請求項6に記載の頭部装着型機器(HMD)。
  8. − 1つ又は複数のシーンカメラ、
    − 1つ又は複数の照度センサ及びルミノシティセンサ、及び、
    − 1つ又は複数のアイトラッカ
    から選択された少なくとも1つのセンサをさらに含む、請求項1〜請求項7の何れか一項に記載の頭部装着型機器(HMD)。
  9. 装着者により装着されることが意図されるシースルー頭部装着型機器におけるライトフィールドディスプレイの使用であって、
    前記頭部装着型機器はミラーを含み、前記ライトフィールドディスプレイは、光ビームを前記ミラーに向かって発するように構成され、前記発せられた光ビームは前記ミラー(M、HM)で反射され、それによって装着者の前記眼に向かって方向付けられ、装着者によるコンピュータ生成画像の視覚化が行われるようにし、
    装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するための使用において、
    前記シースルーミラー及び/又は前記画像源は、前記視覚化のための前記屈折異常を少なくとも部分的に矯正することにより、前記装着者の視力を少なくとも部分的に調節するように構成される使用。
  10. コンピュータ生成画像の表示と視覚化のための方法において、
    (a)装着者に請求項2〜7の何れか1項に記載の頭部装着型機器(HMD)を提供するステップと、
    (b)前記ライトフィールドディスプレイの前記デジタル表示素子に関する前記光学微細素子アレイの位置を、前記装着者によるコンピュータ生成画像の視覚化のために装着者の屈折異常を少なくとも部分的に矯正するように制御するステップと、
    を含む方法。
  11. 前記頭部装着型機器(HMD)は少なくとも1つのシーンカメラをさらに含み、
    ステップ(b)は、
    (i)自然の視野内のある物体の前記装着者による視覚化の距離及び/又は視線方向を、前記シーンカメラから収集したデータに基づいて判断するステップと、
    (ii)前記装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向をステップ(i)で判断された前記距離及び/又は視線方向に応じて調節するように、前記ライトフィールドディスプレイの前記デジタル表示素子に関する前記光学微細素子アレイの位置を制御するステップと、
    (iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
    を含む、請求項10に記載の方法。
  12. 前記頭部装着型機器(HMD)は、前記装着者の前記眼の正面に位置付けられる少なくとも1つの照度又はルミノシティセンサと、任意選択によりエレクトロクロミックセルをさらに含み、
    ステップ(b)は、
    (i)照度又はルミノシティの少なくとも1つの値を、前記照度又はルミノシティセンサから収集したデータに基づいて判断するステップと、
    (ii)前記装着者によるコンピュータ生成画像の視覚化の視線方向をステップ(i)で判断された前記値に応じて調節するように前記ライトフィールドディスプレイの前記デジタル表示素子に関する前記光学微細素子アレイの位置を制御するステップと、及び/又は任意選択により、ステップ(i)で判断された前記値に応じて前記エレクトロクロミックセルを制御するステップと、
    (iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
    を含む、請求項10又は請求項11に記載の方法。
  13. 前記頭部装着機器(HMD)は少なくとも1つのアイトラッカをさらに含み、
    ステップ(b)は、
    (i)自然の視野内のある物体の前記装着者による視覚化の距離及び/又は視線方向を、前記アイトラッカから収集したデータに基づいて判断するステップと、
    (ii)前記装着者によるコンピュータ生成画像の視覚化の距離及び/又は視線方向をステップ(i)で判断された前記値に応じて調節するように前記ライトフィールドディスプレイの前記デジタル表示素子に関する前記光学微細素子アレイの位置を制御するステップと、
    (iii)任意選択により、ステップ(i)及び(ii)をタイムラプス方式で繰り返すステップと、
    を含む、請求項10〜請求項12の何れか一項に記載の方法。
JP2017568288A 2015-07-03 2016-06-30 拡張現実のための方法とシステム Active JP6930929B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15306099 2015-07-03
EP15306099.1 2015-07-03
PCT/EP2016/065403 WO2017005614A1 (en) 2015-07-03 2016-06-30 Methods and systems for augmented reality

Publications (2)

Publication Number Publication Date
JP2018528452A true JP2018528452A (ja) 2018-09-27
JP6930929B2 JP6930929B2 (ja) 2021-09-01

Family

ID=53524704

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017568288A Active JP6930929B2 (ja) 2015-07-03 2016-06-30 拡張現実のための方法とシステム

Country Status (6)

Country Link
US (1) US10416456B2 (ja)
EP (1) EP3317716B1 (ja)
JP (1) JP6930929B2 (ja)
KR (1) KR102593113B1 (ja)
CN (1) CN107850788B (ja)
WO (1) WO2017005614A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020090811A1 (ja) * 2018-10-31 2020-05-07 株式会社ニデック 自覚式検眼装置
JP2021515258A (ja) * 2018-01-14 2021-06-17 ライト フィールド ラボ、インコーポレイテッド ホログラフィックおよび回折光符号化システム
JP2022516940A (ja) * 2019-09-30 2022-03-03 エルジー・ケム・リミテッド ヘッドマウントディスプレイ
JP2022528048A (ja) * 2019-03-20 2022-06-08 ウォード,マシュー,イー. マイクロledアレイを搭載したmems駆動光学パッケージ
JP2022537334A (ja) * 2019-06-19 2022-08-25 エフ.ホフマン-ラ ロシュ アーゲー 所定の構成の複数の発現カセットの標的化組込みによって三価の抗体を発現する細胞を生成するための方法
JP2022553613A (ja) * 2019-09-03 2022-12-26 ライト フィールド ラボ、インコーポレイテッド モバイルデバイスのライトフィールドディスプレイ

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105717640B (zh) * 2014-12-05 2018-03-30 北京蚁视科技有限公司 基于微透镜阵列的近眼显示器
DE102015219859B4 (de) * 2015-10-13 2017-07-27 Carl Zeiss Vision International Gmbh Vorrichtung und Verfahren für die AR-Darstellung
US11432718B2 (en) * 2017-10-31 2022-09-06 EyeQue Inc. Smart phone based virtual visual charts for measuring visual acuity
US20220304570A1 (en) * 2016-10-17 2022-09-29 EyeQue Inc. Method and Apparatus for Measuring Vision Function
US10855977B2 (en) 2017-05-26 2020-12-01 Google Llc Near-eye display with extended accommodation range adjustment
US11454815B2 (en) * 2017-06-01 2022-09-27 NewSight Reality, Inc. Transparent optical module using pixel patches and associated lenslets
US10684494B2 (en) * 2017-06-01 2020-06-16 NewSight Reality, Inc. Fabrication of see-through near eye optical module and ophthalmic lens
GB2567012B (en) * 2017-10-02 2021-05-12 Advanced Risc Mach Ltd Motion Sensing
US10930709B2 (en) 2017-10-03 2021-02-23 Lockheed Martin Corporation Stacked transparent pixel structures for image sensors
US11624934B2 (en) 2017-11-02 2023-04-11 Interdigital Madison Patent Holdings, Sas Method and system for aperture expansion in light field displays
US10510812B2 (en) 2017-11-09 2019-12-17 Lockheed Martin Corporation Display-integrated infrared emitter and sensor structures
CN107861247B (zh) * 2017-12-22 2020-08-25 联想(北京)有限公司 光学部件及增强现实设备
US11616941B2 (en) 2018-02-07 2023-03-28 Lockheed Martin Corporation Direct camera-to-display system
US10979699B2 (en) 2018-02-07 2021-04-13 Lockheed Martin Corporation Plenoptic cellular imaging system
US10838250B2 (en) 2018-02-07 2020-11-17 Lockheed Martin Corporation Display assemblies with electronically emulated transparency
US10594951B2 (en) 2018-02-07 2020-03-17 Lockheed Martin Corporation Distributed multi-aperture camera array
US10951883B2 (en) 2018-02-07 2021-03-16 Lockheed Martin Corporation Distributed multi-screen array for high density display
US10129984B1 (en) 2018-02-07 2018-11-13 Lockheed Martin Corporation Three-dimensional electronics distribution by geodesic faceting
US10652529B2 (en) 2018-02-07 2020-05-12 Lockheed Martin Corporation In-layer Signal processing
US10690910B2 (en) 2018-02-07 2020-06-23 Lockheed Martin Corporation Plenoptic cellular vision correction
AU2019221088A1 (en) * 2018-02-19 2020-10-08 Integral Scopes Pty Ltd Method and system for calibrating a plenoptic camera system
KR20190120634A (ko) * 2018-04-16 2019-10-24 엘지전자 주식회사 이동 단말기
US10788892B2 (en) 2018-05-23 2020-09-29 Facebook Technologies, Llc In-field illumination and imaging for eye tracking
US11455031B1 (en) * 2018-06-04 2022-09-27 Meta Platforms Technologies, Llc In-field illumination for eye tracking
KR102084723B1 (ko) * 2018-06-27 2020-03-04 (주)비젼에이드 플라스틱 엘시디 셰이드를 구비한 증강현실 및 가상현실 겸용 스마트 글라스 디스플레이 장치
WO2020009251A1 (ko) * 2018-07-03 2020-01-09 광운대학교 산학협력단 반사형 홀로그래픽 광학 소자를 이용한 풀칼라 증강현실 구현장치
GB2575658B (en) * 2018-07-18 2020-12-23 Envisics Ltd Head-up display
CN108919492B (zh) * 2018-07-25 2021-05-07 京东方科技集团股份有限公司 一种近眼显示装置、系统及显示方法
CN110908134B (zh) * 2018-08-28 2021-01-26 京东方科技集团股份有限公司 一种显示装置及显示系统
KR20200031922A (ko) 2018-09-17 2020-03-25 삼성전자주식회사 투시형 디스플레이 장치 및 이를 포함하는 증강 현실 장치
KR20200046517A (ko) 2018-10-24 2020-05-07 삼성전자주식회사 디스플레이 장치
CN109164583A (zh) * 2018-11-07 2019-01-08 深圳珑璟光电技术有限公司 一种水下ar装置
US10866413B2 (en) 2018-12-03 2020-12-15 Lockheed Martin Corporation Eccentric incident luminance pupil tracking
CN109633906A (zh) * 2019-01-02 2019-04-16 京东方科技集团股份有限公司 虚拟现实设备及其图像校正方法
US11181979B2 (en) * 2019-01-08 2021-11-23 Avegant Corp. Sensor-based eye-tracking using a holographic optical element
CN109870820B (zh) * 2019-03-26 2023-10-17 成都工业学院 针孔反射镜阵列集成成像增强现实装置及方法
CN111757089A (zh) * 2019-03-29 2020-10-09 托比股份公司 利用眼睛的瞳孔增强调节来渲染图像的方法和系统
US10698201B1 (en) 2019-04-02 2020-06-30 Lockheed Martin Corporation Plenoptic cellular axis redirection
US11650426B2 (en) 2019-05-09 2023-05-16 Meta Platforms Technologies, Llc Holographic optical elements for eye-tracking illumination
CN110286538B (zh) * 2019-06-28 2022-05-24 Oppo广东移动通信有限公司 显示方法、显示装置、头戴式显示装置和存储介质
JP2022540350A (ja) 2019-06-28 2022-09-15 ピーシーエムエス ホールディングス インコーポレイテッド 調整可能な液晶(lc)ディフューザに基づいたライトフィールド(lf)ディスプレイのための光学的方法およびシステム
CN112789543B (zh) * 2019-09-10 2024-01-16 Lg电子株式会社 电子设备
KR102329612B1 (ko) * 2020-03-09 2021-11-22 주식회사 피앤씨솔루션 복수의 핀홀을 포함하는 광학 장치 및 이를 이용한 머리 착용형 디스플레이 장치
KR102377397B1 (ko) * 2020-03-31 2022-03-22 경북대학교 산학협력단 미세렌즈를 이용한 증강현실 디바이스
WO2022115534A1 (en) * 2020-11-24 2022-06-02 NewSight Reality, Inc. Transparent optical module using pixel patches and associated lenslets
EP4218540A1 (en) * 2022-01-26 2023-08-02 Essilor International Method for simulating an ophthalmic lens on an eye of a subject viewing a virtual three-dimensions scene using a light field display
CN115175004B (zh) * 2022-07-04 2023-12-08 闪耀现实(无锡)科技有限公司 用于视频播放的方法、装置、可穿戴设备及电子设备
US20240094529A1 (en) * 2022-09-14 2024-03-21 Valve Corporation Position tracking systems and methods for head-mounted display systems

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08286275A (ja) * 1995-01-10 1996-11-01 He Holdings Inc Dba Hughes Electron 像投影ディスプレイ
JPH11326823A (ja) * 1998-05-18 1999-11-26 Sony Corp 虚像観察光学系
WO2001009685A1 (en) * 1999-08-03 2001-02-08 Digilens Inc. Display system with eye tracking
JP2002505017A (ja) * 1997-06-20 2002-02-12 セクスタン アビオニク ヘルメット搭載型の可視化システム用映像表示装置
JP2002529790A (ja) * 1998-11-12 2002-09-10 デジレンズ・インコーポレイテッド 映像を見るための頭部搭載型ディスプレイ装置
JP2006209144A (ja) * 2006-03-20 2006-08-10 Sony Corp 画像表示装置
JP2010026273A (ja) * 2008-07-22 2010-02-04 Dainippon Printing Co Ltd ヘッドマウントディスプレイ
JP2010262232A (ja) * 2009-05-11 2010-11-18 Konica Minolta Opto Inc 映像表示装置およびヘッドマウントディスプレイ
JP2011109276A (ja) * 2009-11-13 2011-06-02 Konica Minolta Opto Inc カメラファインダ、撮影装置および遠隔作業支援システム
US20130285885A1 (en) * 2012-04-25 2013-10-31 Andreas G. Nowatzyk Head-mounted light-field display
WO2014126692A1 (en) * 2013-02-15 2014-08-21 Google Inc. Cascading optics in optical combiners of head mounted displays
CN104007552A (zh) * 2014-05-30 2014-08-27 北京理工大学 一种真实立体感的光场头盔显示系统

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4959284A (en) 1988-12-29 1990-09-25 E. I. Du Pont De Nemours And Company Holographic photopolymer compositions and elements containing a ring-opening monomer
FR2902105B1 (fr) 2006-06-13 2008-09-12 Essilor Int Procede de collage d'un film sur un substrat courbe
FR2934056B1 (fr) 2008-07-21 2011-01-07 Essilor Int Procede de transfert d'une portion de film fonctionnel
CN102307514B (zh) * 2008-12-01 2015-07-22 完美视觉科技(香港)有限公司 人眼屈光矫正的方法和设备
US8998414B2 (en) 2011-09-26 2015-04-07 Microsoft Technology Licensing, Llc Integrated eye tracking and display system
US20130258486A1 (en) * 2012-03-27 2013-10-03 Dumitru Mihai Ionescu Head-mount display
US10073201B2 (en) * 2012-10-26 2018-09-11 Qualcomm Incorporated See through near-eye display
CA2906300A1 (en) * 2013-03-15 2014-09-18 Amo Groningen B.V. Wavefront generation for ophthalmic applications
US9582922B2 (en) * 2013-05-17 2017-02-28 Nvidia Corporation System, method, and computer program product to produce images for a near-eye light field display
KR102309257B1 (ko) 2013-09-04 2021-10-06 에씰로 앙터나시오날 증강 현실을 위한 방법 및 시스템
CN112416221A (zh) 2013-09-04 2021-02-26 依视路国际公司 用于增强现实的方法和系统
CN103607622A (zh) * 2013-11-25 2014-02-26 深圳市九洲电器有限公司 电视观看保护方法、装置和机顶盒
CN104519347B (zh) * 2014-12-10 2017-03-01 北京智谷睿拓技术服务有限公司 光场显示控制方法和装置、光场显示设备
CN104656258B (zh) * 2015-02-05 2017-06-16 上海理湃光晶技术有限公司 屈光度可调的曲面波导近眼光学显示器件

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08286275A (ja) * 1995-01-10 1996-11-01 He Holdings Inc Dba Hughes Electron 像投影ディスプレイ
JP2002505017A (ja) * 1997-06-20 2002-02-12 セクスタン アビオニク ヘルメット搭載型の可視化システム用映像表示装置
JPH11326823A (ja) * 1998-05-18 1999-11-26 Sony Corp 虚像観察光学系
JP2002529790A (ja) * 1998-11-12 2002-09-10 デジレンズ・インコーポレイテッド 映像を見るための頭部搭載型ディスプレイ装置
WO2001009685A1 (en) * 1999-08-03 2001-02-08 Digilens Inc. Display system with eye tracking
JP2006209144A (ja) * 2006-03-20 2006-08-10 Sony Corp 画像表示装置
JP2010026273A (ja) * 2008-07-22 2010-02-04 Dainippon Printing Co Ltd ヘッドマウントディスプレイ
JP2010262232A (ja) * 2009-05-11 2010-11-18 Konica Minolta Opto Inc 映像表示装置およびヘッドマウントディスプレイ
JP2011109276A (ja) * 2009-11-13 2011-06-02 Konica Minolta Opto Inc カメラファインダ、撮影装置および遠隔作業支援システム
US20130285885A1 (en) * 2012-04-25 2013-10-31 Andreas G. Nowatzyk Head-mounted light-field display
KR20150003760A (ko) * 2012-04-25 2015-01-09 마이크로소프트 코포레이션 헤드 마운티드 라이트 필드 디스플레이에 사용되도록 이동가능 led 어레이 및 마이크로렌즈 어레이에 기초한 라이트 필드 프로젝터
WO2014126692A1 (en) * 2013-02-15 2014-08-21 Google Inc. Cascading optics in optical combiners of head mounted displays
CN104007552A (zh) * 2014-05-30 2014-08-27 北京理工大学 一种真实立体感的光场头盔显示系统

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021515258A (ja) * 2018-01-14 2021-06-17 ライト フィールド ラボ、インコーポレイテッド ホログラフィックおよび回折光符号化システム
WO2020090811A1 (ja) * 2018-10-31 2020-05-07 株式会社ニデック 自覚式検眼装置
JP7468351B2 (ja) 2018-10-31 2024-04-16 株式会社ニデック 自覚式検眼装置
JP2022528048A (ja) * 2019-03-20 2022-06-08 ウォード,マシュー,イー. マイクロledアレイを搭載したmems駆動光学パッケージ
JP7313469B2 (ja) 2019-03-20 2023-07-24 ウォード,マシュー,イー. マイクロledアレイを搭載したmems駆動光学パッケージ
JP2022537334A (ja) * 2019-06-19 2022-08-25 エフ.ホフマン-ラ ロシュ アーゲー 所定の構成の複数の発現カセットの標的化組込みによって三価の抗体を発現する細胞を生成するための方法
JP7446342B2 (ja) 2019-06-19 2024-03-08 エフ. ホフマン-ラ ロシュ アーゲー 所定の構成の複数の発現カセットの標的化組込みによって三価の抗体を発現する細胞を生成するための方法
JP2022553613A (ja) * 2019-09-03 2022-12-26 ライト フィールド ラボ、インコーポレイテッド モバイルデバイスのライトフィールドディスプレイ
JP2022516940A (ja) * 2019-09-30 2022-03-03 エルジー・ケム・リミテッド ヘッドマウントディスプレイ
JP7276916B2 (ja) 2019-09-30 2023-05-18 エルジー・ケム・リミテッド ヘッドマウントディスプレイ

Also Published As

Publication number Publication date
US20180196265A1 (en) 2018-07-12
US10416456B2 (en) 2019-09-17
EP3317716A1 (en) 2018-05-09
WO2017005614A1 (en) 2017-01-12
KR102593113B1 (ko) 2023-10-25
CN107850788A (zh) 2018-03-27
EP3317716B1 (en) 2020-03-11
CN107850788B (zh) 2020-10-27
JP6930929B2 (ja) 2021-09-01
KR20180044238A (ko) 2018-05-02

Similar Documents

Publication Publication Date Title
JP6930929B2 (ja) 拡張現実のための方法とシステム
JP7074478B2 (ja) 拡張現実のための方法とシステム
US11378803B2 (en) Methods and systems for augmented reality
US9791926B2 (en) Light management for image and data control
US20180084232A1 (en) Optical See-Through Head Worn Display
US10429648B2 (en) Augmented reality head worn device
EP3042249A1 (en) Methods and systems for augmented reality
US20200356050A1 (en) Spatial deposition of resins with different functionality
US20200355862A1 (en) Spatial deposition of resins with different functionality on different substrates

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190409

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200303

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201027

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210311

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210713

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210812

R150 Certificate of patent or registration of utility model

Ref document number: 6930929

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150