JP2022552770A - ライトフィールドディスプレイシステムに基づいたデジタルサイネージシステム発明者：ジョナサン・シャン・カラフィン、ブレンダン・エルウッド・ベベンシー、ジョン・ドーム - Google Patents

ライトフィールドディスプレイシステムに基づいたデジタルサイネージシステム発明者：ジョナサン・シャン・カラフィン、ブレンダン・エルウッド・ベベンシー、ジョン・ドーム Download PDF

Info

Publication number
JP2022552770A
JP2022552770A JP2022506195A JP2022506195A JP2022552770A JP 2022552770 A JP2022552770 A JP 2022552770A JP 2022506195 A JP2022506195 A JP 2022506195A JP 2022506195 A JP2022506195 A JP 2022506195A JP 2022552770 A JP2022552770 A JP 2022552770A
Authority
JP
Japan
Prior art keywords
viewer
display
holographic
display system
energy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022506195A
Other languages
English (en)
Inventor
カラフィン、ジョナサン、シーン
ベヴェンシー、ブレンダン、エルウッド
ドーム、ジョン
Original Assignee
ライト フィールド ラボ、インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ライト フィールド ラボ、インコーポレイテッド filed Critical ライト フィールド ラボ、インコーポレイテッド
Publication of JP2022552770A publication Critical patent/JP2022552770A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/10—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images using integral imaging methods
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/40—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images giving the observer of a single two-dimensional [2D] image a perception of depth
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249—Holobject properties
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294—Addressing the hologram to an active spatial light modulator
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H3/00—Holographic processes or apparatus using ultrasonic, sonic or infrasonic waves for obtaining holograms; Processes or apparatus for obtaining an optical image from them
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/368—Image reproducers using viewer tracking for two or more viewers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0055—Adaptation of holography to specific applications in advertising or decorative art
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0061—Adaptation of holography to specific applications in haptic applications when the observer interacts with the holobject
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2226/00—Electro-optic or electronic components relating to digital holography
    • G03H2226/05—Means for tracking the observer
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/028—Improving the quality of display appearance by changing the viewing angle properties, e.g. widening the viewing angle, adapting the viewing angle to the view direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R19/00—Electrostatic transducers
    • H04R19/02—Loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2217/00—Details of magnetostrictive, piezoelectric, or electrostrictive transducers covered by H04R15/00 or H04R17/00 but not provided for in any of their subgroups
    • H04R2217/03—Parametric transducers where sound is generated or captured by the acoustic demodulation of amplitude modulated ultrasonic waves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/15—Transducers incorporated in visual displaying devices, e.g. televisions, computer displays, laptops

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computer Hardware Design (AREA)
  • Holo Graphy (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Electrostatic, Electromagnetic, Magneto- Strictive, And Variable-Resistance Transducers (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

ライトフィールド（ＬＦ）ディスプレイシステムは、デジタルサイネージアプリケーションのため、公共の場で１人以上の視聴者にホログラフィックコンテンツを提示する。いくつかの実施形態では、ＬＦディスプレイシステムは、感覚フィードバックアセンブリ、追跡システムおよび／または視聴者プロファイリングモジュールを含む。感覚フィードバックアセンブリは、提示されたホログラフィックコンテンツと並行して、ＬＦディスプレイシステムの視聴者に感覚フィードバックを提供する感覚フィードバックデバイスを含み得る。追跡システムは、ＬＦディスプレイシステムの視聴者を追跡するために使用されるカメラを含み得る。ＬＦディスプレイシステムは、視聴者の追跡された位置および／または追跡された視線に基づいて、特定の視聴者には知覚できるが他の視聴者には見えないホログラフィックコンテンツを生成し得る。視聴者プロファイリングモジュールは、パーソナライズされたホログラフィックコンテンツを提供するために各視聴者を識別し得、さらに、ＬＦディスプレイシステムによるホログラフィックコンテンツのその後の提示を通知するために視聴者の行動を監視および記録し得る。【選択図】図１

Description

関連出願の相互参照
本出願は、国際出願第ＰＣＴ／ＵＳ２０１７／０４２２７５号、同第ＰＣＴ／ＵＳ２０１７／０４２２７６号、同第ＰＣＴ／ＵＳ２０１７／０４２４１８号、同第ＰＣＴ／ＵＳ２０１７／０４２４５２号、同第ＰＣＴ／ＵＳ２０１７／０４２４６２号、同第ＰＣＴ／ＵＳ２０１７／０４２４６６号、同第ＰＣＴ／ＵＳ２０１７／０４２４６７号、同第ＰＣＴ／ＵＳ２０１７／０４２４６８号、同第ＰＣＴ／ＵＳ２０１７／０４２４６９号、同第ＰＣＴ／ＵＳ２０１７／０４２４７０号、および同第ＰＣＴ／ＵＳ２０１７／０４２６７９号に関連し、これらはすべて、参照によりその全体が本明細書に組み込まれる。
本開示は、サイネージシステムに関連し、特に、ライトフィールドディスプレイ（ＬＦ）に基づいたサイネージシステムに関連する。
従来のサイネージシステムは、サイネージシステムの１人以上の視聴者にビジュアルコンテンツを提示する。従来のサイネージシステムは、一般に、デジタルサイネージシステムと物理的なサイネージシステムに分類され得る。従来の物理的なサイネージシステムは、一般に、２次元（２Ｄ）または３次元（３Ｄ）のいずれかであり得る物理的オブジェクトで構築され、例えば、貼り紙、看板、デジタル電子ディスプレイ、３Ｄブロック文字、３Ｄ彫刻などがある。ただし、従来の多くの物理的なサイネージシステムでは、リアルタイムで可変の動的コンテンツを表示することが困難である。例えば、物理的なサイネージシステムは、映画のポスターを提示する機能のみでは映画の予告編を表示させることはできない。一般に、従来のデジタルサイネージシステムでは、１人以上の視聴者に２Ｄビジュアルコンテンツのみを表示できるデジタルディスプレイ画面で構成されている。一般に、従来のサイネージシステムは、従来のサイネージシステムを直に見通せるすべての地点から見ることができる共通のビジュアルコンテンツのみを提示することができる。言い換えれば、従来のサイネージシステムのすべての視聴者は、ある時点で、おそらく異なる視点から、同じビジュアルコンテンツを見る。
摘要
デジタルサイネージアプリケーション用のライトフィールド（ＬＦ）ディスプレイシステム。デジタルサイネージアプリケーション用のＬＦディスプレイシステムは、公共の場で１人以上の視聴者にホログラフィックコンテンツを提示するように構成されている。公共の場は、１人以上の視聴者が住む任意の共通エリアでもよい。デジタルサイネージアプリケーションで提供されるホログラフィックコンテンツには、ホログラフィック情報パネル、物理的な商品のホログラフィック表示、ホログラフィック広告、ホログラフィック映画またはビデオなどが含まれ得る。
ＬＦディスプレイシステムは、コントローラおよびＬＦディスプレイアセンブリを含む。コントローラは、ホログラフィックコンテンツを生成するように構成されている。ＬＦディスプレイアセンブリは、公共の場のビューイングボリューム内に位置する視聴者に、ホログラフィックオブジェクトボリューム内のホログラフィックコンテンツを提示するように構成されている１つ以上のＬＦディスプレイモジュールを含む。
ＬＦディスプレイシステムは、ＬＦディスプレイシステムのビューイングボリューム内の視聴者の動きを追跡するための１つ以上のカメラを含む追跡システムを有する。ＬＦディスプレイシステムは、追跡された動きに部分的に基づいて、視聴者がビューイングボリューム内にいると決定する。視聴者がビューイングボリューム内にいるという決定に応じて、１つ以上のＬＦディスプレイモジュールを介したＬＦディスプレイシステムのＬＦディスプレイアセンブリは、ビューイングボリューム内の視聴者が見ることができる、ホログラフィックオブジェクトボリューム内のホログラフィックコンテンツを提示する。
いくつかの実施形態では、ＬＦディスプレイシステムは、パラメータのセットに部分的に基づいて、ホログラフィックオブジェクトについての表示命令を生成する。１つ以上の光ＬＦディスプレイモジュールは、表示命令に従ってビューイングボリューム内にホログラフィックオブジェクトを提示し、ホログラフィックオブジェクトは本物の画像である。ＬＦディスプレイシステムは、各視聴者に提供するホログラフィックオブジェクトのその後の選択を通知できる各視聴者の動作をさらに記録し得る。他の実施形態では、ＬＦディスプレイシステムは、ビューイングボリューム内の個々の視聴者をさらに識別し得る。さらに、ＬＦディスプレイシステムは、識別された視聴者に基づいて表示命令を生成し得る。ＬＦディスプレイシステムはまた、視聴者から１つ以上の入力を受信し得る。ＬＦディスプレイシステムは、ホログラフィックオブジェクトの表示を修正するため、追跡情報および／または受信した入力に基づいて表示命令を更新し得る。ＬＦディスプレイアセンブリは、ＬＦディスプレイモジュールで更新された表示命令に従って、修正されたホログラフィックオブジェクトを提示する。
１つ以上の実施形態による、ホログラフィックオブジェクトを提示するライトフィールドディスプレイモジュールの図である。
１つ以上の実施形態による、ライトフィールドディスプレイモジュールの一部分の断面である。
１つ以上の実施形態による、ライトフィールドディスプレイモジュールの一部分の断面である。
１つ以上の実施形態による、ライトフィールドディスプレイモジュールの斜視図である。
１つ以上の実施形態による、ライトフィールドディスプレイモジュールの断面図である。
１つ以上の実施形態による、単一面シームレス表面環境を形成するために２次元にタイル張りされたライトフィールドディスプレイシステムの一部分の斜視図である。
１つ以上の実施形態による、多面シームレス表面環境におけるライトフィールドディスプレイシステムの一部分の斜視図である。
１つ以上の実施形態による、ウィング型構成の集合表面を有するライトフィールドディスプレイシステムの上面図である。
１つ以上の実施形態による、傾斜構成の集合表面を有するライトフィールドディスプレイシステムの側面図である。
１つ以上の実施形態による、部屋の前壁に集合表面を有するライトフィールドディスプレイシステムの上面図である。
１つ以上の実施形態による、部屋の前壁に集合表面を有するライトフィールドディスプレイシステムの側面図である。
１つ以上の実施形態による、ライトフィールドディスプレイシステムのブロック図である。
１つ以上の実施形態による、サイネージ用のライトフィールドディスプレイシステムを組み込んだライトフィールドサイネージアプリケーション環境のブロック図である。
１つ以上の実施形態による、大規模サイネージシステムで使用されるライトフィールドディスプレイシステムベースの図である。
１つ以上の実施形態による、小規模サイネージシステムで使用されるライトフィールドディスプレイシステムベースの図である。
これらの図は、例示のみを目的として、本発明の様々な実施形態を示す。当業者は、以下の考察から、本明細書において例示される構造および方法の代替の実施形態が、本明細書に記載される本発明の原理から逸脱することなく採用され得ることを容易に認識するであろう。
概要
ライトフィールド（ＬＦ）ディスプレイシステムは、サイネージシステムの１人以上の視聴者にホログラフィックコンテンツを提示するために、サイネージシステムの構成要素として実装される。ホログラフィックコンテンツは、１つ以上のホログラフィックオブジェクトを含み得、また、他のビジュアルコンテンツ（例えば、２次元または３次元のビジュアルコンテンツ）や感覚フィードバックコンテンツの任意の組み合わせを含み得る。ホログラフィックオブジェクトは、２次元（２Ｄ）オブジェクト、３次元（３Ｄ）オブジェクト、または１つ以上の４次元（４Ｄ）ライトフィールド関数で生成された、その両方を含む。サイネージアプリケーションで提供されるホログラフィックコンテンツには、ホログラフィック情報パネル、物理的な商品のホログラフィック表示、ホログラフィック広告、ホログラフィック映画またはビデオ、ホログラフィックストーリーなどが含まれ得る。ＬＦディスプレイシステムは、ＬＦディスプレイアセンブリを含む。ＬＦディスプレイシステムは、ＬＦディスプレイシステムのビューイングボリューム内の１人以上の視聴者にホログラフィックコンテンツを提示するように構成された１つ以上のＬＦディスプレイモジュールを有する。ＬＦディスプレイシステムによって提供されるホログラフィックコンテンツはまた、サイネージシステムの１人以上の視聴者に情報を伝達するために使用され得る。
いくつかの実施形態では、ＬＦディスプレイシステムは、感覚フィードバックアセンブリ、追跡システム、視聴者プロファイリングモジュール、またはそれらの任意の組み合わせを有する。感覚フィードバックアセンブリは、ＬＦディスプレイアセンブリによって提示されるホログラフィックコンテンツと並行して、ＬＦディスプレイシステムの１人以上の視聴者に感覚フィードバックコンテンツを提供する１つ以上の感覚フィードバックデバイスを含む。感覚フィードバックは、触覚フィードバック、音声フィードバック、風フィードバック、および温度フィードバックを潜在的に包含し、ＬＦディスプレイシステムの視聴者に提示されるホログラフィックコンテンツを補強する。追跡システムには、ＬＦディスプレイシステムの視聴者を追跡するために使用される１つ以上のカメラが含まれている。追跡は、ＬＦディスプレイシステムのビューイングボリューム内の１人以上の視聴者の位置を監視すること、または視聴者の視線を追跡すること（すなわち、視聴者の応答を監視すること）を含み得る。一実施形態では、ＬＦディスプレイシステムは、視聴者の監視された応答に基づいてインプレッションの発生を決定し得る。例えば、視聴者の視線は、ホログラフィックオブジェクトなどに対する応答としての視聴者のインプレッションを決定するために使用され得る。ＬＦディスプレイシステムは、視聴者の位置および視線に基づいて、ビューイングボリュームの一部では１人以上の視聴者が知覚できるが、その部分の外側では他の視聴者は見ることができないホログラフィックコンテンツを生成し得る。視聴者プロファイリングモジュールは、パーソナライズされたホログラフィックコンテンツを各視聴者に提供するために各視聴者を識別する。視聴者プロファイリングモジュールは、ＬＦディスプレイシステムによるホログラフィックコンテンツのその後の提示を通知するために、ホログラフィックコンテンツに対する視聴者の動作をさらに監視および記録し得る。
いくつかの実施形態では、ＬＦディスプレイシステムは、大規模サイネージシステムに実装されている。ＬＦディスプレイシステムは、平均的な視聴者よりも大きくするようにサイズ設定され得る。例えば、ＬＦディスプレイシステムは、ＬＦディスプレイシステムを通過する１人以上の視聴者にホログラフィックコンテンツを提示するための看板として実装され得る。ＬＦディスプレイシステムは、道路または歩道の隣、もしくはそれらの組み合わせに配置され得る。ＬＦディスプレイシステムは、建物の１つ以上の側面、輸送車両の１つ以上の側面、組織または企業の内壁、組織または企業の受付、組織または企業の案内板、公共の場所の１つ以上の標識（例えば、看板、ポスターなど）、またはデジタルサイネージに使用できる公共の場にあるその他の表面に配置され得る。視聴者は、車両の運転手または乗客、および／または歩行者を含み得る。ＬＦディスプレイシステムは、追跡システムおよび視聴者プロファイリングモジュールを使用して、ホログラフィックコンテンツの視聴者へのインプレッションを記録し得る。いくつかの実施形態では、ＬＦディスプレイシステムは、小規模サイネージシステムに実装されている。ＬＦディスプレイシステムは、平均的な視聴者と同様のサイズにし得る。ＬＦディスプレイシステムは、１人以上の視聴者にホログラフィックコンテンツを提示し得る。同様に、ＬＦディスプレイシステムは、追跡システムおよび視聴者プロファイリングモジュールを使用して、ホログラフィックコンテンツの視聴者へのインプレッションを記録し得る。追加的に、視聴者プロファイリングモジュールは、提示されたホログラフィックコンテンツに対する視聴者の動作を記録して、各視聴者のホログラフィックコンテンツの設定を更新することができる。
ライトフィールドディスプレイシステムの概要
図１は、１つ以上の実施形態による、ホログラフィックオブジェクト１２０を提示するＬＦディスプレイモジュール１１０の図１００である。ＬＦディスプレイモジュール１１０は、ＬＦディスプレイシステムの一部である。ＬＦディスプレイシステムは、１つ以上のＬＦディスプレイモジュールを使用して、少なくとも１つのホログラフィックオブジェクトを含むホログラフィックコンテンツを提示する。ＬＦディスプレイシステムは、１人以上の視聴者にホログラフィックコンテンツを提示することができる。いくつかの実施形態では、ＬＦディスプレイシステムはまた、他の感覚コンテンツ（例えば、タッチ、音声、匂い、温度など）でホログラフィックコンテンツを拡張することができる。例えば、以下で考察されるように、集束超音波の投影は、ホログラフィックオブジェクトの一部またはすべての表面をシミュレートし得る中空触覚を生成することができる。ＬＦディスプレイシステムは、１つ以上のＬＦディスプレイモジュール１１０を含んでおり、図４Ａ～図４Ｆ、図６、および図７に関して以下で詳細に考察される。
ＬＦディスプレイモジュール１１０は、ホログラフィックオブジェクト（例えば、ホログラフィックオブジェクト１２０）を１人以上の視聴者（例えば、視聴者１４０）に提示するホログラフィックディスプレイである。ＬＦディスプレイモジュール１１０は、エネルギーデバイス層（例えば、発光電子ディスプレイまたは音響投影デバイス）と、エネルギー導波路層（例えば、光学レンズアレイ）と、を含む。追加的に、ＬＦディスプレイモジュール１１０は、複数のエネルギー源または検出器を一緒に組み合わせて単一の表面を形成するために、エネルギーリレー層を含み得る。高レベルでは、エネルギーデバイス層は、エネルギー（例えば、ホログラフィックコンテンツ）を生成し、このエネルギーは次に、エネルギー導波路層を使用して、１つ以上の４次元（４Ｄ）ライトフィールド関数に従って空間内の領域に指向される。ＬＦディスプレイモジュール１１０はまた、１つ以上のタイプのエネルギーの投影および／または感知を同時に行うことができる。例えば、ＬＦディスプレイモジュール１１０は、ホログラフィック画像ならびに超音波触覚表面をビューイングボリューム内に投影することができ得る一方、同時に、ビューイングボリュームからの画像データを検出する。ＬＦディスプレイモジュール１１０の操作は、図２Ａ～図３Ｂに関して以下でより詳細に考察される。
ＬＦディスプレイモジュール１１０は、（例えば、５Ｄプレノプティック関数から導出される）１つ以上の４Ｄライトフィールド関数を使用して、ホログラフィックオブジェクトボリューム１６０内にホログラフィックオブジェクトを生成する。ホログラフィックオブジェクトは、３次元（３Ｄ）、２次元（２Ｄ）、またはそれらの組み合わせにすることができる。さらに、ホログラフィックオブジェクトは、多色（例えば、フルカラー）であり得る。ホログラフィックオブジェクトは、スクリーン平面の前、スクリーン平面の後ろに投影されるか、またはスクリーン平面によって分割されてもよい。ホログラフィックオブジェクト１２０は、ホログラフィックオブジェクトボリューム１６０内のどこでも知覚されるように提示され得る。ホログラフィックオブジェクトボリューム１６０内のホログラフィックオブジェクトは、視聴者１４０には、空間に浮かんでいるように見えることがある。
ホログラフィックオブジェクトボリューム１６０は、ホログラフィックオブジェクトが視聴者１４０によって知覚され得るボリュームを表す。ホログラフィックオブジェクトボリューム１６０は、ホログラフィックオブジェクトがディスプレイエリア１５０の平面の前に提示され得るように、ディスプレイエリア１５０の表面の前に（すなわち、視聴者１４０に向かって）延在し得る。追加的に、ホログラフィックオブジェクトボリューム１６０は、ディスプレイエリア１５０の平面の後ろに（すなわち、視聴者１４０から離れる方向に）延在し得、ホログラフィックオブジェクトが、ディスプレイエリア１５０の平面の後ろにあるかのように提示されることを可能にする。言い換えれば、ホログラフィックオブジェクトボリューム１６０は、ディスプレイエリア１５０から発生し（例えば、投影され）、収束してホログラフィックオブジェクトを作成し得るすべての光線を含むことができる。ここで、光線は、表示面の前、表示面、または表示面の後ろにある点に収束し得る。より簡単に言えば、ホログラフィックオブジェクトボリューム１６０は、ホログラフィックオブジェクトが視聴者によって知覚され得るすべてのボリュームを包含する。
ビューイングボリューム１３０は、ＬＦディスプレイシステムによってホログラフィックオブジェクトボリューム１６０内に提示されたホログラフィックオブジェクト（例えば、ホログラフィックオブジェクト１２０）が完全に見える空間のボリュームである。ホログラフィックオブジェクトは、ホログラフィックオブジェクトボリューム１６０内に提示され、実際のオブジェクトと区別できないように、ビューイングボリューム１３０内で見られ得る。ホログラフィックオブジェクトは、オブジェクトが物理的に存在した場合に、オブジェクトの表面から生成されるであろう光線と同じ光線を投影することによって形成される。
場合によっては、ホログラフィックオブジェクトボリューム１６０および対応するビューイングボリューム１３０は、単一の視聴者用に設計されるように、比較的小さくあり得る。他の実施形態では、例えば、図４Ａ～図４Ｆ、図６、および図７に関して以下で詳細に考察されるように、ＬＦディスプレイモジュールは、より大きなホログラフィックオブジェクトボリューム、および広範囲の視聴者（例えば、１人～数千人）を収容できる対応するビューイングボリュームを作成するために拡大および／またはタイル張りされ得る。本開示で提示されるＬＦディスプレイモジュールは、ＬＦディスプレイの全表面が、非アクティブまたはデッドスペースがなく、ベゼルを必要としないホログラフィック撮像光学系を含むように構築され得る。これらの実施形態では、ＬＦディスプレイモジュールは、撮像エリアがＬＦディスプレイモジュール間の継ぎ目をまたいで連続するようにタイル張りされ得、タイル張りされたモジュール間の接合ラインは、目の視力を使用して実質的に検出されない。特に、いくつかの構成では、表示面の一部は、本明細書では詳細に説明されていないが、ホログラフィック撮像光学系を含まないことがある。
ビューイングボリューム１３０の柔軟なサイズおよび／または形状は、視聴者がビューイングボリューム１３０内で制約を受けないことを可能にする。例えば、視聴者１４０は、ビューイングボリューム１３０内の異なる位置に移動し、対応する視点からホログラフィックオブジェクト１２０の異なるビューを見ることができる。例示のために、図１を参照すると、視聴者１４０は、ホログラフィックオブジェクト１２０がイルカの真正面からのビューで見えるように、ホログラフィックオブジェクト１２０に対して第１の位置にある。視聴者１４０は、イルカの異なるビューを見るために、ホログラフィックオブジェクト１２０に対して他の場所に動くことができる。例えば、視聴者１４０は、視聴者１４０があたかも実際のイルカを見ていて、イルカの異なるビューを見るために、実際のイルカに対する視聴者の相対位置を変更するかのように、移動して、イルカの左側、イルカの右側などを見ることができる。いくつかの実施形態では、ホログラフィックオブジェクト１２０は、ホログラフィックオブジェクト１２０への遮るもののない（すなわち、オブジェクト／ヒトによって遮られていない）視線を有する、ビューイングボリューム１３０内のすべての視聴者に見える。これらの視聴者は、異なる視点のホログラフィックオブジェクト１２０を見るために、ビューイングボリューム内を動き回ることができるように、制約されないでよい。したがって、ＬＦディスプレイシステムは、複数の制約されない視聴者が、あたかもホログラフィックオブジェクトが物理的に存在するかのごとく、実世界空間のホログラフィックオブジェクトを異なる視点で同時に見ることができるように、ホログラフィックオブジェクトを提示することができる。
対照的に、従来のディスプレイ（例えば、立体視、仮想現実、拡張現実、または複合現実）では、一般に、各視聴者は、コンテンツを見るために、何らかの外部デバイス（例えば、３Ｄメガネ、ニアアイディスプレイ、またはヘッドマウントディスプレイ）を着用する必要がある。追加的および／または代替的に、従来のディスプレイでは、視聴者が特定の視聴位置に（例えば、ディスプレイに対して固定された場所を有する椅子に）拘束される必要があり得る。例えば、立体視ディスプレイによって表示されるオブジェクトを見る場合、視聴者は常に、オブジェクトではなく表示面に焦点を合わせ、ディスプレイは常に、知覚されたオブジェクトの周りを動き回ろうとする視聴者に追随するオブジェクトの２つのビューのみを提示し、そのオブジェクトの知覚に歪みを引き起こす。しかしながら、ライトフィールドディスプレイでは、ＬＦディスプレイシステムによって提示されるホログラフィックオブジェクトの視聴者は、ホログラフィックオブジェクトを見るために、外部デバイスを着用する必要も、特定の位置に監禁される必要もない。ＬＦディスプレイシステムは、特別なアイウェア、メガネ、またはヘッドマウントアクセサリーを要することなく、物理的オブジェクトが視聴者に見えるのとほぼ同じように視聴者に見える方法で、ホログラフィックオブジェクトを提示する。さらに、視聴者は、ビューイングボリューム内の任意の場所からホログラフィックコンテンツを見ることができる。
特に、ホログラフィックオブジェクトボリューム１６０内のホログラフィックオブジェクトの潜在的な場所は、ボリュームのサイズによって制限される。ホログラフィックオブジェクトボリューム１６０のサイズを大きくするために、ＬＦディスプレイモジュール１１０のディスプレイエリア１５０のサイズを大きくしてもよく、かつ／または複数のＬＦディスプレイモジュールを、シームレスな表示面を形成するように一緒にタイル張りしてもよい。シームレスな表示面は、個々のＬＦディスプレイモジュールのディスプレイエリアよりも大きい有効ディスプレイエリアを有する。ＬＦディスプレイモジュールのタイル張りに関連するいくつかの実施形態が、図４Ａ～図４Ｆ、図６および図７に関して以下で考察される。図１に例示されるように、ディスプレイエリア１５０は矩形であり、ピラミッド形であるホログラフィックオブジェクトボリューム１６０をもたらす。他の実施形態では、ディスプレイエリアは、対応するビューイングボリュームの形状にも影響を与える何らかの他の形状（例えば、六角形）を有し得る。
追加的に、上記の考察は、ＬＦディスプレイモジュール１１０と視聴者１４０との間にあるホログラフィックオブジェクトボリューム１６０の一部内にホログラフィックオブジェクト１２０を提示することに焦点を当てているが、ＬＦディスプレイモジュール１１０は追加的に、ディスプレイエリア１５０の平面の後ろのホログラフィックオブジェクトボリューム１６０にコンテンツを提示することができる。例えば、ＬＦディスプレイモジュール１１０は、ディスプレイエリア１５０を、ホログラフィックオブジェクト１２０が飛び出している海の表面であるように見せることができる。また、表示されるコンテンツは、視聴者１４０が、表示された表面を通して、水中にいる海洋生物を見ることができるようなものであってもよい。さらに、ＬＦディスプレイシステムは、ディスプレイエリア１５０の平面の後ろおよび前を含む、ホログラフィックオブジェクトボリューム１６０の周りをシームレスに移動するコンテンツを生成することができる。
図２Ａは、１つ以上の実施形態による、ＬＦディスプレイモジュール２１０の一部の断面２００である。ＬＦディスプレイモジュール２１０は、ＬＦディスプレイモジュール１１０であってもよい。他の実施形態では、ＬＦディスプレイモジュール２１０は、ディスプレイエリア１５０とは異なるディスプレイエリア形状を有する別のＬＦディスプレイモジュールであってもよい。例示的な実施形態では、ＬＦディスプレイモジュール２１０は、エネルギーデバイス層２２０、エネルギーリレー層２３０、およびエネルギー導波路層２４０を含む。ＬＦディスプレイモジュール２１０のいくつかの実施形態は、本明細書に記載のものとは異なる構成要素を有する。例えば、いくつかの実施形態では、ＬＦディスプレイモジュール２１０は、エネルギーリレー層２３０を含まない。同様に、機能は、本明細書の記載とは異なる方法で構成要素間に分散され得る。
本明細書に記載のディスプレイシステムは、実世界のオブジェクトを通常取り巻くエネルギーを複製するエネルギーの放出を提示する。ここで、放出されたエネルギーは、表示面上のすべての座標から特定の方向に指向される。言い換えれば、表示面上の様々な座標が、放出されたエネルギーの投影場所として機能する。表示面からの指向されたエネルギーは、多くのエネルギー線の収束を可能にし、それによって、ホログラフィックオブジェクトを作成することができる。例えば、可視光では、ＬＦディスプレイは、ホログラフィックオブジェクトボリューム内の任意の点で収束し得る、投影場所からの極めて大きい数の光線を投影するため、それらの光線は、投影されているオブジェクトよりも遠くに位置する視聴者の視点からは、空間のこの領域に位置する実世界のオブジェクトの表面から来ているように見えるであろう。このように、ＬＦディスプレイは、視聴者の視点からは、そのようなオブジェクトの表面から出たような反射光線を生成している。ビューイング視点は、任意の特定のホログラフィックオブジェクト上で変わり得、視聴者は、そのホログラフィックオブジェクトの異なるビューを見るであろう。
エネルギーデバイス層２２０は、１つ以上の電子ディスプレイ（例えば、ＯＬＥＤなどの発光ディスプレイ）と、本明細書に記載の１つ以上の他のエネルギー投影および／またはエネルギー受信デバイスと、を含む。エネルギーデバイス層２２０は、複数のエネルギー源位置を提供するように構成され得る。１つ以上の電子ディスプレイは、（例えば、ＬＦディスプレイシステムのコントローラからの）表示命令に従ってコンテンツを表示するように構成される。１つ以上の電子ディスプレイは、各々が個別に制御される強度を有する複数のピクセルを含む。発光ＬＥＤおよびＯＬＥＤディスプレイなど、多くのタイプの商用ディスプレイがＬＦディスプレイ内で使用され得る。
エネルギーデバイス層２２０はまた、１つ以上の音響投影デバイスおよび／または１つ以上の音響受信デバイスを含むことができる。音響投影デバイスは、ホログラフィックオブジェクト２５０を補完する１つ以上の圧力波を生成する。生成される圧力波は、例えば、可聴、超音波、またはそれらの何らかの組み合わせであってもよい。超音波圧力波のアレイは、体積触覚のために（例えば、ホログラフィックオブジェクト２５０の表面において）使用され得る。可聴圧力波は、ホログラフィックオブジェクト２５０を補完し得る音声コンテンツ（例えば、没入型オーディオ）を提供するために使用される。例えば、ホログラフィックオブジェクト２５０がイルカであると仮定すると、１つ以上の音響投影デバイスを使用して、（１）視聴者がホログラフィックオブジェクト２５０にタッチすることができるように、イルカの表面と併置される触覚表面を生成し、（２）パチンと鳴る音、甲高い音、けたたましい鳴き声など、イルカが発生する音に対応する音声コンテンツを提供することができる。音響受信デバイス（例えば、マイクロフォンもしくはマイクロフォンアレイ）は、ＬＦディスプレイモジュール２１０の局所エリア内の超音波および／または可聴圧力波を監視するように構成され得る。
エネルギーデバイス層２２０はまた、１つ以上の画像センサを含むことができる。画像センサは、可視光帯の光に敏感であってもよく、場合によっては、他の帯域（例えば、赤外線）の光に敏感であってもよい。画像センサは、例えば、相補型金属酸化膜半導体（ＣＭＯＳ）アレイ、電荷結合デバイス（ＣＣＤ）、光検出器のアレイ、光をキャプチャする何らかの他のセンサ、またはそれらの何らかの組み合わせであってもよい。ＬＦディスプレイシステムは、視聴者の場所標定追跡のために、１つ以上の画像センサによってキャプチャされたデータを使用することができる。
いくつかの構成では、エネルギーリレー層２３０は、エネルギーデバイス層２２０とエネルギー導波路層２４０との間でエネルギー（例えば、電磁エネルギー、機械的圧力波など）を中継する。エネルギーリレー層２３０は、１つ以上のエネルギーリレー要素２６０を含む。各エネルギーリレー要素は、第１の表面２６５および第２の表面２７０を含み、２つの表面間でエネルギーを中継する。各エネルギーリレー要素の第１の表面２６５は、１つ以上のエネルギーデバイス（例えば、電子ディスプレイまたは音響投影デバイス）に結合され得る。エネルギーリレー要素は、例えば、ガラス、炭素、光ファイバー、光学フィルム、プラスチック、ポリマー、またはそれらの何らかの組み合わせで構成され得る。追加的に、いくつかの実施形態では、エネルギーリレー要素は、第１の表面２６５と第２の表面２７０との間を通過するエネルギーの倍率（増加または減少）を調整することができる。リレーが倍率を提供する場合、リレーは、テーパーと呼ばれる、接着されたテーパーリレーのアレイの形態を採り得、テーパーの一端の面積は、反対側の端よりも実質的に大きくなり得る。テーパーの大きい方の端は、一緒に張り合わされて、シームレスなエネルギー面２７５を形成することができる。１つの利点は、複数のディスプレイのベゼルなど、複数のエネルギー源の機械的エンベロープを収容するために、各テーパーの複数の小さな端にスペースが作成されることである。この余分のスペースにより、各エネルギー源が、小さいテーパー表面内にエネルギーを指向するアクティブエリアを有し、大きいシームレスなエネルギー面にリレーされる状態で、エネルギー源を小さなテーパー側に並べて配置することが可能になる。テーパーリレーを使用する別の利点は、テーパーの大きい端によって形成される、組み合わされたシームレスなエネルギー面には、非結像デッドスペースがないことである。境界またはベゼルが存在しないため、シームレスなエネルギー面を一緒にタイル張りして、目の視力によると実質的に継ぎ目のない、より大きな表面を形成することができる。
隣接するエネルギーリレー要素の第２の表面は、一緒になってエネルギー面２７５を形成する。いくつかの実施形態では、隣接するエネルギーリレー要素の縁間の分離は、例えば、２０／４０の視力を有する人間の目の視力によって定義される最小の知覚可能な輪郭よりも小さく、その結果、エネルギー面２７５は、ビューイングボリューム２８５内の視聴者２８０の視点からは事実上シームレスである。
いくつかの実施形態では、隣接するエネルギーリレー要素の第２の表面は、それらの間に継ぎ目が存在しないように、圧力、熱、および化学反応のうちの１つ以上を含み得る処理工程を用いて一緒に融合される。さらに、他の実施形態では、エネルギーリレー要素のアレイは、リレー材料の連続したブロックの片側を、各々がエネルギーを、小さなテーパー端部に取り付けられたエネルギーデバイスから、細分化されない大きなエリアを有する単一の結合された表面内に輸送するように構成される、小さなテーパー端部のアレイに成形することによって形成される。
いくつかの実施形態では、１つ以上のエネルギーリレー要素は、エネルギー局在化を示し、表面２６５および２７０に実質的に垂直な長手方向のエネルギー輸送効率は、垂直横断平面内の輸送効率よりもはるかに高く、エネルギー波が表面２６５と表面２７０との間を伝播するとき、エネルギー密度はこの横断平面内で高度に局在化される。このエネルギーの局在化により、画像などのエネルギー分布が、解像度の大きな損失なしに、これらの表面間で効率的に中継されることが可能になる。
エネルギー導波路層２４０は、複数のエネルギー導波路を含み、各導波路は、４Ｄライトフィールド関数に従って、ホログラフィックオブジェクトを形成するために、エネルギー源位置に応じた前記表示面から、少なくとも１つの特定の方向に、少なくとも１つのエネルギー源位置からのエネルギーを投影するように構成され得る。エネルギー伝搬方向（または経路）は、少なくとも導波路に対するエネルギー面の座標場所によって決定される２つの角度寸法によって画定される。導波路は、空間２Ｄ座標に関連付けられる。これらの４つの座標が一緒になって、４Ｄのエネルギーフィールドを形成する。一例として、電磁エネルギーの場合、エネルギー導波路層２４０内の導波路要素は、光をシームレスなエネルギー面２７５上の位置から、ビューイングボリューム２８５を通る異なる伝搬方向に沿って指向する。様々な例において、光は、４Ｄライトフィールド関数に従って指向されて、ホログラフィックオブジェクトボリューム２５５内にホログラフィックオブジェクト２５０を形成する。いくつかの実施形態では、ホログラフィックオブジェクト２５０のビューイング視点は、ホログラフィックオブジェクトボリューム２５５内のホログラフィックオブジェクト２５０に対するビューイングボリューム２８５内の視聴者の位置に部分的に基づいて変化し得る。
エネルギー導波路層２４０内の各導波路要素は、例えば、１つ以上の要素で構成されるレンズレットであり得る。いくつかの構成では、レンズレットは、正レンズであり得る。正レンズは、球面、非球面、または自由形状の表面プロファイルを有し得る。追加的に、いくつかの実施形態では、導波路要素の一部またはすべては、１つ以上の追加の光学構成要素を含み得る。追加の光学構成要素は、例えば、バッフル、正レンズ、負レンズ、球面レンズ、非球面レンズ、自由形状レンズ、液晶レンズ、液体レンズ、屈折要素、回折要素、またはそれらの何らかの組み合わせなどのエネルギー抑制構造であり得る。いくつかの実施形態では、レンズレットおよび／または追加の光学構成要素のうちの少なくとも１つはまた、屈折力を動的に調整することができる。例えば、レンズレットは、液晶レンズまたは液体レンズであってもよい。表面プロファイルの動的調整、レンズレットおよび／または少なくとも１つの追加の光学構成要素は、導波路要素から投影される光の追加の方向制御を提供し得る。
例示的な例では、ＬＦディスプレイのホログラフィックオブジェクトボリューム２５５は、光線２５６および光線２５７によって形成される境界を有するが、他の光線によって形成され得る。ホログラフィックオブジェクトボリューム２５５は、エネルギー導波路層２４０の前（すなわち、視聴者２８０に向かって）およびその後ろ（すなわち、視聴者２８０から離れて）の両方に延在する連続したボリュームである。例示的な例では、光線２５６および光線２５７は、ＬＦディスプレイモジュール２１０の反対の縁から、ユーザによって知覚され得る表示面の法線に対して最大の角度で投影されるが、これらは他の投影光線であり得る。これらの光線は、ディスプレイの視野を画定し、したがって、ホログラフィックビューイングボリューム２８５の境界を画定する。場合によっては、これらの光線は、ディスプレイ全体がケラレなしで観察され得るホログラフィックビューイングボリューム（例えば、理想的なビューイングボリューム）を画定する。ディスプレイの視野が広がると、光線２５６および光線２５７の収束点がディスプレイにより近くなる。したがって、より広い視野を有するディスプレイは、視聴者２８０がより近い視距離でディスプレイ全体を見ることを可能にする。追加的に、光線２５６および２５７は、理想的なホログラフィックオブジェクトボリュームを形成し得る。理想的なホログラフィックオブジェクトボリューム内に提示されるホログラフィックオブジェクトは、ビューイングボリューム２８５内のどこでも見られ得る。
いくつかの例では、ホログラフィックオブジェクトは、ビューイングボリューム２８５の一部にのみ提示され得る。言い換えれば、ホログラフィックオブジェクトボリュームは、任意の数のビューイングサブボリューム（例えば、ビューイングサブボリューム２９０）に分割され得る。追加的に、ホログラフィックオブジェクトは、ホログラフィックオブジェクトボリューム２５５の外側に投影され得る。例えば、ホログラフィックオブジェクト２５１は、ホログラフィックオブジェクトボリューム２５５の外側に提示される。ホログラフィックオブジェクト２５１は、ホログラフィックオブジェクトボリューム２５５の外側に提示されるので、ビューイングボリューム２８５内のすべての場所から見ることができるわけではない。例えば、ホログラフィックオブジェクト２５１は、ビューイングサブボリューム２９０内の場所からは見えるが、視聴者２８０の場所からは見えない可能性がある。
例えば、異なるビューイングサブボリュームからホログラフィックコンテンツを見ることを例示するために、図２Ｂに目を向ける。図２Ｂは、１つ以上の実施形態による、ＬＦディスプレイモジュールの一部の断面２００を例示する。図２Ｂの断面は、図２Ａの断面と同じである。しかしながら、図２Ｂは、ＬＦディスプレイモジュール２１０から投影された異なる光線のセットを示している。光線２５６および光線２５７は、依然としてホログラフィックオブジェクトボリューム２５５およびビューイングボリューム２８５を形成する。しかしながら、示されるように、ＬＦディスプレイモジュール２１０の頂部およびＬＦディスプレイモジュール２１０の底部から投影された光線は重なり合って、ビューイングボリューム２８５内に様々なビューイングサブボリューム（例えば、ビューサブボリューム２９０Ａ、２９０Ｂ、２９０Ｃ、および２９０Ｄ）を形成する。第１のビューイングサブボリューム（例えば、２９０Ａ）内の視聴者は、他のビューイングサブボリューム（例えば、２９０Ｂ、２９０Ｃ、および２９０Ｄ）内の視聴者が知覚できない、ホログラフィックオブジェクトボリューム２５５内に提示されたホログラフィックコンテンツを知覚することができ得る。
より簡単に言えば、図２Ａに例示されるように、ホログラフィックオブジェクトボリューム２５５は、ホログラフィックオブジェクトがビューイングボリューム２８５内の視聴者（例えば、視聴者２８０）によって知覚され得るように、ホログラフィックオブジェクトが、ＬＦディスプレイシステムによって提示され得るボリュームである。このように、ビューイングボリューム２８５は、理想的なビューイングボリュームの一例であり、ホログラフィックオブジェクトボリューム２５５は、理想的なオブジェクトボリュームの一例である。しかしながら、様々な構成において、視聴者は、他の例示的なホログラフィックオブジェクトボリューム内にＬＦディスプレイシステムによって提示されたホログラフィックオブジェクトを知覚することができる。より一般的には、ＬＦディスプレイモジュールから投影されたホログラフィックコンテンツを見るときには「アイラインガイドライン」が適用される。アイラインガイドラインは、視聴者の目の位置と見られているホログラフィックオブジェクトとによって形成されるラインはＬＦ表示面と交差しなければならないと主張する。
ＬＦディスプレイモジュール２１０によって提示されたホログラフィックコンテンツを見るとき、ホログラフィックコンテンツは４Ｄライトフィールド関数に従って提示されるので、視聴者２８０の各目は、異なる視点のホログラフィックオブジェクト２５０を見る。さらに、視聴者２８０がビューイングボリューム２８５内を移動するとき、視聴者は、ビューイングボリューム２８５内の他の視聴者が見るような、異なる視点のホログラフィックオブジェクト２５０を見るであろう。当業者には理解されるように、４Ｄライトフィールド関数は当技術分野で周知であり、本明細書ではこれ以上詳しく説明しない。
本明細書でより詳細に説明するように、いくつかの実施形態では、ＬＦディスプレイは、２つ以上のタイプのエネルギーを投影することができる。例えば、ＬＦディスプレイは、例えば、機械的エネルギーおよび電磁エネルギーなどの２つのタイプのエネルギーを投影することができる。この構成では、エネルギーリレー層２３０は、エネルギー面２７５で一緒にインターリーブされるが、エネルギーが２つの異なるエネルギーデバイス層２２０に中継されるように分離される２つの別個のエネルギーリレーを含み得る。ここで、一方のリレーは、電磁エネルギーを輸送するように構成され得、別方のリレーは、機械的エネルギーを輸送するように構成され得る。いくつかの実施形態では、機械的エネルギーは、エネルギー導波路層２４０上の電磁導波路要素間の場所から投影され得、光が一方の電磁導波路要素から別方の電磁導波路要素に輸送されるのを抑制する構造を形成するのに役立つ。いくつかの実施形態では、エネルギー導波路層２４０はまた、コントローラからの表示命令に従って、集束超音波を特定の伝搬経路に沿って輸送する導波路要素を含み得る。
代替の実施形態（図示せず）では、ＬＦディスプレイモジュール２１０はエネルギーリレー層２３０を含まないことに留意されたい。この場合、エネルギー面２７５は、エネルギーデバイス層２２０内の１つ以上の隣接する電子ディスプレイを使用して形成された出射面である。また、エネルギーリレー層を有さないいくつかの実施形態では、隣接する電子ディスプレイの縁間の分離は、２０／４０の視力を有する人間の目の視力によって定義される最小の知覚可能な輪郭よりも小さく、その結果、エネルギー面は、ビューイングボリューム２８５内の視聴者２８０の視点からは事実上シームレスである。
ＬＦディスプレイモジュール
図３Ａは、１つ以上の実施形態による、ＬＦディスプレイモジュール３００Ａの斜視図である。ＬＦディスプレイモジュール３００Ａは、ＬＦディスプレイモジュール１１０および／またはＬＦディスプレイモジュール２１０であり得る。他の実施形態では、ＬＦディスプレイモジュール３００Ａは、何らかの他のＬＦディスプレイモジュールであってもよい。例示的な実施形態では、ＬＦディスプレイモジュール３００Ａは、エネルギーデバイス層３１０、エネルギーリレー層３２０、およびエネルギー導波路層３３０を含む。ＬＦディスプレイモジュール３００Ａは、本明細書で説明されるように、表示面３６５からホログラフィックコンテンツを提示するように構成されている。便宜上、表示面３６５は、ＬＦディスプレイモジュール３００Ａのフレーム３９０上に破線の輪郭として例示されているが、より正確には、フレーム３９０の内側リムによって境界される導波路要素の真正面の表面である。表示面３６５は、エネルギーが投影され得る複数の投影位置を含む。ＬＦディスプレイモジュール３００Ａのいくつかの実施形態は、本明細書で説明されるものとは異なる構成要素を有する。例えば、いくつかの実施形態では、ＬＦディスプレイモジュール３００Ａは、エネルギーリレー層３２０を含まない。同様に、機能は、本明細書の記載とは異なる方法で構成要素間に分散され得る。
エネルギーデバイス層３１０は、エネルギーデバイス層２２０の一実施形態である。エネルギーデバイス層３１０は、４つのエネルギーデバイス３４０を含む（図では３つが見える）。エネルギーデバイス３４０は、すべてが同じタイプ（例えば、すべてが電子ディスプレイ）であってもよいか、または１つ以上の異なるタイプを含んでもよい（例えば、電子ディスプレイおよび少なくとも１つの音響エネルギーデバイスを含む）。
エネルギーリレー層３２０は、エネルギーリレー層２３０の一実施形態である。エネルギーリレー層３２０は、４つのエネルギーリレーデバイス３５０を含む（図では３つが見える）。エネルギーリレーデバイス３５０は、すべてが同じタイプのエネルギー（例えば、光）を中継し得るか、または１つ以上の異なるタイプ（例えば、光および音）を中継し得る。リレーデバイス３５０の各々は、第１の表面および第２の表面を含み、エネルギーリレーデバイス３５０の第２の表面は、単一のシームレスなエネルギー面３６０を形成するように配置される。例示的な実施形態では、エネルギーリレーデバイス３５０の各々は、第１の表面が第２の表面よりも小さい表面積を有するようにテーパー状になっており、これにより、テーパーの小さい方の端にエネルギーデバイス３４０の機械的エンベロープを収容することが可能になる。これにより、エリア全体がエネルギーを投影し得るため、シームレスなエネルギー面が無境界であることが可能になる。これは、ＬＦディスプレイモジュール３００Ａの複数の実例を、デッドスペースまたはベゼルなしに一緒に配置することによって、組み合わされた表面全体がシームレスであるように、このシームレスなエネルギー面がタイル張りされ得ることを意味する。他の実施形態では、第１の表面および第２の表面は同じ表面積を有する。
エネルギー導波路層３３０は、エネルギー導波路層２４０の一実施形態である。エネルギー導波路層３３０は、複数の導波路要素３７０を含む。図２に関して上記で考察されるように、エネルギー導波路層３３０は、ホログラフィックオブジェクトを形成するために、４Ｄライトフィールド関数に従って、エネルギーをシームレスなエネルギー面３６０から特定の伝搬経路に沿って指向するように構成されている。例示的な実施形態では、エネルギー導波路層３３０はフレーム３９０によって境界されることに留意されたい。他の実施形態では、フレーム３９０は存在しない、および／またはフレーム３９０の厚さが低減されている。フレーム３９０の厚さの除去または低減は、ＬＦディスプレイモジュール３００Ａと追加のＬＦディスプレイモジュールとのタイル張りを容易にし得る。
例示的な実施形態では、シームレスなエネルギー面３６０およびエネルギー導波路層３３０は平面であることに留意されたい。図示されてない代替の実施形態では、シームレスなエネルギー面３６０およびエネルギー導波路層３３０は、１つ以上の次元で湾曲していてよい。
ＬＦディスプレイモジュール３００Ａは、シームレスなエネルギー面３６０の表面上、もしくはエネルギー導波路層３３０に存在する追加のエネルギー源を有して構成され得、ライトフィールドに加えてエネルギーフィールドの投影を可能にする。一実施形態では、音響エネルギーフィールドが、シームレスなエネルギー面３６０上の任意の数の位置、例えば、アレイとして取り付けられた静電スピーカ（例示せず）から投影され得る。一実施形態では、静電スピーカのアレイは、複数のエネルギー導波路に結合されている。静電スピーカのアレイは、駆動時に音響エネルギーを生成するように構成された少なくとも１つの透明膜と、透明膜を音響的に駆動するように構成された複数の電極とを含む。各電極は、１つ以上のエネルギー導波路の間に配置することができる。さらに、ＬＦディスプレイモジュール３００Ａの静電スピーカは、デュアルエネルギー面がサウンドフィールドおよびホログラフィックコンテンツを同時に投影するように、ＬＦディスプレイモジュール３００Ａ内に位置付けられる。例えば、静電スピーカは、電磁エネルギーのいくつかの波長に対して透過性であり、１つ以上の導電性要素（例えば、１つ以上のダイアフラム要素を挟む平面）を用いて駆動される１つ以上のダイアフラム要素で形成され得る。静電スピーカは、ダイアフラム要素が導波路要素のうちのいくつかを覆うように、シームレスなエネルギー面３６０に装着されてもよい。スピーカの導電性電極は、電磁導波路間の光透過を抑制するように設計された構造体と併置されてよく、および／または電磁導波路要素間の位置（例えば、フレーム３９０）に位置してよい。様々な構成において、スピーカは、可聴音、および／または触覚表面を生み出す集束超音波エネルギーの多くのソースを投影することができる。
いくつかの構成では、エネルギーデバイス３４０は、エネルギーを感知し得る。例えば、エネルギーデバイスは、マイクロフォン、光センサ、音響トランスデューサなどであり得る。そのため、エネルギーリレーデバイスは、シームレスなエネルギー面３６０からエネルギーデバイス層３１０にエネルギーを中継することもできる。すなわち、ＬＦディスプレイモジュールのシームレスなエネルギー面３６０は、エネルギーデバイスおよびエネルギーリレーデバイス３４０が、エネルギーを放出すると同時に感知する（例えば、ライトフィールドを放出し、音を感知する）ように構成されるとき、双方向エネルギー面を形成する。
より広義には、ＬＦディスプレイモジュールのエネルギーデバイス３４０は、エネルギー源またはエネルギーセンサのいずれかであり得る。ＬＦディスプレイモジュール３００Ａは、高品質のホログラフィックコンテンツのユーザへの投影を容易にするために、エネルギー源および／またはエネルギーセンサとして機能する様々なタイプのエネルギーデバイスを含み得る。他のソースおよび／またはセンサとしては、サーマルセンサまたはソース、赤外線センサまたはソース、画像センサまたはソース、音響エネルギーを生成する機械的エネルギートランスデューサ、フィードバックソースなどが挙げられる。多くの他のセンサまたはソースが可能である。さらに、ＬＦディスプレイモジュールが、大きな集合体のシームレスなエネルギー面から複数のタイプのエネルギーを投影および感知するアセンブリを形成し得るように、ＬＦディスプレイモジュールはタイル張りされ得る。
ＬＦディスプレイモジュール３００Ａの様々な実施形態では、シームレスなエネルギー面３６０は、各表面部分が特定のタイプのエネルギーを投影および／または放出するように構成されている様々な表面部分を有し得る。例えば、シームレスなエネルギー面がデュアルエネルギー面である場合、シームレスなエネルギー面３６０は、電磁エネルギーを投影する１つ以上の表面部分と、超音波エネルギーを投影する１つ以上の他の表面部分と、を含む。超音波エネルギーを投影する表面部分は、電磁導波路要素間のシームレスなエネルギー面３６０上に位置し得、および／または電磁導波路要素間の光透過を抑制するように設計された構造体と併置され得る。シームレスなエネルギー面が双方向エネルギー面である例では、エネルギーリレー層３２０は、シームレスなエネルギー面３６０でインターリーブされた２つのタイプのエネルギーリレーデバイスを含み得る。様々な実施形態では、シームレスなエネルギー面３６０は、任意の特定の導波路要素３７０の下の表面の部分が、すべてエネルギー源、すべてエネルギーセンサ、またはエネルギー源およびエネルギーセンサの混在であるように構成され得る。
図３Ｂは、１つ以上の実施形態による、インターリーブされたエネルギーリレーデバイスを含むＬＦディスプレイモジュール３００Ｂの断面図である。エネルギーリレーデバイス３５０Ａは、エネルギーデバイス３４０Ａに接続されたエネルギーリレーの第１の表面３４５Ａとシームレスなエネルギー面３６０との間でエネルギーを輸送する。エネルギーリレーデバイス３５０Ｂは、エネルギーデバイス３４０Ｂに接続されたエネルギーリレーの第１の表面３４５Ｂとシームレスなエネルギー面３６０との間でエネルギーを輸送する。両方のリレーデバイスは、シームレスなエネルギー面３６０に接続されたインターリーブされたエネルギーリレーデバイス３５２においてインターリーブされている。この構成では、シームレスなエネルギー面３６０は、エネルギー源またはエネルギーセンサであり得るエネルギーデバイス３４０Ａおよび３４０Ｂの両方のインターリーブされたエネルギー場所を含む。したがって、ＬＦディスプレイモジュール３００Ｂは、２つ以上のタイプのエネルギーを投影するためのデュアルエネルギー投影デバイスとして、またはあるタイプのエネルギーを投影することと、別のタイプのエネルギーを感知することとを同時に行うための双方向エネルギーデバイスとしてのいずれかに構成され得る。ＬＦディスプレイモジュール３００Ｂは、ＬＦディスプレイモジュール１１０および／またはＬＦディスプレイモジュール２１０であり得る。他の実施形態では、ＬＦディスプレイモジュール３００Ｂは、何らかの他のＬＦディスプレイモジュールであり得る。
ＬＦディスプレイモジュール３００Ｂは、図３ＡのＬＦディスプレイモジュール３００Ａのものと同様に構成されている多くの構成要素を含む。例えば、例示的な実施形態では、ＬＦディスプレイモジュール３００Ｂは、図３Ａに関して説明したものと少なくとも同じ機能を含むエネルギーデバイス層３１０、エネルギーリレー層３２０、シームレスなエネルギー面３６０、およびエネルギー導波路層３３０を含む。追加的に、ＬＦディスプレイモジュール３００Ｂは、表示面３６５からエネルギーを提示および／または受け取ることができる。特に、ＬＦディスプレイモジュール３００Ｂの構成要素は、代替的に、図３ＡのＬＦディスプレイモジュール３００Ａの構成要素とは異なって接続および／または配向されている。ＬＦディスプレイモジュール３００Ｂのいくつかの実施形態は、本明細書で説明されるものとは異なる構成要素を有する。同様に、機能は、本明細書の記載とは異なる方法で構成要素間に分散され得る。図３Ｂは、より大きな面積を有するデュアルエネルギー投影表面または双方向エネルギー面を生み出すためにタイル張りされ得る単一のＬＦディスプレイモジュール３００Ｂの設計を例示する。
一実施形態では、ＬＦディスプレイモジュール３００Ｂは、双方向ＬＦディスプレイシステムのＬＦディスプレイモジュールである。双方向ＬＦディスプレイシステムは、エネルギーを投影し、それと同時に表示面３６５からエネルギーを感知することができる。シームレスなエネルギー面３６０は、シームレスなエネルギー面３６０上で密接にインターリーブされたエネルギー投影場所およびエネルギー感知場所の両方を含む。したがって、図３Ｂの例では、エネルギーリレー層３２０は、図３Ａのエネルギーリレー層とは異なる様式で構成されている。便宜上、ＬＦディスプレイモジュール３００Ｂのエネルギーリレー層は、本明細書では「インターリーブエネルギーリレー層」と呼ばれる。
インターリーブされたエネルギーリレー層３２０は、第１のエネルギーリレーデバイス３５０Ａと第２のエネルギーリレーデバイス３５０Ｂとの２つの脚部を含む。脚部の各々は、図３Ｂで薄い陰影のエリアとして例示されている。脚部の各々は、可撓性のリレー材料で作製され、様々なサイズおよび形状のエネルギーデバイスで使用するのに十分な長さで形成され得る。インターリーブされたエネルギーリレー層のいくつかの領域では、２つの脚部は、シームレスなエネルギー面３６０に近づくにつれて、一緒に緊密にインターリーブされる。例示的な例では、インターリーブされたエネルギーリレーデバイス３５２は、暗い陰影のエリアとして例示されている。
シームレスなエネルギー面３６０でインターリーブされる一方、エネルギーリレーデバイスは、異なるエネルギーデバイスとの間でエネルギーを中継するように構成される。エネルギーデバイスは、エネルギーデバイス層３１０にある。例示のように、エネルギーデバイス３４０Ａは、エネルギーリレーデバイス３５０Ａに接続され、エネルギーデバイス３４０Ｂは、エネルギーリレーデバイス３５０Ｂに接続されている。様々な実施形態では、各エネルギーデバイスは、エネルギー源またはエネルギーセンサであり得る。
エネルギー導波路層３３０は、エネルギー波をシームレスなエネルギー面３６０から、投影された経路に沿って、一連の収束点に向かって導くための導波路要素３７０を含む。この例では、ホログラフィックオブジェクト３８０が、一連の収束点に形成される。特に、例示のように、ホログラフィックオブジェクト３８０でのエネルギーの収束は、表示面３６５の視聴者側（すなわち、前側）で発生する。しかしながら、他の例では、エネルギーの収束は、表示面３６５の前および表示面３６５の後ろの両方に延在するホログラフィックオブジェクトボリューム内のどこであってもよい。導波路要素３７０は、以下に説明するように、入ってくるエネルギーをエネルギーデバイス（例えば、エネルギーセンサ）に同時に導くことができる。
ＬＦディスプレイモジュール３００Ｂの例示的な一実施形態では、発光ディスプレイがエネルギー源（例えば、エネルギーデバイス３４０Ａ）として使用され、画像センサがエネルギーセンサ（例えば、エネルギーデバイス３４０Ｂ）として使用される。このように、ＬＦディスプレイモジュール３００Ｂは、同時に、ホログラフィックコンテンツを投影し、表示面３６５の前のボリュームからの光を検出することができる。このように、ＬＦディスプレイモジュール３００Ｂのこの実施形態は、ＬＦディスプレイおよびＬＦセンサの両方として機能する。
一実施形態では、ＬＦディスプレイモジュール３００Ｂは、同時に、ライトフィールドを表示面上の投影位置から表示面の前に投影し、投影位置で、表示面の前の領域からのライトフィールドをキャプチャするように構成される。この実施形態では、エネルギーリレーデバイス３５０Ａは、導波路要素３７０の下に位置付けられたシームレスなエネルギー面３６０における位置の第１のセットをエネルギーデバイス３４０Ａに接続する。一例では、エネルギーデバイス３４０Ａは、ソースピクセルのアレイを有する発光ディスプレイである。エネルギーリレーデバイス３４０Ｂは、導波路要素３７０の下に位置付けられたシームレスなエネルギー面３６０における場所の第２のセットをエネルギーデバイス３４０Ｂに接続する。一例では、エネルギーデバイス３４０Ｂは、センサピクセルのアレイを有する画像センサである。ＬＦディスプレイモジュール３００Ｂは、特定の導波路要素３７０の下にあるシームレスなエネルギー面３６５における場所が、すべて発光ディスプレイ場所、すべて画像センサ場所、またはこれらの場所の何らかの組み合わせであるように構成され得る。他の実施形態では、双方向のエネルギー面は、様々な他の形態のエネルギーを投影および受信することができる。
ＬＦディスプレイモジュール３００Ｂの別の例示的な実施形態では、ＬＦディスプレイモジュールは、２つの異なるタイプのエネルギーを投影するように構成される。例えば、一実施形態では、エネルギーデバイス３４０Ａは、電磁エネルギーを放出するように構成された発光ディスプレイであり、エネルギーデバイス３４０Ｂは、機械的エネルギーを放出するように構成された超音波トランスデューサである。そのため、光および音の両方が、シームレスなエネルギー面３６０における様々な位置から投影され得る。この構成では、エネルギーリレーデバイス３５０Ａは、エネルギーデバイス３４０Ａをシームレスなエネルギー面３６０に接続し、電磁エネルギーを中継する。エネルギーリレーデバイスは、電磁エネルギーの輸送を効率的にする（例えば、屈折率を変化させる）特性を有するように構成される。エネルギーリレーデバイス３５０Ｂは、エネルギーデバイス３４０Ｂをシームレスなエネルギー面３６０に接続し、機械的エネルギーを中継する。エネルギーリレーデバイス３５０Ｂは、超音波エネルギーの効率的な輸送のための特性を有するように構成される（例えば、異なる音響インピーダンスを有する材料の配分）。いくつかの実施形態では、機械的エネルギーは、エネルギー導波路層３３０上の導波路要素３７０間の場所から投影され得る。機械的エネルギーを投影する場所は、光が一方の電磁導波路要素から他方に輸送されるのを抑制する役割を果たす構造体を形成し得る。一例では、超音波の機械的エネルギーを投影する場所の空間的に分離されたアレイは、３次元触覚形状および表面を空中に作成するように構成することができる。表面は、投影されたホログラフィックオブジェクト（例えば、ホログラフィックオブジェクト３８０）と一致し得る。いくつかの例では、アレイにわたる位相の遅延および振幅の変化は、触覚形状の作成を支援し得る。
様々な実施形態では、インターリーブされたエネルギーリレーデバイスを有するＬＦディスプレイモジュール３００Ｂは、各エネルギーデバイス層が特定のタイプのエネルギーデバイスを含んだ、複数のエネルギーデバイス層を含み得る。これらの例では、エネルギーリレー層は、シームレスなエネルギー面３６０とエネルギーデバイス層３１０との間で適切なタイプのエネルギーを中継するように構成される。
タイル張りされたＬＦディスプレイモジュール
図４Ａは、１つ以上の実施形態による、単一面シームレス表面環境を形成するために、２次元にタイル張りされたＬＦディスプレイシステム４００の一部の斜視図である。ＬＦディスプレイシステム４００は、アレイ４１０を形成するようにタイル張りされた複数のＬＦディスプレイモジュールを含む。より明確には、アレイ４１０内の小さな正方形の各々が、タイル張りされたＬＦディスプレイモジュール４１２を表す。ＬＦディスプレイモジュール４１２は、ＬＦディスプレイモジュール３００Ａまたは３００Ｂと同じであり得る。アレイ４１０は、例えば、部屋の表面（例えば、壁）の一部またはすべてを覆うことができる。ＬＦアレイは、例えば、テーブルトップ、広告版、ロタンダ、パネルなどの他の表面を覆うことができる。
アレイ４１０は、１つ以上のホログラフィックオブジェクトを投影することができる。例えば、例示的な実施形態では、アレイ４１０は、ホログラフィックオブジェクト４２０およびホログラフィックオブジェクト４２２を投影する。ＬＦディスプレイモジュール４１２のタイル張りは、はるかに大きなビューイングボリュームを可能にするだけでなく、オブジェクトがアレイ４１０からより遠くに投影されることを可能にする。例えば、例示的な実施形態では、ビューイングボリュームは、ＬＦディスプレイモジュール４１２の前（および後ろ）の局所的なボリュームではなく、アレイ４１０の前および後ろのほぼ全エリアである。
いくつかの実施形態では、ＬＦディスプレイシステム４００は、ホログラフィックオブジェクト４２０を視聴者４３０および視聴者４３４に提示する。視聴者４３０および視聴者４３４は、異なる視点のホログラフィックオブジェクト４２０を受信する。例えば、視聴者４３０は、ホログラフィックオブジェクト４２０の真っ直ぐなビューを提示される一方、視聴者４３４は、ホログラフィックオブジェクト４２０のより斜めのビューを提示される。視聴者４３０および／または視聴者４３４が移動すると、これらの視聴者は、異なる視点のホログラフィックオブジェクト４２０を提示される。これにより、視聴者は、ホログラフィックオブジェクトに対して移動することにより、ホログラフィックオブジェクトと視覚的にインタラクションすることが可能になる。例えば、視聴者４３０がホログラフィックオブジェクト４２０の周りを歩くとき、ホログラフィックオブジェクト４２０がアレイ４１０のホログラフィックオブジェクトボリューム内に留まっている限り、視聴者４３０は、ホログラフィックオブジェクト４２０の異なる側面を見る。したがって、視聴者４３０および視聴者４３４は、あたかもホログラフィックオブジェクト４２０が実際にそこにあるかのように、実世界空間にホログラフィックオブジェクト４２０を同時に見ることができる。追加的に、ホログラフィックオブジェクト４２０は、物理的オブジェクトが見えるのとほぼ同じように視聴者に見えるので、視聴者４３０および視聴者４３４は、ホログラフィックオブジェクト４２０を見るために外部デバイスを着用する必要はない。追加的に、ここでは、アレイのビューイングボリュームがアレイの表面の後ろに延在するため、ホログラフィックオブジェクト４２２が、アレイの後ろに例示されている。このように、ホログラフィックオブジェクト４２２は、視聴者４３０および／または視聴者４３４に提示され得る。
いくつかの実施形態では、ＬＦディスプレイシステム４００は、ホログラフィックコンテンツを視聴者４３０（すなわち、第１の視聴者）および視聴者４３４（すなわち、第２の視聴者）に提示する。第１の視聴者と第２の視聴者は、異なるビューイングボリュームに配置され得る。例えば、第１の視聴者は、ビューイングボリューム内に配置され得、第２の視聴者は、第２のビューイングボリューム内に配置され得る。ＬＦディスプレイシステム４００は、アレイ４１０のホログラフィックオブジェクトボリューム内の追加のホログラフィックコンテンツを、ビューイングボリュームとは異なる第２のビューイングボリューム内に位置する第２の視聴者に提示する。いくつかの実施形態では、ＬＦディスプレイシステム４００は、ビューイングボリュームからは見ることができるが、第２のビューイングボリュームからは見ることができないホログラフィックコンテンツを提示する。
いくつかの実施形態では、ＬＦディスプレイシステム４００は、視聴者４３０および視聴者４３４の位置を追跡する追跡システムを含み得る。いくつかの実施形態では、追跡される位置は、視聴者の位置である。他の実施形態では、追跡される位置は、視聴者の目の位置である。目の位置追跡は、目がどこを見ているかを追跡する（例えば、配向を使用して視線場所を決定する）視線追跡とは異なる。視聴者４３０の目および視聴者４３４の目は、異なる場所にある。
様々な構成において、ＬＦディスプレイシステム４００は、ＬＦディスプレイシステム４００によって投影されたホログラフィックコンテンツに対する視聴者の応答を含む、ＬＦディスプレイシステムの１人以上の視聴者に関する情報を収集するために使用される１つ以上の追跡システム、およびＬＦディスプレイシステム４００の視聴者の特徴を含み得る。例えば、図４Ａの例示的な実施形態では、ＬＦディスプレイシステムは、アレイ４１０の外部にある追跡システム４４０を含む。ここで、追跡システムは、アレイ４１０に結合されたカメラシステムであり得る。外部追跡システムは、図５Ａに関してより詳細に説明される。他の例示的な実施形態では、追跡システムは、本明細書に記載されるように、アレイ４１０に組み込まれ得る。例えば、アレイ４１０に含まれる双方向エネルギー面を含む１つ以上のＬＦディスプレイモジュール４１２のエネルギーデバイス（例えば、エネルギーデバイス３４０）は、アレイ４１０の前の視聴者の画像をキャプチャするように構成され得る。いずれの場合でも、ＬＦディスプレイシステム４００の追跡システムは、アレイ４１０によって提示されたホログラフィックコンテンツを見ている視聴者（例えば、視聴者４３０および／または視聴者４３４）に関する追跡情報を決定する。一実施形態では、ＬＦディスプレイシステム４００の追跡システムは、視聴者の動きを追跡し、１つ以上のビューイングボリュームは、追跡された動きによって定義され得る。
いくつかの実施形態では、ＬＦディスプレイシステム４００は、視聴者４３０がビューイングボリューム内にいるという決定に基づいて、ホログラフィックコンテンツをＬＦディスプレイシステム４００の視聴者に提示する機会を特定し得る。追跡システム４４０は、ＬＦディスプレイシステム４００のビューイングボリューム内の視聴者４３０の動きを追跡し得、追跡された動きに基づいて、視聴者４３０がビューイングボリューム内にいると決定し得る。他の実施形態では、ＬＦディスプレイシステム４００は、コンテンツストアからホログラフィックコンテンツを選択し得（すなわち、ホログラフィックコンテンツがサードパーティシステムまたはオンラインストアに記憶される場合）、ホログラフィックコンテンツは、ホログラフィックコンテンツをいつどのように提示するかを画定するパラメータのセットを含み得る。パラメータのセットは、追跡システムによって決定された１人以上の視聴者の応答または特徴から部分的に導き出し得る。例えば、１人以上の視聴者の年齢が決定された場合、特定の年齢範囲に適したコンテンツが表示され得る。別の例では、追跡された視聴者の位置または動きに応じて、ホログラフィックコンテンツを提示する頻度を調整し得る。一般に、追跡システムは、ホログラフィックコンテンツ、またはそれらのいくつかの組み合わせをいつまたはどのように提示するかを説明するパラメータを提供し得る。ＬＦディスプレイシステム４００は、パラメータのセットに基づいてホログラフィックコンテンツの表示命令を生成し得、パラメータのセットに基づいてホログラフィックコンテンツを１人以上の視聴者に提示し得る。表示命令は、ホログラフィックコンテンツをいつどのように表示するかをＬＦディスプレイシステム４００に指示する。
追跡情報は、視聴者の位置、または視聴者の一部の位置（例えば、視聴者の片方または両方の目、もしくは視聴者の四肢）の空間内の（例えば、追跡システムに対する）位置を表す。追跡システムは、追跡情報を決定するために、任意の数の深度決定技術を使用することができる。深度決定技術は、例えば、構造化光、飛行時間、ステレオ撮像、何らかの他の深度決定技術、またはそれらの何らかの組み合わせを含み得る。追跡システムは、追跡情報を決定するように構成されている様々なシステムを含み得る。例えば、追跡システムは、１つ以上の赤外線源（例えば、構造化光源）、赤外線で画像をキャプチャすることができる１つ以上の画像センサ（例えば、赤－青－緑－赤外線カメラ）、および追跡アルゴリズムを実行するプロセッサを含み得る。追跡システムは、深度推定技術を使用して、視聴者の位置を決定することができる。いくつかの実施形態では、ＬＦディスプレイシステム４００は、本明細書で説明するように、視聴者４３０および／または視聴者４３４の追跡された位置、動作、またはジェスチャに基づいて、ホログラフィックオブジェクトを生成する。例えば、ＬＦディスプレイシステム４００は、アレイ４１０の閾値距離および／または特定の位置内に来る視聴者に応答して、ホログラフィックオブジェクトを生成することができる。
ＬＦディスプレイシステム４００は、追跡情報に部分的に基づいて、各視聴者に合わせてカスタマイズされた１つ以上のホログラフィックオブジェクトを提示することができる。例えば、視聴者４３０は、ホログラフィックオブジェクト４２０を提示され得るが、ホログラフィックオブジェクト４２２は提示され得ない。同様に、視聴者４３４は、ホログラフィックオブジェクト４２２を提示され得るが、ホログラフィックオブジェクト４２０は提示され得ない。例えば、ＬＦディスプレイシステム４００は、視聴者４３０および視聴者４３４の各々の位置を追跡する。ＬＦディスプレイシステム４００は、ホログラフィックオブジェクトが提示されるべき場所に対する視聴者の位置に基づいて、視聴者に見えるべきホログラフィックオブジェクトの視点を決定する。ＬＦディスプレイシステム４００は、決定された視点に対応する特定のピクセルから光を選択的に投影する。したがって、視聴者４３４および視聴者４３０は、潜在的に完全に異なる体験を同時に有することができる。言い換えれば、ＬＦディスプレイシステム４００は、ホログラフィックコンテンツを、ビューイングボリュームのビューイングサブボリューム（すなわち、図２Ｂに示されるビューイングサブボリューム２９０Ａ、２９０Ｂ、２９０Ｃ、および２９０Ｄと同様の）に提示することができる。例えば、例示のように、ＬＦディスプレイシステム４００は、視聴者４３０の位置を追跡できるので、ＬＦディスプレイシステム４００は、スペースコンテンツ（例えば、ホログラフィックオブジェクト４２０）を、視聴者４３０を取り囲むビューイングサブボリュームに、およびサファリコンテンツ（例えば、ホログラフィックオブジェクト４２２）を、視聴者４３４を取り囲むビューイングサブボリュームに提示することができる。対照的に、従来のシステムは、同様の体験を提供するために、個々のヘッドセットを使用しなければならないであろう。
いくつかの実施形態では、ＬＦディスプレイシステム４００は、１つ以上の感覚フィードバックシステムを含み得る。感覚フィードバックシステムは、ホログラフィックオブジェクト４２０および４２２を拡張する他の感覚刺激（例えば、触覚、音声、または匂い）を提供する。例えば、図４Ａの例示的な実施形態では、ＬＦディスプレイシステム４００は、アレイ４１０の外部の感覚フィードバックシステム４４２を含む。一例では、感覚フィードバックシステム４４２は、アレイ４１０に結合された静電スピーカであり得る。外部感覚フィードバックシステムは、図５Ａに関してより詳細に説明される。他の例示的な実施形態では、感覚フィードバックシステムは、本明細書に記載されるように、アレイ４１０に組み込まれ得る。例えば、アレイ４１０に含まれるＬＦディスプレイモジュール４１２のエネルギーデバイス（例えば、図３Ｂのエネルギーデバイス３４０Ａ）は、超音波エネルギーをアレイの前の視聴者に投影し、および／またはアレイの前の視聴者から画像情報を受信するように構成され得る。いずれの場合でも、感覚フィードバックシステムは、感覚コンテンツを、アレイ４１０によって提示されるホログラフィックコンテンツ（例えば、ホログラフィックオブジェクト４２０および／またはホログラフィックオブジェクト４２２）を見ている視聴者（例えば、視聴者４３０および／または視聴者４３４）に提示し、および／または視聴者から受信する。
ＬＦディスプレイシステム４００は、アレイの外部の１つ以上の音響投影デバイスを含む感覚フィードバックシステム４４２を含み得る。代替的または追加的に、ＬＦディスプレイシステム４００は、本明細書で説明されるように、アレイ４１０に統合された１つ以上の音響投影デバイスを含み得る。音響投影デバイスは、体積触覚表面を投影するように構成された超音波源のアレイ（例えば、超音波エネルギー投影デバイスまたは体積触覚投影デバイス）からなり得る。一実施形態では、超音波エネルギー投影デバイスは、ホログラフィックオブジェクトに触覚フィードバックを提供し得る。超音波エネルギー投影デバイスは、ホログラフィックオブジェクトの表面に近接して、またはホログラフィックオブジェクトの表面と一致する体積触覚表面を生成し得る。いくつかの実施形態では、触覚表面は、視聴者の一部が１つ以上の表面の閾値距離内に入る場合、ホログラフィックオブジェクトの１つ以上の表面の（例えば、ホログラフィックオブジェクト４２０の表面における）ホログラフィックオブジェクトと一致し得る。ホログラフィックコンテンツは、テクスチャを備えた物理的アイテムの表現であり得、体積触覚投影デバイスは、物理的アイテムのテクスチャをシミュレートし得る（すなわち、体積触覚表面を提供し得る）。体積触覚は、ユーザがホログラフィックオブジェクトの表面をタッチして感じることを可能にし得る。複数の音響投影デバイスは、視聴者に音声コンテンツ（例えば、没入型オーディオ）を提供する可聴圧力波を投影することができる。したがって、超音波圧力波および／または可聴圧力波は、ホログラフィックオブジェクトを補完する役割を果たすことができる。
様々な実施形態では、ＬＦディスプレイシステム４００は、視聴者の追跡された位置に部分的に基づいて、他の感覚刺激を提供することができる。例えば、図４Ａに例示されるホログラフィックオブジェクト４２２はライオンであり、ＬＦディスプレイシステム４００は、ホログラフィックオブジェクト４２２を視覚的（すなわち、ホログラフィックオブジェクト４２２が咆哮するように見える）および聴覚的（すなわち、１つ以上の音響投影デバイスが、ライオンの咆哮がホログラフィックオブジェクト４２２から発せられているように視聴者４３０が知覚する圧力波を投影する）の両方で咆哮させることができる。
例示的な構成では、ホログラフィックビューイングボリュームは、図２Ａ～図２ＢのＬＦディスプレイシステム２００のビューイングボリューム２８５と同様の方法で制限され得ることに留意されたい。これは、視聴者が単一のウォールディスプレイユニットで体験するであろう知覚される没入感の量を制限する可能性がある。これに対処する１つの方法が、図４Ｂ～図４Ｆに関して以下に説明するように、複数の側面に沿ってタイル張りされた複数のＬＦディスプレイモジュールを使用することである。
図４Ｂは、１つ以上の実施形態による、多面シームレス表面環境におけるＬＦディスプレイシステム４０２の一部分の斜視図である。１つ以上のＬＦディスプレイモジュールのそれぞれは、そこからホログラフィックオブジェクトが投影される表示面を有する。ＬＦディスプレイシステム４０２は、シームレスな表示面が、１つ以上のＬＦディスプレイモジュールの表示面を複数の壁、床、および天井にタイル張りされて、多面シームレス表面環境を作成することを除いて、ＬＦディスプレイシステム４００と実質的に同様である。より具体的には、ＬＦディスプレイモジュールは、６面集合シームレス表面環境であるアレイを形成するようにタイル張りされている。いくつかの実施形態では、シームレスな表示面は、単一のＬＦディスプレイモジュールの表示面の表面積よりも大きくてもよい。図４Ｂでは、複数のＬＦディスプレイモジュールが、部屋のすべての壁、天井、および床を覆っている。他の実施形態では、複数のＬＦディスプレイモジュールは、壁、床、天井、またはそれらの何らかの組み合わせのすべてではないが、一部を覆い得る。他の実施形態では、複数のＬＦディスプレイモジュールがタイル張りされて、何らかの他の集合シームレス表面を形成する。例えば、壁は、円筒形の集合エネルギー環境が形成されるように湾曲され得る。
ＬＦディスプレイシステム４０２は、１つ以上のホログラフィックオブジェクトを投影することができる。例えば、例示的な実施形態では、ＬＦディスプレイシステム４０２は、ホログラフィックオブジェクト４２０を、６面集合シームレス表面環境によって囲まれたエリアに投影する。この例では、ＬＦディスプレイシステムのビューイングボリュームも、６面集合シームレス表面環境内に含まれる。例示的な構成では、視聴者４３４は、ホログラフィックオブジェクト４２０と、ホログラフィックオブジェクト４２０を形成するために使用されるエネルギー（例えば、光および／または圧力波）を投影しているＬＦディスプレイモジュール４１４との間に位置付けられ得ることに留意されたい。したがって、視聴者４３４の位置付けは、視聴者４３０が、ＬＦディスプレイモジュール４１４からのエネルギーから形成されるホログラフィックオブジェクト４２０を知覚することを妨げる可能性がある。しかしながら、例示的な構成では、（例えば、視聴者４３４によって）遮られず、エネルギーを投影してホログラフィックオブジェクト４２０を形成し、視聴者４３０によって観察され得る、例えば、ＬＦディスプレイモジュール４１６などの少なくとも１つの他のＬＦディスプレイモジュールが存在する。このように、空間内の視聴者による閉塞により、ホログラフィック投影の一部が見えなくなる可能性があるが、この影響は、ボリュームの一面にのみホログラフィックディスプレイパネルが存在する場合よりもはるかに小さい。ホログラフィックオブジェクト４２２は、ホログラフィックオブジェクトボリュームが集合表面の後ろに延在するため、６面集合シームレス表面環境の壁の「外側」に例示されている。したがって、視聴者４３０および／または視聴者４３４は、ホログラフィックオブジェクト４２２を、視聴者が全体にわたって移動することができる囲まれた６面環境の「外側」として知覚することができる。
図４Ａを参照して前述したように、いくつかの実施形態では、ＬＦディスプレイシステム４０２は、視聴者の位置を能動的に追跡し、追跡された位置に基づいてホログラフィックコンテンツを提示するように、異なるＬＦディスプレイモジュールに動的に命令し得る。したがって、多面構成は、制約のない視聴者が、多面シームレス表面環境によって囲まれたエリア全体を自由に移動することができる、ホログラフィックオブジェクトを提供するための（例えば、図４Ａと比べて）より堅牢な環境を提供することができる。
特に、様々なＬＦディスプレイシステムが、異なる構成を有し得る。さらに、各構成は、全体でシームレスな表示面（「集合表面」）を形成する表面の特定の配向を有し得る。すなわち、ＬＦディスプレイシステムのＬＦディスプレイモジュールは、タイル張りされて様々な集合表面を形成することができる。例えば、図４Ｂでは、ＬＦディスプレイシステム４０２は、部屋の壁に近似する６面集合表面を形成するようにタイル張りされたＬＦディスプレイモジュールを含む。いくつかの他の例では、集合表面は、全表面（例えば、壁全体）ではなく、表面の一部（例えば、壁の半分）でのみ発生し得る。いくつかの例が本明細書に記載されている。
いくつかの構成では、ＬＦディスプレイシステムの集合表面は、局部的なビューイングボリュームに向けてエネルギーを投影するように構成された集合表面を含み得る。局部的なビューイングボリュームにエネルギーを投影することは、例えば、特定のビューイングボリューム内の投影エネルギーの密度を上げ、そのボリューム内の視聴者のＦＯＶを広げ、ビューイングボリュームを表示面に近づけることにより、より高品質の視聴体験を可能にする。
例えば、図４Ｃは、「ウィング型」構成の集合表面を有するＬＦディスプレイシステム４５０Ａの上面図を示す。この例では、ＬＦディスプレイシステム４５０Ａは、前壁４５２、後壁４５４、第１の側壁４５６、第２の側壁４５８、天井（図示せず）、および床（図示せず）を有する部屋内に位置している。第１の側壁４５６、第２の側壁４５８、後壁４５４、床、および天井は、すべて直交している。ＬＦディスプレイシステム４５０Ａは、前壁を覆う集合表面４６０を形成するようにタイル張りされたＬＦディスプレイモジュールを含む。前壁４５２、したがって集合表面４６０は、３つの部分、すなわち、（ｉ）後壁４５４とほぼ平行な第１の部分４６２（すなわち、中央表面）、（ｉｉ）第１の部分４６２を第１の側壁４５６に接続し、部屋の中心に向かってエネルギーを投影するように斜めに配置された第２の部分４６４（すなわち、第１の側表面）、および（ｉｉｉ）第１の部分４６２を第２の側壁４５８に接続し、部屋の中心に向かってエネルギーを投影するように斜めに配置された第３の部分４６６（すなわち、第２の側表面）を含む。第１の部分は部屋内の垂直平面であり、水平および垂直軸を有する。第２および第３の部分は、水平軸に沿って部屋の中心に向かって角度が付いている。
この例では、ＬＦディスプレイシステム４５０Ａのビューイングボリューム４６８Ａは、部屋の中央にあり、集合表面４６０の３つの部分によって部分的に囲まれている。視聴者を少なくとも部分的に囲む集合表面（「周囲表面」）は、視聴者の没入型体験を増大する。
例示のために、例えば、中央表面のみを有する集合表面を考慮する。図２Ａを参照すると、表示面のいずれかの端から投影される光線は、上記のように理想的なホログラフィックボリュームおよび理想的なビューイングボリュームを作成する。ここで、例えば、中央表面が、視聴者に向かって角度の付いた２つの側表面を含んだ場合を考慮する。この場合、光線２５６および光線２５７は、中央表面の法線からより大きな角度で投影されるであろう。したがって、ビューイングボリュームの視野が拡大するであろう。同様に、ホログラフィックビューイングボリュームは、表示面により近くなるであろう。追加的に、第２および第３の２つの部分がビューイングボリュームのより近くで傾斜しているため、表示面から一定の距離で投影されるホログラフィックオブジェクトは、そのビューイングボリュームにより近い。
簡単に言えば、中央表面のみを有する表示面は、平面視野、（中央の）表示面とビューイングボリュームとの間の平面閾値分離、およびホログラフィックオブジェクトとビューイングボリュームとの間の平面近接度を有する。視聴者に向かって角度の付いた１つ以上の側表面を追加すると、平面視野に対して視野が拡大し、表示面とビューイングボリュームとの間の分離が平面分離に対して減少し、表示面とホログラフィックオブジェクトとの間の近接度が、平面近接度に対して増大する。側表面を視聴者に向けてさらに角度を付けると、さらに視野が拡大し、分離が減少し、近接度が増大する。言い換えれば、側表面の角度の付いた配置は、視聴者の没入型体験を増大する。
図４Ｄに戻ると、同様の例では、図４Ｄは、「スロープ」構成の集合表面を有するＬＦディスプレイシステム４５０Ｂの上面図を示す。この例では、ＬＦディスプレイシステム４５０Ｂは、前壁４５２、後壁４５４、第１の側壁（図示せず）、第２の側壁（図示せず）、天井４７２、および床４７４を有する部屋内に位置している。第１の側壁、第２の側壁、後壁４５４、床４７４、および天井４７２は、すべて直交している。ＬＦディスプレイシステム４５０Ｂは、前壁を覆う集合表面４６０を形成するようにタイル張りされたＬＦディスプレイモジュールを含む。前壁４５２、したがって集合表面４６０は、３つの部分、すなわち、（ｉ）後壁４５４とほぼ平行な第１の部分４６２（すなわち、中央表面）、（ｉｉ）第１の部分４６２を天井４７２に接続し、部屋の中心に向かってエネルギーを投影するように角度が付いた第２の部分４６４（すなわち、第１の側表面）、および（ｉｉｉ）第１の部分４６２を床４７４に接続し、部屋の中心に向かってエネルギーを投影するように角度が付いた第３の部分４６４（すなわち、第２の側表面）を含む。第１の部分は部屋内の垂直平面であり、水平および垂直軸を有する。第２および第３の部分は、垂直軸に沿って部屋の中心に向かって角度が付いている。
この例では、ＬＦディスプレイシステム４５０Ｂのビューイングボリューム４６８Ｂは、部屋の中央にあり、集合表面４６０の３つの部分によって部分的に囲まれている。図４Ｃに示される構成と同様に、２つの側面部分（例えば、第２の部分４６４および第３の部分４６６）は、視聴者を囲んで、周囲表面を形成するように角度が付いている。周囲表面は、ホログラフィックビューイングボリューム４６８Ｂ内の任意の視聴者の視点からのビューイングＦＯＶを拡大する。追加的に、周囲表面は、投影されたオブジェクトがより近くに見えるように、ビューイングボリューム４６８Ｂがディスプレイの表面により近くなることを可能にする。言い換えれば、側表面の角度の付いた配置は、視野を拡大し、分離を減少させ、集合表面の近接度を増大させ、それによって、視聴者の没入型体験を増大する。さらに、以下で考察するように、偏向光学系を使用して、ビューイングボリューム４６８Ｂのサイズおよび位置を最適化することができる。
集合表面４６０の側面部分の傾斜構成は、第３の部分４６６が傾斜していない場合よりも、ホログラフィックコンテンツがビューイングボリューム４６８Ｂにより近く提示されることを可能にする。例えば、キャラクタが提示された形態の下肢（脚など）、傾斜構成のＬＦディスプレイシステムは、平坦な前壁を有するＬＦディスプレイシステムが使用された場合よりも近く、かつより現実的に思われる可能性がある。
追加的に、ＬＦディスプレイシステムの構成およびそれが位置している環境により、ビューイングボリュームおよびビューイングサブボリュームの形状および位置を知ることができる。
図４Ｅは、例えば、部屋の前壁４５２上に集合表面４６０を有するＬＦディスプレイシステム４５０Ｃの上面図を例示する。この例では、ＬＦディスプレイシステム４５０Ｃは、前壁４５２、後壁４５４、第１の側壁４５６、第２の側壁４５８、天井（図示せず）、および床（図示せず）を有する部屋内に位置している。
ＬＦディスプレイシステム４５０Ｃは、集合表面４６０から様々な光線を投影する。表示面の各位置から、ビューイングボリュームを中心とした角度範囲で、光線が投影される。集合表面４６０の左側から投影される光線は水平角度範囲４８１を有し、集合表面の右側から投影される光線は水平角度範囲４８２を有し、集合表面４６０の中心から投影される光線は水平角度範囲４８３を有する。このように、表示面の全体で投影光線に傾斜した偏向角（ｇｒａｄｉｅｎｔ ｄｅｆｌｅｃｔｉｏｎ ａｎｇｌｅ）を有することにより、ビューイングボリューム４６８Ｃが作成される。さらに、この構成は、側壁４５６および４５８に光線を投影する際のディスプレイの解像度の無駄を回避する。
図４Ｆは、部屋の前壁４５２上に集合表面４６０を有するＬＦディスプレイシステム４５０Ｄの側面図を例示する。この例では、ＬＦディスプレイシステム４５０Ｄは、前壁４５２、後壁４５４、第１の側壁（図示せず）、第２の側壁（図示せず）、天井４７２、および床４７４を有する部屋内に位置している。この例では、床は、前壁から後壁に移動するにつれて各段が階段状に高くなるように、段になっている。ここで、床の各段は、ビューイングサブボリューム（例えば、表示サブボリューム４７０Ａおよび４７０Ｂ）を含む。段状の床は、重複しないビューイングサブボリュームを可能にする。すなわち、各ビューイングサブボリュームは、別のビューイングサブボリュームを通過しない、ビューイングサブボリュームから集合表面４６０までの視線を有する。言い換えると、この配向は、段間の垂直オフセットにより、各段が、他の段のビューイングサブボリューム「見渡す」ことが可能になる「スタジアムシーティング」効果をもたらす。重なり合わないビューイングサブボリュームを含むＬＦディスプレイシステムは、重なり合うビューイングボリュームを有するＬＦディスプレイシステムよりも高品質の視聴体験を提供することができる。例えば、図４Ｆに示される構成では、異なるホログラフィックコンテンツが、ビューイングサブボリューム４７０Ａおよび４７０Ｂ内の聴衆に投影され得る。
ＬＦディスプレイシステムの制御
図５Ａは、１つ以上の実施形態による、ＬＦディスプレイシステム５００のブロック図である。ＬＦディスプレイシステム５００は、ＬＦディスプレイアセンブリ５１０およびコントローラ５２０を備える。ＬＦディスプレイアセンブリ５１０は、ライトフィールドを投影する１つ以上のＬＦディスプレイモジュール５１２を含む。ＬＦディスプレイモジュール５１２は、他のタイプのエネルギーを投影および／または感知する統合されたエネルギー源および／またはエネルギーセンサを含むソース／センサシステム５１４を含み得る。コントローラ５２０は、データストア５２２、ネットワークインターフェース５２４、およびＬＦ処理エンジン５３０を含む。コントローラ５２０はまた、追跡モジュール５２６、および視聴者プロファイリングモジュール５２８を含み得る。いくつかの実施形態では、ＬＦディスプレイシステム５００はまた、感覚フィードバックシステム５４０および追跡システム５５０を含む。図１、図２Ａ～図２Ｂ、図３Ａ～図３Ｂ、および図４Ａ～図４Ｆの文脈の中で説明されるＬＦディスプレイシステムは、ＬＦディスプレイシステム５００の実施形態である。他の実施形態では、ＬＦディスプレイシステム５００は、本明細書に記載されているものよりも追加のまたは少ないモジュールを含む。同様に、機能は、本明細書で説明されるのとは異なる方法で、モジュール間および／または異なるエンティティ間で分散され得る。ＬＦディスプレイシステム５００の用途についても、図６～図７に関して以下で詳細に考察する。
ＬＦディスプレイアセンブリ５１０は、ビューイングボリューム内に位置する視聴者に見え得るホログラフィックオブジェクトボリューム内にホログラフィックコンテンツを提供する。ＬＦディスプレイアセンブリ５１０は、コントローラ５２０から受信された表示命令を実行することによって、ホログラフィックコンテンツを提供することができる。ホログラフィックコンテンツは、集合表面の前、ＬＦディスプレイアセンブリ５１０、ＬＦディスプレイアセンブリ５１０の集合表面の後ろ、またはそれらの何らかの組み合わせに投影される１つ以上のホログラフィックオブジェクトを含み得る。コントローラ５２０を用いた表示命令の生成について、以下でより詳細に説明する。
ＬＦディスプレイアセンブリ５１０は、ＬＦディスプレイアセンブリ５１０に含まれる１つ以上のＬＦディスプレイモジュール（例えば、ＬＦディスプレイモジュール１１０、ＬＦディスプレイモジュール２１０、ＬＦディスプレイモジュール３００Ａ、およびＬＦディスプレイモジュール３００Ｂのいずれか）を使用してホログラフィックコンテンツを提供する。便宜上、１つ以上のＬＦディスプレイモジュールは、本明細書ではＬＦディスプレイモジュール５１２として説明されることがある。ＬＦディスプレイモジュール５１２は、タイル張りされて、ＬＦディスプレイアセンブリ５１０を形成することができる。ＬＦディスプレイモジュール５１２は、様々なシームレス表面環境（例えば、単一面、多面、看板、曲面など）として構造化され得る。つまり、タイル張りされたＬＦディスプレイモジュールが集合表面を形成する。前述のように、ＬＦディスプレイモジュール５１２は、ホログラフィックコンテンツを提示する、エネルギーデバイス層（例えば、エネルギーデバイス層２２０）およびエネルギー導波路層（例えば、エネルギー導波路層２４０）を含む。ＬＦディスプレイモジュール５１２はまた、ホログラフィックコンテンツを提示するときに、エネルギーデバイス層とエネルギー導波路層との間でエネルギーを転送するエネルギーリレー層（例えば、エネルギーリレー層２３０）を含み得る。
いくつかの実施形態では、ＬＦディスプレイシステム５００は、ハードウェア構成に基づいてホログラフィックコンテンツを提供する。ハードウェア構成は、ホログラフィックコンテンツの表示に影響を与えるＬＦディスプレイシステム５００の物理的構成要素の構成である。物理的構成要素は、ＬＦディスプレイモジュール５１２、感覚フィードバックデバイス（例えば、音響投影デバイス、力作動デバイス、圧力センサなど）、および追跡システムデバイス（例えば、エネルギーセンサ、カメラ、深度センサなど）を含み得る。一実施形態では、ハードウェア構成は、ＬＦディスプレイシステム５００のための、ＬＦディスプレイモジュール、感覚フィードバックデバイス、および追跡システムデバイスの配置を含み得る。他の実施形態では、ハードウェア構成は、ＬＦディスプレイモジュールの設計を含み得る。ＬＦディスプレイモジュールの設計上の考慮事項には、解像度（すなわち、提示されたホログラフィックコンテンツの詳細レベル）、１度当たりの投影光線数（すなわち、角度解像度と投影距離を決定する光線の密度）、視野（すなわち、ビューイングボリュームの空いている観察可能領域）、表示面の偏向角（すなわち、投影された光線が表示面の法線となす角度）、表示面の次元（すなわち、ディスプレイパネルの高さと幅）、ホログラフィックコンテンツの表示に影響を与えるその他のＬＦディスプレイモジュールの設計上の考慮事項、またはそれらの組み合わせ、を含み得る。
ＬＦディスプレイモジュール５１２はまた、前述のように、エネルギー投影および／またはエネルギー感知のために構成されている他の統合システムを含み得る。例えば、ライトフィールドディスプレイモジュール５１２は、エネルギーを投影および／または感知するように構成されている任意の数のエネルギーデバイス（例えば、エネルギーデバイス３４０）を含み得る。便宜上、ＬＦディスプレイモジュール５１２の統合エネルギー投影システムおよび統合エネルギー感知システムは、本明細書では、総称してソース／センサシステム５１４として説明されることがある。ソース／センサシステム５１４は、ソース／センサシステム５１４が、ＬＦディスプレイモジュール５１２と同じシームレスなエネルギー面を共有するように、ＬＦディスプレイモジュール５１２内に統合されている。言い換えれば、ＬＦディスプレイアセンブリ５１０の集合表面は、ＬＦディスプレイモジュール５１２およびソース／センサモジュール５１４の両方の機能を含む。すなわち、ソース／センサシステム５１４を有するＬＦディスプレイモジュール５１２を含むＬＦディスプレイアセンブリ５１０は、ライトフィールドを投影しながら、同時にエネルギーを投影し、および／またはエネルギーを感知し得る。例えば、ＬＦディスプレイアセンブリ５１０は、ＬＦディスプレイモジュール５１２と、前述のようにデュアルエネルギー面または双方向エネルギー面として構成されたソース／センサシステム５１４とを含み得る。
いくつかの実施形態では、ＬＦディスプレイシステム５００は、感覚フィードバックシステム５４０を使用して、生成されたホログラフィックコンテンツを他の感覚コンテンツ（例えば、協調的な触覚、音声または匂いなど）で拡張する。感覚フィードバックシステム５４０は、コントローラ５２０から受信された表示命令を実行することによって、ホログラフィックコンテンツの投影を拡張し得る。感覚フィードバックシステム５４０は、１つ以上の感覚フィードバックデバイスを備えてもよく、ホログラフィックオブジェクトと同時に感覚フィードバックを提供するように構成され得る。全般的に、感覚フィードバックシステム５４０は、ＬＦディスプレイアセンブリ５１０の外部の任意の数の感覚フィードバックデバイス（例えば、感覚フィードバックシステム４４２）を含む。いくつかの例示的な感覚フィードバックデバイスは、協調音響投影デバイス、受信デバイス、触覚フィードバック、芳香フィードバック、温度フィードバック、力作動デバイス、圧力センサ、トランスデューサなどを含み得る。場合によっては、感覚フィードバックシステム５４０は、ＬＦディスプレイアセンブリ５１０と同様の機能を有し得、逆もまた然りである。例えば、感覚フィードバックシステム５４０およびＬＦディスプレイアセンブリ５１０の両方は、サウンドフィールドを生成するように構成され得る。別の例として、感覚フィードバックシステム５４０は、触覚表面を生成するように構成され得る一方、ＬＦディスプレイアセンブ５１０リはそうではない。
例示のために、ＬＦディスプレイシステム５００の例示的な一実施形態では、感覚フィードバックシステム５４０は、１つ以上の音響投影デバイスを含み得る。１つ以上の音響投影デバイスは、コントローラ５２０から受信された表示命令を実行するときに、ホログラフィックコンテンツを補完する１つ以上の圧力波を生成するように構成される。生成される圧力波は、例えば、可聴（音の場合）、超音波（タッチの場合）、またはそれらの何らかの組み合わせであってもよい。同様に、感覚フィードバックシステム５４０は、芳香投影デバイスを含み得る。投影デバイスは、コントローラから受信した表示命令を実行する際に、対象エリアの一部またはすべてに香りを与えるように構成することができる。芳香デバイスは、標的エリア内の気流を調整するように、空気循環システム（例えば、ダクト、ファン、通気口など）内に結び付けられ得る。さらに、感覚フィードバックシステム５４０は、温度調整デバイスを含み得る。温度調整デバイスは、コントローラ５２０から受信された表示命令を実行するときに、標的エリアの一部もしくはすべての温度を上げるか、または下げるように構成されている。
いくつかの実施形態では、感覚フィードバックシステム５４０は、ＬＦディスプレイシステム５００の視聴者からの入力を受信するように構成される。この場合、感覚フィードバックシステム５４０は、視聴者からの入力を受信するための様々な感覚フィードバックデバイスを含む。センサフィードバックデバイスとしては、音響受信デバイス（例えば、マイクロフォン）、圧力センサ、ジョイスティック、動作検出器、トランスデューサなどのデバイスを挙げることができる。感覚フィードバックシステムは、ホログラフィックコンテンツおよび／または感覚フィードバックの生成を調整するために、検出された入力をコントローラ５２０に送信することができる。
例示のために、ＬＦディスプレイアセンブリの例示的な一実施形態では、感覚フィードバックシステム５４０は、マイクロフォンを含む。マイクロフォンは、１人以上の視聴者によって生成された音声を録音するように構成されている（例えば、音声コマンド、ホログラフィックコンテンツの表示に対する音声応答など）。感覚フィードバックシステム５４０は、記録された音声を、視聴者入力としてコントローラ５２０に提供する。コントローラ５２０は、視聴者入力を使用して、ホログラフィックコンテンツを生成することができる。同様に、感覚フィードバックシステム５４０は、圧力センサを含み得る。圧力センサは、視聴者によって圧力センサに加えられた力を測定するように構成される。感覚フィードバックシステム５４０は、測定された力を、視聴者入力としてコントローラ５２０に提供し得る。
いくつかの実施形態では、ＬＦディスプレイシステム５００は、追跡システム５５０を含む。追跡システム５５０は、ＬＦディスプレイシステム５００のビューイングボリューム内の視聴者の動きを追跡し、ホログラフィックコンテンツに対する視聴者の応答を監視し、ＬＦディスプレイシステム５００のビューイングボリューム内の視聴者の特徴を決定するように構成された任意の数の追跡デバイスを含む。一般に、追跡デバイスは、ＬＦディスプレイアセンブリ５１０の外部にある。いくつかの例示的な追跡デバイスとしては、カメラアセンブリ（「カメラ」）、深度センサ、構造化光、ＬＩＤＡＲシステム、カードスキャンシステム、または標的領域内の視聴者を追跡することができる他の追跡デバイスが挙げられる。
追跡システム５５０は、標的領域の一部またはすべてを光で照らす１つ以上のエネルギー源を含み得る。しかしながら、場合によっては、ホログラフィックコンテンツを提示するときに、標的エリアは、自然光および／またはＬＦディスプレイアセンブリ５１０からの周囲光で照らされる。エネルギー源は、コントローラ５２０から受信された命令を実行するときに、光を投影する。光は、例えば、構造化光パターン、光のパルス（例えば、ＩＲフラッシュ）、またはそれらの何らかの組み合わせであり得る。追跡システムは、可視帯域（約３８０ｎｍ～７５０ｎｍ）内、赤外線（ＩＲ）帯域（約７５０ｎｍ～１７００ｎｍ）内、紫外線帯域（１０ｎｍ～３８０ｎｍ）内、電磁スペクトルの何らかの他の部分、またはそれらの何らかの組み合わせの光を投影することができる。ソースとしては、例えば、発光ダイオード（ＬＥＤ）、マイクロＬＥＤ、レーザーダイオード、ＴＯＦ深度センサ、波長可変レーザーなどを挙げることができる。
追跡システム５５０は、コントローラ５２０から受信された命令を実行するときに、１つ以上の放出パラメータを調整することができる。放出パラメータは、追跡システム５５０のソースから光が投影される方法に影響を与えるパラメータである。放出パラメータとしては、例えば、明るさ、パルスレート（連続照明を含む）、波長、パルス長、ソースアセンブリから光が投影される方法に影響を与える何らかの他のパラメータ、またはそれらの何らかの組み合わせを挙げることができる。一実施形態では、ソースは、飛行時間動作で光のパルスを投影する。
追跡システム５５０は、１つ以上のＬＦディスプレイモジュール５１２の前の領域の画像をキャプチャするように構成されている、１つ以上のカメラを含み得る。追跡システム５５０のカメラは、標的領域から反射された光（例えば、構造化光パターン）の画像をキャプチャする。カメラは、コントローラ５２０から受信された追跡命令を実行するときに、画像をキャプチャする。前述のように、光は、追跡システム５５０のソースによって投影され得る。カメラは、１つ以上のカメラを含み得る。すなわち、カメラは、例えば、フォトダイオードのアレイ（１Ｄまたは２Ｄ）、ＣＣＤセンサ、ＣＭＯＳセンサ、追跡システム５５０によって投影される光の一部またはすべてを検出する何らかの他のデバイス、またはそれらの何らかの組み合わせであってもよい。一実施形態では、追跡システム５５０は、ＬＦディスプレイアセンブリ５１０の外部の１つ以上のカメラを含み得る。他の実施形態では、カメラは、ＬＦディスプレイアセンブリ５１０に含まれるＬＦディスプレイソース／センサモジュール５１４の一部として含まれる。例えば、前述のように、ライトフィールドモジュール５１２のエネルギーリレー要素が、エネルギーデバイス層２２０で発光ディスプレイおよび画像センサの両方をインターリーブする双方向エネルギー層である場合、ＬＦディスプレイアセンブリ５１０は、同時に、ライトフィールドを投影し、ディスプレイの前の視聴領域からの画像情報を記録するように構成され得る。一実施形態では、双方向エネルギー面からキャプチャされた画像は、ライトフィールドカメラを形成する。カメラは、キャプチャされた画像をコントローラ５２０に提供する。
追跡システム５５０のカメラは、コントローラ５２０から受信された追跡命令を実行するときに、１つ以上の撮像パラメータを調整することができる。撮像パラメータは、カメラが画像をキャプチャする方法に影響を与えるパラメータである。撮像パラメータとしては、例えば、フレームレート、アパーチャ、ゲイン、露光長さ、フレームタイミング、ローリングシャッターもしくはグローバルシャッターのキャプチャモード、カメラが画像をキャプチャする方法に影響を与える何らかの他のパラメータ、またはそれらの何らかの組み合わせを挙げることができる。
追跡システム５５０は、１つ以上のＬＦディスプレイモジュール５１２の前にある物体の深さを検出するように構成された、１つ以上の深度センサを備え得る。深度センサは、ビューイングボリューム内の視聴者の位置を追跡し得る。
コントローラ５２０は、ＬＦディスプレイアセンブリ５１０と、ＬＦディスプレイシステム５００の任意の他の構成要素と、を制御する。コントローラ５２０は、データストア５２２、ネットワークインターフェース５２４、追跡モジュール５２６、視聴者プロファイリングモジュール５２８、およびＬＦ処理エンジン５３０を備える。他の実施形態では、コントローラ５２０は、本明細書に記載されているものよりも追加のまたは少ないモジュールを含む。同様に、機能は、本明細書で説明されるのとは異なる方法で、モジュール間および／または異なるエンティティ間で分散され得る。例えば、追跡モジュール５２６は、ＬＦディスプレイアセンブリ５１０または追跡システム５５０の一部であり得る。
データストア５２２は、ＬＦディスプレイシステム５００の情報を記憶するメモリである。記憶される情報としては、表示命令、追跡命令、放出パラメータ、撮像パラメータ、標的エリアの仮想モデル、追跡情報、カメラによってキャプチャされた画像、１人以上の視聴者プロファイル、ＬＦディスプレイアセンブリ５１０の較正データ、ＬＦモジュール５１２の解像度および配向を含むＬＦディスプレイシステム５１０の構成データ、所望のビューイングボリューム形状、３Ｄモデル、シーンおよび環境、材料およびテクスチャを含むグラフィックス作成のためのコンテンツ、ＬＦディスプレイシステム５００によって使用され得る他の情報、またはそれらの何らかの組み合わせを挙げることができる。データストア５２２は、読み取り専用メモリ（ＲＯＭ）、ダイナミックランダムアクセスメモリ（ＤＲＡＭ）、スタティックランダムアクセスメモリ（ＳＲＡＭ）、またはそれらの何らかの組み合わせなどのメモリである。
ネットワークインターフェース５２４は、ＬＦディスプレイシステムがネットワークを介して他のシステムまたは環境と通信することを可能にする。一例では、ＬＦディスプレイシステム５００は、ネットワークインターフェース５２４を介して、リモートのＬＦディスプレイシステムからホログラフィックコンテンツを受信する。別の例では、ＬＦディスプレイシステム５００は、ネットワークインターフェース５２４を使用して、ホログラフィックコンテンツをリモートのデータストアに送信する。
追跡モジュール５２６は、ＬＦディスプレイシステム５００によって提示されたコンテンツを視聴している視聴者を追跡する。そうするために、追跡モジュール５２６は、追跡システム５５０のソースおよび／またはカメラの動作を制御する追跡命令を生成し、追跡命令を追跡システム５５０に提供する。追跡システム５５０は、追跡命令を実行し、追跡モジュール５２６に追跡入力を提供する。
追跡モジュール５２６は、標的領域内の１人以上の視聴者の位置を決定することができる。決定された位置は、例えば、何らかの基準点（例えば、表示面）に対するものであり得る。他の実施形態では、決定された位置は、標的エリアの仮想モデル内にあり得る。追跡された位置は、例えば、視聴者の追跡された位置および／または視聴者の一部の追跡された位置（例えば、目の場所、手の場所など）であり得る。追跡モジュール５２６は、追跡システム５５０のカメラからキャプチャされた１つ以上の画像を使用して、位置を決定する。追跡システム５５０のカメラは、ＬＦディスプレイシステム５００の周りに分配され得、画像を立体でキャプチャすることができ、追跡モジュール５２６が視聴者を受動的に追跡することを可能にする。他の実施形態では、追跡モジュール５２６は、視聴者を能動的に追跡する。すなわち、追跡システム５５０は、標的領域のある部分を照らし、標的領域を画像化（すなわち、１つ以上のＬＦディスプレイモジュール５１２の前の領域からライトフィールドをキャプチャ）し、追跡モジュール５２６は、時間を使用する。位置を決定するための飛行中および／または構造化光深度決定技術。追跡モジュール５２６は、決定された位置を使用して、追跡情報を生成する。
追跡モジュール５２６はまた、ＬＦディスプレイシステム５００の視聴者からの入力として、追跡情報を受信することができる。一実施形態では、ＬＦディスプレイアセンブリ５１０は、１つ以上のＬＦディスプレイモジュール５１２の前の領域からキャプチャされたライトフィールドに基づいて入力を受信し得る。追跡情報は、視聴者がＬＦディスプレイシステム５００によって提供される様々な入力オプションに対応する身体の動きを含み得る。例えば、追跡モジュール５２６は、視聴者の身体の動きを追跡し、任意の様々な動きを、入力として、ＬＦ処理エンジン５３０に割り当てることができる。追跡モジュール５２６は、追跡情報を、データストア５２２、ネットワークインターフェース５２４、ＬＦ処理エンジン５３０、視聴者プロファイリングモジュール５２８、ＬＦディスプレイシステム５００の任意の他の構成要素、またはそれらの何らかの組み合わせに提供することができる。
追跡モジュール５２６のための状況を提供するために、ホログラフィック商品を視聴者に提示するＬＦディスプレイシステム５００の例示的な一実施形態を考慮する。特定のホログラフィック商品を表示することに応答して、視聴者は、様々な入力に割り当てられ得る手および／または腕の動きで応答し得る。追跡システム５５０は、視聴者の手のおよび／または腕の動きを記録し得、その記録を追跡モジュール５２６に送信し得る。追跡モジュール５２６は、記録での視聴者の手および／または腕の動きを追跡し、入力をＬＦ処理エンジン５３０に送信する。以下に説明するように、視聴者プロファイリングモジュール５２８は、視聴者の手の動きが、例えば商品を購入するための入力に関連付けられていることを画像内の情報が示していると決定する。したがって、ＬＦ処理エンジン５３０は、商品の購入を確認するために適切なホログラフィックコンテンツを生成する。
ＬＦディスプレイシステム５００は、視聴者を識別し、かつプロファイリングするように構成された視聴者プロファイリングモジュール５２８を含む。視聴者プロファイリングモジュール５２８は、ＬＦディスプレイシステム５００によって表示されたホログラフィックコンテンツを見る１人または複数の視聴者のプロファイルを生成する。視聴者プロファイリングモジュール５２８は、視聴者の入力、視聴者の特徴、および監視された視聴者の行動、動作、ならびに反応に部分的に基づいて、視聴者プロファイルを生成する。視聴者プロファイリングモジュール５２８は、追跡システム５５０から取得された情報（例えば、記録された画像、ビデオ、音声など）にアクセスし、その情報を処理して、様々な情報を決定することができる。様々な例において、視聴者プロファイリングモジュール５２８は、任意の数のマシンビジョンまたは機械聴覚アルゴリズムを使用して、視聴者の行動、動作、および反応を決定することができる。監視される視聴者の動作には、例えば、笑顔、顔をしかめる、歓声、拍手、笑い、興奮レベル、他の表情、ジェスチャ、または視聴者による動きなどの変化が含まれ得る。
より一般的には、視聴者プロファイルは、ＬＦディスプレイシステムからのホログラフィックコンテンツを見ている視聴者に関して受信および／または決定された任意の情報を含み得る。例えば、各視聴者プロファイルは、ＬＦディスプレイシステム５００によって表示されたコンテンツに対するその視聴者の動作または応答を記録することができる。視聴者プロファイルに含まれ得るいくつかの例示的な情報が、以下に提供される。
いくつかの実施形態では、視聴者プロファイルは、表示されたホログラフィック商品、表示されたホログラフィックコンテンツオブジェクトなどに関する視聴者の応答を説明し得る。例えば、視聴者プロファイルは、視聴者が、花柄の衣料品（ホログラフィックによって提示された）に肯定的な応答を全般的に有することを示し得る。
いくつかの実施形態では、視聴者プロファイルは、例えば、医師の待合室で、例えば、ＬＦディスプレイシステム５００で放送されるニュースに関する情報を視聴する視聴者の特徴を示すことができる。ＬＦディスプレイシステム５００は、視聴者に対応する視聴者プロファイルの特徴に応じて、ホログラフィックコンテンツの提示を更新するようにさらに構成される。この同じ例では、待合室の視聴者は、大学のロゴが表示されたスウェットシャツを着用している。この場合、視聴者プロファイルは、視聴者が、スウェットシャツを着用していて、スウェットシャツにそのロゴがある大学に関連付けられたホログラフィックコンテンツを好む可能性があることを示し得、例えば、その大学のキャンパスでの今後開催されるイベントに関連するホログラフィックコンテンツ、その大学の地理的位置の天気予報、その大学のスポーツチームの最近のスポーツスコアなどがある。より広義には、視聴者プロファイルに表示できる視聴者の特徴は、年齢、性別、民族、衣服、視聴場所などが含まれ得る。
いくつかの実施形態では、視聴者プロファイルは、望ましいホログラフィックコンテンツに関して視聴者の好みを示すことができる。例えば、視聴者プロファイルは、視聴者が、家族の一人ひとりの年齢に適切なホログラフィックコンテンツのみを見たがることを示す場合がある。別の例では、視聴者プロファイルは、ホログラフィックコンテンツを表示すべきホログラフィックオブジェクトボリューム（例えば、壁の上）およびホログラフィックコンテンツを表示すべきでないホログラフィックオブジェクトボリューム（例えば、視聴者の頭上）を示し得る。視聴者プロファイルはまた、視聴者が触覚インターフェースを自分たちの近くに提示させたがること、または触覚インターフェースを避けたがることを示し得る。
別の例では、視聴者プロファイルは、特定の視聴者について視聴されたホログラフィック商品の履歴を示す。例えば、視聴者プロファイリングモジュール５２８は、視聴者が以前に、ホログラフィックによって表示された机を視聴したと決定する。そのようなものとして、ＬＦディスプレイシステム５００は、視聴者もまた高く評価することができる別の同様の机、または以前に見た机に適する可能性のあるオフィス椅子を表示することができる。
いくつかの実施形態では、視聴者プロファイルはまた、特定の視聴者ではなく、視聴者のグループの特徴および好みを示し得る。例えば、視聴者プロファイリングモジュール５２８は、家に実装されたＬＦディスプレイシステム５００によって家族のための視聴者プロファイルを生成し得る。一例では、視聴者プロファイリングモジュール５２８は、家族の集合的利益を説明する特徴により家族のために視聴者プロファイルを作成する。プロファイルは、様々な関心を持ち得る家族のメンバーの割合をさらに分類し得る。
視聴者プロファイリングモジュール５２８は、特定の１人または複数の視聴者に関連付けられたプロファイルに、１つまたは複数のサードパーティシステムからアクセスして、視聴者プロファイルを構築することもできる。例えば、視聴者は、その視聴者のソーシャルメディアアカウントにリンクされたサードパーティベンダーを使用して、商品を購入する。したがって、視聴者の購入は視聴者のソーシャルメディアアカウントにリンクされている。視聴者がＬＦディスプレイシステム５００を実装している小売店舗に入ると、視聴者プロファイリングモジュール５２８は、視聴者のソーシャルメディアアカウントからの情報にアクセスして、視聴者プロファイルを構築する（または拡張する）ことができる。
いくつかの実施形態では、データストア５２２は、視聴者プロファイリングモジュール５２８によって生成、更新、および／または維持された視聴者プロファイルを記憶する視聴者プロファイルストアを含む。視聴者プロファイルは、視聴者プロファイリングモジュール５２８によって、いつでもデータストア内で更新され得る。例えば、一実施形態では、視聴者プロファイルストアは、特定の視聴者が、ＬＦディスプレイシステム５００によって提供されたホログラフィックコンテンツを見るときに、その特定の視聴者に関する情報を受信し、その視聴者の視聴者プロファイルに記憶する。この例では、視聴者プロファイリングモジュール５２８は、視聴者を認識し、視聴者が提示されたホログラフィックコンテンツを見るときに視聴者を確実に識別することができる顔認識アルゴリズムを含む。例示のために、視聴者がＬＦディスプレイシステム５００の標的領域に入ると、追跡システム５５０が、視聴者の画像を取得する。視聴者プロファイリングモジュール５２８は、キャプチャされた画像を入力し、顔認識アルゴリズムを使用して視聴者の顔を識別する。識別された顔は、プロファイルストア内の視聴者プロファイルに関連付けられ、そのため、その視聴者に関して取得されたすべての入力情報が、その視聴者のプロファイルに記憶され得る。視聴者プロファイリングモジュールはまた、カード識別スキャナ、音声識別子、無線周波数識別（ＲＦＩＤ）チップスキャナ、バーコードスキャナなどを利用して、視聴者を確実に識別することができる。
視聴者プロファイリングモジュール５２８が視聴者を確実に識別できる実施形態では、視聴者プロファイリングモジュール５２８は、ＬＦディスプレイシステム５００への各視聴者の各訪問を決定することができる。次に、視聴者プロファイリングモジュール５２８は、各訪問の日時を各視聴者の視聴者プロファイルに記憶することができる。同様に、視聴者プロファイリングモジュール５２８は、感覚フィードバックシステム５４０、追跡システム５５０、および／またはＬＦディスプレイアセンブリ５１０の任意の組み合わせから受信された、視聴者からの入力を、入力が発生するたびに記憶することができる。視聴者プロファイリングモジュール５２８は、コントローラ５２０の他のモジュールまたは構成要素から視聴者に関するさらなる情報を追加的に受信することができ、この情報は、視聴者プロファイルとともに記憶され得る。次に、コントローラ５２０の他の構成要素も、その視聴者に提供される後のコンテンツを決定するために、記憶された視聴者プロファイルにアクセスすることができる。
ＬＦ処理エンジン５３０は、ライトフィールドデータ、ならびにＬＦディスプレイシステム５００によってサポートされるすべての感覚領域のデータからなるホログラフィックコンテンツを生成する。例えば、ＬＦ処理エンジン５３０は、ＬＦディスプレイアセンブリ５１０によって実行されると、ＬＦディスプレイアセンブリ５１０にホログラフィックコンテンツを提示させる、ラスタライズ化されたフォーマットの４Ｄ座標（「ラスタライズ化されたデータ」）を生成することができる。ＬＦ処理エンジン５３０は、データストア５２２からラスタライズ化されたデータにアクセスすることができる。さらに、ＬＦ処理エンジン５３０は、ベクトル化されたデータセットからラスタライズされたデータを構築することができる。ベクトル化されたデータを以下に説明する。ＬＦ処理エンジン５３０はまた、ホログラフィックオブジェクトを拡張する感覚コンテンツを提供するために必要な感覚命令を生成することができる。上記のように、感覚命令は、ＬＦディスプレイシステム５００によって実行されると、触覚表面、サウンドフィールド、およびＬＦディスプレイシステム５００によってサポートされる他の形態の感覚エネルギーを生成することができる。ＬＦデータ処理エンジン５３０は、データストア５２２から感覚命令にアクセスする、または、感覚命令を構築して、ベクトル化されたデータセットを形成することができる。全体として、４Ｄ座標および感覚データは、ホログラフィックおよび感覚コンテンツを生成するためにＬＦディスプレイシステムによって実行可能な表示命令として、ホログラフィックコンテンツを表す。より一般的には、ホログラフィックコンテンツは、理想的なライトフィールド座標を有するＣＧコンテンツ、ライブアクションコンテンツ、ラスタライズ化されたデータ、ベクトル化データ、リレーのセットによって輸送される電磁エネルギー、エネルギーデバイスのグループに送信される命令、１つ以上のエネルギー面上のエネルギー位置、表示面から投影されるエネルギー伝搬経路のセット、視聴者または聴衆に見えるホログラフィックオブジェクトの形態、および多くの他の同様の形態を採ることができる。
ＬＦディスプレイシステム５００内の様々なエネルギー源を通るエネルギーの流れを説明するラスタライズされたデータの量は、信じられないほど大量である。データストア５２２からアクセスされる場合、ラスタライズされたデータをＬＦディスプレイシステム５００に表示することは可能であるが、（例えば、ネットワークインターフェース５２４を介して）効率的に送信し、受信し、その後、ラスタライズされたデータをＬＦディスプレイシステム５００に表示することは不可能である。例えば、ＬＦディスプレイシステム５００によるホログラフィック投影用の短いフィルムを表すラスタライズされたデータを取り上げる。この例では、ＬＦディスプレイシステム５００は、数ギガピクセルを含むディスプレイを含み、ラスタライズされたデータは、ディスプレイ上の各ピクセル場所の情報を含む。ラスタライズされたデータの対応するサイズは膨大であり（例えば、フィルム表示時間の毎秒多ギガバイト）、ネットワークインターフェース５２４を介した商用ネットワーク上での効率的な転送には管理できない。効率的な転送の問題は、ホログラフィックコンテンツのライブストリーミングを含むアプリケーションで増幅される可能性がある。感覚フィードバックシステム５４０または追跡モジュール５２６からの入力を使用してインタラクティブな体験が望まれる場合、単にラスタライズされたデータをデータストア５２２に記憶することに関する追加の問題が生じる。インタラクティブな体験を可能にするために、ＬＦ処理エンジン５３０によって生成されたライトフィールドコンテンツは、感覚または追跡入力に応答してリアルタイムで修正され得る。言い換えれば、場合によっては、ＬＦコンテンツは、データストア５２２から単純に読み取ることができない。
したがって、いくつかの構成では、ＬＦディスプレイシステム５００によって表示するためのホログラフィックコンテンツを表すデータは、ベクトル化されたデータフォーマット（「ベクトル化されたデータ」）でＬＦ処理エンジン５３０に転送され得る。ベクトル化されたデータは、ラスタライズされたデータよりも桁違いに小さい場合がある。さらに、ベクトル化されたデータは、データの効率的な共有を可能にするデータセットサイズを有しながら、高い画質を提供する。例えば、ベクトル化されたデータは、より密度の高いデータセットから派生した疎なデータセットである可能性がある。したがって、ベクトル化されたデータは、密度の高いラスタライズされたデータから疎なベクトル化されたデータがどのようにサンプリングされるかに基づいて、画質とデータ送信サイズとの間の調整可能なバランスを有する可能性がある。ベクトル化されたデータを生成するための調整可能なサンプリングにより、特定のネットワーク速度での画質の最適化が可能になる。結果として、ベクトル化されたデータは、ネットワークインターフェース５２４を介したホログラフィックコンテンツの効率的な送信を可能にする。ベクトル化されたデータにより、ホログラフィックコンテンツを商用ネットワーク経由でライブストリーミングすることもできる。
いくつかの実施形態では、ＬＦディスプレイシステム５００は、ネットワークを介して符号化されたフォーマットでホログラフィックコンテンツを受信するように構成され得、さらに、ホログラフィックコンテンツを視聴者に提示するためのフォーマットに復号するように構成され得る。いくつかの実施形態では、符号化されたフォーマットはベクトル化されたフォーマットであり得、復号されたフォーマットはラスタライズされたフォーマットであり得る。要約すると、ＬＦ処理エンジン５３０は、データストア５２２からアクセスされるラスタライズされたデータ、データストア５２２からアクセスされるベクトル化されたデータ、またはネットワークインターフェース５２４を介して受信されるベクトル化されたデータから導出されたホログラフィックコンテンツを生成することができる。様々な構成において、ベクトル化されたデータは、データ送信の前に符号化され、ＬＦコントローラ５２０による受信の後に復号され得る。いくつかの例では、ベクトル化されたデータは、データ圧縮に関連する追加のデータセキュリティおよびパフォーマンスの向上のために符号化される。例えば、ネットワークインターフェースによって受信されたベクトル化されたデータは、ホログラフィックストリーミングアプリケーションから受信された符号化され、ベクトル化されたデータであり得る。いくつかの例では、ベクトル化されたデータは、デコーダ、ＬＦ処理エンジン５３０、またはこれらの両方が、ベクトル化されたデータ内の符号化された情報コンテンツにアクセスすることを必要とし得る。エンコーダおよび／またはデコーダシステムは、顧客に対して利用可能である場合があるか、またはサードパーティベンダーにライセンス供与されている場合がある。
ベクトル化されたデータは、インタラクティブな体験をサポートし得る方法で、ＬＦディスプレイシステム５００によってサポートされる各感覚領域の各々の情報を含む。例えば、インタラクティブなホログラフィック体験のためのベクトル化されたデータは、ＬＦディスプレイシステム５００によってサポートされる感覚領域の各々に正確な物理学を提供することができる任意のベクトル化された特性を含み得る。ベクトル化された特性は、合成的にプログラムされ、キャプチャされ、計算により評価され得るなどの任意の特性を含み得る。ＬＦ処理エンジン５３０は、ベクトル化されたデータのベクトル化された特性をラスタライズされたデータに変換するように構成され得る。次に、ＬＦ処理エンジン５３０は、ＬＦディスプレイアセンブリ５１０を使用してベクトル化されたデータから変換されたホログラフィックコンテンツを投影することができる。様々な構成で、ベクトル化された特性には、１つ以上の赤／緑／青／アルファチャネル（ＲＧＢＡ）＋深度画像、１つの高解像度中央画像および低解像度の他のビューを含み得る様々な解像度での深度情報の有無にかかわらないマルチビュー画像、アルベドおよび反射率、表面法線、他の光学効果、表面識別、幾何学的オブジェクト座標、仮想カメラ座標、表示平面の場所、照明座標、表面の接触剛性、接触延性、接触強度、サウンドフィールドの振幅および座標、環境条件、テクスチャまたは温度の機械受容器に関連する体性感覚エネルギーベクトル、音声、ならびに他の感覚領域特性の座標が含まれ得る。他の多くのベクトル化された特性も可能である。
ＬＦディスプレイシステム５００は、インタラクティブな視聴体験を生成することもできる。すなわち、ホログラフィックコンテンツは、視聴者の場所、ジェスチャ、インタラクション、ホログラフィックコンテンツとのインタラクションに関する情報、または視聴者プロファイリングモジュール５２８および／もしくは追跡モジュール５２６から導出された他の情報を含む入力刺激に応答することができる。例えば、一実施形態では、ＬＦ処理エンジン５３０は、ネットワークインターフェース５２４を介して受信されたリアルタイムパフォーマンスのベクトル化されたデータを使用して、インタラクティブな視聴体験を作成する。別の例では、ホログラフィックオブジェクトが、視聴者のインタラクションに応じて直ちに特定の方向に移動する必要がある場合、ＬＦ処理エンジン５３０は、ホログラフィックオブジェクトがその要求された方向に移動するように、シーンのレンダリングを更新することができる。これには、ＬＦ処理エンジン５３０が、ベクトル化されたデータセットを使用して、適切なオブジェクトの配置および動き、衝突検出、オクルージョン、色、陰影、照明などを有する３Ｄグラフィカルシーンに基づいて、リアルタイムでライトフィールドをレンダリングし、視聴者のインタラクションに正しく応答することが必要であり得る。ＬＦ処理エンジン５３０は、ベクトル化されたデータを、ＬＦディスプレイアセンブリ５１０による提示のためにラスタライズされたデータに変換する。
ラスタライズされたデータには、リアルタイムのパフォーマンスを表すホログラフィックコンテンツ命令および感覚命令（表示命令）が含まれる。ＬＦディスプレイアセンブリ５１０は、表示命令を実行することによって、リアルタイムのパフォーマンスのホログラフィックおよび感覚コンテンツを同時に投影する。ＬＦディスプレイシステム５００は、追跡モジュール５２６および視聴者プロファイリングモジュール５２８を用いて、提示されたリアルタイムのパフォーマンスのコンテンツとの視聴者のインタラクション（例えば、音声応答、タッチなど）を監視する。視聴者のインタラクションに応答して、ＬＦ処理エンジンは、視聴者に表示するための追加のホログラフィックおよび／または感覚コンテンツを生成することによって、インタラクティブな体験を作成することができる。
例示のために、自転車を表すホログラフィックオブジェクトを視聴者に生成するＬＦ処理エンジン５３０を含むＬＦディスプレイシステム５００の例示的な一実施形態を考慮する。視聴者は、自転車を表すホログラフィックオブジェクトにタッチするように移動し得る。それに応じて、追跡システム５５０は、ホログラフィックオブジェクトに対する視聴者の手の動きを追跡する。視聴者の動きは追跡システム５５０によって記録され、コントローラ５２０に送信される。追跡モジュール５２６は、視聴者の手の動きを連続的に決定し、決定された動きをＬＦ処理エンジン５３０に送信する。ＬＦ処理エンジン５３０は、視聴者の手の配置を決定し、ホログラフィックオブジェクトに必要な変更（位置、色、またはオクルージョンなど）を含むために、グラフィックスのリアルタイムレンダリングを調整する。ＬＦ処理エンジン５３０は、ＬＦディスプレイアセンブリ５１０（および／または感覚フィードバックシステム５４０）に、体積触覚投影システムを使用して（例えば、超音波スピーカを使用して）触覚表面を生成するように指示する。生成された触覚表面は、ホログラフィックオブジェクトの少なくとも一部に対応し、ホログラフィックオブジェクトの外面の一部またはすべてと実質的に同じ空間を占有する。ＬＦ処理エンジン５３０は追跡情報を使用して、ＬＦディスプレイアセンブリ５１０に、自転車にタッチする視覚的および触覚的知覚の両方を視聴者が与えられるように、触覚表面の場所を、レンダリングされたホログラフィックオブジェクトの場所とともに移動するよう動的に指示する。より簡単に言えば、視聴者がホログラフィック自転車にタッチしている自分の手を見ると、視聴者は同時に、手がホログラフィック自転車にタッチし、タッチに応答して自転車が位置または動きを変更することを示す触覚フィードバックを感じる。いくつかの例では、データストア５２２からアクセスされるインタラクティブ自転車を提示するのではなく、インタラクティブ自転車は、ネットワークインターフェース５２４を介してライブストリーミングアプリケーションから受信されるホログラフィックコンテンツの一部として受信され得る。
ＬＦ処理エンジン５３０はまた、ＬＦディスプレイシステム５００によって表示するためのホログラフィックコンテンツを作成することができる。重要なことには、ここで、表示のためのホログラフィックコンテンツを作成することは、表示のためのホログラフィックコンテンツをアクセスすること、または受信することとは異なる。すなわち、コンテンツを作成するとき、ＬＦ処理エンジン５３０は、以前に生成および／または受信されたコンテンツをアクセスするのではなく、表示のための全く新しいコンテンツを生成する。ＬＦ処理エンジン５３０は、追跡システム５５０、感覚フィードバックシステム５４０、視聴者プロファイリングモジュール５２８、追跡モジュール５２６、またはそれらの何らかの組み合わせからの情報を使用して、表示のためのホログラフィックコンテンツを作成することができる。いくつかの例では、ＬＦ処理エンジン５３０は、ＬＦディスプレイシステム５００の要素からの情報（例えば、追跡情報および／または視聴者プロファイル）にアクセスし、それに応じて、その情報に基づいてホログラフィックコンテンツを作成し、作成されたホログラフィックコンテンツを、ＬＦディスプレイシステム５００を使用して表示することができる。作成されたホログラフィックコンテンツは、ＬＦディスプレイシステム５００によって表示されるときに、他の感覚コンテンツ（例えば、タッチ、音声、または匂い）で拡張され得る。さらに、ＬＦディスプレイシステム５００は、作成されたホログラフィックコンテンツが将来表示され得るように、作成されたホログラフィックコンテンツを記憶することができる。
ＬＦディスプレイシステムのための動的コンテンツ生成
いくつかの実施形態では、ＬＦ処理エンジン５３０は、人工知能（ＡＩ）モデルを組み込んで、ＬＦディスプレイシステム５００によって表示するためのホログラフィックコンテンツを作成する。ＡＩモデルは、回帰モデル、ニューラルネットワーク、分類器、または他のＡＩアルゴリズムを含むがこれらに限定されない、教師付きもしくは教師なし学習アルゴリズムを含み得る。ＡＩモデルは、視聴者の動作に関する情報を含み得る、ＬＦディスプレイシステム５００によって（例えば、追跡システム５５０によって）記録された視聴者情報に基づいて、視聴者の好みを決定するために使用することができる。
ＡＩモデルは、ホログラフィックコンテンツを作成するために、データストア５２２からの情報にアクセスすることができる。例えば、ＡＩモデルは、データストア５２２内の１つまたは複数の視聴者プロファイルからの視聴者情報にアクセスすることができるか、またはＬＦディスプレイシステム５００の様々な構成要素から視聴者情報を受信することができる。例示のために、ＡＩモデルは、他の様々なホログラフィック商品の閲覧履歴を検討するときに、視聴者が別のホログラフィック商品を閲覧することを評価する可能性があると決定し得る。ＡＩモデルはまた、学習された各視聴者の好みを、データストア５２２の視聴者プロファイルストアに記憶することができる。いくつかの例では、ＡＩモデルは、視聴者のグループではなく、個々の視聴者のためにホログラフィックコンテンツを作成することができる。
視聴者の特徴を識別し、反応を識別し、かつ／または識別された情報に基づいてホログラフィックコンテンツを生成するために使用され得るＡＩモデルの一例が、現在の層のノードの値が前の層のノードでの値の変換である、ノードのレイヤを有する畳み込みニューラルネットワークモデルである。モデルにおける変換は、現在の層および前の層を接続する、重みおよびパラメータのセットを介して決定される。例えば、ＡＩモデルは、ノードの５つの層、すなわち層Ａ、Ｂ、Ｃ、Ｄ、およびＥを含み得る。層Ａから層Ｂへの変換は関数Ｗ１により与えられ、層Ｂから層Ｃへの変換はＷ２により与えられ、層Ｃから層Ｄへの変換はＷ３により与えられ、層Ｄから層Ｅへの変換はＷ４により与えられる。いくつかの例では、変換はまた、モデル内の前の層間を変換するために使用される重みおよびパラメータのセットを介して決定され得る。例えば、層Ｄから層Ｅへの変換Ｗ４は、層Ａから層Ｂへの変換Ｗ１を遂行するために使用されるパラメータに基づき得る。
モデルへの入力は、畳み込み層Ａ上に符号化された、追跡システム５５０によって撮影された画像であり得、モデルの出力は、出力層Ｅから復号されたホログラフィックコンテンツである。代替的または追加的に、出力は、画像内で決定された視聴者の特徴であり得る。この例では、ＡＩモデルは、識別層Ｃの視聴者の特徴を表す、画像内の潜在情報を識別する。ＡＩモデルは、畳み込み層Ａの次元を識別層Ｃの次元まで低減して、画像内の任意の特徴、動作、応答などを識別する。いくつかの例では、ＡＩモデルは、次に、識別層Ｃの次元を増加してホログラフィックコンテンツを生成する。
追跡システム５５０からの画像は、畳み込み層Ａに符号化される。畳み込み層Ａに入力された画像は、識別層Ｃの様々な特徴および／または反応情報などに関連付けられ得る。これらの要素間の関連情報は、対応する層間に変換のセットを適用することによって検索され得る。すなわち、ＡＩモデルの畳み込み層Ａは、符号化された画像を表し、モデルの識別層Ｃは、笑顔の視聴者を表す。所与の画像内の笑顔の視聴者は、畳み込み層Ａの空間内の画像の画素値に変換Ｗ１およびＷ２を適用することによって識別され得る。変換の重みおよびパラメータは、画像に含まれる情報と笑顔の視聴者の識別との間の関係を示し得る。例えば、重みおよびパラメータは、画像内の笑顔の視聴者を表す情報に含まれる形状、色、サイズなどの量子化であり得る。重みおよびパラメータは、履歴データ（例えば、以前に追跡された視聴者）に基づき得る。
画像内の笑顔の視聴者は、識別層Ｃで識別される。識別層Ｃは、画像内の笑顔の視聴者に関する潜在情報に基づいて識別された笑顔の視聴者を表す。
画像内の識別された笑顔の視聴者を使用して、ホログラフィックコンテンツを生成することができる。ホログラフィックコンテンツを生成するために、ＡＩモデルは、識別層Ｃから開始して、変換Ｗ２およびＷ３を識別層Ｃの所与の識別された笑顔の視聴者の値に適用する。変換は、出力層Ｅのノードのセットをもたらす。変換の重みおよびパラメータは、識別された笑顔の視聴者と特定のホログラフィックコンテンツおよび／または好みとの間の関係を示し得る。ホログラフィックコンテンツが、出力層Ｅのノードから直接出力される場合もあれば、コンテンツ生成システムが、出力層Ｅのノードをホログラフィックコンテンツに復号する場合もある。例えば、出力が、識別された特徴のセットである場合、ＬＦ処理エンジン５３０は、その特徴を使用してホログラフィックコンテンツを生成することができる。
追加的に、ＡＩモデルは、中間層として知られている層を含み得る。中間層は、画像に対応しない層であって、特徴／反応などを識別するか、またはホログラフィックコンテンツを生成する。例えば、所与の例では、層Ｂは、畳み込み層Ａと識別層Ｃとの間の中間層である。層Ｄは、識別層Ｃと出力層Ｅとの間の中間層である。隠れ層は、データ中では観測されないが、特徴を識別してホログラフィックコンテンツを生成するときに、画像の要素間の関係を支配し得る識別の様々な態様の潜在表現である。例えば、隠れ層のあるノードが、「笑っているヒトの笑顔」の共通点を共有する入力値および識別値と強いつながり（例えば、大きな重み値）を有している場合がある。別の例として、隠れ層の別のノードが、「怖がっているヒトの悲鳴」の共通点を共有する入力値および識別値と強いつながりを有している場合がある。当然のことながら、ニューラルネットワークには任意の数のリンケージが存在する。追加的に、各中間層は、例えば、残差ブロック、畳み込み層、プーリング操作、スキップ接続、連結などの機能の組み合わせである。任意の数の中間層Ｂが、畳み込み層を識別層まで減らすように機能し得、任意の数の中間層Ｄが、識別層を出力層まで増加させるように機能し得る。
一実施形態では、ＡＩモデルは、強化学習でトレーニングされた決定論的方法を含む（それにより、強化学習モデルを作成する）。モデルは、追跡システム５５０からの測定値を入力として、および作成されたホログラフィックコンテンツへの変更を出力として使用して、パフォーマンスの品質を高めるようにトレーニングされる。
強化学習は、数値的な報酬信号を最大化するために、機械が「何をすべきか」（状況を動作にマッピングする方法）を学習する機械学習システムである。学習器（例えば、ＬＦ処理エンジン５３０）は、取るべき動作（例えば、所定のホログラフィックコンテンツの生成）を告げられていないが、代わりに、動作を試行することによって、どの動作が最大の報酬をもたらすか（例えば、より多くのに歓声を上げさせることによってホログラフィックコンテンツの品質を高めること）を発見する。場合によっては、動作は、即時報酬だけでなく、次の状況、かつそれを通じて、その後のすべての報酬にも影響を及ぼし得る。これらの２つの特徴（試行錯誤による探索および遅延報酬）が、強化学習の２つの際立った特徴である。
強化学習は、学習方法を特徴づけることによってではなく、学習問題を特徴づけることによって定義される。基本的に、強化学習システムは、目標を達成するために環境とインタラクションする学習エージェントが直面している問題の重要な態様をキャプチャする。つまり、ジーンズブランドの広告を生成する例では、強化学習システムは、現場の視聴者に関する情報（例えば、年齢、気質など）をキャプチャする。このようなエージェントは、環境の状態を感知し、状態に影響を与える動作を実行して、１つまたは複数の目標を達成する（例えば、最も多くのインプレッションにつながるコンテンツの作成することや、最も多くのコンバージョンにつながるコンテンツの作成すること）。最も基本的な形態では、強化学習の定式化は、学習器のための３つの態様、すなわち、感覚、動作、および目標を含む。
強化学習で発生する課題ののうちの１つが、探索と活用との間のトレードオフである。システム内の報酬を増加させるために、強化学習エージェントは、過去に試行し、報酬を生み出すのに効果的であることがわかった動作を好む。しかしながら、報酬を生み出す動作を発見するために、学習エージェントは、以前に選択したことのない動作を選択する。エージェントは、報酬を取得するために、すでに知っている情報を「活用」するが、将来、より良い動作を選択するために、情報を「探索」する。学習エージェントは、様々な動作を試み、依然として新しい動作を試行しながら、最良と思われる動作を次第に好むようになる。確率論的タスクでは、一般的に、各動作が、期待される報酬に対する信頼できる見積もりを得るために、何度も試行される。例えば、長い時間が経過した後に視聴者が笑うことになるであろうことをＬＦ処理エンジンが知っているホログラフィックコンテンツをＬＦ処理エンジンが作成する場合、ＬＦ処理エンジンは、視聴者が笑うまでの時間が減少するように、ホログラフィックコンテンツを変更することができる。
さらに、強化学習は、不確実環境とインタラクションする目標指向エージェントの問題全体を考慮する。強化学習エージェントは、明確な目標を有し、環境の態様を感知し得、高い報酬（すなわち、高いコンバージョン率）を受信するための動作を選択し得る。さらに、エージェントは、一般的に、直面する環境に関する重要な不確実性にかかわらず動作する。強化学習が計画を含む場合、システムは、計画とリアルタイムの動作選択との間の相互作用、ならびに環境要素をどのように取得して改善するかという問題に対処する。強化学習が進展するためには、重要なサブ問題を分離して研究する必要があり、サブ問題は、完全でインタラクティブなゴールシークエージェントで明確な役割を果たす。
強化学習問題は、目標を達成するためにインタラクションが処理され、動作が実行される機械学習問題のフレーミングである。学習器および意思決定器はエージェントと呼ばれる（例えば、ＬＦ処理エンジン５３０）。エージェントの外部のすべてのものを含む、エージェントがインタラクションするものは環境と呼ばれる（例えば、現場の視聴者、ショッピングモールの視聴者、地下鉄の電車の視聴者など）。これら２つは継続的にインタラクションし、エージェントは動作を選択し（例えば、ホログラフィックコンテンツを作成し）、環境は、それらの動作に応答して、エージェントに新しい状況を提示する。環境はまた、エージェントが時間の経過とともに最大化しようとする特別の数値的な価値である報酬を生じさせる。ある文脈では、報酬は、ホログラフィックコンテンツに対する視聴者の肯定的な反応を最大化するように機能する。環境の完全な仕様は、強化学習問題の１つの実例であるタスクを定義する。
より多くの文脈を提供するために、エージェント（例えば、ＬＦ処理エンジン５３０）および環境は、離散時間ステップのシーケンスの各々、すなわち、ｔ＝０、１、２、３などにおいてインタラクションする。各時間ステップｔにおいて、エージェントは、環境の状態ｓｔの何らかの表現（例えば、追跡システム５５０からの測定値）を受信する。状態ｓｔはＳ内にあり、Ｓは、可能性がある状態のセットである。状態ｓｔおよび時間ステップｔに基づいて、エージェントは、動作を選択する（例えばジーンズブランドのセールを提案する）。動作ａｔはＡ（ｓｔ）内にあり、Ａ（ｓｔ）は、可能性がある動作のセットである。１つの時間状態の後、部分的にはエージェントの動作の結果として、エージェントは、数値的な報酬ｒｔ＋１を受信する。状態ｒｔ＋１はＲ内にあり、Ｒは、可能性がある報酬のセットである。エージェントが報酬を受信すると、エージェントは、新しい状態ｓｔ＋１を選択する。
各タイムステップにおいて、エージェントは、状態から、各可能性がある動作を選択する確率へのマッピングを実装する。このマッピングはエージェントのポリシーと呼ばれ、πｔで表され、ここで、πｔ（ｓ，ａ）は、ｓｔ＝ｓであればａｔ＝ａとなる確率である。強化学習方法は、エージェントの動作から生じる状態および報酬の結果として、エージェントがポリシーをどのように変更するかを指示することができる。エージェントの目標は、時間の経過とともに、エージェントが受信する報酬の合計額を最大化することである。
この強化学習フレームワークは柔軟性があり、多くの異なる方法で多くの異なる問題（例えば、ホログラフィックコンテンツの生成）に適用され得る。このフレームワークは、感覚、記憶、および制御装置の詳細が何であれ、目標指向の行動を学習するすべての問題（または目的）が、エージェントとその環境との間を行き来する３つの信号、すなわち、エージェントによって行われた選択（動作）を表す１つの信号、選択が行われた根拠（状態）を表す１つの信号、およびエージェントの目標（報酬）を定義する１つの信号にまとめられ得ることを提案する。
当然のことながら、ＡＩモデルは、任意の数の機械学習アルゴリズムを含み得る。使用され得るいくつかの他のＡＩモデルは、線形および／またはロジスティック回帰、分類および回帰ツリー、ｋ平均法クラスタリング、ベクトル量子化などである。いずれの場合も、一般に、ＬＦ処理エンジン５３０が、追跡モジュール５２６および／または視聴者プロファイリングモジュール５２８から入力を取得し、機械学習モデルが、それに応じてホログラフィックコンテンツを作成する。同様に、ＡＩモデルは、ホログラフィックコンテンツのレンダリングを指向し得る。
ＬＦ処理エンジン５３０は、表示されているホログラフィック商品に基づいてホログラフィックコンテンツを作成することができる。例えば、示されているホログラフィック商品は、商品の特徴を説明するメタデータのセットに関連付けられ得る。メタデータは、例えば、色、材料、他の購入者による評価、コスト、売上などを含み得る。ＬＦ処理エンジン５３０は、ホログラフィック商品を説明するメタデータのいずれかにアクセスし、提示するホログラフィックコンテンツを生成し得る。例えば、ソファを表すホログラフィック商品は、視聴者の家に実装されたＬＦディスプレイシステム５００によって提示されている。ＬＦ処理エンジン５３０は、ソファのメタデータにアクセスして、家の壁用にホログラフィックコンテンツを作成し、ソファを補完する。ここで、メタデータは、色および素材を含み得る。ＬＦ処理エンジン５３０は、メタデータをＡＩモデルに入力し、それに応じて、家の壁に表示するためのホログラフィックコンテンツを受信する。
一例では、ＬＦ処理エンジン５３０は、従来の２次元（２Ｄ）フィルムを、ＬＦディスプレイシステムによる表示のためにホログラフィックコンテンツに変換することができる。例えば、ＬＦ処理エンジン５３０は、従来のフィルムをＡＩモデルに入力することができ、ＡＩモデルは、従来のフィルムの任意の部分をホログラフィックコンテンツに変換する。一例では、ＡＩモデルは、２次元データをホログラフィックデータに変換することによって訓練された機械学習アルゴリズムを使用することによって、従来のフィルムをホログラフィックコンテンツに変換することができる。様々な状況で、トレーニングデータは以前に生成された、作成された、またはその２つの組み合わせたものであってもよい。次に、ＬＦディスプレイシステム５００は、フィルムの従来の２次元バージョンではなく、フィルムのホログラフィックバージョンを表示することができる。
デジタルサイネージコンテンツ配信システム
図５Ｂは、１つ以上の実施形態による、デジタルサイネージ用のＬＦディスプレイシステムを組み込んだＬＦデジタルサイネージコンテンツ配信システム５６０のブロック図である。図５Ｂによって示されるＬＦデジタルサイネージコンテンツ配信システム５６０は、１つ以上のクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂ、ネットワーク５７０、１つ以上のサードパーティシステム５８０、ならびにオンラインシステム５９０を備える。代替的な構成では、異なるおよび／または追加の構成要素が、ＬＦデジタルサイネージコンテンツ配信システム５６０に含まれ得る。例えば、オンラインシステム５９０は、ソーシャルネットワーキングシステム、コンテンツ共有ネットワーク、または視聴者にコンテンツを提供する別のシステムを含み得る。
クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、ホログラフィックコンテンツを表示し、入力を受信し、ネットワーク５７０を介してデータを送信および／または受信することができる。クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、ＬＦディスプレイシステム５００の実施形態である。そのため、各クライアントＬＦディスプレイシステムは、ネットワーク５７０およびＬＦディスプレイアセンブリ（例えば、ＬＦディスプレイアセンブリ５１０）を介してホログラフィックコンテンツを受信するように構成されたコントローラを含む。ＬＦディスプレイアセンブリは、ホログラフィックコンテンツを、ホログラフィックオブジェクトボリューム内のデジタルサイネージとして、ビューイングボリューム内に位置する視聴者に表示する１つ以上のＬＦディスプレイモジュール（例えば、ＬＦディスプレイモジュール５１２）を含み得る。クライアントＬＦディスプレイシステム５００Ａと５００Ｂは、ネットワーク５７０を介して通信するように構成される。いくつかの実施形態では、クライアントＬＦディスプレイシステム５００Ａと５００Ｂは、クライアントＬＦディスプレイシステムの視聴者がオンラインシステム５９０とインタラクトすることを可能にするアプリケーションを実行する。例えば、クライアントＬＦディスプレイシステム５００Ａは、ブラウザアプリケーションを実行して、ネットワーク５７０を介したクライアントＬＦディスプレイシステム５００Ａとオンラインシステム５９０との間のインタラクションを可能にする。他の実施形態では、クライアントＬＦディスプレイシステム５００Ａは、ＩＯＳ（登録商標）またはＡＮＤＲＯＩＤ（商標）などのクライアントＬＦディスプレイシステム５００Ａのネイティブオペレーティングシステム上で実行されるアプリケーションプログラミングインターフェース（ＡＰＩ）を介してオンラインシステム５９０とインタラクトする。前に考察したように、効率的な転送速度のために、クライアントＬＦディスプレイシステム５００Ａと５００Ｂのデータは、ベクトル化されたデータとしてネットワーク５７０を介して転送され得る。各クライアントＬＦディスプレイシステムのＬＦ処理エンジン（例えば、ＬＦ処理エンジン５３０）は、ベクトル化されたデータを復号し、対応するＬＦディスプレイアセンブリ（例えば、ＬＦディスプレイアセンブリ５１０）に表示するためにラスタライズされたフォーマットに変換し得る。
クライアントＬＦディスプレイシステム５００Ａと５００Ｂは、有線および／または無線通信システムの両方を使用して、ローカルエリアおよび／またはワイドエリアネットワークの任意の組み合わせを含み得るネットワーク５７０を介して通信するように構成される。いくつかの実施形態では、ネットワーク５７０は、標準的な通信技術および／またはプロトコルを使用する。例えば、ネットワーク５７０は、イーサネット、８０２．１１、マイクロ波アクセスの世界的な相互運用性（ＷｉＭＡＸ）、３Ｇ、４Ｇ、符号分割多元接続（ＣＤＭＡ）、デジタル加入者ライン（ＤＳＬ）などの技術を使用した通信リンクを含む。ネットワーク５７０を介した通信に使用されるネットワーキングプロトコルの例には、マルチプロトコルラベルスイッチング（ＭＰＬＳ）、伝送制御プロトコル／インターネットプロトコル（ＴＣＰ／ＩＰ）、ハイパーテキストトランスポートプロトコル（ＨＴＴＰ）、シンプルメール転送プロトコル（ＳＭＴＰ）、およびファイル転送プロトコル（ＦＴＰ）が含まれる。ネットワーク５７０を介して交換されるデータは、ハイパーテキストマークアップ言語（ＨＴＭＬ）または拡張可能マークアップ言語（ＸＭＬ）などの任意の好適なフォーマットを使用して表し得る。いくつかの実施形態では、ネットワーク５７０の通信リンクのすべてまたはいくつかは、任意の好適な技術または複数の技術を使用して暗号化され得る。
１つ以上のサードパーティシステム５８０は、オンラインシステム５９０と通信するためにネットワーク５７０に結合され得る。いくつかの実施形態では、サードパーティシステム５８０は、ネットワーク５７０を介してクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに配信されるホログラフィックコンテンツを通信するサイネージコントロールシステム、例えばコンテンツプロバイダである。いくつかの実施形態では、サードパーティシステム５８０はまた、ホログラフィックコンテンツをオンラインシステム５９０に通信し得、このオンラインシステムは、その後、ホログラフィックコンテンツをクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに配信し得る。各サードパーティシステム５８０は、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに提示するために配信することができるホログラフィックコンテンツアイテムを記憶し得るコンテンツストア５８２を有する。サードパーティシステム５８０は、支払いと引き換えに、１つ以上のクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂにホログラフィックコンテンツを提供し得る。一実施形態では、ホログラフィックコンテンツアイテムは、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに配信されるときに、オンラインシステム５９０により収集され得るコストに関連付けられ得る。
オンラインシステム５９０は、支払いと引き換えにホログラフィックコンテンツをクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに提供することによってホログラフィックコンテンツの配布を仲介する。ホログラフィックコンテンツは、ネットワーク５７０を介して提供される。オンラインシステム５９０は、視聴者プロファイルストア５９２、コンテンツストア５９４、トランザクションモジュール５９６、およびコンテンツ配信モジュール５９８を含む。他の実施形態では、オンラインシステム５９０は、様々なアプリケーションのための追加の、より少ない、または異なる構成要素を含み得る。システムアーキテクチャの詳細を曖昧にしないために、ネットワークインターフェース、セキュリティ機能、ロードバランサ、フェイルオーバーサーバ、管理およびネットワーク操作コンソールなどの従来の構成要素は示されていない。
オンラインシステム５９０の各視聴者は、視聴者プロファイルストア５９２に記憶されている視聴者プロファイルに関連付け得る。視聴者プロファイルは、視聴者によって明示的に共有された視聴者に関する宣言的情報を含み得、また、オンラインシステム５９０によって推論されたプロファイル情報を含み得る。いくつかの実施形態では、視聴者プロファイルは、それぞれが対応するオンラインシステム視聴者の１つ以上の属性を記述する複数のデータフィールドを含む。視聴者プロファイルに保存される情報の例には、経歴、人口統計、およびその他の種類の説明情報（職歴、学歴、性別、趣味または好み、場所など）が含まれる。視聴者プロファイルはまた、視聴者によって提供される他の情報、例えば、画像またはビデオを記憶し得る。特定の実施形態では、視聴者の画像は、画像に表示されたオンラインシステムの視聴者を識別する情報でタグ付けされ得、視聴者がタグ付けされた画像を識別する情報は、視聴者の視聴者プロファイルに記憶される。視聴者プロファイルストア５９２内の視聴者プロファイルはまた、追跡システム（例えば、追跡システム５５０）でキャプチャされ、追跡モジュール（例えば、追跡モジュール５２６）によって決定された、視聴者の監視された応答または視聴者の特徴を含む、コンテンツストア５９４内のコンテンツアイテムに対して実行される対応する視聴者によるアクションへの参照を維持し得る。視聴者の監視された応答は、ビューイングボリューム内の視聴者の位置、視聴者の動き、視聴者のジェスチャ、視聴者の顔の表情、および視聴者の視線を含み得る。ＬＦディスプレイアセンブリは、視聴者の監視された応答に応じて、ホログラフィックコンテンツの提示を更新し得る。視聴者の特徴には、視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、および購入履歴、を含み得る。ＬＦディスプレイアセンブリは、視聴者の特徴に応じてホログラフィックコンテンツの表示を更新し得る。いくつかの実施形態では、視聴者プロファイルストア５９２は、オンラインシステムによって推測される視聴者の特徴および視聴者情報を記憶し得る。いくつかの実施形態では、視聴者プロファイルは、１つ以上のクライアントＬＦディスプレイシステムによって提供される情報を記憶し得、これは、提供される情報および／または視聴者プロファイリングモジュール（例えば、視聴者プロファイリングモジュール５２８）から記録または推論される情報を含み得る。
視聴者プロファイルストア５９２内の視聴者プロファイルは、しばしば個人に関連付けられ、個人がオンラインシステム５９０を介して互いにインタラクトすることを可能にするが、視聴者プロファイルはまた、事業所または組織などのエンティティのために記憶され得る。これにより、エンティティは、他のオンラインシステムの視聴者とコンテンツを接続および交換するために、オンラインシステム５９０上にプレゼンスを確立することができる。エンティティは、エンティティの視聴者プロファイルに関連付けられたブランドページを使用して、自身、その製品に関する情報を投稿し得、またはオンラインシステム５９０の視聴者に他の情報を提供し得る。ブランドページに関連付けられた視聴者プロファイルには、エンティティ自体に関する情報が含まれている場合があり、視聴者にエンティティに関する背景データまたは情報データを提供する。一実施形態では、オンラインシステム５９０の他の視聴者は、ブランドページとインタラクトであり得る（例えば、ブランドページに接続して、ブランドページに投稿された情報を受信するか、またはブランドページから情報を受信する）。視聴者プロファイルストア５９２内の視聴者プロファイルは、対応する視聴者によって実行される相互作用への参照を維持し得る。上記のように、視聴者プロファイル（例えば、視聴者プロファイリングモジュール５２８）に記憶された任意の情報を、機械学習モデルを用いた入力として使用して、視聴者に表示するホログラフィックコンテンツを作成することができる。
コンテンツストア５９４は、１つ以上のクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂの視聴者に配信されるホログラフィックコンテンツなどのホログラフィックコンテンツを記憶する。ホログラフィックコンテンツの例は、広告（例えば、今後のセールの宣伝、ブランドの宣伝など）、発表（例えば、政治的スピーチ、激励のスピーチなど）、公共サービスのアラート（例えば、トルネードアラート、誘拐事件のアラート）、ニュースに関する情報（例えば、ニュースの見出し、スポーツスコアなど）、天気に関する情報（例えば、地域の天気予報、大気質指標など）、会場に関する情報（例えば、チケット売り場の営業時間、今後のショースケジュールなど）、交通状況や交通量状況に関する情報（例えば、交通情報、通行止めなど）、企業体に関する情報（例えば、オフィスディレクトリ、営業時間など）、パフォーマンス（例えば、コンサート、演劇など）、芸術的コンテンツ（例えば、彫刻、陶器など）、その他のホログラフィックコンテンツ、またはそれらの任意の組み合わせ、に及ぶ可能性がある。いくつかの実施形態では、オンラインシステムの視聴者は、コンテンツストア５９４によって記憶されるホログラフィックコンテンツを作成し得る。他の実施形態では、ホログラフィックコンテンツは、オンラインシステム５９０とは別のサードパーティシステム５８０から受信される。コンテンツストア５９４内のオブジェクトは、単一のコンテンツ、またはコンテンツの「アイテム」を表し得る。
トランザクションモジュール５９６は、支払いと引き換えに、１つ以上のクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂにホログラフィックコンテンツを提供する。一実施形態では、トランザクションモジュール５９６は、コンテンツストア５９４に記憶されたホログラフィックコンテンツが、ネットワーク５７０を介してクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに配信されるトランザクションを管理する。一実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび／または５００Ｂ、またはクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂのネットワーク化されたエンティティ所有者は、特定のホログラフィックコンテンツアイテムの支払いを提供し得、トランザクションは、トランザクションモジュール５９６によって管理し得る。あるいは、サードパーティシステム５８０は、トランザクションモジュール５９６に提供されるトランザクション料金と引き換えに、コンテンツストア５８２からＬＦディスプレイシステム５００Ａおよび／または５００Ｂにコンテンツを提供し得る。他の実施形態では、オンラインシステム５９０は、特定のエンティティのアカウントに課金するトランザクションモジュール５９６の有無にかかわらず、コンテンツをクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに直接配布し得る。いくつかの実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、トランザクションモジュール５９６によるホログラフィックコンテンツアイテムの提示のコストを請求される１人以上の視聴者プロファイルに関連付けられている。いくつかの実施形態では、ホログラフィックコンテンツアイテムは、購入して無期限に使用し得るか、または一定期間レンタルし得る。次に、トランザクションモジュール５９６によって全体的または部分的に収集された報酬は、ホログラフィックコンテンツアイテムのプロバイダに提供され得る。例えば、製品のホログラフィック広告を提供したサードパーティシステムは、ホログラフィック広告に関連して行われた製品購入について、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂから収集された報酬の一部を受け取り得る。
コンテンツ配信モジュール５９８は、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂにホログラフィックコンテンツアイテムを提供する。コンテンツ配信モジュール５９８は、クライアントＬＦディスプレイシステム５００Ａおよび／または５００Ｂに提示されるホログラフィックコンテンツアイテムを伴う要求をトランザクションモジュール５９６から受信し得る。コンテンツ配信モジュール５９８は、ホログラフィックコンテンツアイテムをコンテンツストア５９４から検索し、ホログラフィックコンテンツアイテムを、視聴者に表示するためにクライアントＬＦディスプレイシステム５００Ａおよび／または５００Ｂに提供する。
いくつかの実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、入力が受信されるかどうかに部分的に依存して、ホログラフィックコンテンツの提示のインスタンスを記録し得る。一実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、ホログラフィックコンテンツの提示に応答して入力を受信するように構成され得る。ホログラフィックコンテンツは、物理的な商品（例えば、一足の靴）、デジタル資産（例えば、ダウンロード可能なアルバム）、レンダリングされるサービス（例えば、住宅塗装）、その他のホログラフィック広告、またはそれらの組み合わせのホログラフィック広告である得る。ホログラフィック広告では、受け取った入力を使用して、ホログラフィック広告のインプレッションまたはリーチを確認し得る。いくつかの実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、視聴者がホログラフィックコンテンツの提示中に提供されるプロンプトへの応答を提供する場合、ホログラフィックコンテンツの提示のインスタンスを確認し得る。例えば、クライアントＬＦディスプレイシステム５００Ａは、ホログラフィックコンテンツの提示を確認するためにクライアントＬＦディスプレイシステム５００Ａによって使用される、視聴者からの音声入力（例えば、プロンプトが出された後）を受け取る。クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、受信した入力と他のメトリック（例えば、追跡システム５５０によって取得された情報）との組み合わせを使用して、ホログラフィックコンテンツの提示のインスタンスを確認し得る。他の実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、受信した入力に応答してホログラフィックコンテンツの提示を更新するように構成され得る。例えば、クライアントＬＦディスプレイシステム５００Ａは、視聴者がホログラフィック広告で提示された製品に興味を示した場合に、視聴者から音声入力を受信し（例えば、プロンプトが出された後）、提示されているホログラフィックコンテンツを更新する（例えば、製品に関するより多くの価格情報を提供する）ために、クライアントＬＦディスプレイシステム５００Ａによって使用される。
ホログラフィック広告を伴う他の実施形態では、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、視聴者にコンバージョンの機会を提供する。いくつかの実施形態では、受信した入力は、ホログラフィックコンテンツに関連するコンバージョンに対応し得る。コンバージョンの機会は、視聴者がホログラフィック広告に応答する機会である。ホログラフィック広告に応答することは、一般に、ホログラフィック広告内に提示されるものに従って視聴者が購入するためのオプションを提供することに対応し得る。例えば、クライアントＬＦディスプレイシステム５００Ａは、革のジャケットを購入するための購入オプションを提示する。他の例では、ホログラフィック広告への応答は、ホログラフィック広告内に提示されるものに従って、視聴者がさらなる情報を問い合わせるためのオプションを提供し得る。クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、ホログラフィック広告の提示を伴うプロンプトを提供し得る。ホログラフィック広告の提示後に変換する入力を受信すると、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、受信した入力に基づいてコンバージョンを完了するために、後続のホログラフィックコンテンツを提示し得る。これらの場合、ＬＦ処理エンジン５３０は、フォローアップホログラフィックコンテンツを提供する。他の場合には、クライアントＬＦディスプレイシステム５００Ａは、例えば、視聴者を（例えば、モバイルデバイス上、またはクライアントＬＦディスプレイシステム５００Ａによって提示される）ウェブブラウザに向けることによって、または、視聴者をアプリケーション（例えば、モバイルデバイスなど）に誘導することによって、コンバージョンを続行するように視聴者を広告主に向け得る。コンバージョンは購入による場合がある。上記の例に従って、視聴者は購入オプションに対応する入力を提供し、クライアントＬＦディスプレイシステム５００Ａは、視聴者が革のジャケットの購入を完了することを可能にするためのホログラフィック購入ページを提示することで応答し得る。いくつかの実施形態では、ホログラフィック広告の提示のインスタンスのコンバージョンは、報酬コストを処理するために使用することができるクライアントＬＦディスプレイシステム５００Ａによって記録され得る。
いくつかの構成では、デジタルサイネージコンテンツ配信システム５６０内のクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂは、異なるハードウェア構成を有し得る。ホログラフィックコンテンツは、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂのハードウェア構成に基づいて提示され得る。ハードウェア構成は、解像度、度当たりの投影光線の数、視野、表示面上の偏向角、および表示面の次元を含み得る。各ハードウェア構成は、異なるデータフォーマットで感覚データを生成または利用し得る。前に考察したように、すべての感覚データ（例えば、ホログラフィック、オーディオ、および触覚データ）を含むホログラフィックコンテンツは、符号化されベクトル化されたフォーマットとしてクライアントＬＦディスプレイシステム５００Ａおよび５００Ｂに転送され得る。そのため、各クライアントＬＦディスプレイシステムのＬＦ処理エンジン（例えば、ＬＦ処理エンジン５３０）は、クライアントＬＦディスプレイシステム５００Ａまたは５００Ｂの対応するハードウェア構成を考慮に入れて、それが提示されるＬＦディスプレイシステムの符号化データを復号し得る。例えば、第１のクライアントＬＦディスプレイシステム５００Ａは、第１のハードウェア構成を有し得、第２のクライアントＬＦディスプレイシステム５００Ｂは、第２のハードウェア構成を有し得る。第１のクライアントＬＦディスプレイシステム５００Ａは、第２のクライアントＬＦディスプレイシステムと同じホログラフィックコンテンツを受信し得る。第１および第２のハードウェア構成の違いにもかかわらず、各ＬＦディスプレイシステム５００Ａおよび５００ＢのＬＦ処理エンジンは、ホログラフィックコンテンツを、できる限り異なる解像度で、異なる視野などで提示しなければならない。
デジタルサイネージアプリケーション
図６は、１つ以上の実施形態による、デジタルサイネージコンテンツ配信システムで使用される大規模ＬＦディスプレイシステム６００の図である。ＬＦディスプレイシステム６００は、ＬＦディスプレイシステム５００、クライアントＬＦディスプレイシステム５００Ａおよび５００Ｂの一実施形態である。ＬＦディスプレイシステム６００は、ＬＦディスプレイシステム６００の１人以上の視聴者にホログラフィックコンテンツを提供するＬＦディスプレイアセンブリ（ＬＦディスプレイアセンブリ５１０の実施形態）のＬＦディスプレイモジュール６２０を含む。図６に示されるＬＦディスプレイシステム６００は、片面のシームレスな表面環境を形成する。さらに他の実施形態では、ＬＦディスプレイシステム６００は、多面シームレス表面環境を形成し得る。図６の例示では、ＬＦディスプレイシステムは、複数の支持構造によって地上に掲げられた看板としての大きさである。ＬＦディスプレイシステム６００は、オンラインシステム（例えば、オンラインシステム５９０）のコンテンツプロバイダ、またはサードパーティシステム（例えば、サードパーティシステム５８０）からのホログラフィックコンテンツの配信を制御するデジタルサイネージコンテンツ配信システム（例えば、デジタルサイネージコンテンツ配信システム５６０）の一部として実装され得る。一実施形態では、コンテンツプロバイダは、サードパーティシステム（例えば、広告主とも呼ばれる独自の広告を作り出す広告システム、または１つ以上の広告主に代わって広告を作り出す広告配信システム）であり得る。サードパーティシステムは、ネットワークを介してＬＦディスプレイシステム６００に接続され得、視聴者に提示するためにホログラフィックコンテンツをＬＦディスプレイシステム６００に提供するように構成され得る。
ＬＦディスプレイシステム６００は、ＬＦディスプレイシステム６００の１人以上の視聴者にホログラフィックコンテンツを提示する。ＬＦディスプレイシステム６００は、データストア（例えば、データストア５２２）またはコンテンツプロバイダから、ホログラフィックコンテンツを検索し得る。ホログラフィックコンテンツの例は、広告（例えば、今後のセールの宣伝）、発表（例えば、政治的スピーチ）、公共サービスのアラート（例えば、トルネードアラート）、ニュースに関する情報（例えば、ニュースの見出し）、天気に関する情報（例えば、地域の天気予報）、会場に関する情報（例えば、チケット売り場の営業時間）、交通状況や交通量状況に関する情報（例えば、交通情報）、企業体に関する情報（例えば、オフィスディレクトリ）、パフォーマンス（例えば、コンサート）、芸術的コンテンツ（例えば、彫刻）、その他のホログラフィックコンテンツ、またはそれらの任意の組み合わせ、に及ぶ可能性がある。ＬＦディスプレイシステム６００は、ホログラフィックコンテンツ（例えば、ＬＦ処理エンジン５３０を介して）、より具体的には、ＬＦディスプレイモジュール６２０によって提示されるホログラフィックコンテンツの表示命令を生成する。ＬＦディスプレイシステム６００は、ホログラフィックコンテンツの遮るもののない視界を有するＬＦディスプレイシステム６００のビューイングボリューム内の、すべての視聴者が見ることができるようにホログラフィックコンテンツを提示し得る。他の場合には、ＬＦディスプレイシステム６００は、ビューイングボリューム内の少なくとも一部、場合によってはすべての視聴者を追跡する。いくつかの実施形態では、ＬＦディスプレイシステム６００は、追跡された各視聴者に、その視聴者が見ることができる特定のホログラフィックコンテンツを提供し得、その特定のホログラフィックコンテンツは他の視聴者には見えない。他の場合には、ＬＦディスプレイシステム６００は、ビューイングボリュームを異なるセクションに細分し、各セクションに異なるホログラフィックコンテンツを提供し得る。このようにして、異なるセクションの視聴者には、異なるホログラフィックコンテンが提示され、そのセクションに固有のホログラフィックコンテンツを体験する。ＬＦディスプレイシステム６００はまた、ＬＦディスプレイモジュール６２０によって提供されるホログラフィックコンテンツと並行して、感覚フィードバックを提示するため、感覚フィードバックシステム（例えば、感覚フィードバックシステム５４０）を含み得る。ホログラフィックコンテンツが視聴者に提供されると、ＬＦディスプレイシステム６００は、提示されたホログラフィックコンテンツに応答して視聴者の動作を記録し得る（例えば、ＬＦディスプレイアセンブリ５１０、感覚フィードバックシステム５４０、または追跡システム５５０を介して）。例えば、ＬＦディスプレイシステム６００は、追跡システム（例えば、追跡システム５５０）を利用して、ホログラフィックコンテンツの提示に応答して視聴者の身体の動きを監視し得る。
いくつかの実施形態では、ＬＦディスプレイシステム６００は、ＬＦディスプレイシステム６００の異なるタイプの視聴者に特定のホログラフィックコンテンツを提示する。追跡システム（例えば、追跡システム５５０）は、ＬＦディスプレイシステム６００のビューイングボリューム内での視聴者の動きを追跡し（例えば、視聴者がＬＦディスプレイシステムの左からＬＦディスプレイシステムの右側に移動している）、ホログラフィックコンテンツに対する視聴者の応答を監視し（例えば、視聴者は笑っている）、ＬＦディスプレイシステムのビューイングボリューム内の視聴者の特徴を決定し得る（例えば、視聴者は女性である）。
さらに、追跡システムによる視聴者の動きの追跡は、各視聴者の動きに基づいて速度を決定し得る。例えば、追跡された動きは、視聴者がビューイングボリューム内で移動する速度を含み得る。ＬＦディスプレイシステムは、視聴者の速度に基づいてホログラフィックコンテンツの提示を更新し得る。図６の例では、追跡システムは、歩行者６３０がゆっくりと動いている（例えば、時速５マイルより遅い）視聴者であると決定し得る。追跡システムは、歩行者６３０を歩行者として分類し得る。歩行者として決定された視聴者のタイプに従って、ＬＦディスプレイシステム６００は、歩行者タイプに提示するために割り当てられたホログラフィックオブジェクト６３５を提示し得る。ＬＦディスプレイシステム６００は、各タイプの視聴者に提示するために、データストア（例えば、データストア５２２）内の各ホログラフィックオブジェクトを指定し得る。ＬＦディスプレイシステム６００は、視聴者の速度に基づいて、視聴者の前のホログラフィックオブジェクトボリューム内の位置にホログラフィックコンテンツを提示する。例えば、追跡システムによって追跡される歩行者６３０の位置および動きに基づいて、ＬＦ ディスプレイシステム６００は、潜在的に歩行またはビューイングボリュームの周りを移動しながら、歩行者６３０の前に常に提示されるようにホログラフィックオブジェクト６３５の提示を更新し得る。
追跡システムは、車両の乗客を車両の乗客６４０として分類し得る。追跡システムは、車両の乗客６４０を、歩行者６３０とは異なる別のタイプの視聴者として決定し得る。追跡システムは、車両の乗客６４０が車両内にいることを決定し得る。追加的に、追跡システムは、車両の乗客６４０が歩行者６３０よりも速い速度で（例えば、時速５マイルを超えて）移動していると決定し得る。ＬＦディスプレイシステム６００は、車両の乗客タイプへの提示のために割り当てられた車両の乗客６４０に提供するホログラフィックオブジェクト６４５を決定し得る。例えば、ＬＦディスプレイシステム６００は、車両の運転者の注意を過度にそらさないようするため、車両の乗客に提供するために、混乱することの少ないホログラフィックコンテンツ（例えば、近くのレストランの名前および場所、公開予定またはすでに公開された映画の映画ポスター）を指定し得る。ＬＦディスプレイシステム６００はまた、表示ボリューム内での移動中ずっと、車両の乗客６４０が見ることができるように、ホログラフィックオブジェクト６４５の提示を更新し得る。他の実施形態では、車両の乗客６４０が車両の乗客タイプの視聴者であると決定すると、ＬＦディスプレイシステム６００は、車両の運転者の注意を過度にそらさないようするために、同様にビューイングボリューム内の固定位置にホログラフィックオブジェクト６４５を提示する。いくつかの実施形態では、追跡システムはさらに、視聴者が運転手であるか乗客であるかを（少なくとも部分的に）決定するように車両内の視聴者の位置を確証することによって、車両の運転手と車両の乗客とをさらに区別し得る。区別されると、ＬＦディスプレイシステム６００は、車両の乗客タイプの他の乗客に、車両の乗客に提示するために利用可能なホログラフィックコンテンツを提供しながら、注意をそらさない（例えば、ビューイングボリュームの固定位置で、より静的で、混乱することの少ない）ホログラフィックコンテンツを含み得る車両の運転手タイプに指定されたホログラフィックコンテンツを提示し得る。
追跡システムは、ホログラフィックコンテンツに対する視聴者の応答を監視し得る。監視された応答には、ビューイングボリューム内の視聴者の位置、視聴者の動き、視聴者のジェスチャ、視聴者の顔の表情、視聴者の視線、他の監視された応答、またはそれらの組み合わせが含まれ得る。ＬＦディスプレイシステム６００は、視聴者の監視された応答に応じて、視聴者に提示されるホログラフィックコンテンツを更新し得る。例えば、図６では、視聴者（すなわち、歩行者６３０）は、ＬＦディスプレイモジュール６２０の右側にから、ＬＦディスプレイモジュール６２０の左側に視線を変える。追跡システムは、視聴者の視線を監視し、それに応じてホログラフィックコンテンツを更新する（すなわち、ホログラフィックオブジェクト６３５は、視聴者の視線と交差するホログラフィックオブジェクトボリューム内の位置に提示される）。視聴者の監視された応答は、ネットワーク上のデバイスと共有され得る。例えば、監視された応答は、ネットワーク（例えば、ネットワーク５７０）上のデバイス（例えば、コンピュータ、サーバなど）と共有され得る。
追跡システムは、ＬＦディスプレイシステム６００のビューイングボリューム内の視聴者の特徴を決定し得る。視聴者の決定された特徴は、視聴者の特徴または品質を表す。決定された特徴は、視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、購入履歴、視聴者の他の特徴または品質、またはそれらの組み合わせ、を含み得る。ＬＦディスプレイシステム６００は、視聴者の決定された特徴に応じて、視聴者に提示されるホログラフィックコンテンツを更新し得る。例えば、図６では、視聴者（すなわち、歩行者６３０）は、中学生の男子であると決定される。ホログラフィックコンテンツは、それに応じて更新され得る（すなわち、ホログラフィックオブジェクト６３５は現在表示されているダイアモンドリングからアクションフィギュアに変わる）。視聴者の決定された特徴は、ネットワーク上のデバイスと共有され得る。例えば、監視された応答は、ネットワーク（例えば、ネットワーク５７０）上のデバイス（例えば、コンピュータ、サーバなど）と共有され得る。
いくつかの実施形態では、ホログラフィックオブジェクト６３５および／または６４５は、視聴者、すなわち歩行者６３０および車両の乗客６４０、に提供されるホログラフィック広告であり得る。したがって、ＬＦディスプレイシステム６００は、視聴者へのホログラフィック広告の提示のインスタンスを記録する。ホログラフィック広告は、ホログラフィック映画、ホログラフィックショー、ホログラフィック商品などのデジタル資産または物理的な商品およびサービスのためのものであり得る。図６の例示では、ホログラフィック広告の例としてのホログラフィックオブジェクト６３５は、宝石店のホログラフィック広告であるダイアモンドリングである。他の実施形態では、ホログラフィックオブジェクト６３５および／または６４５は、それぞれの視聴者に情報を提供する情報パネルであり得る。情報は、ウェルカムサイン、施設の名前、道順が記載された地図、様々なもの（例えば、物、店、レストラン、およびトイレ）の場所などを含み得るが、これらに限定されない。図６の例示では、看板ＬＦ表示面の例としてのホログラフィックオブジェクト６４５は、ラスベガス市へのウェルカムサインである。
いくつかの実施形態では、ＬＦディスプレイシステム６００は、ビューイングボリュームの様々なセクションを分類することを決定する。図６の例示では、ＬＦディスプレイシステム６００は、ＬＦディスプレイモジュール６２０の下を視聴者が通過することを可能にする歩道６５０上に配置される。ＬＦディスプレイシステム６００はまた、ＬＦディスプレイシステム６００の隣を電動車両が通過し得る道路６６０の隣に配置される。１つ以上の実施形態では、ＬＦディスプレイシステム６００は、ビューイングボリュームの様々なセクションを分類するためにＡＩモデルを実装する。追跡システムは、ビューイングボリューム内の様々なオブジェクトおよび視聴者の追跡情報を提供し得る。ＬＦディスプレイシステム６００は、追跡情報に基づいて、ビューイングボリュームの１つのセクションが、歩行者またはバイカーであり得、多くの自動車に乗ってはいない可能性が高い視聴者がいる歩道６５０であると決定し得る。次に、ＬＦディスプレイシステム６００は、ビューイングボリュームの別のセクションが、自動車の乗客である可能性がある視聴者がいる道路６６０であると決定し得る。ビューイングボリュームの分類されたセクションによれば、ＬＦディスプレイシステム６００は、セクションに従ってホログラフィックコンテンツを提供し得る。例えば、ＬＦディスプレイシステム６００は、歩道６５０内を移動する各視聴者に特定のホログラフィック広告を提供しながら、道路６６０内の視聴者（すなわち、車両の運転手または乗客）が見ることができる位置に固定されたホログラフィックサインを提供し得る。
図７は、１つ以上の実施形態による、小規模サイネージシステム（例えば、パネルＬＦ表示面）で使用されるＬＦディスプレイシステム７００の図である。ＬＦディスプレイシステム７００は、ＬＦディスプレイシステム５００の一実施形態である。ＬＦディスプレイシステム７００は、ＬＦディスプレイシステム７００の１人以上の視聴者に、ホログラフィックコンテンツを提供するＬＦディスプレイアセンブリ（ＬＦディスプレイアセンブリ５１０の実施形態）のＬＦディスプレイモジュール７２０を含む。図７に示されるＬＦディスプレイシステム７００は、片面のシームレスな表面環境を形成する。さらに他の実施形態では、ＬＦディスプレイシステム７００は、多面シームレス表面環境を形成し得る。図７の例示では、ＬＦディスプレイシステムは、平均的な視聴者と同様の大きさである。ＬＦディスプレイシステム７００は、コンテンツプロバイダからのホログラフィック広告の配信を制御するＬＦデジタルサイネージ環境の一部として実装され得る。
ＬＦディスプレイシステム７００は、ＬＦディスプレイシステム７００の視聴者７３０を識別する。ＬＦディスプレイシステム７００は、視聴者プロファイリングモジュール（例えば、視聴者プロファイリングシステム５２８）を使用して、視聴者７３０を識別する。いくつかの実施形態では、視聴者プロファイリングモジュールは、視聴者７３０のキャプチャされた画像データを用いた画像認識技術を使用する。他の実施形態では、視聴者プロファイリングモジュールは、視聴者７３０の物理的識別トークンをスキャンすることができる識別スキャナをさらに採用する。例えば、視聴者７３０は、視聴者プロファイリングモジュールの１つ以上のＲＦＩＤスキャナ部分によってスキャンすることができるＲＦＩＤリストバンドを備えた遊園地にあり得る。次に、ＬＦディスプレイシステム７００は、データストア（例えば、データストア５２２）内の視聴者の視聴者プロファイルにアクセスすることができる。視聴者プロファイルは、視聴者に関する様々な特徴または情報を含み得る。特徴には、監視された動作から提供または推測された好みを含み得る。情報は、視聴者７３０にすでに提示されたホログラフィックコンテンツなどの履歴ログをさらに含み得る。次に、ＬＦディスプレイシステム７００は、ホログラフィックオブジェクト７２５を選択して、視聴者７３０に提示し得る。
追跡システム（例えば、追跡システム５５０）は、ホログラフィックコンテンツを視聴者７３０に提供しながら、視聴者７３０を追跡する。追跡システムは、視聴者７３０の位置、視聴者７３０の視線、またはそれらの組み合わせを常に監視し得る。ＬＦディスプレイシステム７００は、追跡情報に従ってホログラフィックコンテンツの提示を更新し得る。例えば、ＬＦディスプレイシステム７００は、視聴者７３０がＬＦディスプレイシステム７００の一方の側から他の側に移動していることを決定し得る。視聴者７３０の決定された動きに応じて、ＬＦディスプレイシステム７００は、ホログラフィックオブジェクト７３５の提示を更新して、視聴者７３０とともに一方の側から他の側に移動し得る。別の例では、視聴者７３０は、ＬＦディスプレイモジュール７２０に対してほぼ垂直に立っていてもよい。視聴者７３０が視線を移すと、追跡システムは、視聴者の応答を監視し、視線を記録し得る。記録された視線に基づいて、ＬＦディスプレイシステム７００は、ホログラフィックオブジェクト７３５の提示を更新して、視聴者７３０の視線を追跡し得る。例えば、視聴者７３０の視線と交差するホログラフィックオブジェクトボリューム内の位置に修正されたホログラフィックコンテンツを提示する。
１つ以上の実施形態では、ＬＦディスプレイシステム７００は、ホログラフィックコンテンツで感覚フィードバックを提供するための感覚フィードバックシステム（例えば、感覚フィードバックシステム５４０）を含む。感覚フィードバックシステムは、データストア（例えば、データストア５２２）に記憶されたパラメータに従って感覚フィードバックを生成し得る。場合によっては、各ホログラフィックオブジェクトは、ＬＦディスプレイモジュール７２０によるホログラフィックオブジェクトの提示と並行して感覚フィードバックの提示を指示するパラメータを有し得る。例えば、ホログラフィックニワトリを提示する場合、感覚フィードバックシステムは、感覚フィードバックパラメータを含む命令を受信し、ビューイングボリューム内のホログラフィックニワトリの位置に近接した羽の触覚テクスチャを提示し得る。追加的に、感覚フィードバックシステムは、ニワトリの鳴き声（例えば、バック バック バック）に対応する音声フィードバックを提供し得る。次に、視聴者７３０は、より没入型の体験およびホログラフィックオブジェクト７３５との相互作用を提供する感覚フィードバックを知覚し得る。
いくつかの実施形態では、ＬＦディスプレイシステム７００は、視聴者７３０からの入力を受信するように構成される。入力は、ＬＦディスプレイモジュール７２０、感覚フィードバックシステム（例えば、感覚フィードバックシステム５４０）、追跡システム（例えば、追跡システム５５０）、視聴者プロファイリングモジュール（例えば、視聴者プロファイリングシステム５２８）、および追加の入力デバイス、の任意の組み合わせを介して受信され得る。受信される入力には、音声入力（例えば、視聴者からの音声入力）、追跡入力（例えば、追跡システムから追跡される視聴者によるジェスチャ）、ボタン入力（例えば、リモコンで押されたボタン、またはタッチスクリーンディスプレイなど）、またはそれらの任意の組み合わせ、を含み得るが、これらに限定されない。受信した入力に応じて、ＬＦディスプレイシステム７００は、ホログラフィックコンテンツの提示を更新することができる。場合によっては、ＬＦディスプレイシステム７００は、ＬＦディスプレイモジュール７２０によって提示されるホログラフィックコンテンツ、または感覚フィードバックアセンブリによって提供される感覚フィードバックコンテンツを含む、ＬＦディスプレイシステム７００によって提示されるホログラフィックコンテンツの表示を変更するためのいくつかの入力を関連付け得る。
ＬＦディスプレイシステム７００によって提示されるホログラフィック広告を伴う実施形態では、ＬＦディスプレイシステム７００は、ホログラフィック広告の提示を変換するための入力を受信し得る。ホログラフィック広告を提示するとき、ＬＦディスプレイシステム７００はまた、コンバージョンの機会として視聴者７３０にオプションを提示し得る。視聴者７３０は、ＬＦディスプレイシステム７００への入力を提供し得る。例えば、ＬＦディスプレイシステム７００は、視聴者７３０がホログラフィックオブジェクト７３５を購入したい場合、視聴者７３０に手を上げるように促す。追跡システムは、視聴者７３０を追跡し、視聴者７３０が手を上げたことを決定し得る。上げられた手は、追跡システム７３０によって入力として受信される。それに応答して、ＬＦディスプレイシステム７００は、ホログラフィック広告のコンバージョンを処理するために追加のホログラフィックコンテンツを提示する。例えば、ＬＦディスプレイシステム７００は、視聴者７３０がホログラフィックオブジェクト７３５の購入を完了することを可能にするためのホログラフィックウェブページを提示し得る。
１つ以上の実施形態では、ホログラフィックオブジェクト７３５は、視聴者７３０に提示されるホログラフィック広告である。したがって、ＬＦディスプレイシステム７００は、視聴者７３０へのホログラフィック広告の提示のインスタンスを記録する。ホログラフィック広告は、デジタル資産または物理的な商品およびサービス、ホログラフィック映画、ホログラフィックショー、他のホログラフィックコンテンツなどのためのものであり得る。他の実施形態では、ホログラフィックオブジェクト７３５は、それぞれの視聴者に情報を提供する情報パネルであり得る。情報には、ウェルカムサイン、施設の名前、道順が記載された地図、様々なもの（例えば、物、店、レストラン、およびトイレ）の場所などを含み得るが、これらに限定されない。
追加の構成情報
本開示の実施形態の前述の説明は、例示の目的で提示されたものであり、網羅的であること、または開示を、開示された正確な形態に限定することを意図するものではない。関連技術の当業者は、上記の開示に照らして、多くの修正および変形が可能であることを理解することができる。
本明細書のいくつかの部分は、情報に対する操作のアルゴリズムおよび記号表現の観点から、本開示の実施形態を説明している。これらのアルゴリズムの説明および表現は、データ処理分野の当業者によって、自らの作業の本質を他の当業者に効果的に伝えるために一般的に使用される。これらの操作は、機能的、計算的、または論理的に説明される一方、コンピュータプログラムまたは等価な電気回路、マイクロコードなどによって実装されることが理解される。さらに、これらの操作の配置を、一般性を損なうことなく、モジュールと呼ぶことが場合によっては好都合であることも判明している。説明された操作およびそれらの関連付けられたモジュールは、ソフトウェア、ファームウェア、ハードウェア、またはそれらの任意の組み合わせにおいて具現化され得る。
本明細書に記載の工程、操作、またはプロセスのうちのいずれかが、１つ以上のハードウェアまたはソフトウェアモジュールを使用して、単独で、または他のデバイスと組み合わせて、実行または実装され得る。一実施形態では、ソフトウェアモジュールは、説明された工程、操作、またはプロセスのうちのいずれかまたはすべてを実行するために、コンピュータプロセッサによって実行され得るコンピュータプログラムコードを含むコンピュータ可読媒体を備えるコンピュータプログラム製品で実装される。
本開示の実施形態はまた、本明細書の操作を実行するための装置に関し得る。この装置は、要求された目的のために特別に構築され得、および／または、コンピュータに記憶されたコンピュータプログラムによって選択的に起動または再構成される汎用コンピューティングデバイスを備え得る。そのようなコンピュータプログラムは、コンピュータシステムバスに結合され得る、非一時的な有形のコンピュータ可読記憶媒体、または電子命令を記憶するために好適な任意のタイプの媒体に記憶され得る。さらに、本明細書で言及される任意のコンピューティングシステムは、単一のプロセッサを含み得るか、またはコンピューティング能力を高めるために複数のプロセッサ設計を採用するアーキテクチャであり得る。
本開示の実施形態はまた、本明細書に記載のコンピューティングプロセスによって生み出される製品に関し得る。そのような製品は、コンピューティングプロセスから生じる情報であって、その情報が非一時的な有形のコンピュータ可読記憶媒体に記憶される、情報を含み得、また本明細書に記載のコンピュータプログラム製品もしくは他のデータの組み合わせの任意の実施形態を含み得る。
最後に、本明細書で使用される言語は、主に読み易さおよび教示目的のために選択されており、本発明の主題を画成または制限するように選択されていないことがある。したがって、本開示の範囲は、この発明を実施するための形態によってではなく、本明細書に基づく出願に関して発行される任意の請求項によって限定されることが意図される。したがって、実施形態の開示は、以下の特許請求の範囲に記載される本開示の範囲を例示することを意図するが、限定することを意図しない。
最後に、本明細書で使用される言語は、主に読み易さおよび教示目的のために選択されており、本発明の主題を画成または制限するように選択されていないことがある。したがって、本開示の範囲は、この発明を実施するための形態によってではなく、本明細書に基づく出願に関して発行される任意の請求項によって限定されることが意図される。したがって、実施形態の開示は、以下の特許請求の範囲に記載される本開示の範囲を例示することを意図するが、限定することを意図しない。
（項目１）
ホログラフィックコンテンツを生成するように構成されたコントローラと、
公共の場で、ビューイングボリューム内に位置する視聴者に、ホログラフィックオブジェクトボリューム内の前記ホログラフィックコンテンツを提示するように構成されている１つ以上のＬＦディスプレイモジュールを備えるＬＦディスプレイアセンブリと、
を備える、ライトフィールド（ＬＦ）ディスプレイシステム。
（項目２）
前記ホログラフィックコンテンツは、
広告と、
発表と、
公共サービスのアラートと、
ニュースに関する情報と、
天気に関する情報と、
会場に関する情報と、
交通状況や交通量状況に関する情報と、
企業体に関する情報と、
イベントの放送と、
パフォーマンスと、
芸術的コンテンツと、
のうちの１つ以上を備える、項目１に記載のＬＦディスプレイシステム。
（項目３）
前記１つ以上のＬＦディスプレイモジュールは、前記ホログラフィックオブジェクトボリューム内の追加のホログラフィックコンテンツを、前記ビューイングボリュームとは異なる第２のビューイングボリューム内に位置する第２の視聴者に提示するようにさらに構成される、項目１に記載のＬＦディスプレイシステム。
（項目４）
前記ホログラフィックコンテンツは、前記ビューイングボリュームからは見ることができるが、前記第２のビューイングボリュームからは見ることができない、項目３に記載のＬＦディスプレイシステム。
（項目５）
視聴者の動きを追跡するように構成された追跡システムをさらに備え、前記ビューイングボリュームおよび前記第２のビューイングボリュームは、前記視聴者の追跡された動きに基づいて定義される、項目４に記載のＬＦディスプレイシステム。
（項目６）
前記ＬＦディスプレイシステムの前記ビューイングボリューム内の前記視聴者の動きの追跡、
前記ホログラフィックコンテンツに対する前記視聴者の応答の監視、
前記ＬＦディスプレイシステムの前記ビューイングボリューム内の前記視聴者の特徴を決定、
の１つ以上を実行するように構成された追跡システムをさらに備える、項目１に記載のＬＦディスプレイシステム。
（項目７）
前記追跡システムは、前記１つ以上のＬＦディスプレイモジュールの前の領域の画像をキャプチャするように構成された１つ以上のカメラを備える、項目６に記載のＬＦディスプレイシステム。
（項目８）
前記１つ以上のカメラは、前記ＬＦディスプレイアセンブリの外部にある、項目７に記載のＬＦディスプレイシステム。
（項目９）
前記１つ以上のＬＦディスプレイモジュールは、前記１つ以上のＬＦディスプレイモジュールの前の領域からのライトフィールドをキャプチャするようにさらに構成される、項目６に記載のＬＦディスプレイシステム。
（項目１０）
前記ＬＦディスプレイアセンブリは、前記１つ以上のＬＦディスプレイモジュールによってキャプチャされた前記１つ以上のＬＦディスプレイモジュールの前の前記領域からの前記ライトフィールドに基づいて入力を受信するようにさらに構成される、項目９に記載のＬＦディスプレイシステム。
（項目１１）
前記追跡システムは、前記１つ以上のＬＦディスプレイモジュールの前のオブジェクトの深さを検出するように構成された１つ以上の深度センサを備える、項目６に記載のＬＦディスプレイシステム。
（項目１２）
前記追跡される動きは、前記視聴者が前記ビューイングボリューム内で移動する速度を含み、前記ＬＦディスプレイアセンブリは、前記視聴者の前記速度に基づいて前記ホログラフィックコンテンツの提示を更新するように構成される、項目６に記載のＬＦディスプレイシステム。
（項目１３）
前記ホログラフィックコンテンツは、前記視聴者の前記速度に基づいて、前記視聴者の前の前記ホログラフィックオブジェクトボリューム内の位置に提示される、項目１２に記載のＬＦディスプレイシステム。
（項目１４）
前記視聴者の前記監視された応答は、
前記ビューイングボリューム内の前記視聴者の位置と、
前記視聴者の動きと、
前記視聴者のジェスチャと、
前記視聴者の顔の表情と、
前記視聴者の視線と、
のうちの１つ以上を含む、項目６に記載のＬＦディスプレイシステム。
（項目１５）
前記ＬＦディスプレイアセンブリは、前記視聴者の前記監視された応答に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目１４に記載のＬＦディスプレイシステム。
（項目１６）
前記視聴者の前記監視された応答は、ネットワーク上のデバイスと共有される、項目１４に記載のＬＦディスプレイシステム。
（項目１７）
前記視聴者の前記監視された応答は、前記視聴者の視線を含み、前記ＬＦディスプレイアセンブリは、前記視聴者の前記視線に基づいて、前記ホログラフィックコンテンツを提示するように構成される、項目６に記載のＬＦディスプレイシステム。
（項目１８）
前記ホログラフィックコンテンツが、前記視聴者の前記視線と交差する前記ホログラフィックオブジェクトボリューム内の位置に提示される、項目１７に記載のＬＦディスプレイシステム。
（項目１９）
前記コントローラは、前記視聴者の前記視線に部分的に基づいてインプレッションが発生したことを決定するようにさらに構成される、項目１７に記載のＬＦディスプレイシステム。
（項目２０）
前記視聴者の前記決定された特徴は、前記視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、購入履歴、のうちの１つ以上を含む、項目６に記載のＬＦディスプレイシステム。
（項目２１）
前記ＬＦディスプレイアセンブリは、前記視聴者の前記決定された特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目２０に記載のＬＦディスプレイシステム。
（項目２２）
前記視聴者の前記決定された特徴は、前記ネットワーク上のデバイスと共有される、項目２０に記載のＬＦディスプレイシステム。
（項目２３）
前記視聴者の特徴を含む視聴者プロファイルを生成するように構成された視聴者プロファイリングモジュールをさらに備える、項目１に記載のＬＦディスプレイシステム。
（項目２４）
前記ＬＦディスプレイアセンブリは、前記視聴者に対応する視聴者プロファイルの前記特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目２３に記載のＬＦディスプレイシステム。
（項目２５）
前記ＬＦディスプレイシステムは、前記ホログラフィックコンテンツの提示に応じて、入力を受信するように構成される、項目１に記載のＬＦディスプレイシステム。
（項目２６）
前記ＬＦディスプレイアセンブリは、前記受信した入力に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目２５に記載のＬＦディスプレイシステム。
（項目２７）
前記入力は、前記ホログラフィックコンテンツに関連するコンバージョンに対応する、項目２５に記載のＬＦディスプレイシステム。
（項目２８）
前記ＬＦディスプレイアセンブリは、前記受信した入力に基づいて前記コンバージョンを完了するために、後続のホログラフィックコンテンツを提示する、項目２７に記載のＬＦディスプレイシステム。
（項目２９）
前記コンバージョンは購入である、項目２８に記載のＬＦディスプレイシステム。
（項目３０）
前記ホログラフィックコンテンツは、
物理的な商品と、
デジタル資産と、
レンダリングされるサービスと、
のうちの１つ以上のホログラフィック広告である、項目２７に記載のＬＦディスプレイシステム。
（項目３１）
前記１つ以上のＬＦディスプレイモジュールのそれぞれは、
複数のエネルギー源位置を提供するように構成されたエネルギーデバイス層と、
複数のエネルギー導波路を含み、各導波路は、４次元ライトフィールド関数に従って、前記ホログラフィックオブジェクトを形成するために、前記エネルギー源位置に応じた表示面から、少なくとも１つの特定の方向に、少なくとも１つのエネルギー源位置からのエネルギーを投影するように構成される、エネルギー導波路層と、
を備え、
前記ホログラフィックオブジェクトのビューイング視点は、前記ホログラフィックオブジェクトボリューム内の前記ホログラフィックオブジェクトに対する前記ビューイングボリュームにおける視聴者の位置に部分的に基づいて変化する、項目１に記載のＬＦディスプレイシステム。
（項目３２）
前記エネルギー導波路層は、
前記複数のエネルギー導波路に結合された静電スピーカのアレイをさらに備え、前記静電スピーカのアレイは、
駆動時に音響エネルギーを生成するように構成された少なくとも１つの透明膜と、
前記透明膜を音響的に駆動するように構成された複数の電極と、を備え、前記複数の電極の各電極は、前記複数のエネルギー導波路の１つ以上のエネルギー導波路の間に配置される、項目３１に記載のＬＦディスプレイシステム。
（項目３３）
前記１つ以上のＬＦディスプレイモジュールのそれぞれは、そこからホログラフィックオブジェクトが投影される表示面を有し、シームレス表示面が、前記１つ以上のＬＦディスプレイモジュールの前記表示面をタイル張りすることによって形成される、項目１に記載のＬＦディスプレイシステム。
（項目３４）
前記シームレスな表示面は、単一のＬＦディスプレイモジュールの前記表示面の表面積よりも大きい、項目３３に記載のＬＦディスプレイシステム。
（項目３５）
１つ以上の感覚フィードバックデバイスを備え、前記ホログラフィックオブジェクトと同時に感覚フィードバックを提供するように構成された感覚フィードバックシステムをさらに備える、項目１に記載のＬＦディスプレイシステム。
（項目３６）
前記感覚フィードバックは、触覚フィードバック、音声フィードバック、芳香フィードバック、温度フィードバック、またはそれらの任意の組み合わせを含む、項目３５に記載のＬＦディスプレイシステム。
（項目３７）
前記感覚フィードバックシステムは、前記ホログラフィックオブジェクトに触覚フィードバックを提供するための超音波エネルギー投影デバイスを備え、前記超音波エネルギー投影デバイスは、前記ホログラフィックオブジェクトの表面に近接して、または前記ホログラフィックオブジェクトの表面と一致する体積触覚表面を生成するように構成される、項目３５に記載のＬＦディスプレイシステム。
（項目３８）
前記ホログラフィックコンテンツは、テクスチャを備えた物理的アイテムの表現であり、前記体積触覚表面は、前記物理的アイテムの前記テクスチャをシミュレートする、項目３７に記載のＬＦディスプレイシステム。
（項目３９）
前記体積触覚投影デバイスは、前記ＬＦディスプレイアセンブリの一部である、項目３７に記載のＬＦディスプレイシステム。
（項目４０）
前記ＬＦディスプレイシステムは、
ネットワークを介して前記ＬＦディスプレイシステムに接続され、および前記ホログラフィックコンテンツを前記視聴者に提示するため前記ＬＦディスプレイシステムに提供するように構成されているサイネージコントロールシステムを備える、ＬＦデジタルサイネージ環境の構成要素である、項目１に記載のＬＦディスプレイシステム。
（項目４１）
前記ホログラフィックコンテンツは、
広告と、
発表と、
公共サービスのアラートと、
ニュースに関する情報と、
天気に関する情報と、
会場に関する情報と、
交通状況や交通量状況に関する情報と、
企業体に関する情報と、
イベントの放送と、
パフォーマンスと、
芸術的コンテンツと、
のうちの１つ以上を備える、項目４０に記載のＬＦディスプレイシステム。
（項目４２）
前記ＬＦディスプレイシステムは、前記ネットワークを介して符号化されたフォーマットで前記ホログラフィックコンテンツを受信するように構成され、さらに、前記ホログラフィックコンテンツを前記視聴者に提示するためのフォーマットに復号するように構成される、項目４０に記載のＬＦディスプレイシステム。
（項目４３）
前記符号化されたフォーマットは、ベクトル化されたフォーマットであり、前記復号されたフォーマットは、ラスタライズされたフォーマットである、項目４２に記載のＬＦディスプレイシステム。
（項目４４）
前記ホログラフィックコンテンツは、前記ＬＦディスプレイシステムのハードウェア構成に基づいて提示される、項目１に記載のＬＦディスプレイシステム。
（項目４５）
前記ハードウェア構成は、
解像度と、
１度当たりの投影光線数と、
視野と、
前記表示面の偏向角と、
前記表示面の次元と、
の１つ以上を備える、項目４４に記載のＬＦディスプレイシステム。
（項目４６）
ライトフィールド（ＬＦ）ディスプレイシステムのビューイングボリューム内の視聴者の動きを追跡することと、
前記追跡された動きに部分的に基づいて、前記視聴者が前記ビューイングボリューム内にいると決定することと、
前記ＬＦディスプレイシステムの１つ以上のＬＦディスプレイモジュールを介して、前記視聴者が前記ビューイングボリューム内にいるという決定に部分的に基づいて、ホログラフィックオブジェクトボリューム内のホログラフィックコンテンツを前記視聴者に提示することと、
を含む方法。
（項目４７）
前記視聴者が前記ビューイングボリューム内にいるという前記決定に基づいて、前記ＬＦディスプレイシステムの前記視聴者にホログラフィックコンテンツを提示する機会を特定することと、
コンテンツストアから、前記ホログラフィックコンテンツを選択することであって、前記ホログラフィックコンテンツはパラメータのセットを含む、選択することと、
前記パラメータのセットに基づいて、前記ホログラフィックコンテンツの表示命令を生成することと、をさらに含み、
前記ホログラフィックコンテンツを前記視聴者に提示することは、前記パラメータのセットにさらに基づく、項目４６に記載の方法。
（項目４８）
前記ビューイングボリューム内の前記視聴者の動きを追跡することと、
前記ホログラフィックコンテンツに対する前記視聴者の応答を監視することと、
前記ビューイング内の前記視聴者の特徴を決定することと、のうちの１つ以上をさらに含む、項目４６に記載の方法。
（項目４９）
前記視聴者の前記監視された応答に基づいて、インプレッションの発生を判断することをさらに含む、項目４８に記載の方法。
（項目５０）
前記視聴者の前記追跡された動き、前記視聴者の前記監視された応答、および前記視聴者の決定された前記特徴のうちの１つ以上に応じて、前記ホログラフィックコンテンツの提示を更新することをさらに含む、項目４８に記載の方法。
（項目５１）
前記ホログラフィックコンテンツの提示に応じて、前記視聴者から入力を受信することをさらに含む、項目４６に記載の方法。
（項目５２）
前記視聴者の前記応答を監視することは、前記視聴者の視線を記録することを含み、前記方法は、
前記視聴者の前記視線と交差する前記ホログラフィックオブジェクトボリューム内の位置に、修正されたホログラフィックコンテンツを提示することをさらに含む、項目４８に記載の方法。
（項目５３）
前記視聴者の前記視線に部分的に基づいてインプレッションが発生したかどうかを決定することをさらに含む、項目５２に記載の方法。
（項目５４）
前記ホログラフィックコンテンツに関連付けられたコンバージョンに対応する入力を受信することと、
前記受信した入力に基づいて、前記コンバージョンを完了するための後続のホログラフィックコンテンツを提示することと、をさらに含む、項目４６に記載の方法。
（項目５５）
１つ以上のクライアントＬＦディスプレイシステムを備えるライトフィールド（ＬＦ）デジタルサイネージシステムであって、各ディスプレイシステムは、
ホログラフィックコンテンツの配信を仲介するように構成されたオンラインシステムからネットワークを介してホログラフィックコンテンツを受信するように構成されたコントローラと、
１つ以上のＬＦディスプレイモジュールを備えるＬＦディスプレイアセンブリであって、前記ＬＦディスプレイモジュールは、前記ホログラフィックコンテンツをホログラフィックオブジェクトボリューム内のデジタルサイネージとしてビューイングボリューム内に配置された視聴者に表示するように構成された、ＬＦディスプレイアセンブリと、
を備える、ＬＦデジタルサイネージシステム。
（項目５６）
前記１つ以上のクライアントＬＦディスプレイシステムは、追跡システムをさらに備え、前記追跡システムは、
前記ホログラフィックコンテンツに対する前記視聴者の応答の監視と、
前記ビューイングボリューム内の前記視聴者の特徴を決定することと、
の１つ以上を実行するように構成される、項目５５に記載のＬＦデジタルサイネージシステム。
（項目５７）
前記視聴者の前記監視された応答は、
前記ビューイングボリューム内の前記視聴者の位置と、
前記視聴者の動きと、
前記視聴者のジェスチャと、
前記視聴者の顔の表情と、
前記視聴者の視線と、
の１つ以上を含む、項目５６に記載のＬＦデジタルサイネージシステム。
（項目５８）
前記ＬＦディスプレイアセンブリは、前記視聴者の前記監視された応答に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目５６に記載のＬＦデジタルサイネージシステム。
（項目５９）
前記視聴者の前記決められた特徴は、前記視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、および購入履歴、のうちの１つ以上を含む、項目５６に記載のＬＦデジタルサイネージシステム。
（項目６０）
前記ＬＦディスプレイアセンブリは、前記視聴者の前記決定された特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、項目５６に記載のＬＦデジタルサイネージシステム。
（項目６１）
前記視聴者の特徴を含む視聴者プロファイルを生成するように構成された視聴者プロファイリングモジュールをさらに備える、項目５６に記載のＬＦデジタルサイネージシステム。
（項目６２）
前記１つ以上のクライアントＬＦディスプレイシステムは、支払いと引き換えに、ホログラフィックコンテンツを受信する、項目５５に記載のＬＦデジタルサイネージシステム。
（項目６３）
前記ホログラフィックコンテンツは、前記クライアントＬＦディスプレイシステムのハードウェア構成に基づいて提示される、項目５５に記載のＬＦデジタルサイネージシステム。
（項目６４）
前記ハードウェア構成は、
解像度と、
１度当たりの投影光線数と、
視野と、
前記表示面の偏向角と、
前記表示面の次元と、
の１つ以上を含む、項目６３に記載のＬＦデジタルサイネージシステム。

Claims (64)

  1. ホログラフィックコンテンツを生成するように構成されたコントローラと、
    公共の場で、ビューイングボリューム内に位置する視聴者に、ホログラフィックオブジェクトボリューム内の前記ホログラフィックコンテンツを提示するように構成されている１つ以上のＬＦディスプレイモジュールを備えるＬＦディスプレイアセンブリと、
    を備える、ライトフィールド（ＬＦ）ディスプレイシステム。
  2. 前記ホログラフィックコンテンツは、
    広告と、
    発表と、
    公共サービスのアラートと、
    ニュースに関する情報と、
    天気に関する情報と、
    会場に関する情報と、
    交通状況や交通量状況に関する情報と、
    企業体に関する情報と、
    イベントの放送と、
    パフォーマンスと、
    芸術的コンテンツと、
    のうちの１つ以上を備える、請求項１に記載のＬＦディスプレイシステム。
  3. 前記１つ以上のＬＦディスプレイモジュールは、前記ホログラフィックオブジェクトボリューム内の追加のホログラフィックコンテンツを、前記ビューイングボリュームとは異なる第２のビューイングボリューム内に位置する第２の視聴者に提示するようにさらに構成される、請求項１に記載のＬＦディスプレイシステム。
  4. 前記ホログラフィックコンテンツは、前記ビューイングボリュームからは見ることができるが、前記第２のビューイングボリュームからは見ることができない、請求項３に記載のＬＦディスプレイシステム。
  5. 視聴者の動きを追跡するように構成された追跡システムをさらに備え、前記ビューイングボリュームおよび前記第２のビューイングボリュームは、前記視聴者の追跡された動きに基づいて定義される、請求項４に記載のＬＦディスプレイシステム。
  6. 前記ＬＦディスプレイシステムの前記ビューイングボリューム内の前記視聴者の動きの追跡、
    前記ホログラフィックコンテンツに対する前記視聴者の応答の監視、
    前記ＬＦディスプレイシステムの前記ビューイングボリューム内の前記視聴者の特徴を決定、
    の１つ以上を実行するように構成された追跡システムをさらに備える、請求項１に記載のＬＦディスプレイシステム。
  7. 前記追跡システムは、前記１つ以上のＬＦディスプレイモジュールの前の領域の画像をキャプチャするように構成された１つ以上のカメラを備える、請求項６に記載のＬＦディスプレイシステム。
  8. 前記１つ以上のカメラは、前記ＬＦディスプレイアセンブリの外部にある、請求項７に記載のＬＦディスプレイシステム。
  9. 前記１つ以上のＬＦディスプレイモジュールは、前記１つ以上のＬＦディスプレイモジュールの前の領域からのライトフィールドをキャプチャするようにさらに構成される、請求項６に記載のＬＦディスプレイシステム。
  10. 前記ＬＦディスプレイアセンブリは、前記１つ以上のＬＦディスプレイモジュールによってキャプチャされた前記１つ以上のＬＦディスプレイモジュールの前の前記領域からの前記ライトフィールドに基づいて入力を受信するようにさらに構成される、請求項９に記載のＬＦディスプレイシステム。
  11. 前記追跡システムは、前記１つ以上のＬＦディスプレイモジュールの前のオブジェクトの深さを検出するように構成された１つ以上の深度センサを備える、請求項６に記載のＬＦディスプレイシステム。
  12. 前記追跡される動きは、前記視聴者が前記ビューイングボリューム内で移動する速度を含み、前記ＬＦディスプレイアセンブリは、前記視聴者の前記速度に基づいて前記ホログラフィックコンテンツの提示を更新するように構成される、請求項６に記載のＬＦディスプレイシステム。
  13. 前記ホログラフィックコンテンツは、前記視聴者の前記速度に基づいて、前記視聴者の前の前記ホログラフィックオブジェクトボリューム内の位置に提示される、請求項１２に記載のＬＦディスプレイシステム。
  14. 前記視聴者の前記監視された応答は、
    前記ビューイングボリューム内の前記視聴者の位置と、
    前記視聴者の動きと、
    前記視聴者のジェスチャと、
    前記視聴者の顔の表情と、
    前記視聴者の視線と、
    のうちの１つ以上を含む、請求項６に記載のＬＦディスプレイシステム。
  15. 前記ＬＦディスプレイアセンブリは、前記視聴者の前記監視された応答に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項１４に記載のＬＦディスプレイシステム。
  16. 前記視聴者の前記監視された応答は、ネットワーク上のデバイスと共有される、請求項１４に記載のＬＦディスプレイシステム。
  17. 前記視聴者の前記監視された応答は、前記視聴者の視線を含み、前記ＬＦディスプレイアセンブリは、前記視聴者の前記視線に基づいて、前記ホログラフィックコンテンツを提示するように構成される、請求項６に記載のＬＦディスプレイシステム。
  18. 前記ホログラフィックコンテンツが、前記視聴者の前記視線と交差する前記ホログラフィックオブジェクトボリューム内の位置に提示される、請求項１７に記載のＬＦディスプレイシステム。
  19. 前記コントローラは、前記視聴者の前記視線に部分的に基づいてインプレッションが発生したことを決定するようにさらに構成される、請求項１７に記載のＬＦディスプレイシステム。
  20. 前記視聴者の前記決定された特徴は、前記視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、購入履歴、のうちの１つ以上を含む、請求項６に記載のＬＦディスプレイシステム。
  21. 前記ＬＦディスプレイアセンブリは、前記視聴者の前記決定された特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項２０に記載のＬＦディスプレイシステム。
  22. 前記視聴者の前記決定された特徴は、前記ネットワーク上のデバイスと共有される、請求項２０に記載のＬＦディスプレイシステム。
  23. 前記視聴者の特徴を含む視聴者プロファイルを生成するように構成された視聴者プロファイリングモジュールをさらに備える、請求項１に記載のＬＦディスプレイシステム。
  24. 前記ＬＦディスプレイアセンブリは、前記視聴者に対応する視聴者プロファイルの前記特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項２３に記載のＬＦディスプレイシステム。
  25. 前記ＬＦディスプレイシステムは、前記ホログラフィックコンテンツの提示に応じて、入力を受信するように構成される、請求項１に記載のＬＦディスプレイシステム。
  26. 前記ＬＦディスプレイアセンブリは、前記受信した入力に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項２５に記載のＬＦディスプレイシステム。
  27. 前記入力は、前記ホログラフィックコンテンツに関連するコンバージョンに対応する、請求項２５に記載のＬＦディスプレイシステム。
  28. 前記ＬＦディスプレイアセンブリは、前記受信した入力に基づいて前記コンバージョンを完了するために、後続のホログラフィックコンテンツを提示する、請求項２７に記載のＬＦディスプレイシステム。
  29. 前記コンバージョンは購入である、請求項２８に記載のＬＦディスプレイシステム。
  30. 前記ホログラフィックコンテンツは、
    物理的な商品と、
    デジタル資産と、
    レンダリングされるサービスと、
    のうちの１つ以上のホログラフィック広告である、請求項２７に記載のＬＦディスプレイシステム。
  31. 前記１つ以上のＬＦディスプレイモジュールのそれぞれは、
    複数のエネルギー源位置を提供するように構成されたエネルギーデバイス層と、
    複数のエネルギー導波路を含み、各導波路は、４次元ライトフィールド関数に従って、前記ホログラフィックオブジェクトを形成するために、前記エネルギー源位置に応じた表示面から、少なくとも１つの特定の方向に、少なくとも１つのエネルギー源位置からのエネルギーを投影するように構成される、エネルギー導波路層と、
    を備え、
    前記ホログラフィックオブジェクトのビューイング視点は、前記ホログラフィックオブジェクトボリューム内の前記ホログラフィックオブジェクトに対する前記ビューイングボリュームにおける視聴者の位置に部分的に基づいて変化する、請求項１に記載のＬＦディスプレイシステム。
  32. 前記エネルギー導波路層は、
    前記複数のエネルギー導波路に結合された静電スピーカのアレイをさらに備え、前記静電スピーカのアレイは、
    駆動時に音響エネルギーを生成するように構成された少なくとも１つの透明膜と、
    前記透明膜を音響的に駆動するように構成された複数の電極と、を備え、前記複数の電極の各電極は、前記複数のエネルギー導波路の１つ以上のエネルギー導波路の間に配置される、請求項３１に記載のＬＦディスプレイシステム。
  33. 前記１つ以上のＬＦディスプレイモジュールのそれぞれは、そこからホログラフィックオブジェクトが投影される表示面を有し、シームレス表示面が、前記１つ以上のＬＦディスプレイモジュールの前記表示面をタイル張りすることによって形成される、請求項１に記載のＬＦディスプレイシステム。
  34. 前記シームレスな表示面は、単一のＬＦディスプレイモジュールの前記表示面の表面積よりも大きい、請求項３３に記載のＬＦディスプレイシステム。
  35. １つ以上の感覚フィードバックデバイスを備え、前記ホログラフィックオブジェクトと同時に感覚フィードバックを提供するように構成された感覚フィードバックシステムをさらに備える、請求項１に記載のＬＦディスプレイシステム。
  36. 前記感覚フィードバックは、触覚フィードバック、音声フィードバック、芳香フィードバック、温度フィードバック、またはそれらの任意の組み合わせを含む、請求項３５に記載のＬＦディスプレイシステム。
  37. 前記感覚フィードバックシステムは、前記ホログラフィックオブジェクトに触覚フィードバックを提供するための超音波エネルギー投影デバイスを備え、前記超音波エネルギー投影デバイスは、前記ホログラフィックオブジェクトの表面に近接して、または前記ホログラフィックオブジェクトの表面と一致する体積触覚表面を生成するように構成される、請求項３５に記載のＬＦディスプレイシステム。
  38. 前記ホログラフィックコンテンツは、テクスチャを備えた物理的アイテムの表現であり、前記体積触覚表面は、前記物理的アイテムの前記テクスチャをシミュレートする、請求項３７に記載のＬＦディスプレイシステム。
  39. 前記体積触覚投影デバイスは、前記ＬＦディスプレイアセンブリの一部である、請求項３７に記載のＬＦディスプレイシステム。
  40. 前記ＬＦディスプレイシステムは、
    ネットワークを介して前記ＬＦディスプレイシステムに接続され、および前記ホログラフィックコンテンツを前記視聴者に提示するため前記ＬＦディスプレイシステムに提供するように構成されているサイネージコントロールシステムを備える、ＬＦデジタルサイネージ環境の構成要素である、請求項１に記載のＬＦディスプレイシステム。
  41. 前記ホログラフィックコンテンツは、
    広告と、
    発表と、
    公共サービスのアラートと、
    ニュースに関する情報と、
    天気に関する情報と、
    会場に関する情報と、
    交通状況や交通量状況に関する情報と、
    企業体に関する情報と、
    イベントの放送と、
    パフォーマンスと、
    芸術的コンテンツと、
    のうちの１つ以上を備える、請求項４０に記載のＬＦディスプレイシステム。
  42. 前記ＬＦディスプレイシステムは、前記ネットワークを介して符号化されたフォーマットで前記ホログラフィックコンテンツを受信するように構成され、さらに、前記ホログラフィックコンテンツを前記視聴者に提示するためのフォーマットに復号するように構成される、請求項４０に記載のＬＦディスプレイシステム。
  43. 前記符号化されたフォーマットは、ベクトル化されたフォーマットであり、前記復号されたフォーマットは、ラスタライズされたフォーマットである、請求項４２に記載のＬＦディスプレイシステム。
  44. 前記ホログラフィックコンテンツは、前記ＬＦディスプレイシステムのハードウェア構成に基づいて提示される、請求項１に記載のＬＦディスプレイシステム。
  45. 前記ハードウェア構成は、
    解像度と、
    １度当たりの投影光線数と、
    視野と、
    前記表示面の偏向角と、
    前記表示面の次元と、
    の１つ以上を備える、請求項４４に記載のＬＦディスプレイシステム。
  46. ライトフィールド（ＬＦ）ディスプレイシステムのビューイングボリューム内の視聴者の動きを追跡することと、
    前記追跡された動きに部分的に基づいて、前記視聴者が前記ビューイングボリューム内にいると決定することと、
    前記ＬＦディスプレイシステムの１つ以上のＬＦディスプレイモジュールを介して、前記視聴者が前記ビューイングボリューム内にいるという決定に部分的に基づいて、ホログラフィックオブジェクトボリューム内のホログラフィックコンテンツを前記視聴者に提示することと、
    を含む方法。
  47. 前記視聴者が前記ビューイングボリューム内にいるという前記決定に基づいて、前記ＬＦディスプレイシステムの前記視聴者にホログラフィックコンテンツを提示する機会を特定することと、
    コンテンツストアから、前記ホログラフィックコンテンツを選択することであって、前記ホログラフィックコンテンツはパラメータのセットを含む、選択することと、
    前記パラメータのセットに基づいて、前記ホログラフィックコンテンツの表示命令を生成することと、をさらに含み、
    前記ホログラフィックコンテンツを前記視聴者に提示することは、前記パラメータのセットにさらに基づく、請求項４６に記載の方法。
  48. 前記ビューイングボリューム内の前記視聴者の動きを追跡することと、
    前記ホログラフィックコンテンツに対する前記視聴者の応答を監視することと、
    前記ビューイング内の前記視聴者の特徴を決定することと、のうちの１つ以上をさらに含む、請求項４６に記載の方法。
  49. 前記視聴者の前記監視された応答に基づいて、インプレッションの発生を判断することをさらに含む、請求項４８に記載の方法。
  50. 前記視聴者の前記追跡された動き、前記視聴者の前記監視された応答、および前記視聴者の決定された前記特徴のうちの１つ以上に応じて、前記ホログラフィックコンテンツの提示を更新することをさらに含む、請求項４８に記載の方法。
  51. 前記ホログラフィックコンテンツの提示に応じて、前記視聴者から入力を受信することをさらに含む、請求項４６に記載の方法。
  52. 前記視聴者の前記応答を監視することは、前記視聴者の視線を記録することを含み、前記方法は、
    前記視聴者の前記視線と交差する前記ホログラフィックオブジェクトボリューム内の位置に、修正されたホログラフィックコンテンツを提示することをさらに含む、請求項４８に記載の方法。
  53. 前記視聴者の前記視線に部分的に基づいてインプレッションが発生したかどうかを決定することをさらに含む、請求項５２に記載の方法。
  54. 前記ホログラフィックコンテンツに関連付けられたコンバージョンに対応する入力を受信することと、
    前記受信した入力に基づいて、前記コンバージョンを完了するための後続のホログラフィックコンテンツを提示することと、をさらに含む、請求項４６に記載の方法。
  55. １つ以上のクライアントＬＦディスプレイシステムを備えるライトフィールド（ＬＦ）デジタルサイネージシステムであって、各ディスプレイシステムは、
    ホログラフィックコンテンツの配信を仲介するように構成されたオンラインシステムからネットワークを介してホログラフィックコンテンツを受信するように構成されたコントローラと、
    １つ以上のＬＦディスプレイモジュールを備えるＬＦディスプレイアセンブリであって、前記ＬＦディスプレイモジュールは、前記ホログラフィックコンテンツをホログラフィックオブジェクトボリューム内のデジタルサイネージとしてビューイングボリューム内に配置された視聴者に表示するように構成された、ＬＦディスプレイアセンブリと、
    を備える、ＬＦデジタルサイネージシステム。
  56. 前記１つ以上のクライアントＬＦディスプレイシステムは、追跡システムをさらに備え、前記追跡システムは、
    前記ホログラフィックコンテンツに対する前記視聴者の応答の監視と、
    前記ビューイングボリューム内の前記視聴者の特徴を決定することと、
    の１つ以上を実行するように構成される、請求項５５に記載のＬＦデジタルサイネージシステム。
  57. 前記視聴者の前記監視された応答は、
    前記ビューイングボリューム内の前記視聴者の位置と、
    前記視聴者の動きと、
    前記視聴者のジェスチャと、
    前記視聴者の顔の表情と、
    前記視聴者の視線と、
    の１つ以上を含む、請求項５６に記載のＬＦデジタルサイネージシステム。
  58. 前記ＬＦディスプレイアセンブリは、前記視聴者の前記監視された応答に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項５６に記載のＬＦデジタルサイネージシステム。
  59. 前記視聴者の前記決められた特徴は、前記視聴者の人口統計情報、職歴、学歴、性別、収入、購入に費やしたお金、趣味、場所、年齢、視聴履歴、アイテムに費やした時間、以前に閲覧したアイテムのカテゴリ、および購入履歴、のうちの１つ以上を含む、請求項５６に記載のＬＦデジタルサイネージシステム。
  60. 前記ＬＦディスプレイアセンブリは、前記視聴者の前記決定された特徴に応じて、前記ホログラフィックコンテンツの提示を更新するようにさらに構成される、請求項５６に記載のＬＦデジタルサイネージシステム。
  61. 前記視聴者の特徴を含む視聴者プロファイルを生成するように構成された視聴者プロファイリングモジュールをさらに備える、請求項５６に記載のＬＦデジタルサイネージシステム。
  62. 前記１つ以上のクライアントＬＦディスプレイシステムは、支払いと引き換えに、ホログラフィックコンテンツを受信する、請求項５５に記載のＬＦデジタルサイネージシステム。
  63. 前記ホログラフィックコンテンツは、前記クライアントＬＦディスプレイシステムのハードウェア構成に基づいて提示される、請求項５５に記載のＬＦデジタルサイネージシステム。
  64. 前記ハードウェア構成は、
    解像度と、
    １度当たりの投影光線数と、
    視野と、
    前記表示面の偏向角と、
    前記表示面の次元と、
    の１つ以上を含む、請求項６３に記載のＬＦデジタルサイネージシステム。
JP2022506195A 2019-08-09 2019-08-09 ライトフィールドディスプレイシステムに基づいたデジタルサイネージシステム発明者：ジョナサン・シャン・カラフィン、ブレンダン・エルウッド・ベベンシー、ジョン・ドーム Pending JP2022552770A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2019/046030 WO2021029859A1 (en) 2019-08-09 2019-08-09 Light field display system based digital signage system

Publications (1)

Publication Number Publication Date
JP2022552770A true JP2022552770A (ja) 2022-12-20

Family

ID=74498136

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022506195A Pending JP2022552770A (ja) 2019-08-09 2019-08-09 ライトフィールドディスプレイシステムに基づいたデジタルサイネージシステム発明者：ジョナサン・シャン・カラフィン、ブレンダン・エルウッド・ベベンシー、ジョン・ドーム

Country Status (7)

Country Link
US (2) US11902500B2 (ja)
EP (1) EP4010756A4 (ja)
JP (1) JP2022552770A (ja)
KR (1) KR20220045166A (ja)
CN (1) CN114303105A (ja)
CA (1) CA3150016A1 (ja)
WO (1) WO2021029859A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10298921B1 (en) 2018-02-27 2019-05-21 Looking Glass Factory, Inc. Superstereoscopic display with enhanced off-angle separation
US20220335698A1 (en) * 2019-12-17 2022-10-20 Ashley SinHee Kim System and method for transforming mapping information to an illustrated map
WO2021237065A1 (en) * 2020-05-21 2021-11-25 Looking Glass Factory, Inc. System and method for holographic image display
US11415935B2 (en) 2020-06-23 2022-08-16 Looking Glass Factory, Inc. System and method for holographic communication
WO2022119940A1 (en) 2020-12-01 2022-06-09 Looking Glass Factory, Inc. System and method for processing three dimensional images
WO2023086398A1 (en) * 2021-11-09 2023-05-19 Innopeak Technology, Inc. 3d rendering networks based on refractive neural radiance fields

Family Cites Families (126)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2251700B (en) 1990-11-30 1994-08-24 Combined Optical Ind Ltd Multiple array lens
NL192610C (nl) 1990-12-13 1997-11-04 Enschede & Zonen Grafisch Beelddrager en werkwijze voor het op een beelddrager drukken van een beeld.
US5481385A (en) 1993-07-01 1996-01-02 Alliedsignal Inc. Direct view display device with array of tapered waveguide on viewer side
US5822125A (en) 1996-12-20 1998-10-13 Eastman Kodak Company Lenslet array system
US7151849B1 (en) * 2000-01-11 2006-12-19 Zebra Imaging, Inc. Efficient block transform including pre-processing and post processing for autostereoscopic displays
US6680761B1 (en) 2000-01-24 2004-01-20 Rainbow Displays, Inc. Tiled flat-panel display having visually imperceptible seams, optimized for HDTV applications
US6556280B1 (en) 2000-09-19 2003-04-29 Optical Switch Corporation Period reconfiguration and closed loop calibration of an interference lithography patterning system and method of operation
US6563648B2 (en) 2000-10-20 2003-05-13 Three-Five Systems, Inc. Compact wide field of view imaging system
JP3429282B2 (ja) 2001-02-02 2003-07-22 リサーチ・インターナショナル・インコーポレーテッド 自動化されたシステム、及びサンプルの分析方法
TW200402012A (en) 2002-07-23 2004-02-01 Eastman Kodak Co OLED displays with fiber-optic faceplates
AU2003279127A1 (en) 2002-10-03 2004-04-23 Massachusetts Institute Of Technology Method for fabrication of diffractive optical elements for maskless lithography
JP2004294861A (ja) * 2003-03-27 2004-10-21 Sanyo Electric Co Ltd 立体映像表示装置
US20050243275A1 (en) 2004-04-30 2005-11-03 Curatu Eugene O Wavefront sensor and relay for optical measurement and associated methods
JP2008508621A (ja) 2004-08-03 2008-03-21 シルバーブルック リサーチ ピーティワイ リミテッド ウォークアップ印刷
US7329982B2 (en) 2004-10-29 2008-02-12 3M Innovative Properties Company LED package with non-bonded optical element
DE102004063838A1 (de) * 2004-12-23 2006-07-06 Seereal Technologies Gmbh Verfahren und Einrichtung zum Berechnen computer generierter Videohologramme
US20060191566A1 (en) 2005-02-28 2006-08-31 Applied Optical Materials Solar concentrator system using photonic engineered materials
US20070285554A1 (en) * 2005-10-31 2007-12-13 Dor Givon Apparatus method and system for imaging
US9101279B2 (en) * 2006-02-15 2015-08-11 Virtual Video Reality By Ritchey, Llc Mobile user borne brain activity data and surrounding environment data correlation system
US20080170293A1 (en) 2006-03-15 2008-07-17 Lucente Mark E Dynamic autostereoscopic displays
US20080144174A1 (en) 2006-03-15 2008-06-19 Zebra Imaging, Inc. Dynamic autostereoscopic displays
US7710845B2 (en) 2007-02-09 2010-05-04 Sanyo Electric Co., Ltd. Holographic memory and holographic recording apparatus
US20080231926A1 (en) * 2007-03-19 2008-09-25 Klug Michael A Systems and Methods for Updating Dynamic Three-Dimensional Displays with User Input
WO2009011946A1 (en) * 2007-04-17 2009-01-22 University Of Southern California Rendering for an interactive 360 degree light field display
US8149265B2 (en) 2007-08-11 2012-04-03 Massachusetts Institute Of Technology Holographic video display system
US10108146B2 (en) 2007-08-11 2018-10-23 Massachusetts Institute Of Technology Anisotropic leaky-mode modulator for holographic video displays
US20140300695A1 (en) 2007-08-11 2014-10-09 Massachusetts Institute Of Technology Full-Parallax Acousto-Optic/Electro-Optic Holographic Video Display
DE102007042984A1 (de) 2007-09-10 2009-03-12 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zur optischen Navigation
CN103529554B (zh) * 2008-07-10 2018-07-31 实景成像有限公司 宽视角显示和用户接口
US20100156895A1 (en) 2008-10-26 2010-06-24 Zebra Imaging, Inc. Processing Pre-recorded Hogel Data
US9256007B2 (en) 2009-04-21 2016-02-09 Svv Technology Innovations, Inc. Light collection and illumination systems employing planar waveguide
US9083958B2 (en) 2009-08-06 2015-07-14 Qualcomm Incorporated Transforming video data in accordance with three dimensional input formats
KR101600010B1 (ko) 2009-09-22 2016-03-04 삼성전자주식회사 모듈레이터, 모듈레이터를 이용한 광 필드 데이터 획득 장치, 모듈레이터를 이용한 광 필드 데이터 처리 장치 및 방법
EP3567416A1 (en) 2009-10-12 2019-11-13 The Trustees of Columbia University in the City of New York Photonic crystal spectrometer
EP2553531B1 (en) * 2010-04-01 2019-10-16 SeeReal Technologies S.A. Method and device for encoding three-dimensional scenes which include transparent objects in a holographic system
KR101756910B1 (ko) 2010-05-11 2017-07-26 삼성전자주식회사 감쇠 패턴을 포함하는 마스크를 이용한 광 필드 영상 처리 장치 및 방법
WO2011158752A1 (ja) 2010-06-15 2011-12-22 シャープ株式会社 表示装置およびその製造方法
US9179134B2 (en) 2011-01-18 2015-11-03 Disney Enterprises, Inc. Multi-layer plenoptic displays that combine multiple emissive and light modulating planes
US20120268950A1 (en) 2011-04-22 2012-10-25 Parkyn William A Wide-Angle Non-Imaging Illumination Lens Arrayable for Close Planar Targets
US9640170B2 (en) 2011-05-04 2017-05-02 Thornton Tomasetti, Inc. Acoustically transparent and acoustic wave steering materials for acoustic cloaking and methods of fabrication thereof
EP2715669A4 (en) 2011-05-25 2015-03-18 Third Dimension Ip Llc ALIGNMENT, CALIBRATION AND RESTITUTION SYSTEMS AND METHODS FOR TOTAL 3D ANGLED DISPLAY
ES2622490T3 (es) 2011-06-15 2017-07-06 Hewlett-Packard Development Company, L.P. Impresión de imagen de seguridad
JP2013011669A (ja) * 2011-06-28 2013-01-17 Kyocera Corp 電子表示装置
CN102231044A (zh) 2011-06-29 2011-11-02 浙江大学 基于多屏拼接的体视三维显示装置
US8587635B2 (en) * 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
EP2551827A3 (en) 2011-07-28 2017-08-02 Sony Mobile Communications AB Presenting three dimensional depth
US8525829B2 (en) 2011-09-19 2013-09-03 Disney Enterprises, Inc. Transparent multi-view mask for 3D display systems
US8593564B2 (en) 2011-09-22 2013-11-26 Apple Inc. Digital camera including refocusable imaging mode adaptor
US9229231B2 (en) * 2011-12-07 2016-01-05 Microsoft Technology Licensing, Llc Updating printed content with personalized virtual data
US8917453B2 (en) 2011-12-23 2014-12-23 Microsoft Corporation Reflective array waveguide
US9612395B2 (en) 2012-01-26 2017-04-04 Corning Incorporated Optical fiber with a variable refractive index profile
US8953012B2 (en) 2012-02-13 2015-02-10 Raytheon Company Multi-plenoptic system with image stacking and method for wide field-of-regard high-resolution imaging
KR101946031B1 (ko) * 2012-02-15 2019-02-11 한국전자통신연구원 시야창의 위치를 조정할 수 있는 홀로그래픽 디스플레이 장치
US8761534B2 (en) 2012-02-16 2014-06-24 Ricoh Co., Ltd. Optimization of plenoptic imaging systems
CN102591124A (zh) 2012-02-21 2012-07-18 浙江大学 基于拼接光场的横向大视场三维显示方法及系统
KR20130112541A (ko) 2012-04-04 2013-10-14 삼성전자주식회사 플레놉틱 카메라 장치
US9671566B2 (en) 2012-06-11 2017-06-06 Magic Leap, Inc. Planar waveguide apparatus with diffraction element(s) and system employing same
US9841563B2 (en) 2012-08-04 2017-12-12 Paul Lapstun Shuttered waveguide light field display
US8754829B2 (en) 2012-08-04 2014-06-17 Paul Lapstun Scanning light field camera and display
US9860522B2 (en) 2012-08-04 2018-01-02 Paul Lapstun Head-mounted light field display
WO2014077931A2 (en) 2012-08-28 2014-05-22 President And Fellows Of Harvard College Adaptive optic and acoustic devices
US9720505B2 (en) 2013-01-03 2017-08-01 Meta Company Extramissive spatial imaging digital eye glass apparatuses, methods and systems for virtual or augmediated vision, manipulation, creation, or interaction with objects, materials, or other entities
US9417762B2 (en) 2013-01-09 2016-08-16 Northrop Grumman Systems Corporation System and method for providing a virtual immersive environment
US9310769B2 (en) 2013-03-28 2016-04-12 Disney Enterprises, Inc. Coarse integral holographic display
KR102040653B1 (ko) * 2013-04-08 2019-11-06 엘지디스플레이 주식회사 홀로그래피 입체 영상 표시장치
US10062210B2 (en) 2013-04-24 2018-08-28 Qualcomm Incorporated Apparatus and method for radiance transfer sampling for augmented reality
EP2992367A1 (en) 2013-05-01 2016-03-09 Corning Incorporated Random air line rod
WO2014188149A1 (en) 2013-05-20 2014-11-27 Milan Momcilo Popovich Holographic waveguide eye tracker
US9874749B2 (en) 2013-11-27 2018-01-23 Magic Leap, Inc. Virtual and augmented reality systems and methods
US9464001B2 (en) 2013-06-18 2016-10-11 California Institute Of Technology Engineered aggregates for metamaterials
JP6480434B2 (ja) * 2013-06-27 2019-03-13 アイサイト モバイル テクノロジーズ リミテッド デジタルデバイスとの対話のための直接的なポインティング検出のためのシステムおよび方法
US9304492B2 (en) 2013-10-31 2016-04-05 Disney Enterprises, Inc. Scalable and tileable holographic displays
CN103616770B (zh) 2013-12-12 2016-02-17 北京理工大学 基于多投影机和透射式散射屏幕的周视三维显示装置
FR3015743A1 (fr) * 2013-12-23 2015-06-26 Orange Procede de traitement d'une sequence d'images holographiques, dispositifs, signaux, dispositifs et programme d'ordinateur associes
WO2015104239A2 (en) * 2014-01-07 2015-07-16 Seereal Technologies S.A. Display device for holographic reconstruction
US9615068B2 (en) * 2014-01-15 2017-04-04 Disney Enterprises, Inc. Optical vortex 3D displays
US9746686B2 (en) 2014-05-19 2017-08-29 Osterhout Group, Inc. Content position calibration in head worn computing
KR102205419B1 (ko) 2014-02-04 2021-01-21 삼성디스플레이 주식회사 커브드 백라이트 어셈블리 및 이를 갖는 커브드 표시장치
CN103777455B (zh) 2014-02-25 2016-08-17 浙江大学 基于光场拼接的球形沉浸式三维显示方法及系统
US9465361B2 (en) 2014-03-31 2016-10-11 Disney Enterprises, Inc. Image based multiview multilayer holographic rendering algorithm
GB2517069B (en) * 2014-06-23 2015-09-02 Liang Kong Autostereoscopic virtual reality platform
US20160014395A1 (en) 2014-07-10 2016-01-14 Arete Associates Data fusion processing to identify obscured objects
CN106716227B (zh) 2014-07-31 2021-12-10 伊奎蒂公司 通过漫射介质的图像及波场投影
CN105334690B (zh) 2014-08-14 2018-07-27 台达电子工业股份有限公司 环绕光场显示器及其操作方法
WO2016046514A1 (en) 2014-09-26 2016-03-31 LOKOVIC, Kimberly, Sun Holographic waveguide opticaltracker
JP6384996B2 (ja) * 2014-09-29 2018-09-05 株式会社ジャパンディスプレイ 表示装置
CN107110637B (zh) 2014-12-22 2019-11-01 赛博光学公司 对三维测量系统的校准进行更新
US9544583B2 (en) 2015-01-09 2017-01-10 Ricoh Company, Ltd. Object space calibration of plenoptic imaging systems
US9740169B2 (en) 2015-03-19 2017-08-22 Disney Enterprises, Inc. Holographic high power illumination distribution system
US9602047B2 (en) 2015-03-24 2017-03-21 Ecole Polytechnique Federale De Lausanne (Eplf) Self-tracking solar concentrator device
US10591869B2 (en) 2015-03-24 2020-03-17 Light Field Lab, Inc. Tileable, coplanar, flat-panel 3-D display with tactile and audio interfaces
US9712810B2 (en) 2015-06-03 2017-07-18 Disney Enterprises, Inc. Tracked automultiscopic 3D tabletop display
KR20170029320A (ko) * 2015-09-07 2017-03-15 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10110883B2 (en) * 2015-09-30 2018-10-23 Daqri, Llc Bidirectional holographic lens
US10378882B2 (en) 2015-11-04 2019-08-13 Magic Leap, Inc. Light field display metrology
CN105487239B (zh) * 2015-11-13 2018-03-02 苏州苏大维格光电科技股份有限公司 指向性彩色滤光片和裸眼3d显示装置
US9799161B2 (en) * 2015-12-11 2017-10-24 Igt Canada Solutions Ulc Enhanced electronic gaming machine with gaze-aware 3D avatar
CN108780297B (zh) * 2015-12-28 2021-09-21 视瑞尔技术公司 用于优化图像质量的显示装置和方法
US9813673B2 (en) * 2016-01-20 2017-11-07 Gerard Dirk Smits Holographic video capture and telepresence system
WO2017127897A1 (en) 2016-01-27 2017-08-03 Paul Lapstun Shuttered waveguide light field display
US10228653B2 (en) * 2016-04-07 2019-03-12 Pixie Dust Technologies, Inc. System and method for rendering interactive aerial volumetric graphics and generating spatial audio using femtosecond lasers
GB2550134A (en) * 2016-05-09 2017-11-15 Euro Electronics (Uk) Ltd Method and apparatus for eye-tracking light field display
KR20230166155A (ko) 2016-07-15 2023-12-06 라이트 필드 랩 인코포레이티드 라이트 필드 및 홀로그램 도파관 어레이에서의 에너지의 선택적 전파
WO2018014046A1 (en) 2016-07-15 2018-01-18 Light Field Lab, Inc. Encoded energy waveguides for holographic super resolution
WO2018014045A2 (en) 2016-07-15 2018-01-18 Light Field Lab, Inc. Method of calibration for holographic energy directing systems
KR102629584B1 (ko) * 2016-07-19 2024-01-25 삼성전자주식회사 빔 조향 백라이트 유닛 및 이를 포함하는 홀로그래픽 디스플레이 장치
US10154253B2 (en) * 2016-08-29 2018-12-11 Disney Enterprises, Inc. Multi-view displays using images encoded with orbital angular momentum (OAM) on a pixel or image basis
US10698221B2 (en) * 2017-01-05 2020-06-30 Lusospace, Projectos Engenharia Lda Display device with a collimated light beam
US10573056B2 (en) * 2017-03-06 2020-02-25 3D Patents, Llc Multi-view processing unit systems and methods
US10691066B2 (en) * 2017-04-03 2020-06-23 International Business Machines Corporation User-directed holographic object design
US10880086B2 (en) 2017-05-02 2020-12-29 PracticalVR Inc. Systems and methods for authenticating a user on an augmented, mixed and/or virtual reality platform to deploy experiences
KR102270131B1 (ko) * 2017-05-26 2021-06-28 구글 엘엘씨 스파스 샘플링 슈퍼-해상도를 가진 니어-아이 디스플레이
US20190011700A1 (en) * 2017-07-05 2019-01-10 Bruce Reiner Customizable three-dimensional interactive visualization and multi-sensory system and method
EP3531244A1 (en) * 2018-02-26 2019-08-28 Thomson Licensing Method, apparatus and system providing alternative reality environment
US10803832B2 (en) * 2017-08-01 2020-10-13 Samsung Electronics Co., Ltd. Synchronizing holographic displays and 3D objects with physical video panels
JP6998736B2 (ja) * 2017-11-10 2022-01-18 飛島建設株式会社 商品販売システム
US10560689B2 (en) 2017-11-28 2020-02-11 Paul Lapstun Viewpoint-optimized light field display
CN111201469B (zh) * 2017-12-08 2022-08-12 陈端军 在压缩域中运作而动态显示真实三维图像的直线变换数字全息系统
US20200333609A1 (en) * 2017-12-21 2020-10-22 Seereal Technolgies S.A. Display device and method for tracking a virtual visibility region
KR102629587B1 (ko) * 2018-01-05 2024-01-25 삼성전자주식회사 색수차 저감 홀로그래픽 디스플레이 장치
WO2019140269A1 (en) * 2018-01-14 2019-07-18 Light Field Lab, Inc. Systems and methods for transverse energy localization in energy relays using ordered structures
US11330251B2 (en) * 2019-01-16 2022-05-10 International Business Machines Corporation Defining a holographic object allowance area and movement path
US10904479B2 (en) * 2019-03-12 2021-01-26 Light Field Lab, Inc. Video communication including holographic content
US20200290513A1 (en) * 2019-03-13 2020-09-17 Light Field Lab, Inc. Light field display system for vehicle augmentation
US11212514B2 (en) * 2019-03-25 2021-12-28 Light Field Lab, Inc. Light field display system for cinemas
US11435695B2 (en) * 2019-06-25 2022-09-06 Intel Corporation Deep computational holography

Also Published As

Publication number Publication date
US20240155101A1 (en) 2024-05-09
CA3150016A1 (en) 2021-02-18
WO2021029859A1 (en) 2021-02-18
CN114303105A (zh) 2022-04-08
US11902500B2 (en) 2024-02-13
EP4010756A1 (en) 2022-06-15
KR20220045166A (ko) 2022-04-12
EP4010756A4 (en) 2023-09-20
US20210044795A1 (en) 2021-02-11

Similar Documents

Publication Publication Date Title
US11902500B2 (en) Light field display system based digital signage system
US20230070130A1 (en) Light field display system for performance events
CN112512653B (zh) 基于光场显示系统的游乐园景点
CA3131680A1 (en) Video communication including holographic content
US20220210395A1 (en) Light field display system for cinemas
US20200371472A1 (en) Light Field Display System Based Commercial System
JP7492577B2 (ja) 成人向けライトフィールドディスプレイシステム発明者：ジョナサン・シャン・カラフィンブレンダン・エルウッド・ベベンシージョン・ドーム
CN114730081A (zh) 用于游戏环境的光场显示系统

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220808

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220808

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20221209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231024

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20231218

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20240313

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240424