DE102007023739A1 - Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit - Google Patents

Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit Download PDF

Info

Publication number
DE102007023739A1
DE102007023739A1 DE102007023739A DE102007023739A DE102007023739A1 DE 102007023739 A1 DE102007023739 A1 DE 102007023739A1 DE 102007023739 A DE102007023739 A DE 102007023739A DE 102007023739 A DE102007023739 A DE 102007023739A DE 102007023739 A1 DE102007023739 A1 DE 102007023739A1
Authority
DE
Germany
Prior art keywords
hologram
sub
color
slm
object point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
DE102007023739A
Other languages
English (en)
Other versions
DE102007023739B4 (de
Inventor
Armin Schwerdtner
Alexander Schwerdtner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SeeReal Technologies SA
Original Assignee
SeeReal Technologies SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SeeReal Technologies SA filed Critical SeeReal Technologies SA
Priority to DE102007023739.3A priority Critical patent/DE102007023739B4/de
Priority to GBGB0718602.6A priority patent/GB0718602D0/en
Priority to GBGB0718633.1A priority patent/GB0718633D0/en
Priority to GBGB0718595.2A priority patent/GB0718595D0/en
Priority to GBGB0718656.2A priority patent/GB0718656D0/en
Priority to GBGB0718598.6A priority patent/GB0718598D0/en
Priority to GBGB0718626.5A priority patent/GB0718626D0/en
Priority to GBGB0718659.6A priority patent/GB0718659D0/en
Priority to GBGB0718619.0A priority patent/GB0718619D0/en
Priority to GBGB0718649.7A priority patent/GB0718649D0/en
Priority to GBGB0718629.9A priority patent/GB0718629D0/en
Priority to GBGB0718617.4A priority patent/GB0718617D0/en
Priority to GBGB0718634.9A priority patent/GB0718634D0/en
Priority to GBGB0718614.1A priority patent/GB0718614D0/en
Priority to GBGB0718632.3A priority patent/GB0718632D0/en
Priority to GBGB0718654.7A priority patent/GB0718654D0/en
Priority to GBGB0718622.4A priority patent/GB0718622D0/en
Priority to GBGB0718640.6A priority patent/GB0718640D0/en
Priority to GBGB0718607.5A priority patent/GB0718607D0/en
Priority to GBGB0718636.4A priority patent/GB0718636D0/en
Priority to GB0808931A priority patent/GB2449355B/en
Priority to JP2010507929A priority patent/JP2011504237A/ja
Priority to JP2010507930A priority patent/JP5415406B2/ja
Priority to KR1020097025974A priority patent/KR101669263B1/ko
Priority to JP2010507931A priority patent/JP2011504239A/ja
Priority to TW097118295A priority patent/TWI400589B/zh
Priority to CA002687374A priority patent/CA2687374A1/en
Priority to CN200880024631.XA priority patent/CN101802725B/zh
Priority to CN2008800163105A priority patent/CN101689036B/zh
Priority to PCT/EP2008/056028 priority patent/WO2008138984A2/en
Priority to KR1020167029199A priority patent/KR101978545B1/ko
Priority to CA002687371A priority patent/CA2687371A1/en
Priority to KR1020097025971A priority patent/KR101505486B1/ko
Priority to US12/600,276 priority patent/US9368052B2/en
Priority to PCT/EP2008/056030 priority patent/WO2008138986A2/en
Priority to US12/600,296 priority patent/US8218211B2/en
Priority to CN200880024344.9A priority patent/CN101743519B/zh
Priority to JP2010507932A priority patent/JP5539187B2/ja
Priority to GB0808937.7A priority patent/GB2449357B/en
Priority to KR1020097026259A priority patent/KR101496799B1/ko
Priority to US12/600,287 priority patent/US8487980B2/en
Priority to PCT/EP2008/056029 priority patent/WO2008138985A2/en
Priority to US12/600,280 priority patent/US20100149139A1/en
Priority to KR1020097025976A priority patent/KR101505485B1/ko
Priority to JP2010507928A priority patent/JP5587766B2/ja
Priority to PCT/EP2008/056025 priority patent/WO2008138982A1/de
Priority to CA002687378A priority patent/CA2687378A1/en
Priority to EP08759672.2A priority patent/EP2160656B1/de
Priority to EP08759673A priority patent/EP2160657B1/de
Priority to CN2008800247454A priority patent/CN101802726B/zh
Priority to US12/600,357 priority patent/US8437057B2/en
Priority to GB0808934A priority patent/GB2449356B/en
Priority to GB0808942A priority patent/GB2449359B/en
Publication of DE102007023739A1 publication Critical patent/DE102007023739A1/de
Priority to JP2013245433A priority patent/JP5996514B2/ja
Priority to JP2014230087A priority patent/JP6434781B2/ja
Priority to US15/148,142 priority patent/US9946224B2/en
Priority to JP2016256636A priority patent/JP6770429B2/ja
Application granted granted Critical
Publication of DE102007023739B4 publication Critical patent/DE102007023739B4/de
Priority to US15/928,891 priority patent/US10761481B2/en
Priority to JP2019123087A priority patent/JP6882379B2/ja
Priority to US17/007,104 priority patent/US11269295B2/en
Priority to JP2021078774A priority patent/JP2021140171A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • G03H2001/0833Look up table
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249Holobject properties
    • G03H2001/2263Multicoloured holobject
    • G03H2001/2271RGB holobject
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/45Representation of the decomposed object
    • G03H2210/454Representation of the decomposed object into planes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2226/00Electro-optic or electronic components relating to digital holography
    • G03H2226/02Computing or processing means, e.g. digital signal processor [DSP]

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Holo Graphy (AREA)

Abstract

Verfahren zum Rendern und Generieren von Farbvideohologrammen für eine holographische Wiedergabeeinrichtung (HAE), mit mindestens einem Lichtmodulatormittel (SLM), in welches eine in Objektpunkte (OP) zerlegte Szene (3-D-S) als Gesamthologramm (HSigma<SUB>SLM</SUB>) kodiert wird und als Rekonstruktion von einem Sichtbarkeitsbereich (VR) aus zu sehen ist, der innerhalb eines Periodizitätsintervalls der Rekonstruierten des Videohologramms liegt, wobei der Sichtbarkeitsbereich (VR) zusammen mit jedem zu rekonstruierenden Objektpunkt (OP) der Szene (3-D-S) ein Subhologramm (SH) definiert und das Gesamthologramm (HSigma<SUB>SLM</SUB>) aus einer Überlagerung von Subhologrammen (SH) gebildet wird, wobei eine 3-D-Rendering-Graphikpipeline (RGP) eine durch Bilddaten mit Tiefeninformation repräsentierte Szene (3-D-S) in Objektpunkte (OP) strukturiert und für die Objektpunkte (OP) mindestens Farb- und Tiefeninformationen ermittelt und bereitstellt, dadurch gekennzeichnet, dass für jede Grundfarbe jeweils eine holographische Farbpipeline (HGP) farbbezogene Hologrammwerte generiert, indem für jeden sichtbaren Objektpunkt (OP) die komplexen Hologrammwerte des Subhologramms (SH) bevorzugt analytisch aus der Wellenfront des jeweils zu rekonstruierenden Objektpunkts (OP) in einem Modulatorbereich (MR) des Lichtmodulatormittels (SLM) ermittelt werden.

Description

  • Gebiet der Erfindung
  • Die Erfindung betrifft ein Verfahren zum Rendern und Generieren von Farbvideohologrammen aus dreidimensionalen Bilddaten mit Tiefeninformation in Echtzeit zur Erweiterung einer 3D-Rendering-Graphikpipeline.
  • Im Bereich des Renderns betrifft die Erfindung die so genannte 3D-Rendering-Pipeline oder Grafikpipeline, welche die Algorithmen von der vektoriellen, mathematischen Beschreibung einer 3D-Szene zum gerasterten Bild auf dem Monitor umfasst. Die dreidimensionalen Bilddaten beinhalten Tiefeninformation sowie in der Regel zusätzliche Beschreibungen zu Material- und Oberflächeneigenschaften.
  • In der 3D-Rendering-Graphikpipeline erfolgt beispielsweise die Umrechnung von Bildschirmkoordinaten in Gerätekoordinaten, Texturierung, Clipping, sowie das Antialiasing. Das gerasterte Bild, eine 2D-Projektion der 3D-Szene, das im Framebuffer eines Grafikadapters gespeichert wird, enthält nunmehr die Daten der Pixelwerte für die steuerbaren Pixel eines Monitors, beispielsweise eines LCD-Displays.
  • Die Erfindung betrifft ebenso ein analytisches Verfahren zur Berechnung von Hologrammwerten zur Farbdarstellung einer Szene auf einer holographischen Wiedergabeeinrichtung.
  • Einer derartigen holographischen Wiedergabeeinrichtung liegt im Wesentlichen das Prinzip zugrunde, dass mit mindestens einem Lichtmodulatormittel, in welches eine in Objektpunkte zerlegte Szene als Gesamthologramm kodiert wird und als Rekonstruktion von einem Sichtbarkeitsbereich aus zu sehen ist, der innerhalb eines Periodizitätsintervalls der Rekonstruierten des Videohologramms liegt, zusammen mit jedem zu rekonstruierenden Objektpunkt der Szene ein Subhologramm definiert und das Gesamthologramm aus einer Überlagerung von Subhologrammen gebildet wird. Dabei wird im Wesentlichen das Prinzip verfolgt, vorrangig jene Wellenfront, die ein Objekt aussenden würde, in ein oder mehrere Sichtbarkeitsregionen zu rekonstruieren.
  • Im Weiteren liegt einer derartigen Einrichtung das Prinzip zugrunde, dass die Rekonstruktion eines einzelnen Objektpunkts jeweils nur ein Subhologramm als Teilmenge des am Lichtmodulatormittel kodierten Gesamthologramms erfordert. Die holographische Wiedergabeeinrichtung enthält wenigstens ein Bildschirmmittel.
  • Dabei wird als Bildschirmmittel entweder der Lichtmodulator selbst bezeichnet, in dem das Hologramm einer Szene kodiert ist, oder ein optisches Element – beispielsweise Linse oder Spiegel –, auf das ein im Lichtmodulator kodiertes Hologramm oder eine im Lichtmodulator kodierte Wellenfront einer Szene abgebildet wird.
  • Die Festlegung des Bildschirmmittels und die zugehörigen Prinzipien zur Rekonstruktion der Szene in den Sichtbarkeitsbereich sind durch Dokumente des Anmelders beschrieben. In den Dokumenten WO 2004/044659 sowie WO 2006/027228 ist das Bildschirmmittel der Lichtmodulator selbst. Im Dokument WO 2006119760 , Projektionsvorrichtung und Verfahren zur holographischen Rekonstruktion von Szenen ist das Bildschirmmittel ein optisches Element, auf das ein im Lichtmodulator kodiertes Hologramm abgebildet wird.
  • In DE 10 2006 004 300 , Projektionsvorrichtung zur holographischen Rekonstruktion von Szenen, ist das Bildschirmmittel ein optisches Element, auf das eine im Lichtmodulator kodierte Wellenfront der Szene abgebildet wird.
  • WO 2006/066919 des Anmelders beschreibt ein Verfahren zum Berechnen von Videohologrammen.
  • Technischer Hintergrund und Stand der Technik
  • Ein "Sichtbarkeitsbereich" ist ein begrenzter Bereich, durch welchen der Betrachter die gesamte rekonstruierte Szene mit ausreichend großer Sichtbarkeit ansehen kann. Innerhalb des Sichtbarkeitsbereichs überlagern sich die Wellenfelder so, dass die rekonstruierte Szene für den Betrachter sichtbar wird. Der Sichtbarkeitsbereich befindet sich auf den oder nahe den Augen des Betrachters. Der Sichtbarkeitsbereich kann in die Richtungen X, Y und Z bewegt werden und wird mit bekannten Positionserkennungs- beziehungsweise Nachführeinrichtungen der aktuellen Betrachterposition nachgeführt. Es ist möglich, zwei Sichtbarkeitsbereiche zu verwenden, nämlich eines für jedes Auge. Aufwändigere Anordnungen von Sichtbarkeitsbereichen sind ebenfalls möglich. Es ist ferner möglich, Videohologramme so zu kodieren, dass für den Betrachter einzelne Objekte oder die ganze Szene scheinbar hinter dem Lichtmodulator liegen.
  • In diesem Dokument wird als Lichtmodulatormittel beziehungsweise SLM eine Einrichtung zum Steuern der Intensität, Farbe und/oder Phase durch Schalten, Austasten oder Modulieren von Lichtstrahlen einer oder mehrerer unabhängiger Lichtquellen bezeichnet. Eine holographische Wiedergabeeinrichtung beinhaltet in der Regel eine Matrix steuerbarer Pixel, wobei die Pixel die Amplitude und/oder Phase von durchstrahlenden Lichts verändern und so die Objektpunkte rekonstruieren. Ein Lichtmodulatormittel umfasst eine derartige Matrix. Das Lichtmodulatormittel kann beispielsweise diskret als Akusto-optischer Modulator AOM oder auch kontinuierlich aufgeführt sein. Eine Ausführung zur Rekonstruktion der Hologramme durch Amplitudenmodulation kann mit einem Liquid Crystal Display (LCD) erfolgen. Die vorliegende Erfindung bezieht sich ebenso auf weitere steuerbare Vorrichtungen um hinreichend kohärentes Licht zu einer Lichtwellenfront oder zu einem Lichtwellenrelief zu modulieren.
  • Die Bezeichnung Pixel umfasst ein steuerbares Hologramm-Pixel des Lichtmodulators, repräsentiert einen diskreten Wert des Hologrammpunktes und ist einzeln adressiert und gesteuert. Jedes Pixel repräsentiert einen Hologrammpunkt des Hologramms. Im Falle eines IC-Displays bedeutet ein Pixel ein individuell ansteuerbares Display-Pixel. Für eine DLP ist ein Pixel ein individuell steuerbarer Mikrospiegel oder eine kleine Gruppe davon. Bei einem kontinuierlichen Lichtmodulator umfasst ein Pixel eine imaginäre Region, welche den Hologrammpunkt repräsentiert. Bei einer Farbdarstellung wird in der Regel ein Pixel in mehrere Subpixel unterteilt, welche die Grundfarben repräsentieren.
  • Der Begriff "Transformation" ist so weit auszulegen, dass er jede mathematische oder rechnerische Technik einschließt, die einer Transformation gleichkommt oder diese annähert. Transformationen im mathematischen Sinne sind lediglich Annäherungen physikalischer Prozesse, die genauer durch die Maxwellschen Wellenausbreitungsgleichungen beschrieben werden. Transformationen wie etwa Fresneltransformationen oder die spezielle Gruppe von Transformationen, die als Fouriertransformationen bekannt sind, beschreiben Annäherungen zweiter Ordnung. Transformationen führen in der Regel auf algebraische und nicht differentielle Beschreibungen und können folglich rechentechnisch effizient und performant gehandhabt werden. Überdies können sie präzise als optischen Systeme modelliert werden.
  • WO 2006/066919 des Anmelders beschreibt ein Verfahren zum Berechnen von Videohologrammen. Es basiert im Wesentlichen darauf, eine Zerlegung der Szene in Ebenenschnitten parallel zur Ebene eines Lichtmodulators durchzuführen, alle Ebenenschnitte in einen Sichtbarkeitsbereich zu transformieren und dort aufzusummieren. Anschließend werden die summierten Ergebnisse in die Hologrammebene, in welcher auch der Lichtmodulator liegt, zurück transformiert und so die komplexen Hologrammwerte des Videohologramms ermittelt.
  • DE 10 2006 025 096 beschreibt ein Verfahren zum Rendern und Generieren von Videohologrammen aus Bilddaten mit Tiefeninformation in Echtzeit, wobei in einem ersten Modus eine 3D-Rendering-Graphikpipeline, welche die Umwandlung einer 3D-Szene zu gerasterten Bilddaten als 2D-Projektion der 3D-Szene beschreibt und Pixelwerte für die steuerbaren Pixel eines Monitors generiert. Es ist dadurch gekennzeichnet, dass die Pipeline schaltbar derart erweitert ist, dass in einem zweiten Modus in mindestens einer holographischen Pipeline die Generierung komplexer Hologrammwerte als Pixelwerte für einen Spatial Light Modulator SLM erfolgt, wodurch gleichzeitig oder alternativ zur üblichen grafischen Darstellung durch das Ansteuern des Spatial-Light-Modulators mit den Hologrammwerten ein einfallendes Wellenfeld so moduliert wird, dass durch Interferenz im Raum die gewünschte dreidimensionale Szene rekonstruiert wird.
  • DE 10 2006 042 324 beschreibt ein Verfahren zum Generieren von Videohologrammen in Echtzeit. Es nützt das Prinzip, dass die Rekonstruktion eines einzelnen Objektpunkts nur ein Subhologramm als Teilmenge des auf dem SLM kodierten Gesamthologramms erfordert. Es ist dadurch charakterisiert, dass für jeden Objektpunkt die Beiträge der Subhologramme aus Look-Up-Tabellen bestimmbar sind und die Subhologramme zu einem Gesamthologramm zur Rekonstruktion der gesamten Szene akkumuliert werden.
  • Die genannten Verfahren erlauben eine rasche Generierung der Hologrammwerte. Es ist jedoch erforderlich, die 3D-Rendering-Graphikpipeline in weiterführende Betrachtungen einzubeziehen. Als Ergebnis einer 3D-Rendering-Graphikpipeline, welche die Umwandlung einer 3D-Szene zu gerasterten Bilddaten als 2D-Projektion der 3D-Szene beschreibt, liegt die Beschreibung in zwei Speicherbereichen, dem Framebuffer und dem Z-Buffer vor:
    • – Der Framebuffer enthält die Farbwerte, die so genannte Color-Map der Szene, welche der Betrachter sieht
    • – Der Z-Buffer enthält die Tiefenmap der Szene in einer normierten Darstellung, so wie sie vom Standort des Betrachters aus gesehen wird.
  • Diese Daten sind die Eingangsdaten für die nachfolgende holographische Pipeline, welche komplexe Hologrammwerte als Pixelwerte für den Lichtmodulator generiert.
  • Das erstgenannte Verfahren für die Generierung von Videohologrammen ist für die interaktive Echtzeitdarstellung nur mit hohem Aufwand an Ressourcen realisierbar. Als Folge der langen Berechnungszeit können Videosequenzen und interaktive 3D-Echtzeitanwendungen nicht in der gewünschten Wiederholfrequenz dargeboten werden.
  • Analog zur herkömmlichen Videotechnik ist jedoch eine hohe Rate der Bildwiederholung für die Anzeige der computergenerierten Videohologramme wünschenswert und unerlässlich.
  • Der Erfindung die Aufgabe zugrunde, ein Verfahren zu schaffen, welches die erforderliche Berechnungszeit für die Ermittlung der farbbezogenen Hologrammwerte signifikant reduziert. Die Echtzeitfähigkeit des Verfahrens soll nachhaltig untermauert werden. Gleichzeitig soll der wirtschaftliche und technische Aufwand für die Berechnungsmittel zur Durchführung des Verfahrens reduziert werden. Im Weiteren soll die Architektur aktueller Grafikkarten beziehungsweise 3D-Pipelines durch zusätzliche Hard- und Softwaremodule erweitert werden, um die Generierung der Farbvideohologramme in Echtzeit, weiterführen zu unterstützen.
  • Zusammenfassung der Erfindung
  • Das erfindungsgemäße Verfahren zum Generieren von Videohologrammen ist für holographische Wiedergabeeinrichtungen gemäß Oberbegriff geeignet.
  • Zum Generieren der Farbvideohologramme wird eine 3D-Rendering-Graphikpipeline, welche die Umwandlung der 3D-Szene zu gerasterten Bilddaten als 2D-Projektion der 3D-Szene beschreibt, erweitert. In der 3D-Rendering-Graphikpipeline erfolgt beispielsweise die Umrechnung von Bildschirmkoordinaten in Gerätekoordinaten, Texturierung, Clipping, sowie das Antialiasing. Die Bilddaten beinhalten Tiefeninformation sowie in der Regel zusätzliche Beschreibungen zu Material- und Oberflächeneigenschaften. Das gerasterte Bild, eine 2D-Projektion der 3D-Szene, das im Framebuffer eines Grafikadapters gespeichert wird, enthält nunmehr die Daten der Pixelwerte für die steuerbaren Pixel eines Monitors, beispielsweise eines LCD-Displays.
  • Als Ergebnis der 3D-Rendering-Graphikpipeline das Ergebnis in zwei Speicherbereichen, dem Framebuffer und dem Z-Buffer vor:
    Der Framebuffer enthält die Farbinformation, die so genannte Color-Map der Szene, welche der Betrachter sieht und der Z-Buffer enthält die Tiefenmap der Szene, also die Tiefeninformation in einer normierten Darstellung, so wie sie vom Standort des Betrachters aus gesehen wird.
  • Im Weiteren erfolgt aus den Ergebnisdaten der 3D-Rendering-Graphikpipeline in einer holographischen Pipeline die Generierung komplexer Hologrammwerte als Pixelwerte für einen Lichtmodulator einer holographischen Anzeigevorrichtung.
  • Einer derartigen holographischen Wiedergabeeinrichtung mit entsprechenden Lichtmodulatormitteln liegt dabei ebenso das Prinzip zugrunde, vorrangig jene Wellenfront, die ein Objekt aussenden würde, in Richtung von Betrachteraugen beziehungsweise in einen Sichtbarkeitsbereich zu rekonstruieren.
  • Die Begriffsbestimmungen zum Sichtbarkeitsbereich wurden bereits erläutert.
  • Im Weiteren wird das Prinzip genutzt, dass die Rekonstruktion eines einzelnen Objektpunkts einer Szene jeweils nur ein Subhologramm als Teilmenge des auf den Lichtmodulatormitteln kodierten Gesamthologramms erfordert. Dieses Prinzip ist gleichzeitig der erste Schritt des erfindungsgemäßen Verfahrens.
  • Ein einzelner Objektpunkt wird jeweils durch ein Subhologramm erzeugt, dessen Lage von der Position des Objektpunkts und dessen Größe von der Position des Betrachters abhängt. Der Bereich des Subhologramms auf dem Lichtmodulatormittel wird nachfolgend als Modulatorbereich bezeichnet. Der Modulatorbereich ist jener Teilbereich des Lichtmodulatormittels, welcher erforderlich ist, um den Objektpunkt zu rekonstruieren. Der Modulatorbereich beschreibt gleichzeitig, welche Pixel auf dem Lichtmodulator entsprechend angesteuert werden müssen, um diesen Objektpunkt zu rekonstruieren. Die Position des Modulatorbereichs bleibt fest, wenn es sich um einen so genannten ortsfesten Objektpunkt handelt. Dabei ändert der zu rekonstruierende Objektpunkt seine Lage in Abhängigkeit von der Betrachterposition. Durch Änderung des Modulatorbereichs in Abhängigkeit der Betrachterposition wird erreicht, dass der Objektpunkt ortsfest kodiert wird, das heißt, er ändert seine räumliche Lage in Abhängigkeit der Betrachterposition nicht. In Bezug auf die Erfindung können diese Prinzipien analog behandelt werden. Im Weiteren liegt der Erfindung das Prinzip zugrunde, dass das Gesamthologramm, welches schließlich die gesamte Szene rekonstruiert, als Überlagerung der jeweiligen Subhologramme ermittelbar ist.
  • Der Erfindung liegt der Gedanke zugrunde, dass für jede Grundfarbe jeweils eine holographische Farbpipeline Hologrammwerte für die Lichtmodulatormittel generiert, wobei die holographischen Farbpipelines das jeweilige Subhologramm der Grundfarbe parallel ablaufend ermitteln.
  • Eine holographische Farbpipeline repräsentiert eine Grundfarbe (Primärfarbe), die durch eine charakteristische Wellenlänge repräsentiert ist. Im einfachsten Fall ist dies eine der bekannten RGB-Grundfarben, aus denen alle anderen Farben gemischt beziehungsweise durch Multiplexing geschaffen werden können.
  • Die einzelnen Farbhologramme eines Objektpunkts liegen somit gleichzeitig vor. Wunschgemäß liegen folglich auch die farbbezogenen Gesamthologramme der gesamten Szene gleichzeitig vor. Auch hier ist das zu einer Grundfarbe gehörige Gesamthologramm als Summe der jeweiligen farbbezogenen Subhologramme ermittelbar.
  • Nachfolgend werden die Verfahrensschritte anhand einer holographischen Farbpipeline erläutert. Das Prinzip ist für jede verwendete Grundfarbe analog übertragbar.
  • Nachdem der Modulatorbereich eines Objektpunkts ermittelt wurde, wird das zugehörige Subhologramm ermittelt und das Subhologramm als Beitrag des Gesamthologramms aufaddiert.
  • In einer bevorzugten Ausführungsform ist das Subhologramm eines Objektpunkts aus vorab erstellten Look-Up-Tabellen bestimmbar.
  • Die parallele Durchführung der holographischen Farbpipelines erfordert eine Erweiterung der 3D-Rendering-Graphikpipeline. Wie bereits erläutert, liegt das Ergebnis der 3D-Rendering-Graphikpipeline in zwei Speicherbereichen, dem Framebuffer und dem Z-Buffer vor:
    Der Framebuffer enthält die Farbinformation, die so genannte Color-Map der Szene, welche der Betrachter sieht und der Z-Buffer enthält die Tiefenmap der Szene, also die Tiefeninformation in einer normierten Darstellung, so wie sie vom Standort des Betrachters aus gesehen wird.
  • In einer ersten Detaillierung der Erfindung werden die Ergebnisse der 3D-Rendering-Graphikpipeline für jede Grundfarbe in separate in Speicherbereiche abgelegt. Der Speicherinhalt wird entsprechend dupliziert, so dass jede holographische Pipeline über einen eigenen Framebuffer mit der ihm zugehörigen Farbe sowie über einen eigenen Z-Buffer verfügt. Damit ist gewährleistet, dass sich die holographischen Pipelines beim Zugriff auf die Eingangsdaten nicht behindern und somit hoch performant auf diese Daten zugreifen können.
  • In einer weiteren bevorzugten Detaillierung der Erfindung legt die 3D-Rendering-Graphikpipeline für jeden Objektpunkt die ermittelten Farbwerte in einen einzigen Framebuffer sowie die ermittelten Tiefenwerte analog in einen einzigen Z-Buffer ab. Zur Versorgung der holographischen Farbpipelines ist ein Multiplexer als Steuerungsmittel vorgesehen, welcher die Date an die parallelen holographischen Farbpipelines verteilt und übermittelt.
  • Die generierten farbbezogenen Gesamthologramme werden in Speichermittel abgelegt oder an die holographische Wiedergabeeinrichtung übertragen. In der Wiedergabeeinrichtung werden aus den farbbezogenen Gesamthologrammen durch zeitliches oder räumliches Multiplexing Farbhologramme dargeboten.
  • Insbesondere durch die Verwendung der genannten Verfahren zur Ermittlung der Subhologramme wird die Anforderung an die Generierung der farbbezogenen Hologrammwerte in Echtzeit gesichert. Analog zur herkömmlichen Videotechnik kann eine hohe Rate der Bildwiederholung für die Anzeige der computergenerierten Videohologramme geboten werden, wobei auch kostengünstige und einfache Recheneinheiten die Generierung in Echtzeit gewährleisten können.
  • Nachfolgend wird das besonders bevorzugte Verfahren zur Berechnung der komplexen Hologrammwerte weiterführend erläutert. Dem Verfahren liegt der Gedanke zugrunde, dass die komplexen Hologrammwerte eines Subhologramms aus der Wellenfront des jeweils zu rekonstruierenden Objektpunkts in einem Modulatorbereich des Lichtmodulatormittels ermittelt werden, indem die Transmissions- oder Modulationsfunktionen eines im Modulatorbereich modellierten Abbildungselements, in dessen Brennpunkt der zu rekonstruierende Objektpunkt liegt, berechnet und ausgewertet werden.
  • Das Abbildungselement befindet sich dabei in der Hologrammebene der holographischen Wiedergabeeinrichtung. Die Hologrammebene ist durch den Ort eines Bildschirmsmittels festgelegt, wobei zur Vereinfachung in den nachfolgenden Erläuterungen das Bildschirmmittel der Lichtmodulator selbst ist.
  • In einer besonders bevorzugten Ausführungsform des Verfahrens umfasst das Abbildungselement eine in der Hologrammebene liegende Linse mit der Brennweite f, welche geneigt ist. Eine geneigte Linse ist eine Zusammensetzung aus einer, in Bezug auf die Hologrammebene nicht geneigten Linse, sowie einem vertikal und einem horizontal wirkenden Prisma. Streng genommen wird durch ein Prisma kein Subhologramm definiert, da durch die nichtfokale Prismenfunktion kein Objektpunkt rekonstruiert wird. Im Sinne der Klarheit des Erfindungsgedankens wird dies nachfolgen jedoch so bezeichnet, da das Prisma im Modulatorbereich ebenso einen Beitrag zu den komplexen Hologrammwerten liefert.
  • Zur Berechnung der komplexen Werte des Subhologramms umfasst diese Detaillierung des Verfahrens für jeden sichtbaren Objektpunkt der Szene die nachfolgenden Schritte:
    • A: Ermittlung der Größe und Lage des Modulatorbereichs, analog den oben genannten Ausführungen, jedoch wird nachfolgend dem Modulatorbereich ein lokales Koordinatensystem zugrunde gelegt, wobei der Ursprung des Systems im Zentrum liegt, die x-Koordinate die Abszisse und die y-Koordinate die Ordinate beschreibt. Für den Modulatorbereich wird "a" als halbe Breite und "b" als halbe Höhe als Bemaßung gewählt, wobei diese Intervallgrenzen in die nachfolgenden Terme eingehen.
    • B: Ermittlung des Subhologramms der Linse in der Hologrammebene:
    • B1: Bestimmung der Brennweite f der Linse: Die Brennweite f der Linse ist vorzugsweise der Normalabstand des zu rekonstruierenden Objektpunkts von der Hologrammebene.
    • B2: Komplexe Werte des zugehörigen Subhologramms der Linse: Die komplexen Werte des zugehörigen Subhologramms werden aus zL = exp{+/–i·[(π/λf)·(x2 + y2)]}, ermittelt, mit λ als Bezugswellenlänge, f als Brennweite und dem zugehörigen Koordinatenpaar (x, y). Das negative Vorzeichen folgt hier aus der Eigenschaft einer konkaven Linse. Eine konvexe Linse ist durch ein positives Vorzeichen gekennzeichnet.
    • B3: Aufgrund der Symmetrie in x und y ist es ausreichend, die komplexen Werte in einem Quadranten zu ermitteln und unter Beachtung der Vorzeichen die weiteren Werte auf die anderen Quadranten zu übertragen.
    • C: Ermittlung der Subhologramme der Prismen (P) in der Hologrammebene: Die gewählten Prismen gehen dabei, siehe auch die nachfolgenden Figuren, durch die Abszisse beziehungsweise Ordinate.
    • C1: Bestimmung des Linearfaktors Cx des Prismas (PH) mit horizontaler Wirkungsrichtung, welcher im Intervall x ∊ [–a, a] beschrieben wird durch Cx = M·(2π/λ);mit M als Neigung des Prismas.
    • C2: Bestimmung des Linearfaktors Cy des Prismas (PV) mit vertikaler Wirkungsrichtung, welcher analog im Intervall y ∊ [–b, b] beschrieben wird durch Cy = N·(2π/λ);mit N als Neigung des Prismas.
    • C3: Ermittlung der komplexen Werte des zugehörigen Subhologramms der kombinierten Prismen: Die komplexen Werte des zugehörigen Subhologramms werden aus der Überlagerung der beiden Prismenterme zP = exp{i·[Cx·(x – a) + Cy·(y – b)]}ermittelt. Das überlagerte Prisma geht durch den Ursprung des lokalen Koordinatensystems.
    • C4: Ein entsprechender Prismenterm entfällt, wenn die holographische Wiedergabeeinrichtung die Eigenschaft aufweist, die Lichtquelle in den Sichtbarkeitsbereich abzubilden.
    • D: Modulation der Subhologramme für Linse und Prismen: Zur Ermittlung des kombinierten Subhologramms werden die komplexen Werte der Linse und der Prismen komplex multipliziert: zSH = zL·zP beziehungsweise symbolisch SH = SHL·SHP
    • E: Anwendung der Zufallsphase Jedem modulierten Subhologramm aus Schritt D wird eine zufallsverteilte Phase zugeordnet, um eine homogene Helligkeitsverteilung im Sichtbarkeitsbereich zu gewährleisten. Die Zufallsphase wird zum Subhologramm aufaddiert, indem eine komplexe Multiplikation ausgeführt wird: zSH ≔ zSHexp(iΦ0)beziehungsweise symbolisch SH ≔ SHexp(iΦ0)
    • Die Zufallsphase wird jedem Subhologramm einzeln zugeordnet. Vorzugsweise sind insgesamt global betrachtet die Zufallsphasen aller Subhologramme gleich verteilt.
    • F: Intensitätsmodulation Die komplexen Werte werden mit einem zusätzlichen Multiplikationsfaktor, welcher die Intensität beziehungsweise die Helligkeit repräsentiert, versehen. zSH = C·zSH beziehungsweise symbolisch SH ≔ C·SH;
    • G: Wird das Gesamthologramm berechnet, so werden die Subhologramme zum Gesamthologramm überlagert. In einer einfachen Lösung werden die Subhologramme, zum Gesamthologramm – unter Beachtung der Lage der Subhologramme – komplex aufaddiert. Gesamthologramm = komplexe Summe der Subhologramme mit SLM = ΣSHi beziehungsweise symbolisch zSLM = ΣzSHi (mit Bezug auf ein globales Koordinatensystem)
  • Das Verfahren wird vorzugsweise nur für sichtbare Objektpunkte angewendet. Die Sichtbarkeit des Objektpunkts wird im Zuge des Renderns der Szene von einer 3D-Rendering-Graphikpipeline bestimmt und folgt aus der Betrachterposition, also der entsprechenden Position der Pupillen und folglich aus der Position des Sichtbarkeitsbereichs, welcher der Position der Pupillen nachgeführt ist.
  • Die detaillierte Beschreibung bezieht sich darauf, die bestmögliche Lösung zu berechnen. Es ist selbstverständlich möglich, die genannten Funktionsterme durch einfachere zu ersetzen, wenn eine Verschlechterung der Rekonstruktion akzeptiert oder gar gewünscht wird. Auf der anderen Seite ist es ersichtlich, dass aufdatierte Verfahrensschritte angewendet werden, um die Qualität der Rekonstruktion zu erhöhen. Beispielsweise können Linsen beziehungsweise Prismen speziell gewählt werden, um Abberationen, toleranzbehaftete Lichtmodulatormittel oder dergleichen zu kompensieren. Dies gilt ebenso für die beispielhaft genannten Methoden, den Modulatorbereich zu bestimmen.
  • In einer Erweiterung des Verfahrens werden ausgehend von den komplexen Hologrammwerten des Gesamthologramms die Pixelwerte für eine bestimmte holografische Wiedergabeeinrichtung ermittelt. Beispielsweise werden die komplexen Hologrammwerte in Burckhardt-Komponenten, Zweiphasenkomponenten oder eine andere geeignete Kodierung umgewandelt.
  • Diesem Verfahren liegt der Vorteil zugrunde, dass die Lage des zu rekonstruierenden Objektpunkts innerhalb des Rekonstruktionsbereichs (Frustrum) beliebig ist und nicht durch eine Diskretisierung, wie beispielsweise Schnittebenen, angenähert ist. In Schritt (B1) wird der Brennweite f der Linse exakt bestimmt. Ebenso werden im den Schritten (C) die Parameter der Prismen exakt bestimmt.
  • Neben einer Generierung der Hologrammwerte für die Darstellung auf einer holographischen Wiedergabeeinrichtung werden mit dem erfindungsgemäßen Verfahren bevorzugt Look-Up-Tabellen mit den generierten Subhologrammen befüllt.
  • Dabei wird für einen Objektpunkt das zugehörige Subhologramm nach dem Verfahren ermittelt und in Look-Up-Tabellen abgelegt. Eine derartige Look-Up-Tabelle erlaubt es somit, das vorab berechnete Subhologramm eines Objektpunkts gemäß seiner Farb- und Tiefeninformation auszulesen und im Zuge der Generierung der Hologrammdaten zu verwenden.
  • Vorzugsweise werden die Look-Up-Tabellen mit den Subhologrammen des Abbildungselements, also der kombinierten Linsen- und Prismenfunktion befüllt. Es ist jedoch denkbar, entsprechende Tabellen separat mit den auf die Linsen- beziehungsweise Prismenfunktion bezogenen Subhologrammen zu befüllen.
  • Generell erlauben diese Look-Up-Tabellen eine nachhaltige Beschleunigung von Verfahren, wo analog dem erfindungsgemäßen Verfahren ebenso das Prinzip von Subhologrammen in vorteilhafter Weise genützt wird. Derartige Look-Up-Tabellen erlauben beispielsweise weiterführende beziehungsweise rechenintensive Verfahren zu beschleunigen.
  • Mit Hilfe dieses Verfahrens können in Echtzeit für die interaktive holographische Darstellung Objektpunkte an beliebigen Positionen innerhalb des Rekonstruktionsraums mit heute verfügbaren Standardkomponenten der Hardware generiert werden. Bei höherer Leistung der Verarbeitungseinheit, welche das Verfahren durchführt, kann die Szene feiner strukturiert und die Qualität der Rekonstruktion signifikant erhöht werden. Das erfindungsgemäße Verfahren vermeidet ansonsten verwendete aufwändige Transformationen und ist durch einen einfachen Aufbau analytisch durchführbarer Schritte gekennzeichnet.
  • Damit ist die Echtzeitfähigkeit des erfindungsgemäßen Verfahrens nachhaltig untermauert.
  • Bevorzugte Ausführungsformen
  • Anhand von Ausführungsbeispielen wird die Erfindung nachstehend weiterführend erläutert. In den zugehörigen Figuren zeigen
  • 1 das zugrunde liegende Prinzip einer holographischen Wiedergabeeinrichtung und einen Modulatorbereich eines Objektpunkts,
  • 2a die Wiedergabeeinrichtung in einer Seitenansicht mit einem Abbildungselement aus Linse und Prisma,
  • 2b einen Modulatorbereich und ein vertikal wirkendes Prisma,
  • 2c einen Modulatorbereich und ein horizontal wirkendes Prisma,
  • 3 einen Ablaufplan des erfindungsgemäßen Verfahrens und
  • 4 eine Variante des Verfahrens zur Rekonstruktion eines Objektpunkts hinter der Hologrammebene
  • 5 einen Ablaufplan einer bevorzugten Ausführungsform des Verfahrens und die farbbezogene Erweiterung einer 3D-Rendering-Graphikpipeline mit einer holographischen Pipeline.
  • 1 veranschaulicht das zugrunde liegende Prinzip einer holographischen Wiedergabeeinrichtung (HAE) für einen Betrachter. Das Prinzip ist für mehrere Betrachter analog. Die Position eines Betrachters ist dabei durch die Position seiner Augen, respektive seiner Pupillen (VP) charakterisiert. Die Einrichtung enthält ein Lichtmodulatormittel (SLM), welches zur einfacheren Darstellung in dieser Ausführungsform gleich dem Bildschirmmittel (B) ist, und überlagert die mit Informationen von Objektpunkten einer Szene (3D-S) modulierten Wellenfronten in wenigstens einem Sichtbarkeitsbereich (VR). Der Sichtbarkeitsbereich ist den Augen nachgeführt. Die Rekonstruktion eines einzelnen Objektpunkts (OP) einer Szene (3D-S) erfordert dabei jeweils nur ein Subhologramm (SH) als Teilmenge des auf Lichtmodulatormitteln (SLM) kodierten Gesamthologramms (HΣSLM). Der Bereich des Subhologramms auf dem Lichtmodulator (SLM) ist der Modulatorbereich (MR). Wie aus dieser Figur ersichtlich, ist der Modulatorbereich (MR) nur ein kleiner Teilbereich des Lichtmodulatormittels (SLM). Das Zentrum des Modulatorbereichs (MR) liegt in einer einfachsten Lösungsmöglichkeit auf der Geraden durch den zu rekonstruierenden Objektpunkt (OP) und dem Zentrum des Sichtbarkeitsbereichs (MR). Die Größe des Modulatorbereichs (MR) wird in einer einfachsten Lösungsmöglichkeit mit Hilfe des Strahlensatzes ermittelt, wobei der Sichtbarkeitsbereich (VR) durch den zu rekonstruierenden Objektpunkt (OP) auf das Lichtmodulatormittel (SLM) zurückverfolgt wird. Im Weiteren ergeben sich dadurch die Indices jener Pixel auf dem Lichtmodulatormittel (SLM), die zur Rekonstruktion dieses Objektpunkts erforderlich sind.
  • Wie aus der Figur ersichtlich, wird dem Modulatorbereich (MR) ein Koordinatensystem zugrunde gelegt, wobei der Ursprung des Systems im Zentrum liegt, die x-Koordinate die Abszisse und die y-Koordinate die Ordinate beschreibt. Der Modulatorbereich (MR) ist mit "a" als halbe Breite und "b" als halbe Höhe bemaßt.
  • 2a zeigt die holographische Wiedergabeeinrichtung (HAE) in einer Seitenansicht und veranschaulicht das Grundprinzip des Verfahrens. Analog zu 1 wird der Modulatorbereich (MR) abgeleitet. Dieser Bereich ist in der Hologrammebene (HE), in welcher sich der Lichtmodulator (SLM) befindet. Im Modulatorbereich (MR) liegt das Abbildungselement (OS), welches hier eine Sammellinse (L) und ein Prisma (P) umfasst. Für das Prisma ist nur der vertikal wirkende Prismenkeil eingezeichnet und das Abbildungselement (OS) ist in der Figur zur besseren Sichtbarkeit vor dem Lichtmodulatormittel (SLM) liegend eingezeichnet.
  • 2b zeigt einen horizontal wirkenden Prismenkeil (PH) vor dem Modulatorbereich (MR) mit den entsprechend verwendeten Koordinaten und Bemaßungen. Der Prismenkeil geht hier durch die Ordinate.
  • 2c zeigt analog einen vertikal wirkenden, durch die Abszisse gehenden Prismenkeil (PV). Die beiden Prismenkeile werden, wie nachfolgend erläutert, überlagert.
  • 3 zeigt einen Ablaufplan des erfindungsgemäßen Verfahrens. Ausgangspunkt des Verfahrens ist eine dreidimensionale Szene (3D-S), welche in eine Vielzahl von Objektpunkten (OP) strukturiert wird.
  • Zu den Objektpunkten (OP) sind Farb- und Tiefeninformationen verfügbar. Anhand der Tiefeninformation des Objektpunkts wird dessen Sichtbarkeit gemäß der Betrachterposition, respektive der Pupillen des Betrachters, ermittelt.
  • Für jeden sichtbaren Objektpunkt wird im Schritt (A) die Größe und Lage des zugehörigen Modulatorbereichs (MR) in der Hologrammebene (HE), beziehungsweise auf den Lichtmodulatormitteln bestimmt.
  • Dem Gedanken der Erfindung folgend wird der zu rekonstruierende Objektpunkt (OP) als der Brennpunkt eines, in der Hologrammebene liegenden, Abbildungselements interpretiert und das Abbildungselement als Kombination einer Sammellinse (L) und, siehe 2b, 2c, von vertikal beziehungsweise horizontal wirkenden Prismen (PH, PV) aufgefasst.
  • Die komplexen Hologrammwerte des Subhologramms (SH) werden aus der Wellenfront des jeweils zu rekonstruierenden Objektpunkts (OP) in einem Modulatorbereich (MR) des Lichtmodulatormittels ermittelt, indem die Transmissions- oder Modulationsfunktionen des im Modulatorbereich (MR) modellierten Abbildungselements (OS), in dessen Brennpunkt der zu rekonstruierende Objektpunkt (OP) liegt, berechnet und ausgewertet werden.
  • Für jeden sichtbaren Objektpunkt wird somit im Schritt (B1) die Brennweite der Linse (L) als Normalabstand des Objektpunkts (OP) zur Hologrammebene (HE) ermittelt.
  • Die komplexen Werte für des zugehörigen Subhologramms (SHL) werden im Schritt (B2) aus zL = exp{–i·[(π/λf)·(x2 + y2)]}ermittelt, mit λ als Bezugswellenlänge, f als Brennweite, und dem zugehörigen lokalen Koordinatenpaar (x, y). Das Koordinatensystem ist wie eingangs beschrieben festgelegt.
  • Im Schritt (C) werden die Subhologramme (SHP) der Prismen (P) in der Hologrammebene ermittelt. Die Bestimmung des Linearfaktors Cx des Prismas (PH) mit horizontaler Wirkungsrichtung erfolgt durch Cx = M·(2π/λ); wobei M als Neigung des Prismas definiert ist. Dies erfolgt für das vertikale Prisma analog mit N als Neigung. Die komplexen Werte des zugehörigen Subhologramms (SHP) werden aus der Überlagerung der beiden Prismenterme SHP ≔ zP = exp{i·[Cx·(x – a) + Cy·(y – b)]}ermittelt. Ein Prismenterm entfällt, wenn die holographische Wiedergabeeinrichtung die Eigenschaft aufweist, die Lichtquelle in den Sichtbarkeitsbereich (VR) abzubilden.
  • Nachdem die Subhologramme (SHL) der Linse (L) und jener (SHP) der Prismen (P) nun vorliegen, werden sie überlagert, indem im Schritt (D) für das kombinierte Subhologramm (SH) die komplexen Werte der Linse und der Prismen mit zSH = zL·zP beziehungsweise symbolisch SH = SHL·SHP komplex multipliziert werden.
  • Im Schritt (E) wird das Subhologramm (SH) mit einer gleich verteilten Zufallsphase versehen.
  • Im Schritt (F) erfolgt eine Intensitätsmodulation, wobei das Subhologramm (SH) durch zSH = C·zSH beziehungsweise symbolisch SH ≔ C·SHmit einem Intensitätsfaktor versehen wird.
  • Das kombinierte Subhologramm (SH) eines Objektpunkts (OP) liegt nun vollständig vor.
  • In einem weiteren Verfahrensschritt (G), welcher auch getrennt erfolgen kann, werden die Subhologramme der Objektpunkte zu einem Gesamthologramm (HΣSLM) aufaddiert. Die einzelnen Subhologramme (SHi) der Objektpunkte sind superponierbar und werden zum Gesamthologramm (HΣSLM) komplex aufaddiert. Gesamthologramm = komplexe Summe der Subhologramme der Objektpunkte mit SLM = ΣSHi beziehungsweise zSLM = ΣzSHi (mit Bezug auf ein globales Koordinatensystem).
  • Das Gesamthologramm (HΣSLM) repräsentiert das Hologramm aller Objektpunkte. Es repräsentiert und rekonstruiert somit die gesamten Szene (3D-S).
  • In einem abschließenden Schritt (H) kann, wie bereits erläutert, durch eine Kodierung das Gesamthologramm in Pixelwerte für eine holographische Wiedergabeeinrichtung, welche ebenso das Prinzip der Subhologramme in vorteilhafter Weise nutzt, umgewandelt werden. Insbesondere sind dies, analog bereits erfolgten Erläuterungen, Einrichtungen nach WO 2004/044659 , WO 2006/027228 , WO 2006119760 , sowie DE 10 2006 004 300 .
  • 4 veranschaulicht, dass durch das Verfahren Objektpunkte (OP), welche hinter der Hologrammebene (HE) liegen, prinzipiell analog rekonstruiert werden können. Das Abbildungselement (OS) umfasst in diesem Fall analog die genannten Prismen (P), jedoch ist in diesem Fall die Linse im Abbildungselement eine Streulinse (L), für welche die Wellenfront im Modulatorbereich analog ermittelt werden kann.
  • 5 veranschaulicht das Verfahren zur Generierung des Gesamthologramms (HΣSLM) und zeigt wie eine 3D-Rendering-Graphikpipeline (RGP) mit einer holographischen Pipeline (HGP) erweitert wird, um aus den Bilddaten mit Tiefeninformationen die komplexen Hologrammwerte für den Lichtmodulator (SLM) der holographischen Wiedergabeeinrichtung (HAE) zu generieren.
  • In der 3D-Rendering-Graphikpipeline (RGP) erfolgt beispielsweise die Umrechnung von Bildschirmkoordinaten in Gerätekoordinaten, Texturierung, Clipping, sowie das Antialiasing.
  • Als Ergebnis der 3D-Rendering-Graphikpipeline (RGP), welche die Umwandlung der Szene (3D-S) zu gerasterten Bilddaten als 2D-Projektion der Szene beschreibt liegt das Ergebnis in zwei Speicherbereichen vor:
    • – Framebuffer (FB): enthält die Farbwerte, die so genannte Color-Map der Szene, welche der Betrachter sieht
    • – Z-Buffer (ZB): enthält die so genannte Tiefenmap der Szene in einer normierten Darstellung, so wie sie vom Standort des Betrachters aus gesehen wird.
  • Zur besseren Erläuterung sind in 5 diese Speicherbereiche der Graphikpipeline, gesondert eingezeichnet und schematisch dargestellt.
  • Diese Daten sind die Eingangsdaten für die nachfolgenden holographischen Farbpipelines (HGP), welche die komplexen Hologrammwerte für die gesamte Szene (3D-S) farbbezogen generieren.
  • Wie aus der Figur ersichtlich, gibt es eine holographische Farbpipeline (HGP) pro Grundfarbe, hier ROB. Jeder dieser holographischen Farbpipeline ist eine charakteristische Wellenlänge zugeordnet. Diese farbbezogenen Graphikpipelines (HGP), welche in der Figur mit einem zusätzlichen Kennzeichen für die Grundfarbe versehen sind, arbeiten parallel. Damit wird gewährleistet, dass die einzelnen Farbhologramme eines Objektpunkts und schließlich die farbbezogenen Gesamthologramme der gesamten Szene gleichzeitig vorliegen. Um die einzelnen holographischen Pipelines mit den Daten des Framebuffers (FB) und des Z-Buffers (ZB) zu versorgen, ist ein Multiplexer (MX) als Steuerungsmittel vorgesehen, welcher die Daten entsprechend an die einzelnen farbbezogenen holographischen Pipelines überträgt.
  • Wie bereits erläutert ist das farbbezogene Gesamthologramm (HΣSLM), welches schließlich die gesamte Szene (3D-S) rekonstruiert, als Summe der jeweiligen farbbezogenen Subhologramme durch HΣSLM = ΣSHi ermittelbar. In der holographischen Wiedergabeeinrichtung erfolgt die Farbdarstellung der gesamten Szene durch zeitliches oder räumliches Multiplexing der farbbezogenen Gesamthologramme.
  • In der oberen eingezeichneten holographischen Pipeline werden verschiedene Methoden, das Subhologramm eines Objektpunkts zu ermitteln, veranschaulicht. In einer ersten Variante wird das Subhologramm eines Objektpunkts aus einer oder mehreren vorab erstellten Look-Up-Tabellen (LUT) ermittelt. Eine weitere Variante ist durch das aus 1 bis 4 erläuterten Verfahren gegeben.
  • Eine in dieser Figur getrennte Darstellung der 3D-Rendering-Graphikpipeline und der holographischen Pipelines dient der besseren Erläuterung des zugrunde liegenden Prinzips, bedeutet aber nicht notwendigerweise, dass die implementierten Berechnungsmittel räumlich getrennt sind. Die Implementierung des Verfahrens erfolgt vorzugsweise auf demselben Prozessor beziehungsweise Graphikchip, wo bereits die 3D-Rendering-Graphikpipeline ausgeführt wird. Mit Vorteil wird die 3D- Rendering-Graphikpipeline entsprechend hard- und softwaremäßig erweitert. Die Implementierung der holographischen Pipelines auf einem zusätzlichen Chip ist ebenso vorteilhaft möglich.
  • In einer vorteilhaften Ausgestaltung der Erfindung liefert die holographische Wiedergabeeinrichtung deren Konfigurationsdaten an die Einrichtung zum Durchführen des Verfahrens. Diese Daten beschreiben beispielsweise die Größe des Lichtmodulators, dessen Auflösung und gegebenenfalls beschreibende Daten zur Art der Kodierung, beispielsweise Burkard-Kodierung, Zwei-Phasen-Kodierung oder weitere geeignete Kodierungen. Damit kann die Generierung der Hologrammdaten auf die gegebene beziehungsweise erkannte holographische Wiedergabeeinrichtung parametriert und angepasst werden. Eine Einrichtung zur Durchführung des Verfahrens ist somit nicht nur auf eine spezielle holographische Wiedergabeeinrichtung beschränkt, sondern universell für Einrichtungen einsetzbar, welche in vorteilhafter Weise das Grundprinzip der Subhologramme nutzen.
  • 3D-S
    durch Objektpunkte strukturierte Szene
    RGP
    3D-Rendering-Graphikpipeline
    FB
    Framebuffer der 3D-Rendering-Graphikpipeline
    ZB
    Z-Buffer der 3D-Rendering-Graphikpipeline
    HGP
    holographische Pipeline
    MX
    Multiplexer
    HAE
    holographische Wiedergabeeinrichtung mit
    B
    Bildschirmmittel
    SLM
    Lichtmodulatormittel
    HE
    Hologrammebene
    VP
    Betrachteraugen/Betrachterposition
    VR
    Sichtbarkeitsregion(en)
    OP
    Objektpunkt, allgemein
    OPn
    Objektpunkt, speziell mit Bezugsindex
    SH
    Subhologramm, allgemein
    SHL
    Subhologramms einer Linse
    SHP
    Subhologramms eines Prismas
    MR
    Modulatorbereich
    SHi
    Subhologramm, allgemein, indiziert
    SLM
    Gesamthologramm
    OS
    Abbildungselement
    L
    Linse
    P
    Prisma
    PH
    Prisma mit horizontaler Wirkungsrichtung
    PV
    Prisma mit vertikaler Wirkungsrichtung
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • - WO 2004/044659 [0008, 0083]
    • - WO 2006/027228 [0008, 0083]
    • - WO 2006119760 [0008, 0083]
    • - DE 102006004300 [0009, 0083]
    • - WO 2006/066919 [0010, 0015]
    • - DE 102006025096 [0016]
    • - DE 102006042324 [0017]

Claims (20)

  1. Verfahren zum Rendern und Generieren von Farbvideohologrammen für eine holographische Wiedergabeeinrichtung (HAE), mit mindestens einem Lichtmodulatormittel (SLM), in welches eine in Objektpunkte (OP) zerlegte Szene (3D-S) als Gesamthologramm (HΣSLM) kodiert wird und als Rekonstruktion von einem Sichtbarkeitsbereich (VR) aus zu sehen ist, der innerhalb eines Periodizitätsintervalls der Rekonstruierten des Videohologramms liegt, wobei der Sichtbarkeitsbereich (VR) zusammen mit jedem zu rekonstruierenden Objektpunkt (OP) der Szene (3D-S) ein Subhologramm (SH) definiert und das Gesamthologramm (HΣSLM) aus einer Überlagerung von Subhologrammen (SH) gebildet wird, wobei eine 3D-Rendering-Graphikpipeline (RGP) eine durch Bilddaten mit Tiefeninformation repräsentierte Szene (3D-S) in Objektpunkte (OP) strukturiert und für die Objektpunkte (OP) mindestens Farb- und Tiefeninformationen ermittelt und bereitstellt, dadurch gekennzeichnet, dass für jede Grundfarbe jeweils eine holographische Farbpipeline (HGP) farbbezogene Hologrammwerte generiert, indem für jeden sichtbaren Objektpunkt (OP) die komplexen Hologrammwerte des Subhologramms (SH) aus mindestens einer Look-Up-Tabelle abrufbar sind, oder analytisch aus der Wellenfront des jeweils zu rekonstruierenden Objektpunkts (OP) in einem Modulatorbereich (MR) des Lichtmodulatormittels (SLM) ermittelt werden, und die holographischen Farbpipelines (HGP) die jeweiligen überlagerten Gesamthologramme (HΣSLM) parallel ablaufend ermitteln.
  2. Verfahren nach Anspruch 1, wobei die 3D-Rendering-Graphikpipeline (RGP) für jeden Objektpunkt die ermittelten Farbwerte in einen Framebuffer (FB) sowie die ermittelten Tiefenwerte in einen Z-Buffer (ZB) in jeweils für jede Grundfarbe separate Speichermittel ablegt und die holographischen Farbpipelines (HGP) jeweils auf die zugehörigen Speichermittel zugreifen.
  3. Verfahren nach Anspruch 1, wobei die 3D-Rendering-Graphikpipeline (RGP) für jeden Objektpunkt die ermittelten Farbwerte in einen Framebuffer (FB) sowie die ermittelten Tiefenwerte in einen Z-Buffer (ZB) für jede Grundfarbe in Speichermittel ablegt und mindestens ein Multiplexer (MX) als Steuerungsmittel diese Daten an die jeweiligen parallelen Farbpipelines (HGP) verteilt und übermittelt.
  4. Verfahren nach Anspruch 3, wobei jede holographische Farbpipeline (HGP) über einen Framebuffer (FB) und einen Z-Buffer (ZB) verfügt und mindestens ein Multiplexer (MX) als Steuerungsmittel die Ergebnisse der 3D-Rendering-Graphikpipeline (RGP) an diese Speicherbereiche der Farbpipelines verteilt und übermittelt.
  5. Verfahren nach einem Anspruch 1 bis 4, wobei die komplexen Hologrammwerte eines Subhologramms (SH) aus der Wellenfront des jeweils zu rekonstruierenden Objektpunkts (OP) in einem Modulatorbereich (MR) des Lichtmodulatormittels ermittelt werden, indem die Transmissions- oder Modulationsfunktionen eines im Modulatorbereich (MR) modellierten Abbildungselements (OS), in dessen Brennpunkt der zu rekonstruierende Objektpunkt (OP) liegt, berechnet und ausgewertet werden.
  6. Verfahren nach Anspruch 5, wobei das Abbildungselement (OS) wenigstens eine Linse (L) umfasst.
  7. Verfahren nach Anspruch 6, wobei das Abbildungselement (OS) zusätzlich wenigstens ein Prisma (P) umfasst.
  8. Verfahren nach Anspruch 7, wobei das Abbildungselement (OS) eine Linse (L) und wenigstens ein Prisma (P) umfasst und für jeden sichtbaren Objektpunkt der Szene (3D-S) die nachfolgenden Schritte umfasst: A: Ermittlung der Größe und Lage des Subhologramms (SH) als Modulatorbereich (MR), der mit "a" als halbe Breite und "b" als halbe Höhe bemaßt und mit lokalen Koordinaten versehen wird; B: Ermittlung des Subhologramms der Linse (L) im Modulatorbereich (MR) umfassend: B1: Bestimmung der Brennweite f der Linse (L) als Normalabstand des zu rekonstruierenden Objektpunkts vom Modulatorbereich; B2: Ermittlung der komplexen Werte des zugehörigen Subhologramms (SHL) der Linse (L) aus zL = exp{+/–i·[(π/λf)·(x2 + y2)]},mit λ als Bezugswellenlänge, f als Brennweite und dem zugehörigen Koordinatenpaar (x, y), sowie vorzeichenbehaftet für eine konkave/konvexe Linse; C: Ermittlung der Subhologramme der Prismen (P) im Modulatorbereich (MR) umfassend: C1: Bestimmung des Linearfaktors Cx des Prismas (PH) mit horizontaler Wirkungsrichtung, welcher im Intervall x ∊ [–a, a] beschrieben wird durch Cx = M·(2π/λ), mit M als Neigung des Prismas; C2: Bestimmung des Linearfaktors Cy des Prismas (PV) mit vertikaler Wirkungsrichtung, welcher analog im Intervall y ∊ [–b, b] beschrieben wird durch Cy = N·(2π/λ), mit N als Neigung des Prismas; C3: Ermittlung der komplexen Werte des zugehörigen Subhologramms (SHP) der kombinierten Prismen aus der Überlagerung der beiden Prismenterme zP = exp{i·[Cx·(x – a) + Cy·(y – b)]};D: Modulation des Subhologramms (SHL) der Linse (L) und des Subhologramms (SHP) der Prismen (P), wobei die komplexen Werte der Linse und der Prismen mit zSH = zL·zP beziehungsweise symbolisch SH = SHL·SHP multipliziert werden;
  9. E: Anwendung der Zufallsphase, wobei jedem modulierten Subhologramm eine zufallsverteilte Phase Φz zugeordnet wird und mit zSH ≔ zSH·exp(iΦz) beziehungsweise SH ≔ SH·exp(iΦz) eine komplexe Multiplikation ausgeführt wird;
  10. F: Intensitätsmodulation, wobei mit zSH ≔ C·zSH beziehungsweise SH ≔ C·SH die Werte des modulierten Subhologramms mit einem reellen Intensitätsfaktor C versehen werden.
  11. Verfahren nach Anspruch 1 oder 8, wobei die Lage des Modulatorbereichs (MR) so ermittelt wird, dass das Zentrum des Modulatorbereichs (MR) auf der Geraden durch den zu rekonstruierenden Objektpunkt (OP) und dem Zentrum des Sichtbarkeitsbereichs (VR) liegt.
  12. Verfahren nach Anspruch 1 oder 8, wobei die Größe des Modulatorbereichs (MR) durch Rückverfolgung des Sichtbarkeitsbereichs (VR) durch den Objektpunkt (OP) auf das Lichtmodulatormittel (SLM) ermittelt wird.
  13. Verfahren nach Anspruch 8, wobei unter Beachtung der Lage der Subhologramme (SH) deren Überlagerung zum Gesamthologramm (HΣSLM) mit HΣSLM = ΣSHi als komplexe Summe der Subhologramme (SH) gebildet wird.
  14. Verfahren nach Anspruch 8, wobei jedem modulierten Subhologramm (SH) eines Objektpunkts jeweils eine zufallsverteilte Phase zugeordnet wird und die Zufallsphasen aller Subhologramme insgesamt gleich verteilt sind.
  15. Verfahren nach einem oder mehreren der Ansprüche 1 bis 12, wobei zusätzlich farbbezogen die komplexen Hologrammwerte in Pixelwerte des Lichtmodulatormittels (SLM) umgewandelt werden.
  16. Verfahren nach Anspruch 13, wobei die komplexen Hologrammwerte in Burckhardt-Komponenten oder Zweiphasenkomponenten oder anderen Arten der Kodierung umgewandelt werden.
  17. Verfahren nach einem oder mehreren der Ansprüche 1 bis 12, wobei ein festgelegter Raumbereich in Objektpunkte strukturiert wird und farbbezogen für jeden Objektpunkt das Subhologramm in eine Look-Up-Tabelle abgelegt wird.
  18. Verfahren nach einem oder mehreren der Ansprüche 1 bis 12, wobei ein festgelegter Raumbereich in Objektpunkte strukturiert wird und farbbezogen für jeden Objektpunkt das auf wenigstens eine Komponente des Abbildungselements (OS) bezogene Subhologramm ermittelt und in zugehörige Look-Up-Tabellen abgelegt wird.
  19. Holographische Wiedergabeeinrichtung mit einem Bildschirmmittel (B), die das Verfahren nach einem oder mehreren der Ansprüche 1 bis 13 verwendet, wobei das Bildschirmmittel (B) entweder das Lichtmodulatormittel (SLM) selbst bezeichnet, in dem das Hologramm der Szene (3D-S) kodiert ist, oder ein optisches Element, auf das ein im Lichtmodulatormittel kodiertes Hologramm oder eine im Lichtmodulatormittel (SLM) kodierte Wellenfront der Szene abgebildet ist.
  20. Holographische Wiedergabeeinrichtung nach Anspruch 17, wobei das optische Element eine Linse oder ein Spiegel ist.
DE102007023739.3A 2007-05-16 2007-05-16 Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung Active DE102007023739B4 (de)

Priority Applications (61)

Application Number Priority Date Filing Date Title
DE102007023739.3A DE102007023739B4 (de) 2007-05-16 2007-05-16 Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung
GBGB0718602.6A GB0718602D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718633.1A GB0718633D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718595.2A GB0718595D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718656.2A GB0718656D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718598.6A GB0718598D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718626.5A GB0718626D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718659.6A GB0718659D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718619.0A GB0718619D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718649.7A GB0718649D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718629.9A GB0718629D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718617.4A GB0718617D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718634.9A GB0718634D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718614.1A GB0718614D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718632.3A GB0718632D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718654.7A GB0718654D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718622.4A GB0718622D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718640.6A GB0718640D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718607.5A GB0718607D0 (en) 2007-05-16 2007-09-25 Holograms
GBGB0718636.4A GB0718636D0 (en) 2007-05-16 2007-09-25 Holograms
GB0808931A GB2449355B (en) 2007-05-16 2008-05-16 Holographic display
JP2010507929A JP2011504237A (ja) 2007-05-16 2008-05-16 ホログラフィック・ディスプレイ
JP2010507930A JP5415406B2 (ja) 2007-05-16 2008-05-16 高解像度ディスプレイ
KR1020097025974A KR101669263B1 (ko) 2007-05-16 2008-05-16 홀로그래픽 디스플레이
JP2010507931A JP2011504239A (ja) 2007-05-16 2008-05-16 通信を行うホログラフィック・ディスプレイ
TW097118295A TWI400589B (zh) 2007-05-16 2008-05-16 全像重現裝置渲染及製作彩色視頻全像圖的方法
CA002687374A CA2687374A1 (en) 2007-05-16 2008-05-16 Holographic display with communications
CN200880024631.XA CN101802725B (zh) 2007-05-16 2008-05-16 全息显示装置
CN2008800163105A CN101689036B (zh) 2007-05-16 2008-05-16 一种用于实时渲染和生成彩色视频全息图的方法
PCT/EP2008/056028 WO2008138984A2 (en) 2007-05-16 2008-05-16 High resolution display
KR1020167029199A KR101978545B1 (ko) 2007-05-16 2008-05-16 홀로그래픽 디스플레이
CA002687371A CA2687371A1 (en) 2007-05-16 2008-05-16 Holographic display
KR1020097025971A KR101505486B1 (ko) 2007-05-16 2008-05-16 통신수단을 가진 홀로그래픽 디스플레이
US12/600,276 US9368052B2 (en) 2007-05-16 2008-05-16 Holographic display
PCT/EP2008/056030 WO2008138986A2 (en) 2007-05-16 2008-05-16 Holographic display with microprism array
US12/600,296 US8218211B2 (en) 2007-05-16 2008-05-16 Holographic display with a variable beam deflection
CN200880024344.9A CN101743519B (zh) 2007-05-16 2008-05-16 全息显示装置
JP2010507932A JP5539187B2 (ja) 2007-05-16 2008-05-16 マイクロプリズム・アレイを有するホログラフィック・ディスプレイ
GB0808937.7A GB2449357B (en) 2007-05-16 2008-05-16 Holographic display with communications
KR1020097026259A KR101496799B1 (ko) 2007-05-16 2008-05-16 실시간 컬러 비디오 홀로그램 렌더링 및 생성 방법
US12/600,287 US8487980B2 (en) 2007-05-16 2008-05-16 Holographic display with communications
PCT/EP2008/056029 WO2008138985A2 (en) 2007-05-16 2008-05-16 Holographic display with communications
US12/600,280 US20100149139A1 (en) 2007-05-16 2008-05-16 High Resolution Display
KR1020097025976A KR101505485B1 (ko) 2007-05-16 2008-05-16 마이크로프리즘 어레이를 구비한 홀로그래픽 디스플레이
JP2010507928A JP5587766B2 (ja) 2007-05-16 2008-05-16 カラー・ビデオ・ホログラムをリアルタイムにレンダリング及び生成する方法
PCT/EP2008/056025 WO2008138982A1 (de) 2007-05-16 2008-05-16 Verfahren zum rendern und generieren von farbvideohologrammen in echtzeit
CA002687378A CA2687378A1 (en) 2007-05-16 2008-05-16 Holographic display
EP08759672.2A EP2160656B1 (de) 2007-05-16 2008-05-16 Holografische anzeige mit kommunikation
EP08759673A EP2160657B1 (de) 2007-05-16 2008-05-16 Holografische anzeige mit einem mikroprismaarray
CN2008800247454A CN101802726B (zh) 2007-05-16 2008-05-16 用于通信的全息显示装置
US12/600,357 US8437057B2 (en) 2007-05-16 2008-05-16 Method for rendering and generating color video holograms in real time
GB0808934A GB2449356B (en) 2007-05-16 2008-05-16 High resolution display
GB0808942A GB2449359B (en) 2007-05-16 2008-05-16 Holographic display
JP2013245433A JP5996514B2 (ja) 2007-05-16 2013-11-27 ホログラフィック・ディスプレイ
JP2014230087A JP6434781B2 (ja) 2007-05-16 2014-11-12 通信を行うホログラフィック・ディスプレイ
US15/148,142 US9946224B2 (en) 2007-05-16 2016-05-06 Holographic display
JP2016256636A JP6770429B2 (ja) 2007-05-16 2016-12-28 通信を行うホログラフィック・ディスプレイ
US15/928,891 US10761481B2 (en) 2007-05-16 2018-03-22 Holographic display
JP2019123087A JP6882379B2 (ja) 2007-05-16 2019-07-01 通信を行うホログラフィック・ディスプレイ
US17/007,104 US11269295B2 (en) 2007-05-16 2020-08-31 Holographic display
JP2021078774A JP2021140171A (ja) 2007-05-16 2021-05-06 通信を行うホログラフィック・ディスプレイ

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102007023739.3A DE102007023739B4 (de) 2007-05-16 2007-05-16 Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung

Publications (2)

Publication Number Publication Date
DE102007023739A1 true DE102007023739A1 (de) 2008-12-04
DE102007023739B4 DE102007023739B4 (de) 2018-01-04

Family

ID=39736893

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102007023739.3A Active DE102007023739B4 (de) 2007-05-16 2007-05-16 Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung

Country Status (7)

Country Link
US (1) US8437057B2 (de)
JP (1) JP5587766B2 (de)
KR (1) KR101496799B1 (de)
CN (1) CN101689036B (de)
DE (1) DE102007023739B4 (de)
TW (1) TWI400589B (de)
WO (1) WO2008138982A1 (de)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007023737B4 (de) * 2007-05-16 2009-01-02 Seereal Technologies S.A. Verfahren zum Generieren von Videohologrammen in Echtzeit zur Erweiterung einer 3D-Rendering-Graphikpipeline
JP5448981B2 (ja) 2009-04-08 2014-03-19 株式会社半導体エネルギー研究所 液晶表示装置の駆動方法
KR101308011B1 (ko) * 2011-04-19 2013-09-12 전자부품연구원 디지털 홀로그램 생성 방법
KR101859774B1 (ko) * 2011-12-27 2018-05-18 한국전자통신연구원 디지털 홀로그래픽 콘텐츠 제작 시스템
KR20130096872A (ko) * 2012-02-23 2013-09-02 엘지전자 주식회사 홀로그래픽 디스플레이 장치 및 홀로그램을 생성하기 위한 방법
CN103517051B (zh) * 2012-06-28 2016-07-06 联想(北京)有限公司 控制方法和电子设备
KR101960838B1 (ko) 2012-11-26 2019-03-21 삼성전자주식회사 홀로그램 패턴 생성 장치 및 방법
KR102028987B1 (ko) * 2013-03-29 2019-10-07 엘지디스플레이 주식회사 홀로그램 영상 표시 장치
KR102083584B1 (ko) 2013-04-15 2020-03-02 삼성전자주식회사 홀로그램 패턴 생성 장치 및 방법
JP6232778B2 (ja) 2013-06-27 2017-11-22 セイコーエプソン株式会社 画像処理装置、画像表示装置、および画像処理装置の制御方法
KR20150112501A (ko) * 2014-03-28 2015-10-07 한국전자통신연구원 홀로그램 오브젝트 위치 계산 장치 및 방법
WO2015184549A1 (en) * 2014-06-03 2015-12-10 Mtt Innovation Incorporated Efficient, dynamic, high contrast lensing with applications to imaging, illumination and projection
KR102464362B1 (ko) * 2015-09-30 2022-11-07 삼성전자주식회사 홀로그래픽 이미지 처리방법 및 장치
US10448030B2 (en) * 2015-11-16 2019-10-15 Ostendo Technologies, Inc. Content adaptive light field compression
US11397406B2 (en) * 2016-05-18 2022-07-26 Seereal Technologies S.A. Method for producing holograms
WO2018074623A1 (ko) 2016-10-19 2018-04-26 주식회사 케이티 굴절식 광학 스크린 및 이를 이용한 플로팅 홀로그램 시스템
CN106454251A (zh) * 2016-10-26 2017-02-22 秦皇岛中科鸿合信息科技有限公司 一种基于深度图像的实时全息图像获取、投影装置与方法
US10969740B2 (en) * 2017-06-27 2021-04-06 Nvidia Corporation System and method for near-eye light field rendering for wide field of view interactive three-dimensional computer graphics
CN109493412B (zh) * 2018-11-07 2022-10-21 长春理工大学 复用场景点光源可见性的超采样光线跟踪方法
CN111812956B (zh) * 2020-06-12 2021-07-06 北京邮电大学 基于体数据的计算全息图生成方法、装置和电子设备
DE112021004254A5 (de) * 2020-08-10 2023-06-01 Seereal Technologies S.A. Vorrichtung und Verfahren zur Berechnung von Hologrammdaten
CN113093500B (zh) * 2021-02-24 2022-05-17 北京邮电大学 一种全息图生成方法及系统
KR102586661B1 (ko) * 2021-12-13 2023-10-10 한국전자기술연구원 홀로그래픽 프린터를 위한 홀로그램 영상 정규화 방법
DE102022117567A1 (de) 2022-07-14 2024-01-25 HELLA GmbH & Co. KGaA Verfahren und Vorrichtung zur Herstellung eines computergenerierten Hologramms, Hologramm sowie Beleuchtungsvorrichtung für ein Fahrzeug

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002039194A1 (en) * 2000-11-07 2002-05-16 Holographic Imaging Llc 3d display
WO2004044659A2 (de) 2002-11-13 2004-05-27 Seereal Technologies Gmbh Videohologramm und einrichtung zur rekonstruktion von videohologrammen
WO2006027228A1 (en) 2004-09-08 2006-03-16 Seereal Technologies Gmbh Method and device for encoding and reconstructing computer-generated video holograms
WO2006066919A1 (en) 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram
WO2006119760A2 (de) 2005-05-13 2006-11-16 Seereal Technologies Gmbh Projektionsvorrichtung und verfahren zur holographischen rekonstruktion von szenen
DE102006004300A1 (de) 2006-01-20 2007-08-02 Seereal Technologies S.A. Projektionsvorrichtung zur holographischen Rekonstruktion von Szenen
DE102006025096A1 (de) 2006-05-23 2007-11-29 Seereal Technologies S.A. Verfahren und Einrichtung zum Rendern und Generieren computer-generierter Videohologramme
DE102006042324A1 (de) 2006-09-01 2008-03-13 Seereal Technologies S.A. Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Teilhologrammen

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0282285A (ja) * 1988-09-20 1990-03-22 Hitachi Ltd 立体画像表示装置
EP0619892A4 (en) * 1992-01-03 1996-10-02 Kenneth A Haines Methods of hologram constructions using computer-processed objects.
JP2999637B2 (ja) * 1992-10-14 2000-01-17 富士通株式会社 ホログラム情報作成方法
US5850352A (en) * 1995-03-31 1998-12-15 The Regents Of The University Of California Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images
JP3653361B2 (ja) * 1996-12-06 2005-05-25 日本電信電話株式会社 計算機ホログラム作成方法並びに作成装置
EP0880110B1 (de) * 1997-05-22 2006-11-08 Nippon Telegraph And Telephone Corporation System zur Anzeige von computergesteuerten holographischen Bildern
JP2000078611A (ja) * 1998-08-31 2000-03-14 Toshiba Corp 立体映像受信装置及び立体映像システム
LT4842B (lt) * 1999-12-10 2001-09-25 Uab "Geola" Hologramų spausdinimo būdas ir įrenginys
GB0027103D0 (en) * 2000-11-07 2000-12-20 Secr Defence Improved 3D display
WO2002039389A1 (en) * 2000-11-07 2002-05-16 Holographic Imaging Llc Computer generated hologram display system
EP1332410A1 (de) * 2000-11-07 2003-08-06 Holographic Imaging LLC Verbesserte dreidimensionale anzeigevorrichtung
GB2378337B (en) * 2001-06-11 2005-04-13 Canon Kk 3D Computer modelling apparatus
DE10228103A1 (de) 2002-06-24 2004-01-15 Bayer Cropscience Ag Fungizide Wirkstoffkombinationen
RU2346996C2 (ru) 2004-06-29 2009-02-20 ЮРОПИЭН НИКЕЛЬ ПиЭлСи Усовершенствованное выщелачивание основных металлов
KR101263968B1 (ko) * 2005-05-06 2013-05-13 씨리얼 테크놀로지스 게엠베하 삼차원 장면의 홀로그래픽 재구성을 위한 장치
GB0518912D0 (en) * 2005-09-16 2005-10-26 Light Blue Optics Ltd Methods and apparatus for displaying images using holograms
TW200801513A (en) 2006-06-29 2008-01-01 Fermiscan Australia Pty Ltd Improved process
WO2008025839A1 (de) * 2006-09-01 2008-03-06 Seereal Technologies S.A. Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002039194A1 (en) * 2000-11-07 2002-05-16 Holographic Imaging Llc 3d display
WO2004044659A2 (de) 2002-11-13 2004-05-27 Seereal Technologies Gmbh Videohologramm und einrichtung zur rekonstruktion von videohologrammen
WO2006027228A1 (en) 2004-09-08 2006-03-16 Seereal Technologies Gmbh Method and device for encoding and reconstructing computer-generated video holograms
WO2006066919A1 (en) 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram
WO2006119760A2 (de) 2005-05-13 2006-11-16 Seereal Technologies Gmbh Projektionsvorrichtung und verfahren zur holographischen rekonstruktion von szenen
DE102006004300A1 (de) 2006-01-20 2007-08-02 Seereal Technologies S.A. Projektionsvorrichtung zur holographischen Rekonstruktion von Szenen
DE102006025096A1 (de) 2006-05-23 2007-11-29 Seereal Technologies S.A. Verfahren und Einrichtung zum Rendern und Generieren computer-generierter Videohologramme
DE102006042324A1 (de) 2006-09-01 2008-03-13 Seereal Technologies S.A. Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Teilhologrammen

Also Published As

Publication number Publication date
KR101496799B1 (ko) 2015-03-03
DE102007023739B4 (de) 2018-01-04
US20100149314A1 (en) 2010-06-17
TWI400589B (zh) 2013-07-01
WO2008138982A1 (de) 2008-11-20
US8437057B2 (en) 2013-05-07
TW200915026A (en) 2009-04-01
JP5587766B2 (ja) 2014-09-10
CN101689036B (zh) 2012-09-19
CN101689036A (zh) 2010-03-31
JP2010527040A (ja) 2010-08-05
KR20100017838A (ko) 2010-02-16

Similar Documents

Publication Publication Date Title
DE102007023739B4 (de) Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung
DE102007023785B4 (de) Analytisches Verfahren zu Berechnung von Videohologrammen in Echtzeit und holographische Wiedergabeeinrichtung
DE102007023737B4 (de) Verfahren zum Generieren von Videohologrammen in Echtzeit zur Erweiterung einer 3D-Rendering-Graphikpipeline
DE102007023740B4 (de) Verfahren zur Generierung von Videohologrammen für eine holographische Wiedergabeeinrichtung mit wahlfreier Adressierung
DE112006003377B4 (de) Verfahren zur multimodalen Darstellung von Bildinhalten auf einer Anzeigeeinrichtung für Videohologramme und multimodale Anzeigeeinrichtung
DE10353439B4 (de) Einrichtung zur Rekonstruktion von Videohologrammen
EP2024793B1 (de) Verfahren und einrichtung zum rendern und generieren computer-generierter videohologramme
EP2005259A1 (de) Verfahren zum rendern und generieren computer-generierter videohologramme in echtzeit
DE102007013431B4 (de) Verfahren und Einrichtung zum Rekonstruieren einer dreidimensionalen Szene mit korrigierter Sichtbarkeit
WO2008025844A1 (de) Verfahren zum generieren computer-generierter videohologramme in echtzeit mittels propagation
DE102004063838A1 (de) Verfahren und Einrichtung zum Berechnen computer generierter Videohologramme
DE102006062377B4 (de) Verfahren und holographische Wiedergabeeinrichtung zum Reduzieren von Speckle
WO2008025839A1 (de) Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen
DE102015205873A1 (de) Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen
EP2181361B1 (de) Holographische rekonstruktionseinrichtung
DE102006042324B4 (de) Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Teilhologrammen
DE102006042323B4 (de) Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation
DE102006042326A1 (de) Holographische Kodiereinheit zum Generieren computergenerierter Videohologramme
WO2007085233A2 (de) Verfahren zur datenkompression computergenerierter videohologramme

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
R018 Grant decision by examination section/examining division
R020 Patent grant now final