DE102006042323B4 - Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation - Google Patents

Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation Download PDF

Info

Publication number
DE102006042323B4
DE102006042323B4 DE200610042323 DE102006042323A DE102006042323B4 DE 102006042323 B4 DE102006042323 B4 DE 102006042323B4 DE 200610042323 DE200610042323 DE 200610042323 DE 102006042323 A DE102006042323 A DE 102006042323A DE 102006042323 B4 DE102006042323 B4 DE 102006042323B4
Authority
DE
Germany
Prior art keywords
hologram
scene
viewer
observer
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE200610042323
Other languages
English (en)
Other versions
DE102006042323A1 (de
Inventor
Dipl.-Ing. Gitter Kurt
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SeeReal Technologies SA
Original Assignee
SeeReal Technologies SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to DE200610042323 priority Critical patent/DE102006042323B4/de
Application filed by SeeReal Technologies SA filed Critical SeeReal Technologies SA
Priority to PCT/EP2007/059118 priority patent/WO2008025841A1/de
Priority to US12/439,214 priority patent/US8218210B2/en
Priority to US12/439,271 priority patent/US20100073744A1/en
Priority to CN2007800326057A priority patent/CN101512445B/zh
Priority to PCT/EP2007/059119 priority patent/WO2008025842A1/de
Priority to PCT/EP2007/059125 priority patent/WO2008025844A1/de
Priority to JP2009526114A priority patent/JP5265546B2/ja
Priority to US12/439,105 priority patent/US8368743B2/en
Priority to JP2009526116A priority patent/JP2010501904A/ja
Priority to JP2009526117A priority patent/JP5266223B2/ja
Priority to PCT/EP2007/059111 priority patent/WO2008025839A1/de
Priority to TW96132784A priority patent/TWI384337B/zh
Publication of DE102006042323A1 publication Critical patent/DE102006042323A1/de
Application granted granted Critical
Publication of DE102006042323B4 publication Critical patent/DE102006042323B4/de
Priority to US15/978,916 priority patent/US10678188B2/en
Priority to US16/895,108 priority patent/US11460808B2/en
Priority to US17/957,118 priority patent/US20230025687A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • G03H2001/0833Look up table
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/303D object
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/45Representation of the decomposed object
    • G03H2210/452Representation of the decomposed object into points

Abstract

Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit, wobei aus Bilddaten mit Tiefeninformation Hologrammwerte zur Darstellung einer dreidimensionalen, durch Objektpunkte (P) strukturierten Szene (S) auf einem Spatial-Light-Modulator (SLM) so kodiert werden, dass jene Wellenfront, die ein Objekt aussenden würde, in ein oder mehrere virtuelle Betrachterfenster (OW) rekonstruierbar ist und die Rekonstruktion eines einzelnen Objektpunktes (P) nur ein Teilhologramm (TH) als Teilmenge des SLM erfordert, wobei durch die Position eines Betrachters (O) und dessen Blickrichtung eine Ansicht der Szene (S) festgelegt ist und dem Betrachter mindestens ein in einer Betrachterebene (OP) nahe der Augen liegendes virtuelles Betrachterfenster (OW) zugeordnet ist und nach einer dreidimensionalen Diskretisierung der Szene (S) in sichtbare Objektpunkte (P) das Verfahren die nachfolgenden Schritte umfasst: a) Propagieren der von einem Objektpunkt (P) ausgehenden Lichtwellen in das Betrachterfenster (OW) durch Transformation, wobei für jeden Objektpunkt (P) die Beiträge zur Propagation der Lichtwellen in das Betrachterfenster (OW) aus Look-Up-Tables bestimmt werden; b) Wiederholen der Transformation, bis für alle Objektpunkte die gesamte Szene (S) transformiert ist, wobei die Ergebnisse der einzelnen Transformationen zur Beschreibung eines gemeinsamen Wellenfeldes der gesamten Szene (S) für das Betrachterfenster (OW) in einem zur Betrachterebene (OP) referenzierten Datensatz addiert werden; c) Rücktransformieren durch Transformieren der addierten Daten von der Betrachterebene (OP) in eine endlich entfernte, parallele Hologrammebene am Ort eines Spatial Light Modulators (SLM) zu komplexen Hologrammdaten des Videohologramms.

Description

  • Gebiet der Erfindung
  • Die Erfindung betrifft ein Verfahren zum Generieren computer-generierter Videohologramme CGVH aus dreidimensionalen Bilddaten mit Tiefeninformation in Echtzeit.
  • Im Bereich der Generierung holographischer Daten betrifft die Erfindung die Transformation von Teilbereichen der Szene, wobei durch die Transformation die Ausbreitung der Lichtwellen beschrieben wird. Bei der holographischen Darstellung der 3D-Objekte oder 3D-Szenen wird die Lichtwellenfront durch die Interferenz und Überlagerung kohärenter Lichtwellen generiert.
  • Im Gegensatz zu klassischen Hologrammen, die als Interferenzmuster photographisch oder auf andere Weise gespeichert sind, existieren CGVH als Ergebnis der Berechnung von Hologrammdaten aus Sequenzen einer dreidimensionalen Szene und ihrer Speicherung mit elektronischen Mitteln. Moduliertes interferenzfähiges Licht breitet sich im Raum vor den Augen eines Betrachters als eine durch die Amplituden- und/oder Phasenwerte steuerbare Lichtwellenfront zur Rekonstruktion einer dreidimensionalen Szene aus. Dabei bewirkt das Ansteuern eines Spatial-Light-Modulators SLM mit den Hologrammwerten der Videohologramme, dass das vom Displayschirm ausgehende, in Pixeln modulierte Wellenfeld durch Interferenzen in den Raum die gewünschte dreidimensionale Szene rekonstruiert.
  • Ein holografisches Display enthält typischerweise eine Anordnung steuerbarer Pixel, wobei die Pixel durch elektronisches Beeinflussen der Amplitude und/oder Phase von beleuchtendem Licht Objektpunkte rekonstruieren. Eine solche Anordnung ist eine Form eines Spatial Light Modulators SLM. Das Display kann auch kontinuierlich statt matrixförmig sein. Es kann beispielsweise ein kontinuierlicher SLM sein, einschließlich eines kontinuierlichen SLM mit Matrixsteuerung oder eines akustooptischen Modulators AOM. Eine geeignete Anzeigeeinrichtung zur Rekonstruktion von Videohologrammen durch räumliche Amplitudenmodulation eines Lichtmusters ist beispielsweise ein Flüssigkristalldisplay LCD. Die Erfindung kann jedoch ebenso auf andere steuerbare Einrichtungen angewendet werden, welche kohärentes Licht nutzen, um eine Lichtwellenfront zu modulieren.
  • In diesem Dokument bezeichnet der Begriff ,Pixel' ein steuerbares Hologrammpixel im SLM; ein Pixel wird durch einen diskreten Wert eines Hologrammpunkts einzeln adressiert und angesteuert. Jedes Pixel stellt einen Hologrammpunkt des Videohologramms dar. Bei einem LCD wird daher der Begriff ,Pixel' für die einzeln adressierbaren Bildpunkte des Bildschirms verwendet. Bei einem DLP wird der Begriff ,Pixel' für einen einzelnen Mikrospiegel oder eine kleine Gruppe von Mikrospiegeln verwendet. Bei einem kontinuierlichen SLM ist ein Pixel die Übergangsregion auf dem SLM, die einen komplexen Hologrammpunkt repräsentiert. Der Begriff ,Pixel' bezeichnet daher ganz allgemein die kleinste Einheit, die einen komplexen Hologrammpunkt repräsentieren, also anzeigen kann.
  • Schließlich bezeichnet der Begriff holographische Kodierung oder kurz Kodierung die Generierung komplexer Hologrammpunkte aus Bilddaten mit Tiefeninformation.
  • Technischer Hintergrund und Stand der Technik
  • Die computer-generierten Videohologramme können beispielsweise mit einem Hologrammdisplay rekonstruiert werden, das der Anmelder bereits in der Druckschrift WO 2004/044659 A2 beschrieben hat. Dazu blickt der Betrachter durch mindestens ein entsprechendes virtuelles Betrachterfenster, das größer als eine Augenpupille ist, zum Displayschirm.
  • Die WO 2006/066 919 A1 offenbart ebenfalls ein Verfahren zur Generierung von computer-generierten Videohologrammen.
  • Die WO 2005/099 386 A2 offenbart hingegen ein Verfahren in dem die Hologramme in einem speziellen Darstellungsgerät (image reconstructor 62), auf welches die Lichtwellen fokussiert werden, dargestellt werden.
  • Vielfältige andere Verfahren für computergenerierter Videohologramme CGVH werden dagegen in den Druckschriften WO 2004/066037 A1 , WO 2006/026 446 A2 , Lucente, M: Computational holographic bandwidth compression. In: IBM Systems Journal, IBM Corp. Armonk, New York, US, 35, 1996, 3, S. 349–365. -ISSN: 0018-8670 und WO 02/039 192 A1 beschrieben. Diese Verfahren arbeiten jedoch nicht mit Betrachterfenstern, sondern machen eine Szene gleichzeitig an jedem Punkt in einer festen, räumlich ausgedehnten Viewing Zone sichtbar.
  • Ein ,Betrachterfenster' ist ein begrenzter virtueller Bereich, durch welchen der Betrachter die gesamte rekonstruierte 3D-Szene mit ausreichend großer Sichtbarkeit ansehen kann. Das Betrachterfenster befindet sich auf den oder nahe der Augen des Betrachters. Das Betrachterfenster kann in die Richtungen X, Y und Z bewegt werden. Innerhalb des Betrachterfensters überlagern sich die Wellenfelder so, dass das rekonstruierte Objekt für den Betrachter sichtbar wird. Die Fenster liegen in Augennähe des Betrachters, können mit bekannten Positionserkennungs- und Nachführeinrichtungen der aktuellen Betrachterposition nachgeführt werden. Damit können sie vorteilhaft auf eine Größe, die wenig über der Pupillengröße liegt, begrenzt werden. Es ist möglich, zwei Betrachterfenster zu verwenden, nämlich eines für jedes Auge. Aufwändigere Anordnungen von Betrachterfenstern sind ebenfalls möglich. Es ist ferner möglich, Videohologramme zu kodieren, die Objekte oder ganze Szenen enthalten, die der Betrachter hinter dem SLM sieht.
  • Der Begriff ,Transformation' ist so weit auszulegen, dass er jede mathematische oder rechnerische Technik einschließt, die einer Transformation gleichkommt oder diese annähert. Transformationen im mathematischen Sinne sind lediglich Annäherungen physkalischer Prozesse, die genauer durch die Maxwellschen Wellenausbreitungsgleichungen beschrieben werden. Transformationen wie etwa Fresneltransformationen oder die spezielle Gruppe von Transformationen, die als Fouriertransformationen bekannt sind, beschreiben Annäherungen zweiter Ordnung. Transformationen führen in der Regel auf algebraische und nicht differentielle Beschreibungen und können folglich rechentechnisch effizient und performant gehandhabt werden. Überdies können sie präzise in optischen Systeme eingesetzt werden.
  • Die WO 2006/066906 A1 ( PCT/EP 2005/013836 ) des Anmelders beschreibt ein Verfahren zum Berechnen von computer-generierten Videohologrammen. Es ordnet Objekte mit komplexen Amplitudenwerten einer dreidimensionalen Szene in Rasterpunkten von parallelen, virtuellen Schnittebenen zu, um zu jeder Schnittebene einen separaten Objektdatensatz mit diskreten Amplitudenwerten in Rasterpunkten zu definieren und aus den Bilddatensätzen eine holographische Kodierung für einen Spatial-Light-Modulator eines Hologrammdisplays zu berechnen.
  • Die Lösung der Aufgabe nutzt gemäß der Erfindung den Grundgedanken, computergestützt die folgenden Schritte durchzuführen:
    • • aus jedem Objektdatensatz jeder tomographischen Szeneschnittfläche wird ein Beugungsbild in Form einer separaten zweidimensionalen Verteilung von Wellenfeldern für eine Betrachterebene mit einem endlichen Abstand parallel zu den Schnittebenen berechnet, wobei die Wellenfelder aller Schnitte für mindestens ein gemeinsames virtuelles Fenster berechnet werden, das in der Betrachterebene nahe den Augen eines Betrachters liegt und dessen Fläche gegenüber dem Videohologramm reduziert ist,
    • • die berechneten Verteilungen aller Schnittebenen werden zur Beschreibung eines gemeinsamen Wellenfeldes für das Fenster in einem zur Betrachterebene referenzierten Datensatz addiert und
    • • der Referenzdatensatz wird zum Erzeugen eines Hologrammdatensatzes für ein gemeinsames Computer generiertes Hologramm der Szene in eine von der Referenzebene endlich entfernte, parallele Hologrammebene transformiert, wobei in der Hologrammebene der Spatial Light Modulator liegt, mit welcher nach entsprechender Kodierung die Szene in den Raum vor den Augen des Betrachters rekonstruiert wird.
  • Den genannten Verfahren und Displays liegt dabei der Gedanke zugrunde, vorrangig nicht das Objekt der Szene zu rekonstruieren, sondern jene Wellenfront, die das Objekt aussenden würde, in ein oder mehrere virtuelle Betrachterfenster zu rekonstruieren.
  • Durch die virtuellen Betrachterfenster kann der Betrachter die Szene sehen. Die virtuellen Betrachterfenster überdecken die Pupillen des Betrachters und werden mit bekannten Positionserkennungs- und Nachführeinrichtungen der aktuellen Betrachterposition nachgeführt.
  • Zwischen dem Spatial Light Modulator des Hologrammdisplays und den Betrachterfenstern ist ein virtueller pyramidenstumpfförmiger Betrachterbereich, das so genannte Frustum, aufgespannt, wobei der SLM die Grundfläche und das Betrachterfenster die Spitze bildet. Bei sehr kleinen Betrachterfenstern kann der Pyramidenstumpf als Pyramide angenähert werden. Der Betrachter sieht durch die virtuellen Betrachterfenster in Richtung des Displays und nimmt im Betrachterfenster die Wellenfront auf, welche die Szene repräsentiert.
  • Aufgrund der Vielzahl der notwendigen Transformationen ist die holographische Kodierung mit hohem Rechenaufwand verbunden. Eine Kodierung in Echtzeit würde hoch performante und kostspielige Recheneinheiten erfordern.
  • Aufgabe der Erfindung
  • Aufgabe der Erfindung ist es, ein Verfahren zu schaffen, welches erlaubt, in Echtzeit Videohologramme aus dreidimensionalen Bilddaten mit Tiefeninformation zu generierten. Die Generierung soll von einfachen und kostengünstigen Rechenanlagen durchgeführt werden können.
  • Zusammenfassung der Erfindung
  • Das erfindungsgemäße Verfahren dient zum Generieren computer-generierter Videohologramme in Echtzeit. Aus Bilddaten mit Tiefeninformation werden Hologrammwerte zur Darstellung einer dreidimensionalen, durch Objektpunkte strukturierten Szene auf einem Spatial-Light-Modulator, SLM, kodiert.
  • Analog zum genannten Stand der Technik liegt dem erfindungsgemäßen Verfahren das Prinzip zugrunde, vorrangig nicht das Objekt der Szene zu rekonstruieren, sondern jene Wellenfront, die das Objekt aussenden würde, in ein oder mehrere virtuelle Betrachterfenster zu rekonstruieren.
  • Aus hinreichend kohärentem Licht wird von einem mit Hologrammwerten gesteuerten Spatial Light Modulator SLM ein moduliertes Wellenfeld erzeugt und durch Interferenzen im Raum eine gewünschte reale oder virtuelle dreidimensionale Szene rekonstruiert. Ausgehend vom SLM werden in pyramidenstumpfförmigen Rekonstruktionsräumen virtuelle Betrachterfenster generiert. Die Fenster liegen in Augennähe des Betrachters und können mit bekannten Positionserkennungs- und Nachführeinrichtungen der aktuellen Betrachterposition nachgeführt werden.
  • Es ist ein Ausgangspunkt der Erfindung, dass jener Bereich, in dem ein Betrachter eine Szene sieht, durch einen pyramidenstumpfförmigen Rekonstruktionsraum, das so genannte Frustum, gegeben ist, der sich vom SLM zum Betrachterfenster erstreckt. Der Pyramidenstumpf kann in einer Näherung durch eine Pyramide ersetzt werden, da das Betrachterfenster viel kleiner als der SLM ist.
  • Der Erfindung liegt der Gedanke zugrunde, dass für jeden Objektpunkt die Beiträge zur Propagation der Lichtwellen in das Betrachterfenster aus Look-Up-Tables bestimmbar sind.
  • In einer besonders bevorzugten Ausführungsform des Verfahrens ist durch die Position jedes Betrachtes und dessen Blickrichtung eine Ansicht der Szene festgelegt. Einem Betrachter ist jeweils mindestens ein in einer Betrachterebene nahe der Augen liegendes virtuelles Betrachterfenster zugeordnet. In einem vorbereiteten Verfahrensschritt erfolgt eine dreidimensionale Diskretisierung der Szene in sichtbare Objektpunkte. Gegebenenfalls werden diese Daten bereits von einer Schnittstelle übernommen
  • Die nachfolgenden erfindungsgemäßen Verfahrensschritte umfassen
    • – Schritt (1): Propagieren der Lichtwellen eines Objektpunktes in das Betrachterfenster durch Transformation
    • – Schritt (2): Wiederholen der Transformation, bis mit allen Objektpunkten die gesamte Szene transformiert ist, wobei die Ergebnisse der einzelnen Transformationen zur Beschreibung eines gemeinsamen Wellenfeldes der gesamten Szene für das Betrachterfenster in einem zur Betrachterebene referenzierten Datensatz addiert werden,
    • – Schritt (3): Rücktransformieren, wobei die addierten Daten von der Betrachterebene in eine endlich entfernte, parallele Hologrammebene am Ort eines Spatial Light Modulators zu komplexen Hologrammdaten für das Videohologramm transformiert wird.
  • Erfindungsgemäß sind dabei für jeden Objektpunkt die Beiträge zur Propagation der Lichtwellen in das Betrachterfenster aus Look-Up-Tables bestimmbar.
  • Das Prinzip der Look-Up-Tables kann mit Vorteil erweitert werden. Beispielsweise werden bei der Transformation die Datenwerte der Objektpunkte mit Helligkeits- und/oder Farbwerten aus Look-Up-Tables moduliert.
  • In einem weiteren Aspekt der Erfindung werden zusätzliche Korrekturfunktionen angewendet, um beispielsweise lage- oder formbedingte Toleranzen der SLM zu kompensieren oder eine Verbesserung der Rekonstruktion zu erreichen. Beispielsweise werden zu den Datenwerten der Objektpunkte und/oder zum referenzierten Datensatz der Betrachterebene und/oder zum rücktransformierten Datensatz Korrekturwerte addiert.
  • Einer Farbdarstellung liegt der Gedanke zugrunde, dass die Grundfarben aus jeweiligen Look-Up-Tables bestimmbar sind.
  • Abhängig von der Art des holographischen Displays erfolgt nach der Rücktransformation ein Normieren und Umwandeln der komplexen Hologrammdaten in Pixelwerte für den SLM. Beispielsweise werden die komplexen Hologrammwerte in Burckhardt-Komponenten oder Zweiphasenkomponenten umgewandelt.
  • Die dem erfindungsgemäßen Verfahren zugrunde liegenden Look-Up-Tables werden vorzugsweise gemäß WO 2006/066906 A1 ( PCT/EP 2005/013836 ) oder WO 2006/066919 A1 ( PCT/EP 2005/013879 ) generiert und in entsprechende Datenträger und Speichermodule abgelegt.
  • Das Verfahren erlaubt die Generierung computer-generierter Videohologramme in Echtzeit, beispielsweise für ein holographisches Display gemäß WO 2004/044659 A2 oder WO 2006/027228 A1 .
  • Der Vorteil dieses erfindungsgemäßen Verfahrens liegt darin, dass die aufwändige Generierung der komplexen Hologrammwerte gemäß WO 2006/066906 A1 ( PCT/EP 2005/013836 ) oder WO 2006/066919 A1 ( PCT/EP 2005/013879 ) entfällt, wo zahlreiche Transformationen des diskretisierten Objekts in das Betrachterfenster und eine abschließende Rücktransformation in den SLM entsprechend aufwändig erfolgen.
  • Zusammenfassend werden bei einer handelsüblichen Auflösung des SLM, welche bereits eine qualitativ hochwertige Darstellung des Hologramms ermöglicht, die bisher sehr hohen und kostenintensiven Anforderungen an die Recheneinheit zur Generierung der holographischen Daten nachhaltig verringert. Der Berechnungsaufwand kann anhand der Look-Up-Tables um mehrere Zehnerpotenzen reduziert werden. Das erfindungsgemäße Verfahren erlaubt somit die Ausführung auf gängigen PC-Systemen. Damit wird gewährleistet, dass für holographische Anwendungen die Generierung der Hologramme interaktiv und in Echtzeit erfolgt. Schließlich wird durch die zuverlässige Generierung der Hologramme in Echtzeit gewährleistet, dass die daraus resultierende unerwünschte Reaktionszeit beim Nachverfolgen der Betrachterpupillen bzw. Fenster vermindert werden kann. Da die Generierung der Hologramme für einen Betrachter auch mit einfachen Recheneinheiten definitiv in Echtzeit erfolgt, gewährleistet das erfindungsgemäße Verfahren, dass auch für mehrere beziehungsweise viele Betrachter zeit- oder raumsequentiell separierte Hologramme zur Ansicht dargeboten werden können.
  • Da die Generierung der Hologramme wenig Rechenaufwand erfordert, ist beispielsweise denkbar, die Berechnung nicht von der zentralen Recheneinheit (CPU) eines Rechners auszuführen. In einer alternativen Lösung wird die Generierung der Hologramme auf den Komponenten der Graphikkarte erstellt, wobei vorzugsweise ein Graphics Central Processing Unit GPU und/oder speziell konfigurierte Recheneinheiten verwendet werden.
  • Die Erfindung trägt nachhaltig zur allgemeinen Anwendung und Akzeptanz holographischer Displays bei und ist von hohem wirtschaftlichem Wert.
  • Bevorzugte Ausführungsformen der Erfindung
  • 1 veranschaulicht den Grundgedanken der Erfindung anhand eines einzelnen Betrachters. Durch die Position des Betrachters (O) und dessen Blickrichtung ist eine Ansicht einer Szene (S) festgelegt. Dem Betrachter ist mindestens ein in einer Referenzebene (OP) nahe der Augen liegendes virtuelles Betrachterfenster (OW) zugeordnet. Aus hinreichend kohärentem Licht wird von einem mit Hologrammwerten gesteuerten Spatial Light Modulator (SLM) ein moduliertes Wellenfeld erzeugt. Dem Verfahren und den davon abgeleiteten Displays liegt dabei der Gedanke zugrunde, vorrangig nicht das Objekt der Szene zu rekonstruieren, sondern jene Wellenfront, die das Objekt aussenden würde, in ein oder mehrere virtuelle Betrachterfenster (OW) zu rekonstruieren. Das Objekt ist in der Figur durch einen Objektpunkt (P) vereinzelt dargestellt. Durch die virtuellen Betrachterfenster (OW) kann der Betrachter (O) die Szene (S) sehen. Die virtuellen Betrachterfenster (OW) überdecken die Pupillen des Betrachters (O) und werden mit bekannten Positionserkennungs- und Nachführeinrichtungen der aktuellen Betrachterposition nachgeführt.
  • Dabei bewirkt das Ansteuern des Spatial-Light-Modulators (SLM) mit den Hologrammwerten der Videohologramme, dass das vom Displayschirm ausgehende, in Pixeln modulierte Wellenfeld durch Interferenzen in den Raum die gewünschte dreidimensionale Szene rekonstruiert.
  • Ausgangspunkt des Verfahrens sind dreidimensionale Bilddaten mit Tiefeninformation. Diese Information liegt beispielsweise als dreidimensionale Beschreibung in Form von Vertices, Normalenvektoren und Matrizen vor. Die Bilddaten enthalten in der Regel zusätzliche Beschreibungen zu Material- und Oberflächeneigenschaften und dergleichen. In der Regel ist sowohl die Farbe der Bildobjekte als auch die Struktur der Oberflächen festgelegt. Im Weiteren sind Materialeigenschaften und Lichtquellen modelliert oder durch Hilfsalgorithmen erstellt.
  • In einem vorbereitenden Verfahrensschritt wird gemäß der Blickrichtung des Betrachters die Rotation, Skalierung, Translation durchgeführt und die Sichtbarkeit der Szene berechnet. Durch die Position eines Betrachters und dessen Blickrichtung ist eine Ansicht einer Szene festgelegt. Gemäß der Position des Betrachters und der Tiefeninformation des Bildinhalts wird die Szene in sichtbare Objektpunkte strukturiert. In einer einfachen Lösung wird das Objekt der Szene innerhalb des Frustums mit einer dreiachsigen Diskretisierung strukturiert und ausgehend vom Betrachterfenster werden die sichtbaren Objektpunkte der Szene ermittelt.
  • Die Szenedaten werden dabei durch zwei parallele Schnittebenen in Schichten geteilt. Die Ebenen sind senkrecht zur Blickrichtung des Betrachters und der Abstand zwischen den Schnittebenen ist dabei so hinreichend klein gewählt, dass einerseits die Berechnungsgenauigkeit aber auch die Perfomanz des Verfahrens gewährleist ist. Idealerweise sollte der Abstand sehr klein sein, so dass nur Tiefeninformationen, welche sich in einem konstanten Abstand zum Betrachter befinden, in den Berechnungen berücksichtigt werden müssen. Ist der Abstand zwischen den Ebenen größer, so werden die Tiefeninformationen geeignet gewählt, beispielsweise als Abstandsmittelwert der beiden Ebenen festgelegt und einer Schicht zugeordnet.
  • Im nachfolgenden Verfahrensschritt erfolgt das Transformieren der Szeneschnittdaten. In der allgemeinsten Form wird bei einer Transformation die Ausbreitung der Lichtwellen in das virtuelle Betrachterfenster beschrieben. Die einfachsten Transformationen liegen dabei als Fourier- oder Fresnel-Transformationen vor. Die Fourier-Transformation wird vorzugsweise im Fernbereich verwendet, wo aufgrund des größeren Abstands zum Betrachter die Lichtwellen als ebene Wellenfront interpretiert werden können. Die Fourier-Transformation weist im Vergleich zu anderen Transformationen den Vorteil auf, dass sich die Transformation durch optische Elemente – und umgekehrt – modellieren lässt.
  • Im Nahbereich einer Kugelwelle wird vorzugsweise eine Fresnel-Transformation verwendet. Den Transformationen liegt durch die Schnittebenen eine implizierte konstante z-Koordinate zugrunde. Beispielsweise wird die z-Koordinate einer der beiden Ebenen oder der daraus gebildete Mittelwert zugrunde gelegt.
  • Gemäß dem erfindungsgemäßen Verfahren sind für jeden Objektpunkt die Beiträge zur Propagation der Lichtwellen in das Betrachterfenster aus Look-Up-Tables bestimmbar.
  • Die so aus Look-Up-Tables ermittelten Daten eines Objektpunkts werden zur Beschreibung eines gemeinsamen Wellenfeldes der gesamten Szene für das Betrachterfenster in einem zur Betrachterebene referenzierten Datensatz addiert. Nach der Transformation der gesamten Szene repräsentiert dieser Referenzdatensatz die Summe der Transformationen der einzelnen Szeneschnittdaten.
  • In einem nächsten Verfahrensschritt erfolgt das Rücktransformieren, wobei die Referenzdaten in eine endlich entfernte, parallele Hologrammebene am Ort eines Spatial Light Modulators zu Hologrammdaten für das Videohologramm transformiert und die komplexen Hologrammwerte generiert werden.
  • Angepasst an das holographische Display folgt einer Normierung die Umwandlung der komplexen Hologrammwerte in Pixelwerte für den SLM. Im Falle der Burckhardt-Kodierung wird der komplexe Hologrammwert durch drei Werte repräsentiert, die jeweils in den Wertebereich 0 bis 1 normiert sind, wobei der durch 1 repräsentierte Wert den maximal erzielbaren Komponentenwert begrenzt. Diese Werte werden anschließend in diskrete Werte umgewandelt und bilden durch diskretisierte Graustufen die Steuerintensitäten für die Pixel des Spatial Light Modulators. Die Anzahl der Diskretisierungsstufen hängt sowohl von den Eigenschaften der Graphikkarte als auch dem verwendeten Display ab. Meist haben sie eine Auflösung von 8 Bit mit 256 Stufen. Weitere Auflösungen mit 10 Bit und darüber hinaus sind möglich.
  • Eine weitere bevorzugte Kodierung ist die Zweiphasen-Kodierung.
  • Für die Generierung farbiger Bildinhalte wird das Verfahren analog für jede einzelne Farbkomponente angewendet. Die dem erfindungsgemäßen Verfahren zugrunde liegenden Look-Up-Tables werden vorzugsweise gemäß WO 2006/066906 A1 ( PCT/EP 2005/013836 ) oder WO 2006/066919 A1 ( PCT/EP 2005/013879 ) generiert und in entsprechende Datenträger und Speichermodule abgelegt.
  • Um beispielsweise lage- oder formbedingte Toleranzen der SLM zu kompensieren oder eine Verbesserung der Rekonstruktion zu erreichen werden zusätzliche Korrekturfunktionen angewendet. Beispielsweise werden zu den Datenwerten der Objektpunkte und/oder zum referenzierten Datensatz der Betrachterebene und/oder zum rücktransformierten Datensatz Korrekturwerte addiert.
  • Das Verfahren erlaubt die Generierung computer-generierter Videohologramme in Echtzeit, beispielsweise für ein holographisches Display gemäß WO 2004/044659 A2 oder WO 2006/027228 A1 .

Claims (7)

  1. Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit, wobei aus Bilddaten mit Tiefeninformation Hologrammwerte zur Darstellung einer dreidimensionalen, durch Objektpunkte (P) strukturierten Szene (S) auf einem Spatial-Light-Modulator (SLM) so kodiert werden, dass jene Wellenfront, die ein Objekt aussenden würde, in ein oder mehrere virtuelle Betrachterfenster (OW) rekonstruierbar ist und die Rekonstruktion eines einzelnen Objektpunktes (P) nur ein Teilhologramm (TH) als Teilmenge des SLM erfordert, wobei durch die Position eines Betrachters (O) und dessen Blickrichtung eine Ansicht der Szene (S) festgelegt ist und dem Betrachter mindestens ein in einer Betrachterebene (OP) nahe der Augen liegendes virtuelles Betrachterfenster (OW) zugeordnet ist und nach einer dreidimensionalen Diskretisierung der Szene (S) in sichtbare Objektpunkte (P) das Verfahren die nachfolgenden Schritte umfasst: a) Propagieren der von einem Objektpunkt (P) ausgehenden Lichtwellen in das Betrachterfenster (OW) durch Transformation, wobei für jeden Objektpunkt (P) die Beiträge zur Propagation der Lichtwellen in das Betrachterfenster (OW) aus Look-Up-Tables bestimmt werden; b) Wiederholen der Transformation, bis für alle Objektpunkte die gesamte Szene (S) transformiert ist, wobei die Ergebnisse der einzelnen Transformationen zur Beschreibung eines gemeinsamen Wellenfeldes der gesamten Szene (S) für das Betrachterfenster (OW) in einem zur Betrachterebene (OP) referenzierten Datensatz addiert werden; c) Rücktransformieren durch Transformieren der addierten Daten von der Betrachterebene (OP) in eine endlich entfernte, parallele Hologrammebene am Ort eines Spatial Light Modulators (SLM) zu komplexen Hologrammdaten des Videohologramms.
  2. Verfahren nach Anspruch 1, wobei bei der Transformation die Datenwerte der Objektpunkte mit Helligkeits- und/oder Farbwerten aus Look-Up-Tables moduliert werden.
  3. Verfahren nach Anspruch 1, wobei zu den Datenwerten der Objektpunkte und/oder zum referenzierten Datensatz der Betrachterebene und/oder zum rücktransformierten Datensatz Korrekturwerte addiert werden.
  4. Verfahren nach Anspruch 1, wobei nach der Rücktransformation ein Normieren und Umwandeln der komplexen Hologrammdaten in Pixelwerte erfolgt.
  5. Verfahren nach Anspruch 4, wobei die komplexen Hologrammwerte in Burckhardt-Komponenten oder Zweiphasenkomponenten umgewandelt werden.
  6. Verfahren nach einem oder mehreren der vorgenannten Ansprüche, wobei zur Farbdarstellung die Grundfarben aus jeweiligen Look-Up-Tables bestimmt werden.
  7. Verfahren nach einem oder mehreren der vorgenannten Ansprüche für ein holographisches Display.
DE200610042323 2006-09-01 2006-09-01 Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation Active DE102006042323B4 (de)

Priority Applications (16)

Application Number Priority Date Filing Date Title
DE200610042323 DE102006042323B4 (de) 2006-09-01 2006-09-01 Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation
JP2009526117A JP5266223B2 (ja) 2006-09-01 2007-08-31 伝播を使用して計算機ビデオホログラムをリアルタイムに生成する方法
US12/439,271 US20100073744A1 (en) 2006-09-01 2007-08-31 Method for Generating Video Holograms in Real Time by Means of Subholograms
CN2007800326057A CN101512445B (zh) 2006-09-01 2007-08-31 借助亚全息图实时生成视频全息图的方法
PCT/EP2007/059119 WO2008025842A1 (de) 2006-09-01 2007-08-31 Schnittstelle und schaltungsanordnung insbesondere für holografische kodiereinheiten oder holografische wiedergabeeinrichtungen
PCT/EP2007/059125 WO2008025844A1 (de) 2006-09-01 2007-08-31 Verfahren zum generieren computer-generierter videohologramme in echtzeit mittels propagation
JP2009526114A JP5265546B2 (ja) 2006-09-01 2007-08-31 サブホログラムを使用してビデオホログラムをリアルタイムに生成する方法
US12/439,105 US8368743B2 (en) 2006-09-01 2007-08-31 Interface and circuit arrangement, in particular for holographic encoding units or holographic reproduction devices
PCT/EP2007/059118 WO2008025841A1 (de) 2006-09-01 2007-08-31 Holografische kodiereinheit zum generieren von videohologrammen
US12/439,214 US8218210B2 (en) 2006-09-01 2007-08-31 Method for generating computer-generated video holograms in real time by means of propagation
PCT/EP2007/059111 WO2008025839A1 (de) 2006-09-01 2007-08-31 Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen
JP2009526116A JP2010501904A (ja) 2006-09-01 2007-08-31 ホログラフィック符号化ユニット又はホログラフィック表示装置のためのインタフェース及び回路
TW96132784A TWI384337B (zh) 2006-09-01 2007-09-01 全像顯示器即時產生視訊全像圖的方法
US15/978,916 US10678188B2 (en) 2006-09-01 2018-05-14 Method for generating a head up display for an aircraft using video holograms in real time with the help of sub-holograms
US16/895,108 US11460808B2 (en) 2006-09-01 2020-06-08 Method for generating a head up display for an aircraft using video holograms in real time with the help of sub-holograms
US17/957,118 US20230025687A1 (en) 2006-09-01 2022-09-30 Method for generating a head up display for an aircraft using video holograms in real time with the help of sub-holograms

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE200610042323 DE102006042323B4 (de) 2006-09-01 2006-09-01 Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation

Publications (2)

Publication Number Publication Date
DE102006042323A1 DE102006042323A1 (de) 2008-03-13
DE102006042323B4 true DE102006042323B4 (de) 2014-09-04

Family

ID=38796211

Family Applications (1)

Application Number Title Priority Date Filing Date
DE200610042323 Active DE102006042323B4 (de) 2006-09-01 2006-09-01 Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation

Country Status (2)

Country Link
DE (1) DE102006042323B4 (de)
TW (1) TWI384337B (de)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002039192A1 (en) * 2000-11-07 2002-05-16 Holographic Imaging Llc Improved 3d display
WO2004066037A1 (en) * 2003-01-21 2004-08-05 Holographic Imaging Llc Image projection device and method
WO2005099386A2 (en) * 2004-04-13 2005-10-27 Board Of Regents, The University Of Texas System Holographic projector
WO2006026446A2 (en) * 2004-08-26 2006-03-09 Symstream Technology Holdings Pty Ltd Wave matrix mechanics method & apparatus
WO2006066919A1 (en) * 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002039192A1 (en) * 2000-11-07 2002-05-16 Holographic Imaging Llc Improved 3d display
WO2004066037A1 (en) * 2003-01-21 2004-08-05 Holographic Imaging Llc Image projection device and method
WO2005099386A2 (en) * 2004-04-13 2005-10-27 Board Of Regents, The University Of Texas System Holographic projector
WO2006026446A2 (en) * 2004-08-26 2006-03-09 Symstream Technology Holdings Pty Ltd Wave matrix mechanics method & apparatus
WO2006066919A1 (en) * 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
LUCENTE, M.: Computational holographic bandwidth compression. In: IBM Systems Journal, 35, 1996, 3, 349-365. - ISSN 0018-8670 *

Also Published As

Publication number Publication date
TW200836030A (en) 2008-09-01
TWI384337B (zh) 2013-02-01
DE102006042323A1 (de) 2008-03-13

Similar Documents

Publication Publication Date Title
EP2005259B1 (de) Verfahren zum rendern und generieren computer-generierter videohologramme in echtzeit
EP2024793B1 (de) Verfahren und einrichtung zum rendern und generieren computer-generierter videohologramme
DE102007023739B4 (de) Verfahren zum Rendern und Generieren von Farbvideohologrammen in Echtzeit und holographische Wiedergabeeinrichtung
EP2158522B1 (de) Analytisches verfahren zur berechnung von videohologrammen in echtzeit
DE102007013431B4 (de) Verfahren und Einrichtung zum Rekonstruieren einer dreidimensionalen Szene mit korrigierter Sichtbarkeit
EP2160655B1 (de) Verfahren zum generieren von videohologrammen in echtzeit zur erweiterung einer 3d-rendering-graphikpipeline
DE102004063838A1 (de) Verfahren und Einrichtung zum Berechnen computer generierter Videohologramme
EP2138910B1 (de) Einrichtung zur Rekonstruktion von Videohologrammen
DE102008000589B4 (de) Verfahren zur Kodierung von computergenerierten Hologrammen in pixelierten Lichtmodulatoren
WO2008025839A1 (de) Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen
WO2008025844A1 (de) Verfahren zum generieren computer-generierter videohologramme in echtzeit mittels propagation
DE102006062376A1 (de) Verfahren und Einrichtung zum Reduzieren von Speckle
DE102006062377A1 (de) Verfahren und Einrichtung zum Reduzieren von Speckle
DE102006042467A1 (de) Verfahren und Vorrichtung zur Kodierung von computergenerierten Hologrammen in pixelierten Lichtmodulatoren
DE102007036127A1 (de) Holographische Rekonstruktionseinrichtung
DE102006042324B4 (de) Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Teilhologrammen
DE3419098A1 (de) Bildschirm zur raeumlich-dreidimensionalen darstellung von bildern, graphiken und sonstigen daten
DE102006042323B4 (de) Verfahren zum Generieren computer-generierter Videohologramme in Echtzeit mittels Propagation
WO2008025841A1 (de) Holografische kodiereinheit zum generieren von videohologrammen
DE102006042326A1 (de) Holographische Kodiereinheit zum Generieren computergenerierter Videohologramme
WO2007085233A2 (de) Verfahren zur datenkompression computergenerierter videohologramme

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final