WO2006042706A1 - Verfahren zur erzeugung räumlich darstellbarer bilder und anordnung zur räumlich wahrnehmbaren darstellung solcher bilder - Google Patents

Verfahren zur erzeugung räumlich darstellbarer bilder und anordnung zur räumlich wahrnehmbaren darstellung solcher bilder

Info

Publication number
WO2006042706A1
WO2006042706A1 PCT/EP2005/011075 EP2005011075W WO2006042706A1 WO 2006042706 A1 WO2006042706 A1 WO 2006042706A1 EP 2005011075 W EP2005011075 W EP 2005011075W WO 2006042706 A1 WO2006042706 A1 WO 2006042706A1
Authority
WO
WIPO (PCT)
Prior art keywords
views
image
input
data
signals
Prior art date
Application number
PCT/EP2005/011075
Other languages
English (en)
French (fr)
Inventor
Markus Klippstein
Alexander Schmidt
Ferenc Torma
Stephan Otte
Original Assignee
X3D Technologies Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DE102004050809A external-priority patent/DE102004050809A1/de
Priority claimed from DE102005041249A external-priority patent/DE102005041249A1/de
Application filed by X3D Technologies Gmbh filed Critical X3D Technologies Gmbh
Publication of WO2006042706A1 publication Critical patent/WO2006042706A1/de

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus

Definitions

  • This object is achieved in a method of the type described above in that input image signals and image type information are registered for the input image signals in dependence on the image type information a picture type is be ⁇ true, depending on the image type a corresponding processing algorithm is selected, the image signals by the processing algorithms are processed and output image signals are generated, which can be displayed on a corresponding image display device for a viewer as a spatial image or as a sequence of spatial images.
  • All the necessary components can be implemented, for example, in a set-top box for televisions with the capability of spatial reproduction, or, for example, on special PC cards or in the screen itself.
  • the image type information is not already transmitted by the same medium with the input image signals, then it is advantageous to provide a possibility by which the viewer specifies the image type information.
  • the image type information contains information about what kind of three-dimensional images are and, if necessary, in which compression format they are sent.
  • received or predetermined image type information for all subsequently read or received input image signals remain valid until new image type information is read, received or specified. This is advantageous, for example, when a sequence of spatial images, such as in a film, for example, is sent.
  • the determination of the processing algorithm and the corresponding processing of the image signals as well as the generation of output image signals therefore depend on the registered image type information.
  • N is a natural number greater than or equal to two. This method is particularly favorable to use when two beispiels ⁇ stereoscopic views are sent from these views then more than two, for example, four or eight views are created.
  • the central element of this arrangement is the electronic conversion circuit which, for example, carries out the above-described conversion of input signals into output signals for the four image types mentioned above.
  • the output signals are displayed on the image display device, for example as a combination image.
  • a structural plate for specifying light propagation directions must as a rule also be arranged before the image reproduction device.
  • the electronic conversion circuit of the converter can also be designed as FPGA or ASIC. Furthermore, means for interacting with the electronic converter circuit are advantageously also present in the converter, so that at least one of the parameters image size, parallax between the views, resolution, data format and / or total number N for the data set consists of at least two views O k interactively, that is selectable by the user (s).
  • the conversion device in question is designed so that successively a Dahl ⁇ number of data sets consisting of at least two views A c in records consisting of at least two views O k is converted. At least 20 data sets consisting of at least two views A c in data sets consisting of at least two views O k are preferably converted per second. Thus, the real-time conversion of moving image material or image sequences is made possible.
  • the data is converted to output image signals.
  • the conversion for example, the creation of the combination image from the N Ansich ⁇ th - depends on which terminal is connected.
  • the data can be displayed on different interfaces, such as LVDS (Low- Voltage differential signal), VGA (Video Graphics Array) or DVI interface (Digital Visual Interface).
  • LVDS Low- Voltage differential signal
  • VGA Video Graphics Array
  • DVI interface Digital Visual Interface
  • this can also be a USB connection or other possibilities for reading out data memories, such as, for example, from a CD or DVD drive, memory stick, a hard disk or a TCP / IP interface. Connection.
  • Another input 9 is provided for a remote control.
  • the desired depth can be set here, as well as the OSD (On Screen Display) - the display of a menu screen configuration - control.
  • All four modules are connected to both a television tuner 1 1 and a processor module 12, the actual heart of the set-top box 1.
  • the processor module can be, for example, a DSP (Digital Signal Processor), FPGA (Field-Progammable Gate Array), MCU (Micro Controller Unit) or a GPU (Graphic Processor Unit).
  • the pattern plate for specifying light propagation directions comprises a filter array as known in the art e.g. from WO 01/56265 is known.
  • the exemplary arrangement further comprises means for interacting with the electronic conversion circuit, based on which at least one of the parameters image size, parallax between the views, or resolution of the views in the data sets O k is interactively selectable.
  • the converter circuit can also be designed such that it automatically recognizes the input data format. Furthermore, he is trained as an ASIC.
  • the means for interacting can also be used to select an operating mode in which the exemplary arrangement permanently generates two-dimensional output image signals, although suitable input image signals are present for the spatial representation.
  • a plurality of data sets consisting of at least two views A c are converted successively into data sets consisting of at least two views O k . It is particularly advantageous if at least 20 or more data sets consisting of at least two views A c are converted into data sets consisting of at least two views O k per second, so that on the image dergabe worn with the plurality of pixels c ⁇ a picture sequence wake ⁇ is given.

Abstract

Die Erfindung betrifft ein Verfahren, mit dem räumlich darstellbare Bilder erzeugt werden. Bei einem solchen Verfahren werden Eingangsbildsignale und Bildtypinformationen registriert. Dann wird für die Eingangsbildsignale in Abhängigkeit von den Bildtypinformationen ein Bildtyp bestimmt, in Abhängigkeit von diesem Bildtyp ein entsprechender Verarbeitungsalgorithmus ausgewählt und werden die Bildsignale durch den Verarbeitungsalgorithmus verarbeitet. Dabei werden Ausgangsbildsignale erzeugt, welche auf einem entsprechenden Bildwiedergabegerät für einen Betrachter als räumliches Bild oder als eine Folge von räumlichen Bildern dargestellt werden können.

Description

Titel
Verfahren zur Erzeugung räumlich darstellbarer Bilder und Anordnung zur räumlich wahrnehmbaren Darstellung solcher Bilder.
Gebiet der Erfindung
Die Erfindung bezieht sich auf ein Verfahren zur Erzeugung räumlich darstellbarer Bilder und eine Anordnung zur räumlich wahrnehmbaren Darstellung solcher Bilder.
Stand der Technik
Im Stand der Technik sind zahlreiche Verfahren zur Erzeugung zweidimensionaler Bilder aus Eingangsbildsignalen bekannt. Dazu zählen beispielsweise digitale und analoge TV-Übertragung, das Auslesen aus einer CD, Video-CD oder DVD mit allen entsprechenden Unterformaten. Drahtlos oder über Kabel empfangene Bildsignale sind häufig noch verschlüsselt, so daß entsprechende Decoder, die meist in Form von Set-Top-Boxen ausgeführt sind, hinzukommen, die die Signale verarbeiten, d.h. dechiffrieren und ein entsprechend darstellbares Bild erzeugen.
Andererseits sind im Stand der Technik auch Verfahren und Anordnungen zur räum- liehen Darstellung bekannt, wie beispielsweise in der US 5,936,774, in EP 0791 847, EP 0783825, JP 8-194190 sowie DE 100 03 326 C2 beschrieben. Die räumliche Dar¬ stellung von Bildern gewinnt zunehmend an Bedeutung. Während jedoch beispiels¬ weise höherwertige Fernseher schon zwischen verschiedenen zweidimensionalen Bildtypen, wie PAL- und NTSC-Modus unterscheiden können, gibt es solche Möglich- keiten für die Darstellung dreidimensionaler Bilder noch nicht. Zur dreidimensional wahrnehmbaren Darstellung existieren darüber hinaus ver¬ schiedenartige Anordnungen. In der jüngsten Vergangenheit finden autostereosko- pische Systeme, insbesondere auf Basis der Darstellung von mindestens zwei Per¬ spektivansichten, immer weitere Verbreitung.
Während mit solchen Systemen durchaus ansprechende räumliche Eindrücke beim Betrachter bzw. bei den Betrachtern erzielt werden können, stehen mithin bei wei¬ tem nicht so viele geeignete 3D-Bildinhalte zur Verfügung, wie dies wünschenswert ist.
Beschreibung der Erfindung
Aufgabe der Erfindung ist es daher, Verfahren und Anordnungen bereitzustellen, welche es ermöglichen, verschiedene Typen von räumlich darstellbaren Bildern auf einem entsprechenden Bildwiedergabegerät automatisch ohne Eingriff eines Nutzers darzustellen, sowie dafür zu sorgen, daß dabei eine möglichst große Kompatibilität der räumlichen Bildinhalte zu den verschiedenen möglichen Bildwiedergabegeräten erreicht wird.
Diese Aufgabe wird bei einem Verfahren der eingangs beschriebenen Art dadurch gelöst, daß Eingangsbildsignale und Bildtypinformationen registriert werden, für die Eingangsbildsignale in Abhängigkeit von den Bildtypinformationen ein Bildtyp be¬ stimmt wird, in Abhängigkeit vom Bildtyp ein entsprechender Verarbeitungsalgo¬ rithmus ausgewählt wird, die Bildsignale durch die Verarbeitungsalgorithmen verar¬ beitet werden und Ausgangsbildsignale erzeugt werden, welche auf einem entspre- chenden Bildwiedergabegerät für einen Betrachter als räumliches Bild oder als eine Folge von räumlichen Bildern dargestellt werden können.
Bevorzugt werden digitale Ein- und Ausgangsbildsignale verwendet, selbstverständ¬ lich können aber auch analoge Ein- und Ausgangsbildsignale verwendet werden. Die Eingangsbildsignale sowie die Bildtypinformationen werden bevorzugt von einem Datenträger gelesen bzw. drahtlos oder über Kabel empfangen. Bei einem drahtlo¬ sen Empfang oder einem Empfang über Kabel lassen sich zweckmäßigerweise alle möglichen Sendeprotokolle verwenden, insbesondere auch Digital Video Broadcast Satellite / Channel / Terrestric (DVBS, DVBC, DVBT), mit der digitale Fernsehpro- gramme ausgestrahlt werden. Dabei kann insbesondere ein digitales Fernsehsignal noch zusätzlich kodiert übertragen werden, wie mit dem MPEG-2- oder MPEG-4- Standard. Für den Fall, daß die Eingangsbildsignale sowie die Bildtypinformationen von einem Datenträger gelesen werden, kommen bevorzugt DVDs, HD-DVDs und/oder BlueRay-Datenträger in Frage.
Alle notwendigen Bauelemente lassen sich beispielsweise in einer Set-Top-Box für Fernseher mit der Fähigkeit zur räumlichen Wiedergabe, oder beispielsweise auch auf speziellen PC-Karten bzw. im Bildschirm selbst realisieren. Werden die Bildtypin¬ formationen nicht schon mit den Eingangsbildsignalen vom gleichen Medium über¬ mittelt, so ist es vorteilhaft eine Möglichkeit vorzusehen, durch die der Betrachter die Bildtypinformation vorgibt. Die Bildtypinformationen enthalten Angaben dar- über, welcher Art die dreidimensionalen Bilder sind und ggf. in welchem Kompres¬ sionsformat sie gesendet werden. In einer vorteilhaften Ausgestaltung des Verfah¬ rens bleiben einmal gelesene, empfangene oder vorgegebene Bildtypinformationen für alle im folgenden gelesene oder empfangene Eingangsbildsignale solange gültig, bis neue Bildtypinformationen gelesen, empfangen oder vorgegeben werden. Dies ist beispielsweise von Vorteil, wenn eine Sequenz von räumlichen Bildern, wie bei¬ spielsweise bei einem Film, gesendet wird. Auf diese Weise müssen nur am Anfang Informationen über das Bildformat, die Kompression und die Art der Zusammenset¬ zung der 3D-Bilder gesendet werden. Optional kann auch am Ende einer solchen Übertragung eine Standardbildtypinformation gesendet werden, die das Gerät und/oder den Femseher in den Ursprungszustand zurücksetzt, der beispielsweise eine 2 D-Übertragung und -darstellung beinhaltet.
Die Bestimmung des Verarbeitungsalgorithmus und die entsprechende Verarbeitung der Bildsignale sowie Erzeugung von Ausgangsbildsignalen hängt daher von den registrierten Bildtypinformationen ab.
Bei einem ersten Bildtyp beispielsweise werden als Eingangsbildsignale Bildinforma¬ tionen für zweidimensionale Bilder einer Szene oder eines Gegenstandes empfangen oder gelesen, denen Tiefeninformationen zugeordnet sind, die ebenfalls empfangen oder gelesen werden. Der zugeordnete Verarbeitungsalgorithmus erzeugt aus die¬ sen Bildern und den Tiefeninformationen Ansichten der Szene bzw. des Gegenstan¬ des aus verschiedenen Blickwinkeln oder mit verschiedenen räumlichen Tiefen. Bei diesem ersten Bildtyp können auch weitere Variationen zum Einsatz kommen, etwa Bildinformationen für zwei zweidimensionale Bilder einer Szene oder eines Gegen- Standes (z.B: Stereobildpaare) sowie zugeordnete Tiefeninformationen bzw. jeweils zwei verschiedene Tiefeninformationen (z.B. für jedes der zweidimensionalen Bilder eine Tiefenkarte). Bei einem zweiten Bildtyp werden als Eingangsbildsignale Bildinformationen für Schichtbilder einer Szene oder eines Gegenstandes bei verschiedener Tiefe empfan¬ gen oder gelesen. Jedem Schichtbild ist eine bestimmte Tiefe zugeordnet und es enthält nur Informationen, die auch bei dieser Tiefe im Bild vorliegen. Mit dem die¬ sem zweiten Bildtyp zugeordneten Verarbeitungsalgorithmus werden wiederum An¬ sichten der Szene oder des Gegenstandes aus verschiedenen Blickwinkeln oder mit verschiedenen räumlichen Tiefen erstellt.
Bei einem dritten Bildtyp werden als Eingangsbildsignale Bildinformationen direkt für N Ansichten einer Szene oder eines Objektes aus verschiedenen Blickwinkeln gelesen oder empfangen. N ist dabei eine natürliche Zahl größer oder gleich zwei. Dieses Verfahren ist besonders dann günstig zu verwenden, wenn zwei beispiels¬ weise stereoskopische Ansichten gesendet werden, aus diesen Ansichten dann mehr als zwei, beispielsweise vier oder acht Ansichten erstellt werden.
Für jeden der drei Bildtypen stehen am Ende der Verarbeitung daher mehrere, min¬ destens jedoch zwei Ansichten derselben Szene oder desselben Gegenstandes zur Verfügung. Für einen normalen zweidimensionalen Film käme also für jedes Bild, bzw. für jeden Frame mindestens ein weiteres Bild bzw. ein weiterer Frame hinzu. Diese werden als Ausgangsbildsignale einem Bildwiedergabegerät zugeführt. Zweckmäßigerweise werden die Ausgangsbildsignale dabei in Abhängigkeit vom angeschlossenen Bildwiedergabegerät erzeugt. Handelt es sich bei dem angeschlos¬ senen Bildwiedergabegerät beispielsweise um einen mit einem Filterarray ausgestat¬ teten Flachbildschirm, wie z.B. in der DE 201 21 318 U, oder der PCT/EP2004/001833 beschrieben, so wird zweckmäßigerweise aus den Ansichten, die jeweils dieselbe Szene oder denselben Gegenstand darstellen, ein Kombinati¬ onsbild erzeugt, welches Informationen aller Ansichten in vorgegebener Weise ent¬ hält. Dieses Kombinationsbild wird dann als Ausgangsbildsignal ausgegeben. Han¬ delt es sich bei den Bildwiedergabegeräten um ein solches ohne Filterarray, aber mit optischen Mitteln zur zeitlich sequentiellen Darbietung der Ansichten in verschiede¬ ne Richtungen, wobei das Bildwiedergabegerät aber eine hohe Bildwiederholfre¬ quenz aufweist, so werden zweckmäßigerweise die Ansichten, die jeweils dieselbe Szene oder denselben Gegenstand darstellen, als Ausgangsbildsignal ausgegeben und in zeitlich kurzer Abfolge nacheinander auf dem Bildwiedergabegerät darge- stellt. Diese Darstellung der Ansichten nacheinander soll dabei selbstverständlich mit einer höheren Frequenz als der Auflösungsfähigkeit des Auges erfolgen. Auch die Zeit, die .für ein solches Gesamtbild aus mehreren Ansichten verwendet wird, sollte kürzer als diese Auflösungsfähigkeit sein.
Denkbar ist natürlich auch ein vierter Bildtyp, bei dem als Eingangsbildsignale BiId- informationen für zweidimensionale Bilder empfangen oder gelesen werden. Diese werden dann bevorzugt unverändert als Ausgangssignale ausgegeben. Falls es sich bei dem angeschlossenen Bildwiedergabegerät um ein solches mit einer Umschal- tυng für zweidimensionales und dreidimensionales Betrachten handelt, kann ein entsprechendes Steuersignal ebenfalls mit ausgegeben werden, um in Abhängigkeit vom Bildtyp das Bildwiedergabegerät entsprechend einzustellen.
Die Aufgabe wird auch gelöst durch eine Anordnung zur räumlich wahrnehmbaren Darstellung, welche mindestens einen Dateneingang zur Eingabe von Eingangssi¬ gnalen, einen elektronischen Konvertierschaltkreis zur Konvertierung der Eingangs- Signale in Ausgangssignale, eine Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen αy zur Wiedergabe der Ausgangssignale, und eine Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen für das von den Bildelementen α abge¬ strahlte Licht aufweist, so daß ein oder mehrere Betrachter von einer Vielzahl von Betrachtungspositionen aus ein räumliches Bild oder eine Folge räumlicher Bilder wahrnimmt.
Zentrales Element dieser Anordnung ist der elektronische Konvertierschaltkreis, der beispielsweise für die genannten vier Bildtypen jeweils die oben beschriebene Um¬ wandlung von Eingangs- in Ausgangssignale vornimmt. Auf der Bildwiedergabeein- richtung werden die Ausgangssignale dargestellt - beispielsweise als Kombinations¬ bild. Damit ein Betrachter auch ein räumliches Bild bzw. eine Sequenz von räumli¬ chen Bildern wahrnehmen kann, muß in der Regel vor der Bildwiedergabeeinrich¬ tung noch eine Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen ange¬ ordnet sein.
In einer bevorzugten Ausgestaltung der Anordnung enthalten die Eingangssignale einen Eingangsdatensatz aus mindestens zwei Ansichten A£ mit c=l ..M, M>2 der Szene oder des Gegenstandes. Der Konvertierschaltkreis ist dann so ausgelegt, daß er den Eingangsdatensatz in einen Ausgangsdatensatz bestehend aus mindestens zwei Ansichten Ok mit k=1 ..N und N > 2 konvertiert, wobei sich Eingangs- und Aus¬ gangsdatensatz in mindestens einem der Parameter Bildgröße, Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Gesamtzahl der Ansichten N, M unterscheiden. Die Ausgangssignale entsprechen dem Ausgangsdatensatz bzw. enthalten diesen. Dabei wird eine Zuordnung von Informationen, die in den Aus¬ gangssignalen - d.h. den mindestens zwei Ansichten Ok mit k=l ,,..,N und N > 2 - enthalten sind, zu den .Bildelementen α„ vorgegeben. Außerdem werden die Licht- ausbreitungsrichtungen mittels der Strukturplatte so vorgegeben, daß der oder die Betrachter jeweils mit einem Auge überwiegend oder ausschließlich Teilinformatio¬ nen einer ersten Gruppe aus den Ansichten Ok mit k=l ..N, N>2 und mit dem ande¬ ren Auge überwiegend oder ausschließlich Teilinformationen einer zweiten Gruppe aus den Ansichten Ok mit k=1 ..N, N>2 sehen.
Als Ansichten Ac dienen z.B. verschiedene Perspektivansichten einer Szene oder eines Gegenstandes, die von leicht versetzten Positionen aus aufgenommen worden sind, beispielsweise unter Zuhilfenahme einer Stereokamera oder ähnlichem Gerät.
Die Strukturplatte zur Vorgabe von . Lichtausbreitungsrichtungen kann gegebenenfalls auxh durch ein zeitlich veränderliches optisches Element, etwa einen Shutter, ersetzt werden, um auf zeitlich- oder zeitlich/räumlich-veränderlicher Basis der optischen Eigenschaften der Strukturplatte einen räumlichen Eindruck zu erzielen. Ferner kann die besagte Strukturplatte auch durch im Stand der Technik bekannte Mittel zur räumlichen Darstellung auf der Basis von Brillensystemen ersetzt werden.
Wegen der Vorteile brillenloser, d.h. autostereoskopischer Systeme wird im folgenden insbesondere auf die Ausprägungen derartiger Anordnungen eingegangen. Die Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen kann dazu mindestens ein Filterarray, einen Barriereschirm oder ein Linsenraster umfassen, wie es im Stand der Technik z.B. aus der WO 01 /56265 bekannt ist.
Ferner kann die Strukturplatte vorteilhaft so ausgebildet werden, daß die erste und die zweite Gruppe von - wahrgenommenen - Ansichten jeweils eine oder mehrere der Ansichten O. k mit k=l .. N, N > 2 umfassen.
Der Konvertierschaltkreis ist beispielsweise derart ausgebildet, daß N=M gilt und daß sich die beiden Datensätze aus Ansichten Ac und Ok mindestens in der Parallaxe zwischen den jeweiligen Ansichten unterscheiden. Es ist aber auch möglich, daß M<N - oder auch M>N für spezielle Anwendungen - gilt. Sehr vorteilhaft ist die Ausprägung der erfindungsgemäßen Anordnung, wenn M=2 und M<N gilt. Dann nämlich können weit verbreitete Stereobilddaten - beste¬ hend aus Links-Rechts-Bildpaaren, d.h. genau M=2 Ansichten - als Eingangsdaten für die räumlich wahrnehmbare Darstellung auf Basis von mehr als zwei Ansichten verwendet werden. Vorteilhaft wird im Falle M=2 das Datenformat des Datensatzes bestehend aus mindestens zwei Ansichten Ac aus der Gruppe bestehend aus räum¬ lich multiplexten Datenformaten (Over-Under-Stereo, Left-Right-Stereo oder Interla- ced-Stereo), zeitlich multiplexten Datenformaten oder mehreren Ansichten in ver- schiedenen Datenströmen gewählt; diese Formate sind für Stereobilddaten weit ver¬ breitet. Die vorgenannten Datenformate sind z.T. auch bei M>2 einsetzbar. In allen Fällen können als Standards beispielsweise die MPEG-I 1 MPEG-2 oder MPEG-4- Standards eingesetzt werden.
Weiterhin kann der Konvertierschaltkreis verschiedene im Stand der Technik be¬ kannte Techniken zur Umwandlung in der gewünschten Art und Weise umfassen, etwa Mittel zur Disparitätsabschätzung zwischen Stereobildpaaren, um auf Basis der Disparität aus den ursprünglichen Ansichten Ac die Ansichten Ok zu generieren. Hierzu kommt u.a. auch die Lehre der EP 918 302 in Frage.
Als Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen Ot1 kommt z.B. ein LC-Display, ein Plasmabildschirm, ein OLED, ein Projektionsbildschirm (DMD/DLP, LCOS oder LCD-basiert), ein laserbasiertes Display oder ein Elektrolumi- neszenzdisplay in Frage, wobei bevorzugt die Bildelemente α den Farbsubpixeln R, G, B entsprechen, sofern diese vorhanden sind. Andere Ausgestaltungen, insbeson¬ dere autostereoskopischer Natur, sind denkbar.
Vorzugsweise wird der elektronische Konvertierschaltkreis als FPGA oder als ASIC ausgebildet. Insbesondere eine ASIC-U msetzung erlaubt eine kostengünstige Mas- senfertigung.
Vorteilhaft sind bei der erfindungsgemäßen Anordnung weiterhin Mittel zur Interak¬ tion mit dem elektronischen Konvertierschaltkreis vorhanden, auf Basis derer min¬ destens einer der Parameter Bildgröße, Parallaxe zwischen den Ansichten, Auflö- sung, Datenformat und/oder Gesamtzahl N, M der Ansichten in den Datensätzen Ok, Ac interaktiv wählbar ist. Außerdem kann eine Option gewählt werden, bei welcher permanent zweidimensionale Ausgangsbildsignale ausgegeben werden, unabhängig davon, ob räumlich wiedergebbare Bildtypen als Eingangsbildsignale vorliegen. Dies würde im einfachsten Fall so realisiert, daß alle auszugebenden Ansichten Ok iden¬ tisch sind. Der Konvertierschaltkreis kann auch so ausgebildet sein, daß er das Ein¬ gangsdatenformat automatisch erkennt. Die Mittel zur Interaktion können bei- spielsweise in ein OSD-Menü, welches auf dem Bildschirm dargestellt wird, integriert oder aber als Stellrädchen ausgebildet sein.
Bevorzugt ist die Anordnung so ausgelegt, daß nacheinander eine Vielzahl von Da¬ tensätzen bestehend aus mindestens zwei Ansichten Ac in Datensätze bestehend aus mindestens zwei Ansichten Ok konvertiert wird. Besonders vorteilhaft ist es, wenn pro Sekunde wenigstens 20 Datensätze bestehend aus mindestens zwei An¬ sichten Ac in Datensätze bestehend aus mindestens zwei Ansichten Ok konvertiert werden, so daß auf der Bildwiedergabeeinrichtung mit der Vielzahl von Bildelemen¬ ten α eine Bildsequenz wiedergegeben wird.
Zu einer massenmarkttauglichen Umsetzung der Erfindung ist es ferner vorteilhaft, wenn der Dateneingang, der zur Eingabe eines Datensatzes bestehend aus minde¬ stens zwei Ansichten Ac mit c=l ..M, M>2 einer Szene/eines Gegenstandes dient, kompatibel mit einem digitalen und/oder analogen Satelliten-, Kabel-, und/oder Antennensignal ist. Dann nämlich können über übliche Übertragungskanäle Stereo¬ bilddaten versandt werden, die auf erfindungsgemäßen Anordnungen dreidimensio¬ nal wahrnehmbar darstellbar sind.
Eine besonders vorteilhafte Ausgestaltung der Erfindung ergibt sich, wenn der elek- tronische Konvertierschaltkreis Mittel zur Kombination der jeweiligen mindestens zwei Ansichten Ok in jeweils ein einziges Kombinationsbild enthält. Damit werden die erzeugten Ansichten Ok in ein für bekannte Anordnungen zur dreidimensional wahrnehmbaren Darstellung unmittelbar anzeigefähiges Bildformat konvertiert. Bei¬ spiele für mögliche Bildkombinationen zur Verwendung mit Filterarrays für die räumliche Darstellung sind unter anderem in den Schriften DE 100 03 326, der DE 201 21 31 8 Ul , PCT/EP2004/004464, PCT/EP2004/001 833, PCT/EP03/07620 und der DE 1 01 45 1 33 angegeben.
Für spezielle Anwendungsfälle, etwa für die Darstellung gleichzeitig zweier ver- schiedener Bildinhalte, kann es sinnvoll sein, daß in der Anordnung weiterhin Mittel zur voll- oder teilflächigen Umschaltung zwischen einer hilfsmittelfrei dreidimensio- nal wahrnehmbaren und einer vollauflösenden zweidimensionalen Darstellung einer Szene/eines Gegenstandes vorhanden sind.
Während in der oben beschriebenen Anordnung der Konvertierschaltkreis als EIe- ment oder Baugruppe in einer Anordnung zur räumlichen Darstellung ausgelegt ist, ist es selbstverständlich auch möglich, diesen in ein externes Gerät zu integrieren, welches einem Bildwiedergabegerät vorgeschaltet werden kann. Ein solches Gerät kann dann flexibel - beispielsweise per Menüsteuerung - an verschiedene Bild¬ schirmtypen bzw. Anordnungen zur räumlichen Darstellung angepaßt werden und weist ansonsten die gleiche Funktionalität wie der Konvertierschaltkreis auf. Ein solches Konvertiergerät umfaßt mindestens einen Dateneingang zur Eingabe von Eingangssignalen, einen elektronischen Konvertierschaltkreis zur Konvertierung der Eingangssignale in Ausgangssignale, die auf einem entsprechenden Bildwiederga¬ begerät für einen Betrachter als räumliches Bild oder als eine Folge räumlicher Bilder dargestellt werden können, sowie einen Datenausgang zur Ausgabe der Ausgangs¬ signale an eine Anordnung zur räumlich wahrnehmbaren Darstellung einer Szene oder eines Gegenstandes.
Soll ein solches Konvertiergerät in Verbindung mit einer Anordnung zur räumlich wahrnehmbaren Darstellung einer Szene/eines Gegenstandes genutzt werden, auf welcher Bildinformationen mindestens zweier Ansichten Ok mit k=l ..N, N>2 darzu¬ stellen sind, so müssen die Eingangssignale mindestens einen Eingangsdatensatz aus mindestens zwei Ansichten Ac mit c=l ..M, M>2 der Szene oder des Gegenstan¬ des enthalten. Bei einem solchen Konvertiergerät ist der Konvertierschaltkreis zweckmäßig so ausgelegt, daß er den Eingangsdatensatz in einen Ausgangsdaten¬ satz bestehend aus mindestens zwei Ansichten Ok mit k=l ..N, N>2 konvertiert, wo¬ bei sich Eingangs- und Ausgangsdatensatz in mindestens einem der Parameter Bild¬ größe, Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Ge¬ samtzahl der Ansichten N1 M unterscheiden, wobei die Ausgangssignale dem Aus- gangsdatensatz entsprechen.
Das elektronische Konvertiergerät wird beispielsweise derart ausgebildet, daß N=M gilt und daß sich die beiden Datensätze aus Ansichten Ac und Ok mindestens in der Parallaxe zwischen den jeweiligen Ansichten unterscheiden.
Es ist aber auch möglich, daß M<N - oder auch M>N für spezielle Anwendungen - gilt. Sehr vorteilhaft ist die Ausprägung der erfindungsgemäßen Anordnung, wenn M=2 und M<N gilt. Dann nämlich können weit verbreitete Stereobilddaten - beste¬ hend aus Links-Rechts-Bildpaaren, d.h. genau M=2 Ansichten - als Eingangsdaten für die dreidimensional wahrnehmbare Darstellung auf Basis von mehr als zwei An¬ sichten verwendet werden. Vorteilhaft wird im Falle M=2 das Datenformat des Da- tensatzes bestehend aus mindestens zwei Ansichten Ac aus der Gruppe bestehend aus räumlich multiplexten Datenformaten (Over-Under-Stereo, Left-Right-Stereo oder Interlaced-Stereo), zeitlich multiplexten Datenformaten oder mehreren Ansichten in verschiedenen Datenströmen gewählt; diese Formate sind für Stereobilddaten weit verbreitet. Die vorgenannten Datenformate sind z.T. auch bei M>2 einsetzbar. In allen Fällen können als Standards beispielsweise die MPEG-I , MPEG-2 oder MPEG-4- Standards eingesetzt werden.
Der elektronische Konvertierschaltkreis des Konvertiergerätes kann weiterhin als FPGA oder als ASIC ausgebildet sein. Ferner sind vorteilhaft in dem Konvertiergerät auch noch Mittel zur Interaktion mit dem elektronischen Konvertierschaltkreis vor¬ handen, so daß mindestens einer der Parameter Bildgröße, Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Gesamtzahl N für den Datensatz be¬ stehend aus mindestens zwei Ansichten Ok interaktiv, d.h. durch den oder die Be¬ nutzer wählbar ist.
Das in Rede stehende Konvertiergerät ist so ausgelegt, daß nacheinander eine Viel¬ zahl von Datensätzen bestehend aus mindestens zwei Ansichten Ac in Datensätze bestehend aus mindestens zwei Ansichten Ok konvertiert wird. Bevorzugt werden dabei pro Sekunde wenigstens 20 Datensätze bestehend aus mindestens zwei An- sichten Ac in Datensätze bestehend aus mindestens zwei Ansichten Ok konvertiert. Somit wird die Echtzeitkonvertierung von Bewegtbildmaterial bzw. Bildsequenzen ermöglicht.
Schließlich ist es von großem Vorteil, wenn der Dateneingang des Konvertiergerätes, der zur Eingabe eines Datensatzes bestehend aus mindestens zwei Ansichten Ac mit c=l ..M, M>2 einer Szene/eines Gegenstandes dient, kompatibel mit einem digitalen und/oder analogen Satelliten-, Kabel-, und/oder Antennensignal ist.
Das Konvertiergerät bildet dabei eine Art „Set-Top-Box", welche ein durch bestehen- de digitale und/oder analoge Signalübertragungseinrichtungen gesendetes Stereo¬ bild in das benötigte Bildformat umwandelt. Eine besonders vorteilhafte Ausgestaltung ergibt sich zudem, wenn der elektroni¬ sche Konvertierschaltkreis Mittel zur Kombination der jeweiligen mindestens zwei Ansichten Ok in jeweils ein einziges Kombinationsbild enthält. Damit werden die erzeugten Ansichten Ok in ein für bekannte Anordnungen zur dreidimensional wahrnehmbaren Darstellung unmittelbar anzeigefähiges Bildformat konvertiert. Bei¬ spiele für mögliche Bildkombinationen zur Verwendung mit Filterarrays für die räumliche Darstellung sind unter anderem in den Schriften DE 1 00 03 326, der DE 201 21 31 8 Ul , PCT/EP2004/004464, PCT/EP2004/001 833, PCT/EP03/07620 und der DE 101 45 1 33 angegeben.
Kurze Beschreibung der Zeichnungen
Die Erfindung soll im folgenden an einem Beispiel näher erläutert werden. Die zuge¬ hörigen Zeichnungen zeigen in
Fig.l ein Ablaufschema des Verfahrens, und in
Fig.2 eine zur Durchführung des Verfahrens geeignete Anordnung.
Ausführliche Beschreibung der Zeichnungen
In Fig. 1 ist der typische Ablauf für das erfindungsgemäße Verfahren dargestellt. Zunächst werden Daten auf irgendeine Weise empfangen, d.h. sie können auch ge¬ lesen werden. Empfangen werden Eingangsbildsignale und Bildtypinformationen. Bei den Eingangsbildsignalen kann es sich auch um TV-Signale handeln, diese müssen dann entsprechend der Fernsehnormen demoduliert werden, bevor der Bildtyp be¬ stimmt werden kann, da TV-Signale moduliert gesendet werden. Die Bildtypinforma¬ tionen können allerdings auch unabhängig davon gesendet werden. Entsprechend dem festgestellten Bildtyp kann nun schon eine Ansteuerung des Bildwiedergabege¬ räts im Hinblick darauf, ob zweidimensionale oder dreidimensionale Bilder darge- stellt werden sollen, vorgenommen werden. In Abhängigkeit vom Bildtyp werden die Eingangsbildsignale nun verarbeitet und es werden entsprechend mehrere Ansich¬ ten derselben Szene oder desselben Gegenstandes erzeugt. Optional kann im An¬ schluß an die Verarbeitung auch eine Speicherung der so erzeugten Daten erfolgen. In der Regel werden die Daten aber in Ausgangsbildsignale umgewandelt. Die Um- Wandlung - beispielsweise die Erstellung des Kombinationsbildes aus den N Ansich¬ ten - hängt davon ab, welches Endgerät angeschlossen ist. So können die Daten beispielsweise zur Darstellung auf verschiedene Schnittstellen wie LVDS- (Low- Voltage-Differential-Signal), VGA- (Video Graphics Array) oder DVI-Schnittstelle (Di¬ gital Visual Interface) ausgegeben werden. Im ersten Fall handelt es sich um einen speziellen Datenbus, mit dem u.a. Video-Signale vom Grafik-Controller direkt an ein LC-Display bzw. -panel übertragen werden, was von Vorteil ist, wenn beide in einer Baueinheit zusammengefaßt sind. Von dieser Schnittstelle werden die Signale dann in der Regel an ein 3D-fähiges Display ausgegeben.
In Fig.2 ist die mögliche Realisierung des Verfahrens mittels einer Set-Top-Box 1 , die an ein für die dreidimensionale Darstellung geeignetes Liquid-Crystal-Display 2 an- geschlossen ist. Die Set-Top-Box 1 verfügt über mehrere Eingänge 3 bis 5 zum Emp¬ fang des Datenstromes. Am Eingang 3 ist im Beispiel ein digitales Empfangsmodul 6 angeschlossen, am Eingang 4 ein analoges Empfangsmodul 7. Schnittstellen können dabei beispielsweise SCART, IEEE 1 394, oder S-Video sein, um nur einige zu nennen. Auch direkte Antennenkabel oder LAN-Anschlüsse sind geeignet. Über spezielle Ausgestaltungen des IEEE-1 394-Anschlusses (fire wire) können auch Stereokameras angeschlossen werden oder Tiefeninformationen übertragen werden. Der Eingang 5 ist mit einem Datenempfangsmodul 8 gekoppelt. Neben der schon genannten IEEE- 1 394-Schnittstelle kann es sich dabei auch um einen USB-Anschluß oder andere Möglichkeiten zum Auslesen von Datenspeichern handeln, wie beispielsweise von einem CD- oder DVD-Laufwerk, Memorystick, einer Festplatte oder einem TCP/IP- Anschluß. Ein weiterer Eingang 9 ist für eine Fernbedienung bzw. Fernsteuerung vorgesehen. Neben der üblichen Senderwahl läßt sich hier beispielsweise auch die gewünschte Tiefe einstellen, sowie das OSD (On Screen Display) - die Einblendung eines Menüs zur Bildschirmkonfiguration - steuern. Alle vier Module sind sowohl mit einem Fernsehtuner 1 1 als auch einem Prozessormodul 12, dem eigentlichen Herzstück der Set-Top-Box 1 , verbunden. Im Fernsehtuner 1 1 werden die Daten, falls es sich um Fernsehsignale handelt, entsprechend moduliert, bevor sie dem Prozessormodul 1 2 zugeführt werden. Bei dem Prozessormodul kann es sich bei¬ spielsweise um ein DSP (Digital Signal Processor), FPGA (Field-Progammable Gate Array), MCU (Micro Controller Unit) oder eine GPU (Graphic Processor Unit) handeln.
Im Prozessormodul 12 wird zunächst der Bildtyp festgestellt, anschließend ein ent¬ sprechender Verarbeitungsalgorithmus ausgewählt. Dann werden die Eingangsbild¬ signale verarbeitet und Ausgangssignale erzeugt. Das Prozessormodul 12 ist bevor- zugt über eine Steuerleitung 1 3 bidirektional mit dem Liquid-Crystal-Display 2 ge¬ koppelt. Einerseits werden vom Prozessormodul 1 2 über die Steuerleitung 1 3 Steu¬ ersignale in bezug auf eine Umschaltung zwischen zweidimensionaler und dreidi- mensionaler Arbeitsweise an das Display 2 geschickt, andererseits kann das Display 2 auch Informationen über seinen Typ, etwa ob es sich um ein Display mit Filterar- ray handelt, ob es sich um ein Display handelt, welches zwischen zweidimensionaler und dreidimensionaler Darstellung umschaltbar ist oder nicht, ob ein Trackingsy- stem angeschlossen ist oder nicht, ob ein Betrachter eine spezielle Brille zum räum¬ lichen Sehen benötigt oder nicht, etc. an das Prozessormodul 12 übermitteln. Selbstverständlich ist es auch möglich, die Set-Top-Box und das Display 2 als eine Einheit zu gestalten, wobei diese Informationen dann über Hardwareverbindungen zur Verfügung gestellt werden können.
Je nach angeschlossenem Bildschirm werden die Ausgangssignale entweder an ei¬ nem Signalwandler 14 gesendet, wo die Daten in VGA- oder DVI-Signale gewandelt werden und dann an das Display 2 weitergeleitet werden, gesendet, oder an einen Signalwandler 1 5, in dem die Ausgangssignale in LVDS-Signale umgewandelt wer- den, die direkt an ein LC-Display weitergeleitet werden können. Die eigentlichen Ausgangsbildsignale liegen also erst nach Passieren der Signalwandler 14 bzw. 1 5 vor. Diese werden dann auf das LC-Display 2 weitergeleitet und werden dort für ei¬ nen Betrachter als räumliches Bild oder als eine Folge von räumlichen Bildern darge¬ stellt.
Das in Fig.2 gezeigte Konvertiergerät ist als Set-Top-Box 1 ausgestaltet, eine gleich¬ artige Schaltstruktur, in der die Elemente Set-Top-Box 1 und LC-Display 2 in einer Einheit zusammengefaßt sind, ist jedoch ebenfalls denkbar. Solch eine Anordnung zur dreidimensional wahrnehmbaren Darstellung umfaßt einen Dateneingang, der zur Eingabe eines Datensatzes bestehend aus zwei Ansichten Ac mit c=l ..M, M=2 einer Szene/eines Gegenstandes dient, einen elektronischen Konvertierschaltkreis, welcher jeweils einen über besagten Dateneingang eingegebenen Datensatz beste¬ hend aus zwei Ansichten Ac c=l ..M, M=2 in einen Datensatz bestehend aus acht Ansichten Ok mit k=l ..N, N=8 konvertiert, wobei sich die beiden Datensätze aus Ansichten A und O, in der Parallaxe zwischen den Ansichten sowie in der Gesamt- zahl N=8, M=2 unterscheiden, eine Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen Cc1 , die in vorgegebener Zuordnung Informationen aus den acht An¬ sichten Ok mit k=l ..N, N=8 wiedergeben, und eine Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen für das von den Bildelementen α ausgestrahlte Licht, so daß ein oder mehrere Betrachter von einer Vielzahl von Betrachtungspositionen aus jeweils mit einem Auge überwiegend oder ausschließlich Teilinformationen ei¬ ner ersten Gruppe aus den Ansichten Ok mit k=l ..N, N=8 und mit dem anderen Au- ge überwiegend oder ausschließlich Teilinformationen einer zweiten Gruppe aus den Ansichten O, k mit k=l ..N, N=8 sehen.
Die Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen umfaßt ein Filterar- ray, wie es im Stand der Technik z.B. aus der WO 01 /56265 bekannt ist.
Bei der gewählten Ausgestaltung M=2, N=8 können weit verbreitete Stereobilddaten - bestehend aus Links-Rechts-Bildpaaren, d.h. genau M=2 Ansichten - als Ein¬ gangsdaten für die dreidimensional wahrnehmbare Darstellung auf Basis von mehr als zwei Ansichten verwendet werden. Vorteilhaft wird im Falle M=2 das Datenfor¬ mat des Datensatzes bestehend aus mindestens zwei Ansichten Ac aus der Gruppe bestehend aus räumlich multiplexten Datenformaten (Over-Under-Stereo, Left-Right- Stereo oder Interlaced-Stereo), zeitlich multiplexten Datenformaten oder mehreren Ansichten in verschiedenen Datenströmen gewählt; diese Formate sind für Stereo- bilddaten weit verbreitet. Die vorgenannten Datenformate sind z.T. auch bei M>2 einsetzbar. In allen Fällen können als Standards beispielsweise die MPEG-I , MPEG-2 oder MPEG-4-Standards eingesetzt werden. Außerdem bereitet die Übertragung von Stereobildern keinerlei Probleme bezüglich der Datenrate.
Als Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen α; kommt z.B. ein 40" LC-Display vom Typ NEC LCD4010 in Frage.
Ferner sind bei der beispielhaften Anordnung weiterhin Mittel zur Interaktion mit dem elektronischen Konvertierschaltkreis vorhanden, auf Basis derer mindestens einer der Parameter Bildgröße, Parallaxe zwischen den Ansichten oder Auflösung der Ansichten in den Datensätzen Ok interaktiv wählbar ist. Der Konvertierschalt¬ kreis kann auch so gestaltet sein, daß er das Eingangsdatenformat automatisch er¬ kennt. Ferner ist er als ASIC ausgebildet. Überdies kann über die Mittel zur Interak¬ tion auch ein Betriebsmodus gewählt werden, in welchem die beispielhafte Anord- nung permanent zweidimensionale Ausgangsbildsignale erzeugt, obwohl für die räumliche Darstellung geeignete Eingangsbildsignale anliegen.
Bevorzugt wird nacheinander eine Vielzahl von Datensätzen bestehend aus minde¬ stens zwei Ansichten Ac in Datensätze bestehend aus mindestens zwei Ansichten Ok konvertiert. Besonders vorteilhaft ist es, wenn pro Sekunde wenigstens 20 oder mehr Datensätze bestehend aus mindestens zwei Ansichten Ac in Datensätze beste¬ hend aus mindestens zwei Ansichten Ok konvertiert werden, so daß auf der Bildwie- dergabeeinrichtung mit der Vielzahl von Bildelementen c^ eine Bildsequenz wieder¬ gegeben wird.
Der Dateneingang, der zur Eingabe eines Datensatzes bestehend aus mindestens zwei Ansichten Ac mit c=l ...M, M≥2 einer Szene/eines Gegenstandes dient, ist kom¬ patibel mit einem digitalen und/oder analogen Satelliten-, Kabel-, und/oder Anten¬ nensignal.
Ferner enthält der elektronische Konvertierschaltkreis Mittel zur Kombination der jeweiligen acht Ansichten Ok in jeweils ein einziges Kombinationsbild. Damit werden die erzeugten Ansichten Ok in ein zur dreidimensional wahrnehmbaren Darstellung unmittelbar anzeigefähiges Bildformat konvertiert. Beispiele für mögliche Bildkom¬ binationen zur Verwendung mit Filterarrays für die räumliche Darstellung sind unter anderem in den Schriften DE 100 03 326, der DE 201 21 31 8 Ul , PCT/EP2004/004464, PCT/EP2004/001 833, PCT/EP03/07620 und der DE 1 01 45 133 angegeben. Das Kombinationsbild wird unmittelbar auf der Bildwiedergabeein¬ richtung mit einer Vielzahl von Bildelementen α wiedergegeben, wobei die Informa¬ tionen aus den acht Ansichten Ok mit k=l ..N, N=8 den einzelnen Bildelementen α entsprechend der gewählten Vorschrift zur Bildkombination zugeordnet sind.
Die Vorteile der Erfindung sind vielseitig. So können auf autostereoskopischen An¬ ordnungen, die insbesondere mit mehr als 2 Ansichten eine räumlich wahrnehmba¬ re Darstellung erzielen, auch Stereobildinhalte mit ursprünglich lediglich zwei An¬ sichten gezeigt werden. Damit wird eine verbesserte Kompatibilität zu 3D- Bildinhalten erzielt. Ferner läßt sich die erfindungsgemäße Anordnung kompakt und robust ausbilden.
Es wird angemerkt, daß die Begriffe „räumlich", „dreidimensional" und „3D" im Zu¬ sammenhang mit der hier beschriebenen Erfindung als Synonyme aufzufassen sind.

Claims

Patentansprüche
1 . Verfahren, mit dem räumlich darstellbare Bilder erzeugt werden, bei dem Eingangsbildsignale und Bildtypinformationen registriert werden, für die Eingangsbildsignale in Abhängigkeit von den Bildtypinformationen ein Bildtyp bestimmt wird, in Abhängigkeit vom Bildtyp ein entsprechender Verarbeitungsalgorithmus ausgewählt wird, die Eingangsbildsignale durch den Verarbeitungsalgorithmus verarbeitet wer¬ den und Ausgangsbildsignale erzeugt werden, welche auf einem entsprechen¬ den Bildwiedergabegerät für einen Betrachter als räumliches Bild oder als eine Folge von räumlichen Bildern dargestellt werden können.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, daß die Eingangsbildsi¬ gnale von einem Datenträger gelesen oder drahtlos oder über Kabel empfan¬ gen werden.
3. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, daß die Bildtypinformationen vom Datenträger gelesen, drahtlos oder über Ka¬ bel empfangen, oder durch den Betrachter vorgegeben werden.
4. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, daß Bildtypinformationen gelesen, empfangen oder vorgegeben werden und diese für alle im folgenden gelesenen oder empfangenen Eingangsbildsignale solange gültig bleiben, bis neue Bildtypinformationen gelesen, empfangen oder vorgegeben werden.
5. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, daß bei einem ersten Bildtyp als Eingangsbildsignale Bildinformationen für ein oder mehrere zweidimensionale Bilder einer Szene oder eines Gegenstandes mit zugeordneten Tiefeninformationen empfangen oder gelesen werden, und daraus mit dem zugeordneten Verarbeitungsalgorithmus Ansichten der Szene oder des Gegenstandes aus verschiedenen Blickwinkeln oder mit verschiede¬ nen räumlichen Tiefen erstellt werden.
6. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß bei einem zweiten Bildtyp als Eingangsbildsignale Bildinformationen für Schichtbilder einer Szene oder eines Gegenstandes bei verschiedener Tiefe empfangen oder gelesen werden, und daraus mit dem zugeordneten Verarbei- tungsalgorithmus Ansichten der Szene oder des Gegenstandes aus verschie¬ denen Blickwinkeln oder mit verschiedenen räumlichen Tiefen erstellt werden,
7. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß bei einem dritten Bildtyp als Eingangsbildsignale Bildinformationen für N An- sichten einer Szene oder eines Objekts aus verschiedenen Blickwinkeln gele¬ sen oder empfangen werden, wobei N eine natürliche Zahl größer oder gleich zwei ist.
8. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß bei einem vierten Bildtyp als Eingangsbildsignale Bildinformationen für zwei¬ dimensionale Bilder empfangen oder gelesen werden und diese unverändert als Ausgangssignale ausgegeben werden.
9. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, daß die Ausgangsbildsignale in Abhängigkeit von einem angeschlossenen
Bildwiedergabegerät erzeugt werden.
10. Verfahren nach einem der Ansprüche 5 bis 9, dadurch gekennzeichnet, daß aus den Ansichten, die jeweils dieselbe Szene oder denselben Gegenstand darstellen, ein Kombinationsbild erzeugt wird, welches Informationen aller An¬ sichten in vorgegebener Weise enthält, und dieses als Ausgangsbildsignal ausgegeben wird.
1 1 . Verfahren nach einem der Ansprüche 5 bis 9, dadurch gekennzeichnet, daß die Ansichten, die jeweils dieselbe Szene oder denselben Gegenstand darstel¬ len, als Ausgangsbildsignal ausgegeben und in zeitlich kurzer Abfolge nach¬ einander auf dem Bildwiedergabegerät dargestellt werden.
12. Verfahren nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, daß digitale Ein- und Ausgangsbildsignale verwendet werden.
1 3. Anordnung zur dreidimensional wahrnehmbaren Darstellung einer Szene oder eines Gegenstandes, umfassend mindestens einen Dateneingang zur Eingabe von Eingangssignalen, einen elektronischen Konvertierschaltkreis zur Konvertierung der Eingangssi- gnale in Ausgangssignale, eine Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen (o^) zur Wiedergabe der Ausgangssignale, und eine Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen für das von den Bildelementen (Oc1) abgestrahlte Licht, so daß ein oder mehrere Betrachter von einer Vielzahl von Betrachtungspositionen aus ein räumliches Bild oder ei¬ ne Folge räumlicher Bilder wahrnehmen.
14. Anordnung nach Anspruch 1 3, bei der die Eingangssignale einen Eingangsdatensatz aus mindestens zwei Ansichten (Ac) mit (c=l ..M, M≥2) der Szene oder des Gegenstandes enthalten, dadurch gekennzeichnet, daß der Konvertierschaltkreis so ausgelegt ist, daß er den Eingangsdatensatz in einen Ausgangsdatensatz bestehend aus mindestens zwei Ansichten (Ok) mit (k=l ..N, N>2) konvertiert, wobei sich Eingangs- und Ausgangsdatensatz in mindestens einem der Parameter Bildgröße, Parallaxe zwischen den Ansichten,
Auflösung, Datenformat und/oder Gesamtzahl der Ansichten (N, M) unterscheiden, und die Ausgangssignale dem Ausgangsdatensatz entsprechen, wobei eine Zuordnung von Informationen der Ausgangssignale zu den Bildelementen (αy) vorgegeben ist, und wobei die Lichtausbreitungsrichtungen durch die Strukturplatte so vorgegeben werden, daß der oder die Betrachter jeweils mit einem Auge überwiegend oder ausschließlich Teilinformationen einer ersten Gruppe aus den Ansichten (Ok) mit (k=l ..N, N>2) und mit dem anderen Auge überwiegend oder ausschließlich Teilinformationen einer zweiten Gruppe aus den Ansichten (Ok) mit (k=l ..N,
N>2) sehen.
1 5. Anordnung nach Anspruch 14, dadurch gekennzeichnet, daß die erste und die zweite Gruppe von Ansichten jeweils eine oder mehrere der Ansichten (Ok) mit (k=l .. N, N>2) umfassen.
1 6. Anordnung nach einem der Ansprüche 1 3 bis 1 5, dadurch gekennzeichnet, daß die Strukturplatte zur Vorgabe von Lichtausbreitungsrichtungen minde¬ stens ein Filterarray, einen Barriereschirm oder ein Linsenraster umfaßt oder als zeitlich veränderliches optisches Element, bevorzugt als ansteuerbarer Shutter, ausgebildet ist.
1 7. Anordnung nach einem der Ansprüche 1 3 bis 1 6, dadurch gekennzeichnet, daß N=M gilt und daß sich die beiden Datensätze aus Ansichten (Ac) und (Ok) mindestens in der Parallaxe zwischen den jeweiligen Ansichten unterscheiden.
1 8. Anordnung nach einem der Ansprüche 1 3 bis 1 6, dadurch gekennzeichnet, daß M<N gilt.
19. Anordnung nach Anspruch 1 8, dadurch gekennzeichnet, daß M=2 gilt.
20. Anordnung nach einem der Ansprüche 1 3 bis 1 9, dadurch gekennzeichnet, daß die Bildwiedergabeeinrichtung mit einer Vielzahl von Bildelementen (c^) ein LC-Display, ein Plasmabildschirm, ein OLED1 ein Projektionsbildschirm, ein laserbasiertes Display oder ein Elektrolumineszenzdisplay ist, wobei bevor- zugt die Bildelemente (o^) den Farbsubpixeln R, G, B entsprechen, sofern diese vorhanden sind.
21 . Anordnung nach einem der Ansprüche 1 3 bis 20, dadurch gekennzeichnet, daß M=2 gilt und das Datenformat des Datensatzes, bestehend aus minde- stens zwei Ansichten (Ac), aus der Gruppe bestehend aus räumlich multiplex- ten Datenformaten, zeitlich multiplexten Datenformaten oder mehreren An¬ sichten in verschiedenen Datenströmen gewählt ist.
22. Anordnung nach einem der Ansprüche 1 3 bis 21 , dadurch gekennzeichnet, daß der elektronische Konvertierschaltkreis als FPGA oder als ASIC ausgebildet ist.
23. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeich¬ net, daß weiterhin Mittel zur Interaktion mit dem elektronischen Konvertier- Schaltkreis vorhanden sind, so daß mindestens einer der Parameter Bildgröße,
Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Gesamt¬ zahl (N, M) der Ansichten in den Datensätzen (Ok, Ac) interaktiv wählbar ist.
24. Anordnung nach einem der Ansprüche 1 3 bis 23, dadurch gekennzeichnet, daß nacheinander eine Vielzahl von Datensätzen bestehend aus mindestens zwei Ansichten (Ac) in Datensätze bestehend aus mindestens zwei Ansichten (Ok) konvertierbar ist, wobei bevorzugt pro Sekunde wenigstens 20 oder mehr
Datensätze bestehend aus mindestens zwei Ansichten (Ac) in Datensätze be¬ stehend aus mindestens zwei Ansichten (Ok) konvertiert werden, so daß auf der Bildwiedergabeeinrichtung mit der Vielzahl von Bildelementen (α ) eine Bildsequenz wiedergegeben wird.
25. Anordnung nach einem der Ansprüche 1 3 bis 24, dadurch gekennzeichnet, daß der elektronische Konvertierschaltkreis Mittel zur Kombination der jewei¬ ligen mindestens zwei Ansichten (Ok) in jeweils ein Kombinationsbild enthält.
26. Anordnung nach einem der Ansprüche 1 3 bis 25, dadurch gekennzeichnet, daß der Dateneingang, der zur Eingabe eines Datensatzes bestehend aus mindestens zwei Ansichten (Ac) mit (c=l ..M, M>2) einer Szene/eines Gegen¬ standes dient, kompatibel mit einem digitalen und/oder analogen Satelliten-, Kabel-, und/oder Antennensignal ist.
27. Anordnung nach einem der Ansprüche 1 3 bis 26, dadurch gekennzeichnet, daß weiterhin Mittel zur voll- oder teilflächigen Umschaltung zwischen einer hilfsmittelfrei dreidimensional wahrnehmbaren und einer vollauflösenden zweidimensionalen Darstellung einer Szene/eines Gegenstandes vorhanden sind.
28. Konvertiergerät zur Verwendung mit einer Anordnung zur räumlich wahr¬ nehmbaren Darstellung einer Szene/eines Gegenstandes, umfassend mindestens einen Dateneingang zur Eingabe von Eingangssignalen, - einen elektronischen Konvertierschaltkreis zur Konvertierung der Eingangssi¬ gnale in Ausgangssignale, die auf einem entsprechenden Bildwiedergabegerät für einen Betrachter als räumliches Bild oder als eine Folge räumlicher Bilder dargestellt werden können, sowie einen Datenausgang zur Ausgabe der Ausgangssignale an eine Anordnung zur räumlich wahrnehmbaren Darstellung einer Szene oder eines Gegenstandes.
29. Konvertiergerät nach Anspruch 28, zur Verwendung mit einer Anordnung zur räumlich wahrnehmbaren Darstellung einer Szene/eines Gegenstandes, auf welcher Bildinformationen mindestens zweier Ansichten (Ok) mit (k=l ..N, N>2) dargestellt werden, - wobei die Eingangssignale einen Eingangsdatensatz aus mindestens zwei An¬ sichten (Ac) mit (c=l ..M, M>2) der Szene oder des Gegenstandes enthalten, da¬ durch gekennzeichnet, daß der Konvertierschaltkreis so ausgelegt ist, daß er den Eingangsdatensatz in einen Ausgangsdatensatz bestehend aus mindestens zwei Ansichten (Ok) mit (k=l ..N, N>2) konvertiert, wobei sich Eingangs- und Ausgangsdatensatz in mindestens einem der Parameter Bildgröße, Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Gesamtzahl der Ansichten (N, M) unterscheiden, wobei die Ausgangssignale dem Ausgangsdatensatz entsprechen.
30. Konvertiergerät nach Anspruch 29, dadurch gekennzeichnet, daß N=M gilt und daß sich die beiden Datensätze aus Ansichten (Ac) und (Ok) mindestens in der jeweiligen Parallaxe zwischen den jeweiligen Ansichten unterscheiden.
31 . Konvertiergerät nach Anspruch 29, dadurch gekennzeichnet, daß M<N gilt
32. Konvertiergerät nach Anspruch 31 , dadurch gekennzeichnet, daß M=2 gilt.
33. Konvertiergerät nach einem der Ansprüche 28 bis 32, dadurch gekennzeich- net, daß M=2 gilt und das Datenformat des Datensatzes, bestehend aus min¬ destens zwei Ansichten (A ), aus der Gruppe bestehend aus räumlich multi- plexten Datenformaten, zeitlich multiplexten Datenformaten oder mehreren Ansichten in verschiedenen Datenströmen gewählt ist.
34. Konvertiergerät nach einem der Ansprüche 28 bis 33, dadurch gekennzeich¬ net, daß der elektronische Konvertierschaltkreis als FPGA oder als ASIC ausge¬ bildet ist.
35. Konvertiergerät nach einem der Ansprüche 28 bis 34, dadurch gekennzeich- net, daß weiterhin Mittel zur Interaktion mit dem elektronischen Konvertier¬ schaltkreis vorhanden sind, so daß mindestens einer der Parameter Bildgröße, Parallaxe zwischen den Ansichten, Auflösung, Datenformat und/oder Gesamt- zahl (N) für den Datensatz bestehend aus mindestens zwei Ansichten (Ok) in¬ teraktiv wählbar ist.
36. Konvertiergerät nach einem der Ansprüche 28 bis 35, dadurch gekennzeich¬ net, daß nacheinander eine Vielzahl von Datensätzen bestehend aus minde¬ stens zwei Ansichten (Ac) in Datensätze bestehend aus mindestens zwei An¬ sichten (O. W) konvertiert wird.
37. Konvertiergerät nach Anspruch 36, dadurch gekennzeichnet, daß pro Sekunde wenigstens 20 Datensätze bestehend aus mindestens zwei Ansichten (Ac) in
Datensätze bestehend aus mindestens zwei Ansichten (O. Vf) konvertiert werden.
38. Konvertiergerät nach einem der Ansprüche 28 bis 37, dadurch gekennzeich¬ net, daß der Dateneingang, der zur Eingabe eines Datensatzes bestehend aus mindestens zwei Ansichten (Ac) mit (c=l ..M, M>2) einer Szene/eines Gegen¬ standes dient, kompatibel mit einem digitalen und/oder analogen Satelliten-, Kabel-, und/oder Antennensignal ist.
39. Konvertiergerät nach einem der Ansprüche 28 bis 38, dadurch gekennzeich- net, daß der elektronische Konvertierschaltkreis Mittel zur Kombination der jeweiligen mindestens zwei Ansichten (Ok) in jeweils ein Kombinationsbild enthält.
PCT/EP2005/011075 2004-10-15 2005-10-14 Verfahren zur erzeugung räumlich darstellbarer bilder und anordnung zur räumlich wahrnehmbaren darstellung solcher bilder WO2006042706A1 (de)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
DE102004050809A DE102004050809A1 (de) 2004-10-15 2004-10-15 Anordnung zur dreidimensional wahrnehmbaren Darstellung
DE102004050809.7 2004-10-15
DE102005041249A DE102005041249A1 (de) 2005-08-29 2005-08-29 Verfahren zur Erzeugung räumlich darstellbarer Bilder
DE102005041249.1 2005-08-29

Publications (1)

Publication Number Publication Date
WO2006042706A1 true WO2006042706A1 (de) 2006-04-27

Family

ID=35510531

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2005/011075 WO2006042706A1 (de) 2004-10-15 2005-10-14 Verfahren zur erzeugung räumlich darstellbarer bilder und anordnung zur räumlich wahrnehmbaren darstellung solcher bilder

Country Status (1)

Country Link
WO (1) WO2006042706A1 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007037369A1 (de) * 2007-08-06 2009-02-12 Visumotion Gmbh Netzwerksystem mit Bildschirm zur hilfsmittelfrei räumlich wahrnehmbaren Darstellung
CN102474662A (zh) * 2009-08-06 2012-05-23 高通股份有限公司 根据无线显示协议制备视频数据
EP2514214A2 (de) * 2009-12-17 2012-10-24 Silicon Image, Inc. Übertragung und handhabung dreidimensionaler videoinhalte

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5745197A (en) * 1995-10-20 1998-04-28 The Aerospace Corporation Three-dimensional real-image volumetric display system and method
US5936628A (en) * 1991-08-06 1999-08-10 Canon Kabushiki Kaisha Three-dimensional model processing method, and apparatus therefor
US20020030675A1 (en) * 2000-09-12 2002-03-14 Tomoaki Kawai Image display control apparatus
US20030048354A1 (en) * 2001-08-29 2003-03-13 Sanyo Electric Co., Ltd. Stereoscopic image processing and display system
US20030112507A1 (en) * 2000-10-12 2003-06-19 Adam Divelbiss Method and apparatus for stereoscopic display using column interleaved data with digital light processing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5936628A (en) * 1991-08-06 1999-08-10 Canon Kabushiki Kaisha Three-dimensional model processing method, and apparatus therefor
US5745197A (en) * 1995-10-20 1998-04-28 The Aerospace Corporation Three-dimensional real-image volumetric display system and method
US20020030675A1 (en) * 2000-09-12 2002-03-14 Tomoaki Kawai Image display control apparatus
US20030112507A1 (en) * 2000-10-12 2003-06-19 Adam Divelbiss Method and apparatus for stereoscopic display using column interleaved data with digital light processing
US20030048354A1 (en) * 2001-08-29 2003-03-13 Sanyo Electric Co., Ltd. Stereoscopic image processing and display system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007037369A1 (de) * 2007-08-06 2009-02-12 Visumotion Gmbh Netzwerksystem mit Bildschirm zur hilfsmittelfrei räumlich wahrnehmbaren Darstellung
CN102474662A (zh) * 2009-08-06 2012-05-23 高通股份有限公司 根据无线显示协议制备视频数据
EP2514214A2 (de) * 2009-12-17 2012-10-24 Silicon Image, Inc. Übertragung und handhabung dreidimensionaler videoinhalte
EP2514214A4 (de) * 2009-12-17 2013-11-20 Silicon Image Inc Übertragung und handhabung dreidimensionaler videoinhalte

Similar Documents

Publication Publication Date Title
JP4295711B2 (ja) イメージ変換及び符号化技術
US9021399B2 (en) Stereoscopic image reproduction device and method for providing 3D user interface
US9549165B2 (en) Method for displaying three-dimensional user interface
CN102893620B (zh) 集成的现场可配置头戴机系统
EP2699005A1 (de) 3D-Bildwiedergabevorrichtung und Verfahren zur Auswahl eines 3D-Modus für 3D-Bild
DE10197255T5 (de) VTV-System
CN101795419A (zh) 2d视频图像信号转换为3d视频图像信号的技术方案及应用
DE202012103877U1 (de) Anzeigevorrichtung
DE112011103739T5 (de) Empfangsvorrichtung und Verfahren zum Empfang dreidimensionaler Multiview-Sendesignale
CN102291587B (zh) 全高清3d视频处理方法
CN102340678B (zh) 一种景深可调的立体显示装置及其景深调整方法
DE102013217826A1 (de) Verfahren zum erzeugen, übertragen und empfangen stereoskopischer bilder, und zugehörige geräte
DE19545356C2 (de) Vorrichtung zur Darstellung von Stereo-Videobildern
DE102005041249A1 (de) Verfahren zur Erzeugung räumlich darstellbarer Bilder
WO2006042706A1 (de) Verfahren zur erzeugung räumlich darstellbarer bilder und anordnung zur räumlich wahrnehmbaren darstellung solcher bilder
WO2011032642A1 (de) Verfahren und vorrichtung zum erzeugen von teilansichten und/oder einer raumbildvorlage aus einer 2d-ansicht für eine stereoskopische wiedergabe
KR101674688B1 (ko) 입체영상 재생 장치 및 입체영상 재생 방법
DE102012108685B4 (de) Multi-Konverter für digitale, hochauflösende, stereoskopische Videosignale
Li et al. Fundamental Concepts in Video
DE102008023501B4 (de) Verfahren und Anordnung zur synchronen Aufzeichnung von mindestens zwei Videodatenströmen unterschiedlicher Formate
DE102004050809A1 (de) Anordnung zur dreidimensional wahrnehmbaren Darstellung
Schubin Why 4K: vision & television
CN103313086A (zh) 一种全高清3d视频处理方法及装置
Tam et al. Temporal sub-sampling of depth maps in depth image-based rendering of stereoscopic image sequences
KR20140081268A (ko) 영상표시장치, 및 그 동작방법

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KP KR KZ LC LK LR LS LT LU LV LY MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU LV MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 05799820

Country of ref document: EP

Kind code of ref document: A1