DE102007060461A1 - Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device - Google Patents

Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device Download PDF

Info

Publication number
DE102007060461A1
DE102007060461A1 DE102007060461A DE102007060461A DE102007060461A1 DE 102007060461 A1 DE102007060461 A1 DE 102007060461A1 DE 102007060461 A DE102007060461 A DE 102007060461A DE 102007060461 A DE102007060461 A DE 102007060461A DE 102007060461 A1 DE102007060461 A1 DE 102007060461A1
Authority
DE
Germany
Prior art keywords
optical element
screen
arrangement according
arrangement
grid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102007060461A
Other languages
German (de)
Inventor
Stephan Dipl.-Ing. Otte
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
3D International Europe GmbH
Original Assignee
Visumotion GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visumotion GmbH filed Critical Visumotion GmbH
Priority to DE102007060461A priority Critical patent/DE102007060461A1/en
Publication of DE102007060461A1 publication Critical patent/DE102007060461A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09FDISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F11/00Indicating arrangements for variable information in which the complete information is permanently attached to a movable support which brings it to the display position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09FDISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00Advertising or display means not otherwise provided for
    • G09F19/12Advertising or display means not otherwise provided for using special optical effects
    • G09F19/14Advertising or display means not otherwise provided for using special optical effects displaying different signs depending upon the view-point of the observer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/31Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/133305Flexible substrates, e.g. plastics, organic film
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/13Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on liquid crystals, e.g. single liquid crystal display cells
    • G02F1/133Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
    • G02F1/1333Constructional arrangements; Manufacturing methods
    • G02F1/1335Structural association of cells with optical devices, e.g. polarisers or reflectors
    • G02F1/133526Lenses, e.g. microlenses or Fresnel lenses
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F2201/00Constructional arrangements not provided for in groups G02F1/00 - G02F7/00
    • G02F2201/38Anti-reflection arrangements
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F2201/00Constructional arrangements not provided for in groups G02F1/00 - G02F7/00
    • G02F2201/52RGB geometrical arrangements
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F2202/00Materials and properties
    • G02F2202/28Adhesive materials or arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/324Colour aspects

Abstract

The arrangement has an image reproduction device flexibly arranged with a screen (1) and an optical element (2). The optical element is connected over a flexible substrate (4) with the image reproduction device. The optical element is a parallax barrier screen or lenticular screen.

Description

Die Erfindung bezieht sich auf das Gebiet der räumlichen Darstellung, im speziellen der ohne Hilfsmittel räumlich wahrnehmbaren Darstellung für gleichzeitig mehrere Betrachter, der sogenannten autostereoskopischen Visualisierung.The Invention relates to the field of spatial representation, in particular, the spatially perceptible without aids Representation for several viewers simultaneously, the so-called autostereoscopic visualization.

Seit geraumer Zeit existieren Ansätze zu dem vorgenannten Fachgebiet. Ein Pionier auf diesem Gebiet war Frederic Ives, der in der Schrift GB190418672 A ein System mit einem „Linienschirm" zur 3D-Darstellung vorstellte. Weiterhin sind in der Schrift von Sam H. Kaplan „Theory of parallax barriers", Journal of SMPTE Vol. 59, No 7, pp 11–21, July 1952 grundlegende Erkenntnisse zur Verwendung von Barriereschirmen für die 3D-Darstellung beschrieben.For some time, there have been approaches to the aforementioned subject area. A pioneer in this field was Frederic Ives, who in Scripture GB190418672 A presented a system with a "line screen" for 3D presentation Sam H. Kaplan "Theory of parallax barriers", Journal of SMPTE Vol. 59, No. 7, pp. 11-21, July 1952 Basic insights into the use of barrier screens for 3D imaging are described.

Lange Zeit gelang jedoch keine umfassende Verbreitung von autostereoskopischen Systemen. Erst in den 80er Jahren des 20. Jahrhunderts konnte auf Grund der nunmehr zur Verfügung stehenden Rechenleistung und neuartigen Displaytechnologien eine gewisse Renaissance der 3D-Systeme einsetzen. In den 90er Jahren schnellte die Anzahl von Patentanmeldungen und Veröffentlichungen zu brillenfreien 3D-Visualisierungen förmlich in die Höhe. Herausragende Ergebnisse wurden erzielt von den folgenden Erfindern bzw. Anbietern:
In der JP 8-331605 AA beschreiben Masutani Takeshi et al. (Sanyo) eine Stufenbarriere, bei der ein transparentes Barriereelement in etwa die Abmaße eines Farbsubpixels (R, G oder B) aufweist. Mit dieser Technik war es erstmals möglich, den bei den meisten autostereoskopischen Systemen auf Grund der Darstellung gleichzeitig mehrerer Ansichten (mindestens zwei, bevorzugt mehr als zwei Ansichten) auftretenden Auflösungsverlust in der horizontalen Richtung teilweise auch auf die vertikale Richtung umzulegen.
For a long time, however, no comprehensive dissemination of autostereoscopic systems was achieved. Only in the 80s of the 20th century could a certain renaissance of the 3D systems be used due to the now available computing power and new display technologies. In the 1990s, the number of patent applications and publications on glasses-free 3D visualizations skyrocketed. Outstanding results have been achieved by the following inventors or providers:
In the JP 8-331605 AA describe Masutani Takeshi et al. (Sanyo) a step barrier in which a transparent barrier element has approximately the dimensions of a color subpixel (R, G or B). With this technique, it was possible for the first time to partially redirect the vertical resolution of the loss of resolution in the horizontal direction that occurs in most autostereoscopic systems due to the simultaneous display of several views (at least two, preferably more than two views).

Pierre Allio gelang mit der Lehre nach den US 5,808,599 A , US 5,936,607 A und WO 00/10332 A1 eine beachtenswerte Weiterentwicklung der Lentikulartechnologie, wobei auch er eine subpixelbasierte Ansichtenaufteilung nutzt.Pierre Allio succeeded in teaching after the US 5,808,599 A . US 5,936,607 A and WO 00/10332 A1 a noteworthy evolution of lenticular technology, using a sub-pixel-based view layout as well.

Ein weiteres herausragendes Ergebnis wurde von Cees van Berkel mit der EP 791 847 A1 zum Patent angemeldet. Dabei liegen gegenüber der Vertikalen geneigte Lentikularlinsen über einem Display, das ebenso verschiedene Perspektivansichten zeigt. Charakteristisch werden hier n Ansichten auf mindestens zwei Bildschirmzeilen aufgeteilt, so dass wiederum der Auflösungsverlust von der Horizontalen teilweise auf die Vertikale umgelegt wird.Another outstanding result was presented by Cees van Berkel with the EP 791 847 A1 patent pending. Lenticular lenses inclined relative to the vertical are located above a display which also shows different perspective views. Characteristically n views are divided on at least two screen lines, so that in turn the loss of resolution from the horizontal is partially transferred to the vertical.

Gleich mehrere Meilensteine für die Autostereoskopie begründete Jesse Eichenlaub mit den Schriften US 6,157,424 A und WO 02/35277 A1 sowie etlichen weiteren Erfindungen, die jedoch nahezu alle 3D-Systeme für nur einen Betrachter darstellen und/oder oftmals nicht zu akzeptablen Kosten herstellbar sind.Jesse Eichenlaub founded several of the milestones for autostereoscopy with the writings US 6,157,424 A and WO 02/35277 A1 as well as several other inventions, however, which represent almost all 3D systems for only one viewer and / or are often not manufacturable at acceptable cost.

Nachteilig bei allen vorgenannten Systemen ist, dass sie stets starre, unflexible, also nicht biegsame Bildgeber erfordern.adversely all the systems mentioned above are always rigid, inflexible, So do not require flexible imagers.

Der Erfindung liegt nun die Aufgabe zugrunde, eine Möglichkeit zur autostereoskopischen Darstellung zu schaffen, welche das Verbiegen des Bildgebers wenigstens temporär erlaubt, ohne die Anordnung zu zerstören.Of the Invention is now the object of a possibility to create the autostereoscopic presentation which bending the imager at least temporarily allowed, without the arrangement to destroy.

Diese Aufgabe wird erfindungsgemäß gelöst von einer Anordnung zur räumlichen Darstellung, umfassend

  • – ein Bildwiedergabegerät mit Bildelementen x(i, j) in einem Raster mit Zeilen i und Spalten j, auf welchen Bildteilinformationen verschiedener Ansichten A(k) mit k = 1, ..., n und n > 1 sichtbar gemacht werden können,
  • – mindestens ein dem Raster mit Bildelementen x(i, j) im Abstand s vor- oder nachgeordnetes optisches Element, welches Lichtausbreitungsrichtungen für das von den Bildelementen x(i, j) transmittierte oder abgestrahlte Licht vorgibt,
  • – so dass ein oder mehrere Betrachter auf Grund der Wirkung des optischen Elements jeweils mit beiden Augen im wesentlichen unterschiedliche Bildelemente x(i, j) und/oder Teile davon sieht bzw. sehen, wodurch beide Augen jeweils im Wesentlichen unterschiedliche Ansichten A(k) wahrnehmen und damit ein räumlicher Seheindruck entsteht,
  • – wobei erfindungsgemäß das Bildwiedergabegerät mit dem Raster sowie das optische Element biegsam ausgestaltet sind,
  • – und das optische Element über ein biegsames Substrat mit dem Bildwiedergabegerät verbunden ist.
This object is achieved by an arrangement for spatial representation, comprising
  • A picture display device with picture elements x (i, j) in a grid with lines i and columns j, on which partial picture information of different views A (k) with k = 1,..., N and n> 1 can be made visible,
  • At least one optical element preceding or behind the grid with picture elements x (i, j) at a distance s, which specifies light propagation directions for the light transmitted or emitted by the picture elements x (i, j),
  • In such a way that one or more observers see or see essentially different picture elements x (i, j) and / or parts thereof with both eyes due to the effect of the optical element, whereby both eyes each have essentially different views A (k) perceive and create a spatial visual impression,
  • - According to the invention the image display device with the grid and the optical element are designed to be flexible,
  • - And the optical element is connected via a flexible substrate with the image display device.

Bei dem optischen Element kann es sich um einen Parallaxenbarriereschirm oder einen Lentikularschirm handeln.at the optical element may be a parallax barrier screen or a lenticular screen.

Das biegsame Substrat kann bevorzugt ein durchsichtiger Silikonkleber sein. Andere Ausgestaltungen sind möglich. Wichtig ist, dass bei Verbiegung der Anordnung mögliche Zuordnungen von Teilflächen des optischen Elements zu Teilflächen des Rasters im Wesentlichen erhalten bleiben. Dadurch kann der räumliche Eindruck bis zum einem gewissen Grad weitestgehend auch dann erhalten bleiben, wenn die Anordnung verbogen wird. Selbstredend ist jedoch der beste Betrachtungseindruck dann vorhanden, wenn sich das Raster und das optische Element im Wesentlichen in einem ebenen Zustand befinden.The flexible substrate may preferably be a transparent silicone adhesive. Other embodiments are possible. It is important that, when the arrangement is bent, possible allocations of partial areas of the optical element to partial areas of the grid are substantially retained. This allows the spatial impression to a certain extent largely retained even if the arrangement is bent. Needless to say, however, the best viewing impression is present when the grid and the optical element are essentially in a flat state.

Die Ansichten A(k) können bevorzugt verschiedene Perspektivansichten einer Szene oder eines Objektes sein. Andere Bildinhalte sind dennoch möglich.The Views A (k) may preferably have different perspective views a scene or an object. Other image content is still possible.

Außerdem können die Ansichten A(k) auch zeitlich wechseln, d. h. es sind sowohl räumliche Stand- als auch Bewegtbilder möglich.Furthermore The views A (k) can also change over time, ie. H. both spatial still and moving pictures are possible.

Darüber hinaus erfolgt die Zuordnung der Bildteilinformationen verschiedener Ansichten A(k) zu den Bildelementen x(i, j) in einem zweidimensionalen periodischen Muster, wobei die Periodenlänge in der horizontalen und der vertikalen Richtung bevorzugt nicht mehr als jeweils 32 Bildelemente x(i, j) umfasst. Ausnahmen von dieser Begrenzung sind fallbedingt möglich.About that In addition, the assignment of the image part information of various Views A (k) to the pixels x (i, j) in a two-dimensional periodic pattern, with the period length in the horizontal and the vertical direction preferably not more than 32 each Picture elements x (i, j). Exceptions to this limitation are case-related possible.

Vorzugsweise ist die vertikale Periodenlänge gleich der Anzahl der dargestellten Ansichten, also z. B. gleich 5 oder 9.Preferably the vertical period length is equal to the number of displayed ones Views, so z. B. equal to 5 or 9.

Die Bildelemente x(i, j) entsprechen Farbsubpixeln (R, G oder B) oder Clustern von Farbsubpixeln (z. B. RG oder GB) oder Vollfarbpixeln oder Graustufenpixeln.The Image elements x (i, j) correspond to color subpixels (R, G or B) or Clusters of color subpixels (eg RG or GB) or full color pixels or grayscale pixels.

Bei dem Bildwiedergabegerät kann es sich beispielsweise um einen (Farb-)LCD-Bildschirm, einen OLED-Bildschirm, einen OEL-Bildschirm oder einen LED-basierten Bildschirm handeln, wobei darin jeweils bevorzugt biegsame Abschlussgläser vorhanden sind. Weitere Ausgestaltungen sind denkbar. Insofern ein LCD-Bildschirm benutzt wird, könnte hier eine spezielle Flüssigkristallmischung zum Einsatz kommen, die das flexible Verbiegen der Anordnung problemlos tolerieren kann.at The image display device may, for example, at a (color) LCD screen, an OLED screen, an OEL screen or an LED-based screen, where in each case preferably flexible closure glasses are present. Further Embodiments are conceivable. Insofar as an LCD screen used Here, could be a special liquid crystal mixture are used, the flexible bending of the arrangement easily can tolerate.

Insofern als optisches Element ein Parallaxenbarriereschirm vorhanden ist, besteht dieser beispielsweise aus einem biegsamen Glassubstrat, auf welches an der Rückseite die Barrierestruktur aufgebracht ist. Selbige Barrierestruktur kann ein belichteter und entwickelter fotografischer Film sein, der rückseitig auf das biegsame Glassubstrat auflaminiert ist, wobei bevorzugt die Emulsionsschicht des fotografisches Films zum Glassubstrat zeigt.insofar as an optical element a parallax barrier screen is present, this consists for example of a flexible glass substrate, on which the barrier structure applied on the back is. Same barrier structure can be an illuminated and developed be photographic film, the back on the pliable Glass substrate is laminated, wherein preferably the emulsion layer of the photographic film to the glass substrate.

Weiterhin ist es möglich, dass – insofern als optisches Element ein Parallaxenbarriereschirm vorhanden ist – dieser aus einem fotografischen Film besteht, welcher auf das biegsame Substrat aufgebracht ist. Dies erlaubt eine besonders einfache Fertigungsweise. Außerdem kann das biegsame Substrat selbst ein durchsichtiger Klebstoff sein.Farther is it possible that - insofar as optical Element a parallax barrier screen is present - this consists of a photographic film, which on the flexible Substrate is applied. This allows a particularly simple manufacturing method. In addition, the flexible substrate itself can be more transparent Be adhesive.

Selbstredend muss das optische Element zu dem Raster geeignet ausgerichtet sein, was im Stand der Technik hinreichend bekannt ist.Needless to say, the optical element must be suitably aligned with the grid, which is well known in the art.

Überdies ist es von Vorteil, wenn das optische Element Mittel zur Verminderung von Störlichtreflexen, bevorzugt mindestens eine interferenzoptische Entspiegelungsschicht, enthält.moreover it is advantageous if the optical element means for reducing of flare reflections, preferably at least one interference-optical Antireflective coating, contains.

Die Erfindung soll nachstehend anhand eines Ausführungsbeispiels näher erläutert werden. Die Zeichnungen zeigen:The Invention will be described below with reference to an embodiment be explained in more detail. The drawings show:

1 eine schematische Darstellung der erfindungsgemäßen Anordnung, 1 a schematic representation of the arrangement according to the invention,

2 eine schematische Darstellung eines gebogenen Zustandes einer erfindungsgemäßen Anordnung, sowie 2 a schematic representation of a bent state of an inventive arrangement, and

3 eine beispielhafte Kombination der verschiedenen Ansichten A(k) auf einem Raster von Bildwiedergabeelementen x(i, j). 3 an exemplary combination of the different views A (k) on a grid of image display elements x (i, j).

In 1 ist also eine schematische Darstellung der erfindungsgemäßen Anordnung zur räumlichen Darstellung zu sehen. Diese erfindungsgemäße Anordnung umfasst

  • – ein Bildwiedergabegerät mit Bildelementen x(i, j) in einem Raster 1 mit Zeilen i und Spalten j, auf welchen Bildteilinformationen verschiedener Ansichten A(k) mit k = 1, ..., n und n > 1 sichtbar gemacht werden können,
  • – mindestens ein dem Raster 1 mit Bildelementen x(i, j) im Abstand s vorgeordnetes optisches Element 2, welches Lichtausbreitungsrichtungen für das von den Bildelementen x(i, j) transmittierte oder abgestrahlte Licht vorgibt,
  • – so dass ein oder mehrere Betrachter 3 auf Grund der Wirkung des optischen Elements 2 jeweils mit beiden Augen im wesentlichen unterschiedliche Bildelemente x(i, j) und/oder Teile davon sieht bzw. sehen, wodurch beide Augen jeweils im Wesentlichen unterschiedliche Ansichten A(k) wahrnehmen und damit ein räumlicher Seheindruck entsteht,
  • – wobei erfindungsgemäß das Bildwiedergabegerät mit dem Raster 1 sowie das optische Element 2 biegsam ausgestaltet sind,
  • – und das optische Element 2 über ein biegsames Substrat 4 mit dem Bildwiedergabegerät verbunden ist.
In 1 So is a schematic representation of the arrangement according to the invention for spatial representation to see. This arrangement according to the invention comprises
  • - An image display device with pixels x (i, j) in a grid 1 with rows i and columns j, on which partial image information of different views A (k) with k = 1, ..., n and n> 1 can be made visible,
  • - At least one grid 1 with picture elements x (i, j) at a distance s upstream optical element 2 which specifies light propagation directions for the light transmitted or emitted by the picture elements x (i, j),
  • - so that one or more observers 3 due to the effect of the optical element 2 see respectively see with both eyes substantially different picture elements x (i, j) and / or parts thereof, whereby both eyes perceive substantially different views A (k) and thus creates a spatial visual impression,
  • - According to the invention, the image display device with the grid 1 as well as the optical element 2 are designed flexible,
  • - and the optical element 2 over a flexible substrate 4 connected to the image display device.

Bei dem optischen Element 2 kann es sich um einen Lentikularschirm oder bevorzugt um einen Parallaxenbarriereschirm handeln.In the optical element 2 it may be a lenticular screen or, preferably, a parallax barrier screen.

Das biegsame Substrat 4 kann bevorzugt ein durchsichtiger Silikonkleber sein. Wichtig ist, dass bei Verbiegung der Anordnung mögliche Zuordnungen von Teilflächen des optischen Elements 2 zu Teilflächen des Rasters 1 im Wesentlichen erhalten bleiben. Dadurch kann der räumliche Eindruck bis zum einem gewissen Grad weitestgehend auch dann erhalten bleiben, wenn die Anordnung verbogen wird. Selbstredend ist jedoch der beste Betrachtungseindruck dann vorhanden, wenn sich das Raster 1 und das optische Element 2 im Wesentlichen in einem ebenen Zustand befinden.The flexible substrate 4 may preferably be a transparent silicone adhesive. It is important that when bending the arrangement possible assignments of partial surfaces of the optical element 2 to subareas of the grid 1 essentially obtained lead ben. This allows the spatial impression to a certain extent largely retained even if the arrangement is bent. Needless to say, however, the best viewing impression is then present when the grid 1 and the optical element 2 are essentially in a flat state.

Selbstredend muss das optische Element 2 zu dem Raster 1 geeignet ausgerichtet sein, was im Stand der Technik hinreichend bekannt ist.Needless to say, the optical element must 2 to the grid 1 be suitably aligned, which is well known in the art.

Bei dem Bildwiedergabegerät mit dem Raster 1 handelt es sich in diesem Ausgestaltungsbeispiel um einen Farb-LCD-Bildschirm, wobei in selbigem biegsame Abschlussgläser vorhanden sind. Weiterhin kommt in diesem Farb-LCD-Bildschirm eine spezielle Flüssigkristallmischung zum Einsatz, die das flexible Verbiegen der Anordnung problemlos tolerieren kann.In the image display device with the grid 1 in this embodiment, it is a color LCD screen, in which flexible end lenses are present. Furthermore, this color LCD screen uses a special liquid crystal mixture that can easily tolerate the flexible bending of the device.

Als optisches Element 2 ist in diesem Beispiel ein Parallaxenbarriereschirm vorhanden. Die Parallaxenbarrierestruktur dieses Schirms kann ein belichteter und entwickelter fotografischer Film sein, welcher auf das biegsame Substrat 4 aufgebracht (z. B. mit durchsichtigem Kleber aufgeklebt) ist.As an optical element 2 In this example, a parallax barrier screen is present. The parallax barrier structure of this screen may be an exposed and developed photographic film which faces the flexible substrate 4 applied (eg glued with transparent adhesive) is.

Bevorzugt zeigt die Emulsionsschicht des fotografisches Films zum biegsamen Substrat 4. Dies macht die Fertigung besonders einfach.Preferably, the emulsion layer of the photographic film faces the flexible substrate 4 , This makes the production particularly easy.

2 zeigt eine schematische Darstellung eines gebogenen Zustandes einer erfindungsgemäßen Anordnung. Das biegsame Substrat 4 ist hier durch Striche angedeutet. 2 shows a schematic representation of a bent state of an arrangement according to the invention. The flexible substrate 4 is indicated here by dashes.

Darüber hinaus erfolgt die Zuordnung der Bildteilinformationen verschiedener Ansichten A(k) zu den Bildelementen x(i, j) in einem zweidimensionalen periodischen Muster. Ein Beispiel für 5 Ansichten auf einem Raster 1 mit Farbsubpixeln (R, G oder B) als Bildelementen x(i, j) ist in 3 gezeigt.In addition, the assignment of the partial image information of different views A (k) to the pixels x (i, j) takes place in a two-dimensional periodic pattern. An example of 5 views on a grid 1 with color subpixels (R, G or B) as picture elements x (i, j) is in 3 shown.

Überdies ist es von Vorteil, wenn das optische Element 2 Mittel zur Verminderung von Störlichtreflexen, bevorzugt mindestens eine interferenzoptische Entspiegelungsschicht, enthält.Moreover, it is advantageous if the optical element 2 Means for reducing Störlichtreflexen, preferably at least one interference-optical anti-reflection layer contains.

Natürlich muss die erfindungsgemäße Anordnung auch mit entsprechenden 3D-Steuersignalen, also den aus den Ansichten A(k) kombinierten Bildern, angesteuert werden, was über eine Ansteuerelektronik oder einen (z. B. tragbaren) PC oder ein Mobiltelefon erfolgen kann.Naturally the arrangement according to the invention must also with appropriate 3D control signals, ie the images combined from the views A (k), be controlled, what about a control electronics or a portable (eg portable) PC or a mobile phone can be done.

Die Vorteile der Erfindung sind vielseitig. Sie bietet wunschgemäß eine Möglichkeit zur autostereoskopischen Darstellung, welche das Verbiegen des Bildgebers wenigstens temporär erlaubt, ohne die Anordnung zu zerstören. Damit kann eine flache, rollbare 3D-Anzeige, aber auch ein 3D-Großbildsystem oder eine Art Rollo mit 3D-Darstellung geschaffen werden.The Advantages of the invention are versatile. It offers one as desired Possibility for autostereoscopic presentation, which bending the imager at least temporarily allows without destroying the arrangement. This can be a flat, scrollable 3D display, but also a 3D large-screen system or a kind of roller blind can be created with 3D representation.

Anwendungsgebiete finden sich zum Beispiel für Bekleidung (Jacken), Taschen mit integrierter 3D-Anzeige, Rollbare Werbeplakate und im militärischen Bereich.application areas can be found, for example, for clothing (jackets), bags with integrated 3D display, rollable billboards and military Area.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list The documents listed by the applicant have been automated generated and is solely for better information recorded by the reader. The list is not part of the German Patent or utility model application. The DPMA takes over no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • - GB 190418672 A [0002] - GB 190418672 A [0002]
  • - JP 8-331605 AA [0003] - JP 8-331605 AA [0003]
  • - US 5808599 A [0004] US 5808599 A [0004]
  • - US 5936607 A [0004] - US 5936607 A [0004]
  • - WO 00/10332 A1 [0004] WO 00/10332 A1 [0004]
  • - EP 791847 A1 [0005] EP 791847 A1 [0005]
  • - US 6157424 A [0006] - US 6157424 A [0006]
  • - WO 02/35277 A1 [0006] WO 02/35277 A1 [0006]

Zitierte Nicht-PatentliteraturCited non-patent literature

  • - Sam H. Kaplan „Theory of parallax barriers", Journal of SMPTE Vol. 59, No 7, pp 11–21, July 1952 [0002] - Sam H. Kaplan "Theory of parallax barriers", Journal of SMPTE Vol. 59, No. 7, pp. 11-21, July 1952 [0002]

Claims (12)

Anordnung zur räumlichen Darstellung, umfassend – ein Bildwiedergabegerät mit Bildelementen x(i, j) in einem Raster (1) mit Zeilen (i) und Spalten (j), auf welchen Bildteilinformationen verschiedener Ansichten A(k) mit k = 1, ..., n und n > 1 sichtbar gemacht werden können, – mindestens ein dem Raster (1) mit Bildelementen x(i, j) im Abstand s vor- oder nachgeordnetes optisches Element (2), welches Lichtausbreitungsrichtungen für das von den Bildelementen x(i, j) transmittierte oder abgestrahlte Licht vorgibt, – so dass ein oder mehrere Betrachter (3) auf Grund der Wirkung des optischen Elements (2) jeweils mit beiden Augen im wesentlichen unterschiedliche Bildelemente x(i, j) und/oder Teile davon sieht bzw. sehen, wodurch beide Augen jeweils im Wesentlichen unterschiedliche Ansichten A(k) wahrnehmen und damit ein räumlicher Seheindruck entsteht, – dadurch gekennzeichnet, dass das Bildwiedergabegerät mit dem Raster (1) sowie das optische Element (2) biegsam ausgestaltet sind, – und dass das optische Element (2) über ein biegsames Substrat (4) mit dem Bildwiedergabegerät verbunden ist.Arrangement for spatial representation, comprising - a picture display device with picture elements x (i, j) in a grid ( 1 ) with rows (i) and columns (j) on which partial image information of different views A (k) with k = 1, ..., n and n> 1 can be made visible, - at least one of the grid ( 1 ) with pixels x (i, j) at a distance s upstream or downstream optical element ( 2 ), which predetermines light propagation directions for the light transmitted or emitted by the picture elements x (i, j), so that one or more observers ( 3 ) due to the effect of the optical element ( 2 ) each with two eyes substantially different picture elements x (i, j) and / or parts thereof see or see, whereby both eyes each substantially different views A (k) perceive and thus creates a spatial visual impression, - characterized in that the image display device with the grid ( 1 ) as well as the optical element ( 2 ) are made flexible, and that the optical element ( 2 ) over a flexible substrate ( 4 ) is connected to the image display device. Anordnung nach Anspruch 1, dadurch gekennzeichnet, dass das optische Element (2) ein Parallaxenbarriereschirm oder ein Lentikularschirm ist.Arrangement according to claim 1, characterized in that the optical element ( 2 ) is a parallax barrier screen or a lenticular screen. Anordnung nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass bei Verbiegung der Anordnung mögliche Zuordnungen von Teilflächen des optischen Elements (2) zu Teilflächen des Rasters (1) im Wesentlichen erhalten bleiben.Arrangement according to claim 1 or 2, characterized in that when bending the arrangement possible assignments of partial surfaces of the optical element ( 2 ) to subareas of the grid ( 1 ) are essentially preserved. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das biegsame Substrat ein durchsichtiger Silikonkleber ist.Arrangement according to one of the preceding claims, characterized in that the flexible substrate is a transparent one Silicone glue is. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Zuordnung der Bildteilinformationen verschiedener Ansichten A(k) zu den Bildelementen x(i, j) in einem zweidimensionalen periodischen Muster erfolgt, wobei die Periodenlänge in der horizontalen und der vertikalen Richtung nicht mehr als jeweils 32 Bildelemente x(i, j) umfaßt.Arrangement according to one of the preceding claims, characterized in that the assignment of the image part information different views A (k) to the pixels x (i, j) in one two-dimensional periodic pattern takes place, the period length in the horizontal and the vertical direction no more than respectively 32 pixels x (i, j). Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die vertikale Periodenlänge gleich der Anzahl der dargestellten Ansichten ist.Arrangement according to one of the preceding claims, characterized in that the vertical period length is equal to the number of views shown. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass die Bildelemente x(i, j) Farbsubpixeln (R, G oder B) oder Clustern von Farbsubpixeln (z. B. RG oder GB) oder Vollfarbpixeln oder Graustufenpixeln entsprechen.Arrangement according to one of the preceding claims, characterized in that the picture elements x (i, j) are color subpixels (R, G or B) or clusters of color subpixels (eg RG or GB) or full color pixels or grayscale pixels. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das Bildwiedergabegerät ein Farb-LCD-Bildschirm, ein OLED-Bildschirm, ein OEL-Bildschirm oder ein LED-basierten Bildschirm ist, wobei darin jeweils bevorzugt biegsame Abschlussgläser vorhanden sind.Arrangement according to one of the preceding claims, characterized in that the image display device a Color LCD screen, an OLED screen, an OEL screen or an LED-based screen, wherein each is preferred flexible end glasses are available. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass – insofern als optisches Element (2) ein Parallaxenbarriereschirm vorhanden ist – dieser aus einem biegsamen Glassubstrat besteht, auf welches an der Rückseite die Barrierestruktur aufgebracht ist.Arrangement according to one of the preceding claims, characterized in that - insofar as an optical element ( 2 ) a parallax barrier screen is present - this consists of a flexible glass substrate, on which on the back of the barrier structure is applied. Anordnung nach Anspruch 9, dadurch gekennzeichnet, dass die Barrierestruktur ein belichteter und entwickelter fotografischer Film ist, der rückseitig auf das biegsame Glassubstrat auflaminiert ist, wobei bevorzugt die Emulsionsschicht des fotografisches Films zum biegsamen Glassubstrat zeigt.Arrangement according to claim 9, characterized that the barrier structure is an exposed and developed photographic Film is the back of the flexible glass substrate is laminated, wherein preferably the emulsion layer of the photographic Films to the flexible glass substrate shows. Anordnung nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass -insofern als optisches Element (2) ein Parallaxenbarriereschirm vorhanden istdieser aus einem fotografischen Film besteht, welcher auf das biegsame Substrat (4) aufgebracht ist.Arrangement according to one of claims 1 to 8, characterized in that -in so far as an optical element ( 2 a parallax barrier screen is present, consisting of a photographic film which is placed on the flexible substrate ( 4 ) is applied. Anordnung nach einem der vorgenannten Ansprüche, dadurch gekennzeichnet, dass das optische Element (2) Mittel zur Verminderung von Störlichtreflexen, bevorzugt mindestens eine interferenzoptische Entspiegelungsschicht, enthält.Arrangement according to one of the preceding claims, characterized in that the optical element ( 2 ) Means for reducing Störlichtreflexen, preferably at least one interference-optical anti-reflection coating contains.
DE102007060461A 2007-12-13 2007-12-13 Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device Withdrawn DE102007060461A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102007060461A DE102007060461A1 (en) 2007-12-13 2007-12-13 Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102007060461A DE102007060461A1 (en) 2007-12-13 2007-12-13 Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device

Publications (1)

Publication Number Publication Date
DE102007060461A1 true DE102007060461A1 (en) 2009-06-18

Family

ID=40679999

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102007060461A Withdrawn DE102007060461A1 (en) 2007-12-13 2007-12-13 Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device

Country Status (1)

Country Link
DE (1) DE102007060461A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9965064B2 (en) 2011-10-14 2018-05-08 Nokia Technologies Oy Flexible auto-stereoscopic display control and adjustment of the parallel barrier arrangement based on bending of the display

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB190418672A (en) 1903-09-17 1904-10-27 Frederic Eugene Ives Improvements in the Process of Making Line Composite Stereoscopic Photographs.
US5162696A (en) * 1990-11-07 1992-11-10 Goodrich Frederick S Flexible incasements for LED display panels
US5469020A (en) * 1994-03-14 1995-11-21 Massachusetts Institute Of Technology Flexible large screen display having multiple light emitting elements sandwiched between crossed electrodes
JPH08331605A (en) 1995-05-30 1996-12-13 Sanyo Electric Co Ltd Stereoscopic display device
EP0791847A1 (en) 1996-02-23 1997-08-27 Koninklijke Philips Electronics N.V. Autostereoscopic display apparatus
US5808599A (en) 1993-05-05 1998-09-15 Pierre Allio Autostereoscopic video device and system
WO2000010332A1 (en) 1998-08-13 2000-02-24 Pierre Allio Method for autostereoscopic display
US6157424A (en) 1998-03-30 2000-12-05 Dimension Technologies, Inc. 2D/3D imaging display
US6362801B1 (en) * 1998-06-17 2002-03-26 Engineer Lighting, Inc. Display apparatus
WO2002035277A1 (en) 2000-10-24 2002-05-02 Dimension Technologies, Inc. Autostereoscopic display
DE102005052070A1 (en) * 2005-10-28 2007-05-03 Bundesdruckerei Gmbh display device
WO2007085286A1 (en) * 2006-01-30 2007-08-02 Deutsches Zentrum für Luft- und Raumfahrt e.V. Flexible display

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB190418672A (en) 1903-09-17 1904-10-27 Frederic Eugene Ives Improvements in the Process of Making Line Composite Stereoscopic Photographs.
US5162696A (en) * 1990-11-07 1992-11-10 Goodrich Frederick S Flexible incasements for LED display panels
US5808599A (en) 1993-05-05 1998-09-15 Pierre Allio Autostereoscopic video device and system
US5936607A (en) 1993-05-05 1999-08-10 Allio; Pierre Autostereoscopic video device and system
US5469020A (en) * 1994-03-14 1995-11-21 Massachusetts Institute Of Technology Flexible large screen display having multiple light emitting elements sandwiched between crossed electrodes
JPH08331605A (en) 1995-05-30 1996-12-13 Sanyo Electric Co Ltd Stereoscopic display device
EP0791847A1 (en) 1996-02-23 1997-08-27 Koninklijke Philips Electronics N.V. Autostereoscopic display apparatus
US6157424A (en) 1998-03-30 2000-12-05 Dimension Technologies, Inc. 2D/3D imaging display
US6362801B1 (en) * 1998-06-17 2002-03-26 Engineer Lighting, Inc. Display apparatus
WO2000010332A1 (en) 1998-08-13 2000-02-24 Pierre Allio Method for autostereoscopic display
WO2002035277A1 (en) 2000-10-24 2002-05-02 Dimension Technologies, Inc. Autostereoscopic display
DE102005052070A1 (en) * 2005-10-28 2007-05-03 Bundesdruckerei Gmbh display device
WO2007085286A1 (en) * 2006-01-30 2007-08-02 Deutsches Zentrum für Luft- und Raumfahrt e.V. Flexible display

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Sam H. Kaplan "Theory of parallax barriers", Journal of SMPTE Vol. 59, No 7, pp 11-21, July 1952

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9965064B2 (en) 2011-10-14 2018-05-08 Nokia Technologies Oy Flexible auto-stereoscopic display control and adjustment of the parallel barrier arrangement based on bending of the display

Similar Documents

Publication Publication Date Title
EP2156239B1 (en) Method for orienting an optical element on a screen
DE102007016773B4 (en) Method and arrangement for three-dimensional representation
DE102017200112B4 (en) Method and device for generating a dynamic light field
DE10242026A1 (en) 2D / 3D convertible display
DE102012108346A1 (en) Stereoscopic image display device and control method for this
DE102008059987A1 (en) Display device for three-dimensional images and driving method of the same
DE102008062790A1 (en) Method and arrangement for spatial representation
WO2005025238A2 (en) Sweet spot beam splitter for separating images
DE102007062760A1 (en) display device
WO2009036758A1 (en) Method for shortening or lengthening an observation distance between an observer and an arrangement for the spatially perceptible representation
EP2191656A1 (en) Method for orienting a parallax barrier screen on a display screen
WO2007056986A1 (en) Method and arrangement for monoscopically representing at least one area of an image on an autostereoscopic display apparatus and information reproduction unit having such an arrangement
DE102005058586A1 (en) Reproduction device for autostereoscopic reproduction of three-dimensional representations
DE102009013912A1 (en) Method for autostereoscopic visualization of scene or object, involves partially seeing different image elements and/or parts of image elements by observers with both eyes due to vision limitation effect of parallax barrier screen
DE102007054011B4 (en) Method and arrangement for spatial representation
DE102007006038B3 (en) Autostereoscopic image display device for generating a floating real stereo image
DE102007049238A1 (en) Scene spatial representation arrangement for e.g. three-dimensional advertisements, has optical element comprising optical structures, where observer observes predominantly two sets of views with eyes so that visual impression is obtained
DE102007060461A1 (en) Arrangement for stereoscopic representation, has image reproduction device flexibly arranged with screen and optical element, where optical element is connected over flexible substrate with image reproduction device
EP3090302B1 (en) Method and apparatus for an autoparallactic and autostereoscopic display
DE19652689B4 (en) Method for three-dimensional representation of information
WO2009097848A1 (en) Method and arrangement for the spatial representation using color-sequential illumination
DE102010045467A1 (en) Method and arrangement for optionally two- or three-dimensional representation
DE102009041784B4 (en) Method for displaying image information and autostereoscopic screen
DE102007039079A1 (en) Scene representing method for automatic parking system, involves providing sequential input of light propagation directions for light so that viewer views selected views from viewing positions to produce spatial visual impression
DE102009051671B4 (en) Arrangement for imaging temporally sequentially displayed images in different directions

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

Effective date: 20110701