WO2013030002A1 - Method and device for the three-dimensional visual inspection of a component - Google Patents

Method and device for the three-dimensional visual inspection of a component Download PDF

Info

Publication number
WO2013030002A1
WO2013030002A1 PCT/EP2012/065984 EP2012065984W WO2013030002A1 WO 2013030002 A1 WO2013030002 A1 WO 2013030002A1 EP 2012065984 W EP2012065984 W EP 2012065984W WO 2013030002 A1 WO2013030002 A1 WO 2013030002A1
Authority
WO
WIPO (PCT)
Prior art keywords
dimensional
component
light field
image
data
Prior art date
Application number
PCT/EP2012/065984
Other languages
German (de)
French (fr)
Inventor
Thomas Seiffert
Original Assignee
Robert Bosch Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch Gmbh filed Critical Robert Bosch Gmbh
Publication of WO2013030002A1 publication Critical patent/WO2013030002A1/en

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/21—Indexing scheme for image data processing or generation, in general involving computational photography

Definitions

  • the invention relates to a method for the three-dimensional inspection of a component, wherein a 4-dimensional light field of the component is recorded and wherein an image of the component on a for a two-dimensional or three-dimensional
  • the invention further relates to a device for three-dimensional inspection of a component, wherein a first sub-device for detecting a 4-dimensional light field of the component is provided and wherein a second sub-device is provided for a two-dimensional or three-dimensional representation.
  • Technoscopes are used to visually inspect components in hard to reach areas. An image of the point to be inspected is fed via a series of rod lenses or image conductors to a viewing lens, which can be observed by an examiner or a camera. Usually, technoscopes produce a two-dimensional image. Special designs with two image conductors or at least one special image conductor structure can also generate a three-dimensional image of the component to be examined via two cameras.
  • WO 96/01224 describes a video endoscope with two lenses arranged at an angle whose images are fed via a V or a Y-shaped prism to a camera, in which case each image has only half the resolution.
  • a picture of a 4D light field is described in a company brochure by Raytrix.
  • the object is imaged via a lens and an additional microlens array in a so-called plenoptic camera on a two-dimensional CCD sensor.
  • the construction of such a camera is described in the article "T. Adelson, J. Wang: Single lens stereo with a plenoptic camera. IEEE Transactions on Pattern Analysis and Machine Intelligence, pp 99-106, 1992 "
  • Sharpness level can be generated.
  • US 20020030107712 A1 describes a "lightfield display" with which images can be displayed autostereoscopically for a plurality of persons A reproduction of three-dimensional information by means of two images of different polarization and associated spectacles or by means of a mutual representation of two images on a screen and an associated shutter glasses known.
  • three-dimensional representation can take place during an inspection of a component.
  • the object of the invention relating to the method is achieved by generating a two-dimensional or three-dimensional image from a predefinable perspective or an image sequence along a predeterminable trajectory from the data of the 4-dimensional light field in an evaluation step.
  • the method decouples the recording of three-dimensional image information with its information content on the view of a component from two perspectives ("disparity information") of the image reproduction.
  • the viewing of the component can be processed purely digitally and a perspective that seems appropriate to the viewer can subsequently be selected.
  • the 4D light field of another component can already be detected.
  • the perspective or the trajectory is specified by the viewer during the evaluation step, the latter can interactively move in the component or around the component by means of an input device.
  • a 3D input device such as a 3D mouse
  • small changes in perspective can create a three-dimensional impression or at least an idea of the spatial arrangement.
  • the user can also get an idea of the item by interactively driving around the component along a trajectory. This spatial impression arises, as in a simplified form in
  • textures from 2D images are partially applied there to improve the impression on a three-dimensional data record of the environment in addition to the impression of the architectural arrangements in the outer and inner areas, by which one can "move.” the real texture has been recorded from the desired viewing direction, small differences in reflectance, such as, for example, defects, are recorded in the light field and can therefore be viewed retrospectively.
  • a simplified embodiment of the method is characterized in that in the Ausensesch rode the image is presented to the viewer along a predetermined trajectory. In the inspection of similar components so the intervention of the Reduced operator and thus simplified. Furthermore, differences and mistakes are perceived particularly well.
  • a further development of the method provides that in the evaluation step the observer specifies a focal plane and / or a depth of field and, if necessary, adapts it interactively.
  • a 3D input device such as a 3D mouse, can be used. The observer can thus apparently move into the inspection of a bore by choosing the focal plane in this and concentrate by selecting the depth of field on subregions.
  • a third sub-device for generating the two-dimensional or three-dimensional representation from a predefinable perspective or along a predeterminable trajectory from the data of the 4-dimensional light field.
  • the reproduction of the image information does not show the component to be tested during real movements from different views but generates the views from the 4D light field. In a suitably recorded 4D light field, no difference between real motion and later edited view is apparent.
  • Device as a visual inspection device in the inspection of objects to be tested for defects, in particular their surfaces, provided.
  • Three-dimensional rendering such as extra glasses, can be omitted.
  • Control of a 3D playback device such as a monitor with
  • the necessary image files can be provided with the device and the method.
  • Figure 1 is a schematic view of an arrangement for receiving a
  • FIG. 1 shows a schematic representation of an arrangement for receiving a 4D light field 1 1 of an object 10 with a recording device 12.
  • the data from the recording device 12 are transmitted via a first data transmission 13 to a memory device 14 and stored there for later evaluation.
  • the data, or at least the part of the data required in the current evaluation step is transmitted as required via a second data transmission 15 to a 2D image display device 16 and displayed there two-dimensionally as a 2D view 17.
  • the user 21 can enter commands for changing the 2D view 17 via a trajectory input 19 to an operating and arithmetic unit 18 in such a way that he receives 2D views 17 with views of the object 10 along preselectable or predefined trajectories.
  • the necessary data is transmitted from the memory device 14 via the second data transmission 15 to the 2D image display device and displayed there.
  • a 3D reconstruction 20 of the object 10 is created.
  • only data from the memory device 14 has to be used for different 2D views 17 which allow the user 21 to create a 3D reconstruction 20 in his imagination.

Abstract

The invention relates to a method for the three-dimensional inspection of a component, wherein a four-dimensional light field of the component is recorded, and wherein an image of the component is displayed on a reproducing device configured for a two-dimensional or three-dimensional illustration. According to the invention, in an evaluation step, a two-dimensional or three-dimensional image from a pre-selectable perspective or an image sequence along a pre-selectable trajectory is generated from the data of the four-dimensional light field. The invention further relates to a device for carrying out the method. By generating the data for the viewer from the data of the four-dimensional light field, the device and the method make it possible that errors due to mutual calibration of the two recording channels necessary for three-dimensional recordings are eliminated. The reproduction quality is substantially increased, and potential viewer irritation due to not perfectly justified optics is eliminated.

Description

Beschreibung Titel  Description title
Verfahren und Vorrichtung zur dreidimensionalen Sichtprüfung eines Bauteils Stand der Technik Method and device for the three-dimensional visual inspection of a component Prior art
Die Erfindung betrifft ein Verfahren zur dreidimensionalen Inspektion eines Bauteils, wobei ein 4-dimensionales Lichtfeld des Bauteils aufgenommen wird und wobei ein Bild des Bauteils auf einem für eine zweidimensionale oder dreidimensionale The invention relates to a method for the three-dimensional inspection of a component, wherein a 4-dimensional light field of the component is recorded and wherein an image of the component on a for a two-dimensional or three-dimensional
Darstellung vorgesehenen Wiedergabegerät angezeigt wird. Display provided playback device is displayed.
Die Erfindung betrifft weiterhin eine Vorrichtung zur dreidimensionalen Inspektion eines Bauteils, wobei eine erste Teil-Vorrichtung für eine Erfassung eines 4-dimensionalen Lichtfelds des Bauteils vorgesehen ist und wobei eine zweite Teil-Vorrichtung für eine zweidimensionale oder dreidimensionale Darstellung vorgesehen ist. The invention further relates to a device for three-dimensional inspection of a component, wherein a first sub-device for detecting a 4-dimensional light field of the component is provided and wherein a second sub-device is provided for a two-dimensional or three-dimensional representation.
Technoskope dienen einer Sichtprüfung von Bauteilen an schwer zugänglichen Stellen. Ein Abbild der zu inspizierenden Stelle wird dabei über eine Folge von Stablinsen oder über Bildleiter einer Betrachtungslinse zugeführt, die von einem Prüfer oder einer Kamera beobachtet werden kann. Üblicherweise erzeugen Technoskope eine zweidimensionale Abbildung. Spezielle Bauformen mit zwei Bildleitern oder zumindest einem speziellen Bildleiteraufbau können über zwei Kameras auch ein dreidimensionales Abbild des zu untersuchenden Bauteils erzeugen. Die WO 96/01224 beschreibt ein Video-Endoskop mit zwei unter einem Winkel angeordneten Objektiven deren Bilder über ein V- oder ein Y-förmiges Prisma einer Kamera zugeführt werden, wobei dann jedes Bild nur die halbe Auflösung hat. Technoscopes are used to visually inspect components in hard to reach areas. An image of the point to be inspected is fed via a series of rod lenses or image conductors to a viewing lens, which can be observed by an examiner or a camera. Usually, technoscopes produce a two-dimensional image. Special designs with two image conductors or at least one special image conductor structure can also generate a three-dimensional image of the component to be examined via two cameras. WO 96/01224 describes a video endoscope with two lenses arranged at an angle whose images are fed via a V or a Y-shaped prism to a camera, in which case each image has only half the resolution.
Solche 3D-Technoskope sind jedoch wesentlich größer im Durchmesser als 2D- Technoskope. Weiterhin sind sie sehr anspruchsvoll in ihrer Kalibrierung, da es bei ungenauer Kalibrierung und Nachführung zu Irritation des Prüfers bis hin zu However, such 3D technoscopes are much larger in diameter than 2D technoscopes. Furthermore, they are very demanding in their calibration as it is at inaccurate calibration and tracking to irritation of the examiner up to
Kopfschmerzen kommen kann. Headache can come.
Eine Aufnahme eines 4D-Lichtfelds wird in einer Firmenbroschüre der Firma Raytrix beschrieben. Hierbei wird der Gegenstand über ein Objektiv und eine zusätzliches Mikrolinsen-Array in einer so genannten plenoptischen Kamera auf einen zweidimensionalen CCD-Sensor abgebildet. Der Aufbau einer solchen Kamera ist in dem Artikel „T. Adelson, J. Wang: Single lens Stereo with a plenoptic camera. IEEE Transactions on Pattern Analysis and Machine Intelligence, pp 99-106, 1992" beschrieben. Aus einem so erfaßten Datensatz können in Echtzeit Bilder mit unterschiedlicher A picture of a 4D light field is described in a company brochure by Raytrix. Here, the object is imaged via a lens and an additional microlens array in a so-called plenoptic camera on a two-dimensional CCD sensor. The construction of such a camera is described in the article "T. Adelson, J. Wang: Single lens stereo with a plenoptic camera. IEEE Transactions on Pattern Analysis and Machine Intelligence, pp 99-106, 1992 "
Schärfeebene erzeugt werden. Sharpness level can be generated.
Zu Anzeigen für eine dreidimensionale Darstellung von Daten besteht ein umfangreicher Stand der Technik. Beispielhaft beschreibt die DE19836886C2 verschiedene autostereoskopische Verfahren und die WO 1994/024601 A1 beschreibt eine Displays for a three-dimensional representation of data is an extensive state of the art. By way of example, DE19836886C2 describes various autostereoscopic methods and WO 1994/024601 A1 describes a
Lentikular-Anordnung zur autostereoskopischen Darstellung. Die US020030107712A1 beschreibt ein„lightfield display", mit dem für mehrere Personen Bilder autostereo- skopisch dargestellt werden können. Eine Wiedergabe dreidimensionaler Information mittels zwei Bildern unterschiedlicher Polarisation und einer zugehörigen Brille oder mittels eines wechselseitigen Darstellens zweier Bilder auf einem Bildschirm und einer zugehörigen Shutterbrille ist bekannt. Lenticular arrangement for autostereoscopic imaging. US 20020030107712 A1 describes a "lightfield display" with which images can be displayed autostereoscopically for a plurality of persons A reproduction of three-dimensional information by means of two images of different polarization and associated spectacles or by means of a mutual representation of two images on a screen and an associated shutter glasses known.
Es ist Aufgabe der Erfindung, ein Verfahren und eine Vorrichtung bereitzustellen, mit denen mit verringertem Aufwand und mit hoher Wiedergabequalität eine It is an object of the invention to provide a method and an apparatus with which with reduced effort and with high quality reproduction
dreidimensionale Darstellung bei einer Inspektion eines Bauteils erfolgen kann. three-dimensional representation can take place during an inspection of a component.
Offenbarung der Erfindung Disclosure of the invention
Die das Verfahren betreffende Aufgabe der Erfindung wird dadurch gelöst, dass aus den Daten des 4-dimensionalen Lichtfelds in einem Auswertesch ritt ein zweidimensionales oder dreidimensionales Bild aus einer vorgebbaren Perspektive oder eine Bildfolge entlang einer vorgebbaren Trajektorie erzeugt wird. Durch die Erzeugung der Daten für den Betrachter aus den Daten des 4D-Lichtfelds fallen Fehler durch eine für dreidimensionale Aufnahmen erforderliche gegenseitige Kalibrierung der zwei Aufnahmekanäle weg. Die Wiedergabequalität wird wesentlich erhöht und mögliche Irritationen eines Betrachters durch eine nicht einwandfrei justierte Optik fallen weg. Das Verfahren entkoppelt die Aufnahme von dreidimensionaler Bildinformation mit deren Informationsgehalt über die Ansicht eines Bauteils aus zwei Perspektiven („Disparitätsinformation") von der Bildwiedergabe. Bevorzugt ist das erfindungsgemäße Verfahren als Prüfverfahren bei der Inspektion von auf Fehler zu prüfenden Objekten, insbesondere deren Oberflächen, vorgesehen. The object of the invention relating to the method is achieved by generating a two-dimensional or three-dimensional image from a predefinable perspective or an image sequence along a predeterminable trajectory from the data of the 4-dimensional light field in an evaluation step. By generating the data for the viewer from the data of the 4D light field, errors arise due to mutual calibration of the two required for three-dimensional images Take channels away. The quality of reproduction is significantly increased and possible irritations of a viewer by an incorrectly adjusted optics are eliminated. The method decouples the recording of three-dimensional image information with its information content on the view of a component from two perspectives ("disparity information") of the image reproduction. <br/><br/> The method according to the invention is preferably provided as a test method for inspecting objects to be inspected for defects, in particular their surfaces ,
Werden die Daten des 4-dimensionalen Lichtfelds nach der Aufnahme gespeichert und erfolgt der Auswerteschritt zeitlich getrennt von der Aufnahme, kann die Betrachtung des Bauteils rein digital aufbereitet werden und es kann eine dem Betrachter geeignet erscheinende Perspektive nachträglich gewählt werden. Während der Inspektion des Bauteils kann bereits das 4D-Lichtfeld eines weiteren Bauteils erfasst werden. If the data of the 4-dimensional light field is stored after the recording and the evaluation step is carried out separately from the recording, the viewing of the component can be processed purely digitally and a perspective that seems appropriate to the viewer can subsequently be selected. During the inspection of the component, the 4D light field of another component can already be detected.
Wird in dem Auswerteschritt die Perspektive oder die Trajektorie von dem Betrachter während des Auswertesch ritts vorgegeben, kann dieser sich mittels eines Eingabegeräts interaktiv in dem Bauteil oder um das Bauteil herum bewegen. Hierbei kann ein 3D-Eingabegerät, wie beispielhaft eine 3D-Maus, eingesetzt werden. Bei einer Wiedergabe auf einem 2D-Monitor kann durch kleine Perspektivänderungen ein dreidimensionaler Eindruck oder zumindest eine Vorstellung von der räumlichen Anordnung entstehen. Der Benutzer kann auch eine Vorstellung des Gegenstands erhalten, indem er interaktiv entlang einer Trajektorie um das Bauteil herumfährt. Dieser räumliche Eindruck entsteht, wie dies in vereinfachter Form auch in If, in the evaluation step, the perspective or the trajectory is specified by the viewer during the evaluation step, the latter can interactively move in the component or around the component by means of an input device. Here, a 3D input device, such as a 3D mouse, are used. When playing back on a 2D monitor, small changes in perspective can create a three-dimensional impression or at least an idea of the spatial arrangement. The user can also get an idea of the item by interactively driving around the component along a trajectory. This spatial impression arises, as in a simplified form in
Programmen zur Darstellung von Architekturanordnungen im Außen- und Innenbereich bekannt ist, durch die man sich virtuell„bewegen" kann. Zusätzlich werden dort teilweise zur Verbesserung des Eindrucks auf einen dreidimensionalen Datensatz der Umgebung zusätzlich Texturen aus 2D-Aufnahmen aufgebracht. Bei der Aufnahme des Lichtfeldes ist die reale Textur aus der gewünschten Blickrichtung aufgenommen worden. Kleine Reflktanzunterschiede, wie beispielhaft an Störstellen, werden dabei in dem Lichtfeld aufgezeichnet und können damit nachträglich betrachtet werden. In addition, textures from 2D images are partially applied there to improve the impression on a three-dimensional data record of the environment in addition to the impression of the architectural arrangements in the outer and inner areas, by which one can "move." the real texture has been recorded from the desired viewing direction, small differences in reflectance, such as, for example, defects, are recorded in the light field and can therefore be viewed retrospectively.
Eine vereinfachte Ausführung des Verfahrens ist dadurch gekennzeichnet, dass in dem Auswertesch ritt das Bild dem Betrachter entlang einer vorgegebenen Trajektorie vorgeführt wird. Bei der Inspektion gleichartiger Bauteile wird so der Eingriff des Bedieners verringert und damit vereinfacht. Weiterhin werden Unterschiede und Fehler besonders gut wahrgenommen. A simplified embodiment of the method is characterized in that in the Auswertesch rode the image is presented to the viewer along a predetermined trajectory. In the inspection of similar components so the intervention of the Reduced operator and thus simplified. Furthermore, differences and mistakes are perceived particularly well.
Eine Weiterentwicklung des Verfahrens sieht vor, dass in dem Auswertesch ritt der Betrachter eine Fokusebene und/oder eine Schärfentiefe vorgibt und bei Bedarf interaktiv anpasst. Hierzu kann ein 3D-Eingabegerät, wie beispielhaft eine 3D-Maus, verwendet werden. Der Betrachter kann sich so bei der Inspektion einer Bohrung durch Wahl der Fokusebene in diese scheinbar hineinbewegen und sich durch Wahl der Schärfentiefe auf Teilbereiche konzentrieren. A further development of the method provides that in the evaluation step the observer specifies a focal plane and / or a depth of field and, if necessary, adapts it interactively. For this purpose, a 3D input device, such as a 3D mouse, can be used. The observer can thus apparently move into the inspection of a bore by choosing the focal plane in this and concentrate by selecting the depth of field on subregions.
Die die Vorrichtung betreffende Aufgabe der Erfindung wird dadurch gelöst, dass eine dritte Teil-Vorrichtung vorgesehen ist zur Erzeugung der zweidimensionalen oder dreidimensionalen Darstellung aus einer vorgebbaren Perspektive oder entlang einer vorgebbaren Trajektorie aus den Daten des 4-dimensionalen Lichtfelds. Die Wiedergabe der Bildinformation, beispielhaft für eine Vorrichtung für Videoprüftechnik, zeigt nicht das zu prüfende Bauteil während realer Bewegungen aus unterschiedlichen Ansichten sondern erzeugt die Ansichten aus dem 4D-Lichtfeld. Bei einem geeignet aufgezeichneten 4D-Lichtfeld ist kein Unterschied zwischen realer Bewegung und später aufbereiteter Ansicht erkennbar. Bevorzugt ist die erfindungsgemäße The object of the invention relating to the device is achieved in that a third sub-device is provided for generating the two-dimensional or three-dimensional representation from a predefinable perspective or along a predeterminable trajectory from the data of the 4-dimensional light field. The reproduction of the image information, as an example for a device for video testing, does not show the component to be tested during real movements from different views but generates the views from the 4D light field. In a suitably recorded 4D light field, no difference between real motion and later edited view is apparent. Preferably, the inventive
Vorrichtung als Sichtprüfvorrichtung bei der Inspektion von auf Fehler zu prüfenden Objekten, insbesondere deren Oberflächen, vorgesehen. Device as a visual inspection device in the inspection of objects to be tested for defects, in particular their surfaces, provided.
Ist ein Steuerelement zur Vorgabe der Perspektive oder der Trajektorie durch einen Benutzer mit der dritten Teil-Vorrichtung verbunden, kann der Betrachter das Bauteil aus unterschiedlichen Perspektiven betrachten und kann auch durch kleine Is a control for specifying the perspective or the trajectory by a user connected to the third part of the device, the viewer can view the component from different perspectives and can also by small
Änderungen der Perspektive auf einem zweidimensionalen Wiedergabegerät einen Eindruck von der räumlichen Anordnung erhalten. Übliche Hilfsmittel einer Changes in perspective on a two-dimensional display device get an idea of the spatial arrangement. Usual aids one
dreidimensionalen Wiedergabe, wie zusätzliche Brillen, können entfallen. Zur Three-dimensional rendering, such as extra glasses, can be omitted. to
Ansteuerung eines 3D-Wiedergabegeräts, wie beispielhaft eines Monitors mit Control of a 3D playback device, such as a monitor with
Lentikularvorsatz, können mit der Vorrichtung und dem Verfahren die erforderlichen Bilddateien bereitgestellt werden. Lenticular attachment, the necessary image files can be provided with the device and the method.
Die Erfindung wird im Folgenden anhand eines in der Figur dargestellten Ausführungsbeispiels näher erläutert. Es zeigt: Figur 1 eine schematische Ansicht einer Anordnung zur Aufnahme eines The invention will be explained in more detail below with reference to an embodiment shown in the figure. It shows: Figure 1 is a schematic view of an arrangement for receiving a
4D-Lichtfelds und zur Betrachtung eines Datensatzes  4D light field and for viewing a data set
Figur 1 zeigt in einer schematischen Darstellung eine Anordnung zur Aufnahme eines 4D-Lichtfelds 1 1 eines Objekts 10 mit einer Aufnahmeeinrichtung 12. Die Daten aus der Aufnahmeeinrichtung 12 werden über eine erste Datenübertragung 13 an eine Speichereinrichtung 14 übertragen und dort für eine spätere Auswertung gespeichert. Für die Auswertung durch einen Benutzer 21 werden die Daten, oder zumindest der im aktuellen Auswertesch ritt erforderliche Teil der Daten, bei Bedarf über eine zweite Datenübertragung 15 an eine 2D-Bildwiedergabeeinrichtung 16 übertragen und dort zweidimensional als 2D-Ansicht 17 dargestellt. Der Benutzer 21 kann über eine Trajektorieneingabe 19 an eine Bedien- und Recheneinheit 18 Befehle zur Änderung der 2D-Ansicht 17 dergestalt eingeben, dass er entlang vorwählbarer oder vorgegebener Trajektorien 2D-Ansichten 17 mit Ansichten des Objekts 10 dargestellt bekommt. Die notwendigen Daten werden dabei bei Bedarf aus der Speichereinrichtung 14 über die zweite Datenübertragung 15 an die 2D-Bildwiedergabe- einrichtung übermittelt und dort dargestellt. In der Vorstellung des Benutzers 21 entsteht so eine 3D-Rekonstruktion 20 des Objekts 10. Durch die im Vorfeld bereits erfolgte Aufnahme des kompletten 4D-Lichtfelds 1 1 des Objekts 10 muß lediglich auf Daten aus der Speichereinrichtung 14 zurückgegriffen werden um unterschiedliche 2D- Ansichten 17 zu erzeugen, die dem Benutzer 21 ermöglichen, eine 3D-Rekonstruktion 20 in seiner Vorstellung zu erzeugen. 1 shows a schematic representation of an arrangement for receiving a 4D light field 1 1 of an object 10 with a recording device 12. The data from the recording device 12 are transmitted via a first data transmission 13 to a memory device 14 and stored there for later evaluation. For the evaluation by a user 21, the data, or at least the part of the data required in the current evaluation step, is transmitted as required via a second data transmission 15 to a 2D image display device 16 and displayed there two-dimensionally as a 2D view 17. The user 21 can enter commands for changing the 2D view 17 via a trajectory input 19 to an operating and arithmetic unit 18 in such a way that he receives 2D views 17 with views of the object 10 along preselectable or predefined trajectories. If necessary, the necessary data is transmitted from the memory device 14 via the second data transmission 15 to the 2D image display device and displayed there. In the imagination of the user 21, a 3D reconstruction 20 of the object 10 is created. As a result of the previously recorded complete 4D light field 11 of the object 10, only data from the memory device 14 has to be used for different 2D views 17 which allow the user 21 to create a 3D reconstruction 20 in his imagination.

Claims

Ansprüche claims
1 . Verfahren zur dreidimensionalen Inspektion eines Bauteils, wobei ein 4-dimensio- nales Lichtfeld des Bauteils aufgenommen wird und wobei ein Bild des Bauteils auf einem für eine zweidimensionale oder dreidimensionale Darstellung vorgesehenen Wiedergabegerät angezeigt wird, dadurch gekennzeichnet, dass aus den Daten des 4-dimensionalen Lichtfelds in einem Auswertesch ritt ein zweidimensionales oder dreidimensionales Bild aus einer vorgebbaren Perspektive oder eine Bildfolge entlang einer vorgebbaren Trajektorie erzeugt wird. 1 . Method for three-dimensional inspection of a component, wherein a 4-dimensional light field of the component is recorded and wherein an image of the component is displayed on a display device provided for a two-dimensional or three-dimensional representation, characterized in that from the data of the 4-dimensional light field In an evaluation step, a two-dimensional or three-dimensional image is generated from a predefinable perspective or an image sequence along a predeterminable trajectory.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die Daten des 4- dimensionalen Lichtfelds nach der Aufnahme gespeichert werden und dass der Auswertesch ritt zeitlich getrennt von der Aufnahme erfolgt. 2. The method according to claim 1, characterized in that the data of the 4-dimensional light field are stored after the recording and that the Auswertesch ritt takes place temporally separated from the recording.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass in dem 3. The method according to claim 1 or 2, characterized in that in the
Auswertesch ritt die Perspektive oder die Trajektorie von einem Betrachter während des Auswerteschritts vorgegeben werden.  Auswertesch rode the perspective or the trajectory of a viewer during the evaluation step are given.
4. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass in dem 4. The method according to claim 1 or 2, characterized in that in the
Auswertesch ritt das Bild dem Betrachter entlang einer vorgegebenen Trajektorie vorgeführt wird.  Auswertesch rode the image is presented to the viewer along a predetermined trajectory.
5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass in dem Auswertesch ritt der Betrachter eine Fokusebene und/oder eine Schärfentiefe vorgibt. 5. The method according to any one of claims 1 to 4, characterized in that in the Auswertesch rode the viewer specifies a focal plane and / or a depth of field.
6. Vorrichtung zur dreidimensionalen Inspektion eines Bauteils, wobei eine erste Teil- Vorrichtung für eine Erfassung eines 4-dimensionalen Lichtfelds des Bauteils vorgesehen ist und wobei eine zweite Teil-Vorrichtung für eine zweidimensionale oder dreidimensionale Darstellung vorgesehen ist, dadurch gekennzeichnet, dass eine dritte Teil-Vorrichtung vorgesehen ist zur Erzeugung der zweidimensionalen oder dreidimensionalen Darstellung aus einer vorgebbaren Perspektive oder entlang einer vorgebbaren Trajektorie aus den Daten des 4-dimensionalen Lichtfelds. 6. A device for three-dimensional inspection of a component, wherein a first sub-device is provided for detecting a 4-dimensional light field of the component and wherein a second sub-device for a two-dimensional or three-dimensional representation is provided, characterized in that a third part Device is provided for generating the two-dimensional or three-dimensional representation from a predefinable perspective or along a predeterminable trajectory from the data of the 4-dimensional light field.
7. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, dass ein Steuerelement zur Vorgabe der Perspektive oder der Trajektorie durch einen Benutzer mit der dritten Teil-Vorrichtung verbunden ist. 7. The device according to claim 6, characterized in that a control for specifying the perspective or the trajectory is connected by a user with the third part device.
PCT/EP2012/065984 2011-09-01 2012-08-16 Method and device for the three-dimensional visual inspection of a component WO2013030002A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102011082021A DE102011082021A1 (en) 2011-09-01 2011-09-01 Method and device for the three-dimensional visual inspection of a component
DE102011082021.3 2011-09-01

Publications (1)

Publication Number Publication Date
WO2013030002A1 true WO2013030002A1 (en) 2013-03-07

Family

ID=46690510

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2012/065984 WO2013030002A1 (en) 2011-09-01 2012-08-16 Method and device for the three-dimensional visual inspection of a component

Country Status (2)

Country Link
DE (1) DE102011082021A1 (en)
WO (1) WO2013030002A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3364174A1 (en) 2017-02-15 2018-08-22 Christian Koller Optical inspection system and method for visual inspection of a specimen
US10354435B2 (en) 2015-12-23 2019-07-16 Interdigital Ce Patent Holdings Tridimensional rendering with adjustable disparity direction

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994024601A1 (en) 1993-04-14 1994-10-27 HEINRICH-HERTZ-INSTITUT FüR NACHRICHTENTECHNIK BERLIN GMBH Reproduction device
WO1996001224A1 (en) 1994-07-02 1996-01-18 Mcgill Technology Limited Dispensing apparatus
DE19836886C2 (en) 1998-08-14 2002-01-03 Dieter Just Process for autostereoscopic image generation and display
US20030107712A1 (en) 2001-12-11 2003-06-12 New York University Steerable lightfield display

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8497934B2 (en) * 2009-11-25 2013-07-30 Massachusetts Institute Of Technology Actively addressable aperture light field camera

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1994024601A1 (en) 1993-04-14 1994-10-27 HEINRICH-HERTZ-INSTITUT FüR NACHRICHTENTECHNIK BERLIN GMBH Reproduction device
WO1996001224A1 (en) 1994-07-02 1996-01-18 Mcgill Technology Limited Dispensing apparatus
DE19836886C2 (en) 1998-08-14 2002-01-03 Dieter Just Process for autostereoscopic image generation and display
US20030107712A1 (en) 2001-12-11 2003-06-12 New York University Steerable lightfield display

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
HUAMIN WANG H ET AL: "Space-Time Light Field Rendering", IEEE TRANSACTIONS ON VISUALIZATION AND COMPUTER GRAPHICS, IEEE SERVICE CENTER, LOS ALAMITOS, CA, US, vol. 13, no. 4, 1 July 2007 (2007-07-01), pages 697 - 710, XP011190842, ISSN: 1077-2626, DOI: 10.1109/TVCG.2007.1019 *
ISAKSEN A ET AL: "DYNAMICALLY REPARAMETERIZED LIGHT FIELDS", COMPUTER GRAPHICS. SIGGRAPH 2000 CONFERENCE PROCEEDINGS. NEW ORLEANS, LA, JULY 23 - 28, 2000; [COMPUTER GRAPHICS PROCEEDINGS. SIGGRAPH], NEW YORK, NY : ACM, US, 23 July 2000 (2000-07-23), pages 297 - 306, XP001003568, ISBN: 978-1-58113-208-3, DOI: 10.1145/344779.344929 *
LEVOY M ET AL: "LIGHT FIELD RENDERING", COMPUTER GRAPHICS PROCEEDINGS 1996 (SIGGRAPH). NEW ORLEANS, AUG. 4 - 9, 1996; [COMPUTER GRAPHICS PROCEEDINGS (SIGGRAPH)], NEW YORK, NY : ACM, US, 1 January 1996 (1996-01-01), pages 1 - 12, XP002913619 *
T. ADELSON; J. WANG: "Single lens stereo with a plenoptic camera", IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, 1992, pages 99 - 106
TAKAHASHI K ET AL: "Layered light-field rendering with focus measurement", SIGNAL PROCESSING. IMAGE COMMUNICATION, ELSEVIER SCIENCE PUBLISHERS, AMSTERDAM, NL, vol. 21, no. 6, 1 July 2006 (2006-07-01), pages 519 - 530, XP027934283, ISSN: 0923-5965, [retrieved on 20060701] *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10354435B2 (en) 2015-12-23 2019-07-16 Interdigital Ce Patent Holdings Tridimensional rendering with adjustable disparity direction
EP3364174A1 (en) 2017-02-15 2018-08-22 Christian Koller Optical inspection system and method for visual inspection of a specimen
WO2018149877A1 (en) 2017-02-15 2018-08-23 Christian Koller Optical inspection system and method for optically inspecting a test object

Also Published As

Publication number Publication date
DE102011082021A1 (en) 2013-03-07

Similar Documents

Publication Publication Date Title
DE102006055641B4 (en) Arrangement and method for recording and reproducing images of a scene and / or an object
EP2174188B1 (en) Apparatus for the automatic positioning of coupled cameras for three-dimensional image representation
DE19640936A1 (en) Position adaptive autostereoscopic monitor (PAM)
EP1333306A2 (en) Method and system for stereoscopic microscopy
WO2009149961A1 (en) Optical observation apparatus with multi-channel data insertion
DE102016117024B4 (en) Device for capturing a stereo image and method for adjusting the device
DE102012212801B4 (en) Multifocal display device and multifocal display method for three-dimensional display of an object
DE102011104216A1 (en) Method for three-dimensional acquisition of object to be utilized in entertainment field, involves creating and storing image data set comprising coding for images of objects, captured by optical acquisition unit at different polar angles
DE102006017003A1 (en) Endoscope for depth data acquisition in e.g. medical area, has modulation unit controlling light source based on modulation data so that source transmits modulated light signal and evaluation unit evaluating signal to estimate depth data
DE102006060553A1 (en) Test of a motor vehicle imaging system, to show the driver the conditions around the vehicle, uses a reference camera on a test drive to give stored images as reference images for projection and comparison
DE102012106890A1 (en) Three-dimensional representation of objects
JP2005026756A (en) Apparatus and method for outputting distortion in reproduced stereoscopic image, and program for outputting distortion in reproduced stereoscopic image
WO2013030002A1 (en) Method and device for the three-dimensional visual inspection of a component
DE102010024042B4 (en) Method and device for recording three-dimensional image material for different presentation sizes using the full depth budget
DE102004004806A1 (en) Electronic motion picture camera
EP1300108B1 (en) Method for obtaining, evaluating and analyzing sequences of vision
DE102012205130A1 (en) Method for automatically operating a monitoring system
DE102014107185A1 (en) Method for providing a three-dimensional topography model, method for viewing a topography representation of a topography model, visualization device and microscope system
DE3719329C2 (en)
DE102012108249A1 (en) Method for processing digital images of stereoscopic camera system, involves receiving two images from two partial cameras of stereoscopic camera system and determining disparities of same image elements between two images
DE102007055252A1 (en) To determine the gaps of a given object within a complex structure, e.g. an automobile production line, images are taken from different positions for the images to be processed with a database
DE102012102962B3 (en) Method for recording image in photo chip of e.g. microscope device, involves storing actually recorded pixel if correlating pixels of image and auxiliary image match with each other, and storing auxiliary image by auxiliary image sensor
DE102008022922A1 (en) Device for generating three dimensional representation of object, has imaging units arranged such that central beam of X-ray source and central beam of recording unit are brought for congruence
DE102018110640B4 (en) Method and microscope for imaging an object
DE202011105267U1 (en) Device for generating three-dimensional images

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12748212

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 12748212

Country of ref document: EP

Kind code of ref document: A1