DE102015217173A1 - Calibration system and inspection system - Google Patents

Calibration system and inspection system Download PDF

Info

Publication number
DE102015217173A1
DE102015217173A1 DE102015217173.6A DE102015217173A DE102015217173A1 DE 102015217173 A1 DE102015217173 A1 DE 102015217173A1 DE 102015217173 A DE102015217173 A DE 102015217173A DE 102015217173 A1 DE102015217173 A1 DE 102015217173A1
Authority
DE
Germany
Prior art keywords
image
projector
camera image
light source
calibration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102015217173.6A
Other languages
German (de)
Inventor
Linda Lacsivy
Ralf Zink
Axel Wendt
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102015217173.6A priority Critical patent/DE102015217173A1/en
Publication of DE102015217173A1 publication Critical patent/DE102015217173A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/93Detection standards; Calibrating baseline adjustment, drift correction
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • G01N2021/8835Adjustable illumination, e.g. software adjustable screen

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

In einem Kalibriersystem (12) für eine optische Inspektionsanlage (2) mit Lichtquelle (4), Streukörper (6), Inspektionsraum für ein Versuchsobjekt (8), und Kamera (10), die ein IST-Kamerabild (24) des beleuchteten Versuchsobjekts (8) erzeugt, ist die Lichtquelle (4) ein Projektor oder Lichtquelle (4) und Streukörper (6) sind zusammen ein Display, und das Kalibriersystem (12) enthält einen Projektoranschluss (14) für ein Projektorbildes (20), einen Kameraanschluss (16) für ein IST-Kamerabild (24), und eine Kalibriereinheit (18) zur Ermittlung des Projektorbildes (20) in einem Kalibrierbetrieb derart, dass das IST-Kamerabild (24) dem SOLL-Kamerabild (26) entspricht.
Eine oben genannte Inspektionsanlage (2) enthält ein erfindungsgemäßes Kalibriersystem (12).
In a calibration system (12) for an optical inspection system (2) with a light source (4), scattering body (6), inspection space for a test object (8), and camera (10) which has an actual camera image (24) of the illuminated test object ( 8), the light source (4) is a projector or light source (4) and diffusers (6) together form a display, and the calibration system (12) includes a projector port (14) for a projector image (20), a camera port (16 ) for an actual camera image (24), and a calibration unit (18) for determining the projector image (20) in a calibration operation such that the actual camera image (24) corresponds to the target camera image (26).
An above-mentioned inspection system (2) contains a calibration system (12) according to the invention.

Figure DE102015217173A1_0001
Figure DE102015217173A1_0001

Description

Stand der TechnikState of the art

Die Erfindung betrifft ein Kalibriersystem für eine optische Inspektionsanlage sowie eine optische Inspektionsanlage. The invention relates to a calibration system for an optical inspection system and an optical inspection system.

Bei der automatischen optischen Inspektion (AOI) in der Fertigung müssen viele unterschiedliche Fehlerbilder erkannt werden. Dazu ist es oft notwendig, dieselbe Ansicht eines Bauteils mit mehreren Beleuchtungssituationen aufzunehmen. Auf dem Markt werden Beleuchtungen für unterschiedliche Beleuchtungssituationen angeboten, beispielsweise für Auflicht, Dunkelfeld und photometrische Deflektometrie. Automated optical inspection (AOI) in manufacturing requires many different types of defects to be detected. For this it is often necessary to take the same view of a component with several lighting situations. Illuminations for different lighting situations are offered on the market, for example incident light, dark field and photometric deflectometry.

Offenbarung der ErfindungDisclosure of the invention

Im Rahmen der Erfindung wird ein Kalibriersystem für eine optische Inspektionsanlage gemäß Anspruch 1 vorgeschlagen. Die optische Inspektionsanlage umfasst eine Lichtquelle, einen von der Lichtquelle beleuchtbaren Streukörper und einen Inspektionsraum für ein Versuchsobjekt. Im Inspektionsraum ist das Versuchsobjekt platzierbar, um optisch inspiziert zu werden. Das Versuchsobjekt ist im Inspektionsraum indirekt von demjenigen Licht der Lichtquelle beleuchtbar, welches vom Streukörper gestreut wird. Die Inspektionsanlage enthält auch eine Kamera. Von der Kamera ist ein IST-Kamerabild des beleuchteten Versuchsobjekts erzeugbar. Die Lichtquelle ist ein Projektor. Alternativ sind Lichtquelle und Streukörper zusammen als Display ausgeführt. Das System aus Projektor und Streukörper ist dann durch einen Monitor am Ort des Streukörpers ersetzt. Dort können auch mehrere Monitore verwendet werden, die dann jeweils eine Fläche des Streukörpers, die insbesondere eben und insbesondere rechteckig ausgeführt ist, ersetzen bzw. darstellen. So können Projektoren und Streukörper durch handelsübliche Monitore beziehungsweise Displays ersetzt werden.In the context of the invention, a calibration system for an optical inspection system according to claim 1 is proposed. The optical inspection system comprises a light source, a scattering body which can be illuminated by the light source and an inspection space for a test object. In the inspection room, the test object can be placed in order to be optically inspected. The test object is indirectly illuminated in the inspection room by that light of the light source, which is scattered by the scattering body. The inspection system also includes a camera. An actual camera image of the illuminated test object can be generated by the camera. The light source is a projector. Alternatively, the light source and diffuser are designed together as a display. The system of projector and diffuser is then replaced by a monitor at the location of the scatterer. There, several monitors can be used, which then replace or represent each one surface of the scattering body, which is in particular flat and in particular rectangular. Thus projectors and scattering bodies can be replaced by commercially available monitors or displays.

Das Kalibriersystem enthält folgende Komponenten: einen Projektoranschluss zur Abgabe eines von der Lichtquelle- bzw. der Lichtquelle und dem Streukörper- als Licht auszustrahlenden Projektorbildes, einen Kameraanschluss zum Empfang des von der Kamera aufgenommenen IST-Kamerabildes und eine Kalibriereinheit zur Ermittlung des – ggf. korrigierten – Projektorbildes anhand des IST-Kamerabildes und eines SOLL-Kamerabildes in einem Kalibrierbetrieb. Die Ermittlung erfolgt dabei derart, dass das IST-Kamerabild dem SOLL-Kamerabild entspricht. "Entsprechen" kann schließt hierbei auch ein, dass das IST-Kamerabild zumindest dem SOLL-Kamerabild bis auf tolerierbare Abweichungen angenähert wird. The calibration system contains the following components: a projector connection for emitting a projector image to be emitted by the light source or the light source and the scatterer as light, a camera connection for receiving the actual camera image recorded by the camera, and a calibration unit for determining the - possibly corrected - Projector image based on the actual camera image and a target camera image in a calibration mode. The determination takes place in such a way that the actual camera image corresponds to the target camera image. "Corresponding to" can also include that the actual camera image is at least approximated to the target camera image up to tolerable deviations.

Das IST-Kamerabild enthält also ein Abbild des beleuchteten Versuchsobjekts, wobei das Versuchsobjekt mit Licht bestrahlt ist, welches ursprünglich vom Projektorbild beziehungsweise Projektor stammt, jedoch nicht direkt auf das Versuchsobjekt trifft, sondern zunächst vom Streukörper gestreut wird, um erst dann das Versuchsobjekt zu treffen. The actual camera image thus contains an image of the illuminated test object, the test object being irradiated with light which originally originated from the projector image or projector, but does not strike the test object directly, but is initially scattered by the scattering body, only then to hit the test object ,

Das SOLL-Kamerabild kann entweder tatsächlich ein vorhandenes Bild sein, aber auch als virtuelles Bild bezüglich seiner Eigenschaften, z.B. "gleichmäßige Helligkeit eines Schachbrettmusters" oder "gerade Kante eines Abbildungsbereiches" usw. vorliegen. Das SOLL-Bild entartet im letzten Fall dann zu bestimmten im IST-Bild einzuhaltenden, insbesondere mathematischen – Bedingungen.The CUSTOM camera image can either be actually an existing image, but also as a virtual image in terms of its properties, e.g. "uniform brightness of a checkerboard pattern" or "straight edge of an imaging area", etc. are present. In the latter case, the target image degenerates to certain, in particular mathematical, conditions to be observed in the actual image.

Die Erfindung beruht auf folgenden Überlegungen und Erkenntnissen:
Um die Flexibilität eines AOI-Systems zu erhöhen, sollen programmierbare Beleuchtungen verwendet werden, insbesondere handelsübliche Displays, z.B. Monitore oder Projektoren, z.B. Beamer. Damit lassen sich frei wählbare Beleuchtungssituationen erzeugen. Aufgrund verschiedener Faktoren wie Abstrahlcharakteristik und geometrische Beleuchtungsanordnung müssen diese programmierbaren Beleuchtungen radiometrisch und geometrisch kalibriert werden. Hierzu wird ein Kalibriersystem vorgeschlagen, mit welchem ein entsprechendes Kalibrierverfahren durchführbar ist, gemäß dem Bilder der Beleuchtungssituation mit einer unkalibrierten Kamera aufgenommen und ausgewertet werden.
The invention is based on the following considerations and findings:
In order to increase the flexibility of an AOI system, programmable lighting should be used, in particular commercially available displays, for example monitors or projectors, eg projectors. This allows freely selectable lighting situations. Due to various factors such as radiation characteristics and geometrical illumination arrangement, these programmable illuminations must be calibrated radiometrically and geometrically. For this purpose, a calibration system is proposed with which a corresponding calibration method can be carried out according to which images of the lighting situation are recorded and evaluated with an uncalibrated camera.

Ziel der Erfindung ist es, eine flexiblere Inspektionsanlage, insbesondere einen flexibleren Streukörper, zu erreichen, der mit einfachen, kostengünstigen Elementen realisiert werden kann. Eine Möglichkeit ist die Beleuchtung des Streukörpers mit einem Projektor bzw. Beamer als Lichtquelle beziehungsweise einem Streukörper in Form eines Pyramidenstumpfes, insbesondere aus Plexiglas zu realisieren. Die optische Inspektionsanlage hat dank des Kalibriersystems damit eine höhere Flexibilität in der Parametrisierung der Beleuchtung, womit die Einsatzbreite vergrößert wird und eine kostengünstigere Lösung vorliegt. Ermöglicht wird dies durch den Einsatz des Kalibrierverfahrens, welches mit Hilfe des Kalibriersystems durchführbar ist. Das Kalibrierverfahren optimiert die funktionale Beziehung zwischen Beleuchtungsflächen (Streukörper), dem Versuchsobjekt und dem resultierenden IST-Kamerabild. Für das Kalibrierverfahren ist das Versuchsobjekt insbesondere eine Kugel, insbesondere spiegelnd ausgebildet und insbesondere aus Metall.The aim of the invention is to achieve a more flexible inspection system, in particular a more flexible diffuser, which can be realized with simple, inexpensive elements. One possibility is to realize the illumination of the scattering body with a projector or beamer as the light source or a scattering body in the form of a truncated pyramid, in particular of Plexiglas. Thanks to the calibration system, the optical inspection system thus has greater flexibility in the parameterization of the illumination, thus increasing the range of application and offering a more cost-effective solution. This is made possible by the use of the calibration procedure, which can be carried out with the help of the calibration system. The calibration procedure optimizes the functional relationship between illumination surfaces (scattering body), the test object and the resulting ACTUAL camera image. For the calibration method, the test object is, in particular, a sphere, in particular of a mirror-like design, and in particular of metal.

Gemäß der Erfindung ist es möglich, ein Projektorbild oder Displaybild so zu generieren, dass dieses, wenn es auf den Streukörper aufgestrahlt wird bzw. von diesem abgegeben wird, dazu führt, dass das von der Kamera aufgenommene IST-Kamerabild des beleuchteten Versuchsobjekts, insbesondere der spiegelnden Kalibrierkugel, einem gewünschten SOLL-Kamerabild entspricht. Damit ist es möglich, eine Vielzahl gewünschter Beleuchtungsverteilungen zu erzeugen. Wenn dann im regulären Betrieb anstatt der Kalibrierkugel ein zu untersuchendes Bauteil als Versuchsobjekt an der entsprechenden Stelle positioniert wird, kann es für die Inspektionsaufgabe optimal beleuchtet werden.According to the invention, it is possible to generate a projector image or display image in such a way that, when it is irradiated onto or emitted from the scattering body, it results in that the actual camera image of the illuminated test object, in particular the specular calibration sphere, taken by the camera corresponds to a desired target camera image. This makes it possible to produce a large number of desired illumination distributions. If, during normal operation, a component to be examined is positioned at the corresponding location as a test object instead of the calibration sphere, it can be optimally illuminated for the inspection task.

Das erfindungsgemäße Kalibriersystem und das mit ihm ausführbare Verfahren führt im Vergleich zum Stand der Technik zu einem AOI-System mit höherer Flexibilität in der Parametrisierung der Beleuchtung. Damit wird die Einsatzbreite des AOI-Systems vergrößert und es liegt eine kostengünstigere Lösung vor, da handelsübliche Projektoren, und zur Kalibrierung handelsübliche Versuchsobjekte, insbesondere Kugeln, und Kameras eingesetzt werden können.The calibration system according to the invention and the method that can be carried out with it result in comparison to the prior art to an AOI system with greater flexibility in the parametrization of lighting. Thus, the range of application of the AOI system is increased and there is a more cost-effective solution because commercially available projectors, and for calibration commercial test objects, especially balls, and cameras can be used.

In einer bevorzugten Ausführungsform ist die Kalibriereinheit zur, insbesondere iterativen, Ermittlung des Projektorbildes ausgehend von einem Startbild ausgebildet, wobei das Startbild ein homogen helles einfarbiges Bild oder ein Muster, insbesondere ein Schachbrettmuster enthält. Ziel ist es dabei, ausgehend vom Startbild durch Veränderung des Projektorbildes, also die o.g. Ermittlung eines korrigierten Projektorbildes, zu einem IST-Kamerabild in Form des SOLL-Kamerabildes zu gelangen, dass dann auch ein homogen helles einfarbiges Abbild oder ein Abbild in Form des Musters, z.B. eines Schachbrettmusters enthält. Das Abbild füllt dann das Abbild des Versuchsobjekts zumindest teilweise aus. Anhand eines homogen einfarbigen und hellen Musters oder Schachbrettmusters lassen sich optische Abbildungen besonders gut kalibrieren. Das Schachbrettmuster eignet sich in der Regel sehr gut, aber grundsätzlich kann ein beliebiges Muster verwendet werden also auch z.B. weitere geometrische Formen wie Rauten oder sonstige beliebige Muster.In a preferred embodiment, the calibration unit is designed for, in particular iterative, determination of the projector image starting from a start image, wherein the start image contains a homogeneously bright single-color image or a pattern, in particular a checkerboard pattern. The goal here is, starting from the start image by changing the projector image, so the o.g. Determining a corrected projector image to get to an actual camera image in the form of the target camera image that then also a homogeneous bright single-color image or an image in the form of the pattern, e.g. a checkerboard pattern contains. The image then at least partially fills out the image of the test object. Using a homogeneous monochrome and bright pattern or checkerboard pattern, optical images can be calibrated particularly well. The checkerboard pattern is usually very good, but in principle any pattern can be used, including e.g. other geometric shapes such as diamonds or any other pattern.

In einer bevorzugten Ausführungsform enthält die Kalibriereinheit mindestens zwei, hintereinander in Reihe geschaltete lineare Abbildungseinheiten. Jede der Abbildungseinheiten enthält eine – insbesondere inverse – Abbildungseigenschaft eines einzelnen linearen physikalischen Abbildungsphänomens, welches die Abbildung des Projektorbildes über die Lichtquelle, den Streukörper, das Versuchsobjekt und die Kamera auf das IST- bzw. in theoretischer Form auf das SOLL-Kamerabild enthält. In a preferred embodiment, the calibration unit contains at least two linear imaging units connected in series one behind the other. Each of the imaging units contains a - in particular inverse - imaging property of a single linear physical imaging phenomenon, which contains the image of the projector image via the light source, the scatterer, the test object and the camera on the ACTUAL or in theoretical form on the target camera image.

Diese Variante der Erfindung beruht auf folgenden Überlegungen und Erkenntnissen: Die Variante beschreibt einen Lösungsweg, welcher die Abbildung des Projektorbildes auf das IST-Kamerabild in mehrere lineare Abbildungen aufspaltet, die jeweils ein einzelnes physikalisches Phänomen beschreiben. Diese Einzelabbildungen lassen sich experimentell gut bestimmen. Bei einem derartigen Lösungsweg kann die sogenannte „point spread function“ vernachlässigt werden. Dadurch ist das zu lösende Problem, nämlich das IST-Kamerabild an das SOLL-Kamerabild durch Veränderung des Projektorbildes anzugleichen, gut konditioniert und die bei der Berechnung verbleibenden großen und dünn besetzten Matrizen sind invertierbar. This variant of the invention is based on the following considerations and findings: The variant describes a solution path which splits the image of the projector image onto the actual camera image into a plurality of linear images which each describe a single physical phenomenon. These individual images can be determined experimentally well. In such an approach, the so-called "point spread function" can be neglected. Thus, the problem to be solved, namely to equalize the actual camera image to the target camera image by changing the projector image, is well conditioned and the large and sparse matrices remaining in the calculation are invertible.

Diese Variante der Erfindung beruht auch auf der Erkenntnis, dass sich die mathematische Abbildung, welche beschreibt, welcher Teil der Lichtquelle, z.B. welches Pixel eines Digitalprojektors an welcher Stelle und mit welcher Helligkeit in der Kamera beobachtet wird, sich mit Hilfe einer linearen Abbildung beschreiben lassen sollte. In dieser Abbildung sind mehrere physikalische Sachverhalte enthalten. Dazu gehören die radiometrischen und geometrischen Beziehungen, sowie die point spread function, die die Unschärfe bei der Abbildung beschreibt. Die hierbei entstehende mathematische Matrix ist sehr groß, dünn besetzt und schlecht konditioniert. Ein erster untersuchter Lösungsweg versucht, über die direkte Bestimmung der Abbildung mit Hilfe von vielen gemessenen Punktantworten zu arbeiten. Dieser Lösungsweg erscheint bisher wenig erfolgversprechend. Der erfindungsgemäße Lösungsweg hingegen führt zu zufriedenstellenden Lösungen. In der Praxis hat sich gezeigt, dass handelsübliche Lichtquellen, also Beamer, Projektoren und Monitore, nicht ausreichend linear sind, weshalb im Kalibriersystem beziehungsweise dem entsprechenden Kalibrierverfahren zumindest radiometrische Korrekturen iterativ ermittelt werden. This variant of the invention is also based on the recognition that the mathematical mapping which describes which part of the light source, e.g. which pixel of a digital projector is observed at which position and with which brightness in the camera should be described by means of a linear image. This figure contains several physical facts. These include the radiometric and geometric relationships, as well as the point spread function, which describes the blur in the image. The resulting mathematical matrix is very large, sparse and poorly conditioned. A first attempted solution attempts to work through the direct determination of the mapping with the help of many measured point answers. This solution seems to be of little promise. The inventive approach, however, leads to satisfactory solutions. In practice, it has been found that commercially available light sources, that is to say beamer, projectors and monitors, are not sufficiently linear, which is why at least radiometric corrections are determined iteratively in the calibration system or the corresponding calibration method.

In einer Variante dieser Ausführungsform ist die Abbildungseinheit eine solche, die die Bildhelligkeit im IST-Kamerabild beeinflusst. Die Abbildungseinheit ist dazu ausgebildet, die Helligkeitsverteilung im Projektorbild derart zu verändern, dass Helligkeitsunterschiede zwischen IST-Kamerabild und SOLL-Kamerabild ausgeglichen werden. Das zugrunde liegende physikalische Abbildungsphänomen lässt sich wie folgt beschreiben: Ein homogen helles Projektorbild wird im IST-Kamerabild nicht mehr homogen hell dargestellt. Stattdessen erscheinen helle und dunkle Stellen im Kamerabild. Der Helligkeitsverlauf in einer Bildzeile des IST-Kamerabildes zeigt beispielsweise keinen konstanten Verlauf. Somit handelt es sich um ein inhomogenes Kamerabild. Dieses Phänomen wird als radiometrischer Verlauf bezeichnet. In a variant of this embodiment, the imaging unit is one that influences the image brightness in the actual camera image. The imaging unit is designed to change the brightness distribution in the projector image such that brightness differences between the actual camera image and the target camera image are compensated. The underlying physical imaging phenomenon can be described as follows: A homogeneously bright projector image is no longer displayed homogeneously bright in the actual camera image. Instead, light and dark spots appear in the camera image. For example, the brightness progression in a picture line of the actual camera image does not show a constant course. Thus, it is an inhomogeneous camera image. This phenomenon is called radiometric history.

Durch inverse Anpassung des Projektorbildes wird die Helligkeit an den korrespondierenden Stellen so verändert, dass sich im IST-Kamerabild die gewünschte homogene Helligkeit einstellt.By inversely adjusting the projector image, the brightness is changed at the corresponding points so that the desired homogeneous brightness is set in the actual camera image.

In einer weiteren Variante dieser Ausführungsform ist die Abbildungseinheit eine die Bildverzerrung im IST-Kamerabild beeinflussende Abbildungseinheit. Die Abbildungseinheit ist dazu ausgebildet, eine Bildposition eines Bildinhalts im Projektorbild derart zu verändern, dass Verzerrungen zwischen IST-Kamerabild und SOLL-Kamerabild ausgeglichen werden. Mit anderen Worten findet eine zur Verzerrung inverse Vorverzerrung im Projektorbild statt, dass schlussendlich das IST-Kamerabild wieder gewünscht verzerrungsfrei ist. Das zugrunde liegende physikalische Abbildungsphänomen ist hier eine geometrische Verzerrung, die im IST-Kamerabild sichtbar ist. Wenn als Start-Eingangs-, das heißt Projektorbild, beispielsweise ein Schachbrett mit geraden Linien vorgegeben wird, werden im Kamerabild gekrümmte Linien wahrgenommen. Die ursprünglich rechteckige Gestalt des Schachbretts verformt sich teilweise kissenförmig, teilweise aber auch tonnenförmig. Dieses Phänomen ist von vielen Faktoren abhängig, beispielsweise von der Form des Versuchsobjekts sowie der Leuchtflächen des Streukörpers, aber auch von der Lage des Streukörpers beziehungsweise seiner Leuchtflächen im Raum. In a further variant of this embodiment, the imaging unit is an imaging unit influencing the image distortion in the actual camera image. The imaging unit is designed to change an image position of an image content in the projector image such that distortions between the actual camera image and the target camera image are compensated. In other words, there is a distortion inverse predistortion in the projector image instead that finally the actual camera image is again desired distortion-free. The underlying physical imaging phenomenon here is a geometric distortion that is visible in the actual camera image. If a start-up, ie projector image, for example, a chess board is specified with straight lines, curved lines are perceived in the camera image. The originally rectangular shape of the chessboard deforms partly pillow-shaped, but sometimes also barrel-shaped. This phenomenon is dependent on many factors, for example on the shape of the test subject and the luminous surfaces of the scatterer, but also on the position of the scatterer or its luminous surfaces in space.

In einer weiteren Variante dieser Ausführungsform ist die Abbildungseinheit eine einen Bildinhalt im Projektorbild interpolierende und/oder extrapolierende Abbildungseinheit. Die Abbildungseinheit ist dazu ausgebildet, Bildinhalte des IST-Kamerabildes zum SOLL-Kamerabild hin zu ergänzen. Durch verschiedene parasitäre Effekte bei der Anpassung des Projektorbildes können Teile des Streukörpers nicht mehr beleuchtet sein. Im IST-Kamerabild entstehen unerwünscht unbeleuchtete Bereiche. Gemäß der vorliegenden Variante können entsprechend bisher nicht beleuchtete Bereiche interpoliert bzw. extrapoliert werden, sodass schlussendlich ein vollständig ausgeleuchtetes IST-Kamerabild entsteht, dessen Leuchteigenschaften auch an jeder einzelnen Stelle beeinflussbar sind. Eine Interpolation findet statt bei unbeleuchteten Lücken in der Ausleuchtung, eine Extrapolation, wenn Randbereiche fehlen, d.h. die ausgeleuchtete Fläche sich über den aktuellen Rand weiter nach außen erstrecken soll. Diese Variante der Erfindung wird auch genutzt, wenn z.B. der Streukörper nicht weit genug bis zu einem gewünschten Randbereich hin beleuchtet ist. Ziel dieser Erfindungsvariante ist es also den Streukörper oder Bereiche dessen vollständig und flächendeckend bzw. lückenfrei auszuleuchten.In a further variant of this embodiment, the imaging unit is an imaging unit which interpolates and / or extrapolates an image content in the projector image. The imaging unit is designed to supplement image contents of the actual camera image to the target camera image. Due to various parasitic effects when adjusting the projector image parts of the scattering body can no longer be illuminated. In the actual camera image undesirable unlighted areas arise. According to the present variant, previously unilluminated areas can be interpolated or extrapolated, so that finally a completely illuminated actual camera image is formed whose luminous properties can also be influenced at each individual location. Interpolation takes place with unlighted gaps in the illumination, extrapolation if edge areas are missing, i. the illuminated area should extend further beyond the current edge. This variant of the invention is also used when e.g. the diffuser is not illuminated far enough to a desired edge area. The aim of this variant of the invention is therefore to illuminate the scattering body or areas thereof completely and comprehensively and without gaps.

In einer weiteren Variante dieser Ausführungsform ist die Abbildungseinheit eine einen Bildinhalt des Projektorbildes beschneidende Abbildungseinheit. Diese ist dazu ausgebildet, die Ausdehnung eines Bildinhaltes im Projektorbild auf eine derartige Fläche zu begrenzen, dass das auf den Streukörper projizierte Projektorbild lediglich eine gewünschte Teilfläche des Streukörpers beleuchtet. Dadurch wird dann auch die Ausdehnung des Bildinhaltes beleuchteter Bereiche im IST-Kamerabild auf die Ausdehnung des Bildinhaltes des SOLL-Kamerabild begrenzt.In a further variant of this embodiment, the imaging unit is an imaging unit which trims an image content of the projector image. This is designed to limit the extent of an image content in the projector image to an area such that the projector image projected onto the scattering body only illuminates a desired partial area of the scattering body. As a result, the extent of the image content of illuminated areas in the actual camera image is then limited to the extent of the image content of the desired camera image.

So kann insbesondere für die oben genannte Variante mit mehreren Projektoren, welche jeweilige Teilflächen des Streukörpers bestrahlen, eine überlappungs- und lückenfreie Beleuchtung des Streukörpers realisiert werden. So können durch parasitäre Effekt des Kalibrierverfahrens z.B. Beleuchtungsbereiche entstehen, welche einen Bereich des Streukörpers bestrahlen, dessen Bestrahlung nicht erwünscht ist. Dies trifft insbesondere für Streukörper zu, welche von mehreren unabhängigen Lichtquellen bestrahlt werden. Die Bestrahlung des Streukörpers durch eine der Lichtquellen ist dann auf einen bestimmten genau abgegrenzten Bereich zu begrenzen. Ziel dieser Erfindungsvariante ist es also den Streukörper oder Bereiche dessen nur bis zu einem gewünschten Rand hin auszuleuchten.Thus, in particular for the abovementioned variant with a plurality of projectors which irradiate respective subareas of the scattering body, an overlapping and gap-free illumination of the scattering body can be realized. Thus, by parasitic effect of the calibration procedure, e.g. Illumination areas arise which irradiate a region of the scattering body whose irradiation is not desired. This is especially true for scatterers which are irradiated by several independent light sources. The irradiation of the scattering body by one of the light sources is then limited to a certain well-defined area. The aim of this variant of the invention is therefore to illuminate the scattering body or areas thereof only up to a desired edge.

Im Rahmen der Erfindung wird auch eine Inspektionsanlage gemäß Patentanspruch 8 vorgeschlagen. Die Inspektionsanlage ist wie oben erläutert aufgebaut und enthält außerdem ein Kalibriersystem gemäß der Erfindung. Die Inspektionsanlage weist damit die Eigenschaften und Vorteile auf, die sinngemäß bereits oben im Zusammenhang mit dem Kalibriersystem beziehungsweise dem durch dieses durchgeführte Kalibrierverfahren ausführlich erläutert wurden.In the context of the invention, an inspection system according to claim 8 is also proposed. The inspection system is constructed as explained above and also includes a calibration system according to the invention. The inspection system thus has the properties and advantages which have been explained in detail above in connection with the calibration system or the calibration procedure carried out by it.

In einer bevorzugten Ausführungsform ist das Versuchsobjekt für den Kalibrierbetrieb ein lichtreflektierendes Versuchsobjekt. Insbesondere handelt es sich um ein lichtspiegelndes Versuchsobjekt, insbesondere eine Kugel. Derartige Versuchsobjekte eignen sich besonders gut für die entsprechenden Kalibrierschritte, da insbesondere die spiegelnde Oberfläche eine tatsächliche Wiedergabe des am Streukörper erzeugten Streulichts liefert und vor allem eine Kugel mathematisch einfach im Kalibrierverfahren berücksichtigt werden kann.In a preferred embodiment, the test object for the calibration operation is a light-reflecting test object. In particular, it is a light-reflecting test object, in particular a ball. Such experimental objects are particularly well suited for the corresponding calibration steps, since in particular the reflecting surface provides an actual reproduction of the scattered light generated at the scattering body and, above all, a sphere can be mathematically easily taken into account in the calibration procedure.

In einer weiteren Ausführungsform ist der Streukörper für Licht transmissiv ausgebildet, das heißt, das von der Lichtquelle auf den Streukörper eingestrahlte Licht durchdringt diesen, um ausschließlich indirekt, d.h. erst nach der Durchdringung gestreut zum Versuchsobjekt zu gelangen und zu dessen Beleuchtung zu dienen. Der Streukörper ist insbesondere zwischen Lichtquelle und Versuchsobjekt angeordnet. Insbesondere ist der Streukörper ein Pyramidenstumpf einer insbesondere quadratischen, insbesondere geraden Pyramide. Der Pyramidenstumpf zeichnet sich durch jeweilige ebene Teilflächen aus, welche entweder leicht durch einen Projektor beleuchtbar sind oder auch als Displays bzw. Bildschirme ausführbar sind. Insbesondere wird hierbei jede ebene Pyramidenstumpffläche einzeln von einer jeweiligen Lichtquelle, insbesondere einem jeweiligen Projektor, beleuchtet oder bildet ein jeweiliges separates Display. In a further embodiment, the scattering body is designed to be transmissive for light, that is to say that the light radiated from the light source onto the scattering body penetrates the latter in order to reach the test object scattered only indirectly, that is to say scattered, and to serve for its illumination. The scattering body is arranged in particular between the light source and the test object. In particular, the scattering body is a truncated pyramid of a particular square, in particular straight pyramid. The truncated pyramid is characterized by respective planar partial surfaces, which are either easily illuminated by a projector or as displays or screens are executable. In particular, will In this case, each flat truncated pyramid surface is individually illuminated by a respective light source, in particular a respective projector, or forms a respective separate display.

Weitere Merkmale, Wirkungen und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung eines bevorzugten Ausführungsbeispiels der Erfindung sowie der beigefügten Figuren. Dabei zeigen in einer schematischen Further features, effects and advantages of the invention will become apparent from the following description of a preferred embodiment of the invention and the accompanying figures. This show in a schematic

Prinzipskizze:Schematic diagram:

1 ein Blockdiagramm einer Inspektionsanlage mit Kalibriersystem in einem Kalibrierbetrieb, 1 a block diagram of an inspection system with a calibration system in a calibration operation,

2 den geometrischen Aufbau der Inspektionsanlage aus 1, 2 the geometric structure of the inspection system 1 .

3 ein Projektorbild als Startbild, 3 a projector picture as start picture,

4 das zugehörige Ist-Kamerabild, 4 the associated actual camera image,

5 ein Projektorbild mit veränderter Helligkeitsverteilung, 5 a projector image with a changed brightness distribution,

6 das zugehörige Ist-Kamerabild, 6 the associated actual camera image,

7 ein weiteres Ist-Kamerabild mit Verzerrungen, 7 another actual camera image with distortions,

8 ein vorverzerrtes Projektorbild mit Artefakten, 8th a pre-distorted projector image with artifacts,

9 das zugehörige Ist-Kamerabild, 9 the associated actual camera image,

10 ein Ist-Kamerabild bei homogen hellem Projektorbild mit unerwünscht beleuchteten Bereichen, 10 an actual camera image with a homogeneously bright projector image with undesired illuminated areas,

11 ein randbeschnittenes homogen helles Projektorbild, 11 a border-cut homogeneous bright projector image,

12 das zugehörige IST-Kamerabild, 12 the associated actual camera image,

13 das Projektorbild aus 11 mit modifiziertem Schachbrettmuster, 13 the projector image 11 with modified checkerboard pattern,

14 das zugehörige Ist-Kamerabild, 14 the associated actual camera image,

1517 Ist-Kamerabilder des Projektorbildes aus 11 bei iterativer Helligkeitsanpassung nach der 1. (15), 4. (16) und 16. Iteration (17). 15 - 17 Is camera images of the projector image off 11 with iterative brightness adjustment after the 1st 15 (4.) 16 ) and 16th iteration ( 17 ).

1 zeigt in einer funktionalen Blockdarstellung eine optische Inspektionsanlage 2 mit einer Lichtquelle 4 in Form eines Projektors, einem Streukörper 6, einem nicht näher bezeichneten Inspektionsraum und einer Kamera 10. Im Inspektionsraum, d.h. an einem geeigneten Ort ist ein Versuchsobjekt 8 platziert. Die Inspektionsanlage 2 weist außerdem ein Kalibriersystem 12 auf. Das Kalibriersystem 12 dient zur Kalibrierung der Beleuchtung für das Versuchsobjekt 8 in der Inspektionsanlage 2. 1 shows in a functional block diagram of an optical inspection system 2 with a light source 4 in the form of a projector, a scattering body 6 , an unspecified inspection room and a camera 10 , In the inspection room, ie at a suitable place is a test object 8th placed. The inspection system 2 also has a calibration system 12 on. The calibration system 12 Used to calibrate the lighting for the test object 8th in the inspection facility 2 ,

Das Kalibriersystem 12 weist einen Projektoranschluss 14, einen Kameraanschluss 16 und eine Kalibriereinheit 18 auf. Der Projektoranschluss 14 dient zur Abgabe eines Projektorbildes 20 an die Lichtquelle 4, welche das Projektorbild 20 darstellt beziehungsweise in Form von Licht 22 ausstrahlt, in 1 angedeutet durch Pfeile. Das Licht 22 der Lichtquelle 4 beleuchtet den Streukörper 6 und wird von diesem gestreut. Ausschließlich gestreutes Licht 22 trifft dann auf das Versuchsobjekt 8 auf und wird von diesem wiederum gestreut beziehungsweise reflektiert. Die Kamera 10 erzeugt ein IST-Kamerabild 24, dessen Bildinhalt eine Darstellung des vom gestreuten Licht 22 beleuchteten Versuchsobjekts 8 ist.The calibration system 12 has a projector connection 14 , a camera connection 16 and a calibration unit 18 on. The projector connection 14 serves to deliver a projector image 20 to the light source 4 which the projector image 20 represents or in the form of light 22 radiates, in 1 indicated by arrows. The light 22 the light source 4 Illuminates the scattering body 6 and is scattered by this. Exclusively scattered light 22 then hits the subject 8th on and is in turn scattered or reflected by this. The camera 10 generates an actual camera image 24 whose image content is a representation of the scattered light 22 illuminated experimental object 8th is.

Im Kalibriersystem 18 ist ein SOLL-Kamerabild 26 enthalten. Die Kalibriereinheit 18 ist dazu ausgebildet, das Projektorbild 20 derart – insbesondere iterativ – zu ermitteln beziehungsweise zu verändern, dass das IST-Kamerabild 24 sich dem Soll-Kamerabild 26 annähert und idealerweise diesem entspricht – unter Umständen lediglich unter Tolerierung einer zulässigen, z.B. für die AOI unbedeutenden Abweichung. Mit anderen Worten führt die Kalibriereinheit 18 eine direkte oder iterative Anpassung des Projektorbildes 20 durch. In the calibration system 18 is a target camera picture 26 contain. The calibration unit 18 is designed to be the projector image 20 in such a way - in particular iteratively - to determine or change that the actual camera image 24 the target camera image 26 approximates and ideally corresponds to it - under certain circumstances only under tolerance of a permissible deviation, for example for the AOI insignificant deviation. In other words, the calibration unit performs 18 a direct or iterative adjustment of the projector image 20 by.

2 zeigt den Aufbau der Inspektionsanlage 2 aus 1 in einer symbolischen Darstellung. Der Streukörper 6 ist transmissiv für das Licht 22 ausgebildet, sodass das den Streukörper 6 durchdringende Licht 22 zur Beleuchtung des Versuchsobjekts 8 dient. Für einen Kalibrierbetrieb ist das Versuchsobjekt 8 eine spiegelnde Metallkugel. Im Beispiel sind vier Lichtquellen 4 vorgesehen. Der Streukörper 6 ist hier ein Pyramidenstumpf einer quadratischen geraden Pyramide. Letztere weist also insgesamt vier Teilflächen 30a–d auf, wobei jede der Teilflächen 30a–d jeweils von einem der vier Lichtquellen 4 mit Licht 22 bestrahlt wird. Für die Teilfläche 30a ist explizit über gestrichelte Linien angedeutet, dass die zugehörige Lichtquelle 4 das Licht 22 idealerweise derart ausstrahlt, dass die Teilfläche 30a zwar vollständig, jedoch zielgenau, das heißt ohne über deren Rand hinauszuleuchten, beleuchtet wird. Für die restlichen Lichtquellen 4 und Teilflächen 30b–d ist die Projektion des Lichts 22 nur angedeutet. 2 shows the structure of the inspection system 2 out 1 in a symbolic representation. The scattering body 6 is transmissive to the light 22 formed, so that the scattering body 6 penetrating light 22 for illuminating the test object 8th serves. For a calibration operation is the test object 8th a reflecting metal ball. In the example are four light sources 4 intended. The scattering body 6 Here is a pyramidal stump of a square straight pyramid. The latter therefore has a total of four partial surfaces 30a -D, where each of the faces 30a Each from one of the four light sources 4 with light 22 is irradiated. For the part surface 30a is explicitly indicated by dashed lines that the associated light source 4 the light 22 ideally radiates in such a way that the partial surface 30a Although complete, but accurate, that is, without lighting over the edge, is illuminated. For the remaining light sources 4 and subareas 30b -D is the projection of the light 22 only hinted.

Der Streukörper 6 ist zwischen den Lichtquellen 4 und dem Versuchsobjekt 8 angeordnet. Die Kamera 10 blickt – angedeutet durch eine gestrichelte Linie – durch die schmalseitige Öffnung des Pyramidenstumpfes hindurch, um ein Bild des beleuchteten Versuchsobjekts 8 als jeweiliges IST-Kamerabild 24 aufzunehmen.The scattering body 6 is between the light sources 4 and the test object 8th arranged. The camera 10 looks - indicated by a dashed line - through the narrow-side opening of the truncated pyramid through to an image of the illuminated experimental object 8th as the respective actual camera image 24 take.

3 zeigt ein Projektorbild 20 in Form eines Startbildes mit einem über die gesamte Fläche verteilten und jeweils gleichmäßig hellen Schachbrettmuster. Nur einer der vier Projektoren arbeitet und beleuchtet die Teilfläche 30a. 4 zeigt das zugehörige Ist-Kamerabild 24: Auf dem Versuchsobjekt 8 als spiegelnder Metallkugel ist das reflektierte Bild der bestrahlten Teilfläche 30a zu sehen. Zu erkennen sind auch parasitär mitbeleuchtete Bereiche der benachbarten Teilflächen 30d und 30b. In einem ersten Schritt soll zunächst im IST-Kamerabild 24 eine gleichmäßige Helligkeit des gesamten Schachbrettmusters im Bereich der abgebildeten Teilfläche 30a entstehen. Das zugehörige SOLL-Kamerabild enthält daher die Bedingung einer gleichmäßigen Helligkeit für das betreffende abgebildete Schachbrettmuster. 3 shows a projector image 20 in the form of a start picture with a checkerboard pattern distributed over the entire surface and uniformly bright. Only one of the four projectors works and illuminates the partial area 30a , 4 shows the associated actual camera image 24 : On the test object 8th The mirrored metal sphere is the reflected image of the irradiated partial surface 30a to see. Also visible are parasitically illuminated areas of the adjacent subareas 30d and 30b , In a first step, first in the IST camera image 24 a uniform brightness of the entire checkerboard pattern in the area of the imaged partial area 30a arise. The associated target camera image therefore contains the condition of a uniform brightness for the relevant illustrated checkerboard pattern.

Zur Anpassung der Helligkeit wird an denjenigen Bereichen, welche gemäß 4 noch heller als restliche Bereiche erscheinen, in den korrespondierenden Stellen des Projektorbildes 20 die Helligkeit reduziert. Die Zuordnung zwischen Abbildungsorten im Ist-Kamerabild 24 und im Projektorbild 20 kann hierbei über eine einfache geometrische Abbildung beschrieben werden, welche hier nicht näher erläutert werden soll. To adjust the brightness is at those areas, which in accordance with 4 even brighter than remaining areas appear in the corresponding areas of the projector image 20 the brightness is reduced. The association between image locations in the actual camera image 24 and in the projector image 20 can be described by a simple geometric image, which will not be explained here.

Im Ergebnis wird im Projektorbild 20 gemäß 5 ein etwa ellipsenförmiger Bereich zentraler abgedunkelt. 6 zeigt im Ergebnis das Ist-Kamerabild 24 mit gleichmäßig heller Darstellung des Schachbrettmusters im Bereich der Teilfläche 30a. As a result, in the projector image 20 according to 5 an approximately elliptical area darkens more centrally. 6 shows as a result the actual camera image 24 with uniformly bright representation of the checkerboard pattern in the area of the partial area 30a ,

Die Veränderung der Helligkeit zwischen Projektorbild 20 und IST-Kamerabild 24 ist eine erste Abbildungseigenschaft eines ersten physikalischen Abbildungsphänomens. Die beschriebene Helligkeitskorrektur ist damit eine entsprechende inverse Abbildungseigenschaft und Teil einer Abbildungseinheit 19a in der Kalibriereinheit. Mehrere solcher Abbildungseinheiten 19a–d (im Beispiel, ggf. sind noch mehrere vorgesehen) sind hintereinander in Reihe geschaltet.The change in brightness between projector image 20 and actual camera image 24 is a first imaging property of a first physical imaging phenomenon. The described brightness correction is thus a corresponding inverse imaging property and part of an imaging unit 19a in the calibration unit. Several such imaging units 19a -D (in the example, possibly even more are provided) are connected in series one behind the other.

7 zeigt vergrößert die Darstellung aus 6, in der erkennbar ist, dass das Schachbrettmuster noch verzerrt im Ist-Kamerabild 24 dargestellt wird. In einem nächsten Schritt wird daher eine inverse Vorverzerrung des Projektorbildes 20 durch die Kalibriereinheit 18 ermittelt, welche zur Verzerrung aus 7 invers ist. Hierzu werden im Ist-Kamerabild 24 die jeweiligen Eckpunkte beziehungsweise Kreuzungspunkte des Schachbrettmusters ermittelt, zwischen den Punkten ein entsprechendes Netz erstellt und so eine Abbildungsvorschrift ermittelt, wie sich die Bildpositionen gleicher Bildinhalte zwischen Projektorbild 20 und Ist-Kamerabild 24 verändern. Durch einen inversen Vorgang werden die Bildinhalte des Projektorbildes 20 derart verändert, dass sich ein Projektorbild 20 gemäß 8 ergibt. Die Beleuchtungskorrektur wurde hier wieder entfernt, so dass das Projektorbild 20 wieder ein gleichmäßig helles Schachbrettmuster zeigt. 9 zeigt das zugehörige Ist-Kamerabild 24, in welchem das Schachbrettmuster nun wieder korrekt dargestellt ist. 7 shows enlarged representation 6 , in which it can be seen that the checkerboard pattern is still distorted in the actual camera image 24 is pictured. In a next step, therefore, an inverse predistortion of the projector image 20 through the calibration unit 18 determines which ones to distort 7 is inverse. For this purpose, in the actual camera image 24 determines the respective vertices or crossing points of the checkerboard pattern, creates a corresponding network between the points and thus determines a mapping rule, as the image positions of the same image content between projector image 20 and actual camera image 24 change. By an inverse process, the image contents of the projector image 20 changed so that a projector image 20 according to 8th results. The lighting correction was removed here again, leaving the projector image 20 again a uniform bright checkerboard pattern shows. 9 shows the associated actual camera image 24 in which the checkerboard pattern is now displayed correctly again.

Die Verzerrung zwischen Projektorbild 20 und IST-Kamerabild 24 ist eine zweite Abbildungseigenschaft eines zweiten physikalischen Abbildungsphänomens. Die beschriebene Entzerrung bzw. Vorverzerrung ist damit eine entsprechende inverse Abbildungseigenschaft und Teil einer Abbildungseinheit 19b in der Kalibriereinheit.The distortion between projector image 20 and actual camera image 24 is a second imaging property of a second physical imaging phenomenon. The described equalization or predistortion is thus a corresponding inverse imaging property and part of an imaging unit 19b in the calibration unit.

Im Beispiel gemäß 8 und 9 sind durch das angewendete Kalibrierverfahren allerdings parasitär Lücken im Schachbrettmuster und fehlende Randbereiche entstanden. Im Ergebnis wird die Teilfläche 30a des Streukörpers 6 nicht mehr vollständig, d.h. lückenhaft, und nicht mehr überall bis zum Rand hin mit dem vorverzerrten Schachbrettmuster beleuchtet.In the example according to 8th and 9 However, due to the calibration procedure used, parasitic gaps in the checkerboard pattern and missing edge areas have arisen. The result is the subarea 30a of the scatterer 6 no longer complete, ie incomplete, and no longer everywhere illuminated to the edge with the pre-distorted checkerboard pattern.

In einem nächsten nicht dargestellten Kalibrierschritt wird daher durch nicht dargestellte Interpolations- und Extrapolationsvorgänge am Projektorbild 20 die entsprechenden Lücken innerhalb des Bildinhalts durch Interpolation geschlossen und der Bildinhalt über den dargestellten Rand hinaus extrapoliert. Im Ergebnis wird die Teilfläche 30a wieder lückenlos und auch bis zum Rand hin vollständig mit dem vorverzerrten Schachbrettmuster bestrahlt. Durch weitere parasitäre Effekte wird allerdings das vorverzerrte Schachbrettmuster auch über den Rand der Teilfläche 30a hinaus auf den Streukörper 6 aufgestrahlt, so dass dieses wieder Abschnitte der Teilflächen 30b, d trifft.In a next calibration step, not shown, is therefore not shown by interpolation and Extrapolationsvorgänge on the projector screen 20 the corresponding gaps within the image content are closed by interpolation and the image content is extrapolated beyond the edge shown. The result is the subarea 30a again completely and even to the edge completely irradiated with the vorverzerrten checkerboard pattern. By further parasitic effects, however, the pre-distorted checkerboard pattern also over the edge of the sub-area 30a out onto the scatterer 6 blasted so that this again sections of the faces 30b , d hits.

Die Lückenhaftigkeit zwischen Projektorbild 20 und IST-Kamerabild 24 ist eine dritte Abbildungseigenschaft eines dritten physikalischen Abbildungsphänomens. Die beschriebene Inter-/Extrapolation ist damit eine entsprechende inverse Abbildungseigenschaft und Teil einer Abbildungseinheit 19c in der Kalibriereinheit.The gaps between projector image 20 and actual camera image 24 is a third imaging property of a third physical imaging phenomenon. The described interpolation / extrapolation is thus a corresponding inverse mapping property and part of an imaging unit 19c in the calibration unit.

In einem nächsten Schritt wird daher anstelle eines Schachbrettmusters ein einheitlich helles Projektorbild 20 verwendet, das die gesamte Teilfläche 30a beleuchtet und auch über deren Rand hinausstrahlt. 10 zeigt das entsprechende Ist-Kamerabild 24 mit Abbildern der beleuchteten Teilfläche 30a und der mitbeleuchteten Teilflächen 30b, d. In a next step, therefore, instead of a checkerboard pattern is a uniform bright projector image 20 that uses the entire face 30a illuminated and also radiates over the edge. 10 shows the corresponding actual camera image 24 with images of the illuminated partial surface 30a and the mitbeleuchteten faces 30b , d.

Im Bildinhalt des IST-Kamerabildes 24 werden in einem weiteren Kalibrierschritt die erkennbaren Ränder der abgebildeten Teilfläche 30a durch ein nicht näher erläutertes Segmentationsverfahren ermittelt und über die oben genannte Transformationsvorschrift in das zugehörige Projektorbild 20 transformiert. So ergeben sich im Projektorbild 20 entsprechende Grenzlinien, die den Rändern der Teilfläche 30a entsprechen. Das Projektorbild 20 wird dann bei gleichmäßig hellem Bildinhalt auf diese Randlinien beschnitten. 11 zeigt das resultierende Projektorbild 20. 12 zeigt das zugehörige IST-Kamerabild 24 mit Abbild des Streukörpers 6 bei Beleuchtung mit dem entsprechend segmentierten Projektorbild 20 gemäß 11.In the image content of the IST camera image 24 In a further calibration step, the recognizable edges of the imaged partial area are 30a determined by an unspecified Segmentationsverfahren and the above transformation rule in the associated projector image 20 transformed. So arise in the projector image 20 corresponding boundary lines, the edges of the subarea 30a correspond. The projector image 20 is then trimmed to these margins with uniformly bright image content. 11 shows the resulting projector image 20 , 12 shows the associated ACTUAL camera image 24 with image of the scatterer 6 when illuminated with the appropriately segmented projector image 20 according to 11 ,

Die Überblendung zwischen Projektorbild 20 und IST-Kamerabild 24 ist eine vierte Abbildungseigenschaft eines vierte physikalischen Abbildungsphänomens. Die beschriebene Segmentation bzw. Begrenzung des Licht 22 ausstrahlenden Bildbereiches im Projektorbild 20 ist damit eine entsprechende inverse Abbildungseigenschaft und Teil einer Abbildungseinheit 19d in der Kalibriereinheit.The crossfade between projector image 20 and actual camera image 24 is a fourth mapping property of a fourth physical imaging phenomenon. The described segmentation or limitation of the light 22 radiating image area in the projector image 20 is thus a corresponding inverse mapping property and part of an imaging unit 19d in the calibration unit.

Anschließend wird in den segmentierten Teilbereichen des Projektorbildes 20 das zuvor gemäß 8 ermittelte vorverzerrte und interpolierte beziehungsweise extrapolierte Schachbrettmuster eingeblendet. 13 zeigt das resultierende Projektorbild 20. 14 zeigt das zugehörige IST-Kamerabild 24 mit Abbild des Streukörpers 6 bei Beleuchtung mit dem entsprechend segmentierten Projektorbild 20 gemäß 13. In 14 ist nun ein unverzerrtes Schachbrettmuster zu sehen, welches lediglich die Teilfläche 30a vollständig bis zum Rand hin ausfüllt und auf die entsprechenden Ränder begrenzt ist. Allerdings ist nun am Projektorbild 20 gem. 13 noch eine Helligkeitskorrektur durchzuführen, da die Bildhelligkeit im IST-Kamerabild 24 gemäß 14 noch ungleich ist.Subsequently, in the segmented portions of the projector image 20 the previously according to 8th ascertained predistorted and interpolated or extrapolated checkerboard patterns. 13 shows the resulting projector image 20 , 14 shows the associated ACTUAL camera image 24 with image of the scatterer 6 when illuminated with the appropriately segmented projector image 20 according to 13 , In 14 is now an undistorted checkerboard pattern to see, which only the partial area 30a completely fills to the edge and is limited to the corresponding edges. However, now s.Projektorbild 20 gem. 13 still perform a brightness correction, since the image brightness in the actual camera image 24 according to 14 is still unequal.

Die 1517 verdeutlichen eine Variante einer iterativen Helligkeitsanpassung zu dem Vorgehen gemäß der 36. Hier wird kein Schachbrettmuster, sondern eine einheitlich homogene Helligkeitsverteilung als Start-Projektorbild 20 gewählt. Ausgehend von einem einheitlich hellen Projektorbild 20 gemäß 11 zeigen die 1517 zugehörige Ist-Kamerabilder 24 nach einer, vier und sechzehn Iterationen zur iterativen Angleichung der Helligkeit im Ist-Kamerabild 24.The 15 - 17 illustrate a variant of an iterative brightness adjustment to the procedure according to the 3 - 6 , This is not a checkerboard pattern, but a uniform homogeneous brightness distribution as a startup projector image 20 selected. Starting with a uniform bright projector image 20 according to 11 show the 15 - 17 associated actual camera images 24 after one, four and sixteen iterations for the iterative equalization of the brightness in the actual camera image 24 ,

Claims (10)

Kalibriersystem (12) für eine optische Inspektionsanlage (2), die eine Lichtquelle (4), einen von der Lichtquelle (4) beleuchtbaren Streukörper (6), und einen Inspektionsraum für ein Versuchsobjekt (8), das von dem vom Streukörper (6) gestreuten Licht (22) der Lichtquelle (4) beleuchtbar ist, und eine Kamera (10) enthält, wobei von der Kamera (10) ein IST-Kamerabild (24) des beleuchteten Versuchsobjekts (8) erzeugbar ist, dadurch gekennzeichnet, dass die Lichtquelle (4) ein Projektor ist oder Lichtquelle (4) und Streukörper (6) zusammen als Display ausgeführt sind, und das Kalibriersystem (12) einen Projektoranschluss (14) zur Abgabe eines von der Lichtquelle (4) als Licht auszustrahlenden Projektorbildes (20), einen Kameraanschluss (16) zum Empfang des von der Kamera (10) aufgenommenen IST-Kamerabildes (24), und eine Kalibriereinheit (18) zur Ermittlung des Projektorbildes (20) anhand des IST-Kamerabildes (24) und eines SOLL-Kamerabildes (26) in einem Kalibrierbetrieb derart, dass das IST-Kamerabild (24) dem SOLL-Kamerabild (26) entspricht, enthält.Calibration system ( 12 ) for an optical inspection system ( 2 ), which is a light source ( 4 ), one from the light source ( 4 ) illuminable diffuser ( 6 ), and an inspection room for a test object ( 8th ), that of the scattering body ( 6 ) scattered light ( 22 ) of the light source ( 4 ) and a camera ( 10 ), whereby the camera ( 10 ) an actual camera image ( 24 ) of the illuminated test object ( 8th ), characterized in that the light source ( 4 ) is a projector or light source ( 4 ) and scattering bodies ( 6 ) are executed together as a display, and the calibration system ( 12 ) a projector connection ( 14 ) for dispensing one of the light source ( 4 ) as a projector image to be irradiated with light ( 20 ), a camera connection ( 16 ) to receive the from the camera ( 10 ) recorded IST camera image ( 24 ), and a calibration unit ( 18 ) for determining the projector image ( 20 ) based on the actual camera image ( 24 ) and a target camera image ( 26 ) in a calibration mode such that the actual camera image ( 24 ) the target camera image ( 26 ) contains. Kalibriersystem (12) nach Anspruch 1, dadurch gekennzeichnet, dass die Kalibriereinheit (18) zur, insbesondere iterativen, Ermittlung des Projektorbildes (20) ausgehend von einem Startbild ausgebildet ist, wobei das Startbild ein homogen helles einfarbiges Bild oder ein Muster, insbesondere ein Schachbrettmuster enthält.Calibration system ( 12 ) according to claim 1, characterized in that the calibration unit ( 18 ) for, in particular iterative, determination of the projector image ( 20 ) is formed on the basis of a start image, wherein the start image contains a homogeneous bright single-color image or a pattern, in particular a checkerboard pattern. Kalibriersystem (12) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Kalibriereinheit (18) mindestens zwei, hintereinander in Reihe geschaltete lineare Abbildungseinheiten (19a–d) enthält, wobei jede der Abbildungseinheiten (19a–d) eine, insbesondere inverse, Abbildungseigenschaft eines einzelnen linearen physikalischen Abbildungsphänomens der Abbildung des Projektorbildes (20) über die Lichtquelle (4), den Streukörper (6), das Versuchsobjekt (8) und die Kamera (10) auf das IST-Kamerabild (24) enthält.Calibration system ( 12 ) according to one of the preceding claims, characterized in that the calibration unit ( 18 ) at least two linear imaging units connected in series ( 19a -D), each of the imaging units ( 19a -D) an, in particular inverse, imaging property of a single linear physical imaging phenomenon of the image of the projector image ( 20 ) via the light source ( 4 ), the scattering body ( 6 ), the test object ( 8th ) and the camera ( 10 ) on the actual camera image ( 24 ) contains. Kalibriersystem (12) nach Anspruch 3, dadurch gekennzeichnet, dass die Abbildungseinheit (19a–d) eine die Bildhelligkeit im IST-Kamerabild (24) beeinflussende Abbildungseinheit (19a–d) ist, die dazu ausgebildet ist, die Helligkeitsverteilung im Projektorbild (20) derart zu verändern, dass Helligkeitsunterschiede zwischen IST-Kamerabild (24) und SOLL-Kamerabild (26) ausgeglichen werden.Calibration system ( 12 ) according to claim 3, characterized in that the imaging unit ( 19a -D) the image brightness in the actual camera image ( 24 ) influencing imaging unit ( 19a -D), which is adapted to the brightness distribution in the projector image ( 20 ) such that brightness differences between the actual camera image ( 24 ) and target camera image ( 26 ). Kalibriersystem (12) nach einem der Ansprüche 3 bis 4, dadurch gekennzeichnet, dass die Abbildungseinheit (19a–d) eine die Bildverzerrung im IST-Kamerabild (24) beeinflussende Abbildungseinheit (19a–d) ist, die dazu ausgebildet ist, eine Bildposition eines Bildinhalts im Projektorbild (20) derart zu verändern, dass Verzerrungen zwischen IST-Kamerabild (24) und SOLL-Kamerabild (26) ausgeglichen werden.Calibration system ( 12 ) according to one of claims 3 to 4, characterized in that the imaging unit ( 19a -D) the image distortion in the actual camera image ( 24 ) influencing imaging unit ( 19a -D), which is adapted to a picture position of an image content in the projector image ( 20 ) such that distortions between the actual camera image ( 24 ) and target camera image ( 26 ). Kalibriersystem (12) nach einem der Ansprüche 3 bis 5, dadurch gekennzeichnet, dass die Abbildungseinheit (19a–d) eine einen Bildinhalt im Projektorbild (20) interpolierende und/oder extrapolierende Abbildungseinheit (19a–d) ist, die dazu ausgebildet ist, Bildinhalte des IST-Kamerabildes (24) zum SOLL-Kamerabild (26) hin zu ergänzen.Calibration system ( 12 ) according to one of claims 3 to 5, characterized in that the imaging unit ( 19a -D) a picture content in Projector image ( 20 ) interpolating and / or extrapolating imaging unit ( 19a -D), which is adapted to image contents of the actual camera image ( 24 ) to the target camera image ( 26 ). Kalibriersystem (12) nach einem der Ansprüche 3 bis 6, dadurch gekennzeichnet, dass die Abbildungseinheit (19a–d) eine einen Bildinhalt des Projektorbildes (20) beschneidende Abbildungseinheit (19a–d) ist, die dazu ausgebildet ist, die Ausdehnung eines Bildinhaltes beleuchteter Bereiche im IST-Kamerabild (24) auf die Ausdehnung des Bildinhaltes des SOLL-Kamerabildes (26) zu begrenzen. Calibration system ( 12 ) according to one of claims 3 to 6, characterized in that the imaging unit ( 19a -D) one image content of the projector image ( 20 ) truncating imaging unit ( 19a D), which is designed to measure the extent of an image content of illuminated areas in the actual camera image ( 24 ) on the extent of the image content of the target camera image ( 26 ) to limit. Inspektionsanlage (2), die eine Lichtquelle (4), einen von der Lichtquelle (4) beleuchtbaren Streukörper (6), einen Inspektionsraum für ein Versuchsobjekt (8), das von dem vom Streukörper (6) gestreuten Licht (22) der Lichtquelle (4) beleuchtbar ist, und eine Kamera (10) enthält, wobei von der Kamera (10) ein IST-Kamerabild (24) des beleuchteten Versuchsobjekts (8) erzeugbar ist, dadurch gekennzeichnet, dass diese ein Kalibriersystem (12) nach einem der Ansprüche 1 bis 7 enthält.Inspection facility ( 2 ), which is a light source ( 4 ), one from the light source ( 4 ) illuminable diffuser ( 6 ), an inspection room for a test object ( 8th ), that of the scattering body ( 6 ) scattered light ( 22 ) of the light source ( 4 ) and a camera ( 10 ), whereby the camera ( 10 ) an actual camera image ( 24 ) of the illuminated test object ( 8th ), characterized in that it comprises a calibration system ( 12 ) according to one of claims 1 to 7. Inspektionsanlage (2) nach Anspruch 8, dadurch gekennzeichnet, dass das Versuchsobjekt (8) für den Kalibrierbetrieb ein Licht (22) reflektierendes, insbesondere spiegelndes, Versuchsobjekt (8), insbesondere eine Kugel, ist.Inspection facility ( 2 ) according to claim 8, characterized in that the test object ( 8th ) for the calibration operation a light ( 22 ) reflecting, in particular reflecting, test object ( 8th ), in particular a ball, is. Inspektionsanlage (2) nach einem der Ansprüche 8 bis 9, dadurch gekennzeichnet, dass der Streukörper (6) transmissiv für Licht (22) ausgebildet ist, so dass das den Streukörper (6) durchdringende Licht (22) zur Beleuchtung des Versuchsobjekts (8) dient, und der Streukörper (6) insbesondere zwischen Lichtquelle (4) und Versuchsobjekt (8) angeordnet ist, und der Streukörper (6) insbesondere ein Pyramidenstumpf einer quadratischen geraden Pyramide ist.Inspection facility ( 2 ) according to one of claims 8 to 9, characterized in that the scattering body ( 6 ) transmissive to light ( 22 ) is formed, so that the scattering body ( 6 ) penetrating light ( 22 ) for illuminating the test object ( 8th ), and the scattering body ( 6 ) in particular between light source ( 4 ) and test object ( 8th ), and the scattering body ( 6 ) is in particular a truncated pyramid of a square straight pyramid.
DE102015217173.6A 2015-09-09 2015-09-09 Calibration system and inspection system Withdrawn DE102015217173A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102015217173.6A DE102015217173A1 (en) 2015-09-09 2015-09-09 Calibration system and inspection system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102015217173.6A DE102015217173A1 (en) 2015-09-09 2015-09-09 Calibration system and inspection system

Publications (1)

Publication Number Publication Date
DE102015217173A1 true DE102015217173A1 (en) 2017-03-09

Family

ID=58055266

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102015217173.6A Withdrawn DE102015217173A1 (en) 2015-09-09 2015-09-09 Calibration system and inspection system

Country Status (1)

Country Link
DE (1) DE102015217173A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018197297A1 (en) * 2017-04-26 2018-11-01 Krones Ag Inspection method and inspection apparatus for inspecting containers by image processing
CN109427057A (en) * 2017-08-16 2019-03-05 波音公司 Foreign material, crackle and other surfaces exception are automaticly inspected
CN111678458A (en) * 2020-06-18 2020-09-18 东莞市小可智能设备科技有限公司 Tin ball vision measuring device and measuring method thereof
CN111811433A (en) * 2020-07-15 2020-10-23 河北工业大学 Structured light system calibration method and device based on red and blue orthogonal stripes and application

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018197297A1 (en) * 2017-04-26 2018-11-01 Krones Ag Inspection method and inspection apparatus for inspecting containers by image processing
CN109427057A (en) * 2017-08-16 2019-03-05 波音公司 Foreign material, crackle and other surfaces exception are automaticly inspected
EP3450965A1 (en) * 2017-08-16 2019-03-06 The Boeing Company Automated inspection of foreign materials, cracks and other surface anomalies
US10502695B2 (en) 2017-08-16 2019-12-10 The Boeing Company Automated inspection of foreign materials, cracks and other surface anomalies
US10746670B2 (en) 2017-08-16 2020-08-18 The Boeing Company Automated inspection of foreign materials, cracks and other surface anomalies
EP4056991A1 (en) * 2017-08-16 2022-09-14 The Boeing Company Automated inspection of foreign materials, cracks and other surface anomalies
CN109427057B (en) * 2017-08-16 2023-09-19 波音公司 Automated inspection of foreign materials, cracks and other surface anomalies
CN111678458A (en) * 2020-06-18 2020-09-18 东莞市小可智能设备科技有限公司 Tin ball vision measuring device and measuring method thereof
CN111811433A (en) * 2020-07-15 2020-10-23 河北工业大学 Structured light system calibration method and device based on red and blue orthogonal stripes and application

Similar Documents

Publication Publication Date Title
EP1972134B1 (en) Calibration method and calibration system for projection apparatus
DE102006008840B4 (en) Cylindrical object lighting device, surface inspection method and computer program product performed thereby
DE102015217173A1 (en) Calibration system and inspection system
EP1784978A1 (en) Method and device for representing a digital image on a surface which is non-trivial in terms of its geometry and photometry
EP3121637B1 (en) Microscope and method for generating a combined image from a plurality of individual images of an object
DE102008046384B4 (en) Optical axis inspection method and optical axis inspection device
WO2009121775A2 (en) Method and illumination device for optical contrast enhancement
DE102019105358B4 (en) Creation of a distance image
DE102017211377A1 (en) Method and device for optical surface measurement of a measurement object
DE102015208080A1 (en) Method for reflection correction of images and related devices
WO2020094732A1 (en) Method and apparatus for inspecting an object surface, more particularly for inspecting the surface of a powder bed with a multiplicity of powder particles
DE102013108722B4 (en) Method and device for detecting defects of a flat surface
EP1434434A1 (en) Self calibration of a projection system using multiple projectors
EP2669622A1 (en) Test method and test head which is suitable for this purpose
DE102004051607B4 (en) Displaying digital image on projection surface e.g. of any shape or texture, by geometrically distorting digital image using information relating to projection surface
DE102017010683B4 (en) Method for automatic restoration of a measured state of a projection system
DE102008022292B4 (en) Device and method for shape detection and / or for determining the diffuse and / or the directional reflection component of an object
DE102014202679A1 (en) Apparatus and method for generating image information from an object to be detected
DE102017204302B4 (en) Device for mapping an object using shadows
EP3049757B1 (en) Chassis measurement under ambient light
DE102008041135B4 (en) Inspection device and method for the optical examination of object surfaces, in particular a wafer shot
WO2010015694A1 (en) Inspection device and method for optical investigation of object surfaces, in particular wafer edges
DE102004017690B4 (en) Apparatus and method for capturing an overall image of a surface of a semiconductor substrate
DE102017103660A1 (en) PROCESS FOR OPERATING A LIGHT SOURCE FOR A CAMERA, LIGHT SOURCE, CAMERA
DE102015122415A1 (en) Method for detecting a band-limiting malfunction of a camera, camera system and motor vehicle

Legal Events

Date Code Title Description
R005 Application deemed withdrawn due to failure to request examination