DE102022124061A1 - System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle - Google Patents

System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle Download PDF

Info

Publication number
DE102022124061A1
DE102022124061A1 DE102022124061.4A DE102022124061A DE102022124061A1 DE 102022124061 A1 DE102022124061 A1 DE 102022124061A1 DE 102022124061 A DE102022124061 A DE 102022124061A DE 102022124061 A1 DE102022124061 A1 DE 102022124061A1
Authority
DE
Germany
Prior art keywords
detection device
feature
image data
reflected
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022124061.4A
Other languages
German (de)
Inventor
Florian Schlather
Christian Patron
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE102022124061.4A priority Critical patent/DE102022124061A1/en
Publication of DE102022124061A1 publication Critical patent/DE102022124061A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/30—Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • G01M11/08—Testing mechanical properties
    • G01M11/081—Testing mechanical properties by using a contact-less detection method, i.e. with a camera
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/55—Specular reflectivity
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8883—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges involving the calculation of gauges, generating models
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00—Features of devices classified in G01N21/00
    • G01N2201/12—Circuits of general importance; Signal processing
    • G01N2201/129—Using chemometrical methods
    • G01N2201/1296—Using chemometrical methods using neural networks

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Engineering & Computer Science (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

Die Erfindung betrifft ein System (18) zur optischen Prüfung wenigstens eines Merkmals wenigstens Objekts (15) mit einer reflektierenden Oberfläche, aufweisend eine Detektionseinrichtung (20), die eingerichtet ist, Lichtstrahlen (26), die von einer der Detektionseinrichtung (20) abgewandten Oberfläche des Objekts (15) reflektiert werden, zu erfassen und Bilddaten zu erzeugen, und eine Datenverarbeitungseinrichtung (22), die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten. Des Weiteren ein Verfahren zur optischen Prüfung wenigstens eines Objekts mit einer reflektierenden Oberfläche mittels eines derartigen Systems, ein Computerprogrammprodukt sowie ein Fahrzeug.The invention relates to a system (18) for the optical inspection of at least one feature of at least one object (15) with a reflecting surface, having a detection device (20) which is set up to emit light beams (26) from a surface facing away from the detection device (20). of the object (15) are reflected and to generate image data, and a data processing device (22) which is set up to evaluate the image data with regard to the feature. Furthermore, a method for optically inspecting at least one object with a reflective surface using such a system, a computer program product and a vehicle.

Description

Die Erfindung betrifft ein System zur optischen Prüfung wenigstens eines Merkmals wenigstens eines Objekts mit einer reflektierenden Oberfläche. Des Weiteren betrifft die Erfindung ein Verfahren zur optischen Prüfung wenigstens eines Objekts mit einer reflektierenden Oberfläche mittels eines derartigen Systems, ein Computerprogrammprodukt sowie ein Fahrzeug.The invention relates to a system for the optical inspection of at least one feature of at least one object with a reflective surface. The invention further relates to a method for the optical inspection of at least one object with a reflective surface using such a system, a computer program product and a vehicle.

Im Fahrzeugbau ist es bekannt, Karosserieteile durch Verschweißen miteinander zu verbinden. Die Schweißpunkte müssen hinsichtlich ihrer Qualität überprüft werden, um den Sicherheitsanforderungen zu genügen.In vehicle construction, it is known to connect body parts to one another by welding. The welding points must be checked for quality in order to meet safety requirements.

Zur Prüfung der Schweißpunkte ist es bekannt, eine optische Qualitätsprüfung mittels Kameratechnik und geeigneter, auf künstlicher Intelligenz basierender Computeralgorithmen durchzuführen. Dazu wird ein Bild der zu bewertenden Schweißverbindung aufgenommen, welches dann mittels des Computeralgorithmus ausgewertet wird. Dies erfordert Kameras an allen relevanten Positionen, da Schweißpunkte an einer Karosserie von beiden Seiten bewertet werden müssen. Dadurch muss an beiden Seiten der Schweißverbindung jeweils eine Kamera installiert werden, um Bilder aufzunehmen. Die beidseitige Zugänglichkeit zur Bildaufnahme erfordert jedoch Platz und zusätzliche Hardware, was mit Kosten und technischen Restriktionen verbunden ist.To inspect the weld spots, it is known to carry out an optical quality inspection using camera technology and suitable computer algorithms based on artificial intelligence. To do this, an image of the welded joint to be evaluated is taken, which is then evaluated using the computer algorithm. This requires cameras at all relevant positions, as weld points on a body have to be evaluated from both sides. This means that a camera must be installed on both sides of the welded joint in order to take images. However, accessibility from both sides for image capture requires space and additional hardware, which is associated with costs and technical restrictions.

Aus DE 10 2010 023 663 A1 ist eine Prüfeinrichtung zur Online-Prüfung einer durch eine Schweiß- und/oder Lötvorrichtung hergestellten Schweiß- und/oder Lötverbindung auf einem Bauteil offenbart. Die Prüfeinrichtung weist eine Messeinrichtung, die zwei unabhängig voneinander arbeitende Messmodule umfasst, welche ein erstes, elektrische Signale der Schweiß- und/oder Lötprozesse analysierendes Messmodul und ein zweites, die hergestellte Schweiß-/Lötverbindung optisch analysierendes Messmodul und eine Auswerteeinrichtung zur Auswertung und Klassifizierung der von der Messeinrichtung ermittelten Werte auf.Out of DE 10 2010 023 663 A1 a testing device is disclosed for online testing of a welding and/or soldering connection on a component produced by a welding and/or soldering device. The testing device has a measuring device which comprises two independently operating measuring modules, which have a first measuring module that analyzes electrical signals from the welding and/or soldering processes and a second measuring module that optically analyzes the produced welded/soldered connection and an evaluation device for evaluating and classifying the values determined by the measuring device.

DE 10 2017 125 033 A1 offenbart ein Verfahren zur Prüfung von Schweißverbindungen von Werkstücken mittels eines Industrieroboters, wobei der Industrieroboter ein Messwerkzeug trägt, das eine optische Einrichtung zur Aufnahme einer Abbildung einer zu prüfenden Schweißverbindung und einen Messkopf zur Prüfung der Schweißverbindung aufweist. Bei dem Verfahren wird der Industrieroboter so positioniert, dass die optische Einrichtung die zu prüfende Schweißverbindung aufnimmt. Dann werden die realen Lagekoordinaten, die in der Schweißverbindung liegen, bestimmt. Anschließend wird der Messkopf auf die realen Lagekoordinaten der Schweißverbindung ausgerichtet, und die Schweißverbindung wird induktiv oder akustisch geprüft. DE 10 2017 125 033 A1 discloses a method for testing welded joints of workpieces using an industrial robot, wherein the industrial robot carries a measuring tool that has an optical device for recording an image of a welded joint to be tested and a measuring head for checking the welded joint. In the process, the industrial robot is positioned so that the optical device picks up the welded connection to be inspected. Then the real position coordinates that lie in the welded connection are determined. The measuring head is then aligned to the real position coordinates of the welded joint and the welded joint is tested inductively or acoustically.

Der vorliegenden Erfindung liegt die Aufgabe zugrunde, ein System, ein Verfahren, ein Computerprogrammprodutk sowie ein Fahrzeug zu schaffen, die eine kostengünstige optische Prüfung eines Merkmals eines Objekts ermöglichen.The present invention is based on the object of creating a system, a method, a computer program product and a vehicle that enable a cost-effective optical inspection of a feature of an object.

Zur Lösung der Aufgabe wird ein System mit den Merkmalen des Anspruchs 1, ein Verfahren mit den Merkmalen des Anspruchs 6, ein Computerprogrammprodukt mit den Merkmalen des Anspruchs 7 und ein Fahrzeug mit den Merkmalen des Anspruchs 8 vorgeschlagen.To solve the problem, a system with the features of claim 1, a method with the features of claim 6, a computer program product with the features of claim 7 and a vehicle with the features of claim 8 are proposed.

Vorteilhafte Ausgestaltungen des Systems sind Gegenstand der abhängigen Ansprüche.Advantageous configurations of the system are the subject of the dependent claims.

Gemäß einem ersten Aspekt der Erfindung wird ein System zur optischen Prüfung wenigstens eines Merkmals wenigstens eines Objekts mit einer reflektierenden Oberfläche, insbesondere zur computergestützten optischen Prüfung wenigstens eines Merkmals wenigstens Objekts mit einer reflektierenden Oberfläche vorgeschlagen. Das System weist eine Detektionseinrichtung, die eingerichtet ist, Lichtstrahlen, die von einer der Detektionseinrichtung abgewandten Oberfläche des Objekts reflektiert werden, zu erfassen und Bilddaten zu erzeugen, und eine Datenverarbeitungseinrichtung, die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten, auf.According to a first aspect of the invention, a system for optical testing of at least one feature of at least one object with a reflective surface, in particular for computer-aided optical testing of at least one feature of at least one object with a reflective surface, is proposed. The system has a detection device that is set up to detect light rays that are reflected from a surface of the object facing away from the detection device and to generate image data, and a data processing device that is set up to evaluate the image data with regard to the feature.

Das System ermöglicht die Beurteilung eines Merkmals, insbesondere hinsichtlich der Qualität des Merkmals nur auf Basis der Reflexionen einer Oberfläche eines Objekts. Dadurch muss nur noch eine Detektionseinrichtung an den Stellen installiert werden, die den indirekten Blick auf die Reflexion eine Rückseite des Objekts erfasst. Infolgedessen ist somit weniger Hardware zur optischen Beurteilung eines Objekts erforderlich, so dass die Kosten des Systems reduziert sind.The system enables the assessment of a feature, in particular with regard to the quality of the feature, based only on the reflections of a surface of an object. This means that only one detection device needs to be installed at the points that captures the indirect view of the reflection on the back of the object. As a result, less hardware is required to visually assess an object, so that the cost of the system is reduced.

Unter einem Objekt wird vorliegend eine Schraubverbindung, eine Schweißverbindung und/oder eine Lötverbindung verstanden. Unter einem Merkmal des Objekts wird vorliegend die Vollständigkeit der Schweiß-, Schraub- und/oder Lötverbindung und/oder eine Qualität der Schweiß-, Schraub- und/oder Lötverbindung, das heißt, die Schweiß-, Schraub- und/oder Lötverbindung wird in Hinblick auf Unterbrechungen, Form und Breite überprüft, verstanden. Unter der der Detektionseinrichtung abgewandten Oberfläche des Objekts wird vorliegend eine Rückseite des Objekts verstanden, welche von der Detektionseinrichtung abgewandt ist.In the present case, an object is understood to mean a screw connection, a welded connection and/or a soldered connection. In the present case, a feature of the object is the completeness of the welded, screwed and/or soldered connection and/or a quality of the welded, screwed and/or soldered connection, that is, the welded, screwed and/or soldered connection is in checked and understood with regard to breaks, shape and width. In the present case, the surface of the object facing away from the detection device is understood to mean a back side of the object, which faces away from the detection device.

Die von der Detektionseinrichtung erfassten Lichtstrahlen können Lichtstrahlen im sichtbaren Spektralbereich sein, das heißt, Lichtstrahlen mit einer Wellenlänge zwischen 400 nm und 700 nm.The light rays detected by the detection device can be light rays in the visible spectral range, that is, light rays with a wavelength between 400 nm and 700 nm.

Wenn wenigstens ein Merkmal einer Vielzahl an Objekte mittels des optischen Systems geprüft werden soll, so kann entweder die Detektionseinrichtung derart positioniert werden, dass diese alle von den der Detektionseinrichtung abgewandten Oberflächen der Objekte reflektierten Lichtstrahlen erfasst, oder es können mehrere Detektionseinrichtungen vorgesehen sein, wobei jeweils eine Detektionseinrichtung die von der Rückseite dieses Objekts reflektierten Lichtstrahlen erfasst.If at least one feature of a large number of objects is to be checked using the optical system, either the detection device can be positioned in such a way that it detects all light rays reflected from the surfaces of the objects facing away from the detection device, or several detection devices can be provided, each a detection device detects the light rays reflected from the back of this object.

In einer vorteilhaften Ausgestaltung ist die Detektionseinrichtung mit der Datenverarbeitungseinrichtung verbunden. Hierzu kann die Detektionseinrichtung über ein Kabel oder über eine Funkverbindung, beispielsweise über WLAN, mit der Datenverarbeitungseinrichtung verbunden sein. Die Detektionseinrichtung erzeugt auf Basis der erfassten, von der pastösen Masse emittierten Lichtstrahlen Bilddaten und übermittelt diese an die Datenverarbeitungseinrichtung. Hierzu kann die Detektionseinrichtung eine Schnittstelle aufweisen, welche mit der Datenverarbeitungseinrichtung beispielsweise über ein Kabel oder eine Funkverbindung verbunden sein kann.In an advantageous embodiment, the detection device is connected to the data processing device. For this purpose, the detection device can be connected to the data processing device via a cable or via a radio connection, for example via WLAN. The detection device generates image data based on the detected light beams emitted by the pasty mass and transmits these to the data processing device. For this purpose, the detection device can have an interface, which can be connected to the data processing device, for example via a cable or a radio connection.

Die Datenverarbeitungseinrichtung kann eine Speichereinrichtung zum Speichern von Bilddaten, eine Recheneinheit zum Auswerten der Bilddaten und eine Schnittstelle zum Verbinden der Datenverarbeitungseinrichtung mit der Detektionseinrichtung über ein Datenkabel oder eine Funkverbindung, wie beispielsweise W-LAN, aufweisen.The data processing device can have a storage device for storing image data, a computing unit for evaluating the image data and an interface for connecting the data processing device to the detection device via a data cable or a radio connection, such as Wi-Fi.

In einer vorteilhaften Ausgestaltung ist die Detektionseinrichtung eingerichtet, neben den von der Detektionseinrichtung abgewandten Oberfläche reflektierten Lichtstrahlen von einer der Detektionseinrichtung zugewandten Oberfläche zu erfassen. Dadurch kann die Detektionseinrichtung sowohl die von einer Rückseite eines Objektes reflektierten Lichtstrahlen als auch die von einer Vorderseite des Objekts reflektierten Lichtstrahlen erfassen. Infolgedessen muss die Detektionseinrichtung nur noch an der Stelle positioniert werden, dass die Lichtstrahlen von einer Rück- und einer Vorderseite des Objekts erfasst werden. Wenn die erfassten Lichtstrahlen in der Detektionseinrichtung in Bilddaten umgewandelt werden, so enthalten die aufgenommenen Bilder den direkten Blick auf die Vorderseite des Objekts sowie den indirekten Blick auf die Reflexion der Rückseite des Objekts. Dadurch ist es nicht mehr erforderlich, eine Detektionseinrichtung für die Vorderseite und eine Detektionseinrichtung für die Rückseite zu positionieren. Die von der Rückseite reflektierten Rückstrahlen können zunächst an einer dem Objekt gegenüberliegenden Oberfläche eines Bauteils oder Objekts reflektiert werden und dann von der Detektionseinrichtung erfasst werden.In an advantageous embodiment, the detection device is set up to detect light rays reflected from a surface facing the detection device in addition to the surface facing away from the detection device. As a result, the detection device can detect both the light rays reflected from a back side of an object and the light rays reflected from a front side of the object. As a result, the detection device only needs to be positioned at the point so that the light rays from a back and a front side of the object are detected. If the detected light rays are converted into image data in the detection device, the captured images contain the direct view of the front of the object and the indirect view of the reflection of the back of the object. This means that it is no longer necessary to position a detection device for the front and a detection device for the back. The back rays reflected from the back can first be reflected on a surface of a component or object opposite the object and then be detected by the detection device.

In einer vorteilhaften Ausgestaltung nutzt die Datenverarbeitungseinrichtung eine künstliche Intelligenz (KI), die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten. Vorteilhaft wird die künstliche Intelligenz mit Trainingsdaten angelernt. Die künstliche Intelligenz kann ein Deep Learning System sein, insbesondere ein auf künstlicher Intelligenz basierender Bildverarbeitungs-Algorithmus, beispielsweise ein Object-Detection-Algorithmus, sein. Beispielsweise können mittels eines Object Detection Algorithmus die Bilddaten hinsichtlich der Qualität des Auftrags der ersten pastösen Masse und/oder der zweiten pastösen Masse ausgewertet werden.In an advantageous embodiment, the data processing device uses an artificial intelligence (AI) that is set up to evaluate the image data with regard to the feature. The artificial intelligence is advantageously trained using training data. The artificial intelligence can be a deep learning system, in particular an image processing algorithm based on artificial intelligence, for example an object detection algorithm. For example, the image data can be evaluated with regard to the quality of the application of the first pasty mass and/or the second pasty mass using an object detection algorithm.

In einer vorteilhaften Ausgestaltung weist die Detektionseinrichtung wenigstens eine Kamera auf. Mittels der Kamera werden die reflektierten Lichtstrahlen aufgenommen und wenigstens ein Bild wird davon erzeugt. Das Bild wird in Bilddaten umgewandelt und an die Datenverarbeitungseinrichtung zur Weiterverarbeitung übersandt. Die Kamera nimmt somit Bilder auf, welche den direkten Blick auf die Vorderseite des Objekts enthalten sowie den indirekten Blick auf die Reflexion der Rückseite des Objekts enthalten. Dadurch muss zur Auswertung von mehreren Merkmalen nur noch ein Bild statt mehrere Bilder aufgenommen werden. Wenn Merkmale mehrerer Objekte optisch geprüft werden sollen, dann kann die Detektionseinrichtung mehrere Kameras aufweisen, wobei jede Kamera entweder die Lichtstrahlen eines Objekts oder die Lichtstrahlen zweier oder mehrerer Objekte erfasst.In an advantageous embodiment, the detection device has at least one camera. The camera records the reflected light rays and at least one image is created. The image is converted into image data and sent to the data processing device for further processing. The camera thus records images that contain a direct view of the front of the object and an indirect view of the reflection of the back of the object. This means that only one image instead of several images has to be taken to evaluate several features. If features of several objects are to be checked optically, then the detection device can have several cameras, with each camera detecting either the light rays of one object or the light rays of two or more objects.

In einer vorteilhaften Ausgestaltung ist wenigstens eine Lichtquelle vorgesehen, die die der Detektionseinrichtung abgewandten Oberfläche und/oder die der Detektionseinrichtung zugewandten Oberfläche bestrahlt. Dadurch kann die Intensität der von der Oberfläche reflektierten Lichtstrahlen erhöht werden, was die Auflösung der Bilddaten erhöht. Vorteilhaft ist die Lichtquelle ein Licht, das Lichtstrahlen im sichtbaren Spektralbereich emittiert. In einer vorteilhaften Ausgestaltung ist die Lichtquelle über ein Datenkabel oder eine Funkverbindung, wie beispielsweise W-LAN, mit der Datenverarbeitungseinrichtung verbunden. Dadurch kann die Lichtquelle über die Datenverarbeitungseinrichtung angesteuert werden.In an advantageous embodiment, at least one light source is provided which irradiates the surface facing away from the detection device and/or the surface facing the detection device. This allows the intensity of the light rays reflected from the surface to be increased, which increases the resolution of the image data. The light source is advantageously a light that emits light rays in the visible spectral range. In an advantageous embodiment, the light source is connected to the data processing device via a data cable or a radio connection, such as Wi-Fi. This allows the light source to be controlled via the data processing device.

Gemäß einem weiteren Aspekt der Erfindung wird ein Verfahren zur optischen Prüfung wenigstens eines Merkmals wenigstens eines Objekts mit einer reflektierenden Oberfläche mittels eines erfindungsgemäßen Systems vorgeschlagen. Bei dem Verfahren werden zunächst mittels einer Detektionseinrichtung Lichtstrahlen, die von einer der Detektionseinrichtung abgewandten Oberfläche des Objekts reflektiert werden, erfasst, und Bilddaten erzeugt. Anschließend werden die Bilddaten an eine Datenverarbeitungseinrichtung übermittelt, die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten.According to a further aspect of the invention, a method for optically inspecting at least one feature of at least one object with a reflective surface is provided by means of an inventive appropriate system proposed. In the method, light beams that are reflected from a surface of the object facing away from the detection device are first detected by means of a detection device, and image data is generated. The image data is then transmitted to a data processing device which is set up to evaluate the image data with regard to the feature.

Gemäß einem weiteren Aspekt der Erfindung wird ein Computerprogrammprodukt vorgeschlagen. Das Computerprogrammprodukt umfasst Befehle, die bewirken, dass das erfindungsgemäße System das erfindungsgemäße Verfahren ausführt.According to a further aspect of the invention, a computer program product is proposed. The computer program product includes instructions that cause the system according to the invention to carry out the method according to the invention.

Gemäß einem weiteren Aspekt der Erfindung wird ein Fahrzeug vorgeschlagen, das wenigstens ein Objekt mit einer reflektierenden Oberfläche aufweist, wobei ein Merkmal des Objekts mit einem erfindungsgemäßen System, einem erfindungsgemäßen Verfahren und/oder einem erfindungsgemäßen Computerprogrammprodukt geprüft ist.According to a further aspect of the invention, a vehicle is proposed which has at least one object with a reflective surface, a feature of the object being checked with a system according to the invention, a method according to the invention and/or a computer program product according to the invention.

Nachfolgend werden ein Fahrzeug, ein System und ein Verfahren zur optischen Prüfung wenigstens eines Merkmals wenigstens eines Objekts mit einer reflektierenden Oberfläche sowie weitere Merkmale und Vorteile anhand eines Ausführungsbeispiels näher erläutert, das in den Figuren schematisch dargestellt ist. Hierbei zeigen:

  • 1 eine schematische Darstellung eines Fahrzeugs mit einer Karosserie; und
  • 2 eine schematische Darstellung eines Systems zur optischen Prüfung eines Merkmals der Schweißverbindungen der Karosserie.
Below, a vehicle, a system and a method for the optical inspection of at least one feature of at least one object with a reflective surface as well as further features and advantages are explained in more detail using an exemplary embodiment which is shown schematically in the figures. Show here:
  • 1 a schematic representation of a vehicle with a body; and
  • 2 a schematic representation of a system for visually inspecting a feature of the welded joints of the body.

In 1 ist ein Fahrzeug 10 gezeigt, das eine Fahrzeugkarosserie 12 aufweist. Die Fahrzeugkarosserie 12 ist aus einer Vielzahl an Karosserieteilen 14 gebildet, die mittels Objekten 15 in Form von Schweißverbindungen 16 miteinander verbunden sind, wie in 2 dargestellt ist.In 1 a vehicle 10 is shown which has a vehicle body 12. The vehicle body 12 is formed from a plurality of body parts 14, which are connected to one another by means of objects 15 in the form of welded connections 16, as in 2 is shown.

Zur optischen Prüfung eines Merkmals der Schweißverbindungen 16 ist ein System 18 vorgesehen, die eine Detektionseinrichtung 20 und eine Datenverarbeitungseinrichtung 22 aufweist. Insbesondere wird die Vollständigkeit, die Form und/oder die Breite der Schweißverbindung 16 überprüft und/oder ob die Schweißverbindung 16 Unterbrechungen aufweist.For the optical inspection of a feature of the welded connections 16, a system 18 is provided, which has a detection device 20 and a data processing device 22. In particular, the completeness, the shape and/or the width of the welded connection 16 is checked and/or whether the welded connection 16 has interruptions.

Die Detektionseinrichtung 20 ist eine Kamera 24, die von einer Rückseite 28 der Schweißverbindungen 16 und einer Vorderseite 30 der Schweißverbindungen 16 reflektierten Lichtstrahlen 26 (s. Pfeile in 2) erfasst. Wie in 2 ersichtlich ist, werden die von der Rückseite 28 der Schweißverbindungen 16 reflektierten Lichtstrahlen 26 zunächst an der Fahrzeugkarosserie 12 reflektiert und erst dann werden die von der Rückseite 28 reflektierten Lichtstrahlen 26 von der Kamera 24 erfasst.The detection device 20 is a camera 24 which detects light beams 26 reflected from a back side 28 of the welded connections 16 and a front side 30 of the welded connections 16 (see arrows in 2 ) recorded. As in 2 As can be seen, the light rays 26 reflected from the back 28 of the welded joints 16 are first reflected on the vehicle body 12 and only then are the light rays 26 reflected from the back 28 captured by the camera 24.

Die Kamera 24 wandelt die von der Vorder- 30 und der Rückseite 28 der Schweißverbindungen 16 reflektierten Lichtstrahlen 26 in Bilddaten um, welche von der Datenverarbeitungseinrichtung 22 ausgewertet werden. Hierzu ist die Kamera 24 über eine Verbindung 32, die in 2 schematisch dargestellt ist, mit der Datenverarbeitungseinrichtung 22 verbunden. Die Verbindung 32 kann ein Datenkabel oder eine Funkverbindung, wie beispielsweise WLAN, sein.The camera 24 converts the light beams 26 reflected from the front 30 and the back 28 of the welded connections 16 into image data, which are evaluated by the data processing device 22. For this purpose, the camera 24 is connected via a connection 32, which is in 2 is shown schematically, connected to the data processing device 22. The connection 32 can be a data cable or a radio connection, such as WLAN.

Die Datenverarbeitungseinrichtung 22 weist eine Speichereinrichtung 34 zum Speichern der Bilddaten, eine Recheneinheit 36 zum Auswerten der Bilddaten und eine Schnittstelle 38 zum Verbinden der Verbindung 32 mit der Kamera 24 auf. In der Speichereinrichtung 34 kann ein auf künstlicher Intelligenz basierender Bildverarbeitungsalgorithmus, wie beispielsweise ein Object Detection Algorithmus, gespeichert sein, der zum Auswerten der Bilddaten in die Recheneinheit 36 geladen wird.The data processing device 22 has a storage device 34 for storing the image data, a computing unit 36 for evaluating the image data and an interface 38 for connecting the connection 32 to the camera 24. An image processing algorithm based on artificial intelligence, such as an object detection algorithm, can be stored in the storage device 34 and is loaded into the computing unit 36 to evaluate the image data.

Die übermittelten Bilddaten werden von der Recheneinheit 36 mittels des in der Speichereinrichtung 34 gespeicherten, auf künstlicher Intelligenz basierenden Bildverarbeitungsalgorithmus dahingehend ausgewertet, ob die Schweißverbindung 16 vorhanden ist und/oder ob die Schweißverbindung 16 Unterbrechungen, die richtige Breite oder Form aufweist.The transmitted image data is evaluated by the computing unit 36 using the artificial intelligence-based image processing algorithm stored in the storage device 34 to determine whether the welded connection 16 is present and/or whether the welded connection 16 has interruptions, the correct width or shape.

In einer nicht dargestellten Ausführungsform weist das System 18 eine Lichtquelle auf, die Rückseite 28 und/oder die Vorderseite 30 der Schweißverbindung 16 mit Licht, insbesondere mit sichtbaren Licht bestrahlt.In an embodiment not shown, the system 18 has a light source that irradiates the back 28 and/or the front 30 of the welded connection 16 with light, in particular with visible light.

Das System 18 und das Verfahren zur optischen Prüfung wenigstens eines Merkmals wenigstens Objekts 15 mit einer reflektierenden Oberfläche ermöglichen die Beurteilung der Vollständigkeit und/oder der Qualität der Schweißverbindungen 16 auf Basis der Reflexionen der Oberflächen der Schweißverbindungen 16. Dadurch ist es nur noch erforderlich, die Kamera 24 an der Stelle zu positionieren, die den indirekten Blick auf die Reflexion der Rückseite 28 der Schweißverbindung 16 erfasst. Infolgedessen ist somit weniger Hardware zur optischen Beurteilung der Schweißverbindung erforderlich. Dadurch weist das System 18 und das Verfahren reduzierte Kosten auf.The system 18 and the method for the optical inspection of at least one feature of at least object 15 with a reflective surface enable the completeness and/or the quality of the welded connections 16 to be assessed based on the reflections of the surfaces of the welded connections 16. This means that it is only necessary to: Position camera 24 at the point that captures the indirect view of the reflection of the back 28 of the welded connection 16. As a result, less hardware is required for visually assessing the weld joint. As a result, the system 18 and the method have reduced costs.

BezugszeichenlisteReference symbol list

1010
Fahrzeugvehicle
1212
FahrzeugkarosserieVehicle body
1414
KarosserieteilBody part
1515
Objektobject
1616
SchweißverbindungWelded connection
1818
Systemsystem
2020
DetektionseinrichtungDetection device
2222
DatenverarbeitungseinrichtungData processing device
2424
Kameracamera
2626
reflektierender Lichtstrahlreflective beam of light
2828
Rückseiteback
3030
Vorderseitefront
3232
VerbindungConnection
3434
SpeichereinrichtungStorage facility
3636
RecheneinheitComputing unit
3838
Schnittstelleinterface

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 102010023663 A1 [0004]DE 102010023663 A1 [0004]
  • DE 102017125033 A1 [0005]DE 102017125033 A1 [0005]

Claims (8)

System (18) zur optischen Prüfung wenigstens eines Merkmals wenigstens Objekts (15) mit einer reflektierenden Oberfläche, aufweisend eine Detektionseinrichtung (20), die eingerichtet ist, Lichtstrahlen (26), die von einer der Detektionseinrichtung (20) abgewandten Oberfläche des Objekts (15) reflektiert werden, zu erfassen und Bilddaten zu erzeugen, und eine Datenverarbeitungseinrichtung (22), die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten.System (18) for the optical inspection of at least one feature of at least one object (15) with a reflecting surface, comprising a detection device (20) which is set up to emit light beams (26) from a surface of the object (15) facing away from the detection device (20). ) are reflected, to capture and to generate image data, and a data processing device (22) which is set up to evaluate the image data with regard to the feature. System nach Anspruch 1, dadurch gekennzeichnet, dass die Detektionseinrichtung (20) eingerichtet ist, neben den von der Detektionseinrichtung (20) abgewandten Oberfläche reflektierten Lichtstrahlen (26) Lichtstrahlen (26) von einer der Detektionseinrichtung (20) zugewandten Oberfläche zu erfassen.System after Claim 1 , characterized in that the detection device (20) is set up to detect light rays (26) from a surface facing the detection device (20) in addition to the light rays (26) reflected from the surface facing away from the detection device (20). System nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Datenverarbeitungseinrichtung (22) eine künstliche Intelligenz (KI) nutzt, die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten.System after Claim 1 or 2 , characterized in that the data processing device (22) uses an artificial intelligence (AI) which is set up to evaluate the image data with regard to the feature. System nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Detektionseinrichtung (20) wenigstens eine Kamera (24) aufweist.System according to one of the preceding claims, characterized in that the detection device (20) has at least one camera (24). System nach einem der vorhergehenden Ansprüche, gekennzeichnet durch wenigstens eine Lichtquelle, die die der Detektionseinrichtung (20) abgewandten Oberfläche und/oder die der Detektionseinrichtung (20) zugewandten Oberfläche bestrahlt.System according to one of the preceding claims, characterized by at least one light source which irradiates the surface facing away from the detection device (20) and/or the surface facing the detection device (20). Verfahren zur optischen Prüfung wenigstens eines Merkmals wenigstens eines Objekts (15) mit einer reflektierenden Oberfläche mittels eines Systems (18) nach einem der Ansprüche 1 bis 5, das folgende Schritte aufweist: a. Erfassen von Lichtstrahlen (26) mittels einer Detektionseinrichtung (20), die von einer der Detektionseinrichtung (20) abgewandten Oberfläche des Objekts (15) reflektiert werden, und Erzeugen von Bilddaten; und b. Übermitteln der Bilddaten an eine Datenverarbeitungseinrichtung (22), die eingerichtet ist, die Bilddaten hinsichtlich des Merkmals auszuwerten.Method for the optical inspection of at least one feature of at least one object (15) with a reflective surface by means of a system (18) according to one of Claims 1 until 5 , which has the following steps: a. Detecting light rays (26) by means of a detection device (20), which are reflected from a surface of the object (15) facing away from the detection device (20), and generating image data; and b. Transmitting the image data to a data processing device (22) which is set up to evaluate the image data with regard to the feature. Computerprogrammprodukt umfassend Befehle, die bewirken, dass das System nach einem der Ansprüche 1 bis 5 das Verfahren nach Anspruch 6 ausführt.Computer program product comprising instructions that cause the system to search for one of the Claims 1 until 5 the procedure Claim 6 executes. Fahrzeug (10) aufweisend wenigstens ein Objekt mit einer reflektierenden Oberfläche, wobei ein Merkmal des Objekts (15) mit einem System (18) nach einem der Ansprüche 1 bis 5, einem Verfahren nach Anspruch 6 und/oder einem Computerprogrammprodukt nach Anspruch 7 optisch geprüft ist.Vehicle (10) having at least one object with a reflective surface, a feature of the object (15) having a system (18) according to one of Claims 1 until 5 , a procedure Claim 6 and/or a computer program product Claim 7 is visually checked.
DE102022124061.4A 2022-09-20 2022-09-20 System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle Pending DE102022124061A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102022124061.4A DE102022124061A1 (en) 2022-09-20 2022-09-20 System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102022124061.4A DE102022124061A1 (en) 2022-09-20 2022-09-20 System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle

Publications (1)

Publication Number Publication Date
DE102022124061A1 true DE102022124061A1 (en) 2024-03-21

Family

ID=90062592

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022124061.4A Pending DE102022124061A1 (en) 2022-09-20 2022-09-20 System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle

Country Status (1)

Country Link
DE (1) DE102022124061A1 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10312901A1 (en) 2003-03-22 2004-10-07 Daimlerchrysler Ag Testing chamber for quality control of vehicle bodywork or car bodies, has light strips arranged above and to the side of the bodywork and mirrors arranged on the floor of the inspection chamber
DE102008007738A1 (en) 2007-11-29 2009-06-04 Volkswagen Ag Quality inspection and control of vehicle bodywork components, evaluates and images defects in CAD form, classifying and associating them with bodywork specification
DE102010023663A1 (en) 2010-06-12 2011-12-15 Daimler Ag Tester for online inspection of welding and/or soldering connection of components, has independent measuring modules for detecting process parameters of welding and/or soldering process, and produced welding/soldering connection
DE102017125033A1 (en) 2017-10-25 2019-04-25 ese-robotics GmbH Processes and industrial robots for testing welded joints, in particular spot welds
US20210270727A1 (en) 2018-07-13 2021-09-02 Nederlandse Organisatie Voor Toegepast-Natuurwetenschappelijk Onderzoek Tno Optical inspection device and method
DE102020216406A1 (en) 2020-06-19 2021-12-23 Hyundai Motor Company VEHICLE UNDERBODY INSPECTION SYSTEM AND PROCEDURE

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10312901A1 (en) 2003-03-22 2004-10-07 Daimlerchrysler Ag Testing chamber for quality control of vehicle bodywork or car bodies, has light strips arranged above and to the side of the bodywork and mirrors arranged on the floor of the inspection chamber
DE102008007738A1 (en) 2007-11-29 2009-06-04 Volkswagen Ag Quality inspection and control of vehicle bodywork components, evaluates and images defects in CAD form, classifying and associating them with bodywork specification
DE102010023663A1 (en) 2010-06-12 2011-12-15 Daimler Ag Tester for online inspection of welding and/or soldering connection of components, has independent measuring modules for detecting process parameters of welding and/or soldering process, and produced welding/soldering connection
DE102017125033A1 (en) 2017-10-25 2019-04-25 ese-robotics GmbH Processes and industrial robots for testing welded joints, in particular spot welds
US20210270727A1 (en) 2018-07-13 2021-09-02 Nederlandse Organisatie Voor Toegepast-Natuurwetenschappelijk Onderzoek Tno Optical inspection device and method
DE102020216406A1 (en) 2020-06-19 2021-12-23 Hyundai Motor Company VEHICLE UNDERBODY INSPECTION SYSTEM AND PROCEDURE

Similar Documents

Publication Publication Date Title
EP1949026B1 (en) Method and device for assessing joins of workpieces
DE102011104550B4 (en) Optical measuring device for monitoring a joint seam, joining head and laser welding head with the same
EP3883716B1 (en) Detection of machining errors of a laser machining system using deep convolutional neural net
DE102012219187B4 (en) System for binary classification of elements of interest in a reproducible process
EP2886239B1 (en) Method and device for monitoring and controlling the processing path of a laser joining process
DE102015116047A1 (en) Test apparatus and control method for a test apparatus
DE102021114967A1 (en) WORKPIECE INSPECTION AND ERROR DETECTION SYSTEM THAT INDICATES THE NUMBER OF ERROR IMAGES FOR THE TRAINING
DE10150633B4 (en) Method and device for non-contact, non-destructive automatic testing of material connections, in particular the quality control of welded joints
DE102014104581A1 (en) Method for monitoring a tool, method for assessing the quality of a machined surface of a workpiece and apparatus for performing the method
EP4234158A1 (en) System and method for analyzing weld quality
DE102021115002A1 (en) WORKPIECE INSPECTION AND ERROR DETECTION SYSTEM INCLUDING MONITORING OF THE WORKPIECE
DE102020120887B4 (en) METHOD OF DETECTING A HANGING POSITION OF A SUPPORT BAR AND FLAT BED MACHINE TOOL
EP0471196A2 (en) Image analysis method
DE102022124061A1 (en) System and method for the optical inspection of at least one feature of at least one object with a reflective surface and a vehicle
DE202018103274U1 (en) Device for surface inspection of a motor vehicle
DE10222786A1 (en) Method for positioning work pieces before/during laser processing monitors online laser welding with a processing head and a logarithmic complementary metal oxide semiconductor (CMOS) camera.
DE4408291A1 (en) Automated optical weld seam testing
DE102019208448A1 (en) Procedure for checking a device or a machine
EP4010145B1 (en) Method for analyzing a workpiece surface for a laser machining process, and analysis device for analyzing a workpiece surface
DE102019000235A1 (en) 3D shape autotracing method and measuring device
DE102020131980A1 (en) Test method for monitoring a laser processing head protective glass
DE102021117805A1 (en) Method for checking the presence of plugs and test system for a motor vehicle component
DE102018126466A1 (en) Procedure for checking a joint
DE102020210974A1 (en) Method and apparatus for detecting defects during a surface modification process
DE102019107277A1 (en) Method for operating a laser welding device

Legal Events

Date Code Title Description
R163 Identified publications notified