ES2758549A1 - Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding) - Google Patents

Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding) Download PDF

Info

Publication number
ES2758549A1
ES2758549A1 ES201831061A ES201831061A ES2758549A1 ES 2758549 A1 ES2758549 A1 ES 2758549A1 ES 201831061 A ES201831061 A ES 201831061A ES 201831061 A ES201831061 A ES 201831061A ES 2758549 A1 ES2758549 A1 ES 2758549A1
Authority
ES
Spain
Prior art keywords
product
image
camera
failure inspection
mark
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
ES201831061A
Other languages
Spanish (es)
Inventor
Barbosa Lorena Rosende
Parrilla Carlos Gonzalo
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Itera Tecnica S L
Original Assignee
Itera Tecnica S L
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Itera Tecnica S L filed Critical Itera Tecnica S L
Priority to ES201831061A priority Critical patent/ES2758549A1/en
Publication of ES2758549A1 publication Critical patent/ES2758549A1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection

Abstract

Method and system for inspecting faults in product manufacturing processes, the system being comprised of at least a camera, a position or presence sensor, a processing unit and a lighting unit, as well as a support structure, and the method being carried out in at least one of the stations through which the products pass one by one, comprising an initial commissioning phase and a failure inspection phase to be carried out for each product, in which a search region is modified of the product image or the reference mark of the master image, either by repositioning it, varying its size and/or performing a perspective transformation, to find and match at least one brand that matches the corresponding reference brand. (Machine-translation by Google Translate, not legally binding)

Description

DESCRIPCIÓNDESCRIPTION

Método y sistema de inspección de fallos en procesos de fabricación de productosFailure inspection method and system in product manufacturing processes

OBJETO DE LA INVENCIÓNOBJECT OF THE INVENTION

La presente solicitud de invención tiene por objeto el registro de un método y un sistema de inspección apto para la detección de los fallos que se puedan producir en los procesos de fabricación de productos, incorporando notables innovaciones y ventajas frente a las técnicas utilizadas hasta el momento.The purpose of this invention application is to register a method and an inspection system suitable for detecting failures that may occur in product manufacturing processes, incorporating notable innovations and advantages over the techniques used up to now. .

Más concretamente, la invención propone el desarrollo de un método y un sistema que permite inspeccionar los productos en procesos de fabricación muy diversos y con un coste de inversión muy reducido.More specifically, the invention proposes the development of a method and a system that allows products to be inspected in very diverse manufacturing processes and with a very low investment cost.

ANTECEDENTES DE LA INVENCIÓNBACKGROUND OF THE INVENTION

Son conocidas en el actual estado de la técnica diversas técnicas de inspección de fallos en procesos de fabricación con la intención de reducir los productos defectuosos, como por ejemplo, tejidos con agujeros o circuitos electrónicos con ausencia de componentes. Gracias a estas técnicas, se consigue una reducción en los costes de fabricación, al evitar la fatiga del trabajador que realiza la inspección visual, al reducir el tiempo de la inspección y al evitar posibles errores humanos, a la vez que se adquiere conocimiento para la implantación de futuros procesos de fabricación.Various fault inspection techniques in manufacturing processes are known in the current state of the art with the intention of reducing defective products, such as fabrics with holes or electronic circuits with no components. Thanks to these techniques, a reduction in manufacturing costs is achieved, by avoiding the fatigue of the worker who performs the visual inspection, by reducing the inspection time and by avoiding possible human errors, while acquiring knowledge for the implementation of future manufacturing processes.

Muchas implementaciones de sistemas de inspección de fallos utilizan sistemas ópticos automatizados con los que se adquiere una imagen del producto a inspeccionar y se compara con una imagen de referencia con la intención de descubrir patrones o errores no deseados en el producto. A diferencia de otros sistemas automáticos, la principal ventaja de los sistemas ópticos es que la inspección se puede hacer al instante y a cualquier distancia, sin interferir en el proceso de fabricación.Many implementations of fault inspection systems use automated optical systems with which an image of the product to be inspected is acquired and compared to a reference image with the intention of discovering unwanted patterns or errors in the product. Unlike other automated systems, the main advantage of optical systems is that inspection can be done instantly and at any distance, without interfering with the manufacturing process.

Sin embargo, estos sistemas basados en la comparación de las imágenes de los productos con una imagen patrón resultan poco efectivos cuando no todos los productos llegan a las distintas estaciones del proceso de fabricación exactamente en la misma posición. Si la imagen del producto se ha adquirido desde un punto de vista diferente al de la imagen patrón, el sistema no es capaz de inspeccionar convenientemente el producto.However, these systems based on the comparison of the images of the products with a standard image are ineffective when not all the products arrive at the different stations of the manufacturing process in exactly the same position. If the Product image has been acquired from a different point of view than the master image, the system is not able to conveniently inspect the product.

Por tanto, todavía hay necesidad de un método y un sistema de inspección de fallos capaz de inspeccionar un producto independientemente de su posición, que a la vez sea económico de implantar y robusto en su uso. La presente invención contribuye a solventar la existente carencia.Therefore, there is still a need for a failure inspection method and system capable of inspecting a product regardless of its position, which is both inexpensive to implement and robust in use. The present invention contributes to solving the existing deficiency.

DESCRIPCIÓN DE LA INVENCIÓNDESCRIPTION OF THE INVENTION

El objeto de la presente invención corresponde al desarrollo de un método de inspección de fallos en procesos de fabricación de productos, así como un sistema configurado para llevar a cabo dicho método, el cual se puede adecuar a las necesidades del proceso según el tipo de elemento a inspeccionar, como por ejemplo pueden ser soldaduras, cordones de sellado para juntas o piezas que no toleren desplazamientos en su posicionamiento.The object of the present invention corresponds to the development of a failure inspection method in product manufacturing processes, as well as a system configured to carry out said method, which can be adapted to the needs of the process according to the type of element to be inspected, such as welds, sealing cords for joints or parts that do not tolerate displacement in their positioning.

El presente método de inspección de fallos se lleva a cabo en una estación del proceso de fabricación por la que pasan los productos uno a uno y en la que se instala el sistema de inspección de fallos de la invención. Los componentes que el sistema comprende son al menos una cámara, un sensor de posición o presencia, una unidad de iluminación y una unidad de procesamiento, así como una estructura de soporte para al menos dicha cámara, sensor y/o unidad de iluminación.The present fault inspection method is carried out in a manufacturing process station through which the products pass one by one and in which the fault inspection system of the invention is installed. The components that the system comprises are at least a camera, a position or presence sensor, a lighting unit and a processing unit, as well as a support structure for at least said camera, sensor and / or lighting unit.

Por lo que se refiere al método, este comprende una fase inicial de puesta en servicio, la cual contiene al menos las siguientes etapas:As regards the method, it comprises an initial commissioning phase, which contains at least the following stages:

A) definir una imagen patrón por cada cámara, cada imagen patrón definida en función del tipo de producto a inspeccionar,A) define a standard image for each camera, each standard image defined according to the type of product to be inspected,

B) seleccionar una o más marcas de referencia en cada imagen patrón, definiéndose una marca como el conjunto de píxeles de una sección de una imagen,B) select one or more reference marks in each pattern image, defining a mark as the set of pixels of a section of an image,

C) definir una región de búsqueda donde se buscaran las marcas de referencia en la imagen de cada producto a adquirir por cada cámara, yC) define a search region where the reference marks in the image of each product to be acquired by each camera will be searched, and

D) definir las características de una o varias secciones de cada imagen patrón a detectar en la imagen a captar por cada cámara, correspondiendo dichas características a contornos, bordes, áreas o figuras geométricas a inspeccionar en el producto.D) define the characteristics of one or more sections of each standard image to be detected in the image to be captured by each camera, corresponding said characteristics to contours, edges, areas or geometric figures to inspect on the product.

En esta primera fase de puesta en servicio del método, es necesaria la implicación de un técnico o usuario. La etapa de definir la imagen patrón para cada cámara consiste en adquirir una imagen correspondiente a cada zona a inspeccionar en los objetos con una de las cámaras y a continuación aplicarle filtros y un calibrado de lente para mejorar su calidad y destacar los detalles relevantes. El técnico puede ajustar la correspondiente cámara, la posición del producto y/o la unidad de iluminación hasta que cada imagen patrón generada cumpla con los requisitos adecuados. El técnico puede configurar estos requisitos manualmente, según el análisis de los resultados y su experiencia personal, o bien mediante un protocolo establecido de ajuste de parámetros. Por lo que respecta a la aplicación de filtros, tanto en la anterior como en la siguiente fase, preferiblemente las imágenes se procesan a través de filtros recogidos de librerías con licencia de software libre del tipo BSD. In this first phase of commissioning the method, the involvement of a technician or user is necessary. The step of defining the standard image for each camera consists of acquiring an image corresponding to each area to be inspected on the objects with one of the cameras and then applying filters and lens calibration to improve its quality and highlight the relevant details. The technician can adjust the corresponding camera, product position and / or lighting unit until each generated master image meets the appropriate requirements. The technician can configure these requirements manually, based on the analysis of the results and personal experience, or through an established parameter adjustment protocol. Regarding the application of filters, both in the previous and in the next phase, preferably the images are processed through filters collected from libraries with free software license of the BSD type.

Respecto a las dos o más marcas de referencia a seleccionar en cada imagen patrón, pueden ser seleccionadas por el técnico según las que considere más adecuados en función de su experiencia o pueden ser seleccionadas mediante un análisis computacional que detecte aquellas zonas de píxeles que sean más fáciles de identificar digitalmente. De la misma forma, la etapa de definir una región de búsqueda puede realizarla el técnico manualmente o mediante un protocolo automatizado, igual que la etapa de definir las características de las secciones de cada imagen patrón a detectar en las imágenes de los productos captadas por cada cámara.Regarding the two or more reference marks to select in each standard image, they can be selected by the technician according to the ones they consider most appropriate based on their experience or they can be selected by means of a computer analysis that detects those pixel areas that are more easy to digitally identify. In the same way, the step of defining a search region can be carried out by the technician manually or by means of an automated protocol, the same as the step of defining the characteristics of the sections of each standard image to be detected in the product images captured by each camera.

El método también comprende una segunda y última fase de inspección de fallos, a realizar para cada producto, la cual contiene al menos las siguientes etapas:The method also includes a second and final phase of failure inspection, to be carried out for each product, which contains at least the following stages:

E) adquirir una imagen con cada cámara del producto a inspeccionar cuando el sensor de posición detecta que el producto se encuentra en la posición que corresponde al campo de visión de las cámaras,E) acquire an image with each camera of the product to be inspected when the position sensor detects that the product is in the position that corresponds to the field of view of the cameras,

F) modificar la región de búsqueda de la imagen del producto o la marca de referencia, ya sea reposicionándola, variando su tamaño y/o realizando una transformación de la perspectiva, para buscar y hacer coincidir al menos una marca que coincida con la correspondiente marca de referencia, F) modify the search region of the product image or the reference brand, either by repositioning it, varying its size and / or performing a perspective transformation, to search and match at least one brand that matches the corresponding brand reference,

G) aplicar la modificación necesitada en la etapa anterior a cada sección de la imagen patrón o a la imagen del producto, a la vez que ajustar la imagen del producto mediante la aplicación de filtros,G) apply the modification needed in the previous step to each section of the pattern image or the product image, while adjusting the product image by applying filters,

H) buscar cada sección modificada o no en la imagen del producto modificada y/o ajustada,H) search for each section modified or not in the modified and / or adjusted product image,

I) emitir una señal, calificar el producto como defectuoso y/o detener el proceso de fabricación en caso que no se encuentren dichas secciones por considerarse un fallo de fabricación.I) issue a signal, classify the product as defective and / or stop the manufacturing process in the event that these sections are not found because it is considered a manufacturing failure.

La novedad del presente método reside en la etapa en que se modifica la imagen del producto o la marca de referencia para hacer coincidir las marcas, en combinación obviamente con la etapa de definir previamente unas marcas de referencia en la imagen patrón y habiéndolas localizado en la imagen del producto. Dado que no todos los productos tienen porqué encontrarse exactamente en la misma posición respecto a las cámaras, el sistema comprende esta etapa en la que se modifica la imagen del producto para que sea más efectiva su comparación con la imagen patrón. La modificación puede consistir en un reposicionamiento o desplazamiento en el plano de la imagen para hacer coincidir una primera marca, una variación del tamaño en caso que no coincida al menos una segunda marca o incluso una transformación de su perspectiva para que coincidan más de una marca. La modificación de la imagen puede llevarse a cabo mediante algoritmos o criterios de control superpuestos, que modifiquen la imagen automáticamente o con la ayuda de un técnico.The novelty of the present method resides in the stage in which the image of the product or the reference mark is modified to match the marks, obviously in combination with the step of previously defining reference marks in the master image and having located them in the Product image. Since not all the products have to be in exactly the same position with respect to the cameras, the system includes this stage in which the image of the product is modified so that its comparison with the standard image is more effective. Modification may consist of repositioning or shifting in the image plane to match a first mark, a change in size if at least a second mark does not match, or even a transformation of your perspective to match more than one mark . Image modification can be carried out using overlapping algorithms or control criteria, which modify the image automatically or with the help of a technician.

Gracias a esta novedad, resulta más efectiva la detección de fallos en los sistemas ópticos de inspección. A la vez, toda la segunda fase de inspección de fallos se puede realizar por computador a muy alta velocidad, de forma que la eficiencia del proceso de fabricación aumenta considerablemente.Thanks to this novelty, fault detection in optical inspection systems is more effective. At the same time, the entire second phase of fault inspection can be done by computer at very high speed, so that the efficiency of the manufacturing process increases considerably.

Como se ha podido apreciar, la fase de inspección de fallos comprende una primera etapa en la que se adquiere la imagen del producto con cada cámara, y dicho cometido se produce cuando el sensor de posición detecta que un producto se encuentra en la posición que corresponde al campo de visión de las cámaras. Como realización opcional, el sistema puede comprender una ventana de tiempo de espera en la cual, en la fase de inspección de fallos, el sensor de posición debe detectar que se ha sustituido un producto por el siguiente en el campo de visión de la cámara, y en caso contrario, la unidad de procesamiento emitirá una señal de aviso. Esta ventana de tiempo preferiblemente se establece en la fase inicial de puesta en servicio.As it has been seen, the failure inspection phase comprises a first stage in which the image of the product is acquired with each camera, and this task occurs when the position sensor detects that a product is in the corresponding position to the field of view of the cameras. As an optional embodiment, the system may comprise a waiting time window in which, in the failure inspection phase, the position sensor must detect that one product has been replaced by the following in the field of view of the camera, otherwise the processing unit will emit a warning signal. This time window is preferably established in the initial commissioning phase.

Otro aspecto de la invención consiste en que la etapa de buscar al menos una sección que corresponda a una marca de referencia se realiza mediante una comparación por medio de una función o algoritmo matemático.Another aspect of the invention is that the step of searching for at least one section corresponding to a reference mark is carried out by means of a comparison by means of a mathematical function or algorithm.

Opcionalmente, el sistema puede comprender más de un sensor de posición con el que, en la etapa de detectar si el producto se encuentra en el campo de visión de la cámara, también detectar si el producto se encuentra en una orientación suficientemente similar a la de la imagen patrón, por ejemplo para seleccionar la cámara adecuada con la que tomar la imagen. A su vez, el método puede comprender una etapa en la que se regula la intensidad y la dirección de la luz de la fuente, por ejemplo en el caso en que la unidad de procesamiento detecte que haya cambiado la luz ambiental reflejada en las imágenes del producto o que un elemento a inspeccionar necesite una iluminación diferente a otro elemento a inspeccionar. De la misma forma, el sistema puede comprender al menos un reflector de luz o un filtro de luz, y el método puede comprender una etapa en la que se regule la intensidad y la dirección de la luz que le llega al producto mediante la regulación de dicho reflector o filtro.Optionally, the system can comprise more than one position sensor with which, in the step of detecting if the product is in the field of view of the camera, also detecting if the product is in an orientation sufficiently similar to that of the master image, for example to select the appropriate camera with which to take the image. In turn, the method may comprise a step in which the intensity and direction of the source light is regulated, for example in the case where the processing unit detects that the ambient light reflected in the images of the source has changed. product or that an item to be inspected needs different lighting than another item to be inspected. In the same way, the system can comprise at least a light reflector or a light filter, and the method can comprise a stage in which the intensity and direction of the light that reaches the product is regulated by regulating said reflector or filter.

Por lo que se refiere al sistema de inspección de fallos, este comprende al menos una cámara, un sensor de posición o presencia, una unidad de iluminación y una unidad de procesamiento, todos ellos vinculados electrónicamente, así como una estructura de soporte. Dicha estructura de soporte está constituida por dos postes verticales unidos por un larguero horizontal regulable en altura, y comprende al menos un elemento de sujeción para cámaras o sensores, el cual se puede rotar y desplazar por la estructura, de forma que permite regular tanto el campo visual de las cámaras y/o los sensor soportados como la iluminación, en función del tipo de producto a inspeccionar.As regards the fault inspection system, it comprises at least a camera, a position or presence sensor, a lighting unit and a processing unit, all of them electronically linked, as well as a support structure. Said support structure is made up of two vertical posts joined by a horizontal beam adjustable in height, and comprises at least one holding element for cameras or sensors, which can be rotated and moved around the structure, so that it allows both the visual field of the cameras and / or the supported sensors such as lighting, depending on the type of product to be inspected.

Estas y otras características y ventajas del método y el sistema objeto de la presente invención resultarán evidentes a partir de la descripción de una realización preferida, pero no exclusiva, que se ilustra a modo de ejemplo no limitativo en los dibujos que se acompañan.These and other characteristics and advantages of the method and system object of the present invention will be evident from the description of a preferred embodiment, but non-exclusive, which is illustrated by way of non-limiting example in the accompanying drawings.

BREVE DESCRIPCIÓN DE LOS DIBUJOSBRIEF DESCRIPTION OF THE DRAWINGS

Figura 1.- Ilustra una vista esquemática de una realización de ejemplo del presente sistema de detección de fallos.Figure 1.- Illustrates a schematic view of an example embodiment of the present fault detection system.

Figura 2.- Ilustra un ejemplo de aplicación del presente método de detección de fallos.Figure 2.- Illustrates an example of application of the present fault detection method.

DESCRIPCIÓN DE UNA REALIZACIÓN PREFERENTEDESCRIPTION OF A PREFERRED EMBODIMENT

Tal y como se aprecia en la Fig. 1, la realización de ejemplo del sistema de inspección de fallos de la invención comprende al menos una cámara (1), un sensor de posición o presencia (2), una unidad de iluminación (3) y una unidad de procesamiento (4), todos ellos vinculados electrónicamente. En esta vista esquemática se ha representado la vinculación mediante unos cables (líneas punteadas), aunque la vinculación también puede ser inalámbrica. El sistema también comprende una estructura de soporte (5) constituida por dos postes verticales (51) unidos por un larguero horizontal (52) regulable en altura. La estructura (5) comprende al menos un elemento de sujeción (53) para cámaras, sensores y/o unidades de iluminación, el cual se poder rotar y desplazar en relación a la estructura (5), de forma que se permite regular el campo visual de las cámaras (1) y/o los sensores (2) soportados, en función del tipo de productos a inspeccionar.As seen in Fig. 1, the exemplary embodiment of the fault inspection system of the invention comprises at least a camera (1), a position or presence sensor (2), a lighting unit (3) and a processing unit (4), all of them electronically linked. In this schematic view, the connection has been represented by means of cables (dotted lines), although the connection can also be wireless. The system also comprises a support structure (5) made up of two vertical posts (51) joined by a horizontal beam (52) adjustable in height. The structure (5) comprises at least one holding element (53) for cameras, sensors and / or lighting units, which can be rotated and moved relative to the structure (5), so that the field can be regulated visual of the cameras (1) and / or the sensors (2) supported, depending on the type of products to be inspected.

En la Fig. 2 se muestra un ejemplo gráfico de las etapas que realiza una posible realización del método. Como se aprecia en la Fig. 2(A), el método comprende una fase inicial de puesta en servicio, que comienza con la generación de una imagen patrón (a) por cada cámara (1), siendo en este ejemplo sólo una. En esta imagen patrón (a) se selecciona una marca de referencia (b), siendo en este ejemplo el conjunto de píxeles (p) marcados en color negro de la cuadrícula de la Fig. 2(A). Así mismo, se define una región de búsqueda (c) donde se buscaran las marcas de referencia en la imagen de cada producto a adquirir por la cámara (1). Por último, esta primera fase comprende la determinación de las características de una o varias secciones (d) de la imagen patrón (a) que se deberá detectar en las imágenes de los productos. En esta realización de ejemplo, la sección (d) corresponde a la geometría de la superficie de un componente para comprobar si el componente se ha instalado, comprendiendo en este caso un área romboidal monocromática.Fig. 2 shows a graphic example of the steps that a possible embodiment of the method performs. As can be seen in Fig. 2 (A), the method comprises an initial commissioning phase, which begins with the generation of a standard image (a) for each camera (1), being in this example only one. In this pattern image (a), a reference mark (b) is selected, being in this example the set of pixels (p) marked in black in the grid of Fig. 2 (A). Likewise, a search region (c) is defined where the reference marks in the image of each product to be acquired by the camera (1) will be searched. Finally, this first phase involves determining the characteristics of one or more sections (d) of the standard image (a) that must be detected in the images of the products. In this example embodiment, section (d) corresponds to the geometry of the surface of a component to check if the component has been installed, in this case comprising a monochromatic rhomboid area.

Una vez acabada la fase de puesta en servicio, el método continua con la fase de inspección de fallos, la cual se realiza para cada producto a inspeccionar. Esta fase empieza con la adquisición de la imagen de un producto (e) y con la identificación de la región de búsqueda (c), tal y como se ejemplifica en la Fig. 1(B). A continuación, se modifica la región de búsqueda (c) o bien la marca de referencia (b), ya sea reposicionándola, variando su tamaño y/o realizando una transformación de la perspectiva, para buscar y hacer coincidir al menos una marca de la región de búsqueda (c) con al menos una marca de referencia (b). Como se muestra en la Fig. 1(C), en este ejemplo se modifica la marca de referencia (b). Una vez encontrada la marca de referencia modificada (b’) que coincide con una marca de la región de búsqueda (c), se aplican las mismas modificaciones a la sección (d) para obtener una sección modificada (d’). Posteriormente, se compara esta sección modificada (d’) con la imagen del producto ajustada con filtros (e’) con la intención de encontrarla, tal y como se ejemplifica en la Fig. 1(D). En caso de no encontrarla, el sistema emitiría una señal, calificaría el producto como defectuoso y/o detendría el proceso de fabricación, por considerarse un fallo de fabricación al no estar instalado el componente. Once the commissioning phase is finished, the method continues with the failure inspection phase, which is performed for each product to be inspected. This phase begins with the acquisition of the image of a product (e) and with the identification of the search region (c), as exemplified in Fig. 1 (B). Next, the search region (c) or the reference mark (b) is modified, either by repositioning it, varying its size and / or performing a perspective transformation, to search for and match at least one mark of the search region (c) with at least one reference mark (b). As shown in Fig. 1 (C), in this example reference mark (b) is modified. Once the modified reference mark (b ’) that matches a search region mark (c) is found, the same modifications are applied to section (d) to obtain a modified section (d’). Subsequently, this modified section (d ’) is compared with the product image adjusted with filters (e’) with the intention of finding it, as exemplified in Fig. 1 (D). If it is not found, the system will emit a signal, classify the product as defective and / or stop the manufacturing process, as it is considered a manufacturing failure due to the component not being installed.

Claims (7)

REIVINDICACIONES 1. Método de inspección de fallos en procesos de fabricación de productos, a llevar a cabo en al menos una de las estaciones por la que pasan los productos uno a uno, la cual contiene un sistema que comprende al menos una cámara (1), un sensor de posición o presencia (2), una unidad de procesamiento (3) y una unidad de iluminación (4), así como estructura de soporte (5), caracterizado por que comprende una fase inicial de puesta en servicio, la cual contiene al menos las siguientes etapas:1. Failure inspection method in product manufacturing processes, to be carried out in at least one of the stations through which the products pass one by one, which contains a system comprising at least one camera (1), a position or presence sensor (2), a processing unit (3) and a lighting unit (4), as well as a support structure (5), characterized in that it comprises an initial commissioning phase, which contains at least the following stages: A) generar una imagen patrón (a) por cada cámara (1), estando cada imagen patrón definida en función del tipo de producto a inspeccionar,A) generate a standard image (a) for each camera (1), each standard image being defined according to the type of product to be inspected, B) seleccionar una o más marcas de referencia (b) en cada imagen patrón, definiéndose una marca como el conjunto de píxeles (p) de una sección de una imagen,B) select one or more reference marks (b) in each pattern image, defining a mark as the set of pixels (p) of a section of an image, C) definir una región de búsqueda (c) donde se buscaran las marcas de referencia en la imagen del producto a adquirir por cada cámara,C) define a search region (c) where the reference marks in the image of the product to be purchased by each camera will be searched, D) determinar una o varias secciones (d) de cada imagen patrón (a), definiéndose las secciones (d) como las características a detectar en las imágenes de los productos (e) , correspondiendo dichas características a contornos, bordes, áreas o figuras geométricas,D) determine one or several sections (d) of each standard image (a), defining sections (d) as the characteristics to be detected in the images of the products (e), said characteristics corresponding to contours, edges, areas or figures geometric, así como una fase de inspección de fallos a realizar para cada producto, que contiene al menos las siguientes etapas:as well as a failure inspection phase to be carried out for each product, which contains at least the following stages: E) adquirir una imagen del producto (e) con cada cámara (1) cuando el sensor de posición (2) detecta que el producto se encuentra en la posición que corresponde al campo de visión de cada cámara (1),E) acquire an image of the product (e) with each camera (1) when the position sensor (2) detects that the product is in the position that corresponds to the field of view of each camera (1), F) modificar la región de búsqueda (c) de la imagen del producto (e) o la marca de referencia (b’), ya sea reposicionándola, variando su tamaño y/o realizando una transformación de la perspectiva, para buscar y hacer coincidir al menos una marca (f) que coincida con la correspondiente marca de referencia (b’), F) Modify the search region (c) of the product image (e) or the reference brand (b '), either by repositioning it, varying its size and / or performing a perspective transformation, to search and match at least one mark (f) that matches the corresponding reference mark (b '), G) aplicar la modificación necesitada en la etapa anterior a cada sección (d’) de la imagen patrón (a) o a la imagen del producto (e’), a la vez que ajustar la imagen del producto (e’) mediante la aplicación de filtros,G) apply the modification needed in the previous step to each section (d ') of the pattern image (a) or to the product image (e'), while adjusting the product image (e ') by applying of filters, H) buscar cada sección modificada (d’) o no (d) en la imagen del producto modificada y/o ajustada (e’),H) search for each section modified (d ’) or not (d) in the modified and / or adjusted product image (e’), I) emitir una señal, calificar el producto como defectuoso y/o detener el proceso de fabricación en caso que no se encuentren dichas secciones (d, d’).I) issue a signal, classify the product as defective and / or stop the manufacturing process in the event that these sections are not found (d, d ’). 2. Método según la reivindicación 1, caracterizado por que la fase inicial de puesta en servicio comprende además una etapa en la que se establece una ventana de tiempo de espera en la cual, en la fase de inspección de fallos, el sensor de posición (2) debe detectar que se ha sustituido un producto por el siguiente en el campo de visión de la cámara (1), y en caso contrario, la unidad de procesamiento (4) emitirá una señal de aviso.2. Method according to claim 1, characterized in that the initial commissioning phase further comprises a stage in which a waiting time window is established in which, in the failure inspection phase, the position sensor ( 2) it must detect that one product has been replaced by the next in the field of view of the camera (1), otherwise the processing unit (4) will issue a warning signal. 3. Método según cualquiera de las reivindicaciones anteriores, caracterizado por que la etapa de buscar al menos una marca (f) que corresponda a una marca de referencia (b) se realiza mediante una comparación por medio de una función o algoritmo matemático.Method according to any of the preceding claims, characterized in that the step of searching for at least one mark (f) that corresponds to a reference mark (b) is carried out by means of a comparison by means of a mathematical function or algorithm. 4. Método según cualquiera de las reivindicaciones anteriores, caracterizado por que la etapa detectar con el sensor de posición (2) si el producto se encuentra en el campo de visión de la cámara (1) también comprende detectar si el producto se encuentra en una orientación suficientemente similar a la de la imagen patrón (a).Method according to any of the preceding claims, characterized in that the step of detecting with the position sensor (2) if the product is in the field of view of the camera (1) also comprises detecting if the product is in a orientation sufficiently similar to that of the pattern image (a). 5. Método según cualquiera de las reivindicaciones anteriores, caracterizado por que comprende una etapa en la que se regula la unidad de iluminación (3) para ajustar la intensidad y la dirección de la luz.5. Method according to any of the preceding claims, characterized in that it comprises a step in which the lighting unit (3) is adjusted to adjust the intensity and direction of the light. 6. Método según cualquiera de las reivindicaciones anteriores, caracterizado por que comprende al menos un reflector de luz o un filtro de luz y comprende una etapa en la que se regula para ajustar la intensidad y la dirección de la luz que le llega al producto.6. Method according to any of the preceding claims, characterized in that it comprises at least a light reflector or a light filter and comprises a step in which it is regulated to adjust the intensity and direction of the light that reaches the product. 7. Sistema de inspección de fallos en procesos de fabricación de productos, configurado para llevar a cabo el método de cualquiera de las reivindicaciones anteriores, caracterizado porque comprende al menos una cámara (1), un sensor de posición o presencia (2), una unidad de iluminación (3) y una unidad de procesamiento (4), todos ellos vinculados electrónicamente, así como una estructura de soporte (5) constituida por dos postes verticales (51) unidos por un larguero horizontal (52) regulable en altura, dicha estructura (5) comprendiendo al menos un elemento de sujeción (53) para cámaras, sensores y/o unidades de iluminación, el cual se poder rotar y desplazar en relación a la estructura (5). 7. Failure inspection system in product manufacturing processes, configured to carry out the method of any of the preceding claims, characterized in that it comprises at least a camera (1), a position sensor or presence (2), a lighting unit (3) and a processing unit (4), all of them electronically linked, as well as a support structure (5) consisting of two vertical posts (51) joined by a horizontal crossbar (52 ) adjustable in height, said structure (5) comprising at least one holding element (53) for cameras, sensors and / or lighting units, which can be rotated and moved in relation to the structure (5).
ES201831061A 2018-11-02 2018-11-02 Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding) Pending ES2758549A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
ES201831061A ES2758549A1 (en) 2018-11-02 2018-11-02 Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
ES201831061A ES2758549A1 (en) 2018-11-02 2018-11-02 Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding)

Publications (1)

Publication Number Publication Date
ES2758549A1 true ES2758549A1 (en) 2020-05-05

Family

ID=70457371

Family Applications (1)

Application Number Title Priority Date Filing Date
ES201831061A Pending ES2758549A1 (en) 2018-11-02 2018-11-02 Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding)

Country Status (1)

Country Link
ES (1) ES2758549A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES1026046U (en) * 1993-10-22 1994-03-01 Aplicaciones Ferricas S A Artificial vision machine for quality control in the manufacture of ceramic pieces for floors. (Machine-translation by Google Translate, not legally binding)
ES2109155A1 (en) * 1995-03-22 1998-01-01 Protos Desarrollo S A System for controlling the quality of components on the basis of their surface appearance
ES2323585T3 (en) * 2002-09-03 2009-07-21 Continental Mabor - Industria De Pneus, S.A. AN AUTOMATIC SYSTEM FOR CONTROL AND SURVEILLANCE OF THE TOLERANCE OF THE SOLAPING IN THE TEXTILE FABRICS.
US20150146965A1 (en) * 2012-05-28 2015-05-28 Msc & Sgcc Optical method for inspecting transparent or translucent containers bearing visual

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES1026046U (en) * 1993-10-22 1994-03-01 Aplicaciones Ferricas S A Artificial vision machine for quality control in the manufacture of ceramic pieces for floors. (Machine-translation by Google Translate, not legally binding)
ES2109155A1 (en) * 1995-03-22 1998-01-01 Protos Desarrollo S A System for controlling the quality of components on the basis of their surface appearance
ES2323585T3 (en) * 2002-09-03 2009-07-21 Continental Mabor - Industria De Pneus, S.A. AN AUTOMATIC SYSTEM FOR CONTROL AND SURVEILLANCE OF THE TOLERANCE OF THE SOLAPING IN THE TEXTILE FABRICS.
US20150146965A1 (en) * 2012-05-28 2015-05-28 Msc & Sgcc Optical method for inspecting transparent or translucent containers bearing visual

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
BAYGIN M.; KARAKOSE M.; SARIMADEN A.; AKIN E. Machine vision based defect detection approach using image processing. 2017 International Artificial Intelligence and Data Processing Symposium, (IDAP 2017), 2017, 978-1-5386-1880-6 , (DOI: 10.1109/IDAP.2017.8090292) *
YEHU SHEN; RUI MO; LEI WEI; YI ZHU; ZHENYUN PENG; YAOHUI ZHANG. Bottle cap scratches detection with computer vision techniques. 2013 9th International Conference on Natural Computation (ICNC), 2013, Páginas 1314-1318 978-1-4673-4714-3, (DOI: 10.1109/ICNC.2013.6818182) *

Similar Documents

Publication Publication Date Title
JP3197766U (en) Surface inspection device
EP2831537B1 (en) Apparatus, method and computer program for three-dimensional measurement
JP2017126870A5 (en)
EP2508871A1 (en) Inspection apparatus, measurement method for three-dimensional shape, and production method for structure
JP6191204B2 (en) Appearance inspection apparatus and appearance inspection method for automobile body
KR20140120821A (en) Method of inspecting foreign substance on a board
JP6473206B2 (en) Three-dimensional detection apparatus and three-dimensional detection method
CN111735413A (en) Three-dimensional shape measuring device
JP2006275536A (en) Inspection device for welded part
CN110286134A (en) A kind of defect detecting device and its method
JP2014002041A (en) Surface inspection device and surface inspection method
JP6064354B2 (en) Dimming system
US20170363548A1 (en) Method and apparatus of inspecting a substrate with a component mounted thereon
JP7201266B2 (en) RUNWAY LIGHT INSPECTION DEVICE AND RUNWAY LIGHT INSPECTION METHOD
KR101522312B1 (en) Inspection device for pcb product and inspecting method using the same
ES2758549A1 (en) Failure inspection method and system in product manufacturing processes (Machine-translation by Google Translate, not legally binding)
ES1258130U (en) Failure inspection system in product manufacturing processes (Machine-translation by Google Translate, not legally binding)
JP6913615B2 (en) Railroad vehicle visual inspection equipment and its setting method
US20200128234A1 (en) Support structure for a multi-target camera calibration system
JP5895733B2 (en) Surface defect inspection apparatus and surface defect inspection method
KR101405427B1 (en) Multi moire vision inspection apparatus using one period grid
TWI504859B (en) Method for photographing and piecing together the images of an object
JP5481232B2 (en) Pantograph monitoring device
JP2019045346A (en) Inspection device
KR102117697B1 (en) Apparatus and method for surface inspection

Legal Events

Date Code Title Description
BA2A Patent application published

Ref document number: 2758549

Country of ref document: ES

Kind code of ref document: A1

Effective date: 20200505

PA2A Conversion into utility model

Effective date: 20201120