DE102019115139A1 - Nahtprüfeinrichtung - Google Patents

Nahtprüfeinrichtung Download PDF

Info

Publication number
DE102019115139A1
DE102019115139A1 DE102019115139.2A DE102019115139A DE102019115139A1 DE 102019115139 A1 DE102019115139 A1 DE 102019115139A1 DE 102019115139 A DE102019115139 A DE 102019115139A DE 102019115139 A1 DE102019115139 A1 DE 102019115139A1
Authority
DE
Germany
Prior art keywords
seam
image data
feature size
quality determination
sewing product
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102019115139.2A
Other languages
English (en)
Inventor
Kenji Takahashi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fanuc Corp
Original Assignee
Fanuc Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fanuc Corp filed Critical Fanuc Corp
Publication of DE102019115139A1 publication Critical patent/DE102019115139A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • DTEXTILES; PAPER
    • D06TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06HMARKING, INSPECTING, SEAMING OR SEVERING TEXTILE MATERIALS
    • D06H3/00Inspecting textile materials
    • D06H3/08Inspecting textile materials by photo-electric or television means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • G01N21/95607Inspecting patterns on the surface of objects using a comparative method
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/0006Industrial image inspection using a design-rule based approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • DTEXTILES; PAPER
    • D06TREATMENT OF TEXTILES OR THE LIKE; LAUNDERING; FLEXIBLE MATERIALS NOT OTHERWISE PROVIDED FOR
    • D06HMARKING, INSPECTING, SEAMING OR SEVERING TEXTILE MATERIALS
    • D06H2201/00Inspecting textile materials
    • D06H2201/10Inspecting textile materials by means of television equipment
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30124Fabrics; Textile; Paper

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Materials Engineering (AREA)
  • Textile Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Sewing Machines And Sewing (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)

Abstract

Eine Nahtprüfeinrichtung kann automatisch die Qualität eines Bildes einer Naht eines Nähprodukts bestimmen. Die Nahtprüfeinrichtung weist eine Bilddatenerfassungseinheit, die Bilddaten einer Naht eines Nähprodukts erfasst, eine Merkmalsextraktionseinheit, die eine Merkmalsgröße der Naht aus den Bilddaten der Naht des Nähprodukts extrahiert, die von der Bilddatenerfassungseinheit erfasst werden, und eine Qualitätsbestimmungseinheit auf, die eine Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt.

Description

  • HINTERGRUND DER ERFINDUNG
  • Gebiet der Erfindung
  • Die vorliegende Erfindung betrifft eine Nahtprüfeinrichtung.
  • Beschreibung der verwandten Technik
  • Zu den in einer Fabrik verarbeiteten Waren zählen Nähprodukte, bei denen tuchähnliche Werkstücke wie zum Beispiel ein Bezugsteil eines Autositzes und eine Tasche durch Nähen verarbeitet werden. Bei einigen Nähprodukten ist ein Nahtteil Teil der Oberflächengestaltung. Für solche Nähprodukte hat ein Arbeiter die Nähprodukte eines nach dem anderen visuell darauf geprüft, ob ein Nahtteil eine Verzerrung oder Veränderung der Länge, des Winkels oder dergleichen der Naht beinhaltet oder nicht.
  • Da die Prüfung von Nähten eines Nähprodukts von einem Arbeiter wie oben beschrieben visuell durchgeführt wird, hängt die Prüfung von der Fähigkeit des Arbeiters, dem Gespür des Arbeiters, der körperlichen Verfassung des Arbeiters am Prüftag und dergleichen ab. Dies führt zu dem Problem, dass es schwierig ist, das Prüfniveau und die Prüfzeit auf einem bestimmten Niveau zu halten. Um sicherzustellen, dass Arbeiter über einen bestimmten Kenntnisstand verfügen, sind ferner Kosten erforderlich, um die Arbeiter für die Sichtprüfung von Nähten auszubilden.
  • KURZDARSTELLUNG DER ERFINDUNG
  • Es ist daher eine Aufgabe der vorliegenden Erfindung, eine Nahtprüfeinrichtung bereitzustellen, die in der Lage ist, die Qualität eines Nahtbildes eines Nähproduktes automatisch zu bestimmen.
  • Eine Nahtprüfeinrichtung der vorliegenden Erfindung führt eine Bildverarbeitung an Bilddaten eines Nähprodukts durch, die von einer Abbildungseinheit wie einer Kamera aufgenommen werden, um eine Naht des Nähprodukts zu erkennen, und quantisiert für die erkannte Naht die Länge, den Winkel oder dergleichen als Merkmalsgröße und bestimmt die Qualität der Naht des Nähprodukts durch Bestimmen, ob die Merkmalsgröße innerhalb eines bestimmten numerischen Wertes liegt oder nicht.
  • Ferner verwendet eine Nahtprüfeinrichtung einer anderen Ausführungsform der vorliegenden Erfindung ein Mittel zum Maschinenlemen und führt eine Qualitätsbestimmung einer Naht eines Nähprodukts auf der Grundlage eines Bildes der Naht des Nähprodukts durch.
  • Ein Aspekt der vorliegenden Erfindung ist eine Nahtprüfeinrichtung, die die Qualität eines Nahtbildes eines Nähproduktes automatisch bestimmt. Die Einrichtung weist eine Bilddatenerfassungseinheit, die Bilddaten der Naht eines Nähprodukts erfasst, eine Merkmalsextraktionseinheit, die eine Merkmalsgröße der Naht aus den Bilddaten der Naht des Nähprodukts extrahiert, die von der Bilddatenerfassungseinheit erfasst werden, und eine Qualitätsbestimmungseinheit auf, die eine Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt. Die Qualitätsbestimmungseinheit führt die Qualitätsbestimmung der Naht basierend auf mindestens einem einer Länge und eines Winkels in der Merkmalsgröße der Naht durch.
  • Ein anderer Aspekt der vorliegenden Erfindung ist eine Nahtprüfeinrichtung, die die Qualität einer Naht eines Nähproduktes automatisch bestimmt. Die Einrichtung weist eine Bilddatenerfassungseinheit, die Bilddaten der Naht eines Nähprodukts erfasst, eine Merkmalsextraktionseinheit, die eine Merkmalsgröße der Naht aus den Bilddaten der Naht des Nähprodukts extrahiert, die von der Bilddatenerfassungseinheit erfasst werden, und eine Qualitätsbestimmungseinheit auf, die eine Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt. Die Qualitätsbestimmungseinheit ist als Maschinenlernvorrichtung konfiguriert, bei der ein überwachtes Lernen durchgeführt wird, indem eine Merkmalsgröße der Naht der Nähprodukte und ein Qualitätsergebnis, das im Vorfeld für das Nähprodukt bestimmt wird, als Lehrerdaten verwendet werden.
  • Gemäß der vorliegenden Erfindung ist es möglich, die visuelle Prüfung von Nähten, bei der man sich herkömmlicherweise auf das Gespür eines Arbeiters gestützt hat, unter Verwendung von Quantisierung zu verwalten. Darüber hinaus ist auch mit einer Arbeitsersparnis zu rechnen.
  • Figurenliste
  • Oben erwähnte und andere Aufgaben und Merkmale der vorliegenden Erfindung gehen aus der folgenden Beschreibung von Ausführungsbeispielen derselben unter Bezugnahme auf die beigefügten Zeichnungen hervor. Es zeigen in den Zeichnungen:
    • 1 eine schematische Darstellung einer Hardwarekonfiguration einer Nahtprüfeinrichtung gemäß einer Ausführungsform;
    • 2 ein schematisches Funktionsblockdiagramm einer Nahtprüfeinrichtung gemäß einer Ausführungsform;
    • 3 ein Diagramm zum Erläutern der Qualitätsbestimmung einer Naht;
    • 4 ein Diagramm zum Erläutern von Eingabedaten, wenn die Qualität einer Naht von einer Maschinenlernvorrichtung bestimmt wird; und
    • 5 ein Diagramm zum Erläutern der Qualitätsbestimmung einer speziellen Naht.
  • DETAILLIERTE BESCHREIBUNG DER BEVORZUGTEN AUSFÜHRUNGSFORMEN
  • Nachstehend wird eine Ausführungsform der vorliegenden Erfindung in Verbindung mit den Zeichnungen beschrieben.
  • 1 ist eine schematische Darstellung einer Hardwarekonfiguration, die einen Hauptteil einer Nahtprüfeinrichtung gemäß einer Ausführungsform der vorliegenden Erfindung veranschaulicht. Eine Nahtprüfeinrichtung 1 der vorliegenden Ausführungsform kann als ein Personalcomputer implementiert sein, der zusammen mit einer Fertigungsmaschine wie einer Nähmaschine oder dergleichen, die in einer Fabrik installiert ist, oder einem Computer wie einem Zellencomputer, einem Hostcomputer oder einem Edge-Server, einem Cloud-Server oder dergleichen bereitgestellt ist, der zur Betriebsverwaltung und dergleichen einer in einer Fabrik installierten Fertigungsmaschine verwendet wird. 1 veranschaulicht ein Beispiel für den Fall, dass die Nahtprüfeinrichtung 1 als ein Computer installiert ist, der zusammen mit einer in einer Fabrik installierten Fertigungsmaschine bereitgestellt ist.
  • Eine CPU 11, die für die Nahtprüfeinrichtung 1 der vorliegenden Ausführungsform bereitgestellt ist, ist ein Prozessor, der die Nahtprüfeinrichtung 1 als Ganzes steuert. Die CPU 11 liest ein in einem ROM 12 gespeichertes Systemprogramm über einen Bus 21 und steuert die gesamte Nahtprüfeinrichtung 1 gemäß dem Systemprogramm. Ein RAM 13 speichert vorübergehend vorübergehende Berechnungsdaten und Anzeigedaten, verschiedenen Datentypen, die von einem Bediener über eine Eingabeeinheit, die nicht dargestellt ist, und dergleichen eingegeben werden.
  • Ein nichtflüchtiger Speicher 14 ist als ein Speicher konfiguriert, in dem ein Speicherzustand aufrechterhalten wird, selbst wenn die Energieversorgung der Nahtprüfeinrichtung 1 unter Verwendung eines SRAM, einer SSD oder dergleichen, die durch eine nicht dargestellte Batterie unterstützt werden, ausgeschaltet ist. Der nichtflüchtige Speicher 14 speichert Daten und Programmeingaben über eine Eingabevorrichtung 71, Daten, die von einem Roboter 2 über eine Schnittstelle 19 erfasst werden, Daten, die von einer Abbildungsvorrichtung 3 über eine Schnittstelle 20 erfasst wurden, und dergleichen. Die Daten, Programm und dergleichen, die in dem nichtflüchtigen Speicher 14 gespeichert sind, können zur Verwendung in den RAM 13 geladen werden. In einem ROM 12 werden verschiedene Algorithmen, die für die Bildanalyse von Bilddaten erforderlich sind, die von der Abbildungsvorrichtung 3 erfasst werden, und ein Systemprogramm zum Durchführen anderer erforderlicher Prozesse im Voraus geschrieben.
  • Auf einer Anzeigevorrichtung 70 werden verschiedene Arten von Daten, die in dem Speicher gelesen werden, Daten, die als Ergebnis der Ausführung eines Programms oder dergleichen erhalten werden, und dergleichen über eine Schnittstelle 17 ausgegeben und angezeigt. Eine Eingabevorrichtung 71, die aus einer Tastatur, einer Zeigevorrichtung und dergleichen konfiguriert ist, empfängt einen Befehl auf der Grundlage einer Bedienung durch einen Bediener, Daten und dergleichen und überträgt sie an die CPU 11.
  • Die Abbildungsvorrichtung 3 hat die Funktion, ein Bild eines Erfassungsziels wie eine Kamera aufzunehmen und es als Bilddaten auszugeben. Der Abbildungsvorgang durch die Abbildungsvorrichtung 3 wird durch einen Abbildungsbefehl ausgeführt, der über die Schnittstelle 20 durch Ausführung eines Abbildungssteuercodes ausgegeben wird, der in einem Prüfprogramm durch die CPU 11 enthalten ist. Durch den Abbildungsvorgang erhaltene Bilddaten werden über die Schnittstelle 20 an die CPU 11 übertragen.
  • Ein Roboter 2 kann ein Gelenkroboter sein, bei dem die Abbildungsvorrichtung 3 an seinem distalen Ende bereitgestellt ist, oder er kann ein Orthogonalroboter, bei dem eine Antriebseinheit, an der die Abbildungsvorrichtung 3 bereitgestellt ist, an die Position abzubildenden Nähproduktes bewegt werden kann, oder dergleichen sein. Der Betrieb des Roboters 2 wird durch einen Steuerbefehl gesteuert, der über die Schnittstelle 19 durch Ausführung eines im Prüfprogramm enthaltenen Robotersteuercodes durch die CPU 11 ausgegeben wird.
  • 2 ist ein schematisches Funktionsblockdiagramm der Nahtprüfeinrichtung 1 gemäß einer Ausführungsform der vorliegenden Erfindung. Jeder Funktionsblock, der in 2 dargestellt ist, ist derart implementiert, dass die CPU 11, die der in 1 dargestellten Nahtprüfeinrichtung 1 bereitgestellt wird, das Systemprogramm ausführt, um den Betrieb jeder Einheit der Nahtprüfeinrichtung 1 zu steuern.
  • Die Nahtprüfeinrichtung 1 der vorliegenden Ausführungsform weist eine Steuereinheit 100, eine Bilddatenerfassungseinheit 110, eine Merkmalsextraktionseinheit 120, eine Qualitätsbestimmungseinheit 130 und eine Anzeigeeinheit 140 auf.
  • Die Steuereinheit 100 steuert den Roboter 2 und die Bildergebungsvorrichtung 3 basierend auf einem Prüfprogramm 200, das in dem nichtflüchtigen Speicher 14 gespeichert ist, um ein zu prüfendes Nähprodukt abzubilden. Die Steuereinheit 100 treibt jede Antriebseinheit des Roboters 2 derart an, dass die an dem Roboter 2 angebrachte Abbildungsvorrichtung 3 zu einer Position gelangt, an der sie einen Abbildungsabschnitt eines zu prüfenden Nähprodukts abbilden kann. Wenn die Abbildungsvorrichtung 3 zu der Position gelangt, an der sie den Abbildungsabschnitt des Nähprodukts abbilden kann, weist die Steuereinheit 100 die Abbildungsvorrichtung 3 an, die Abbildungsbedingungen (Einstellung von Belichtung, Fokus, Vergrößerung und dergleichen) und den Abbildungsvorgang einzustellen. Die Steuereinheit 100 kann den Roboter 2 und die Abbildungsvorrichtung 3 steuern, um mehrere Abbildungsabschnitte eines Nähprodukts gemäß dem Prüfprogramm 200 abzubilden. Es ist zu beachten, dass die Steuereinheit 100 kein wesentliches Element für die Nahtprüfeinrichtung 1 ist. Zum Beispiel muss in dem Fall, in dem Bilddaten eines von einer Bilderfassungsvorrichtung oder dergleichen aufgenommenen Nähprodukts über eine externe Speichervorrichtung oder ein nicht dargestelltes Netzwerk erfasst werden, und eine Naht unter Verwendung der erfassten Bilddaten des geprüften Nähproduktes geprüft wird, die Nahtprüfeinrichtung 1 selbst die Steuereinheit 100 nicht aufweisen.
  • Die Bilddatenerfassungseinheit 110 erfasst Bilddaten eines von der Abbildungsvorrichtung 3 aufgenommenen Nähprodukts. Von der Bilddatenerfassungseinheit 110 zu erfassende Bilddaten können kollektiv verwaltet werden, indem mehrere Bilddatenstücke, die durch Abbilden eines Nähprodukts erhalten werden, in einen Satz von Bilddatengruppen eingefügt werden.
  • Die Merkmalsextraktionseinheit 120 führt eine öffentlich bekannte Bildverarbeitung an den durch die Bilddatenerfassungseinheit 110 erfassten Bilddaten durch und extrahiert eine Merkmalsgröße einer Naht aus einem Bild eines Nähprodukts. Die Merkmalsextraktionseinheit 120 kann einen Nahtteil aus einem Bild eines Nähprodukts spezifizieren, indem eine öffentlich bekannte Bildverarbeitung durchgeführt wird, wie zum Beispiel Rauschentfernung, Kantenextraktion, Musterabgleich unter Verwendung von zuvor erzeugten Nahtmustern, und die Merkmalsgröße der Naht aus dem Bild des angegebenen Nahtteils extrahieren. Die Merkmalsextraktionseinheit 120 kann für einen Nahtabschnitt, der aus einem Bild eines Nähprodukts spezifiziert ist, eine Reihe von Nähten (eine Reihe von Nähten, die kontinuierlich in der gleichen Richtung ausgerichtet sind, eine Reihe von Nähten, die in einem vorbestimmten Bereich gesammelt werden, und dergleichen) als einen Satz von Nähten gruppieren und die Merkmalsgröße der im Satz enthaltenen Nähte dann extrahieren. Die Merkmalsgröße der von der Merkmalsextraktionseinheit 120 zu extrahierenden Nähte kann zum Beispiel die Anzahl der Nähte, die Länge jeder Naht oder ein Winkel gegen eine vorbestimmte Referenzachse sein. Ferner können als die Merkmalsgröße der Naht, die durch die Merkmalsextraktionseinheit 120 extrahiert werden soll, die Breite, die Fläche, die Farbe, das Vorhandensein/Fehlen eines Nahtfehlers oder dergleichen jeder Naht als Merkmalsgröße extrahiert werden.
  • Die Qualitätsbestimmungseinheit 130 bestimmt die Qualität einer Naht eines Nähprodukts basierend auf der Merkmalsgröße der durch die Merkmalsextraktionseinheit 120 extrahierten Naht. Wie in 3 dargestellt, kann in Bezug auf die Merkmalsgrößen der durch die Merkmalsextraktionseinheit 120 extrahierten Nähte die Qualitätsbestimmungseinheit 130 bestimmen, dass das Nähprodukt ein fehlerhaftes Produkt ist, wenn die Anzahl von Nähten aus einem vorbestimmten zulässigen Bereich einer bestimmten Länge gleich oder größer als ein vorbestimmter Schwellenwert ist. Wie in 3 dargestellt, kann in Bezug auf die Merkmalsgrößen der durch die Merkmalsextraktionseinheit 120 extrahierten Nähte die Qualitätsbestimmungseinheit 130 bestimmen, dass das Nähprodukt ein fehlerhaftes Produkt ist, wenn die Anzahl von Nähten aus einem vorbestimmten zulässigen Bereich einer bestimmten Länge gleich oder größer als ein vorbestimmter Schwellenwert ist. Im Gegensatz dazu kann die Qualitätsbestimmungseinheit 130 bestimmen, dass das Nähprodukt ein konformes Produkt ist, wenn die Anzahl von Nähten, in denen die Länge oder der Winkel innerhalb des zulässigen Bereichs liegt, zum Beispiel gleich oder größer als ein vorbestimmter Schwellenwert ist. Darüber hinaus kann die Qualitätsbestimmungseinheit 130 die Qualität unter Verwendung eines Verhältnisses oder dergleichen der Nähte bestimmen, die außerhalb des zulässigen Bereichs in einem Satz von Nähten liegen. Die Qualitätsbestimmungseinheit 130 kann die oben beschriebene Bestimmung an einer anderen Merkmalsgröße als der Länge oder dem Winkel der Nähte durchführen oder kann die Qualität der Nähte basierend auf einer Kombination dieser Merkmalsgrößen bestimmen. Im Allgemeinen kann ein gutes Aussehen einer Naht erhalten werden, indem mindestens ein Winkel oder eine Länge verwendet wird. Durch Verwendung sowohl der Länge als auch des Winkels zur Qualitätsbestimmung oder durch Durchführen einer Qualitätsbestimmung mit einer weiteren Kombination mit einer anderen Merkmalsgröße ist es jedoch möglich, nur ein Nähprodukt mit einer Naht mit einem besseren Erscheinungsbild als ein konformes Produkt zu bestimmen.
  • Die Qualitätsbestimmungseinheit 130 kann für einen Satz von Nähten die Qualität der Nähte basierend auf einer Variation der Merkmalsgrößen der Nähte bestimmen. Die Qualität der Nähte kann basierend darauf bestimmt werden, ob die Nähte auf den ersten Blick einheitlich aussehen oder nicht. Daher ist es ausreichend aussagekräftig zu bestimmen, dass ein Nähprodukt ein fehlerhaftes Produkt ist, wenn ein Varianzwert der Merkmalsgröße, wie zum Beispiel eine Länge oder ein Winkel, außerhalb eines vorbestimmten Schwellenwerts liegt.
  • Andererseits kann das Erscheinungsbild einer Merkmalsgröße wie eines Nahtfehlers schlecht sein, selbst wenn es nur einen gibt. Daher ist es effektiv, die Qualität basierend auf deren Anzahl zu bestimmen.
  • Für eine Reihe von Nähten kann die Qualitätsbestimmungseinheit 130 die Qualität der Nähte basierend auf einer Differenz in der Merkmalsgröße zwischen benachbarten Nähten bestimmen. Die Differenz in der Merkmalsgröße zwischen benachbarten Nähten hat größere Auswirkungen auf das Erscheinungsbild im Vergleich zu einer Differenz in der Merkmalsgröße zwischen voneinander entfernten Nähten. Daher kann ein Nähprodukt als fehlerhaftes Produkt bestimmt werden, wenn die Anzahl von Nähten festgelegt ist, bei denen eine Differenz zwischen benachbarten Nähten gleich oder größer als ein vorbestimmter Schwellenwert ist.
  • Die Anzeigeeinheit zeigt auf einer Anzeigevorrichtung 70 ein Bestimmungsergebnis der Nahtqualität eines korrigierten Produkts an, das von der Qualitätsbestimmungseinheit 130 bestimmt wird. Basierend auf dem Bestimmungsergebnis der Qualitätsbestimmungseinheit 130 kann die Anzeigeeinheit 140 die Qualitätsbestimmung der Naht des Nähprodukts anzeigen oder insbesondere eine Naht anzeigen, in der eine Merkmalsgröße vom Standard abweicht (wie in 3) dargestellt.
  • Als Modifikation der Nahtprüfeinrichtung 1 kann die Qualitätsbestimmungseinheit 130 als eine öffentlich bekannte Maschinenlernvorrichtung konfiguriert sein. Wenn eine Maschinenlernvorrichtung verwendet wird, ist zum Beispiel im Fall einer einfachen Konfiguration die Qualitätsbestimmungseinheit 130 als eine Maschinenlernvorrichtung konfiguriert, die ein überwachtes Lernen ausführt, und für ein Bild einer Naht eines Nähprodukts wird überwachtes Lernen unter Verwendung der Merkmalsgröße des Nahtbildes von der Merkmalsextraktionseinheit 120 und des Bestimmungsergebnisses der Nahtqualität des Nähproduktes von einem Fachmann als Lehrerdaten durchgeführt. Dann bestimmt die Qualitätsbestimmungseinheit 130 basierend auf dem Ergebnis des überwachten Lernens die Qualität der Naht für das durch die Bilddatenerfassungseinheit 110 erfasste Bild der Naht des Nähprodukts.
  • Im Falle des Konfigurierens der Qualitätsbestimmungseinheit 130 als eine Maschinenlernvorrichtung zum Durchführen eines überwachten Lernens kann die Merkmalsextraktionseinheit 120 eine Merkmalsgröße wie eine Länge oder einen Winkel als eine Merkmalsgröße einer Naht eines Nähprodukts extrahieren. In der Zwischenzeit kann die Merkmalsextraktionseinheit 120 ein Bild selbst einer Naht, die aus einem Bild eines Nähprodukts spezifiziert ist, als Merkmalsgröße extrahieren. In diesem Fall kann die Merkmalsextraktionseinheit 120 ein Nahtbild mit einer vorbestimmten Anzahl von Nähten aus einer Reihe von fortlaufenden Nähten als eine Merkmalsgröße extrahieren.
  • Im Falle der Verwendung einer Maschinenlernvorrichtung als die Qualitätsbestimmungseinheit 130 ist es schwierig zu verstehen, welche Naht ein Problem hat, wenn die Qualität der Nähte unter Verwendung des gesamten Bildes einer Reihe von Nähten bestimmt wird. Wie jedoch in 4 dargestellt, kann unter Verwendung eines Bildes, das jeweils eine oder mehrere kleine (zum Beispiel drei) Nähte aus dem gesamten Bild einer Reihe von Nähten als Eingabedaten für die Maschinenlemvorrichtung aufweist, der Teil angegeben werden, der die Ursache für die Bestimmung ist, dass das Produkt fehlerhaft ist. Als Maschinenlernvorrichtung, die die Qualitätsbestimmungseinheit 130 bildet, kann zum Beispiel ein mehrschichtiges neuronales Netzwerk verwendet werden.
  • Wenngleich die Ausführungsformen der vorliegenden Erfindung oben beschrieben wurden, ist die vorliegende Erfindung nicht nur auf die Beispiele der Ausführungsform beschränkt und kann in verschiedenen Aspekten durch Hinzufügen geeigneter Änderungen implementiert werden.
  • Zum Beispiel zeigt die oben beschriebene Ausführungsform ein Beispiel zum Erhalten eines Bildes eines Nähprodukts durch Steuern des Roboters 2, an dem die Abbildungsvorrichtung 3 angebracht ist. Bei einer solchen Konfiguration kann es jedoch möglich sein, dass der Roboter 2 ein Nähprodukt hält und ermöglicht, dass die Naht des Nähprodukts abgebildet wird, während der Winkel des Nähprodukts in Bezug auf die in der Nähe davon installierte Abbildungsvorrichtung 3 geändert wird.
  • Ferner kann, neben der in 3 dargestellten, als eine Naht zum Beispiel eine Naht mit einer komplexen Form wie in 5 dargestellt ein Ziel sein. In diesem Fall kann eine Merkmalsgröße verwendet werden, die der Form jeder Naht entspricht. In dem Beispiel aus 5 kann für die Naht der oberen Reihe und die Naht der unteren Reihe die Länge oder der Winkel von jeder von ihnen als Merkmalsgröße extrahiert werden, und ein unterschiedlicher Schwellenwert kann zur Qualitätsbestimmung von jeder der Naht der oberen Reihe und der Naht der unteren Reihe verwendet werden. In dem Beispiel aus 5 ist es ferner möglich, eine Winkeldifferenzvariation oder dergleichen zwischen der Naht der oberen Reihe und der Naht der unteren Reihe als Material für die Qualitätsbestimmung zu verwenden.
  • Neben den in 5 dargestellten, kann die Qualitätsbestimmung zum Beispiel an Kreuzstichstichen durchgeführt werden, die zum Sticken oder dergleichen verwendet werden. Im Fall des Bestimmens der Qualität der Kreuzstichstiche können Stiche, die auf einen flachen Bereich angewendet werden, als ein Satz von Stichen gehandhabt werden, und die Qualitätsbestimmung kann an dem Satz von Stichen durchgeführt werden.
  • Wenngleich die Ausführungsformen der vorliegenden Erfindung oben beschrieben wurden, ist die vorliegende Erfindung nicht auf die Beispiele der Ausführungsformen beschränkt und kann in anderen Aspekten durch Hinzufügen geeigneter Änderungen implementiert werden.

Claims (8)

  1. Nahtprüfeinrichtung, die die Qualität einer Naht eines Nähprodukts bestimmt, wobei die Einrichtung Folgendes umfasst: eine Bilddatenerfassungseinheit, die Bilddaten der Naht des Nähprodukts erfasst; eine Merkmalsextraktionseinheit, die eine Merkmalsgröße der Naht aus den von der Bilddatenerfassungseinheit erfassten Bilddaten der Naht des Nähprodukts extrahiert; und eine Qualitätsbestimmungseinheit, die eine Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt, wobei die Qualitätsbestimmungseinheit führt die Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt.
  2. Nahtprüfeinrichtung nach Anspruch 1, wobei die Merkmalsgröße der Naht mindestens einen von einer Länge und einem Winkel der Naht aufweist.
  3. Nahtprüfeinrichtung nach Anspruch 1, wobei die Merkmalsgröße der Naht mindestens einen von einer Breite, einem Bereich, einer Farbe und einer Gegenwart oder Abwesenheit eines Nahtfehlers der Naht aufweist.
  4. Nahtprüfeinrichtung nach einem der Ansprüche 1 bis 3, wobei die Qualitätsbestimmungseinheit bestimmt, dass die Naht fehlerhaft ist, wenn in Bezug auf eine Merkmalsgröße jeder in einer Reihe von Nähten enthaltenen Naht eine Anzahl der Merkmalsgrößen, die einen zulässigen Bereich überschreiten, gleich oder größer als ein vorbestimmter Schwellenwert ist.
  5. Nahtprüfeinrichtung nach einem der Ansprüche 1 bis 3, wobei die Qualitätsbestimmungseinheit bestimmt, dass die Naht fehlerhaft ist, wenn in Bezug auf eine Merkmalsgröße jeder in einer Reihe von Nähten enthaltenen Naht ein Varianzwert der Merkmalsgrößen gleich oder größer als ein vorbestimmter Schwellenwert ist.
  6. Nahtprüfeinrichtung nach einem der Ansprüche 1 bis 3, wobei die Qualitätsbestimmungseinheit bestimmt, dass die Naht fehlerhaft ist, wenn in Bezug auf eine Differenz hinsichtlich einer Merkmalsgröße zwischen benachbarten Nähten in einer Reihe von Nähten eine Anzahl von Sätzen der Nähte, in denen die Differenz einen vorbestimmten Schwellenwert überschreitet, gleich oder größer als ein vorbestimmter Schwellenwert ist.
  7. Nahtprüfeinrichtung, die die Qualität einer Naht eines Nähprodukts bestimmt, wobei die Einrichtung Folgendes umfasst: eine Bilddatenerfassungseinheit, die Bilddaten der Naht des Nähprodukts erfasst; eine Merkmalsextraktionseinheit, die eine Merkmalsgröße der Naht aus den von der Bilddatenerfassungseinheit erfassten Bilddaten der Naht des Nähprodukts extrahiert; und eine Qualitätsbestimmungseinheit, die eine Qualitätsbestimmung der Naht basierend auf der Merkmalsgröße der Naht durchführt, wobei die Qualitätsbestimmungseinheit als Maschinenlernvorrichtung konfiguriert ist, bei der ein überwachtes Lernen durchgeführt wird, indem eine Merkmalsgröße der Naht der Nähprodukte und ein Qualitätsergebnis, das im Vorfeld für das Nähprodukt bestimmt wird, als Lehrerdaten verwendet werden.
  8. Nahtprüfeinrichtung nach Anspruch 5, wobei die Merkmalsextraktionseinheit ein Teilbild der Naht als eine Merkmalsgröße aus den Bilddaten der Naht des Nähprodukts extrahiert.
DE102019115139.2A 2018-06-11 2019-06-05 Nahtprüfeinrichtung Pending DE102019115139A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-111251 2018-06-11
JP2018111251A JP6767432B2 (ja) 2018-06-11 2018-06-11 縫い目検査装置

Publications (1)

Publication Number Publication Date
DE102019115139A1 true DE102019115139A1 (de) 2019-12-12

Family

ID=68651895

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019115139.2A Pending DE102019115139A1 (de) 2018-06-11 2019-06-05 Nahtprüfeinrichtung

Country Status (4)

Country Link
US (1) US10984523B2 (de)
JP (1) JP6767432B2 (de)
CN (1) CN110599441B (de)
DE (1) DE102019115139A1 (de)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10809052B1 (en) * 2018-09-19 2020-10-20 Onevision Corporation System for measuring crimped container seams
WO2021250736A1 (ja) * 2020-06-08 2021-12-16 日本電気株式会社 エアバッグ検査装置、エアバッグ検査システム、エアバッグ検査方法および記録媒体
KR102462591B1 (ko) * 2021-01-04 2022-11-03 (주) 엠엔비젼 비전 시스템을 이용한 봉제선 자동 검사 방법
US11724931B2 (en) * 2021-09-23 2023-08-15 Lear Corporation Vehicle seat correction system and method of correcting a defect in a vehicle seat

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3536409A (en) * 1968-02-21 1970-10-27 Us Agriculture Quantitatively evaluating seam-pucker in fabricated textiles
US5125034A (en) * 1990-12-27 1992-06-23 Compax Corp. Method and apparatus for analyzing fabric conditions
JPH0716376A (ja) * 1993-06-30 1995-01-20 Mitsubishi Rayon Co Ltd ミシン目目飛び検査装置
JPH10170231A (ja) * 1996-12-09 1998-06-26 Nippon Matai Co Ltd 縫い目の目飛び検出装置
JPH1190077A (ja) * 1997-09-16 1999-04-06 Toyota Central Res & Dev Lab Inc 縫い目検査装置
JP3542073B2 (ja) * 1999-05-11 2004-07-14 山野井製袋株式会社 製造上の紙袋の検査システム
JP2005252451A (ja) * 2004-03-02 2005-09-15 Sony Corp 画質検査方法及び画質検査装置
CN100472205C (zh) * 2005-02-21 2009-03-25 欧姆龙株式会社 基板检查方法和装置、及其检查逻辑设定方法和装置
JP2007071661A (ja) * 2005-09-06 2007-03-22 Sumitomo Electric Ind Ltd 外観検査装置
JP4993172B2 (ja) * 2006-05-09 2012-08-08 ヤマトミシン製造株式会社 帯状物縫着方法および装置
US8633982B2 (en) * 2007-12-27 2014-01-21 A Quilter's Eye, Inc. System and method for monitoring quilting machine
WO2010088253A1 (en) * 2009-01-27 2010-08-05 Gammill, Inc. Stitch quality monitoring system
JP5168215B2 (ja) * 2009-04-10 2013-03-21 株式会社デンソー 外観検査装置
CN102297660B (zh) * 2011-05-20 2013-05-01 同济大学 一种盾构隧道衬砌管片接缝张开宽度的测量方法及装置
JP6080379B2 (ja) * 2012-04-23 2017-02-15 株式会社日立ハイテクノロジーズ 半導体欠陥分類装置及び半導体欠陥分類装置用のプログラム
JP6351240B2 (ja) * 2013-11-20 2018-07-04 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP2016026877A (ja) * 2014-06-26 2016-02-18 株式会社ダイヘン アーク溶接品質判定システム
JP2016050864A (ja) * 2014-09-01 2016-04-11 三菱電機株式会社 半田付外観検査装置
JP2017102865A (ja) * 2015-12-04 2017-06-08 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
JP6680539B2 (ja) * 2016-01-14 2020-04-15 Juki株式会社 ミシン
CN105806849A (zh) * 2016-04-08 2016-07-27 广东工业大学 基于机器视觉的汽车座椅表面缺陷检测系统及检测方法
JP2017211259A (ja) * 2016-05-25 2017-11-30 株式会社シーイーシー 検査装置、検査方法、及びプログラム
CN106296679A (zh) * 2016-08-08 2017-01-04 武汉科技大学 一种确定直缝焊管焊接质量的方法
JP6897042B2 (ja) 2016-09-27 2021-06-30 日本電気株式会社 画像検査装置、画像検査方法および画像検査プログラム
CN107463934A (zh) * 2017-08-08 2017-12-12 浙江国自机器人技术有限公司 一种隧道裂缝检测方法及装置
JP7075246B2 (ja) 2018-03-15 2022-05-25 Juki株式会社 縫い目検査装置

Also Published As

Publication number Publication date
JP2019215186A (ja) 2019-12-19
CN110599441B (zh) 2023-11-07
JP6767432B2 (ja) 2020-10-14
US20190378266A1 (en) 2019-12-12
US10984523B2 (en) 2021-04-20
CN110599441A (zh) 2019-12-20

Similar Documents

Publication Publication Date Title
DE102019115139A1 (de) Nahtprüfeinrichtung
DE102018105334B4 (de) Bildverarbeitungsvorrichtung und Bildverarbeitungsverfahren zur Berechnung der Bildwahrscheinlichkeit eines aus einem Eingangsbild erfassten Zielobjekts
DE102018125594B4 (de) Sortiersystem
DE102018128158A1 (de) Vorrichtung zur inspektion des erscheinungsbilds
EP3401411B1 (de) Verfahren und vorrichtung zur fehlerstellenerkennung bei biegeschlaffen körpern, insbesondere tierhäuten
DE10346690B4 (de) Verfahren und Vorrichtung zum Detektieren eines Linearobjekts
DE102018102688A1 (de) Bildverarbeitungsvorrichtung, Bildverarbeitungsprogramm und Bildverarbeitungssystem
EP2787485B1 (de) Verfahren und Vorrichtung zur automatischen Fehlerstellenerkennung bei biegeschlaffen Körpern
DE102018133196A1 (de) Bildbasierte wartungsvorhersage und detektion von fehlbedienungen
DE102019118342A1 (de) Objektprüfvorrichtung, Objektprüfsystem, und Verfahren zum Einstellen der Prüfposition
DE112018007727B4 (de) Robotersystem
DE102018212531A1 (de) Artikeltransfervorrichtung
DE102014002531A1 (de) Vorrichtung und verfahren zur sichtprüfung für ein objekt mit linienmustern
DE102020107179A1 (de) Verfahren zum anzeigen, benutzerschnittstelleneinheit,anzeigevorrichtung und prüfgerät
DE102021112685A1 (de) Sichtprüfsystem und Verfahren zur Prüfung von Teilen
DE102016204506A1 (de) Fortdruckinspektion mit lokaler Optimierung
DE10031880A1 (de) Prüfverfahren für bildaufnehmende Elemente
DE102015206203A1 (de) Bildmessvorrichtung
DE202020005501U1 (de) Reifenprüfanlage
DE112020001064T5 (de) System und verfahren zur einstellbaren produktionslinienprüfung
DE112019004583T5 (de) Rationalisierung eines automatischen visuellen prüfprozesses
EP2345004B1 (de) Verfahren und prüfsystem zur optischen prüfung einer kontur eines prüfobjekts
EP3581935A1 (de) System zur automatischen erkennung von laborarbeitsgegenständen sowie verfahren zum betrieb eines systems zur automatischen erkennung von laborarbeitsgegenständen
DE102018009222A1 (de) Informationsverarbeitungsvorrichtung
DE112021004539T5 (de) Maskeneinstellvorrichtung

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R082 Change of representative

Representative=s name: HL KEMPNER PATENTANWAELTE, SOLICITORS (ENGLAND, DE

Representative=s name: HL KEMPNER PATENTANWALT, RECHTSANWALT, SOLICIT, DE