DE102019101170A1 - Artikeltransfersystem und Robotersystem - Google Patents

Artikeltransfersystem und Robotersystem Download PDF

Info

Publication number
DE102019101170A1
DE102019101170A1 DE102019101170.1A DE102019101170A DE102019101170A1 DE 102019101170 A1 DE102019101170 A1 DE 102019101170A1 DE 102019101170 A DE102019101170 A DE 102019101170A DE 102019101170 A1 DE102019101170 A1 DE 102019101170A1
Authority
DE
Germany
Prior art keywords
article
unit
transfer device
transfer
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102019101170.1A
Other languages
English (en)
Inventor
Masafumi OOBA
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fanuc Corp
Original Assignee
Fanuc Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fanuc Corp filed Critical Fanuc Corp
Publication of DE102019101170A1 publication Critical patent/DE102019101170A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/0084Programme-controlled manipulators comprising a plurality of manipulators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/74Feeding, transfer, or discharging devices of particular kinds or types
    • B65G47/76Fixed or adjustable ploughs or transverse scrapers
    • B65G47/766Adjustable ploughs or transverse scrapers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/0093Programme-controlled manipulators co-operating with conveyor means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G43/00Control devices, e.g. for safety, warning or fault-correcting
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G43/00Control devices, e.g. for safety, warning or fault-correcting
    • B65G43/08Control devices operated by article or material being fed, conveyed or discharged
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/74Feeding, transfer, or discharging devices of particular kinds or types
    • B65G47/82Rotary or reciprocating members for direct action on articles or materials, e.g. pushers, rakes, shovels
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2203/00Indexing code relating to control or detection of the articles or the load carriers during conveying
    • B65G2203/02Control or detection
    • B65G2203/0208Control or detection relating to the transported articles
    • B65G2203/0225Orientation of the article
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2203/00Indexing code relating to control or detection of the articles or the load carriers during conveying
    • B65G2203/02Control or detection
    • B65G2203/0208Control or detection relating to the transported articles
    • B65G2203/0233Position of the article
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2203/00Indexing code relating to control or detection of the articles or the load carriers during conveying
    • B65G2203/04Detection means
    • B65G2203/041Camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G2203/00Indexing code relating to control or detection of the articles or the load carriers during conveying
    • B65G2203/04Detection means
    • B65G2203/042Sensors
    • B65G2203/044Optical
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/22Devices influencing the relative position or the attitude of articles during transit by conveyors
    • B65G47/24Devices influencing the relative position or the attitude of articles during transit by conveyors orientating the articles
    • B65G47/256Devices influencing the relative position or the attitude of articles during transit by conveyors orientating the articles removing incorrectly orientated articles
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/418Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM]
    • G05B19/41815Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM] characterised by the cooperation between machine tools, manipulators and conveyor or other workpiece supply system, workcell
    • G05B19/4182Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS], computer integrated manufacturing [CIM] characterised by the cooperation between machine tools, manipulators and conveyor or other workpiece supply system, workcell manipulators and conveyor only
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

Eine Störung beim Ausführen einer Aufgabe an anderen Artikeln, selbst wenn ein Artikel an einer Position vorliegt, wo die Kamera die Position des Artikels nicht detektieren konnte, wird verhindert. Vorgesehen ist ein Artikeltransfersystem 2, das eine Transfereinrichtung 5 umfasst, die einen Artikel O in eine Richtung transferiert; eine Verfahrstrecken-Detektionseinheit 7, die nacheinander eine Strecke detektiert, die der Artikel, der von der Transfereinrichtung transferiert wird, verfahren ist; eine Artikelsensoreinheit 8, die den Durchlauf des Artikels erfasst, der von der Transfereinrichtung transferiert wird; eine Bildaufnahmeeinheit 9, die den Artikel fotografiert, wobei die Bildaufnahmeeinheit der Artikelsensoreinheit in einer Transferrichtung der Transfereinrichtung nachgelagert angeordnet ist; eine Positions-und-Ausrichtungs-Detektionseinheit 10, die ein Bild verarbeitet, das die Bildaufnahmeeinheit aufnimmt, um den Artikel zu extrahieren und eine Position und eine Ausrichtung des Artikels zu detektieren; und eine Entnahmeeinheit 11, die den Artikel entnimmt, der mit der Artikelsensoreinheit erfasst worden ist, aber nicht von dem Prozess, der in der Positions-und-Ausrichtungs-Detektionseinheit ausgeführt wird, aus der Transfereinrichtung extrahiert wird, wobei die Entnahmeeinheit der Bildaufnahmeeinheit nachgelagert angeordnet ist.

Description

  • [GEBIET DER ERFINDUNG]
  • Die vorliegende Erfindung betrifft ein Artikeltransfersystem und ein Robotersystem.
  • [ALLGEMEINER STAND DER TECHNIK]
  • Es ist ein Robotersystem bekannt, mit dem ein Artikel, der von einer Transfereinrichtung transferiert wird, mit einer Kamera fotografiert wird, um die Position und Ausrichtung des Artikels zu ermitteln, und ein Roboter ist basierend auf der ermittelten Position und Ausrichtung und der Artikelverfahrstrecke, die mit einem Codierer detektiert wird, verfolgungsgesteuert, sodass der Roboter eine Aufgabe an dem Artikel ausführt, während der Artikel transferiert wird (siehe beispielsweise PTL 1).
  • Bei diesem Robotersystem tritt das Robotersystem in einen nächsten Bildaufnahme-Vorbereitungsmodus ein, wenn die Detektion der Position des Artikels fehlschlägt.
  • [ENTGEGENHALTUNGSLISTE]
  • [PATENTLITERATUR]
  • [PTL 1] Japanische nicht geprüfte Patentanmeldung, Veröffentlichung Nr. 2005-111607
  • [KURZDARSTELLUNG DER ERFINDUNG]
  • [TECHNISCHE AUFGABE]
  • Wenn jedoch ein nicht detektierter Artikel an einer Position vorliegt, an der die Kamera die Position des Artikels nicht detektieren konnte, führt der Roboter keine Aufgabe an dem nicht detektierten Artikel durch. Wenn der Roboter eine Aufgabe an einem nächsten detektierten Artikel ausführt, kann dadurch eine Hand des Roboters oder ein Artikel, der mit der Hand gegriffen wird, den nicht detektierten Artikel stören.
  • Eine Aufgabe der vorliegenden Erfindung ist es, ein Artikeltransfersystem und ein Robotersystem bereitzustellen, die keine Störung beim Ausführen einer Aufgabe an anderen Artikeln verursachen, selbst wenn ein Artikel an einer Position vorliegt, an der die Kamera die Position des Artikels nicht detektieren konnte.
  • [LÖSUNG DER AUFGABE]
  • Ein Aspekt der vorliegenden Erfindung zielt auf ein Artikeltransfersystem ab, das eine Transfereinrichtung umfasst, die einen Artikel in eine Richtung transferiert; eine Verfahrstrecken-Detektionseinheit, die nacheinander eine Strecke detektiert, die der Artikel, der von der Transfereinrichtung transferiert wird, verfahren wurde; eine Artikelsensoreinheit, die den Durchlauf des Artikels erfasst, der von der Transfereinrichtung transferiert wird; eine Bildaufnahmeeinheit, die den Artikel fotografiert, wobei die Bildaufnahmeeinheit der Artikelsensoreinheit in einer Transferrichtung der Transfereinrichtung nachgelagert angeordnet ist; eine Positions-und-Ausrichtungs-Detektionseinheit, die ein Bild verarbeitet, das die Bildaufnahmeeinheit aufnimmt, um den Artikel zu extrahieren und eine Position und eine Ausrichtung des Artikels zu detektieren; und eine Entnahmeeinheit, die den Artikel entnimmt, der mit der Artikelsensoreinheit erfasst worden ist, aber nicht von dem Prozess, der in der Positions-und-Ausrichtungs-Detektionseinheit ausgeführt wird, aus der Transfereinrichtung extrahiert wird, wobei die Entnahmeeinheit der Bildaufnahmeeinheit nachgelagert angeordnet ist.
  • Gemäß diesem Aspekt erfasst die Artikelsensoreinheit den Durchlauf des Artikels, wenn der Artikel von der Transfereinrichtung transferiert wird, und dann wird der Artikel mit einer Bildaufnahmeeinheit fotografiert, um ein Bild aufzunehmen. Das aufgenommene Bild wird in der Positions-und-Ausrichtungs-Detektionseinheit verarbeitet, sodass der Artikel extrahiert wird und die Position und Ausrichtung des extrahierten Artikels detektiert wird.
  • Währenddessen wird nacheinander mit der Verfahrstrecken-Detektionseinheit die Verfahrstrecke des Artikels detektiert. Somit ist es nicht notwendig, die Transfereinrichtung nacheinander mit der Bildaufnahmeeinheit zu fotografieren und nacheinander Bilder in der Positions-und-Ausrichtungs-Detektionseinheit zu verarbeiten. Das heißt, die Position und Ausrichtung des Artikels kann durch Aufnehmen eines Bildes mit der Bildaufnahmeeinheit nur detektiert werden, wenn ermittelt wird, dass der Artikel, nachdem er mit der Artikelsensoreinheit erfasst wurde, in das Sichtfeld der Bildaufnahmeeinheit gelangt ist, basierend auf der Strecke, die der erfasste Artikel nacheinander verfahren wurde, die mit der Verfahrstrecken-Detektionseinheit detektiert wurde. Somit kann der Prozess vereinfacht werden.
  • In diesem Fall kann aus irgendwelchen Gründen, wie beispielsweise Umgebungslicht usw., der Artikel, der mit der Artikelsensoreinheit erfasst wird, nicht immer aus dem Bild extrahiert werden, das mit der Bildaufnahmeeinheit aufgenommen wird. In einem solchen Fall wird die Entnahmeeinheit basierend auf dem Erfassen des Artikels in der Artikelsensoreinheit und der Artikelverfahrstrecke, die in der Verfahrstrecken-Detektionseinheit detektiert wird, betrieben, und der nicht extrahierte Artikel wird aus der Transfereinrichtung entnommen. Folglich kann verhindert werden, dass der Artikel, dessen Position und Ausrichtung aufgrund eines Extraktionsfehlers in der Positions-und-Ausrichtungs-Detektionseinheit nicht detektiert sind, obwohl der Artikel auf der Transfereinrichtung vorliegt, die Aufgabe stört, die an anderen Artikeln ausgeführt wird.
  • Gemäß dem oben beschriebenen Aspekt kann die Transfereinrichtung ein Förderer sein, der den Artikel transferiert, der darauf montiert ist, und die Artikelsensoreinheit kann eine optische Achse aufweisen, die sich mit einem Spalt zwischen dem Förderer und der optischen Achse in einer Breitenrichtung oberhalb des Förderers erstreckt, und kann den Artikel erfassen, der die optische Achse kreuzt.
  • Mit dieser Struktur blockiert der Artikel das Licht in dem Moment, wenn ein Artikel, der auf dem Förderer montiert ist, durch den Betrieb des Förderers in eine Richtung transferiert wird und die Position durchläuft, wo die optische Achse der Artikelsensoreinheit vorliegt. Somit kann die Position des Artikels in der Transferrichtung genau erfasst werden. Ferner wird das Licht nicht mehr von dem Artikel blockiert, wenn der Artikel die Position der optischen Achse durchläuft, und die Lichtdetektion wird fortgesetzt. Somit kann genau erfasst werden, dass der Artikel in diesem Moment die Position der optischen Achse durchlaufen hat.
  • Gemäß dem oben beschriebenen Aspekt kann die Bildaufnahmeeinheit den Artikel, der von der Transfereinrichtung transferiert wird, von oberhalb der Transfereinrichtung fotografieren.
  • Mit dieser Struktur kann die Positions-und-Ausrichtungs-Detektionseinheit die Position des Artikels in der Horizontalrichtung und den Drehwinkel des Artikels über die Vertikalachse einfach basierend auf dem aufgenommenen Bild detektieren.
  • Gemäß dem oben beschriebenen Aspekt kann die Entnahmeeinheit den Artikel in eine Breitenrichtung der Transfereinrichtung schieben, um den Artikel aus der Transfereinrichtung zu entnehmen.
  • Mit dieser Struktur kann der Artikel unter Verwendung der Entnahmeeinheit ungeachtet der Position des Artikels in der Breitenrichtung der Transfereinrichtung unfehlbar aus der Transfereinrichtung entnommen werden. Mit anderen Worten kann die aktuelle Position des Artikels in der Transferrichtung von der Artikelsensoreinheit und der Verfahrstrecken-Detektionseinheit genau identifiziert werden. Somit kann der Artikel zuverlässig aus der Transfereinrichtung entnommen werden, selbst wenn die Position und Ausrichtung in der Positions-und-Ausrichtungs-Detektionseinheit nicht extrahiert sind.
  • Ein anderer Aspekt der vorliegenden Erfindung zielt auf ein Robotersystem ab, das das Artikeltransfersystem gemäß einem beliebigen der oben beschriebenen Systeme umfasst; einen Roboter, der in einem Betriebsbereich, der der Entnahmeeinheit des Artikeltransfersystems nachgelagert angeordnet ist, eine Aufgabe an dem Artikel ausführt, der von der Transfereinrichtung transferiert wird; und eine Steuereinheit, die den Roboter steuert, wobei die Steuereinheit dem Roboter befiehlt, den Artikel basierend auf einer Verfahrstrecke des Artikels, die mit der Verfahrstrecken-Detektionseinheit detektiert wird, und einer Position und einer Ausrichtung des Artikels, die mit der Positions-und-Ausrichtungs-Detektionseinheit detektiert werden, zu verfolgen.
  • Gemäß diesem Aspekt wird der Artikel, dessen Position und Ausrichtung aufgrund eines Extraktionsfehlers in der Positions-und-Ausrichtungs-Detektionseinheit nicht detektiert sind, obwohl der Artikel auf der Transfereinrichtung vorliegt, von der Entnahmeeinheit, die dem Betriebsbereich des Roboters vorgelagert ist, aus der Transfereinrichtung entnommen. Somit kann eine Störung des Roboters, der andere Artikel bearbeitet, mit größerer Gewissheit verhindert werden.
  • [VORTEILHAFTE WIRKUNG DER ERFINDUNG]
  • Die vorliegende Erfindung bietet die vorteilhafte Wirkung, dass der Betrieb ausgeführt werden kann, ohne dass andere Artikel gestört werden, selbst wenn ein Artikel an einer Position vorliegt, an der die Kamera den Artikel nicht detektieren konnte.
  • Figurenliste
    • 1 ist eine Abbildung, die die Gesamtstrukturen eines Artikeltransfersystems und eines Robotersystems gemäß einer Ausführungsform der vorliegenden Erfindung zeigt.
    • 2 ist eine Abbildung, die die Aufgabe zeigt, die mit einer Entnahmeeinheit des Robotersystems, das in 1 gezeigt wird, ausgeführt wird.
    • 3 ist eine Abbildung, die das Koordinatensystem zeigt, das zur Verfolgungssteuerung eines Roboters in dem Robotersystem, das in 1 gezeigt wird, verwendet wird.
    • 4 ist eine vergrößerte Ansicht einer ersten Abwandlung des Robotersystems, das in 1 gezeigt wird.
    • 5 ist eine vergrößerte Ansicht einer zweiten Abwandlung des Robotersystems, das in 1 gezeigt wird.
    • 6 ist eine vergrößerte Ansicht einer dritten Abwandlung des Robotersystems, das in 1 gezeigt wird.
    • 7 ist eine Abbildung, die die Aufgabe zeigt, die mit einer Entnahmeeinheit des Robotersystems, das in 6 gezeigt wird, ausgeführt wird.
  • [BESCHREIBUNG VON AUSFÜHRUNGSFORMEN]
  • Nachfolgend werden ein Artikeltransfersystem 2 und ein Robotersystem 1 gemäß einer Ausführungsform der vorliegenden Erfindung unter Bezugnahme auf die Zeichnungen beschrieben.
  • Wie in 1 gezeigt, ist das Robotersystem 1 dieser Ausführungsform mit einem Artikeltransfersystem 2, einem Roboter 3 und einer Steuereinheit 4 ausgestattet.
  • Das Artikeltransfersystem 2 dieser Ausführungsform umfasst einen Förderer (Transfereinrichtung) 5, der einen Artikel O, der darauf montiert ist, in eine Richtung (Transferrichtung) transferiert; einen Codierer (Verfahrstrecken-Detektionseinheit) 7, der in einem Motor 6 installiert ist, der den Förderer 5 antreibt, um den Drehwinkel des Motors 6 zu detektieren; einen Sensor (Artikelsensoreinheit) 8, der den Durchlauf des Artikels O auf dem Förderer 5 detektiert; eine Kamera (Bildaufnahmeeinheit) 9, die dem Sensor 8 nachgelagert in der Transferrichtung angeordnet ist; eine Recheneinheit (Positions-und-Ausrichtungs-Detektionseinheit) 10, die das mit der Kamera 9 aufgenommene Bild verarbeitet und die Position und Ausrichtung des Artikels O detektiert; und eine Entnahmeeinheit 11, die den Artikel O auf dem Förderer 5 entnimmt, wobei die Entnahmeeinheit 11 der Kamera 9 nachgelagert angeordnet ist. Der Codierer (Verfahrstrecken-Detektionseinheit) 7 kann eine Rolle an seiner Spitze aufweisen, und die Rolle kann gegen den Förderer (Transfereinrichtung) 5 gepresst sein.
  • Der Sensor 8 ist beispielsweise ein optischer Sensor, der derart angeordnet ist, dass die optische Achse A, die sich in die Breitenrichtung des Förderers 5 erstreckt, mit einem Spalt, der größer als die Höhe des Artikels O ist, oberhalb des Förderers 5 zwischen der optischen Achse A und dem Förderer 5 verläuft. Der Sensor 8 umfasst eine Lichtemissionseinheit 12, die Licht emittiert, und eine Lichtaufnahmeeinheit 13, die Licht aufnimmt und der Lichtemissionseinheit 12 mit dem Förderer 5 dazwischen in der Breitenrichtung zugewandt ist. Ein Vorderende des Artikels O ist detektiert, wenn der von dem Förderer 5 transferierte Artikel O das von der Lichtemissionseinheit 12 emittierte Licht blockiert, und ein hinteres Ende des Artikels O ist detektiert, wenn das von dem Artikel O blockierte Licht nicht mehr blockiert ist und in die Lichtaufnahmeeinheit 13 gelangt.
  • Die Kamera 9 ist vertikal oberhalb des Förderers 5 mit einem Spalt zwischen der Kamera 9 und dem Förderer 5 angeordnet und hat eine optische Achse, die vertikal nach unten gerichtet ist, sodass der Artikel O, der von dem Förderer 5 transferiert worden ist, vertikal von oben fotografiert werden kann.
  • Die Recheneinheit 10 verarbeitet das Bild, das mit der Kamera 9 aufgenommen wurde, und extrahiert den Artikel O in dem Bild beispielsweise durch Musterabgleich oder dergleichen. Auf diese Weise kann in dem Bild die Position des Artikels O in der Horizontalrichtung und der Drehwinkel (Ausrichtung) des Artikels O über die Vertikalachse detektiert werden.
  • Die Recheneinheit 10 gibt ein Entnahmebefehlssignal an die Entnahmeeinheit 11 aus, falls es anhand der Bildverarbeitungsergebnisse nicht gelingt, den Artikel O in dem Bild zu extrahieren. Das Entnahmebefehlssignal aus der Recheneinheit 10 wird an die Entnahmeeinheit 11 ausgegeben, wenn die Strecke, die der nicht detektierte Artikel O verfahren wurde, nachdem er mit dem Sensor 8 erfasst wurde, gleich der Strecke zwischen dem Sensor 8 und der Entnahmeeinheit 11 wird.
  • Wie in 1 und 2 gezeigt, ist die Entnahmeeinheit 11 beispielsweise mit einem stabförmigen Entnahmebauteil 14, das sich entlang der Transferrichtung erstreckt, und einem Zylinder 15, der das Entnahmebauteil 14 linear in der Breitenrichtung des Förderers 5 bewegt, ausgestattet. Nach dem Empfangen des Entnahmebefehlssignals aus der Recheneinheit 10 bewegt die Entnahmeeinheit 11 den Zylinder 15 so, dass das Entnahmebauteil 14 in der Breitenrichtung von einer Seite zu der anderen Seite des Förderers 5 bewegt wird. Folglich kann der Artikel O, wie in 2 gezeigt, auf dem Förderer 5 in der Breitenrichtung des Förderers 5 nach außen herausgeschoben (entnommen) werden. In den Zeichnungen ist der mit Linien schraffierte Artikel O der nicht detektierte Artikel.
  • Der Roboter 3 ist beispielsweise ein sechsachsiger Mehrgelenkroboter, der in der Nähe des Förderers 5 angeordnet ist, und ist ausgestattet mit einem Handgelenk 16 und einer Hand 17 an der Spitze des Handgelenks 16, sodass der Artikel O, der von dem Förderer 5 transferiert wird, mit der Hand 17 gegriffen und gehandhabt werden kann. Der Roboter 3 kann einen Artikel O handhaben, der in einem Betriebsbereich B vorliegt, der sich der Entnahmeeinheit 11 nachgelagert in der Transferrichtung befindet.
  • Die Steuereinheit 4 empfängt ein Detektionssignal von dem Sensor 8 und Informationen hinsichtlich der Verfahrstrecke von dem Codierer 7. Die Steuereinheit 4 erkennt die Position des Artikels O in dem Moment, in dem das Vorderende des Artikels O mit dem Sensor 8 erfasst ist, und identifiziert die aktuelle Position des Artikels O anhand der Strecke, die der Artikel O seit dem Moment verfahren ist, wobei die Strecke von dem Codierer 7 eingegeben wird.
  • Durch Verfolgungssteuerung bewegt die Steuereinheit 4 den Roboter 3 gemäß einem vorab gelernten Betriebsprogramm und der identifizierten aktuellen Position des Artikels O, sodass der Roboter 3 den Artikel O verfolgt, der von dem Förderer 5 transferiert wird, und eine Aufgabe an dem Artikel O ausführt.
  • Die Verfolgungssteuerung ist hier beschrieben.
  • Wie in 3 gezeigt, erfüllen, wenn ein Verfolgungskoordinatensystem in Bezug auf einen Artikel O zu dem Zeitpunkt, an dem der Artikel O mit dem Sensor 8 erfasst ist, als TF bestimmt ist und ein aktuelles Verfolgungskoordinatensystem als TF' bestimmt ist, die Verfolgungskoordinatensysteme TF und TF' die folgende Beziehung. TF' = T TF
    Figure DE102019101170A1_0001
    wobei T eine Koordinatentransformationsmatrix darstellt.
  • Der Bestandteil der Koordinatentransformationsmatrix T ist (e2-el)/Maßstab, wobei e1 die Codiereranzahl zu dem Zeitpunkt darstellt, an dem der Artikel mit dem Sensor 8 erfasst ist, e2 die aktuelle Codiereranzahl darstellt, und Maßstab einen Transformationskoeffizienten für die Codiereranzahl und die Verfahrstrecke darstellt.
  • In 3 gibt Bezugszeichen a die Position des Artikels O an, gesehen von dem Verfolgungskoordinatensystem TF zu dem Zeitpunkt des Erfassens mit dem Sensor 8, und Bezugszeichen a' gibt die Position des Artikels O an, gesehen von dem aktuellen Verfolgungskoordinatensystem TF'.
  • Die Steuereinheit 4 befiehlt dem Roboter 3, den Artikel O zu verfolgen und basierend auf dem Verfolgungskoordinatensystem TF' eine Aufgabe auszuführen.
  • Die Wirkungen des Artikeltransfersystems 2 und des Robotersystems 1 dieser Ausführungsform mit den oben beschriebenen Merkmalen sind nachfolgend beschrieben.
  • Gemäß dem Artikeltransfersystem 2 dieser Ausführungsform wird, wenn ein Artikel O von dem Förderer 5 transferiert wird, zuerst das Licht von dem Sensor 8 blockiert, und somit wird der Durchlauf des Artikels O erfasst. Anschließend wird der Artikel O mit der Kamera 9 fotografiert und ein Bild wird aufgenommen. Das aufgenommene Bild wird in der Recheneinheit 10 verarbeitet, sodass der Artikel O extrahiert wird und die Position und Ausrichtung des extrahierten Artikels O detektiert wird.
  • Währenddessen wird nacheinander mit dem Codierer 7 die Verfahrstrecke des Artikels O detektiert. Somit ist es nicht notwendig, nacheinander Bilder mit der Kamera 9 von oberhalb des Förderers 5 aufzunehmen und die aufgenommenen Bilder nacheinander in der Recheneinheit 10 zu verarbeiten. Das heißt, die Position und Ausrichtung des Artikels O kann durch Aufnehmen eines Bildes mit der Kamera 9 nur detektiert werden, wenn ermittelt ist, dass der Artikel O, nachdem er mit dem Sensor 8 erfasst worden ist, in das Sichtfeld der Kamera 9 gelangt ist, basierend auf der Strecke, die der erfasste Artikel O nacheinander verfahren ist, die mit dem Codierer 7 detektiert wurde. Somit kann der Betrieb vereinfacht werden.
  • In diesem Fall kann aus irgendwelchen Gründen, wie beispielsweise Umgebungslicht usw., der Artikel O, der mit dem Sensor 8 erfasst wird, nicht immer aus dem Bild extrahiert werden, das mit der Kamera 9 aufgenommen wird. In einem solchen Fall bewegt die Recheneinheit 10 die Entnahmeeinheit 11 basierend auf dem Signal von dem Sensor 8, der das Erfassen des Artikels O und der Verfahrstrecke des Artikels O von dem Codierer 7 anzeigt. Folglich wird der Artikel O, für den die Extraktion in der Recheneinheit 10 fehlgeschlagen ist, aus dem Förderer 5 zu einem Entnahmebereich C entnommen, wie beispielsweise einem anderen Förderer oder dergleichen.
  • Mit anderen Worten, es wird verhindert, dass ein Artikel O, dessen Vorhandensein auf dem Förderer 5 durch Erfassen mit dem Sensor 8 bestätigt ist, dessen Position und Ausrichtung jedoch aufgrund eines Extraktionsfehlers in der Recheneinheit 10 nicht detektiert sind, in den Betriebsbereich B des Roboters 3 gelangt. Auf diese Weise kann, wenn der Roboter 3 eine Aufgabe an einem anderen Artikel O ausführt, eine Störung des nicht detektierten Artikels O zuverlässig verhindert werden.
  • Ferner kann die Position des Artikels O in der Transferrichtung einfach und genau detektiert werden, da ein optischer Sensor, der eine optische Achse A aufweist, die sich in die Breitenrichtung des Förderers 5 erstreckt, als der Sensor 8 eingesetzt ist.
  • Ferner kann, da die Entnahmeeinheit 11 ausgestaltet ist, den Artikel O in der Breitenrichtung des Förderers 5 herauszuschieben, der Artikel O zuverlässig entnommen werden, selbst wenn der Artikel O nicht aus dem mit der Kamera 9 aufgenommenen Bild extrahiert ist und die Position und Ausrichtung des Artikels O nicht identifiziert sind.
  • Es ist zu beachten, dass, obgleich die Recheneinheit 10 und die Steuereinheit 4 in dieser Ausführungsform separat vorgesehen sind, die Recheneinheit 10 in der Steuereinheit 4 installiert sein kann.
  • Ferner können, wie in 4 gezeigt, eine Vielzahl an Robotern 3 in der Nähe des Förderers 5 platziert sein, um sich die Aufgabe zu teilen. Folglich kann der Betrieb optimiert werden.
  • Wenn eine Vielzahl an Robotern 3 in der Nähe des Förderers 5 platziert sind, wie in 5 gezeigt, können die Steuereinheiten 4 der Roboter 3 an eine Zellensteuereinrichtung 18 angeschlossen sein. Eine Recheneinheit 10, die die aktuelle Position des Artikels O basierend auf den Informationen von dem Sensor 8 und dem Codierer 7 berechnet, kann in der Zellensteuereinrichtung 18 installiert sein, und die berechnete aktuelle Position kann in den Steuereinheiten 4 verwendet werden, um jeweils die Roboter 3 zu steuern. Solange die aktuelle Position des Artikels O in der Zellensteuereinrichtung 18 berechnet ist, kann die Aufgabe unter Verwendung anderer Roboter 3 fortgesetzt werden, selbst wenn einer der Roboter 3 aufgrund von Wartung usw. vorübergehend ausgeschaltet ist.
  • Eine Struktur, die den Artikel O herausschiebt, indem sie ein stabförmiges Entnahmebauteil 14 in der Breitenrichtung des Förderers 5 bewegt, ist als ein Beispiel der Entnahmeeinheit 11 beschrieben. Alternativ, wie in 6 und 7 gezeigt, kann eine Struktur, die mit einem Schubstück 19 ausgestattet ist, das an der vertikalen Achse oberhalb des Förderers 5 schwenkt, eingesetzt sein, sodass der Artikel O aufgrund der kinetischen Energie des Förderers 5 durch das Schubstück 19 in der Breitenrichtung des Förderers 5 herausgeschoben wird, wenn bewirkt wird, dass das Schubstück 19 in Bezug auf die Transferrichtung schräg in den Raum oberhalb des Förderers 5 vorsteht. Alternativ kann die Entnahmeeinheit 11 jede beliebige andere gewünschte Struktur einsetzen.
  • Bezugszeichenliste
  • 1
    Robotersystem
    2
    Artikeltransfersystem
    3
    Roboter
    4
    Steuereinheit
    5
    Förderer (Transfereinrichtung)
    7
    Codierer (Verfahrstrecken-Detektionseinheit)
    8
    Sensor (Artikelsensoreinheit)
    9
    Kamera (Bildaufnahmeeinheit)
    10
    Recheneinheit (Positions-und-Ausrichtungs-Detektionseinheit)
    11
    Entnahmeeinheit
    A
    Optische Achse
    B
    Betriebsbereich
    O
    Artikel

Claims (5)

  1. Artikeltransfersystem, umfassend: eine Transfereinrichtung, die einen Artikel in eine Richtung transferiert; eine Verfahrstrecken-Detektionseinheit, die nacheinander eine Strecke detektiert, die der Artikel verfahren wurde, der von der Transfereinrichtung transferiert wird; eine Artikelsensoreinheit, die den Durchlauf des Artikels erfasst, der von der Transfereinrichtung transferiert wird; eine Bildaufnahmeeinheit, die den Artikel fotografiert, wobei die Bildaufnahmeeinheit der Artikelsensoreinheit in einer Transferrichtung der Transfereinrichtung nachgelagert angeordnet ist; eine Positions-und-Ausrichtungs-Detektionseinheit, die ein mit der Bildaufnahmeeinheit aufgenommenes Bild verarbeitet, um den Artikel zu extrahieren und eine Position und eine Ausrichtung des Artikels zu detektieren; und eine Entnahmeeinheit, die den Artikel entnimmt, der mit der Artikelsensoreinheit erfasst worden ist, aber nicht von dem Prozess, der in der Positions-und-Ausrichtungs-Detektionseinheit ausgeführt wird, aus der Transfereinrichtung extrahiert wird, wobei die Entnahmeeinheit der Bildaufnahmeeinheit nachgelagert angeordnet ist.
  2. Artikeltransfersystem nach Anspruch 1, wobei: die Transfereinrichtung ein Förderer ist, der den Artikel transferiert, der darauf montiert ist und die Artikelsensoreinheit eine optische Achse aufweist, die sich mit einem Spalt zwischen dem Förderer und der optischen Achse in einer Breitenrichtung oberhalb des Förderers erstreckt und den Artikel erfasst, der die optische Achse kreuzt.
  3. Artikeltransfersystem nach Anspruch 1 oder 2, wobei die Bildaufnahmeeinheit den Artikel, der von der Transfereinrichtung transferiert wird, von oberhalb der Transfereinrichtung fotografiert.
  4. Artikeltransfersystem nach einem beliebigen der Ansprüche 1 bis 3, wobei die Entnahmeeinheit den Artikel in eine Breitenrichtung der Transfereinrichtung schiebt, um den Artikel aus der Transfereinrichtung zu entnehmen.
  5. Robotersystem, umfassend: das Artikeltransfersystem nach einem beliebigen der Ansprüche 1 bis 4; einen Roboter, der eine Aufgabe an dem Artikel, der von der Transfereinrichtung transferiert wird, in einem Betriebsbereich ausführt, der der Entnahmeeinheit des Artikeltransfersystems nachgelagert angeordnet ist; und eine Steuereinheit, die den Roboter steuert; wobei die Steuereinheit dem Roboter befiehlt, den Artikel basierend auf einer Verfahrstrecke des Artikels, die mit der Verfahrstrecken-Detektionseinheit detektiert wird, und einer Position und einer Ausrichtung des Artikels, die mit der Positions-und-Ausrichtungs-Detektionseinheit detektiert werden, zu verfolgen.
DE102019101170.1A 2018-01-25 2019-01-17 Artikeltransfersystem und Robotersystem Pending DE102019101170A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-010500 2018-01-25
JP2018010500A JP6734306B2 (ja) 2018-01-25 2018-01-25 物品搬送システムおよびロボットシステム

Publications (1)

Publication Number Publication Date
DE102019101170A1 true DE102019101170A1 (de) 2019-07-25

Family

ID=67145335

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102019101170.1A Pending DE102019101170A1 (de) 2018-01-25 2019-01-17 Artikeltransfersystem und Robotersystem

Country Status (4)

Country Link
US (1) US10604357B2 (de)
JP (1) JP6734306B2 (de)
CN (1) CN110076768A (de)
DE (1) DE102019101170A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220134384A1 (en) * 2020-11-05 2022-05-05 Beumer Corporation System and method for separating and singulating postal articles

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3980358A4 (de) * 2019-05-30 2023-07-19 Material Handling Systems, Inc. Zurückweisungsmechanismus für ein fördersystem
CN110936355B (zh) * 2019-11-25 2021-06-22 广州微林软件有限公司 一种基于视觉测速定位的机械臂引导系统和方法
CN112464707A (zh) * 2020-10-14 2021-03-09 浙江科技学院 一种具有图像采集功能的传送装置及其数据处理方法
CN113697456A (zh) * 2021-08-31 2021-11-26 中车长江铜陵车辆有限公司 一种输送机构用转向装置及工作方式
CN113816111A (zh) * 2021-11-23 2021-12-21 中车长江铜陵车辆有限公司 一种集装化货物智能快装系统的输送装置和工作方法
DE102022102720A1 (de) * 2022-02-04 2023-08-10 Henrik Klag Robotergesteuerte zuführeinrichtung
EP4249409A1 (de) * 2022-03-24 2023-09-27 KNAPP Systemintegration GmbH Verfahren und vorrichtung zum bewegen von waren mit einem ladungsträger

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57184012A (en) * 1981-05-09 1982-11-12 Hajime Sangyo Kk Removing device
JPS6048300U (ja) * 1983-09-09 1985-04-04 日立電子株式会社 実装検査装置付きチップ部品装着装置
FR2666315B1 (fr) * 1990-09-04 1992-12-11 France Etat Dispositif pour controler et regulariser l'espacement de colis, paquets ou objets analogues, notamment de colis postaux.
JP3002097B2 (ja) 1994-08-25 2000-01-24 ファナック株式会社 ビジュアルトラッキング方法
JPH09202438A (ja) * 1996-01-29 1997-08-05 Ishii Ind Co Ltd 鍵盤型搬送装置
JP2000071188A (ja) * 1998-08-28 2000-03-07 Aisin Seiki Co Ltd 部品供給装置
JP2000219317A (ja) * 1999-01-29 2000-08-08 Hitachi Zosen Corp 荷役仕分け装置
JP2001019154A (ja) * 1999-07-09 2001-01-23 Mitsubishi Heavy Ind Ltd 物品排出装置
JP4764582B2 (ja) 2001-09-28 2011-09-07 株式会社メニコンネクト レンズパッケージ包装装置
JP2005111607A (ja) 2003-10-07 2005-04-28 Fanuc Ltd ロボット物流トラッキング装置
JP2006188309A (ja) * 2004-12-28 2006-07-20 Hiroshi Kogyo:Kk 搬送装置
JP2007030087A (ja) * 2005-07-26 2007-02-08 Fanuc Ltd 物流トラッキング装置
JP5297049B2 (ja) * 2008-02-04 2013-09-25 アンリツ産機システム株式会社 物品検査装置
JP5461032B2 (ja) * 2009-03-03 2014-04-02 オークラ輸送機株式会社 仕分装置
CN201819889U (zh) * 2010-05-21 2011-05-04 符强 全自动智能灯检系统
JP5838520B2 (ja) 2012-02-28 2016-01-06 株式会社ダイフク 物品搬送設備
JP2013251474A (ja) * 2012-06-04 2013-12-12 Panasonic Corp 部品実装装置及び部品実装方法
JP5824173B1 (ja) * 2014-02-28 2015-11-25 ファナック株式会社 ロボットを用いて物品を整列させる物品整列装置及び物品整列方法、並びに物品整列装置を備えた物品移送システム
FR3032366B1 (fr) * 2015-02-10 2017-02-03 Veolia Environnement-VE Procede de tri selectif
CN204470155U (zh) * 2015-03-08 2015-07-15 郭佳 一种陶瓷缺陷检测设备
DE212015000199U1 (de) * 2015-06-17 2017-04-06 Jinan Double Win Automobile Equipment Engineering Co., Ltd. Automatisches Magazinbeladungssystem für beliebige Teile am Ende einer Stanzlinie
JP6475144B2 (ja) * 2015-11-02 2019-02-27 大森機械工業株式会社 箱詰め装置
JP6458713B2 (ja) * 2015-11-18 2019-01-30 オムロン株式会社 シミュレーション装置、シミュレーション方法、およびシミュレーションプログラム
CN105537142B (zh) * 2015-12-04 2017-12-19 珠海市洁源电器有限公司 一种底板智能测试装置
JP2017189856A (ja) * 2016-04-15 2017-10-19 オムロン株式会社 アクチュエータ制御システム、アクチュエータ制御方法、情報処理プログラム、および記録媒体
CN106892252A (zh) * 2017-03-17 2017-06-27 杭州锐冠科技有限公司 自动送料装置
CN107335626A (zh) * 2017-07-21 2017-11-10 江苏雷镈智能科技有限公司 自动分拣机及其分拣管理系统和分拣方法
JP6568163B2 (ja) * 2017-08-09 2019-08-28 ファナック株式会社 ロボットシステム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220134384A1 (en) * 2020-11-05 2022-05-05 Beumer Corporation System and method for separating and singulating postal articles

Also Published As

Publication number Publication date
US10604357B2 (en) 2020-03-31
US20190225433A1 (en) 2019-07-25
CN110076768A (zh) 2019-08-02
JP2019126884A (ja) 2019-08-01
JP6734306B2 (ja) 2020-08-05

Similar Documents

Publication Publication Date Title
DE102019101170A1 (de) Artikeltransfersystem und Robotersystem
DE102018118556B4 (de) Robotersystem
DE102018101375B4 (de) Artikelbeförderungsvorrichtung, die mindestens einen Sensor nutzt
AT507339B1 (de) Verfahren und anlage zum aufnehmen und/oder bearbeiten von objekten
DE102014207157A1 (de) Fördersystem, Anlage zur Schüttgutsortierung mit einem solchen Fördersystem und Transportverfahren
EP3587044B1 (de) Verfahren zum greifen von objekten in einem suchbereich und positioniersystem
DE102015115115A1 (de) Gegenstandsaufnahmevorrichtung zum Aufnehmen von zufällig gehäuften Gegenständen
DE102018114682A1 (de) Robotersystem
DE102017128543B4 (de) Störbereich-einstellvorrichtung für einen mobilen roboter
DE102018111370B4 (de) Werkstückaufnahmesystem
DE102018117441B4 (de) Artikeltransportsystem und transportsystem-steuervorrichtung
DE3306175A1 (de) Verfahren zur erkennung und indentifikation von gegenstaenden
DE102010022357A1 (de) Roboteranordnung zum Befördern von Gegenständen
DE102009028604A1 (de) Vorrichtung zur Erkennung einer Objektschlange, Verfahren sowie Computerprogramm
DE102006017337A1 (de) Verfahren zur optischen Erfassung von bewegten Objekten und Vorrichtung
DE102019101005B4 (de) Objektfördersystem
EP2146308A2 (de) Verfahren und Vorrichtung zum Überwachen des Transports eines Gepäckstücks
WO2014037119A1 (de) Vorrichtung und verfahren zur steuerung der nachführung eines wertdokumentstapels
EP3563941A1 (de) Flaschenreinigungsmaschine
DE102021112685A1 (de) Sichtprüfsystem und Verfahren zur Prüfung von Teilen
DE102013104928B4 (de) Vorrichtung und Verfahren für das Zuordnen von Codes auf Teilen zu Teilorten auf einer Fördereinrichtung
DE102016206980B4 (de) Verfahren zur Handhabung eines Körpers und Handhabungsvorrichtung
EP3100648A1 (de) Vorrichtung und verfahren zum identifizieren und verfolgen eines objektes
DE102012203134A1 (de) Verfahren und Vorrichtung zum Aufnehmen eines Konturteils
DE102014113264A1 (de) Steuersystem für einen Kommissionier-Arbeitsplatz und Verfahren zum Kommissionieren

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication