EP2283937A1 - Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte - Google Patents

Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte Download PDF

Info

Publication number
EP2283937A1
EP2283937A1 EP10172124A EP10172124A EP2283937A1 EP 2283937 A1 EP2283937 A1 EP 2283937A1 EP 10172124 A EP10172124 A EP 10172124A EP 10172124 A EP10172124 A EP 10172124A EP 2283937 A1 EP2283937 A1 EP 2283937A1
Authority
EP
European Patent Office
Prior art keywords
image
pattern
image pattern
transported
sorting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP10172124A
Other languages
English (en)
French (fr)
Other versions
EP2283937B1 (de
Inventor
Zhe Li
Martin Neschen
Matthias Schulte-Austum
Wolf-Stephan Wilke
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP2283937A1 publication Critical patent/EP2283937A1/de
Application granted granted Critical
Publication of EP2283937B1 publication Critical patent/EP2283937B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C3/00Sorting according to destination
    • B07C3/10Apparatus characterised by the means used for detection ofthe destination
    • B07C3/14Apparatus characterised by the means used for detection ofthe destination using light-responsive detecting means

Definitions

  • the invention relates to a method and a device for transporting objects, in particular postal items, to target points which depend on image patterns.
  • a mail carrier determines that a catalog transported as a mail item can not be delivered to the recipient specified on the mailpiece and provides the mailpiece with a return label.
  • This mail again goes through a sorting process.
  • An image of each mail item to be returned is generated. These images contain areas of images of sender addresses. Similarities of those areas in the images showing sender addresses are determined. Those images that are sufficiently similar are treated as images of postal items, all of which are to be returned to the same sender.
  • a video coding station an editor reads the sender information in one of these images and enters it into a data acquisition device. All mail with similar sender images, a recognized sender is sent back to them.
  • DE 102007038186 B4 describes a method in which a sender sends a lot of many similar mailings an image of a surface of these similar mailings to a transporter. These mail items are sorted together with other mail items in a sorting system. Using the image, it is decided whether or not a mail item to be sorted belongs to this quantity.
  • US 20080008376 A1 For example, a method is described for identifying a postal indicia on the envelope of a mailpiece. A "region of interest" is identified and at least one candidate is found in this "region of interest”. Each candidate calculates a set of feature values for which an image of the envelope is generated and evaluated. Each candidate is classified using these characteristic values.
  • the invention is based on the object, a method and an apparatus for transporting objects to target points in which image patterns on objects are evaluated during transport, avoiding the need to manually enter computer-readable descriptions of image patterns.
  • the classifying apparatus includes an image pickup device and a grouper.
  • the sorting system also has an image pickup device and a picture pattern recognizer.
  • a training phase and then a sorting phase are carried out.
  • the sorting system is used at least in the sorting phase.
  • the items to be transported in the sample pass through the classification device.
  • the image capture device generates at least one image of each subject of the sample.
  • the grouper automatically determines which different image patterns are displayed on at least one subject of the sample. In doing so, the grouper applies a clustering method to the images of the sample.
  • the thus determined image patterns are stored in the image pattern data memory.
  • the invention eliminates the need for a processor to make computer-available descriptions of image patterns available in a training phase so that the sorting system can use those image patterns for the sorting phase. This is particularly advantageous if new patterns are added to objects on an ongoing basis, so that a training phase with manual input would always be too late.
  • the invention further eliminates the need for a mailer of items to communicate a computer-accessible description of a picture pattern to the sorting system. It is enough that the sender - or a third party - provides items with the image pattern.
  • the sorting system is also used for the training phase.
  • the imaging device use in both phases.
  • the clustering method is performed to form groups of images, each group comprising at least two images that show the same image pattern. It is also possible to set a minimum number of images per cluster that is significantly larger than 2.
  • image features are specified.
  • By evaluating an image it is determined which value each feature assumes for this image. This creates a feature value vector for the image.
  • Characteristic feature value vectors for the image patterns are stored in the image data memory.
  • a feature value vector is generated for each object to be transported and compared with the stored feature value vectors. This makes it particularly easy to decide whether and, if so, which image pattern is displayed on the object.
  • the solution according to the method and the device according to the solution can be z. B. for the transport of flat mail, packages, packages, pieces of luggage or workpieces in a manufacturing use.
  • the method is used to recognize image patterns on mailpieces.
  • the mailpieces are copies of an issue of a journal or a catalog that will be sent by post.
  • the mailpieces can be flat or even packages or freight items.
  • a postal service provider is to send many identical copies together with other mailpieces to their respective recipients.
  • the picture patterns are z. As logos or emblems, with which sender provide their mail.
  • the image pattern identifies the sender and is z. B. a protected figurative mark. Of course, the pattern may contain letters of a natural language or other characters.
  • the image pattern on a mailpiece should be recognized, in particular, if the mailpiece can not be delivered to the recipient whose postal address is specified on the mailpiece.
  • the receiver is unknown warped.
  • the recipient has moved and has communicated his new address to the postal service provider.
  • the mailpiece should not be forwarded to the new address due to a sender's "endorsement". Rather, either the mailpiece should be destroyed, and a notification about the non-delivery of the mailpiece should be sent to the sender ("sender notification").
  • the mailing provided with information about the new address should be returned to the sender. It is possible that the item of mail is provided with an "endorsement", which determines what should happen to the item of mail if the item of mail can not be sent to the address specified on the item of mail.
  • the sender address it is necessary to determine the sender address. If an image pattern of the sender can be recognized on the mail piece, it is easier to sort the mailpieces to be returned according to the respective sender.
  • the addresses and image patterns of registered senders are stored in an image address database of the postal service provider. It is also possible to perform a procedure like this in DE 19836767 C1 is described. Recognized are those mail items that are each provided with a representation of the same postal item.
  • the delivery address of the sender who has provided mailpieces with this image mark is determined, for which purpose an image of a mailpiece with this image mark is evaluated.
  • the delivery address of the sender is z. B. automatically by character recognition ("Optical Character Recognition", OCR) or manually determined by video encoding.
  • the recognized image patterns as well as further details of the sender on the mailpiece are compared with this database. After a successful comparison, it is possible to group the mail items by sender to be able to deliver all the mailpieces to the same sender. In the simplest case, it suffices to sort the mailpieces to be returned according to sender image patterns without necessarily automatically deciphering the sender address during sorting.
  • a sender delivers a lot of similar mailings, e.g. As the magazine copies of an issue, without delivery address and provided with its own pattern to the postal service provider.
  • the sender sends an address list with delivery addresses to the postal service provider, preferably in computer-available form. At least one copy of the quantity of similar mailpieces is to be delivered to each delivery address in this address list. It is possible that the address list for each delivery address contains the number of copies to be delivered to this delivery address.
  • the postal service provider evaluates the address list and assigns each copy with an address from the address list. In this case, the similar mailpieces are to be distinguished from other mailpieces due to the same image pattern.
  • a random sample with image pattern images is generated and evaluated.
  • Fig. 1 illustrates the first process step.
  • image patterns are recognized by clustering.
  • a camera 1 of the sorting system generates from each mail item Ps-a, Ps-b, ... at least one image Abb-a, Abb-b, .... It is possible that several cameras produce multiple images of the same mail item from different directions to also capture sender information on the back of a flat mail piece or because the mail piece is a package and six surfaces are eligible to show sender details. It is also possible for an image Abb-a, Abb-b,... To be generated and evaluated first and only if this image does not show the recipient address or the sender address, the item of mail is turned over and another image is generated ,
  • the n images Abb-a, Abb-b, ... are evaluated.
  • the n images are oriented and scaled before the actual evaluation. Orientation ensures that in all images with the same image pattern, the image pattern appears in the same orientation, ie not even standing upright and once standing upside down.
  • the images are oriented on the basis of the respective recipient address in the image. Scaling normalizes all images to the same size, even if the images come from different sizes of mail. It is also possible, the actual evaluation without first orienting and scaling the images.
  • each image is first searched for the area containing information about the sender of the mailpiece.
  • This area could contain an image of a sender's image pattern. It is of course possible that individual images do not contain any sender information.
  • the image is displayed on a video display device of a video coding station.
  • An engineer marks the area containing the sender details in the displayed image, or specifies that the image does not contain any sender information.
  • the sender uses a mouse to position a rectangle around the sender specified area.
  • the processor enters the sender address himself. However, he can not enter an image pattern, at least if it consists of more than one text or shows a text in a specific typography.
  • Predetermined m characteristics that can be calculated by evaluating a mailpiece image. For each one postal item of the random sample, a feature value vector with m feature values is generated in each case by the respective image Abb-a, Abb-b,... Of the mail item being automatically evaluated. This feature value vector indicates which m values assume the m features for this mail item.
  • color gamut area For each color range, parameters of that area in the image Abb-a, Abb-b, ... are calculated, which includes pixels with hues from this color range ("color gamut area"). These parameters include, for. For example, the size of the color area area itself, the edge length of a square circumscribing the area, the diagonal of a circumscribing ellipse, the centroid, and the perimeter length of the color area area. It is possible to divide the image of the mail item into areas, eg. In four quadrants, and calculate the respective parameters of the gamut area in each quadrant.
  • a cluster educator 3 applies a clustering method.
  • Cluster analysis or “clustering” is generally understood to mean a method in which a set of objects, which are each described by a feature value vector, are divided into groups, the objects of a group being similar to one another.
  • Clustering is a method of "unsupervised learning” and is z. In the fields of machine learning, data mining, pattern recognition, image analysis, and bioinformatics Examples of clustering methods are k-means clustering, fuzzy c-means clustering, "QT clustering algorithm”, "locality-sensitive hashing” and graph theory models.
  • a distance measure between two feature value vectors is specified.
  • the distances between two characteristic value vectors of the sample are calculated.
  • n images Abb-a, Abb-b, ... of the sample these are n * (n-1) / 2 distance calculations. All images whose distances according to this distance measure are smaller than a predetermined limit are treated as images of a group (a "cluster") showing the same image pattern.
  • the groups are calculated so that at least two images of the sample fall into each group.
  • the cluster-forming device 3 automatically recognizes which different image patterns are contained in the images Abb-a, Abb-b,.... The same picture pattern, z. As the same logo of a magazine publisher, can occur on different mailings of the same sender in different sizes and - due to variations in the printing process and environmental conditions when recording the images - in different configurations. Therefore, when applying the clustering method, the clustering device 3 forms groups of approximately similar image patterns.
  • the identified groups of similar image patterns are stored in an image database 4 or other suitable data storage.
  • an image data base 4 with reference image patterns is automatically generated.
  • each group is stored by storing in the image pattern database 4 a computer-accessible description of that area in the space of the possible feature value vectors in which all the feature value vectors of this group are located. It is also possible to store a characteristic feature value vector or a characteristic image from this group. It is possible, but not necessary, to additionally extract one image pattern from the images and to store a description of this image pattern.
  • a sorting phase that is to say a second method step of the exemplary embodiment, mailpieces again pass through the sorting system.
  • Fig. 2 illustrates the second pass of mail through the sorting system of FIG Fig. 1 , wherein the recognition results from the training phase, ie the first pass are applied
  • An image pattern recognizer 5 identifies an image pattern on a mailpiece and compares this image pattern with those reference image patterns which were automatically determined in the first method step and stored in the image pattern database 4.
  • all mail items are spent from the same sorting end in a transport container, z. B. a postal parcel.
  • This transport container is provided with the postal address of the sender and transported to this postal address.
  • the common sender information is not necessarily determined during sorting, but only when the transport container is labeled.
  • the common sender address of all mail items that are to be returned to the same sender is additionally determined during the sorting, that is, in the sorting phase. For this purpose, one of these mailings selected.
  • the sender address applied to the mailpiece is determined. First, an attempt is made to automatically determine and decipher the sender address on the selected mail piece. If this is not successful, an image of the surface of the mail item is displayed on a screen of a video coding station. An engineer marks the area in the image that shows the sender details. It is attempted to automatically read the address in this area. If this fails, the processor enters the sender details.
  • the mailings of a particular sender do not contain sender information, at least not on an externally visible page.
  • an issue of a journal may show a picture pattern of the issuing publisher in the cover page, but no sender address.
  • an image pattern address database 6 is therefore additionally specified in the second pass.
  • This image pattern address database 6 contains several data records. Each record comprises a reference image pattern of a sender as well as a delivery address of this sender. The record may contain additional information, e.g. B. Billing information for transportation services provided to this sender.
  • the image pattern of the selected mailpiece is determined. This image pattern is compared with reference image patterns of data sets of the image pattern address database 6. The record with the most similar reference image pattern is automatically selected. If this automatic selection does not succeed, an editor selects the correct image pattern under automatically selected similar reference image patterns. The delivery address that is included in the record with the most similar reference image pattern is used as the delivery address for all mailpieces with this image pattern. The mailpieces are preferably transported together to this delivery address of the sender.

Landscapes

  • Sorting Of Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Transportieren von Gegenständen, insbesondere von Postsendungen, an von Bildmustern abhängende Zielpunkte. In einer Trainingsphase durchläuft eine Stichprobe mit zu transportierenden Gegenständen eine Klassifizierungs-Vorrichtung. Ein Bildaufnahmegerät (1) erzeugt von jedem Gegenstand der Stichprobe jeweils mindestens ein Abbild. Ein Gruppierer stellt durch Anwendung eines Clustering-Verfahrens auf die Abbilder fest, welche verschiedenen Bildmuster auf jeweils mindestens einem Gegenstand der Stichprobe dargestellt werden. Diese Bildmuster werden in einem Bildmuster-Datenspeicher (4) abgespeichert. In einer Sortierphase durchläuft jeder zu transportierende Gegenstand (Ps-1, Ps-2, ...) eine Sortieranlage. Ein Bildaufnahmegerät (1) erzeugt von dem Gegenstand (Ps-1, Ps-2, ...) ein Abbild (Abb-1, Abb-2, ...). Der Bildmuster-Erkenner (5) stellt durch Auswertung des Abbilds (Abb-1, Abb-2, ...) automatisch fest, welches abgespeicherte Bildmuster auf dem Gegenstand dargestellt wird. Die Sortieranlage ermittelt unter Verwendung des Bildmusters einen Zielpunkt, an den dieser Gegenstand zu transportieren ist, und löst einen Transport des Gegenstands (Ps-1, Ps-2, ...) zu diesem Zielpunkt aus.

Description

  • Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Transportieren von Gegenständen, insbesondere von Postsendungen, an von Bildmustern abhängende Zielpunkte.
  • Häufig wird eine große Anzahl gleichartiger Gegenstände, z. B. viele Exemplare einer Zeitschriftenausgabe, auf dem Postweg an die jeweiligen Empfänger verschickt. In der Regel können einige dieser Postsendungen nicht an den Empfänger zugestellt werden, weil die Empfängeradresse auf der Postsendung nicht mehr gültig ist. Solche Postsendungen sollen oft an den Absender zurückgesandt werden. Das Problem tritt auf, dass die Absenderadresse auf der Postsendung gar nicht von außen lesbar ist oder jedenfalls schwieriger lesbar ist als die Empfängeradresse.
  • In DE 19836767 C1 werden ein Verfahren und eine Vorrichtung zum Bearbeiten von Postsendungen, die an den jeweiligen Absender zurückzuschicken sind, beschrieben. Beispielsweise stellt ein Zusteller fest, dass ein als Postsendung transportierter Katalog nicht an denjenigen Empfänger zugestellt werden kann, der auf der Postsendung angegeben ist, und versieht die Postsendung mit einem Rücksendevermerk. Diese Postsendung durchläuft erneut einen Sortierprozess. Ein Abbild von jeder zurückzusendenden Postsendung wird erzeugt. Diese Abbilder enthalten Bereiche mit Abbildern von Absenderadressen. Ähnlichkeiten derjenigen Bereiche in den Abbildern, die Absenderadressen zeigen, werden ermittelt. Diejenigen Abbilder, die zureichend ähnlich sind, werden als Abbilder von Postsendungen behandelt, die alle an denselben Absender zurückzutransportieren sind. In einer Videocodierstation liest ein Bearbeiter die Absenderangaben in einem dieser Abbilder und gibt sie in ein Datenerfassungsgerät ein. Alle Postsendungen mit gleichartigen Absender-Abbildern werden an diesen einen erkannten Absender zurückgesandt.
  • In DE 102006059525 B3 wird ein Verfahren beschrieben, um den Transport von Postsendungen zu überprüfen. Festgestellt wird, ob eine Postsendung, die zweimal eine Sortieranlage durchläuft, beim zweiten Durchlauf korrekt wiedererkannt wird, ohne dass eine eindeutige Kennung auf die Postsendung aufgedruckt wird.
  • In DE 102007038186 B4 wird ein Verfahren beschrieben, bei dem ein Versender eine Menge mit vielen gleichartigen Postsendungen ein Abbild einer Oberfläche dieser gleichartigen Postsendungen an einen Transporteur sendet. Diese Postsendungen werden gemeinsam mit anderen Postsendungen in einer Sortieranlage sortiert. Unter Verwendung des Abbilds wird entschieden, ob eine zu sortierende Postsendung zu dieser Menge gehört oder nicht.
  • In EP 1622065 B1 und AU 2005203141 A1 wird ein Verfahren vorgeschlagen, bei dem Postsendungen identifiziert werden, die an den gleichen Empfänger zu senden sind.
  • In US 20080008376 A1 wird ein Verfahren beschrieben, um einen Freimachungsvermerk ("postal indicia") auf dem Briefumschlag einer Postsendung zu identifizieren. Eine "region of interest" wird identifiziert, und in dieser "region of interest" wird mindestens ein Kandidat gefunden. Von jedem Kandidat wird ein Satz von Merkmalswerten berechnet, wofür ein Abbild des Umschlags erzeugt und ausgewertet wird. Jeder Kandidat wird mit Hilfe dieser Merkmalswerte klassifiziert.
  • In US 20070239848 A1 wird ein Verfahren beschrieben, um ein Abbild einer Postsendung zu skalieren ("to normalize"). Hierfür werden zwei Abbilder der Postsendung erzeugt. Neben die Postsendung wird jedes Mal ein Logo positioniert. Das Abbild des Logos wird zum Skalieren des Abbilds verwendet.
  • Der Erfindung liegt die Aufgabe zugrunde, ein Verfahren und eine Vorrichtung zum Transportieren von Gegenständen zu Zielpunkten bereitzustellen, bei der Bildmuster auf den Gegenständen beim Transport ausgewertet werden, wobei die Notwendigkeit vermieden wird, manuell rechnerverfügbare Beschreibungen von Bildmustern einzugeben.
  • Die Aufgabe wird durch ein Verfahren mit den Merkmalen des Anspruchs 1 und eine Vorrichtung mit den Merkmalen des Anspruchs 9 gelöst. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen angegeben.
  • Die lösungsgemäße Vorrichtung umfasst
    • eine Klassifizierungs-Vorrichtung,
    • eine Sortieranlage und
    • einen Bildmuster-Datenspeicher.
  • Die Klassifizierungs-Vorrichtung weist ein Bildaufnahmegerät und einen Gruppierer auf. Die Sortieranlage weist ebenfalls ein Bildaufnahmegerät sowie einen Bildmuster-Erkenner auf.
  • Lösungsgemäß werden zunächst eine Trainingsphase und anschließend eine Sortierphase durchgeführt. Die Sortieranlage wird mindestens in der Sortierphase verwendet.
  • In der Trainingsphase wird eine vorgegebene Stichprobe mit zu transportierenden Gegenständen verwendet. Folgende Schritte werden lösungsgemäß in der Trainingsphase durchgeführt:
  • Die zu transportierenden Gegenständen der Stichprobe durchlaufen die Klassifizierungs-Vorrichtung.
  • Das Bildaufnahmegerät erzeugt von jedem Gegenstand der Stichprobe jeweils mindestens ein Abbild.
  • Der Gruppierer stellt automatisch fest, welche verschiedenen Bildmuster auf jeweils mindestens einem Gegenstand der Stichprobe dargestellt werden. Hierbei wendet der Gruppierer eines Clustering-Verfahrens auf die Abbilder der Stichprobe an.
  • Die dergestalt ermittelten Bildmuster werden in dem Bildmuster-Datenspeicher abgespeichert.
  • In der Sortierphase werden lösungsgemäß für jeden zu transportierenden Gegenstand die folgenden Schritte durchgeführt:
    • Der zu transportierende Gegenstand durchläuft die Sortieranlage.
    • Das Bildaufnahmegerät erzeugt von dem zu transportierenden Gegenstand mindestens ein Abbild.
    • Der Bildmuster-Erkenner stellt automatisch fest, ob auf dem Gegenstand ein Bildmuster dargestellt wird, das in dem Bildmuster-Datenspeicher abgespeichert ist, und wenn ja welches. Hierfür wertet der Bildmuster-Erkenner das Abbild des Gegenstands aus.
    • die Sortieranlage ermittelt dann, wenn auf dem Gegenstand ein abgespeichertes Bildmuster dargestellt wird, unter Verwendung des Bildmusters einen Zielpunkt, an den dieser Gegenstand zu transportieren ist.
    • die Sortieranlage löst einen Transport des Gegenstands zu diesem Zielpunkt aus.
  • Die Erfindung spart die Notwendigkeit ein, dass in einer Trainingsphase ein Bearbeiter rechnerverfügbare Beschreibungen von Bildmustern verfügbar macht, so dass die Sortieranlage diese Bildmuster für die Sortierphase verwenden kann. Dies ist insbesondere dann von Vorteil, wenn laufend neue Bildmuster auf Gegenständen hinzukommen, so dass eine Trainingsphase mit manueller Eingabe stets zu spät kommen würde.
  • Die Erfindung spart weiterhin die Notwendigkeit ein, dass ein Versender von Gegenständen eine rechnerverfügbare Beschreibung eines Bildmusters an die Sortieranlage übermittelt. Es genügt, dass der Versender - oder ein Dritter - Gegenstände mit dem Bildmuster zur Verfügung stellt.
  • Vorzugsweise wird die Sortieranlage auch für die Trainingsphase verwendet. Dadurch lassen sich Bestandteile der Sortieranlage, z. B. das Bildaufnahmegerät, in beiden Phasen verwenden.
  • Vorzugsweise wird das Clustering-Verfahren so durchgeführt, dass Gruppen von Abbildern gebildet werden, wobei jede Gruppe mindestens zwei Abbilder umfasst, die das gleiche Bildmuster zeigen. Möglich ist auch, eine Mindestanzahl von Abbildern pro Clustern festzulegen, die deutlich größer als 2 ist.
  • Vorzugsweise werden mehrere Bild-Merkmale vorgegeben. Durch Auswertung eines Abbilds wird ermittelt, welchen Wert jedes Merkmal für dieses Abbild annimmt. Dadurch wird ein Merkmalswerte-Vektor für das Abbild erzeugt. Im Bildmuster-Datenspeicher werden charakteristische Merkmalswerte-Vektoren für die Bildmuster abgespeichert. In der Sortierphase wird für jeden zu transportierenden Gegenstand jeweils ein MerkmalswerteVektor erzeugt und mit den abgespeicherten Merkmalswerte-Vektoren verglichen. Dadurch lässt sich besonders schnell entscheiden, ob und wenn ja welches Bildmuster auf dem Gegenstand dargestellt ist.
  • Das lösungsgemäße Verfahren und die lösungsgemäße Vorrichtung lassen sich z. B. für den Transport von flachen Postsendungen, Paketen, Frachtstücken, Gepäckstücken oder Werkstücken in einer Fertigung verwenden.
  • Im Folgenden wird die Erfindung anhand eines Ausführungsbeispiels beschrieben. Dabei veranschaulichen:
  • Fig. 1
    den ersten Durchlauf von Postsendungen durch eine Sortieranlage, wobei Bildmuster per Clustering er- kannt werden;
    Fig. 2
    den zweiten Durchlauf von Postsendungen durch die Sortieranlage von Fig. 1, wobei die Erkennungsergeb- nisse aus dem ersten Durchlauf angewendet werden;
  • Im Ausführungsbeispiel wird das Verfahren angewendet, um Bildmuster auf Postsendungen zu erkennen. Die Postsendungen sind beispielsweise Exemplare einer Ausgabe einer Zeitschrift oder eines Katalogs, die auf dem Postweg versandt werden. Die Postsendungen können flach sein oder auch Pakete oder Frachtstücke sein. Binnen weniger Tage soll ein Post-Dienstleister viele gleichartige Exemplare zusammen mit anderen Postsendungen an ihre jeweiligen Empfänger zuzusenden.
  • Die Bildmuster sind z. B. Logos oder Embleme, mit denen Absender ihre Postsendungen versehen. Das Bildmuster kennzeichnet den Absender und ist z. B. eine geschützte Bildmarke. Natürlich kann das Bildmuster Buchstaben einer natürlichen Sprache oder andere Zeichen enthalten.
  • Das Bildmuster auf einer Postsendung soll insbesondere dann erkannt werden, wenn die Postsendung nicht an denjenigen Empfänger zugestellt werden kann, dessen Postadresse auf der Postsendung angegeben ist. Beispielsweise ist der der Empfänger unbekannt verzogen. Oder der Empfänger ist zwar umgezogen und hat seine neue Adresse dem Post-Dienstleister mitgeteilt. Jedoch soll die Postsendung aufgrund einer Vorausverfügung ("endorsement") des Absenders nicht an die neue Adresse nachgesandt werden. Vielmehr soll entweder die Postsendung vernichtet werden, und eine Benachrichtigung über die Nichtzustellung der Postsendung soll an den Absender übermittelt werden ("sender notification"). Oder die Postsendung versehen mit einer Information über die neue Adresse soll an den Absender zurückgesandt werden. Möglich ist, dass die Postsendung mit einer Vorausverfügung ("endorsement") versehen ist, die festlegt, was mit der Postsendung geschehen soll, wenn die Postsendung nicht an diejenige Adresse gesandt werden kann, die auf der Postsendung angegeben ist.
  • In den gerade beschriebenen Fällen ist es erforderlich, die Absenderadresse zu ermitteln. Falls ein Bildmuster des Absenders auf der Postsendung erkannt werden kann, so wird es erleichtert, die zurückzusendenden Postsendungen nach den jeweiligen Absendern zu sortieren. Beispielsweise sind in einer Bildmuster-Adressen-Datenbank des Post-Dienstleisters die Adressen und Bildmuster von registrierten Absendern abgespeichert. Möglich ist auch, ein Verfahren durchzuführen, wie es in DE 19836767 C1 beschrieben ist. Erkannt werden diejenigen Postsendungen, die mit je einer Darstellung derselben Postsendung versehen sind. Die Zustelladresse desjenigen Versenders, der Postsendungen mit dieser Bildmarke versehen hat, wird ermittelt, wofür ein Abbild einer Postsendung mit dieser Bildmarke ausgewertet wird. Die Zustelladresse des Absenders wird z. B. automatisch per Zeichenerkennung ("Optical Character Recognition", OCR) oder manuell per Videocodierung ermittelt.
  • Die erkannten Bildmuster sowie weitere Angaben zum Absender auf der Postsendung werden mit dieser Datenbank verglichen. Möglich ist es, nach erfolgreichem Vergleich die Postsendungen nach Absendern zu gruppieren, um alle Postsendungen an denselben Absender gemeinsam zustellen zu können. Im einfachsten Fall reicht es aus, die zurückzusendenden Postsendungen nach Absender-Bildmustern zu sortieren, ohne dass notwendigerweise automatisch die Absenderadresse bereits während des Sortierens entziffert wird.
  • In einer anderen Ausgestaltung liefert ein Versender eine Menge gleichartiger Postsendungen, z. B. die Zeitschriften-Exemplare einer Ausgabe, ohne Zustelladresse und versehen mit seinem eigenen Bildmuster zum Post-Dienstleister. Außerdem übermittelt der Versender eine Adressliste mit Zustelladressen an den Post-Dienstleister, vorzugsweise in rechnerverfügbarer Form. An jede Zustelladresse in dieser Adressliste soll jeweils mindestens ein Exemplar der Menge gleichartiger Postsendungen zugestellt werden. Möglich ist, dass die Adressliste für jede Zustelladresse die Anzahl von Exemplaren, die an diese Zustelladresse zuzustellen sind, enthält.
  • Der Post-Dienstleister wertet die Adressliste aus und versieht jedes Exemplar mit einer Zustelladresse aus der Adressliste. Hierbei sind die gleichartigen Postsendungen von anderen Postsendungen aufgrund des gleichen Bildmusters zu unterscheiden.
  • In einer Trainingsphase, also einem ersten Verfahrensschritt des Ausführungsbeispiels, wird eine Stichprobe mit Bildmuster-Abbildern erzeugt und ausgewertet. Fig. 1 veranschaulicht den ersten Verfahrensschritt. In einem ersten Durchlauf von Postsendungen durch eine Sortieranlage werden Bildmuster per Clustering erkannt.
  • Hierfür durchläuft eine bestimmte Menge von Postsendungen Ps-a, Ps-b, ..., Ps-n eine Sortieranlage, z. B. alle Postsendungen, die an einem bestimmten Tag die Sortieranlage erreichen. Eine Kamera 1 der Sortieranlage erzeugt von jeder Postsendung Ps-a, Ps-b, ... mindestens ein Abbild Abb-a, Abb-b, .... Möglich ist, dass mehrere Kameras mehrere Abbilder von derselben Postsendung aus verschiedenen Richtungen erzeugen, um auch Absenderangaben auf der Rückseite einer flachen Postsendung zu erfassen oder weil die Postsendung ein Paket ist und sechs Oberflächen dafür in Betracht kommen, die Absenderangaben zu zeigen. Ebenfalls ist möglich, dass zunächst ein Abbild Abb-a, Abb-b, ... erzeugt und ausgewertet wird und nur dann, wenn dieses eine Abbild nicht die Empfängeradresse oder nicht die Absenderadresse zeigt, die Postsendung gewendet wird und ein weiteres Abbild erzeugt wird.
  • Einige oder viele dieser Abbilder Abb-a, Abb-b, ... enthalten Bildmuster verschiedener Absender der Postsendungen Ps-a, Psb, .... Andere Abbilder enthalten keine Bildmuster.
  • Die n Abbilder Abb-a, Abb-b, ... werden ausgewertet. In einer Ausführungsform werden die n Abbilder vor der eigentlichen Auswertung orientiert und skaliert. Durch das Orientieren wird sichergestellt, dass in allen Abbildern mit gleichen Bildmuster das Bildmuster in der gleichen Orientierung erscheint, also nicht einmal aufrecht stehend und einmal auf dem Kopf stehend. Vorzugsweise werden die Abbilder anhand der jeweiligen Empfängeradresse im Abbild orientiert. Durch das Skalieren werden alle Abbilder auf dieselbe Größe normiert, auch wenn die Abbilder von unterschiedlich großen Postsendungen stammen. Möglich ist auch, die eigentliche Auswertung durchzuführen, ohne vorab die Abbilder zu orientieren und zu skalieren.
  • Bei der eigentlichen Auswertung wird in einer Ausgestaltung zunächst in jedem Abbild nach demjenigen Bereich gesucht, der Angaben zum Absender der Postsendung enthält. In diesem Bereich könnte eine Abbildung eines Bildmusters des Absenders enthalten sein. Möglich ist natürlich, dass einzelne Abbilder keinerlei Absenderangaben enthalten.
  • Zunächst wird versucht, diesen Bereich mit Absenderangaben automatisch zu ermitteln. Möglich ist, dass vorgegeben wird, dass ein interessierendes Bildmuster stets in einem bestimmten Bereich der Postsendung zu suchen ist, z. B. im oberen linken Quadranten oder der linken Hälfte der Postsendung, um so ein Bildmuster eines Absenders von einem Freimachungsvermerk zu unterscheiden.
  • Gelingt es nicht, in einem Abbild eine Absenderangabe zu ermitteln, wird in einer Ausgestaltung das Abbild auf einem Bildschirmgerät einer Videocodierstation dargestellt. Ein Bearbeiter markiert im dargestellten Abbild den Bereich, der die Absenderangaben enthält, oder gibt ein, dass das Abbild keine Absenderangaben enthält. Beispielsweise positioniert der Absender mittels einer Maus ein Rechteck um den Bereich mit der Absenderangabe. Möglich, aber nicht erforderlich ist, dass der Bearbeiter die Absenderadresse selber eingibt. Ein Bildmuster kann er aber nicht eingeben, zumindest wenn sie aus mehr als einem Text besteht oder einen Text in bestimmter Typographie zeigt.
  • Vorgegeben werden m Merkmale, die sich durch Auswertung eines Postsendungs-Abbilds berechnen lassen. Für jedes einer Postsendung der Stichprobe wird jeweils ein Merkmalswertevektor mit m Merkmalswerten erzeugt, indem das jeweilige Abbild Abb-a, Abb-b, ... der Postsendung automatisch ausgewertet wird. Dieser Merkmalswertevektor gibt an, welche m Werte die m Merkmale für diese Postsendung annehmen.
  • Einige dieser m Merkmale geben die Farbverteilung auf der Postsendung an. Hierfür wird das Spektrum der sichtbaren Farben in endlich viele Farbbereiche ("Farbkanäle") unterteilt. Für jeden Farbbereich werden Parameter derjenigen Fläche im Abbild Abb-a, Abb-b, ... berechnet, die Bildpunkte mit Farbtönen aus diesem Farbbereich umfasst ("Farbbereichs-Fläche"). Zu diesen Parametern gehören z. B. die Größe der Farbbereichs-Fläche selber, die Kantenlänge eines die Fläche umschreibenden Quadrats, die Diagonalen einer umschreibenden Ellipse, der Schwerpunkt und die Umfangslänge der Farbbereichs-Fläche. Möglich ist es, das Abbild der Postsendung in Bereiche zu unterteilen, z. B. in vier Quadranten, und die jeweiligen Parameter der Farbbereichs-Fläche in jedem Quadranten zu berechnen.
  • Weitere Merkmale können aus der Verteilung und Häufigkeit von Grauwerten resultieren, wofür ein Raster über das Abbild gelegt wird. Derartige Verfahren sind z. B. bekannt, um Postsendungen wiederzuerkennen, ohne sie mit einer Markierung zu versehen ("Fingerprint", "Virtual ID").
  • Eine Cluster-Bildungs-Einrichtung 3 wendet ein Clustering-Verfahren an. Unter "cluster analysis" oder auch "clustering" wird allgemein ein Verfahren verstanden, bei dem eine menge von Objekten, die durch jeweils einen Merkmalswertevektor beschrieben sind, auf Gruppen aufgeteilt werden, wobei die Objekte einer Gruppe zueinander ähnlich sind. "Clustering" ist ein Verfahren des "unsupervised learning" und wird z. B. in den Gebieten "machine learning", "data mining, "pattern recognition", "image analysis" und "bioinformatics" angewendet. Beispiele für Clustering-Verfahren sind "k-means clustering", "fuzzy c-means clustering", "QT clustering algorithm", "locality-sensitive hashing" und graphentheoretische Modelle.
  • Für das Clustering-Verfahren des Ausführungsbeispiels wird ein Abstandsmaß zwischen zwei Merkmalswertevektoren vorgegeben. Die Abstände zwischen jeweils zwei Merkmalswertevektoren der Stichprobe werden berechnet. Bei n Abbildern Abb-a, Abb-b, ... der Stichprobe sind dies n * (n-1) / 2 Abstandsberechnungen. Alle Abbilder, deren Abstände gemäß diesem Abstandsmaß kleiner sind als eine vorgegebene Schranke, werden als Abbilder einer Gruppe (eines "Clusters") behandelt, die das gleiche Bildmuster zeigen.
  • Vorzugsweise werden die Gruppen ("Cluster") so berechnet, dass in jede Gruppe mindestens zwei Abbilder der Stichprobe fallen.
  • Durch diese Anwendung eines Clustering-Verfahrens erkennt die Cluster-Bildungs-Einrichtung 3 automatisch, welche verschiedenen Bildmuster in den Abbildern Abb-a, Abb-b, ... enthalten sind. Das gleiche Bildmuster, z. B. das gleiche Logo eines Zeitschriftenverlags, kann auf unterschiedlichen Postsendungen desselben Absenders in unterschiedlichen Größen und - aufgrund von Variationen beim Druckvorgang und von Umgebungsbedingungen beim Aufnehmen der Abbilder - in unterschiedlichen Ausgestaltungen auftreten. Daher bildet die Cluster-Bildungs-Einrichtung 3 beim Anwenden des Clustering-Verfahren Gruppen von annähernd gleichartigen Bildmustern.
  • Die erkannten Gruppen von gleichartigen Bildmustern werden in einer Bildmuster-Datenbank 4 oder einem sonstigen geeigneten Datenspeicher abgespeichert. Dadurch wird automatisch eine Bildmuster-Datenbank 4 mit Referenz-Bildmustern erzeugt. Vorzugsweise wird jede Gruppe dadurch abgespeichert, dass in der Bildmuster-Datenbank 4 eine rechnerverfügbare Beschreibung desjenigen Bereichs im Raum der möglichen Merkmalswertevektoren abgespeichert wird, in dem alle Merkmalswertevektoren dieser Gruppe liegen. Möglich ist auch, ein charakteristischer Merkmalswertevektor oder ein charakteristisches Abbild aus dieser Gruppe abzuspeichern. Möglich, aber nicht erforderlich, ist es, zusätzlich aus den Abbildern jeweils ein Bildmuster zu extrahieren und eine Beschreibung dieses Bildmusters abzuspeichern.
  • In einer Sortierphase, also einem zweiten Verfahrensschritt des Ausführungsbeispiels, durchlaufen erneut Postsendungen die Sortieranlage. Im Ausführungsbeispiel wird die Sortieranlage also sowohl für die Schritte der Trainingsphase als auch für die Schritte der Sortierphase verwendet. Fig. 2 veranschaulicht den zweiten Durchlauf von Postsendungen durch die Sortieranlage von Fig. 1, wobei die Erkennungsergebnisse aus der Trainingsphase, also dem ersten Durchlauf angewendet werden
  • Festgestellt wird, welche Postsendungen an den Absender zurückzusenden sind und wegen welchen Postsendungen eine Benachrichtigung an den Absender erzeugt werden soll. Von jeder solchen Postsendung wird so wie oben beschrieben ein Bildmusters des Absenders, das auf der Postsendung angebracht ist, ermittelt. Ein Bildmuster-Erkenner 5 identifiziert ein Bildmuster auf einer Postsendung und vergleicht dieses Bildmuster mit denjenigen Referenz-Bildmustern, die im ersten Verfahrensschritt automatisch ermittelt und in der Bildmuster-Datenbank 4 abgespeichert wurden.
  • In einer Ausgestaltung werden alle Postsendungen, die mit verschiedenen Varianten des gleichen Bildmusters versehen sind, in dieselbe Sortierendstelle - oder dieselben Sortierendstellen, wenn nicht alle Postsendungen in eine einzige Sortierendstelle passen - der Sortieranlage ausgeschleust. Diese Postsendungen sind an dieselbe Zustelladresse zurückzusenden.
  • In einer Ausgestaltung werden alle Postsendungen aus derselben Sortierendstelle in einen Transportbehälter verbracht, z. B. ein Postpaket. Dieser Transportbehälter wird mit der Postadresse des Absenders versehen und an diese Postadresse transportiert. In dieser Ausgestaltung wird die gemeinsame Absenderangabe nicht notwendigerweise während des Sortierens ermittelt, sondern erst dann, wenn der Transportbehälter beschriftet wird.
  • In einer anderen Ausgestaltung wird zusätzlich während des Sortierens, also in der Sortierphase, die gemeinsame Absenderadresse aller Postsendungen, die an denselben Absender zurückzusenden sind, ermittelt. Hierfür wird eine dieser Postsendungen ausgewählt. Die auf der Postsendung aufgebrachte Absenderadresse wird ermittelt. Zunächst wird versucht, die Absenderadresse auf der ausgewählten Postsendung automatisch zu ermitteln und zu entziffern. Gelingt dies nicht, so wird ein Abbild der Oberfläche der Postsendung auf einem Bildschirm einer Videocodierstation dargestellt. Ein Bearbeiter markiert den Bereich im Abbild, der die Absenderangaben zeigt. Versucht wird, die Adresse in diesem Bereich automatisch zu lesen. Gelingt dies nicht, so gibt der Bearbeiter die Absenderangaben ein.
  • Möglich ist, dass die Postsendungen eines bestimmten Absenders keine Absenderangaben enthalten, zumindest nicht auf einer von außen sichtbaren Seite. Beispielsweise zeigt eine Ausgabe einer Zeitschrift zwar ein Bildmuster des herausgebenden Verlags im Deckblatt, aber keine Absenderadresse.
  • In einer Ausgestaltung wird daher im zweiten Durchlauf zusätzlich eine Bildmuster-Adress-Datenbank 6 vorgegeben. Diese Bildmuster-Adress-Datenbank 6 enthält mehrere Datensätze. Jeder Datensatz umfasst jeweils ein Referenz-Bildmuster eines Absenders sowie eine Zustelladresse dieses Absenders. Der Datensatz kann zusätzliche Informationen enthalten, z. B. Informationen für die Abrechnung von Transport-Dienstleistungen, die für diesen Absender erbracht wurden.
  • Das Bildmuster der ausgewählten Postsendung wird ermittelt. Dieses Bildmuster wird mit Referenz-Bildmustern von Datensätzen der Bildmuster-Adress-Datenbank 6 verglichen. Der Datensatz mit dem ähnlichsten Referenz-Bildmuster wird automatisch ausgewählt. Gelingt diese automatische Auswahl nicht, so wählt ein Bearbeiter das richtige Bildmuster unter automatisch ausgewählten ähnlichen Referenz-Bildmustern aus. Diejenige Zustelladresse, die vom Datensatz mit dem ähnlichsten Referenz-Bildmuster umfasst wird, wird als Zustelladresse für alle Postsendungen mit diesem Bildmuster verwendet. Die Postsendungen werden vorzugsweise gemeinsam an diese Zustelladresse des Absenders transportiert.
  • Bezugszeichenliste
  • Bezugszeichen Bedeutung
    1 Kamera, die Abbilder von Oberflächen von Postsendungen erzeugt
    2 Ausschleuseinrichtung
    3 Cluster-Bildungs-Einrichtung
    4 Bildmuster-Datenbank
    5 Bildmuster-Erkenner
    6 Bildmuster-Adress-Datenbank
    7 Steuerungseinrichtung
    Abb-a, Abb-b, ..., Abb-n Abbilder von Oberflächen der Postsendungen Ps-a, Ps-b, ..., Ps-n
    Abb-1, Abb-2, ..., Abb-N Abbilder von Oberflächen der Postsendungen Ps-1, Ps-2, ..., Ps-N
    m Anzahl von Merkmalen für das Clustering-Verfahren
    N Anzahl der Postsendungen der Stichprobe, die in der Trainingsphase verwendet werden
    N Anzahl der Postsendungen, die in der Sortierphase sortiert werden
    Ps-a, Ps-b, ..., Ps-n Postsendungen, die im ersten Verfahrensschritt die Sortieranlage durchlaufen und die zur Stichprobe gehören
    Ps-1, Ps-2, ..., Ps-N Postsendungen, die im zweiten Verfahrensschritt die Sortieranlage durchlaufen

Claims (10)

  1. Verfahren zum Transportieren von Gegenständen zu Zielpunkten,
    wobei in einer Trainingsphase die Schritte durchgeführt werden, dass
    - eine Stichprobe mit zu transportierenden Gegenständen (Ps-a, Ps-b,...) eine Klassifizierungs-Vorrichtung durchläuft,
    - wobei die Klassifizierungs-Vorrichtung ein Bildaufnahmegerät (1) und einen Gruppierer (3) aufweist,
    - das Bildaufnahmegerät (1) von jedem Gegenstand (Ps-a, Ps-b,...) der Stichprobe jeweils mindestens ein Abbild (Abb-a, Abb-b, ...) erzeugt,
    - der Gruppierer (3) durch Anwendung eines Clustering-Verfahrens auf die Abbilder (Abb-a, Abb-b, ...) automatisch feststellt, welche verschiedenen Bildmuster auf jeweils mindestens einem Gegenstand (Ps-a, Ps-b,...) der Stichprobe dargestellt werden, und
    - die dergestalt ermittelten Bildmuster in einem Bildmuster-Datenspeicher (4) abgespeichert werden,
    und wobei in einer Sortierphase für jeden zu transportierenden Gegenstand (Ps-1, Ps-2, ...) die Schritte durchgeführt werden, dass
    - der zu transportierende Gegenstand (Ps-1, Ps-2, ...) eine Sortieranlage durchläuft,
    - wobei die Sortieranlage ein Bildaufnahmegerät (1) und einen Bildmuster-Erkenner (5) aufweist,
    - das Bildaufnahmegerät (1) von dem zu transportierenden Gegenstand (Ps-1, Ps-2, ...) mindestens ein Abbild (Abb-1, Abb-2, ...) erzeugt,
    - der Bildmuster-Erkenner (5) durch Auswertung des Abbilds (Abb-1, Abb-2, ...) automatisch feststellt, ob auf dem Gegenstand ein in dem Bildmuster-Datenspeicher (4) abgespeichertes Bildmuster dargestellt wird, und wenn ja welches,
    - die Sortieranlage dann, wenn auf dem Gegenstand (Ps-1, Ps-2, ...) ein solches Bildmuster dargestellt wird, unter Verwendung des Bildmusters einen Zielpunkt ermittelt, an den dieser Gegenstand zu transportieren ist, und
    - die Sortieranlage einen Transport des Gegenstands (Ps-1, Ps-2, ...) zu diesem Zielpunkt auslöst.
  2. Verfahren nach Anspruch 1,
    dadurch gekennzeichnet, dass
    die Sortieranlage
    - auch den Gruppierer (3) umfasst und
    - auch für die Verfahrensschritte der Trainingsphase verwendet wird.
  3. Verfahren nach Anspruch 1 oder Anspruch 2,
    dadurch gekennzeichnet, dass
    in der Sortierphase für jedes im Bildmuster-Datenspeicher (4) abgespeicherte Bildmuster die Schritte durchgeführt werden, dass
    - ermittelt wird, auf welchen zu transportierenden Gegenständen (Ps-1, Ps-2, ...) dieses Bildmuster dargestellt wird,
    - ein gemeinsamer Zielpunkt ermittelt wird, an den alle Gegenstände (Ps-1, Ps-2, ...) mit diesem Bildmuster zu transportieren sind, und
    - die Sortieranlage den Transport aller Gegenstände (Ps-1, Ps-2, ...) mit diesem Bildmuster an den ermittelten Zielpunkt auslöst.
  4. Verfahren nach Anspruch 3,
    dadurch gekennzeichnet, dass
    für mindestens ein Bildmuster die Ermittlung des Zielpunkts die Schritte umfasst, dass
    - einer der Gegenstände mit diesem Bildmuster ausgewählt wird,
    - durch Auswertung des mindestens einen Abbilds dieses ausgewählten Gegenstands der Zielpunkt ermittelt wird.
  5. Verfahren nach Anspruch 3,
    dadurch gekennzeichnet, dass
    für mindestens ein Bildmuster die Ermittlung des Zielpunkts die Schritte umfasst, dass
    ein Bildmuster-Zielpunkte-Datenspeicher (6) vorgegeben wird,
    in dem mehrere Referenz-Bildmuster und für jedes Referenz-Bildmuster jeweils eine Zielpunkt-Information abgespeichert sind,
    das Bildmuster mit Referenz-Bildmustern im Bildmuster-Zielpunkte-Datenspeicher (6) verglichen wird,
    als Ergebnis des Vergleichs ein Referenz-Bildmustern ausgewählt wird und
    die Zielpunkt-Information des ausgewählten Referenz-Bildmusters ermittelt und als der gemeinsame Zielpunkt verwendet wird.
  6. Verfahren nach einem der Ansprüche 1 bis 5,
    dadurch gekennzeichnet, dass
    mehrere Abbild-Merkmale vorgegeben wird,
    der Gruppierer (3) in der Trainingsphase
    - für jedes Abbild eines Gegenstands der Stichprobe ermittelt, welchen Wert jedes vorgegebene Merkmal für dieses Abbild jeweils annimmt,
    - dadurch für jedes Abbild jeweils einen Merkmalswertevektor berechnet und
    - die Merkmalswertevektoren für die Feststellung, welche verschiedenen Bildmuster auf den Gegenständen dargestellt werden, verwendet.
  7. Verfahren nach Anspruch 6,
    dadurch gekennzeichnet, dass
    der Gruppierer (3) in der Trainingsphase
    - alle Abbilder, deren Merkmalswertevektoren um höchstens eine vorgegebene oder in der Trainingsphase berechnete Schranke voneinander differieren, zu einer Gruppe zusammenfasst und
    - automatisch entscheidet, dass in zwei Abbildern, die zu zwei verschiedenen Gruppen gehören, unterschiedliche Bildmuster dargestellt werden.
  8. Verfahren nach Anspruch 6 oder Anspruch 7,
    dadurch gekennzeichnet, dass
    der Schritt, die in der Trainingsphase ermittelten Bildmuster im Bildmuster-Datenspeicher (4) abzuspeichern,
    den Schritt umfasst, eine rechnerverfügbare Beschreibung eines Bereichs im Raum der möglichen Merkmalswertevektoren abzuspeichern, und
    der Schritt, dass der Bildmuster-Erkenner (5) in der Sortierphase automatisch feststellt, ob und wenn ja welches Bildmuster auf einem Abbild dargestellt wird,
    die Schritte umfasst, dass der Bildmuster-Erkenner (5)
    - für das Abbild einen Merkmalswertevektor berechnet und
    - diese Merkmalswertevektor mit den im Bildmuster-Datenspeicher (4) abgespeicherten Merkmalswertevektoren-Beschreibungen zu vergleichen.
  9. Vorrichtung zum Transportieren von Gegenständen zu Zielpunkten,
    wobei die Vorrichtung
    - eine Klassifizierungs-Vorrichtung,
    - eine Sortieranlage und
    - einen Bildmuster-Datenspeicher (4)
    umfasst,
    die Klassifizierungs-Vorrichtung ein Bildaufnahmegerät (1) und einen Gruppierer (3) aufweist,
    die Sortieranlage ein Bildaufnahmegerät (1) und einen Bildmuster-Erkenner (5) aufweist,
    die Vorrichtung dazu ausgestaltet ist, dass in einer Trainingsphase die Schritte durchgeführt werden, dass
    - eine Stichprobe mit zu transportierenden Gegenständen (Ps-a, Ps-b,...) die Klassifizierungs-Vorrichtung durchläuft,
    - das Bildaufnahmegerät (1) von jedem Gegenstand (Ps-a, Ps-b,...) der Stichprobe jeweils mindestens ein Abbild (Abb-a, Abb-b, ...) erzeugt,
    - der Gruppierer (3) durch Anwendung eines Clustering-Verfahrens auf die Abbilder (Abb-a, Abb-b, ...) automatisch feststellt, welche verschiedenen Bildmuster auf jeweils mindestens einem Gegenstand (Ps-a, Ps-b,...) der Stichprobe dargestellt werden, und
    - die Vorrichtung die dergestalt ermittelten Bildmuster in einem Bildmuster-Datenspeicher (4) abspeichert, und
    die Vorrichtung weiterhin dazu ausgestaltet ist, dass in einer Sortierphase für jeden zu transportierenden Gegenstand (Ps-1, Ps-2, ...) die Schritte durchgeführt werden, dass
    - der zu transportierende Gegenstand (Ps-1, Ps-2, ...) eine Sortieranlage durchläuft,
    - das Bildaufnahmegerät (1) von dem zu transportierenden Gegenstand (Ps-1, Ps-2, ...) mindestens ein Abbild (Abb-1, Abb-2, ...) erzeugt,
    - der Bildmuster-Erkenner (5) durch Auswertung des Abbilds (Abb-1, Abb-2, ...) automatisch feststellt, ob auf dem Gegenstand ein in dem Bildmuster-Datenspeicher (4) abgespeichertes Bildmuster dargestellt wird, und wenn ja welches,
    - die Sortieranlage dann, wenn auf dem Gegenstand (Ps-1, Ps-2, ...) ein solches Bildmuster dargestellt wird, unter Verwendung des Bildmusters einen Zielpunkt ermittelt, an den dieser Gegenstand zu transportieren ist, und
    - die Sortieranlage einen Transport des Gegenstands (Ps-1, Ps-2, ...) zu diesem Zielpunkt auslöst.
  10. Vorrichtung nach Anspruch 9,
    dadurch gekennzeichnet, dass
    die Sortieranlage
    - auch den Gruppierer (3) umfasst und
    - auch für die Durchführung der Verfahrensschritte der Trainingsphase ausgestaltet ist.
EP10172124.9A 2009-08-07 2010-08-06 Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte Active EP2283937B1 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE200910036626 DE102009036626A1 (de) 2009-08-07 2009-08-07 Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte

Publications (2)

Publication Number Publication Date
EP2283937A1 true EP2283937A1 (de) 2011-02-16
EP2283937B1 EP2283937B1 (de) 2013-12-18

Family

ID=42937573

Family Applications (1)

Application Number Title Priority Date Filing Date
EP10172124.9A Active EP2283937B1 (de) 2009-08-07 2010-08-06 Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte

Country Status (3)

Country Link
EP (1) EP2283937B1 (de)
DE (1) DE102009036626A1 (de)
DK (1) DK2283937T3 (de)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19836767C1 (de) 1998-08-13 1999-11-18 Siemens Ag Verfahren und Vorrichtung zum Bearbeiten von an den Absender zurückzuschickenden Sendungen
DE20218212U1 (de) * 2002-08-12 2003-12-24 Mit Management Intelligenter Technologien Gmbh Vorrichtung zur automatischen Adressblockmarkierung
AU2005203141A1 (en) 2004-07-20 2006-02-09 Solystic A method of detecting streams of postal items
US20070239848A1 (en) 2006-04-11 2007-10-11 John Avery Uniform resource locator vectors
US20080008376A1 (en) 2006-07-07 2008-01-10 Lockheed Martin Corporation Detection and identification of postal indicia
DE102006059525B3 (de) 2006-12-14 2008-04-17 Siemens Ag Verfahren und Vorrichtung zur Steuerung des Transports von Gegenständen sowie Anordnung zum Transport mehrerer Gegenstände
EP1927937A2 (de) * 2006-12-01 2008-06-04 NEC Corporation System zur Identifizierung eines Zertifikatstempels und Verfahren zur Identifizierung eines Zertifikatstempels
DE102007038186A1 (de) * 2007-08-13 2009-02-19 Siemens Ag Verfahren und Vorrichtung zum Transportieren von Massensendungen

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4320331A1 (de) * 1993-06-20 1994-12-22 Robert Prof Dr Ing Massen Flexible optische Sortierung von Hohlkörpern
AU6802694A (en) * 1993-05-28 1994-12-20 Axiom Bildverarbeitungssysteme Gmbh An automatic inspection apparatus
DE19501996C2 (de) * 1995-01-11 1996-12-12 Mannesmann Ag Steuerung für fördertechnische Anlagen
DE19751862C2 (de) * 1997-11-22 2002-09-19 Lutz Priese Verfahren und Vorrichtung zum Identifizieren und Sortieren von bandgeförderten Objekten

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19836767C1 (de) 1998-08-13 1999-11-18 Siemens Ag Verfahren und Vorrichtung zum Bearbeiten von an den Absender zurückzuschickenden Sendungen
DE20218212U1 (de) * 2002-08-12 2003-12-24 Mit Management Intelligenter Technologien Gmbh Vorrichtung zur automatischen Adressblockmarkierung
AU2005203141A1 (en) 2004-07-20 2006-02-09 Solystic A method of detecting streams of postal items
EP1622065B1 (de) 2004-07-20 2009-05-27 Solystic Verfahren zur Erkennung von Massendrucksachen
US20070239848A1 (en) 2006-04-11 2007-10-11 John Avery Uniform resource locator vectors
US20080008376A1 (en) 2006-07-07 2008-01-10 Lockheed Martin Corporation Detection and identification of postal indicia
EP1927937A2 (de) * 2006-12-01 2008-06-04 NEC Corporation System zur Identifizierung eines Zertifikatstempels und Verfahren zur Identifizierung eines Zertifikatstempels
DE102006059525B3 (de) 2006-12-14 2008-04-17 Siemens Ag Verfahren und Vorrichtung zur Steuerung des Transports von Gegenständen sowie Anordnung zum Transport mehrerer Gegenstände
DE102007038186A1 (de) * 2007-08-13 2009-02-19 Siemens Ag Verfahren und Vorrichtung zum Transportieren von Massensendungen
DE102007038186B4 (de) 2007-08-13 2009-05-14 Siemens Ag Verfahren und Vorrichtung zum Transportieren von Massensendungen

Also Published As

Publication number Publication date
DK2283937T3 (da) 2014-03-10
DE102009036626A1 (de) 2011-02-10
EP2283937B1 (de) 2013-12-18

Similar Documents

Publication Publication Date Title
DE60308025T2 (de) Identifikationsmarkieren von poststücken durch bildsignatur und zugehörige postbearbeitungsmaschine
EP2371461B1 (de) Verfahren zum Transportieren eines zu bedruckenden Gegenstands
DE10021734C1 (de) Verfahren und Vorrichtung zum Ermitteln von Gebieten mit Verteilinformationen auf Sendungen
EP0938719B1 (de) Verfahren und vorrichtung zur erkennung von verteilinformationen auf sendungen
EP2197598B1 (de) Verfahren und vorrichtung zum bearbeiten und transportieren von gegenständen in einer reihenfolge
EP1104569B1 (de) Verfahren und vorrichtung zum bearbeiten von an den absender zurückzuschickenden sendungen
EP2197599B1 (de) Verfahren und vorrichtung zum transportieren und bearbeiten von mehreren gegenständen
EP1259932B1 (de) Verfahren und vorrichtung zum lesen der adressen von sendungen
EP2197596B1 (de) Verfahren und Vorrichtung zum Transport von Gegenständen
EP2260952B1 (de) Vorrichtung und Verfahren zum Steuern des Transports eines Gegenstands zu einer Aufnahmeeinheit
DE102009060515A1 (de) Verfahren und Vorrichtung zum Sortieren von Gegenständen verschiedener Formatklassen
EP1656218B1 (de) Verfahren sowie vorrichtung zur bearbeitung von auf postsendungen befindlichen graphischen informationen
EP2431932B1 (de) Verfahren und Vorrichtung zum Verarbeiten von Gegenständen mittels eines Zwischenspeichers und einer Sortieranlage.
WO2008071784A1 (de) Verfahren und vorrichtung zur steuerung des transports von gegenständen sowie anordnung zum transport mehrerer gegenstände
DE102019119138B4 (de) Bestimmen einer Verteil- und/oder Sortierinformation zum automatisierten Verteilen und/oder Sortieren einer Sendung
EP2190596A1 (de) Verfahren und vorrichtung zum transportieren und bearbeiten mehrerer gegenstände
WO2009068678A1 (de) Verfahren und vorrichtung zum transport von gegenständen
EP2283937B1 (de) Verfahren und Vorrichtung zum Transportieren von Gegenständen an von Bildmustern abhängende Zielpunkte
DE102007034948A1 (de) Verfahren und Vorrichtung zum Überwachen des Transports mehrerer Gegenstände
EP1389493A1 (de) Verfahren und Vorrichtungen zur automatischen Adressblockmarkierung
DE10212085A1 (de) Verfahren und Vorrichtung zum Lesen der Adressen von Sendungen
DE102007034660B3 (de) Verfahren und Vorrichtung zum Sortieren von Gegenständen
EP2084652A1 (de) Verfahren und vorrichtung zum identifizieren von gegenständen
DE102008015075A1 (de) Verfahren und Vorrichtung zum Bearbeiten und Transportieren von Gegenständen in einer Reihenfolge
EP1229483A1 (de) Verfahren und Vorrichtung zum Lesen von Sendungsadressen mit Postkodes

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME RS

17P Request for examination filed

Effective date: 20110110

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: SIEMENS AKTIENGESELLSCHAFT

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

INTG Intention to grant announced

Effective date: 20130719

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: NV

Representative=s name: SIEMENS SCHWEIZ AG, CH

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 645372

Country of ref document: AT

Kind code of ref document: T

Effective date: 20140115

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502010005686

Country of ref document: DE

Effective date: 20140213

REG Reference to a national code

Ref country code: DK

Ref legal event code: T3

Effective date: 20140306

REG Reference to a national code

Ref country code: NL

Ref legal event code: T3

REG Reference to a national code

Ref country code: SE

Ref legal event code: TRGR

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20140318

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20140418

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20140418

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502010005686

Country of ref document: DE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20140919

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502010005686

Country of ref document: DE

Effective date: 20140919

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20140806

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20140831

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20140806

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20140319

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20100806

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 7

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DK

Payment date: 20160819

Year of fee payment: 7

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: AT

Payment date: 20160708

Year of fee payment: 7

Ref country code: SE

Payment date: 20160811

Year of fee payment: 7

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: CH

Payment date: 20161109

Year of fee payment: 7

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 8

REG Reference to a national code

Ref country code: CH

Ref legal event code: PCOW

Free format text: NEW ADDRESS: WERNER-VON-SIEMENS-STRASSE 1, 80333 MUENCHEN (DE)

REG Reference to a national code

Ref country code: DK

Ref legal event code: EBP

Effective date: 20170831

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 645372

Country of ref document: AT

Kind code of ref document: T

Effective date: 20170806

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170807

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170831

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170831

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170806

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20170831

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 9

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20131218

REG Reference to a national code

Ref country code: DE

Ref legal event code: R081

Ref document number: 502010005686

Country of ref document: DE

Owner name: KOERBER SUPPLY CHAIN LOGISTICS GMBH, DE

Free format text: FORMER OWNER: SIEMENS AG, 80333 MUENCHEN, DE

REG Reference to a national code

Ref country code: NL

Ref legal event code: PD

Owner name: KOERBER SUPPLY CHAIN LOGISTICS GMBH; DE

Free format text: DETAILS ASSIGNMENT: CHANGE OF OWNER(S), ASSIGNMENT; FORMER OWNER NAME: SIEMENS AKTIENGESELLSCHAFT

Effective date: 20220824

REG Reference to a national code

Ref country code: GB

Ref legal event code: 732E

Free format text: REGISTERED BETWEEN 20220818 AND 20220824

REG Reference to a national code

Ref country code: DE

Ref legal event code: R082

Ref document number: 502010005686

Country of ref document: DE

Representative=s name: MUELLER SCHUPFNER & PARTNER PATENT- UND RECHTS, DE

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230523

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20230831

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: NL

Payment date: 20240821

Year of fee payment: 15

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20240619

Year of fee payment: 15

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20240822

Year of fee payment: 15

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20240821

Year of fee payment: 15