EP1777163A1 - Device for orienting containers - Google Patents

Device for orienting containers Download PDF

Info

Publication number
EP1777163A1
EP1777163A1 EP06022035A EP06022035A EP1777163A1 EP 1777163 A1 EP1777163 A1 EP 1777163A1 EP 06022035 A EP06022035 A EP 06022035A EP 06022035 A EP06022035 A EP 06022035A EP 1777163 A1 EP1777163 A1 EP 1777163A1
Authority
EP
European Patent Office
Prior art keywords
container
camera
camera system
cameras
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP06022035A
Other languages
German (de)
French (fr)
Other versions
EP1777163B1 (en
Inventor
Herbert Menke
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KHS GmbH
Original Assignee
KHS GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KHS GmbH filed Critical KHS GmbH
Priority to PL06022035T priority Critical patent/PL1777163T3/en
Publication of EP1777163A1 publication Critical patent/EP1777163A1/en
Application granted granted Critical
Publication of EP1777163B1 publication Critical patent/EP1777163B1/en
Not-in-force legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65CLABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C9/00Details of labelling machines or apparatus
    • B65C9/06Devices for presenting articles in predetermined attitude or position at labelling station
    • B65C9/067Devices for presenting articles in predetermined attitude or position at labelling station for orienting articles having irregularities, e.g. holes, spots or markings, e.g. labels or imprints, the irregularities or markings being detected

Definitions

  • the invention relates to a device for positionally or positionally accurate alignment of containers according to the preamble of claim 1 and to a labeling machine with such a device according to the preamble of claim 23.
  • the typical geometrical container characteristics on its outer surface such. B. seal surface, ornament, embossing, raised lettering, etc.
  • the camera system has four cameras, which are provided consecutively along the movement path of the container receptacles in the direction of rotation of the rotor. Each camera captures each part of the circumference of the container, overlapping each 100 ° of this circumference with rotating around its container axis containers. Due to the actual image data supplied by the cameras, a rotational position correction of the container recordings and then takes place the orientation of the containers relative to their typical geometric container feature.
  • the object of the invention is to provide a device with which an alignment of containers with respect to at least one typical, geometric container feature with a significantly improved accuracy is possible, and in particular at a high power, i. at a plurality of processed per unit time container.
  • a device according to the patent claim 1 is formed.
  • a labeling machine is the subject of claim 23.
  • the image data of a first camera system are used to pre-align the containers in such a way that they have at least approximately the required orientation after pre-aligning, in particular also with respect to their geometrical container features used for the alignment, namely at least one Accuracy as achievable with known devices.
  • the test area i. H. the circumferential region of the respective container, where the at least one geometric container feature is located, detected over a large area.
  • the image data of at least one other camera system takes place a more accurate, possibly even the final orientation of each container. Since the container area detected by the at least one camera of the at least one further camera system is much smaller than the area to be detected by the at least one camera of the first camera system, d. H. the at least one camera of the further camera system e.g. a much smaller opening angle than the at least one camera of the first camera system, the alignment using the image data supplied by the at least one further camera system can be done very precisely in an extremely short time.
  • the labeling machine shown in FIG. 1 and designated generally by 1 serves for labeling containers 2, for example bottles, which are supplied to the labeling machine 1 at a container inlet 3 and leave the labeling machine 1 in a labeled outlet at a container outlet 4.
  • the containers 2 are for example bottles made of a translucent material, e.g. made of glass, and are at their container outside with at least one typical geometric container feature such. B. sealing surface, ornament, embossing, raised lettering, etc. provided.
  • the containers 2 are to be provided with high accuracy of application in relation to these geometric features with the labels.
  • the labeling machine 1 comprises u. a. the rotatable about a vertical axis of the machine in the direction of arrow A rotary table or rotor 5, which has at its periphery a plurality of container carriers or receptacles 6, which are each distributed at equal angular intervals around the vertical axis of the machine and at which for applying the Labels each a container 3 is provided with its container axis parallel to the vertical machine axis.
  • the containers 2 are the labeling machine 1 on the container inlet 3 via a conveyor, not shown, upright, ie oriented with its container axis in the vertical direction, but otherwise fed in any random orientation also in terms of their typical geometric container characteristics, in this purely random orientation each pass a container receptacle 6 and then aligned in an angular range W1 of the rotational movement A of the rotor 5, so that each container 3 is exactly aligned at the end of this angular range with respect to its typical geometric container characteristics, ie having a predetermined orientation.
  • each container 2 is moved past a labeling station 7, which does not move with the rotor 5, for applying at least one label, so that it is then applied to the respective container 2 with the desired high accuracy of application with respect to the geometric container features.
  • a labeling station 7 which does not move with the rotor 5, for applying at least one label, so that it is then applied to the respective container 2 with the desired high accuracy of application with respect to the geometric container features.
  • the labeling station 7 to the container outlet 3 angle range W2 of the rotational movement A of the rotor 5 is then carried out the usual pressing and / or brushing the labels.
  • the container receptacles 6 are each rotatable about their own actuators about an axis parallel to the vertical machine axis, namely controlled by a multi-level image recognition system explained in more detail below with a plurality of electronic cameras 9-11 and an associated, preferably formed by a computer Evaluation and control electronics 12.
  • the non-moving with the rotor 5 cameras 8 - 11 are each arranged radially outside the trajectory of the container receptacle 6 such that with each camera, the passing container 2 at least on the test area or on the typical geometric container features having their Container outer surface are detected. Furthermore, all cameras are 8-11 within the angular range W1 and thus in the direction of rotation A in front of the labeling station. 7
  • the two cameras 8 and 9 which are arranged in a following on the container inlet 3 portion of the angular range W1, a first Kammerasystem or a first stage of the image recognition system, together with a not moving with the rotor 5, a white Background or a white background mirror forming background element 13, which in the illustrated embodiment with respect to the circular path of movement of the container receptacles 6 radially inwardly and the two cameras 8 and 9 is arranged opposite, and together with a direction indicated by the arrow B1 front lighting.
  • the two cameras 8 and 9 are arranged with their optical axes at an angle to each other such that with them a peripheral region or a settlement greater than 180 ° of the respectively moved past container 2 is detected.
  • the images or image data supplied by the two cameras 8 and 9 are combined, for example, into an overall image or an overall data set which corresponds to an image of the development or of the container peripheral region of greater than 180 °.
  • the first stage of the image recognition system is followed by the second stage of this system formed by the single camera 10.
  • the camera 10 is in turn associated with a background element 14 corresponding to the element 13 and forming a white background or a white background mirror, specifically in the illustrated embodiment with respect to the movement path of the container receptacle 6 radially inward.
  • this second stage has a front lighting, as indicated by the arrow B2.
  • the elements 13 and 14 of the first and second stages may also be formed by a single, continuous element.
  • the front lighting for both stages can also be formed by one or more common light sources, for example luminescent screens.
  • the third stage of the image acquisition system formed by the single camera 11 is provided, namely with a backlight B3, for example, from a fluorescent screen 15 on the camera 11 not moved with the rotor 5
  • the backlight B3 is selected in terms of color and / or intensity as a function of the optical properties of the container 2 or the container material and / or depending on the optical properties of the filling material for optimal optical detection or adjustable.
  • the alignment of the container 2 with the image recognition system takes place in such a way that with the first stage or with the two local cameras 8 and 9, the respective random orientation of the passing container 2 with one receptacle per container and camera 8 and 9 respectively is detected.
  • the current orientation of the respective container 2 is determined in the electronics 12 , From this determines the necessary correction to achieve the required advance direction and performs the correction by appropriate control of the actuator of the respective container receptacle 6.
  • the position correction is carried out in the described manner by driving the container receptacle 6 in this manner, so that each container 2 is aligned at least with a positional accuracy which is the subsequent exact detection of the position of the at least one typical container feature used for the final alignment allows.
  • each moved container 2 is detected in a narrower area of its typical geometric container feature.
  • the optics of the camera 10 for this purpose, for example, designed so that the optical aperture angle of the camera 10 is smaller than the corresponding aperture angle of the cameras 8 and 9 and the region of the respective container having the typical geometric container feature is shown as full format filling.
  • the image thus generated by each container 2 is in turn compared in the electronics 12 with a stored there for the container type or image stored for the particular type of container characteristics, then determines the necessary position correction and then by appropriate control of the actuator of the respective container receptacle. 6 causes. Due to the image area reduced to the typical container feature, the second stage of the image recognition system already achieves a very precise orientation of each container 2, in particular also with respect to the pre-alignment (with the first stage).
  • a fine adjustment or fine alignment of each container 2 takes place before it reaches the labeling station 7.
  • a criterion in this fine alignment for example, at least one edge profile or at least one typical edge point is used, namely on the at least one typical container feature used for aligning and / or in the region of this container feature.
  • the image data delivered by the camera 11 are in turn compared in the electronics 12 with image data stored there for the respective container type or with characteristic values stored there for the respective container type, so that the still necessary position correction is calculated from this comparison and the appropriate actuation of the actuator relevant container receptacle can be made.
  • the above-described three-stage optical detection of the container 2 or the typical container features a very precise orientation of the labeling machine 1 is fed in arbitrary orientation or positioning Container with only four Kaneras reached before they reach the labeling station 7, so that the desired application accuracy in applying the labels with respect to the typical geometrical container characteristics with high reliability even at a very high performance for the labeling, for example, with a labeling of several tens 000 containers per hour is guaranteed.
  • Fig. 2 shows by way of example a typical container feature, an embossing pattern 16 on a bottle in a nearly frontal view.
  • the edge of the bottle as well as the center of the wrong one is marked with a thin vertical red line. From this frontal view, let the angle of rotation be zero degrees.
  • the zero point of the rotation angle on the basis of the symmetry of the embossing pattern (thus "in the middle of the embossing pattern").
  • the points 17.1 - 17.7 are indicated where the embossing intersects the test line 17. These points are referred to below as imprinting points.
  • variable x i denotes the position of an embossed point in a captured image and z i represents the world coordinates on the surface of the bottle.
  • the running index i numbers the individual embossing points.
  • Fig. 3 shows the same embossing pattern with the bottle twisted 24 degrees to the left. The imprints are also marked in this picture. Due to the rotation of the bottle, the position and the distances of the embossing points 17.1 - 17.7 have changed in a characteristic manner. For example, has due to the perspective distortion on the cylindrical bottle body of the visible distance from two adjacent imprinting points, which have nourished the left edge of the bottle, compared to the untwisted state shortened.
  • the position z i of a stamping point is defined by the distance from the bottle center measured measured along the bottle surface.
  • the position z i of the individual embossing points with respect to the center line can now be measured by applying a measuring tape to the bottle body and made available in a list to the recognition algorithm.
  • the formula (2) allows to obtain this information directly from a captured image.
  • the position x i is determined in the image with a known rotation angle.
  • the world coordinates z i on the bottle surface can be determined therefrom by means of formula (2).
  • the learning of an embossing pattern for the recognition algorithm is thereby greatly simplified. As illustrated in FIGS. 2 and 3 by the embossing points 17. 1 - 17.
  • a user program can be executed in a computer program in which a user can mark the intersection points of the embossing pattern with a test line 17. With the help of formula (2) can then be clicked immediately Convert screen functions x i to world coordinates z i on the bottle surface.
  • the user can provide the embossing pattern to the algorithm in the form of a list of embossing points 17.1-17.2.
  • the imprinting points z i are determined in world coordinates for a stamping pattern, they can be converted into positions x i seen in the opposite direction for any angle of rotation of the bottle by the formula (1).
  • the recognition algorithm can therefore calculate the positions x i ( ⁇ ) for the given embossing pattern for all possible angles of rotation ⁇ of the bottle.
  • the algorithm can and must hold the associated distribution of the observed positions x i ( ⁇ k ) in memory Do not recalculate them for the pattern search for the next bottle with the same embossing pattern. This can save a lot of computing time.
  • the algorithm has to decide which distribution x i ( ⁇ k ) best fits the situation observed in the image. For this purpose, a method is used which assigns a score S k to each distribution x i ( ⁇ k ).
  • This score is designed to be the larger the better the observed situation fits a distribution.
  • the largest evaluation number S kMax which is achieved for a given image situation, thus defines the angle of rotation ⁇ kMax of the bottle.
  • S k the brightness curve H (x) along the test line 17 is determined first (FIG. 6). x denotes the pixel position along the horizontal test profile.
  • embossing points are noticeable by significant fluctuations in brightness on a length scale which corresponds to the approximate width of an imprinting point.
  • these brightness fluctuations are also superimposed on other brightness fluctuations, which however all take place on a significantly larger length scale and can thus be separated from the brightness fluctuations caused by embossing points in the following manner: From the brightness profile H (x), a brightness profile H Ave (x) is calculated is smoothed on a length scale, which is well above the width of an imprinting point.
  • this distance is smaller than a predetermined maximum distance d, then the pair of points found is judged to be suitable, ie it is assumed that the position of the embossing point b i found in the image matches a position of the embossing pattern to the bottle twist ⁇ k . In this case, a bonus contribution is added to the rating number S k . Since the embossing patterns of different bottles are never quite exactly the same, the bottle geometry and the bottle position to the camera are subject to fluctuations during image acquisition, one can never assume an exact match of a pair of points b i and x j . Therefore, the maximum distance d requires that the points be sufficiently close together.
  • FIG. 7 shows, for the example shown in FIG. 3, the dependence of the evaluation number S k as a function of the angle. It is evident that there is a sharp peak at approximately -24 degrees, ie the seen points pattern best x j corresponds to the j b dot pattern with a bottle rotation angle of -24 degrees.
  • the invention has been described above by means of an embodiment. It is understood that numerous changes and modifications are possible without thereby departing from the inventive idea underlying the invention.
  • the first stage of the image recognition system two cameras 8 and 9 and the second or third stage each have only one camera 10 and 11 respectively.
  • the number of cameras in these stages may also be chosen differently, but it is necessary, but at least advisable, for the first-stage camera system to detect as large a peripheral area as possible of the container 2 passed by.
  • the cameras 8, 9, 10 and 11 are each designed and / or driven in such a way that they are each created an image or an image data set of each container 2 passed and then the pre-alignment (in the first stage) on the basis of this image data set. , the pre-adjustment (in the second stage) and the fine adjustment (in the third stage) by comparison with the respective image data.

Abstract

Device for aligning containers (2) in relation to a geometric container characteristic comprises a first camera system having cameras (8, 9) for determining the outer and peripheral surface of the containers, a further camera system having cameras (10, 11) for aligning each container for further alignment in a region of the peripheral surface which is narrower than the geometric container characteristic and an electronic unit for further alignment based on image data or characteristic values when deviating from the theoretical position. An independent claim is also included for a labeling machine containing the above aligning device. Preferred Features: A peripheral region of each container of more than 180[deg] is determined using the first camera system.

Description

Die Erfindung bezieht sich auf eine Vorrichtung zum lage- bzw. positionsgenauen Ausrichten von Behältern gemäß Oberbegriff Patentanspruch 1 sowie auf eine Etikettiermaschine mit einer solchen Vorrichtung gemäß Oberbegriff Patentanspruch 23.The invention relates to a device for positionally or positionally accurate alignment of containers according to the preamble of claim 1 and to a labeling machine with such a device according to the preamble of claim 23.

Bei Behältern und insbesondere bei Flaschen, die an ihrer Außenfläche typische geometrische Behältermerkmale, wie z. B. Siegelfläche, Ornament, Prägung, erhabene Schriftzüge usw. aufweisen, ist es erforderlich, die Etiketten mit hoher Applikationsgenauigkeit im Bezug zu diesen Behältermerkmalen aufzubringen. Dies bedeutet, dass bei einer Etikettiermaschine, der die Behälter zwar aufrechtstehend, aber in einer rein zufälligen Ausrichtung oder Orientierung zugeführt werden, diese Behälter zunächst so ausgerichtet werden müssen, dass sie im Bezug auf ihre Behätermerkmale jeweils möglichst exakt eine vorgegebene Orientierung aufweisen. Erst dann kann das wenigstens eine Etikett auf den jeweiligen Behälter aufgebracht und anschließend an diesen angedrückt und/oder angebürstet werden.For containers and in particular for bottles, the typical geometrical container characteristics on its outer surface, such. B. seal surface, ornament, embossing, raised lettering, etc., it is necessary to apply the labels with high accuracy of application in relation to these container features. This means that in a labeling machine, the containers are indeed upright, but fed in a purely random orientation or orientation, these containers must first be aligned so that they each have as closely as possible with respect to their Behätermerkmale a predetermined orientation. Only then can the at least one label be applied to the respective container and then pressed against it and / or brushed.

Bekannt ist es, für dieses Ausrichten an einem Rotor einer Etikettiermaschine Behälteraufnahmen, beispielsweise in Form von Drehtellern vorzusehen, die mit jeweils eigenen Stellantrieben um eine vertikale Achse und damit auch um die Achse des jeweiligen, auf der Behälteraufnahme angeordneten Behälters gesteuert drehbar sind. Bekannt ist speziell auch, die Steuerung der Behälteraufnahmen für das Ausrichten in Abhängigkeit von einem Bilderkennungs- oder Kamerasystem vorzunehmen, mit welchem die jeweilige Position oder Orientierung wenigstens eines für das Ausrichten verwendeten typischen geometrischen Behältermerkmales als Istwert erfasst und dieser dann in einer Elektronik mit dort abgelegten, den Sollwert repräsentierenden Bilddaten oder Kennwerten verglichen und hieraus die für die notwendige Positionskorrektur erforderliche Ansteuerung des Stellantriebes der Behälteraufnahme veranlasst wird ( EP 1 205 388 ). Bei einer Ausführung dieser bekannten Vorrichtung weist das Kamerasystem vier Kameras auf, die entlang der Bewegungsbahn der Behälteraufnahmen in Drehrichtung des Rotors aufeinander folgend vorgesehen sind. Jede Kamera erfasst dabei jeweils einen Teil des Umfangs des Behälters, und zwar überlappend jeweils 100° dieses Umfangs bei um ihre Behälterachse drehenden Behältern. Aufgrund der von den Kameras gelieferten Ist-Bilddaten erfolgt dann eine Drehlagenkorrektur der Behälteraufnahmen und die Ausrichtung der Behälter im Bezug auf ihr typisches geometrisches Behältermerkmal.It is known to provide for this alignment on a rotor of a labeling container receptacles, for example in the form of turntables, which are controlled by their own actuators about a vertical axis and thus also about the axis of the respective, arranged on the container receptacle rotatable. Specifically, it is also known to perform the control of the container receptacles for aligning in dependence on an image recognition or camera system, with which the respective position or orientation of at least one used for aligning typical geometric container feature as the actual value and this then stored in an electronics with there , the setpoint value representing image data or characteristic values compared and from this the necessary for the necessary position correction control of the actuator of the container receptacle is made ( EP 1 205 388 ). In one embodiment of this known device, the camera system has four cameras, which are provided consecutively along the movement path of the container receptacles in the direction of rotation of the rotor. Each camera captures each part of the circumference of the container, overlapping each 100 ° of this circumference with rotating around its container axis containers. Due to the actual image data supplied by the cameras, a rotational position correction of the container recordings and then takes place the orientation of the containers relative to their typical geometric container feature.

Aufgabe der Erfindung ist es, eine Vorrichtung aufzuzeigen, mit der ein Ausrichten von Behältern im Bezug auf wenigstens ein typisches, geometrisches Behältermerkmal mit einer wesentlich verbesserten Genauigkeit möglich ist, und zwar insbesondere auch bei einer hohen Leistung, d.h. bei einer Vielzahl von je Zeiteinheit verarbeiteter Behälter. Zur Lösung dieser Aufgabe ist eine Vorrichtung entsprechend dem Patentanspruch 1 ausgebildet. eine Etikettiermaschine ist Gegenstand des Patentanspruchs 23.The object of the invention is to provide a device with which an alignment of containers with respect to at least one typical, geometric container feature with a significantly improved accuracy is possible, and in particular at a high power, i. at a plurality of processed per unit time container. To solve this problem, a device according to the patent claim 1 is formed. a labeling machine is the subject of claim 23.

Bei der erfindungsgemäßen Vorrichtung erfolgt mit den Bilddaten eines ersten Kamerasystems ein Vorausrichten der Behälter in der Form, dass diese nach dem Vorausrichten zumindest einigermaßen genau die geforderte Orientierung aufweisen, insbesondere auch in Bezug auf ihre für das Ausrichten verwendeten geometrischen Behältermerkmale, und zwar wenigstens mit einer Genauigkeit, wie sie mit bekannten Vorrichtungen erreichbar ist. Mit diesem ersten Kamerasystem wird der Prüfbereich, d. h. der Umfangsbereichs des jeweiligen Behälters, an dem sich das wenigstens eine geometrische Behältermerkmal befindet, großflächig erfasst.In the apparatus according to the invention, the image data of a first camera system are used to pre-align the containers in such a way that they have at least approximately the required orientation after pre-aligning, in particular also with respect to their geometrical container features used for the alignment, namely at least one Accuracy as achievable with known devices. With this first camera system, the test area, i. H. the circumferential region of the respective container, where the at least one geometric container feature is located, detected over a large area.

Mit den Bilddaten des wenigstens einen weiteren Kamerasystems erfolgt dann eine genauere, eventuell auch die endgültige Ausrichtung jedes Behälters. Da der von der wenigstens einen Kamera des wenigstens einen weiteren Kamerasystems erfasste Behälterbereich sehr viel kleiner ist als der von der wenigstens einen Kamera des ersten Kamerasystems zu erfassende Bereich, d. h. die wenigstens eine Kamera des weiteren Kamerasystems z.B. einen sehr viel kleineren Öffnungswinkel als die wenigstens eine Kamera des ersten Kamerasystems aufweist, kann die Ausrichtung unter Verwendung der von dem wenigstens einen weiteren Kamerasystem gelieferten Bilddaten in extrem kurzer Zeit sehr präzise erfolgen.With the image data of at least one other camera system then takes place a more accurate, possibly even the final orientation of each container. Since the container area detected by the at least one camera of the at least one further camera system is much smaller than the area to be detected by the at least one camera of the first camera system, d. H. the at least one camera of the further camera system e.g. a much smaller opening angle than the at least one camera of the first camera system, the alignment using the image data supplied by the at least one further camera system can be done very precisely in an extremely short time.

Die Erfindung wird im Folgenden anhand der Figuren an Ausführungsbeispielen näher erläutert. Es zeigen:

Fig. 1
in schematischer Darstellung eine Etikettiermaschine umlaufender Bauart;
Fig. 2 - 7
verschiedene Darstellungen zur Erläuterung des Algorithmus bei der Ermittlung des für die Korrektur der Orientierung notwendigen Drehwinkels ber Behälteraufnahmen.
The invention will be explained in more detail below with reference to the figures of exemplary embodiments. Show it:
Fig. 1
in a schematic representation of a labeling machine of rotating design;
Fig. 2-7
various illustrations for explaining the algorithm in the Determining the angle of rotation necessary for the correction of the orientation over container receptacles.

Die in der Figur 1 dargestellte und dort allgemein mit 1 bezeichnete Etikettiermaschine dient zum Etikettieren von Behältern 2, beispielsweise Flaschen, die der Etikettiermaschine 1 an einem Behältereinlauf 3 zugeführt und die Etikettiermaschine 1 im etikettierten Zustand an einem Behälterauslauf 4 verlassen. Die Behälter 2 sind beispielsweise Flaschen aus einem transluzenten Material, z.B. aus Glas, und sind an ihrer Behälteraußenseite jeweils mit wenigstens einem typischen geometrischen Behältermerkmal, wie z. B. Siegelfläche, Ornament, Prägung, erhabene Schriftzüge usw. versehen. Die Behälter 2 sollen mit hoher Applikationsgenauigkeit im Bezug zu diesen geometrischen Merkmalen mit den Etiketten versehen werden.The labeling machine shown in FIG. 1 and designated generally by 1 serves for labeling containers 2, for example bottles, which are supplied to the labeling machine 1 at a container inlet 3 and leave the labeling machine 1 in a labeled outlet at a container outlet 4. The containers 2 are for example bottles made of a translucent material, e.g. made of glass, and are at their container outside with at least one typical geometric container feature such. B. sealing surface, ornament, embossing, raised lettering, etc. provided. The containers 2 are to be provided with high accuracy of application in relation to these geometric features with the labels.

Die Etikettiermaschine 1 umfasst u. a. den um eine vertikale Maschinenachse in Richtung des Pfeiles A umlaufend angetriebenen Drehtisch oder Rotor 5, der an seinem Umfang eine Vielzahl von Behälterträgern oder -aufnahmen 6 aufweist, die jeweils in gleichmäßigen Winkelabständen um die vertikale Maschinenachse verteilt vorgesehen sind und an denen für das Aufbringen der Etiketten jeweils ein Behälter 3 mit seiner Behälterachse parallel zu der vertikalen Maschinenachse vorgesehen ist.The labeling machine 1 comprises u. a. the rotatable about a vertical axis of the machine in the direction of arrow A rotary table or rotor 5, which has at its periphery a plurality of container carriers or receptacles 6, which are each distributed at equal angular intervals around the vertical axis of the machine and at which for applying the Labels each a container 3 is provided with its container axis parallel to the vertical machine axis.

Die Behälter 2 werden der Etikettiermaschine 1 am Behältereinlauf 3 über einen nicht dargestellten Transporteur zwar aufrechtstehend, d. h. mit ihrer Behälterachse in vertikaler Richtung orientiert, aber ansonsten in einer beliebigen, rein zufälligen Orientierung auch hinsichtlich ihrer typischen geometrischen Behältermerkmale zugeführt, in dieser rein zufälligen Orientierung an jeweils eine Behälteraufnahme 6 übergeben und anschließend in einem Winkelbereich W1 der Drehbewegung A des Rotors 5 ausgerichtet, so dass jeder Behälter 3 am Ende dieses Winkelbereichs im Bezug auf seine typischen geometrischen Behältermerkmale exakt ausgerichtet ist, d. h. eine vorgegebene Orientierung aufweist. In diesem Zustand wird jeder Behälter 2 an einer sich mit dem Rotor 5 nicht mitbewegenden Etikettierstation 7 zum Aufbringen wenigstens eines Etiketts vorbeibewegt, sodass dieses dann mit der angestrebten hohen Applikationsgenauigkeit im Bezug auf die geometrischen Behältermerkmale auf den jeweiligen Behälter 2 aufgebracht ist. In dem auf die Etikettierstation 7 bis zum Behälterauslauf 3 folgenden Winkelbereich W2 der Drehbewegung A des Rotors 5 erfolgt dann das übliche Andrücken und/oder anbürsten der Etiketten.The containers 2 are the labeling machine 1 on the container inlet 3 via a conveyor, not shown, upright, ie oriented with its container axis in the vertical direction, but otherwise fed in any random orientation also in terms of their typical geometric container characteristics, in this purely random orientation each pass a container receptacle 6 and then aligned in an angular range W1 of the rotational movement A of the rotor 5, so that each container 3 is exactly aligned at the end of this angular range with respect to its typical geometric container characteristics, ie having a predetermined orientation. In this state, each container 2 is moved past a labeling station 7, which does not move with the rotor 5, for applying at least one label, so that it is then applied to the respective container 2 with the desired high accuracy of application with respect to the geometric container features. In the following on the labeling station 7 to the container outlet 3 angle range W2 of the rotational movement A of the rotor 5 is then carried out the usual pressing and / or brushing the labels.

Für das Ausrichten der Behälter 2 sind die Behälteraufnahmen 6 jeweils über eigene Stellantriebe um eine Achse parallel zur vertikalen Maschinenachse drehbar, und zwar gesteuert durch ein nachstehend noch näher erläutertes mehrstufiges Bilderkennungssystem mit mehreren elektronischen Kameras 9-11 und einer zugehörigen, vorzugsweise von einem Rechner gebildeten Auswert- und Steuerelektronik 12.For the alignment of the container 2, the container receptacles 6 are each rotatable about their own actuators about an axis parallel to the vertical machine axis, namely controlled by a multi-level image recognition system explained in more detail below with a plurality of electronic cameras 9-11 and an associated, preferably formed by a computer Evaluation and control electronics 12.

Bei der dargestellten Ausführungsform sind die mit dem Rotor 5 nicht mitbewegten Kameras 8 - 11 jeweils radial außerhalb der Bewegungsbahn der Behälteraufnahme 6 derart angeordnet, dass mit jeder Kamera die vorbeibewegten Behälter 2 zumindest an dem Prüfbereich bzw. an dem die typischen geometrischen Behältermerkmale aufweisenden Bereich ihrer Behälteraußenfläche erfasst werden. Weiterhin befinden sich sämtliche Kameras 8-11 innerhalb des Winkelbereichs W1 und damit in Drehrichtung A vor der Etikettierstation 7.In the illustrated embodiment, the non-moving with the rotor 5 cameras 8 - 11 are each arranged radially outside the trajectory of the container receptacle 6 such that with each camera, the passing container 2 at least on the test area or on the typical geometric container features having their Container outer surface are detected. Furthermore, all cameras are 8-11 within the angular range W1 and thus in the direction of rotation A in front of the labeling station. 7

Im Detail bilden die beiden Kameras 8 und 9, die in einem auf den Behältereinlauf 3 folgenden Teilbereich des Winkelbereichs W1 angeordnet sind, ein erstes Kammerasystem bzw. eine erste Stufe des Bilderkennungssystems, und zwar zusammen mit einem mit dem Rotor 5 nicht mitbewegten, einen weißen Hintergrund bzw. einen weißen Hintergrundspiegel bildenden Hintergrundelement 13, welches bei der dargestellten Ausführungsform bezogen auf die kreisförmige Bewegungsbahn der Behälteraufnahmen 6 radial innen und den beiden Kameras 8 und 9 gegenüberliegend angeordnet ist, sowie zusammen mit einer mit dem Pfeil B1 angedeuteten Vordergrundbeleuchtung. Die beiden Kameras 8 und 9 sind mit ihren optischen Achsen unter einem Winkel zueinander derart angeordnet, dass mit ihnen ein Umfangsbereich bzw. eine Abwicklung größer als 180° des jeweils vorbeibewegten Behälters 2 erfasst wird. Die von den beiden Kameras 8 und 9 gelieferten Bilder oder Bilddaten werden hierfür beispielsweise zu einem Gesamtbild oder einem Gesamt-Datensatz zusammengesetzt, welches bzw. welcher eine Abbildung der Abwicklung bzw. des Behälterumfangsbereichs von größer 180° entspricht.In detail, the two cameras 8 and 9, which are arranged in a following on the container inlet 3 portion of the angular range W1, a first Kammerasystem or a first stage of the image recognition system, together with a not moving with the rotor 5, a white Background or a white background mirror forming background element 13, which in the illustrated embodiment with respect to the circular path of movement of the container receptacles 6 radially inwardly and the two cameras 8 and 9 is arranged opposite, and together with a direction indicated by the arrow B1 front lighting. The two cameras 8 and 9 are arranged with their optical axes at an angle to each other such that with them a peripheral region or a settlement greater than 180 ° of the respectively moved past container 2 is detected. For this purpose, the images or image data supplied by the two cameras 8 and 9 are combined, for example, into an overall image or an overall data set which corresponds to an image of the development or of the container peripheral region of greater than 180 °.

Auf die erste Stufe des Bilderkennungssystems folgt die von der einzigen Kamera 10 gebildete zweite Stufe dieses Systems. Der Kamera 10 ist wiederum ein dem Element 13 entsprechendes, einen weißen Hintergrund oder einen weißen Hintergrundspiegel bildendes Hintergrundelement 14 zugeordnet, und zwar bei der dargestellten Ausführungsform bezogen auf die Bewegungsbahn der Behälteraufnahme 6 radial innenliegend. Weiterhin weist auch diese zweite Stufe eine Vordergrundbeleuchtung auf, wie dies mit dem Pfeil B2 angedeutet ist. Selbstverständlich können die Elemente 13 und 14 der ersten und zweiten Stufe auch von einem einzigen, durchgehenden Element gebildet sein. Weiterhin kann auch die Vordergrundbeleuchtung für beide Stufen von einer oder von mehreren gemeinsamen Lichtquellen, beispielsweise Leuchtschirmen gebildet sein. Grundsätzlich gilt weiterhin, dass in Abhängigkeit von den optischen Eigenschaften der Behälter für die Vordergrundbeleuchtung jeweils eine Beleuchtungstechnik gewählt ist, die eine optimale Erfassung der zum Ausrichten der Behälter verwendeten Behältermerkmale ermöglicht. Weiterhin kann durch eine spezielle Gestaltung des Hintergrundelementes 13 und/oder 14, beispielsweise durch eine teilweise Schwärzung des weißen Hintergrundelementes 13 und/oder 14 eine verstärkte optische Erfassung von Kantenprofilen der für die Ausrichtung verwendeten Behältermerkmale erreicht werden.The first stage of the image recognition system is followed by the second stage of this system formed by the single camera 10. The camera 10 is in turn associated with a background element 14 corresponding to the element 13 and forming a white background or a white background mirror, specifically in the illustrated embodiment with respect to the movement path of the container receptacle 6 radially inward. Furthermore, this second stage has a front lighting, as indicated by the arrow B2. Of course, the elements 13 and 14 of the first and second stages may also be formed by a single, continuous element. Furthermore, the front lighting for both stages can also be formed by one or more common light sources, for example luminescent screens. In principle, it is also the case that, depending on the optical properties of the containers for the foreground lighting, a respective lighting technique is selected which enables optimum detection of the container features used to align the containers. Furthermore, by a special design of the background element 13 and / or 14, for example by a partial blackening of the white background element 13 and / or 14, increased optical detection of edge profiles of the container features used for the alignment can be achieved.

In Drehrichtung A auf die zweite Stufe (Kamera 10) folgend ist die von der einzigen Kamera 11 gebildete dritte Stufe des Bilderfassungssystems vorgesehen, und zwar mit einer Hintergrundbeleuchtung B3, die beispielsweise von einem mit dem Rotor 5 nicht mitbewegten Leuchtschirm 15 an der der Kamera 11 gegenüberliegenden Seite der Bewegungsbahn der Behälteraufnahme 6. Die Hintergrundbeleuchtung B3 ist hinsichtlich Farbe und/oder Intensität in Abhängigkeit von den optischen Eigenschaften der Behälter 2 bzw. des Behältermaterials und/oder in Abhängigkeit von den optischen Eigenschaften des Füllgutes für eine möglichst optimale optische Erfassung gewählt bzw. einstellbar.Following in the direction of rotation A on the second stage (camera 10), the third stage of the image acquisition system formed by the single camera 11 is provided, namely with a backlight B3, for example, from a fluorescent screen 15 on the camera 11 not moved with the rotor 5 The backlight B3 is selected in terms of color and / or intensity as a function of the optical properties of the container 2 or the container material and / or depending on the optical properties of the filling material for optimal optical detection or adjustable.

Im Detail erfolgt die Ausrichtung der Behälter 2 mit dem Bilderkennungssystem in der Weise, dass mit der ersten Stufe bzw. mit den beiden dortigen Kameras 8 und 9 die jeweilige zufällige Orientierung des vorbeibewegten Behälters 2 mit jeweils einer Aufnahme pro Behälter und Kamera 8 bzw. 9 erfasst wird. Durch anschließenden Vergleich der von den beiden Kamerasystemen 8 und 9 gelieferten Bilder bzw. Bilddaten in der Elektronik 12 mit dort in einem Datenspeicher für den entsprechenden Behältertyp abgelegten Bildern bzw. Bilddaten oder typischen Kennwerten wird in der Elektronik 12 die aktuelle Orientierung des jeweiligen Behälters 2 ermittelt, hieraus die nötige Korrektur zur Erreichung der geforderten Vorausrichtung ermittelt und durch entsprechende Ansteuerung des Stellantriebes der jeweiligen Behälteraufnahme 6 die Korrektur durchführt.In detail, the alignment of the container 2 with the image recognition system takes place in such a way that with the first stage or with the two local cameras 8 and 9, the respective random orientation of the passing container 2 with one receptacle per container and camera 8 and 9 respectively is detected. By subsequent comparison of the images or image data supplied by the two camera systems 8 and 9 in the electronics 12 with images or image data or typical characteristic values stored there in a data memory for the corresponding container type, the current orientation of the respective container 2 is determined in the electronics 12 , From this determines the necessary correction to achieve the required advance direction and performs the correction by appropriate control of the actuator of the respective container receptacle 6.

Für jeden einzelnen Behälter 2 wird in der beschriebenen Weise durch Ansteuerung der Behälteraufnahme 6 in dieser Weise die Positionskorrektur ausgeführt, sodass jeder Behälter 2 zumindest mit einer Positionsgenauigkeit ausgerichtet ist, die die anschließende exakte Erfassung der Position des wenigstens einen für die endgültige Ausrichtung verwendeten typischen Behältermerkmals ermöglicht.For each individual container 2, the position correction is carried out in the described manner by driving the container receptacle 6 in this manner, so that each container 2 is aligned at least with a positional accuracy which is the subsequent exact detection of the position of the at least one typical container feature used for the final alignment allows.

In der von der Kamera 10 gebildeten zweiten Stufe des Bilderkennungssystems wird jeder vorbeibewegte Behälter 2 in einem engeren Bereich seines typischen geometrischen Behältermerkmals erfasst. Die Optik der Kamera 10 ist hierfür beispielsweise so ausgeführt, dass der optische Öffnungswinkel der Kamera 10 kleiner ist als der entsprechende Öffnungswinkel der Kameras 8 und 9 und der das typische geometrische Behältermerkmal aufweisende Bereich des jeweiligen Behälters möglichst formatfüllend abgebildet wird. Das von jedem Behälter 2 so erzeugte Bild wird wiederum in der Elektronik 12 mit einem dort für den betreffenden Behältertyp abgelegten Bild oder mit für den betreffenden Behältertyp abgelegten Kenndaten verglichen, hieraus die notwendige Positionskorrektur ermittelt und diese dann durch entsprechende Ansteuerung des Stellantriebes der jeweiligen Behälteraufnahme 6 veranlasst. Durch den auf das typische Behätermerkmal reduzierten Bildbereich wird mit der zweiten Stufe des Bilderkennungssystems bereits eine sehr genaue, insbesondere auch gegenüber der Vorausrichtung (mit der erste Stufe) stark verbesserte Ausrichtung jedes Behälters 2 erreicht.In the second stage of the image recognition system formed by the camera 10, each moved container 2 is detected in a narrower area of its typical geometric container feature. The optics of the camera 10 for this purpose, for example, designed so that the optical aperture angle of the camera 10 is smaller than the corresponding aperture angle of the cameras 8 and 9 and the region of the respective container having the typical geometric container feature is shown as full format filling. The image thus generated by each container 2 is in turn compared in the electronics 12 with a stored there for the container type or image stored for the particular type of container characteristics, then determines the necessary position correction and then by appropriate control of the actuator of the respective container receptacle. 6 causes. Due to the image area reduced to the typical container feature, the second stage of the image recognition system already achieves a very precise orientation of each container 2, in particular also with respect to the pre-alignment (with the first stage).

Mit der von der Kamera 11 gebildeten dritten Stufe erfolgt dann eine Feinjustierung bzw. Feinausrichtung jedes Behälters 2, bevor dieser die Etikettierstation 7 erreicht. Als Kriterium bei dieser Feinausrichtung wird beispielsweise wenigstens ein Kantenprofil oder wenigstens ein typischen Kantenpunkt verwendet, und zwar an dem wenigstens einen zum Ausrichten verwendeten typischen Behältermerkmal und/oder im Bereich dieses Behältermerkmals. Die von der Kamera 11 gelieferten Bilddaten werden wiederum in der Elektronik 12 mit dort für den jeweiligen Behältertyp abgelegten Bilddaten bzw. mit dort für den jeweiligen Behältertyp abgelegten Kennwerten verglichen, sodass dann aus diesem Vergleich die noch notwendige Positionskorrektur errechnet und durch entsprechende Ansteuerung des Stellantriebes der betreffenden Behälteraufnahme vorgenommen werden kann.With the third stage formed by the camera 11, a fine adjustment or fine alignment of each container 2 takes place before it reaches the labeling station 7. As a criterion in this fine alignment, for example, at least one edge profile or at least one typical edge point is used, namely on the at least one typical container feature used for aligning and / or in the region of this container feature. The image data delivered by the camera 11 are in turn compared in the electronics 12 with image data stored there for the respective container type or with characteristic values stored there for the respective container type, so that the still necessary position correction is calculated from this comparison and the appropriate actuation of the actuator relevant container receptacle can be made.

Durch die vorstehend beschriebene dreistufige optische Erfassung der Behälter 2 bzw. der typischen Behältermerkmale wird eine sehr exakte Ausrichtung der der Etikettiermaschine 1 in willkürlicher Orientierung bzw. Positionierung zugeführten Behälter mit nur vier Kaneras erreicht, bevor diese an die Etikettierstation 7 gelangen, sodass die angestrebte Applikationsgenauigkeit beim Aufbringen der Etiketten im Bezug auf die typischen geometrischen Behältermerkmale mit hoher Zuverlässigkeit auch bei einer sehr hohen Leistung für die Etikettiermaschine, beispielsweise bei einer Etikettierleistung von mehreren 10 000 Behältern pro Stunde gewährleistet ist.By the above-described three-stage optical detection of the container 2 or the typical container features a very precise orientation of the labeling machine 1 is fed in arbitrary orientation or positioning Container with only four Kaneras reached before they reach the labeling station 7, so that the desired application accuracy in applying the labels with respect to the typical geometrical container characteristics with high reliability even at a very high performance for the labeling, for example, with a labeling of several tens 000 containers per hour is guaranteed.

Die Details eines Algorithmus, wie er in wenigstens einer der Stufen des Bilderkennungssystems zur Bestimmung der notwendigen Korrektur verwendet wird, werden nachfolgend erläutert.
Um eine präzise Erkennung des Drehwinkel mit einer Genauigkeit von mindestens einem Grad durchführen zu können, muss die zylindrische Geometrie der Flaschenoberfläche berücksichtigt werden. Bei bekannter Aufnahme-Geometrie (Abstand der Kamera zur Flasche, Durchmesser der Flasche) und bekannter Geometrie des Prägungsmusters lässt sich über die im Anhang dargestellte Rechnung für jeden Drehwinkel der Flasche (z.B. in 0.5 Grad-Schritten) berechnen, wie das Prägungsmuster für einen Beobachter (=Kamera) auf der Flaschenoberfläche verzerrt wird. Diese berechneten verzerrten Prägungsmuster müssen nun mit dem beobachteten Prägungsmuster auf einer aufgenommen Flasche verglichen werden. Dasjenige berechnete Prägungsmuster, das am besten mit dem beobachteten Muster übereinstimmt, legt den Drehwinkel der Flasche fest.
Fig. 2 zeigt als Beispiel eine typischen Behältermerkmals ein Prägungsmuster 16 auf einer Flasche in nahezu frontaler Ansicht. Der Flaschenrand sowie die Falschenmitte ist mit jeweils einer dünnen senkrechten roten Linie gekennzeichnet. Dieser frontalen Ansicht sei der Drehwinkel Null Grad zu geordnet. Natürlicher Weise definiert man den Nullpunkt des Drehwinkels auf Basis der Symmetrie des Prägungsmusters (also "in der Mitte des Prägungsmusters"). Entlang der horizontalen Testlinie 17 sind diejenigen Punkte mit 17.1 - 17.7 angegeben, an denen die Prägung die Testlinie 17 schneidet. Diese Punkte werden im folgenden als Prägungspunkte bezeichnet.
Mit der Variable xi ist die gesehene Position eines Prägungspunkt in einem aufgenommen Bild bezeichet und mit zi die Weltkoordinaten auf der Flaschenoberfläche. Der Laufindex i nummeriert die einzelnen Prägungspunkte.
Fig. 3 zeigt das selbe Prägungsmuster, wobei die Flasche um 24 Grad nach links verdreht worden ist. Auch in diesem Bild sind die Prägungspunkte markiert. Aufgrund der Verdrehung der Flasche haben sich die Lage und die Abstände der Prägungspunkte 17.1 - 17.7 auf charakteristische Weise verändert. Zum Beispiel hat sich aufgrund der perspektivischen Verzerrung am zylindrischen Flaschenkörper der sichtbare Abstand von zwei benachbarten Prägungspunkten, die sich dem linken Flaschenrand genährt haben, gegenüber dem unverdrehten Zustand verkürzt. Bei einer noch stärkeren Verdrehung würden Teile des Prägungsmuster hinter dem Flaschenhorizont verschwinden.
Eine geometrische Berechnung entsprechend der Fig. 5 führt zu den Formeln (1) und (2). Formel ( 1 ) : x i = d R sin z i / R d - R cos z i / R

Figure imgb0001
Formel ( 2 ) : z i = 2 R arctan d R - d 2 R 2 + x i 2 R 2 - d 2 x d + R
Figure imgb0002

Dabei gibt R den Flaschenradius an und d den Abstand der Kamera zur Flaschenmitte.The details of an algorithm used in at least one of the stages of the image recognition system to determine the necessary correction will be explained below.
In order to be able to precisely detect the angle of rotation with an accuracy of at least one degree, the cylindrical geometry of the bottle surface must be taken into account. With known acquisition geometry (distance of the camera to the bottle, diameter of the bottle) and known geometry of the embossing pattern can be calculated on the invoice shown in the appendix for each angle of rotation of the bottle (eg in 0.5 degree increments), as the embossing pattern for an observer (= Camera) on the bottle surface is distorted. These calculated distorted imprint patterns must now be compared to the observed imprint pattern on a picked bottle. The calculated emboss pattern that best matches the observed pattern determines the angle of rotation of the bottle.
Fig. 2 shows by way of example a typical container feature, an embossing pattern 16 on a bottle in a nearly frontal view. The edge of the bottle as well as the center of the wrong one is marked with a thin vertical red line. From this frontal view, let the angle of rotation be zero degrees. Of course one defines the zero point of the rotation angle on the basis of the symmetry of the embossing pattern (thus "in the middle of the embossing pattern"). Along the horizontal test line 17, the points 17.1 - 17.7 are indicated where the embossing intersects the test line 17. These points are referred to below as imprinting points.
The variable x i denotes the position of an embossed point in a captured image and z i represents the world coordinates on the surface of the bottle. The running index i numbers the individual embossing points.
Fig. 3 shows the same embossing pattern with the bottle twisted 24 degrees to the left. The imprints are also marked in this picture. Due to the rotation of the bottle, the position and the distances of the embossing points 17.1 - 17.7 have changed in a characteristic manner. For example, has due to the perspective distortion on the cylindrical bottle body of the visible distance from two adjacent imprinting points, which have nourished the left edge of the bottle, compared to the untwisted state shortened. With even more twisting, parts of the embossing pattern would disappear behind the bottle horizon.
A geometric calculation according to FIG. 5 leads to the formulas (1) and (2). formula ( 1 ) : x i = d R sin z i / R d - R cos z i / R
Figure imgb0001
formula ( 2 ) : z i = 2 R arctan d R - d 2 R 2 + x i 2 R 2 - d 2 x d + R
Figure imgb0002

Where R is the bottle radius and d is the distance from the camera to the center of the bottle.

Mit diesen Formeln ist es möglich die gesehene Position xi von Prägungspunkten 17.1 - 17.7 in Weltkoordinaten zi auf der Flaschenoberfläche umzurechnen und umgekehrt. Um die genaue Verteilung der Prägungspunkte 17.1 - 17.7 entlang einer horizontalen Testlinie 17 zu einem beliebigen Drehwinkel der Flasche berechnen zu können, muss dabei die Position zi aller Prägungspunkte 17.1 - 17.7 auf der Flaschenoberfläche bei bekanntem Drehwinkel (z.B. bei Null Grad) bezüglich der Symmetrieachse (=Nullpunkt) des Prägungsmusters bekannt sein. Die Position zi eines Prägungspunkte ist dabei durch den Abstand von der gesehen Flaschenmitte gemessen entlang der Flaschenoberfläche definiert.
Im Prinzip kann nun die Lage zi der einzelnen Prägungspunkte bezüglich der Mittellinie durch Anlegen eines Messbandes an den Flaschenkörper ausgemessen und in einer Liste dem Erkennungs-Algorithmus zur Verfügung gestellt werden. Die Formel (2) erlaubt jedoch, diese Information direkt aus einem aufgenommen Bild zu gewinnen. Hierzu ermittelt man im Bild mit bekanntem Drehwinkel die gesehene Position xi. Bei bekanntem Flaschenradius R und bekanntem Abstand d zur jeweiligen Kamera (8, 9, 10, 11) können mit Hilfe von Formel (2) daraus die Weltkoordinaten zi auf der Flaschenoberfläche ermittelt werden.
Das Einlernen eines Prägungsmusters für den Erkennungs-Algorithmus wird dadurch stark vereinfacht. Wie in den Fig. 2 und 3 durch die Prägepunkte 17.1 - 17.7 verdeutlicht ist, lässt sich in einem Computerprogramm eine Benutzerführung ausführen, bei der ein Benutzer die Kreuzungspunkte des Prägungsmusters mit einer Testlinie 17 markieren kann. Mit Hilfe der Formel (2) lässt sich dann sofort der angeklickte Bildschirmfunktionen xi in Weltkoordinaten zi auf der Flaschenoberfläche umrechnen. So kann der Benutzer dem Algorithmus das Prägungsmuster in Form einer Liste von Prägungspunkten 17.1-17.2 zur Verfügung stellen.
Sind einmal die Prägungspunkte zi in Weltkoordinaten für ein Prägungsmuster bestimmt, können diese für beliebige Drehwinkel der Flasche über die Formel (1) in umgekehrter Richtung in gesehene Positionen xi umgerechnet werden. Der Erkennungs-Algorithmus kann also für alle möglichen Drehwinkel φ der Flasche die gesehenen Positionen xi(φ) für das gegebene Prägungsmuster berechnen. In der Praxis hat es sich bewährt, dass der Erkennungsalgorithmus diese Berechnung für alle Drehwinkel φk mit einem Winkelabstand von 0.25 Grad durchführt, also
φ k = 0.25 Grad * k mit k = 0,±1,±2,±3,.... Der Algorithmus kann für jeden Winkel φk die dazugehörige Verteilung der gesehenen Positionen xik) im Speicher halten und muss sie damit für die Mustersuche bei der nächsten Flasche mit gleichem Prägungsmuster nicht neu berechnen. Dadurch kann viel an Rechenzeit eingespart werden.
Als nächstes muss der Algorithmus nun entscheiden, welche Verteilung xik) am besten zu der im Bild beobachteten Situation passt. Hierzu wird ein Verfahren verwendet, dass jeder Verteilung xik) eine Bewertungszahl (Score) Sk zuordnet. Diese Bewertungszahl ist so konstruiert, dass sie um so größer ist, je besser die beobachtete Situation zu einer Verteilung passt. Die größte Bewertungszahl SkMax, die für eine gegebene Bildsituation erreicht wird, legt damit den Drehwinkel φkMax der Flasche fest.
Für die Berechnung einer Bewertungszahlen Sk wird als erstes der Helligkeitsverlauf H(x) entlang der Testlinie 17 ermittelt (Fig. 6). x bezeichnet dabei die Pixelposition entlang des horizontalen Testprofils.
With these formulas, it is possible to convert the position x i seen from embossing points 17.1 - 17.7 into world coordinates z i on the bottle surface and vice versa. In order to be able to calculate the exact distribution of embossing points 17.1 - 17.7 along a horizontal test line 17 to any angle of rotation of the bottle, the position z i of all embossing points 17.1 - 17.7 on the surface of the bottle must be known at a known angle of rotation (eg at zero degrees) with respect to the symmetry axis (= Zero point) of the embossing pattern to be known. The position z i of a stamping point is defined by the distance from the bottle center measured measured along the bottle surface.
In principle, the position z i of the individual embossing points with respect to the center line can now be measured by applying a measuring tape to the bottle body and made available in a list to the recognition algorithm. However, the formula (2) allows to obtain this information directly from a captured image. For this purpose, the position x i is determined in the image with a known rotation angle. With a known bottle radius R and known distance d to the respective camera (8, 9, 10, 11), the world coordinates z i on the bottle surface can be determined therefrom by means of formula (2).
The learning of an embossing pattern for the recognition algorithm is thereby greatly simplified. As illustrated in FIGS. 2 and 3 by the embossing points 17. 1 - 17. 7, a user program can be executed in a computer program in which a user can mark the intersection points of the embossing pattern with a test line 17. With the help of formula (2) can then be clicked immediately Convert screen functions x i to world coordinates z i on the bottle surface. Thus, the user can provide the embossing pattern to the algorithm in the form of a list of embossing points 17.1-17.2.
Once the imprinting points z i are determined in world coordinates for a stamping pattern, they can be converted into positions x i seen in the opposite direction for any angle of rotation of the bottle by the formula (1). The recognition algorithm can therefore calculate the positions x i (φ) for the given embossing pattern for all possible angles of rotation φ of the bottle. In practice, it has been proven that the detection algorithm performs this calculation for all angles of rotation φ k with an angular distance of 0.25 degrees, ie
φ k = 0.25 degrees * k with k = 0, ± 1, ± 2, ± 3, .... For every angle φ k, the algorithm can and must hold the associated distribution of the observed positions x ik ) in memory Do not recalculate them for the pattern search for the next bottle with the same embossing pattern. This can save a lot of computing time.
Next, the algorithm has to decide which distribution x ik ) best fits the situation observed in the image. For this purpose, a method is used which assigns a score S k to each distribution x ik ). This score is designed to be the larger the better the observed situation fits a distribution. The largest evaluation number S kMax , which is achieved for a given image situation, thus defines the angle of rotation φ kMax of the bottle.
For the calculation of a score S k , the brightness curve H (x) along the test line 17 is determined first (FIG. 6). x denotes the pixel position along the horizontal test profile.

In einem solchen Helligkeitsprofil fallen Prägungspunkte durch deutliche Helligkeitsschwankungen auf einer Längenskala auf, die der ungefähren Breite einer Prägungspunktes entspricht. Diesen Helligkeitsschwankungen sind aber noch anderen Helligkeitsschwankungen überlagert, die aber alle auf einer deutlich größeren Längenskala stattfinden und sich damit auf folgende Weise von den von Prägungspunkten verursachten Helligkeitsschwankungen trennen lassen: Man berechnet aus dem Helligkeitsprofil H(x) ein Helligkeitsprofil HAve(x) das auf einer Längenskala geglättet wird, die deutlich über der Breite einer Prägungspunktes liegt. Dieses geglättete Helligkeitsprofil HAve(x) subtrahiert man von dem ursprünglichen Helligkeitsprofil H(x) und betrachtet nur die Beträge der Differenzen, also H Sub x = H ( x ) - H Ave x

Figure imgb0003

Bereiche, in denen sich keine Prägungspunkte befinden, weisen dann sehr kleine Werte HSub(x) auf, wohingegen an einem Prägungspunkt hohe Werte zu finden sind. Durch Wahl eines geeigneten Schwellwertes können auf diese Weise die Orte bi der Prägungspunkte in dem gegeben Bild identifiziert werden.
Die Bewertungszahl Sk für eine Verteilung der gesehenen Positionen xik) wird dann auf folgende Weise berechnet:
Es wird das Punktepaar bi und xj mit dem kleinsten Abstand gesucht. Wenn dieser Abstand kleiner als eine vorgegebene maximale Distanz d ist, dann wird das gefundene Punktepaar als passend gewertet, d.h. es wird angenommen, dass die im Bild gefundene Position des Prägungspunktes bi mit einer Position des Prägungsmusters zu der Flaschenverdrehung φk passt. In diesem Fall wird zur Bewertungszahl Sk ein Bonusbeitrag addiert. Da die Prägungsmuster verschiedener Flaschen nie alle ganz exakt gleich sind, die Flaschengeometrie sowie die Flaschenposition zur Kamera bei der Bildaufnahme Schwankungen unterworfen ist, kann man nie von einer exakten Übereinstimmung eines Punktespaars bi und xj ausgehen. Deshalb wird über die maximale Distanz d verlangt, dass die Punkte hinreichend nahe beisammen liegen müssen. Wurde ein Punktepaar auf diese Weise gefunden, dann werden diese als bereits zugeordnet in einer internen Liste des Algorithmus markiert. Für den verbleibenden Rest der Punkte wird dann der Vorgang solange wiederholt, bis alle möglichen Punkte entweder zugeordnet worden sind oder bis alle Punkte als nicht zuordenbar erkannt wurden (d.h. es wurde für einen Punkt bi kein Modelpunkt xj gefunden, der hinreichend nahe liegt).
Wenn für Modellpunkte xj keine entsprechenden Punkte bi gefunden wurden, dann werden hierfür Malusbeiträge von der Bewertungszahl Sk abgezogen.
Die Figur 7 zeigt für das in der Figur 3 gezeigte Beispiel die Abhängigkeit der Bewertungszahl Sk in Abhängigkeit vom Winkel. Man erkennt, dass es ein scharfes Maximum bei ca. -24 Grad gibt, d.h. das gesehene Punktemuster bj am besten dem Punktemuster xj bei einem Flaschendrehwinkel von -24 Grad entspricht.In such a brightness profile, embossing points are noticeable by significant fluctuations in brightness on a length scale which corresponds to the approximate width of an imprinting point. However, these brightness fluctuations are also superimposed on other brightness fluctuations, which however all take place on a significantly larger length scale and can thus be separated from the brightness fluctuations caused by embossing points in the following manner: From the brightness profile H (x), a brightness profile H Ave (x) is calculated is smoothed on a length scale, which is well above the width of an imprinting point. This smoothed brightness profile H Ave (x) is subtracted from the original brightness profile H (x) and considers only the amounts of the differences, ie H Sub x = H ( x ) - H Ave x
Figure imgb0003

Areas in which there are no embossing points then have very small values Hsub (x), whereas at an embossing point high values are to be found. By choosing a suitable threshold value, the locations b i of the imprinting points in the given image can be identified in this way.
The score S k for a distribution of the viewed positions x ik ) is then calculated as follows:
We search for the pair of points b i and x j with the smallest distance. If this distance is smaller than a predetermined maximum distance d, then the pair of points found is judged to be suitable, ie it is assumed that the position of the embossing point b i found in the image matches a position of the embossing pattern to the bottle twist φ k . In this case, a bonus contribution is added to the rating number S k . Since the embossing patterns of different bottles are never quite exactly the same, the bottle geometry and the bottle position to the camera are subject to fluctuations during image acquisition, one can never assume an exact match of a pair of points b i and x j . Therefore, the maximum distance d requires that the points be sufficiently close together. If a pair of points has been found in this way, they are marked as already assigned in an internal list of the algorithm. For the remainder of the points, the process is then repeated until all possible points have either been assigned or until all points have been identified as unassignable (ie no model point x j has been found sufficiently close for a point bi).
If no corresponding points bi were found for model points x j , then penalty contributions are deducted from the evaluation number S k .
FIG. 7 shows, for the example shown in FIG. 3, the dependence of the evaluation number S k as a function of the angle. It is evident that there is a sharp peak at approximately -24 degrees, ie the seen points pattern best x j corresponds to the j b dot pattern with a bottle rotation angle of -24 degrees.

Die Erfindung wurde voranstehend an einem Ausführungsbeispiel beschrieben. Es versteht sich, dass zahlreiche Änderungen sowie Abwandlungen möglich sind, ohne das dadurch der der Erfindung zugrunde liegende Erfindungsgedanke verlassen wird. So wurde vorstehend davon ausgegangen, dass die erste Stufe des Bilderkennungssystems zwei Kameras 8 und 9 und die zweite oder dritte Stufe jeweils nur eine Kamera 10 bzw. 11 aufweisen. Selbstverständlich kann die Anzahl der Kameras in diesen Stufen auch anders gewählt sein, wobei es aber notwendig, zumindest aber zweckmäßig ist, dass das Kamerasystem der ersten Stufe einen möglichst großen Umfangsbereich des jeweils vorbeigeführten Behälters 2 erfasst.The invention has been described above by means of an embodiment. It is understood that numerous changes and modifications are possible without thereby departing from the inventive idea underlying the invention. Thus, it was previously assumed that the first stage of the image recognition system two cameras 8 and 9 and the second or third stage each have only one camera 10 and 11 respectively. Of course, the number of cameras in these stages may also be chosen differently, but it is necessary, but at least advisable, for the first-stage camera system to detect as large a peripheral area as possible of the container 2 passed by.

Bei der dargestellten Ausführungsform sind die Kameras 8, 9, 10 und 11 jeweils so ausgebildet bzw. angesteuert, dass sie von jedem vorbeigeführtem Behälter 2 jeweils ein Bild bzw. ein Bilddatensatz erstellt wird und dann aufgrund dieses Bilddatensatzes die Vorausrichtung (in der ersten Stufe), die Vorjustierung (in der zweiten Stufe) und die Feinjustierung (in der dritten Stufe) durch Vergleich mit den jeweiligen Bilddaten erfolgen.In the illustrated embodiment, the cameras 8, 9, 10 and 11 are each designed and / or driven in such a way that they are each created an image or an image data set of each container 2 passed and then the pre-alignment (in the first stage) on the basis of this image data set. , the pre-adjustment (in the second stage) and the fine adjustment (in the third stage) by comparison with the respective image data.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Etikettiermaschinelabeling
22
Behälter bzw. FlascheContainer or bottle
33
Behältereinlaufcontainer inlet
44
Behälterauslaufcontainer outlet
55
Rotor oder DrehtischRotor or turntable
66
Behälteraufnahmecontainer receptacle
77
Etikettierstationlabeling
8, 9, 10, 118, 9, 10, 11
elektronische Kameraelectronic camera
1212
Auswert- und SteuerelektronikEvaluation and control electronics
13, 1413, 14
Hintergrundelement oder HintergrundspiegelBackground element or background mirror
1515
Hintergrundbeleuchtungselement, beispielsweise LeuchtschirmBacklight element, for example, luminescent screen
1616
Prägemuster oder BehältermerkmalEmbossing pattern or container feature
1717
Testlinietest line
17.1 - 17.717.1 - 17.7
Schnitt- oder PrägungspunktCutting or embossing point
AA
Drehrichtung des Rotors 5Direction of rotation of the rotor 5
B1, B2, B3B1, B2, B3
Beleuchtunglighting
W1, W2W1, W2
Winkelbereich der Drehbewegung des Rotors 5Angular range of the rotational movement of the rotor 5

Claims (23)

Vorrichtung zum Ausrichten von Behältern (2) im Bezug auf wenigstens ein geometrisches Behältermerkmal (16) in eine Sollposition oder -orientierung, mit einem Transporteur (5) mit Behälteraufnahmen (6) zur Aufnahme jeweils eines Behälters, sowie mit entlang einer von dem Transporteur (5) gebildeten Transportstrecke angeorneten Kameras (8, 9, 10) eines Bilderkennungssystems, welches durch einen Vergleich der von den Kameras (8, 9, 10, 11) gelieferten Ist-Bilddaten mit in einer Auswert- und Steuerelektronik (12) abgelegten Soll-Bilddaten oder Kennwerten ein Ausrichten der Behälter (3) bewirkt, dadurch gekennzeichnet,
dass mit einem eine erste Stufe des Bilderkennungssystems bildenden ersten Kamerasystem eine Vorausrichtung der Behälter (3) erfolgt und die wenigstens eine Kamera (8, 9) dieses ersten Kamerasystems die das typische geometrische Behältermerkmal (16) aufweisenden Außen- bzw. Umfangsfläche des Behälters großflächig erfasst, dass wenigstens ein in Transportrichtung folgendes weiteres Kamerasystem zur weiteren Ausrichtung mit seiner wenigstens einen Kamera (10, 11) den jeweils vorbeigeführten Behälter (2) für ein weiteres Ausrichten in einem das wenigstens eine typische geometrische Behältermerkmal (16) aufweisenden engeren Bereich der Umfangsfläche erfasst, und dass die Elektronik aufgrund weiterer abgelegter Bilddaten oder Kennwerte bei bestehenden Abweichungen von der Sollposition über den Stellantrieb der jeweiligen Behälteraufnahme (6) eine weitere Ausrichtung bewirkt.
Device for aligning containers (2) with respect to at least one geometric container feature (16) in a desired position or orientation, with a conveyor (5) with container receptacles (6) for receiving a respective container, and along one of the conveyor ( 5) formed transport path angeorneten cameras (8, 9, 10) of an image recognition system, which by comparing the of the cameras (8, 9, 10, 11) delivered actual image data with in an evaluation and control electronics (12) stored target Image data or characteristics causes alignment of the container (3), characterized
that forming a first stage of the image recognition system first camera system takes an advance direction of the container (3) and the at least one camera (8, 9) of said first camera system having outer or peripheral surface of the container detected in the typical geometric container feature (16) over a large area in that at least one further camera system following in the transport direction for further alignment with its at least one camera (10, 11) detects the respective container (2) guided past for further alignment in a narrower area of the peripheral surface having the at least one typical geometric container feature (16) , And that the electronics due to further stored image data or characteristics in existing deviations from the target position on the actuator of the respective container receptacle (6) causes a further alignment.
Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass in Transportrichtung (A) des Transporteurs (5) auf das die erste Stufe der Bilderkennung bildende erste Kamerasystem folgend wenigstens ein zweites, eine zweite Stufe des Bilderkennungssystems bildendes Kamerasystem sowie ein drittes, eine dritte Stufe des Bilderkennungssystems bildendes Kamerasystem mit jeweils wenigstens einer Kamera (10, 11) vorgesehen ist.Apparatus according to claim 1, characterized in that in the transport direction (A) of the carrier (5) following the first stage of the image recognition forming first camera system following at least a second, a second stage of the image recognition system forming camera system and a third, a third stage of the image recognition system forming camera system with at least one camera (10, 11) is provided. Vorrichtung nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass mit dem ersten Kamerasystem bzw. der wenigstens einen Kamera (8, 9) dieses Systems ein Umfangsbereich des jeweiligen Behälters (2) von größer als 180° erfasst wird.Apparatus according to claim 1 or 2, characterized in that with the first camera system or the at least one camera (8, 9) of this system, a peripheral region of the respective container (2) of greater than 180 ° is detected. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das erste Kamerasystem wenigstens zwei Kameras (8, 9) aufweist, die mit ihren Kameraachsen unter einem Winkel relativ zueinander angeordnet sind.Device according to one of the preceding claims, characterized in that the first camera system comprises at least two cameras (8, 9) which are arranged with their camera axes at an angle relative to each other. Vorrichtung nach Anspruch 4, dadurch gekennzeichnet, dass die von den wenigstens zwei Kameras (8, 9) des ersten Kamerasystems gelieferten Bilder oder Bilddaten in der Elektronik (12) zu einem Gesamtbild kombiniert werden.Apparatus according to claim 4, characterized in that the images or image data supplied by the at least two cameras (8, 9) of the first camera system in the electronics (12) are combined to form an overall image. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass wenigstens ein Kamerasystem wenigstens zwei Kameras (8, 9) aufweist.Device according to one of the preceding claims, characterized in that at least one camera system has at least two cameras (8, 9). Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das wenigstens eine weitere Kamerasystem, insbesondere das zweite und dritte Kamerasystem jeweils nur eine Kamera (10, 11) aufweisen.Device according to one of the preceding claims, characterized in that the at least one further camera system, in particular the second and third camera system each have only one camera (10, 11). Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Kamerasysteme bzw. deren Kameras zur Erzeugung von Einzelbildern von den vorbeibewegten Behältern (3) ausgebildet sind.Device according to one of the preceding claims, characterized in that the camera systems or their cameras for generating individual images of the past-moving containers (3) are formed. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Kameras (8, 9, 10, 11) der Kamerasysteme so ausgeführt und/oder gesteuert sind, dass sie von dem jeweils vorbeigeführten Behälter (2) nur jeweils ein Bild erzeugen.Device according to one of the preceding claims, characterized in that the cameras (8, 9, 10, 11) of the camera systems are designed and / or controlled such that they only generate one image from the respectively guided container (2). Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass wenigstens ein Kamerasystem, vorzugsweise das erste Kamerasystem mit einer Vordergrundbeleuchtung (B1, B2) ausgebildet ist.Device according to one of the preceding claims, characterized in that at least one camera system, preferably the first camera system with a front lighting (B1, B2) is formed. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass wenigstens ein Kamerasystem, beispielsweise das wenigstens eine weitere Kamerasystem oder das dritte Kamerasystem für die Erzeugung von Bildern oder Bilddaten durch Transluzenz ausgebildet ist.Device according to one of the preceding claims, characterized in that at least one camera system, for example the at least one further camera system or the third camera system for the production of images or image data is formed by translucency. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass wenigstens ein Kamerasystem mit einer Hintergrundbeleuchtung ausgeführt ist.Device according to one of the preceding claims, characterized in that at least one camera system with a backlight is executed. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Vordergrund- oder Hintergrundbeleuchtung in Farbe und/oder Intensität einstellbar ist.Device according to one of the preceding claims, characterized in that the foreground or background illumination in color and / or intensity is adjustable. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Transporteur ein um eine vertikale Maschinenachse umlaufend antreibbarer Rotor (5) ist.Device according to one of the preceding claims, characterized in that the feed dog is a rotor (5) which can be driven circumferentially about a vertical machine axis. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass jede Behälteraufnahme (6) einen eigenen Stellantrieb aufweist.Device according to one of the preceding claims, characterized in that each container receptacle (6) has its own actuator. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Behälteraufnahmen (6) Drehteller sind.Device according to one of the preceding claims, characterized in that the container receptacles (6) are turntable. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Elektronik (12) den Abstand, den wenigstens zwei Bezugspunkte (17.1 - 17.7) des typischen Behältermerkmals (16) des jeweiligen Behälters (2) in den von der wenigstens einen Kamera (8, 9, 10, 11) gelieferten Bilddaten mit für den Behältertyp abgelegten Kennwerten vergleicht.Device according to one of the preceding claims, characterized in that the electronics (12) the distance, the at least two reference points (17.1 to 17.7) of the typical container feature (16) of the respective container (2) in the at least one camera (8, 9, 10, 11) compared with stored for the container type characteristics. Vorrichtung nach Anspruch 17, dadurch gekennzeichnet, dass die Elektronik aus einem Abstandsmuster mehrerer Abstände zwischen Bezugspunkten (17.1 - 17.7) des typischen Behältermerkmals (16) des jeweiligen Behälters (2) in den von der wenigstens einen Kamera (8, 9, 10, 11) gelieferten Bilddaten mit weingstens einem für den Behältertyp abgelegten Abstandsmuster vergleicht.Apparatus according to claim 17, characterized in that the electronics consist of a spacing pattern of a plurality of distances between reference points (17.1 - 17.7) of the typical container feature (16) of the respective container (2) in the at least one camera (8, 9, 10, 11 ) compared with at least one stored for the container type spacing pattern. Vorrichtung nach Anspruch 17 oder 18, dadurch gekennzeichnet, dass die Elektronik (12) den Abstand bzw. das Abstandmuster der Bezugspunkte (17.1 - 17.7) in den von der wenigstens einen Kamera (8, 9, 10, 11) gelieferten Bilddaten mit für den Behältertyp abgelegten Abständen oder Abstandsmustern vergleicht, den mit dem Abstand in den Bilddaten am Besten übereinstimmenden Abstand bzw. das mit dem Abstandmuster in den Bilddaten am Besten übereinstimmende Abstandmuster bestimmt und hieraus die notwendige Korrektur für die Ausrichtung des Behälters (2) ermittelt.Apparatus according to claim 17 or 18, characterized in that the electronics (12) the distance or the spacing pattern of the reference points (17.1 - 17.7) in the of the at least one camera (8, 9, 10, 11) supplied image data for the Container type stored distances or distance patterns compares, determines the distance with the best match in the image data distance or the best match with the distance pattern in the image data distance pattern and from this the necessary correction determined for the orientation of the container (2). Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass sie Bestandteil einer Etikettiermaschine (1) mit einem Behältereinlauf (3) für die zu etikettierenden Behälter (2), mit einem Behälterauslauf (4) für die etikettierten Behälter (2) sowie mit wenigstens einer an einer von dem Transporteur (5) zwischen dem Behältereinlauf (3) und dem Behälterauslauf (4) gebildeten Transportstrecke vorgesehenen Etikettierstation (7), und
dass das erste Kamerasystem sowie das wenigstens eine weitere Kamerasystem an der Transportstrecke zwischen dem Behältereinlauf (3) und der wenigstens einen Etikettierstation (7) vorgesehen sind.
Device according to one of the preceding claims, characterized in that it is part of a labeling machine (1) with a container inlet (3) for the container to be labeled (2), with a container outlet (4) for the labeled container (2) and at least one on one of the conveyor (5) between the container inlet (3) and the container outlet (4) formed transport path provided labeling station (7), and
in that the first camera system and the at least one further camera system are provided on the transport path between the container inlet (3) and the at least one labeling station (7).
Vorrichtung nach Anspruch 20, dadurch gekennzeichnet, dass der Transporteur ein um eine vertikale Maschinenachse umlaufender Rotor (5) mit einer Vielzahl von Behälteraufnahmen (6) ist.Apparatus according to claim 20, characterized in that the feed dog is a rotor (5) revolving around a vertical machine axis and having a plurality of container receptacles (6). Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass jede Behälteraufnahme zum Ausrichten des an dieser Aufnahme vorgesehenen Behälters (3) durch einen von der Elekktronik angesteuerten Stellantrieb drehbar ist.Device according to one of the preceding claims, characterized in that each container receptacle for aligning the receptacle (3) provided on this receptacle is rotatable by an actuator driven by the electronics. Etikettiermaschine mit einer Vorrichtung zum Ausrichten von Behältern (2) im Bezug auf wenigstens ein geometrisches Behältermerkmal (16) in eine Sollposition oder -orientierung, dadurch gekennzeichnet, dass die Vorrichtung nach einem der vorhergehenden Ansprüche ausgebildet ist.Labeling machine with a device for aligning containers (2) with respect to at least one geometric container feature (16) in a desired position or orientation, characterized in that the device is designed according to one of the preceding claims.
EP06022035A 2005-10-21 2006-10-20 Device for orienting containers Not-in-force EP1777163B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PL06022035T PL1777163T3 (en) 2005-10-21 2006-10-20 Device for orienting containers

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102005050902A DE102005050902A1 (en) 2005-10-21 2005-10-21 Device for aligning containers and labeling machine with such a device

Publications (2)

Publication Number Publication Date
EP1777163A1 true EP1777163A1 (en) 2007-04-25
EP1777163B1 EP1777163B1 (en) 2009-12-30

Family

ID=37616683

Family Applications (1)

Application Number Title Priority Date Filing Date
EP06022035A Not-in-force EP1777163B1 (en) 2005-10-21 2006-10-20 Device for orienting containers

Country Status (7)

Country Link
US (1) US7331152B2 (en)
EP (1) EP1777163B1 (en)
CN (1) CN101049865B (en)
AT (1) ATE453574T1 (en)
DE (2) DE102005050902A1 (en)
PL (1) PL1777163T3 (en)
UA (1) UA94895C2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009072157A1 (en) * 2007-12-03 2009-06-11 Sidel Holdings & Technology S.A. A system for the angular orientation and detection of containers in labelling machines
WO2010000422A1 (en) * 2008-06-30 2010-01-07 Khs Ag Opto-electric detection system
WO2011015899A1 (en) * 2009-08-05 2011-02-10 Sidel S.P.A. A system for the angular orientation and detection of containers in labelling machines
EP2292550A1 (en) * 2009-09-07 2011-03-09 Krones AG Device and method for manufacturing plastic bottles

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2892107B1 (en) * 2005-10-13 2008-01-18 Saverglass Soc Par Actions Sim METHOD FOR AUTOMATICALLY AND SEQUENTIALLY LOADING OBJECTS AND CORRESPONDING EQUIPMENT.
DE102006013843A1 (en) * 2006-03-25 2007-09-27 Khs Ag Blow molding machine and method for producing bottles or the like hollow body
DE102006051359A1 (en) * 2006-10-27 2008-04-30 Khs Ag Label cutter drum for label application machine adjusts blade positions by shifting drum axle position
DE102007014802A1 (en) * 2007-03-28 2008-10-09 Khs Ag Method for monitoring, controlling and optimizing filling systems for foodstuffs, in particular for beverage bottles
DE102007025520A1 (en) * 2007-05-31 2008-12-04 Khs Ag Method for aligning containers and device for carrying out the method
CN101939249B (en) * 2008-02-04 2015-10-07 可口可乐公司 Create the method for the beverage products of customization
WO2009105432A2 (en) * 2008-02-19 2009-08-27 Portaero, Inc. Devices and methods for delivery of a therapeutic agent through a pneumostoma
GB0806884D0 (en) * 2008-04-16 2008-05-21 Meadwestvaco Packaging Systems Article orientating device
DE102008059229A1 (en) * 2008-11-20 2010-06-02 Khs Ag Method for aligning a container
US8284305B2 (en) * 2008-11-26 2012-10-09 Parata Systems, Llc System and method for acquiring images
DE102008062370A1 (en) 2008-12-17 2010-06-24 Focke & Co.(Gmbh & Co. Kg) Method and device for testing objects to be tested in the manufacture and / or packaging of cigarettes
DE102008063077B4 (en) * 2008-12-24 2017-12-07 Krones Aktiengesellschaft inspection device
DE102009020936A1 (en) * 2009-05-12 2010-11-18 Krones Ag Method and device for aligning the rotational position of containers, in particular bottles
DE102009020921A1 (en) * 2009-05-12 2010-11-18 Krones Ag Device and method for aligning containers, in particular bottles, in a labeling machine
DE102009039254A1 (en) 2009-08-28 2013-05-08 Krones Aktiengesellschaft Apparatus and method for inspecting tagged vessels
DE102010011388A1 (en) * 2010-03-12 2011-09-15 Krones Ag Device for processing label strips with position detection
CN102169601B (en) * 2011-01-24 2013-10-09 北京北大千方科技有限公司 Anti-dismantling method and system of on-board electronic tag as well as on-board electronic tag
KR101275815B1 (en) * 2011-03-15 2013-06-18 삼성에스디아이 주식회사 Apparatus for detecting defects in the electrode material for secondary battery and method for the same
DE102011083377A1 (en) 2011-09-26 2013-03-28 Krones Aktiengesellschaft Apparatus and method for aligning containers
DE102011084135A1 (en) * 2011-10-07 2013-04-11 Krones Aktiengesellschaft Method and device for operating a system for treating containers with setting value correction when starting the system
CN103158917A (en) * 2011-12-09 2013-06-19 苏州工业园区高登威科技有限公司 Position adjustment method for trademark
DE102012218481A1 (en) * 2012-10-10 2014-04-10 Kba-Kammann Gmbh Method and device for aligning objects
DE102013206685A1 (en) * 2013-04-15 2014-10-30 Krones Ag Container treatment module for use in container treatment machines
DE102013104666A1 (en) * 2013-05-07 2014-11-13 Krones Ag Apparatus and method for producing container assemblies
DE102013208355A1 (en) * 2013-05-07 2014-11-13 Krones Ag Apparatus and method for applying a label sleeve
US9952191B2 (en) * 2013-07-16 2018-04-24 Oma App Ip Pty Ltd Method of and/or apparatus for monitoring a characteristic of a liquid sample
CN104071403A (en) * 2014-06-19 2014-10-01 北京创想智控科技有限公司 Container labeling position adjustment system and method for labeling container
DE102014224519A1 (en) 2014-12-01 2016-06-02 Krones Ag Labeling device and method for labeling containers
DE102016203462A1 (en) * 2016-03-03 2017-09-07 Krones Ag Processing contoured wrap-around labels from the roll
ITUA20162513A1 (en) * 2016-04-12 2017-10-12 Antares Vision S R L DEVICE AND PROCEDURE FOR ORIENTATION AND QUALITY CONTROL OF CONTAINERS
CN107229291B (en) * 2017-06-14 2020-09-15 苏州西斯派克检测科技有限公司 Synchronization method of online vision positioning system
BR112020013502A2 (en) * 2018-01-23 2020-12-01 The Procter & Gamble Company alignment of a window in a container
DE102018107305A1 (en) * 2018-03-27 2019-10-02 Krones Ag Device and method for optical position detection of transported objects
CN109229692B (en) * 2018-07-16 2020-07-07 广东奥普特科技股份有限公司 Attaching method with multi-suction-head structure
DE102019120889A1 (en) * 2019-08-02 2021-02-04 Khs Gmbh Device and method for controlling the rotational movement of containers for aligning the containers in a target rotational position defined for the conveying direction
WO2021063788A1 (en) * 2019-10-01 2021-04-08 Antares Vision S.P.A. Device and process for the orientation of containers
DE102020112191A1 (en) 2020-05-06 2021-11-11 Krones Aktiengesellschaft Container treatment machine and method for aligning a container in a container receptacle of a container treatment machine
CN112644823A (en) * 2021-01-13 2021-04-13 荣旗工业科技(苏州)股份有限公司 Assembling device and assembling system for bottle body structure

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1205388A1 (en) * 2000-11-09 2002-05-15 KHS Maschinen- und Anlagenbau Aktiengesellschaft Device for controlling the rotational movement of containers
DE20203529U1 (en) * 2002-03-05 2002-05-23 Khs Masch & Anlagenbau Ag Device for controlling the rotational movement of vessels
WO2004056658A1 (en) * 2002-12-20 2004-07-08 Azionaria Costruzioni Macchine Automatiche A.C.M.A. S.P.A. A labelling and/or marking machine

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3451523A (en) * 1967-07-14 1969-06-24 Mandrel Industries Container orienter
JPS61238957A (en) 1985-04-17 1986-10-24 Mitsubishi Electric Corp Formation of thin optical film
JPS61284988A (en) * 1985-06-11 1986-12-15 Sharp Corp Semiconductor laser element
US4878333A (en) * 1988-01-20 1989-11-07 Peco Controls Corporation Filler line monitoring system with autosynchronization
JPH04367432A (en) * 1991-06-07 1992-12-18 Shibuya Kogyo Co Ltd Direction regulating device for container
JPH06138057A (en) * 1992-10-27 1994-05-20 Hitachi Eng Co Ltd Device and method for inspecting apperance of label
US6031221A (en) * 1998-02-19 2000-02-29 Emhart Glass S.A. Container inspection machine
US6378587B1 (en) * 1998-11-13 2002-04-30 Daniel J Frist Cylindrical container labeling machine
US6471802B1 (en) * 1998-12-07 2002-10-29 Gerro Plast Gmbh Labeling apparatus and method
US6308816B1 (en) * 2000-02-11 2001-10-30 New England Machinery, Inc. Rotary orienter indexing system
DE10011653A1 (en) * 2000-03-10 2001-09-13 Khs Masch & Anlagenbau Ag Foaming device for expelling residual air from filled containers, especially bottles containing fizzy drinks, uses protective gas region to guide foaming medium into container
DE20115480U1 (en) * 2001-09-19 2002-05-16 Heuft Systemtechnik Gmbh Device for applying labels to containers
DE10306671A1 (en) * 2003-02-18 2004-08-26 Khs Maschinen- Und Anlagenbau Ag Modules for labeling machines
DE10309459A1 (en) * 2003-03-05 2004-09-16 Khs Maschinen- Und Anlagenbau Ag Rotating device for fast cutting of labels that are fed as an endless tube

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1205388A1 (en) * 2000-11-09 2002-05-15 KHS Maschinen- und Anlagenbau Aktiengesellschaft Device for controlling the rotational movement of containers
DE20203529U1 (en) * 2002-03-05 2002-05-23 Khs Masch & Anlagenbau Ag Device for controlling the rotational movement of vessels
WO2004056658A1 (en) * 2002-12-20 2004-07-08 Azionaria Costruzioni Macchine Automatiche A.C.M.A. S.P.A. A labelling and/or marking machine

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009072157A1 (en) * 2007-12-03 2009-06-11 Sidel Holdings & Technology S.A. A system for the angular orientation and detection of containers in labelling machines
JP2011505304A (en) * 2007-12-03 2011-02-24 シデル ホールディングス アンド テクノロジー エス. エー. System for angular orientation and detection of containers in labeling apparatus
CN101883712B (en) * 2007-12-03 2013-05-22 西得乐控股和技术公司 A system for the angular orientation and detection of containers in labelling machines
US8477185B2 (en) 2007-12-03 2013-07-02 Sidel Holdings & Technology S.A. System for the angular orientation and detection of containers in labelling machines
WO2010000422A1 (en) * 2008-06-30 2010-01-07 Khs Ag Opto-electric detection system
WO2011015899A1 (en) * 2009-08-05 2011-02-10 Sidel S.P.A. A system for the angular orientation and detection of containers in labelling machines
US8908168B2 (en) 2009-08-05 2014-12-09 Sidel S.P.A. Systems and methods for the angular orientation and detection of containers in labelling machines
EP2292550A1 (en) * 2009-09-07 2011-03-09 Krones AG Device and method for manufacturing plastic bottles
US10138106B2 (en) 2009-09-07 2018-11-27 Krones Ag Apparatus and method for producing plastic bottles
EP4122872A1 (en) * 2009-09-07 2023-01-25 Krones AG Device for manufacturing plastic bottles

Also Published As

Publication number Publication date
ATE453574T1 (en) 2010-01-15
DE102005050902A1 (en) 2007-05-03
US7331152B2 (en) 2008-02-19
DE502006005771D1 (en) 2010-02-11
US20070095017A1 (en) 2007-05-03
EP1777163B1 (en) 2009-12-30
CN101049865A (en) 2007-10-10
UA94895C2 (en) 2011-06-25
CN101049865B (en) 2010-07-28
PL1777163T3 (en) 2010-06-30

Similar Documents

Publication Publication Date Title
EP1777163B1 (en) Device for orienting containers
DE202005017180U1 (en) Adjusting system for bottles on turntable comprises cameras which detect orientation of bottles at different positions and control unit which compares data obtained with desired orientation and controls adjustment of bottles
EP0354362B1 (en) Method of marking a bottle with, and optically reading, readable codes
DE102006026618A1 (en) Method for the accurate application of labels and labeling machine
DE202017103420U1 (en) Apparatus for providing a tire with a marker
DE3637210A1 (en) METHOD AND SYSTEM FOR IDENTIFYING A SHAPED CONTAINER IN RELATION TO ITS PRODUCTION
WO2008145346A1 (en) Optoelectric detection system
DE2439913A1 (en) DEVICE FOR READING CODED INFORMATION
DE2634331A1 (en) PATTERN RECOGNITION SYSTEM
DE102010011388A1 (en) Device for processing label strips with position detection
EP2989594A1 (en) Device and method for recognising inscriptions on vehicle tyres
DE3538812A1 (en) Method and device for measuring the angular deviation of an object provided with a target
EP2589926B1 (en) Device for and method of optically measuring the shape of moving objects
DE102010047618A1 (en) Optical threaded position detection device
DE2207800A1 (en) Method and device for automatic authentication of graphic templates
DE2338561A1 (en) METHOD AND DEVICE FOR IDENTIFYING OBJECTS
WO2019238477A1 (en) Method for examining concordant test objects
DE3621661A1 (en) METHOD FOR DETECTING A DESTINATION
EP2358601B1 (en) Method for aligning a container and computer program
DE4211171A1 (en) Pattern recognition scanning for plant inspection - rotating cylindrical objects about longitudinal axis under scanning camera to generate image for input to evaluation circuit, and cross-correlation used to train neural network
EP3655175B1 (en) Method for operating a processing installation with a movable punch
DE10102540A1 (en) Identification of a substrate, particularly a semiconductor wafer marked with identifying characters by use of illumination device and reader device with pre-alignment controlled by a controller and light intensity sensor
DE10128722C1 (en) Device for monitoring objects, evaluates image coarsely to determine displacement relative to last image of monitored object, evaluates more accurately if image offset greater than maximum
WO1993024806A1 (en) Sensor device and position determination process and their use for the control of an insertion robot
EP1139285B1 (en) Method and apparatus for testing or inspection of articles

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU LV MC NL PL PT RO SE SI SK TR

AX Request for extension of the european patent

Extension state: AL BA HR MK YU

17P Request for examination filed

Effective date: 20071025

AKX Designation fees paid

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU LV MC NL PL PT RO SE SI SK TR

17Q First examination report despatched

Effective date: 20080124

R17C First examination report despatched (corrected)

Effective date: 20080124

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LI LT LU LV MC NL PL PT RO SE SI SK TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

REF Corresponds to:

Ref document number: 502006005771

Country of ref document: DE

Date of ref document: 20100211

Kind code of ref document: P

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

REG Reference to a national code

Ref country code: NL

Ref legal event code: VDEP

Effective date: 20091230

LTIE Lt: invalidation of european patent or patent extension

Effective date: 20091230

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

REG Reference to a national code

Ref country code: IE

Ref legal event code: FD4D

RAP2 Party data changed (patent owner data changed or rights of a patent transferred)

Owner name: KHS GMBH

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100430

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100430

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100410

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100330

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: IE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100331

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20101001

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

BERE Be: lapsed

Owner name: KHS A.G.

Effective date: 20101031

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101031

REG Reference to a national code

Ref country code: AT

Ref legal event code: PC

Ref document number: 453574

Country of ref document: AT

Kind code of ref document: T

Owner name: KHS GMBH, DE

Effective date: 20111220

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20100701

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20101020

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20091230

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 10

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 11

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: PL

Payment date: 20170922

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20171019

Year of fee payment: 12

Ref country code: FR

Payment date: 20171024

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20171023

Year of fee payment: 12

Ref country code: AT

Payment date: 20171020

Year of fee payment: 12

Ref country code: GB

Payment date: 20171019

Year of fee payment: 12

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 502006005771

Country of ref document: DE

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 453574

Country of ref document: AT

Kind code of ref document: T

Effective date: 20181020

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20181020

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20190501

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20181031

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20181020

Ref country code: IT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20181020

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20181020

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20181020