WO2019044870A1 - 外観検査装置及び製品製造システム - Google Patents

外観検査装置及び製品製造システム Download PDF

Info

Publication number
WO2019044870A1
WO2019044870A1 PCT/JP2018/031867 JP2018031867W WO2019044870A1 WO 2019044870 A1 WO2019044870 A1 WO 2019044870A1 JP 2018031867 W JP2018031867 W JP 2018031867W WO 2019044870 A1 WO2019044870 A1 WO 2019044870A1
Authority
WO
WIPO (PCT)
Prior art keywords
inspection
light source
inspection object
appearance
light
Prior art date
Application number
PCT/JP2018/031867
Other languages
English (en)
French (fr)
Inventor
衛 恩田
俊樹 齊藤
正敬 大山
正治 筒井
Original Assignee
日本電産コパル株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電産コパル株式会社 filed Critical 日本電産コパル株式会社
Publication of WO2019044870A1 publication Critical patent/WO2019044870A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/85Investigating moving fluids or granular solids
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination

Definitions

  • the present invention relates to an appearance inspection apparatus and a product manufacturing system, and more particularly to an appearance inspection apparatus for inspecting the appearance of a product in the manufacturing process of the product.
  • the surface of the product is irradiated with inspection light from the light source, and the inspection light causes scratches, dents, dirt, etc. on the surface of the product to be manifested by a camera It is a common practice to detect scratches, dents and stains by analyzing images taken with a camera. In such visual inspection, in order to inspect various parts of the product, the camera is moved relative to the product (see, for example, Patent Document 1).
  • the angle, direction, and length at which scratches and dents are formed on the surface of a product vary, and in order to detect these flaws and dents with high accuracy, it is necessary to irradiate inspection light from various directions. is there.
  • the positional relationship between the light source and the camera is always constant, and depending on the structure of the product surface, scratches and In some cases, dents and dirt can not be detected.
  • the outline of the dirt becomes unclear or if the shadow caused by the inspection light overlaps with the flaw or dent, these scratches or dents may occur. The dirt can not be detected, and inspection by human eyes is required, resulting in a decrease in production efficiency.
  • the present invention has been made in view of the problems of the prior art as described above, and it is an object of the present invention to provide an appearance inspection apparatus capable of detecting scratches, dents, stains and the like on the surface of an inspection object with high accuracy.
  • the present invention has a second object to provide a product manufacturing system capable of detecting a defective product having scratches, dents, dirt, etc. on the surface with high accuracy and manufacturing a high quality product. I assume.
  • an appearance inspection apparatus capable of detecting scratches, dents, dirt and the like on the surface of an inspection object with high accuracy.
  • An appearance inspection apparatus for inspecting the appearance of an inspection object includes a support stage for supporting the inspection object, a light source for irradiating inspection light to the inspection object on the support stage, and the inspection from the light source. It comprises an imaging unit for imaging the appearance of the inspection object irradiated with light, and an articulated robot to which the light source is attached. The articulated robot moves the light source relative to the inspection object while changing the relative positional relationship between the light source and the imaging unit.
  • the light source for irradiating the inspection light to the inspection object can be moved independently from the imaging unit, so the positional relationship between the light source and the imaging unit is changed in real time It is possible to irradiate the inspection light to the inspection object while making the Therefore, the light source should be in an appropriate posture so that the outlines of scratches, dents and dirt on the surface of the inspection object become clear, or these scratches, dents and dirt do not overlap with the shadow caused by the inspection light. By moving it to an appropriate position, it is possible to detect scratches, dents, dirt, etc. which could not be detected by the conventional appearance inspection apparatus. As described above, the appearance inspection apparatus according to the present invention can detect scratches, dents, dirt and the like on the surface of the inspection object with high accuracy.
  • the appearance inspection apparatus preferably further includes an analysis unit that analyzes the image captured by the imaging unit and performs an appearance inspection of the inspection object. Further, the appearance inspection apparatus controls the articulated robot to move the light source relative to the inspection object while changing the relative positional relationship between the light source and the imaging unit. It is preferable to further comprise In this case, the control unit may control the articulated robot to irradiate the inspection light in a direction perpendicular to the inspection target portion of the surface of the inspection object from the light source, or The articulated robot may be controlled such that the inspection light is emitted from the light source in a direction tangential to the inspection target portion of the surface of the inspection object.
  • the support stage is configured to change the posture of the inspection object with respect to the imaging unit.
  • the positional relationship between the light source and the imaging unit can be changed by the above-described articulated robot, but also the positional relationship between the inspection object on the support stage and the imaging unit can be changed. Therefore, the inspection object can be observed from various angles, and detection of scratches, dents, dirt, etc. on the surface of the inspection object can be performed with higher accuracy.
  • a product manufacturing system capable of accurately detecting defective products having scratches, dents, dirt, etc. on the surface, and capable of manufacturing high quality products.
  • the product manufacturing system includes the appearance inspection apparatus described above, a first transport apparatus for carrying the inspection object into the appearance inspection apparatus, and the appearance inspection of the inspection object whose appearance is inspected in the appearance inspection apparatus. And a second transport device for unloading the device.
  • the inspection light can be irradiated to the inspection object while changing the positional relationship between the light source and the imaging unit in real time. Therefore, scratches, dents, dirt and the like which can not be detected by the conventional appearance inspection apparatus can be detected with high accuracy.
  • the product manufacturing system according to the present invention it is possible to detect with high accuracy the scratches, dents, dirt, etc. of the product generated in the manufacturing process, so it is possible to detect such defective products with high accuracy. It can be excluded from the product, and the quality of the final product can be improved.
  • FIG. 1 is a schematic view showing a product manufacturing system in an embodiment of the present invention.
  • FIG. 2 is a schematic view showing an appearance inspection apparatus in the product manufacturing system of FIG.
  • FIG. 3A is a schematic perspective view showing an example of a light source for irradiating inspection light in a horizontal direction to a flat inspection object.
  • FIG. 3B is a schematic perspective view showing an example of a light source that irradiates inspection light in a diagonal direction to a flat inspection object.
  • FIG. 3C is a schematic perspective view showing an example of a light source which emits inspection light in a direction perpendicular to a flat inspection object.
  • FIG. 4 is a schematic perspective view showing an example of a route for moving a light source with respect to a flat inspection object.
  • FIG. 3A is a schematic perspective view showing an example of a light source for irradiating inspection light in a horizontal direction to a flat inspection object.
  • FIG. 3B is a schematic perspective view showing an example of
  • FIG. 5A is a schematic perspective view showing an example of a light source which irradiates inspection light in an oblique direction to an inspection object having a convex portion.
  • FIG. 5B is a schematic perspective view showing an example of a light source for irradiating the inspection light in the vertical direction to the inspection object having the convex portion.
  • FIG. 6A is a schematic view showing the positional relationship between the light source and the inspection object when the inspection light is irradiated in the direction perpendicular to a part of the convex portion of the inspection object shown in FIG. 5A.
  • FIG. 5A is a schematic perspective view showing an example of a light source which irradiates inspection light in an oblique direction to an inspection object having a convex portion.
  • FIG. 5B is a schematic perspective view showing an example of a light source for irradiating the inspection light in the vertical direction to the inspection object having the convex portion.
  • FIG. 6A is a schematic view showing
  • FIG. 6B is a schematic view showing a positional relationship between the light source and the inspection object in the case where the inspection light is irradiated in the tangential direction to a part of the convex portion of the inspection object shown in FIG. 5A.
  • FIG. 7 is a schematic perspective view showing an example of a route for moving the light source with respect to the inspection object having the convex portion.
  • FIG. 8A is a schematic perspective view showing an example of a light source which irradiates inspection light in an oblique direction to an inspection object having a recess.
  • FIG. 8B is a schematic perspective view showing an example of a light source for irradiating the inspection light in the vertical direction to the inspection object having the recess.
  • FIG. 9A is a schematic view showing a positional relationship between the light source and the inspection object when the inspection light is irradiated in the direction perpendicular to a part of the concave portion of the inspection object shown in FIG. 8A.
  • FIG. 9B is a schematic view showing the positional relationship between the light source and the inspection object when the inspection light is irradiated in the tangential direction to a part of the recess of the inspection object shown in FIG. 8A.
  • FIG. 10 is a schematic perspective view showing an example of a route for moving a light source with respect to an inspection object having a recess.
  • FIGS. 1 to 10 illustrate embodiments of a product manufacturing system and an appearance inspection apparatus according to the present invention.
  • FIG. 1 to FIG. 10 the same or corresponding components are given the same reference numerals, and duplicate explanations are omitted. Further, in FIGS. 1 to 10, the scale and dimensions of each component may be exaggerated and shown, or some components may be omitted.
  • FIG. 1 is a schematic view showing a product manufacturing system 1 according to an embodiment of the present invention.
  • the product manufacturing system 1 constitutes a manufacturing line for manufacturing a desired product, and in the present embodiment, the processing object is subjected to predetermined processing to manufacture a product before completion.
  • Pre-processing apparatus 2 an appearance inspection apparatus 3 for inspecting the appearance of the product before completion obtained by the pre-processing apparatus 2, and predetermined processing for the product before completion whose appearance is inspected by the appearance inspection apparatus 3 It is equipped with a post-stage processing device 4 that completes the product by applying (for example, packaging etc.).
  • a first transfer device 5 such as a belt conveyor or a robot hand is provided between the pre-processing device 2 and the appearance inspection device 3.
  • the first transfer device 5 obtains the pre-processing device 2.
  • the product before completion is transported to the visual inspection apparatus 3.
  • a second conveyance device 6 such as a belt conveyor or a robot hand is provided between the appearance inspection device 3 and the post-stage processing device 4, and the appearance of the appearance inspection device 3 by the second conveyance device 6 is provided.
  • the product before completion, which has been inspected, is transported to the post-stage processing device 4.
  • the pre-processing device 2 may be divided for each step to provide a plurality of pre-processing devices.
  • the post-stage processing device 4 may be divided for each process to provide a plurality of post-stage processing devices. Further, when a product which has passed the appearance inspection by the appearance inspection apparatus 3 is to be a finished product, the post-stage processing apparatus 4 is unnecessary.
  • FIG. 2 is a schematic view showing the appearance inspection apparatus 3.
  • the appearance inspection apparatus 3 includes the support stage 20 for supporting the product (inspection object) 10 carried in from the pre-processing apparatus 2 by the first transfer device 5 and the appearance of the inspection object 10.
  • An imaging unit 30 for imaging, a light source 40 for irradiating the inspection light L onto the inspection object 10 on the support stage 20, and an articulated robot 50 for moving the light source 40 to a desired position around the inspection object 10;
  • a control unit 60 including a microprocessor, a memory, and the like.
  • the imaging unit 30 includes, for example, a camera that acquires a still image or a video image of the inspection object 10.
  • a fluorescent tube, an LED, a ring illumination or the like can be used as the light source 40.
  • the control unit 60 includes an analysis unit 62 that analyzes an image captured by the imaging unit 30, and a robot control unit 64 that controls the operation of the articulated robot 50.
  • the analysis unit 62 analyzes the image of the inspection object 10 illuminated by the inspection light L from the light source 40 by various analysis methods, and determines whether the surface of the inspection object 10 is scratched, dented or dirty. .
  • these analysis methods can use the well-known arbitrary methods, description is abbreviate
  • the articulated robot 50 has a base portion 51, a plurality of joints 52 to 54, and a plurality of link members 55 to 57 connected to the joints 52 to 54, and the light source 40 described above is a link member 57. It is attached to the tip.
  • the articulated robot 50 is connected to the robot control unit 64 of the control unit 60, and link members 55 to 57 rotate around the joints 52 to 54 in response to an instruction from the robot control unit 64. . Therefore, the robot control unit 64 can move the light source 40 attached to the tip of the link member 57 to an arbitrary position in an arbitrary posture by appropriately combining the instruction to be transmitted to the articulated robot 50.
  • the light source 40 for irradiating the inspection light L to the inspection object 10 can be moved independently from the imaging unit 30 by the articulated robot 50, the light source 40 and the imaging unit 30 and The inspection light L can be irradiated to the inspection object 10 while changing the positional relationship between the components in real time. Therefore, the light source 40 is appropriately selected so that the outlines of the surface of the inspection object 10 such as scratches, dents and dirt become clear, or these scratches, dents and dirt do not overlap with the shadow caused by the inspection light L
  • the appearance inspection apparatus 3 of the present embodiment can detect scratches, dents, dirt, and the like on the surface of the inspection object 10 with high accuracy.
  • the stage table 22 be configured to be able to change the posture of the support stage 20 by driving an actuator or the like.
  • the positional relationship between the light source 40 and the imaging unit 30 is changed by the articulated robot 50 described above, but also the positional relationship between the inspection object 10 on the support stage 20 and the imaging unit 30 Since the inspection object 10 can be observed from various angles, it is possible to detect scratches, dents, dirt and the like on the surface of the inspection object 10 with higher accuracy.
  • the form of the inspection object 10 may be flat or uneven (for example, a casing or a shoe of a camera), but when the inspection object 10 has a complicated shape, conventional appearance inspection There is a tendency for many scratches, dents, dirt, etc. that can not be detected by the device.
  • the inspection light L can be irradiated to the inspection object 10 while changing the positional relationship between the light source 40 and the imaging unit 30 in real time. Even such scratches, dents and dirt can be detected with high accuracy.
  • the appearance inspection apparatus 3 described above in the product manufacturing system 1 it is possible to detect scratches, dents, stains, etc. of the product generated in the manufacturing process with high accuracy, so the product with such a defect is accurate. It can be highly detected and excluded from the final product. Thus, the quality of the final product is improved.
  • the light source 40 can be moved to any position in any posture by the articulated robot 50, but in the following, some of the positions and postures of the light source 40 with respect to the inspection object 10 An example of
  • 3A to 3C are schematic perspective views showing an example of the position and posture of the light source 40 for irradiating the inspection light L to the flat inspection object 10A.
  • the inspection light L may be applied to the flat inspection object 10A in a direction (horizontal direction) parallel to a plane in which the inspection object 10A extends.
  • the light source 40 may be moved by 90 degrees around the center of the inspection object 10A corresponding to the four sides of the inspection object 10A (states A1 to A4). Further, as shown in FIG.
  • the inspection light L may be irradiated obliquely (for example, 45 degrees) to the surface of the inspection object 10A from above the inspection object 10A (states B1 to B4). Furthermore, as shown in FIG. 3C, the inspection light L may be irradiated from above the inspection object 10A in a direction perpendicular to the surface of the inspection object 10A (state C1).
  • the robot control unit 64 of the control unit 60 irradiates the inspection light L from the horizontal direction (FIG. 3A) and irradiates the inspection light L from the oblique direction (FIG. 3B)
  • the articulated robot 50 is controlled to move the light source 40 along a predetermined route combining the irradiation of the inspection light L from the vertical direction (FIG. 3C).
  • the light source 40 is in the state A1 in which the inspection light L is irradiated in the horizontal direction to the inspection object 10A, and the light source 40 is rotated 90 degrees clockwise in the horizontal plane from this state A1. Let it be the state A2.
  • the light source 40 is rotated downward 180 degrees counterclockwise while inclining the light source 40 downward from this state A2 to a state B4, and the light source 40 is rotated 180 degrees clockwise from this state B4 to a state B2. Finally, the light source 40 is moved from this state B2 to a state C1 in which the inspection light L is irradiated in the direction perpendicular to the inspection object 10A. Note that the light source 40 may follow a route reverse to this route, or may follow another arbitrary route.
  • 5A and 5B are schematic perspective views showing an example of the position and posture of the light source 40 for irradiating the inspection light L to the inspection object 10B having the convex portion 12.
  • the inspection light L may be irradiated obliquely to the inspection object 10B from above the inspection object 10B with respect to the inspection object 10B having the convex portion 12 (state D1 To state D4).
  • the inspection light L may be irradiated from above the inspection object 10B in a direction perpendicular to the inspection object 10B (state E1).
  • the inspection light L is irradiated to the inspection object 10B in an oblique direction, in order to make the surface of the convex portion 12 of the inspection object 10B appear scratches, dents, etc.
  • the inspection light L is irradiated from a direction perpendicular to the inspection target portion P of the convex portion 12 as shown in 6A, or the inspection light in a tangential direction to the inspection target portion P of the convex portion 12 as shown in FIG. It is preferable to irradiate L.
  • the robot control unit 64 of the control unit 60 irradiates the inspection light L from the oblique direction (FIG. 5A) and the irradiation of the inspection light L from the vertical direction (FIG. 5B)
  • the articulated robot 50 is controlled to move the light source 40 along a predetermined route combining the above. For example, as shown in FIG. 7, first, the light source 40 is set to a state D3 in which the inspection light L is irradiated obliquely to the inspection object 10B, and the light source 40 is rotated clockwise from this state D3 to sequentially state D4. , State D1, and state D2. At this time, as shown in FIGS.
  • the light source 40 it is possible to rotate the light source 40 while changing the inclination so as to irradiate the inspection light L in a direction perpendicular or tangential to the inspection target portion of the convex portion 12. preferable. Then, the light source 40 is moved from the state D2 to a state E1 in which the inspection light L is irradiated in the direction perpendicular to the inspection object 10B. Note that the light source 40 may follow a route reverse to this route, or may follow another arbitrary route.
  • FIG. 8A and 8B are schematic perspective views showing an example of the position and posture of the light source 40 for irradiating the inspection light L to the inspection object 10C having the recess 14.
  • the inspection light L may be irradiated obliquely to the inspection object 10C from above the inspection object 10C with respect to the inspection object 10C having the concave portion 14 (state F1- State F4).
  • the inspection light L may be emitted from above the inspection object 10C in a direction perpendicular to the inspection object 10C (state G1).
  • FIG. 8A in the case where the inspection light L is irradiated to the inspection object 10C in an oblique direction, in order to make scratches, dents, etc. on the surface of the recess 14 of the inspection object 10C apparent, FIG.
  • the inspection light L is irradiated from a direction perpendicular to the inspection target portion P in the recess 14 as shown in FIG. 9 or the inspection light L in a tangential direction to the inspection target portion P in the recess 14 as shown in FIG. It is preferable to irradiate.
  • the robot control unit 64 of the control unit 60 irradiates the inspection light L from an oblique direction (FIG. 8A) and irradiates the inspection light L from a vertical direction (FIG. 8B)
  • the articulated robot 50 is controlled to move the light source 40 along a predetermined route combining the above. For example, as shown in FIG. 10, first, the light source 40 is set to a state F3 in which the inspection light L is irradiated obliquely to the inspection object 10C, and the light source 40 is rotated clockwise from this state F3 to sequentially state , F1 and F2. At this time, as shown in FIGS.
  • the light source 40 it is preferable to rotate the light source 40 while changing the tilt of the light source 40 so that the inspection light L is irradiated in a direction perpendicular or tangential to the inspection target portion of the recess 14 . Then, the light source 40 is moved from the state F2 to a state G1 in which the inspection light L is irradiated in the direction perpendicular to the inspection object 10C. Note that the light source 40 may follow a route reverse to this route, or may follow another arbitrary route.
  • the present invention is suitably used in an appearance inspection apparatus for inspecting the appearance of a product in the manufacturing process of the product.

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

検査対象物の表面の傷や凹み、汚れなどを精度高く検出することができる外観検査装置を提供する。外観検査装置3は、検査対象物10を支持する支持ステージ20と、支持ステージ20上の検査対象物10に検査光Lを照射する光源40と、光源40からの検査光Lが照射された検査対象物10の外観を撮像する撮像ユニット30と、光源40が取り付けられた多関節ロボット50とを備える。多関節ロボット50は、光源40と撮像ユニット30との間の相対的位置関係を変化させつつ、光源40を検査対象物10に対して移動させる。

Description

外観検査装置及び製品製造システム
 本発明は、外観検査装置及び製品製造システムに係り、特に製品の製造過程において製品の外観を検査するための外観検査装置に関するものである。
 製品の製造過程において行われる外観検査においては、製品の表面に対して光源から検査光を照射し、この検査光により製品の表面の傷や凹み、汚れなどを顕在化させ、これをカメラで撮像し、カメラで撮像した画像を分析することで傷や凹み、汚れを検出することが一般的に行われている。このような外観検査においては、製品の様々な箇所を検査するために、製品に対してカメラを移動させることもなされている(例えば、特許文献1参照)。
 例えば、製品の表面の傷や凹みが形成される角度や方向、長さなどは様々であり、これらの傷や凹みを精度高く検出するためには、様々な方向から検査光を照射する必要がある。しかしながら、特許文献1に開示されている技術では、光源とカメラとがフレームに一体的に設けられているため、光源とカメラとの位置関係が常に一定となり、製品の表面の構造によっては傷や凹み、汚れを検出できない場合がある。例えば、検査光が照射される方向によって傷や凹み、汚れの輪郭が不鮮明になってしまう場合や検査光により生ずる影が傷や凹み、汚れに重なってしまう場合には、これらの傷や凹み、汚れを検出することができず、人間の目による検査が必要となり、結果的に生産効率が低下する。
特開2004-226319号公報
 本発明は、このような従来技術の問題点に鑑みてなされたもので、検査対象物の表面の傷や凹み、汚れなどを精度高く検出することができる外観検査装置を提供することを第1の目的とする。
 また、本発明は、表面に傷や凹み、汚れなどが存在する不具合製品を精度高く検出することができ、質の高い製品を製造することができる製品製造システムを提供することを第2の目的とする。
 本発明の第1の態様によれば、検査対象物の表面の傷や凹み、汚れなどを精度高く検出することができる外観検査装置が提供される。検査対象物の外観を検査するための外観検査装置は、上記検査対象物を支持する支持ステージと、上記支持ステージ上の上記検査対象物に検査光を照射する光源と、上記光源からの上記検査光が照射された上記検査対象物の外観を撮像する撮像ユニットと、上記光源が取り付けられた多関節ロボットとを備える。上記多関節ロボットは、上記光源と上記撮像ユニットとの間の相対的位置関係を変化させつつ、上記光源を上記検査対象物に対して移動させる。
 このように、多関節ロボットを用いることにより、検査対象物に検査光を照射する光源を撮像ユニットから独立して移動させることができるので、光源と撮像ユニットとの間の位置関係をリアルタイムで変化させながら検査対象物に検査光を照射することができる。したがって、検査対象物の表面の傷や凹み、汚れなどの輪郭が鮮明になるように、あるいは、これらの傷や凹み、汚れなどが検査光により生ずる影と重ならないように光源を適切な姿勢で適切な位置に移動させることにより、従来の外観検査装置では検出できなかったような傷や凹み、汚れなどを検出することができる。このように、本発明に係る外観検査装置は、検査対象物の表面の傷や凹み、汚れなどを精度高く検出することができる。
 上記外観検査装置は、上記撮像ユニットにより撮像された画像を分析して上記検査対象物の外観検査を行う分析部をさらに備えていることが好ましい。また、上記外観検査装置は、上記光源と上記撮像ユニットとの間の相対的位置関係を変化させつつ、上記光源を上記検査対象物に対して移動するように上記多関節ロボットを制御する制御部をさらに備えていることが好ましい。この場合において、上記制御部は、上記光源から上記検査対象物の表面の検査対象部分に対して垂直な方向に上記検査光を照射するように上記多関節ロボットを制御してもよいし、あるいは、上記光源から上記検査対象物の表面の検査対象部分に対する接線方向に上記検査光を照射するように上記多関節ロボットを制御してもよい。
 上記支持ステージは、上記撮像ユニットに対する上記検査対象物の姿勢を変化させるように構成されていることが好ましい。この場合には、上述の多関節ロボットにより光源と撮像ユニットとの間の位置関係を変化させるだけではなく、支持ステージ上の検査対象物と撮像ユニットとの間の位置関係も変化させることができるので、検査対象物を様々な角度から観察することができ、検査対象物の表面の傷や凹み、汚れなどの検出をより高精度に行うことができる。
 本発明の第2の態様によれば、表面に傷や凹み、汚れなどが存在する不具合製品を精度高く検出することができ、質の高い製品を製造することができる製品製造システムが提供される。この製品製造システムは、上述した外観検査装置と、上記検査対象物を上記外観検査装置に搬入する第1の搬送装置と、上記外観検査装置において外観が検査された上記検査対象物を上記外観検査装置から搬出する第2の搬送装置とを備えている。
 このように、上述した外観検査装置を製品製造システムに含めることにより、製造工程において生じた製品の傷や凹み、汚れなどを精度高く検出することができるため、そのような不具合のある製品を精度高く検出して最終製品から排除することができ、最終製品の品質を向上させることができる。
 本発明に係る外観検査装置によれば、多関節ロボットを用いることにより、光源と撮像ユニットとの間の位置関係をリアルタイムで変化させながら検査対象物に検査光を照射することができる。したがって、従来の外観検査装置では検出できなかったような傷や凹み、汚れなどを精度高く検出することができる。また、本発明に係る製品製造システムによれば、製造工程において生じた製品の傷や凹み、汚れなどを精度高く検出することができるため、そのような不具合のある製品を精度高く検出して最終製品から排除することができ、最終製品の品質を向上させることができる。
図1は、本発明の一実施形態における製品製造システムを示す模式図である。 図2は、図1の製品製造システムにおける外観検査装置を示す模式図である。 図3Aは、平板状の検査対象物に対して水平方向に検査光を照射する光源の例を示す模式的斜視図である。 図3Bは、平板状の検査対象物に対して斜め方向に検査光を照射する光源の例を示す模式的斜視図である。 図3Cは、平板状の検査対象物に対して垂直方向に検査光を照射する光源の例を示す模式的斜視図である。 図4は、平板状の検査対象物に対して光源を移動させるルートの一例を示す模式的斜視図である。 図5Aは、凸部を有する検査対象物に対して斜め方向に検査光を照射する光源の例を示す模式的斜視図である。 図5Bは、凸部を有する検査対象物に対して垂直方向に検査光を照射する光源の例を示す模式的斜視図である。 図6Aは、図5Aに示す検査対象物の凸部の一部分に対して垂直な方向に検査光を照射する場合の光源と検査対象物との間の位置関係を示す模式図である。 図6Bは、図5Aに示す検査対象物の凸部の一部分に対して接線方向に検査光を照射する場合の光源と検査対象物との間の位置関係を示す模式図である。 図7は、凸部を有する検査対象物に対して光源を移動させるルートの一例を示す模式的斜視図である。 図8Aは、凹部を有する検査対象物に対して斜め方向に検査光を照射する光源の例を示す模式的斜視図である。 図8Bは、凹部を有する検査対象物に対して垂直方向に検査光を照射する光源の例を示す模式的斜視図である。 図9Aは、図8Aに示す検査対象物の凹部の一部分に対して垂直な方向に検査光を照射する場合の光源と検査対象物との間の位置関係を示す模式図である。 図9Bは、図8Aに示す検査対象物の凹部の一部分に対して接線方向に検査光を照射する場合の光源と検査対象物との間の位置関係を示す模式図である。 図10は、凹部を有する検査対象物に対して光源を移動させるルートの一例を示す模式的斜視図である。
 以下、本発明に係る製品製造システム及び外観検査装置の実施形態について図1から図10を参照して詳細に説明する。なお、図1から図10において、同一又は相当する構成要素には、同一の符号を付して重複した説明を省略する。また、図1から図10においては、各構成要素の縮尺や寸法が誇張されて示されている場合や一部の構成要素が省略されている場合がある。
 図1は、本発明の一実施形態における製品製造システム1を示す模式図である。図1に示すように、製品製造システム1は、所望の製品を製造するための製造ラインを構成しており、本実施形態では、処理対象物に所定の処理を施して完成前の製品を作製する前段処理装置2と、前段処理装置2により得られた完成前の製品の外観を検査する外観検査装置3と、外観検査装置3により外観が検査された完成前の製品に対して所定の処理(例えば包装など)を施して製品を完成させる後段処理装置4とを備えている。
 前段処理装置2と外観検査装置3との間にはベルトコンベアやロボットハンドなどの第1の搬送装置5が設けられており、この第1の搬送装置5により、前段処理装置2により得られた完成前の製品が外観検査装置3に搬送される。また、外観検査装置3と後段処理装置4との間にはベルトコンベアやロボットハンドなどの第2の搬送装置6が設けられており、この第2の搬送装置6により、外観検査装置3において外観が検査された完成前の製品が後段処理装置4に搬送される。
 なお、前段処理装置2における処理が複数の工程からなる場合には、前段処理装置2を工程ごとに分割して、複数台の前段処理装置を設けてもよい。同様に、後段処理装置4における処理が複数の工程からなる場合には、後段処理装置4を工程ごとに分割して、複数台の後段処理装置を設けてもよい。また、外観検査装置3による外観検査に合格した製品を完成品とする場合には、後段処理装置4は不要である。
 図2は、外観検査装置3を示す模式図である。図2に示すように、外観検査装置3は、前段処理装置2から第1の搬送装置5により搬入された製品(検査対象物)10を支持する支持ステージ20と、検査対象物10の外観を撮像する撮像ユニット30と、支持ステージ20上の検査対象物10に検査光Lを照射する光源40と、この光源40を検査対象物10の周囲の所望の位置に移動させる多関節ロボット50と、マイクロプロセッサやメモリなどを含む制御ユニット60とを備えている。撮像ユニット30は、例えば、検査対象物10の静止画像又はビデオ画像を取得するカメラを備えている。また、光源40としては、蛍光管、LED、リング照明などを用いることができる。
 制御ユニット60は、撮像ユニット30により撮像された画像を分析する分析部62と、多関節ロボット50の動作を制御するロボット制御部64とを含んでいる。分析部62は、光源40からの検査光Lによって照明された検査対象物10の画像を各種の解析方法により分析し、検査対象物10の表面に傷や凹み、汚れなどがないかを判断する。なお、これらの解析方法としては、周知である任意の方法を用いることができるので、ここでは説明を省略する。
 多関節ロボット50は、ベース部51と、複数の関節52~54と、関節52~54に連結された複数のリンク部材55~57とを有しており、上述した光源40がリンク部材57の先端に取り付けられている。多関節ロボット50は、制御ユニット60のロボット制御部64に接続されており、ロボット制御部64からの命令に応じて各関節52~54周りにリンク部材55~57が回転するようになっている。したがって、ロボット制御部64は、多関節ロボット50に送信する命令を適切に組み合わせることにより、リンク部材57の先端に取り付けられた光源40を任意の姿勢で任意の位置に移動することができる。
 このように、本実施形態では、多関節ロボット50により、検査対象物10に検査光Lを照射する光源40を撮像ユニット30から独立して移動させることができるので、光源40と撮像ユニット30との間の位置関係をリアルタイムで変化させながら検査対象物10に検査光Lを照射することができる。したがって、検査対象物10の表面の傷や凹み、汚れなどの輪郭が鮮明になるように、あるいは、これらの傷や凹み、汚れなどが検査光Lにより生ずる影と重ならないように光源40を適切な姿勢で適切な位置に移動させることにより、従来の外観検査装置では検出できなかったような傷や凹み、汚れなどを検出することができる。このように、本実施形態の外観検査装置3は、検査対象物10の表面の傷や凹み、汚れなどを精度高く検出することができる。
 支持ステージ20はステージ台22に搭載されているが、このステージ台22は、アクチュエータなどの駆動により支持ステージ20の姿勢を変化させることができるように構成されていることが好ましい。この場合には、上述の多関節ロボット50により光源40と撮像ユニット30との間の位置関係を変化させるだけではなく、支持ステージ20上の検査対象物10と撮像ユニット30との間の位置関係も変化させることができるので、検査対象物10を様々な角度から観察することができ、検査対象物10の表面の傷や凹み、汚れなどの検出をより高精度に行うことができる。
 検査対象物10の形態としては、平板状のものや凹凸のあるもの(例えばカメラの筐体や靴)が考えられるが、検査対象物10が複雑な形状を有する場合には、従来の外観検査装置では検出できない傷や凹み、汚れなどが多くなる傾向にある。本実施形態における外観検査装置3によれば、上述したように、光源40と撮像ユニット30との間の位置関係をリアルタイムで変化させながら検査光Lを検査対象物10に照射することができるので、そのような傷や凹み、汚れであっても精度高く検出することが可能である。
 また、上述した外観検査装置3を製品製造システム1に含めることにより、製造工程において生じた製品の傷や凹み、汚れなどを精度高く検出することができるため、そのような不具合のある製品を精度高く検出して最終製品から排除することができる。したがって、最終製品の品質が向上する。
 上述したように、本実施形態では、多関節ロボット50によって光源40を任意の姿勢で任意の位置に移動させることができるが、以下では、検査対象物10に対する光源40の位置及び姿勢についていくつかの例を説明する。
 図3A~図3Cは、平板状の検査対象物10Aに対して検査光Lを照射する光源40の位置と姿勢の例を示す模式的斜視図である。平板状の検査対象物10Aに対しては、図3Aに示すように、検査対象物10Aが延びる平面と平行な方向(水平方向)に検査光Lを照射してもよい。例えば、図3Aに示すように、検査対象物10Aの四辺に対応して、検査対象物10Aの中心周りに90度ごとに光源40を移動させるようにしてもよい(状態A1~状態A4)。また、図3Bに示すように、検査対象物10Aの上方から検査対象物10Aの表面に対して斜め方向(例えば45度)に検査光Lを照射してもよい(状態B1~状態B4)。さらに、図3Cに示すように、検査対象物10Aの上方から検査対象物10Aの表面に対して垂直な方向に検査光Lを照射してもよい(状態C1)。
 検査対象物10Aの外観検査を行う場合には、制御ユニット60のロボット制御部64は、水平方向からの検査光Lの照射(図3A)、斜め方向からの検査光Lの照射(図3B)、及び垂直方向からの検査光Lの照射(図3C)を組み合わせた所定のルートに沿って光源40を移動させるように多関節ロボット50を制御する。例えば、図4に示すように、まず、光源40を検査対象物10Aに対して水平方向に検査光Lを照射する状態A1とし、この状態A1から光源40を水平面内で時計回りに90度回転させて状態A2とする。そして、この状態A2から光源40を下方に傾けつつ反時計回りに180度回転させて状態B4とし、この状態B4から光源40を時計回りに180度回転させて状態B2とする。最後にこの状態B2から光源40を移動して検査対象物10Aに対して垂直な方向に検査光Lを照射する状態C1とする。なお、光源40がこのルートと逆のルートを辿るようにしてもよいし、その他任意のルートを辿るようにすることもできる。
 図5A及び図5Bは、凸部12を有する検査対象物10Bに対して検査光Lを照射する光源40の位置と姿勢の例を示す模式的斜視図である。凸部12を有する検査対象物10Bに対しては、図5Aに示すように、検査対象物10Bの上方から検査対象物10Bに対して斜め方向に検査光Lを照射してもよい(状態D1~状態D4)。また、図5Bに示すように、検査対象物10Bの上方から検査対象物10Bに対して垂直な方向に検査光Lを照射してもよい(状態E1)。
 図5Aに示すように、検査対象物10Bに対して斜め方向に検査光Lを照射する場合には、検査対象物10Bの凸部12の表面の傷や凹みなどを顕在化させるために、図6Aに示すように凸部12の検査対象部分Pに対して垂直な方向から検査光Lを照射するか、あるいは、図6Bに示すように凸部12の検査対象部分Pに対する接線方向に検査光Lを照射することが好ましい。
 検査対象物10Bの外観検査を行う場合には、制御ユニット60のロボット制御部64は、斜め方向からの検査光Lの照射(図5A)及び垂直方向からの検査光Lの照射(図5B)を組み合わせた所定のルートに沿って光源40を移動させるように多関節ロボット50を制御する。例えば、図7に示すように、まず、光源40を検査対象物10Bに対して斜め方向に検査光Lを照射する状態D3とし、この状態D3から光源40を時計回りに回転させて順次状態D4、状態D1、状態D2とする。このとき、図6A及び図6Bに示すように、凸部12の検査対象部分に対して垂直な方向又は接線方向に検査光Lを照射するように光源40の傾きを変化させながら回転させることが好ましい。そして、状態D2から光源40を移動して検査対象物10Bに対して垂直な方向に検査光Lを照射する状態E1とする。なお、光源40がこのルートと逆のルートを辿るようにしてもよいし、その他任意のルートを辿るようにすることもできる。
 図8A及び図8Bは、凹部14を有する検査対象物10Cに対して検査光Lを照射する光源40の位置と姿勢の例を示す模式的斜視図である。凹部14を有する検査対象物10Cに対しては、図8Aに示すように、検査対象物10Cの上方から検査対象物10Cに対して斜め方向に検査光Lを照射してもよい(状態F1~状態F4)。また、図8Bに示すように、検査対象物10Cの上方から検査対象物10Cに対して垂直な方向に検査光Lを照射してもよい(状態G1)。
 図8Aに示すように、検査対象物10Cに対して斜め方向に検査光Lを照射する場合には、検査対象物10Cの凹部14の表面の傷や凹みなどを顕在化させるために、図9Aに示すように凹部14内の検査対象部分Pに対して垂直な方向から検査光Lを照射するか、あるいは、図9Bに示すように凹部14内の検査対象部分Pに対する接線方向に検査光Lを照射することが好ましい。
 検査対象物10Cの外観検査を行う場合には、制御ユニット60のロボット制御部64は、斜め方向からの検査光Lの照射(図8A)及び垂直方向からの検査光Lの照射(図8B)を組み合わせた所定のルートに沿って光源40を移動させるように多関節ロボット50を制御する。例えば、図10に示すように、まず、光源40を検査対象物10Cに対して斜め方向に検査光Lを照射する状態F3とし、この状態F3から光源40を時計回りに回転させて順次状態F4、状態F1、状態F2とする。このとき、図9A及び図9Bに示すように、凹部14の検査対象部分に対して垂直な方向又は接線方向に検査光Lを照射するように光源40の傾きを変化させながら回転させることが好ましい。そして、状態F2から光源40を移動して検査対象物10Cに対して垂直な方向に検査光Lを照射する状態G1とする。なお、光源40がこのルートと逆のルートを辿るようにしてもよいし、その他任意のルートを辿るようにすることもできる。
 これまで本発明の好ましい実施形態について説明したが、本発明は上述の実施形態に限定されず、その技術的思想の範囲内において種々異なる形態にて実施されてよいことは言うまでもない。
 本出願は、2017年9月4日に提出された日本国特許出願特願2017-169348に基づくものであり、当該出願の優先権を主張するものである。当該出願の開示は参照によりその全体が本明細書に組み込まれる。
 本発明は、製品の製造過程において製品の外観を検査するための外観検査装置に好適に用いられる。
  1  製品製造システム
  2  前段処理装置
  3  外観検査装置
  4  後段処理装置
  5  第1の搬送装置
  6  第2の搬送装置
 10,10A,10B,10C 検査対象物
 12  凸部
 14  凹部
 20  支持ステージ
 22  ステージ台
 30  撮像ユニット
 40  光源
 50  多関節ロボット
 51  ベース部
 52~54  関節
 55~57  リンク部材
 60  制御ユニット
 62  分析部
 64  ロボット制御部
  L  検査光
  P  検査対象部分

Claims (7)

  1.  検査対象物の外観を検査するための外観検査装置であって、
     前記検査対象物を支持する支持ステージと、
     前記支持ステージ上の前記検査対象物に検査光を照射する光源と、
     前記光源からの前記検査光が照射された前記検査対象物の外観を撮像する撮像ユニットと、
     前記光源が取り付けられた多関節ロボットであって、前記光源と前記撮像ユニットとの間の相対的位置関係を変化させつつ、前記光源を前記検査対象物に対して移動させる多関節ロボットと
    を備える、外観検査装置。
  2.  前記撮像ユニットにより撮像された画像を分析して前記検査対象物の外観検査を行う分析部をさらに備える、請求項1に記載の外観検査装置。
  3.  前記光源と前記撮像ユニットとの間の相対的位置関係を変化させつつ、前記光源を前記検査対象物に対して移動するように前記多関節ロボットを制御する制御部をさらに備える、請求項1又は2に記載の外観検査装置。
  4.  前記制御部は、前記光源から前記検査対象物の表面の検査対象部分に対して垂直な方向に前記検査光を照射するように前記多関節ロボットを制御する、請求項3に記載の外観検査装置。
  5.  前記制御部は、前記光源から前記検査対象物の表面の検査対象部分に対する接線方向に前記検査光を照射するように前記多関節ロボットを制御する、請求項3又は4に記載の外観検査装置。
  6.  前記支持ステージは、前記撮像ユニットに対する前記検査対象物の姿勢を変化させるように構成されている、請求項1から5のいずれか一項に記載の外観検査装置。
  7.  請求項1から6のいずれか一項に記載の外観検査装置と、
     前記検査対象物を前記外観検査装置に搬入する第1の搬送装置と、
     前記外観検査装置において外観が検査された前記検査対象物を前記外観検査装置から搬出する第2の搬送装置と
    を備える、製品製造システム。
PCT/JP2018/031867 2017-09-04 2018-08-29 外観検査装置及び製品製造システム WO2019044870A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-169348 2017-09-04
JP2017169348A JP2019045330A (ja) 2017-09-04 2017-09-04 外観検査装置及び製品製造システム

Publications (1)

Publication Number Publication Date
WO2019044870A1 true WO2019044870A1 (ja) 2019-03-07

Family

ID=65527714

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/031867 WO2019044870A1 (ja) 2017-09-04 2018-08-29 外観検査装置及び製品製造システム

Country Status (2)

Country Link
JP (1) JP2019045330A (ja)
WO (1) WO2019044870A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110672618A (zh) * 2019-09-25 2020-01-10 上海智觉光电科技有限公司 一种基于多角度光源的部件外观亮面检测系统及方法
CN110907455A (zh) * 2019-12-29 2020-03-24 常州微亿智造科技有限公司 电脑底盖外观检测三体机及其检测方法
CN113295661A (zh) * 2021-04-28 2021-08-24 江汉大学 一种清洁检测系统及其控制方法和使用方法
WO2022137494A1 (ja) * 2020-12-25 2022-06-30 株式会社アシックス 靴外観検査システム、靴外観検査方法および靴外観検査プログラム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7380019B2 (ja) 2019-09-27 2023-11-15 オムロン株式会社 データ生成システム、学習装置、データ生成装置、データ生成方法及びデータ生成プログラム
JP7494652B2 (ja) 2020-08-25 2024-06-04 株式会社プロテリアル 外観検査準備装置および外観検査準備方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000266679A (ja) * 1999-03-18 2000-09-29 Olympus Optical Co Ltd 基板検査装置
JP2008076218A (ja) * 2006-09-21 2008-04-03 Olympus Corp 外観検査装置
JP2008203280A (ja) * 2001-09-21 2008-09-04 Olympus Corp 欠陥検査装置
JP2012514193A (ja) * 2008-12-24 2012-06-21 スネクマ 機械部品の非破壊検査の方法
JP2014178150A (ja) * 2013-03-13 2014-09-25 Aron Denki Co Ltd 切削工具検査装置
JP2017040612A (ja) * 2015-08-21 2017-02-23 キヤノン株式会社 検査方法、検査装置、画像処理装置、プログラム及び記録媒体
WO2017115300A1 (en) * 2015-12-28 2017-07-06 Pirelli Tyre S.P.A. Apparatus and method for checking tyres
JP2017125695A (ja) * 2016-01-12 2017-07-20 株式会社Screenホールディングス 検査システム、表示装置、プログラム、および、検査方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000266679A (ja) * 1999-03-18 2000-09-29 Olympus Optical Co Ltd 基板検査装置
JP2008203280A (ja) * 2001-09-21 2008-09-04 Olympus Corp 欠陥検査装置
JP2008076218A (ja) * 2006-09-21 2008-04-03 Olympus Corp 外観検査装置
JP2012514193A (ja) * 2008-12-24 2012-06-21 スネクマ 機械部品の非破壊検査の方法
JP2014178150A (ja) * 2013-03-13 2014-09-25 Aron Denki Co Ltd 切削工具検査装置
JP2017040612A (ja) * 2015-08-21 2017-02-23 キヤノン株式会社 検査方法、検査装置、画像処理装置、プログラム及び記録媒体
WO2017115300A1 (en) * 2015-12-28 2017-07-06 Pirelli Tyre S.P.A. Apparatus and method for checking tyres
JP2017125695A (ja) * 2016-01-12 2017-07-20 株式会社Screenホールディングス 検査システム、表示装置、プログラム、および、検査方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110672618A (zh) * 2019-09-25 2020-01-10 上海智觉光电科技有限公司 一种基于多角度光源的部件外观亮面检测系统及方法
CN110907455A (zh) * 2019-12-29 2020-03-24 常州微亿智造科技有限公司 电脑底盖外观检测三体机及其检测方法
CN110907455B (zh) * 2019-12-29 2024-05-07 常州微亿智造科技有限公司 电脑底盖外观检测三体机及其检测方法
WO2022137494A1 (ja) * 2020-12-25 2022-06-30 株式会社アシックス 靴外観検査システム、靴外観検査方法および靴外観検査プログラム
CN113295661A (zh) * 2021-04-28 2021-08-24 江汉大学 一种清洁检测系统及其控制方法和使用方法

Also Published As

Publication number Publication date
JP2019045330A (ja) 2019-03-22

Similar Documents

Publication Publication Date Title
WO2019044870A1 (ja) 外観検査装置及び製品製造システム
JP4157037B2 (ja) 欠陥検査装置
JP6772084B2 (ja) 表面欠陥検査装置および表面欠陥検査方法
CN106596555B (zh) 运用多轴机臂的光学检查设备
JP6859627B2 (ja) 外観検査装置
JP4190636B2 (ja) 表面検査装置
JPWO2019131155A1 (ja) 外観検査装置、外観検査方法、プログラム及びワークの製造方法
JP6936995B2 (ja) 立体物の外観検査装置
JP2006300663A (ja) 欠点検出システム
CN110793968A (zh) 辨识孔壁瑕疵的检测设备
JP2017067632A (ja) 検査装置および物品製造方法
JP2019089172A (ja) ロボットシステム及びロボット制御方法
KR20200014892A (ko) 컨테이너를 검사하는 방법 및 검사 시스템
JP2002039946A (ja) 表面欠陥検査装置
JP2021121792A (ja) 外観検査装置及び外観検査方法
JP2018146442A (ja) 検査装置、検査システム及び物品の製造方法
JP2002131238A (ja) 外観検査装置
JP7363217B2 (ja) 外観検査装置
JP2009115489A (ja) 外観検査装置
JP2018179789A (ja) 検査装置、検査方法、および物品製造方法
JP2017146246A (ja) 外観検査装置
WO2021176386A1 (en) Method and systems for the detection and classification of defects on surfaces
JP2008082704A (ja) 基板検査装置および基板検査方法
TWI779055B (zh) 光學顯示面板的損傷檢查方法
JPS61137050A (ja) ウエハ検査装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18851148

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18851148

Country of ref document: EP

Kind code of ref document: A1