WO2018055754A1 - 部品実装機の機外作業エリア監視システム - Google Patents

部品実装機の機外作業エリア監視システム Download PDF

Info

Publication number
WO2018055754A1
WO2018055754A1 PCT/JP2016/078206 JP2016078206W WO2018055754A1 WO 2018055754 A1 WO2018055754 A1 WO 2018055754A1 JP 2016078206 W JP2016078206 W JP 2016078206W WO 2018055754 A1 WO2018055754 A1 WO 2018055754A1
Authority
WO
WIPO (PCT)
Prior art keywords
component mounting
work area
component
image
mounting machine
Prior art date
Application number
PCT/JP2016/078206
Other languages
English (en)
French (fr)
Inventor
英俊 川合
文隆 前田
Original Assignee
富士機械製造株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士機械製造株式会社 filed Critical 富士機械製造株式会社
Priority to JP2018540583A priority Critical patent/JP6823661B2/ja
Priority to EP16916821.8A priority patent/EP3518643B1/en
Priority to US16/328,457 priority patent/US11464149B2/en
Priority to CN201680089592.6A priority patent/CN109792858B/zh
Priority to PCT/JP2016/078206 priority patent/WO2018055754A1/ja
Publication of WO2018055754A1 publication Critical patent/WO2018055754A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08—Monitoring manufacture of assemblages
    • H05K13/081—Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08—Monitoring manufacture of assemblages
    • H05K13/083—Quality monitoring using results from monitoring devices, e.g. feedback loops

Definitions

  • the present invention relates to an external work area monitoring system for a component mounting machine that monitors an external work area in which a worker outside the component mounting machine works on the component mounting machine.
  • Patent Document 1 Japanese Patent Laid-Open No. 2009-76633
  • the inside of the component mounter is photographed with a camera, and the image is taken.
  • the processing it is determined whether or not the size of the circuit board carried into the component mounter is correct, and when the board size error is detected, the conveyance of the circuit board by the conveyor is stopped and the sound is There is something that warns the worker by the display.
  • Patent Document 2 Japanese Patent Application Laid-Open No. 2008-140248
  • the problem to be solved by the present invention is to monitor the presence or absence of a work error that causes an error during operation of the component mounting machine, or to clarify the cause when an error occurs due to a work error.
  • the object is to provide an out-of-machine work area monitoring system for a component mounting machine.
  • the present invention provides an out-of-machine monitoring camera for photographing an out-of-machine work area where an operator out of the component mounter works on the component mounter, and the out-of-machine monitoring.
  • a display device that displays an image captured by a camera and a recording device that records an image captured by the out-of-machine monitoring camera. The image displayed in real time on the display device or read out from the recording device and played back It is characterized in that the state of the monitoring target operated by the worker in the outside work area can be confirmed by looking at the obtained image.
  • the component mounter can be seen by photographing the outside work area of the component mounter with the external monitoring camera and viewing the image displayed in real time on the display device or the image read and reproduced from the recording device. Because the status of the monitoring target that the operator worked in the external work area of the machine can be checked, it is monitored whether there is a work error causing an error while the component mounter is in operation, and a work error is detected before the error occurs. Thus, even if an error is prevented in advance or an error occurs due to a work error, the work error causing the error can be clarified from the image of the out-of-machine work area.
  • the out-of-machine work area of the component mounter includes at least an area where the feeder is set, and the monitoring target is at least the state during and after the setting of the feeder to the component mounter and the supply of the component to the feeder.
  • the state may be set during and after the tape is set.
  • the setting work of the feeder to the component mounter and the setting work of the component supply tape to the feeder are typical operations performed by the worker in the work area outside the mounter. Therefore, the feeder is set to the component mounter.
  • a display device that displays an image captured by an out-of-machine monitoring camera is a computer monitor that controls a component mounting machine on which the out-of-machine monitoring camera is installed, and a host computer that manages a component mounting line on which the component mounting machine is installed Monitor, a monitor of an external computer connected to the host computer via a network, or a portable terminal.
  • the recording device records the image taken by the external monitoring camera from the time when the error signal of the component mounting machine is used as a trigger for a predetermined time from the time when the trigger occurs, and the recorded image data includes: The same time information, recording time, and error information as the trace log of the component mounter may be linked. In this way, when a component mounter error occurs, the recorded image in the work area outside the component mounter can be checked in association with the analysis result of the trace log and error information. Can be analyzed in more detail.
  • the present invention includes an image recognition device that recognizes a state of a monitoring target by processing an image captured by an external monitoring camera, and the state of the monitoring target is normal based on a recognition result of the image recognition device. When it is detected that the state is different, it may be displayed on the display device. In this way, an operation error can be automatically detected by the image processing technique, and the operator can be urged to display the operation error as a warning and redo the operation in which the operation error has occurred.
  • FIG. 1 is a perspective view of a modular component mounting line showing an embodiment of the present invention.
  • FIG. 2 is a block diagram of the entire outside work area monitoring system.
  • a plurality of component mounting machines 12 are arranged on the base table 11 of the component mounting line 10 so as to be replaceable and adjacent to each other in the circuit board transport direction (X direction).
  • Each component mounter 12 includes a feeder 14 for supplying components on a main body bed 13, a conveyor 15 for transporting a circuit board 21, a component imaging camera 16 for imaging components adsorbed by a suction nozzle (not shown), A mounting head 17 or the like holding one or a plurality of suction nozzles is mounted.
  • the mounting head 17 is moved in the XY direction by an XY moving mechanism (not shown) to perform a component suction operation and a component mounting operation.
  • a monitor 19 (display device) such as a liquid crystal display and a CRT, and an operation unit 20 such as operation keys and a touch panel are provided on the front surface of the upper frame 18 of each component mounting machine 12.
  • the operation unit 20 When the operation unit 20 is configured with a touch panel, the operation unit 20 may be displayed on the screen of the monitor 19.
  • Each component mounter 12 conveys the circuit board 21 conveyed from the upstream component mounter 12 to a predetermined position by the conveyor 15, and clamps and positions the circuit board 21 with a clamp mechanism (not shown). At the same time, the component supplied by the feeder 14 is sucked by the suction nozzle of the mounting head 17, moved from the suction position to the imaging position, captured by the component imaging camera 16, and the component is image-recognized. 15 on the circuit board 21.
  • an operator outside the component mounter 12 works on the component mounter 12 on the front surface of the upper frame 18 of each component mounter 12 (portion on which the worker works).
  • An out-of-machine monitoring camera 23 for photographing an out-of-machine work area is installed.
  • the out-of-machine work area of each component mounting machine 12 includes at least an area where the feeder 14 is set, and the monitoring target includes at least the state during and after the setting of the feeder 14 on the component mounting machine 12 and It is in a state during setting of the component supply tape to the feeder 14 and after completion of setting.
  • the component mounting machine 12 Since the setting work of the feeder 14 to each component mounting machine 12 and the setting work of the component supply tape to the feeder 14 are typical work performed by the operator in the outside work area of the component mounting machine 12, the component mounting machine 12 is a state in which the feeder 14 is being set to 12 and a state after the completion of the setting, and a state in which the component supply tape is being set in the feeder 14 and a state after the completion of the setting (specifically, the reel 22 around which the component supply tape is wound is set in the feeder 14. If the target of monitoring is the state during and after completion of the setting, and the state in which the component supply tape pulled out from the reel 22 is set in the feeder 14 and after completion of setting, typical work that is likely to occur in the work area outside the machine. It is possible to monitor mistakes in real time and to identify work mistakes that caused the errors when the component mounter 12 occurs.
  • a control device 31 that controls the operation of each component mounting machine 12 is configured mainly by a computer, and in operation (during production), a component supplied by the feeder 14 is supplied by a suction nozzle of the mounting head 17.
  • the operation of picking up, moving from the picked-up position to the image pickup position, picking up an image with the part image pickup camera 16 and recognizing the part is mounted on the circuit board 21 on the conveyor 15 is controlled.
  • the control device 31 of each component mounter 12 is connected to the above-described external monitoring camera 23, the monitor 19, the operation unit 20, and the like, and various control programs for controlling the operation of each function of the component mounter 11. Is connected to a storage device 32 (see FIG. 2).
  • the storage device 32 is composed of a rewritable non-volatile storage medium such as a hard disk device, and functions as a recording device for recording images taken by the external monitoring camera 23.
  • the control device 31 of each component mounter 12 traces the operation history data of each function of the component mounter 12 and the operation history data of the feeder 14 in a predetermined character code.
  • the log is saved in the storage device 32 as a log file.
  • the control device 31 of each component mounter 12 uses an error signal of the component mounter 12 as a trigger when recording an image taken by the out-of-machine monitoring camera 23 in the storage device 32. Recording is performed from the time point of time, and the recorded image data is linked with the same time information, recording time, and error information as the trace log of the component mounting machine 12, and the storage device 32 when an error occurs in the component mounting machine 12.
  • a function for displaying the image of the external monitoring camera 23 recorded on the monitor 19 on the monitor 19 by linking the same time information, recording time and error information as the trace log of the component mounting machine 12 is also installed.
  • control device 31 of each component mounting machine 12 processes the image captured by the external monitoring camera 23 to monitor the state of the monitoring target (the state during and after the feeder 14 is set on the component mounting machine 12 and It also functions as an image recognition device that recognizes the state of setting the component supply tape to the feeder 14 and the state after completion of setting, and detects that the state of the monitoring target is different from the normal state based on the image recognition result When this occurs, a warning is displayed on the monitor 19 or the like of the component mounting machine 12, or the operator is warned by voice or the like.
  • the image taken by the out-of-machine monitoring camera 23 of each component mounting machine 12 constituting the component mounting line 10 and the image recognition result (normal / abnormal) data are also sent to the host computer 41 that manages the component mounting line 10. Sent.
  • the host computer 41 receives the image of the external monitoring camera 23 of the component mounting machine 12 selected by the administrator operating the host computer 41 from the received images of the external monitoring camera 23 of each component mounting machine 12.
  • the monitor 42 display device
  • Warnings are displayed and the administrator is warned by voice or the like.
  • the number of the component mounting lines 10 managed by the host computer 41 may be only one or may be plural.
  • the image of the out-of-machine monitoring camera 23 of each component mounter 12 received by the host computer 41 and the image recognition result (normal / abnormal) data are obtained from an external computer connected to the host computer 41 via a network (hereinafter “The image of the external monitoring camera 23 of the component mounting machine 12 selected by a person (administrator, operator, engineer, etc.) who operates them is also transmitted to the mobile terminal 44 and the mobile terminal 44.
  • the image of the external monitoring camera 23 of the component mounting machine 12 selected by a person (administrator, operator, engineer, etc.) who operates them is also transmitted to the mobile terminal 44 and the mobile terminal 44.
  • a warning is displayed on the monitor 45 of the PC 43 or the screen of the portable terminal 44, or a warning is given by voice or the like.
  • the person who operates them selects 1 Only the images of the out-of-machine monitoring cameras 23 may be displayed, or the screens of the monitors 42 and 45 and the mobile terminal 44 are divided into a plurality of screens, and a plurality of out-of-machine monitoring cameras are displayed on one screen. 23 images may be divided and displayed. Alternatively, the images of the one or a plurality of out-of-machine monitoring cameras 23 displayed on the screens of the monitors 42 and 45 and the portable terminal 44 are automatically switched to the images of the other out-of-machine monitoring cameras 23 every predetermined time. You may do it.
  • the host computer 41, the external PC 43, and the portable terminal 44 download the image of the external monitoring camera 23 recorded in the storage device 32 of each component mounter 12 with the same time information as the trace log of each component mounter 12. It also has a function to play back.
  • the state of the monitoring target that the worker has worked in the outside work area of the component mounter 12 can be confirmed by looking at the image read from the storage device 32 and reproduced, and the cause of the error during the operation of the component mounter 12 If there is an error due to a work mistake, the work mistake that caused the work error will be removed from the machine. It can be clarified from the image of the area.
  • an image taken by the out-of-machine monitoring camera 23 is recorded from a time when the error signal of the component mounting machine 12 is used as a trigger, and a predetermined time is passed from the time when the trigger is generated, and the image to be recorded is recorded. Since the same time information, recording time and error information as the trace log of the component mounter 12 are linked to the data, a recorded image of the work area outside the component mounter 12 when an error occurs in the component mounter 12 is recorded. The trace log analysis result and error information can be confirmed in association with each other, and the cause of the error occurring in the component mounter 12 can be analyzed in more detail.
  • a function for processing an image taken by the out-of-machine monitoring camera 23 and recognizing the state of the monitoring target is installed, and the state of the monitoring target is different from the normal state based on the image recognition result.
  • an error is detected, it is displayed as a warning, so that it is possible to automatically detect a work error by image processing technology, and to display the work error as a warning so that the operator can redo the work that has made a mistake. Can be urged.
  • the out-of-machine monitoring camera 23 is installed in each component mounting machine 12.
  • a plurality of component mounting machines 12 are installed in the field of view of one out-of-machine monitoring camera 23.
  • the outside work area may be accommodated, and the outside work area of the plurality of component mounting machines 12 may be collectively photographed by one outside monitoring camera 23.
  • the present invention does not depart from the gist of the invention, such as changing the installation location of the out-of-machine monitoring camera 23 or monitoring things other than the feeder 14 existing in the out-of-machine work area of the component mounting machine 12. Needless to say, various modifications can be made within the scope.

Landscapes

  • Engineering & Computer Science (AREA)
  • Operations Research (AREA)
  • Manufacturing & Machinery (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Supply And Installment Of Electrical Components (AREA)

Abstract

各部品実装機（１２）の上部の前面側（作業者が作業する側）の部分には、各部品実装機の機外のうちの作業者が該部品実装機に対して作業する機外作業エリアを撮影する機外監視カメラ（２３）が設置されている。各部品実装機の機外作業エリアは、少なくともフィーダ（１４）がセットされるエリアを含み、監視対象は、少なくとも部品実装機へのフィーダのセット中及びセット完了後の状態並びにフィーダへの部品供給テープのセット中及びセット完了後の状態となっている。機外監視カメラで撮影した画像を部品実装機のトレースログと同じ時刻情報を付けて録画する機能も搭載されている。部品実装機の機外作業エリアを機外監視カメラで撮影して表示装置にリアルタイムで表示された画像又は録画した画像を見て、部品実装機の機外作業エリアで作業者が作業した監視対象の状態を確認できる。

Description

部品実装機の機外作業エリア監視システム
　本発明は、部品実装機の機外のうちの作業者が該部品実装機に対して作業する機外作業エリアを監視する部品実装機の機外作業エリア監視システムに関する発明である。
　例えば、特許文献１（特開２００９－７６６３３号公報）に記載されているように、回路基板に部品を実装する部品実装機においては、部品実装機の内部をカメラで撮影して、その画像を処理することで、部品実装機内に搬入された回路基板のサイズが間違っていないか否かを判定し、基板サイズの間違いが検出されたときに、コンベアによる回路基板の搬送を停止して、音や表示によって作業者に警告するようにしたものがある。
　また、特許文献２（特開２００８－１４０２４８号公報）に記載されているように、部品実装機の稼働中に何らかのエラーが発生したときに、そのエラーの原因究明作業を容易にするために、部品実装機の稼働中に各機能の動作履歴のデータを所定の文字コードで記述したトレースログを出力して、それをログファイルにしてメモリに保存しておき、エラー原因の究明時に、メモリからログファイルを読み出して、そのログファイル内のトレースログを解析してエラーの箇所や原因を調べるようにしたものがある。
特開２００９－７６６３３号公報 特開２００８－１４０２４８号公報
　上述した特許文献１，２の方法のみでは、部品実装機のエラーの発生原因が分からない場合がある。例えば、部品実装機にセットしたフィーダのテープ装着状態が不適正であることが原因で部品吸着ミス等のエラーが発生した場合に、部品実装機の内部を撮影するカメラでは、フィーダの不適正なテープ装着状態を撮影できないため、エラーの原因が分からない。また、フィーダの不適正なテープ装着等の作業ミスにより発生するエラーは、トレースログを解析しても、原因の解明が困難である。このため、作業ミスが原因でエラーが発生した場合に、原因の解明が遅れて部品実装機の稼働率を低下させてしまうという問題があった。
　そこで、本発明が解決しようとする課題は、部品実装機の稼働中にエラーの原因となる作業ミスの有無を監視したり、作業ミスが原因でエラーが発生した場合に、その原因を解明できる部品実装機の機外作業エリア監視システムを提供することである。
　上記課題を解決するために、本発明は、部品実装機の機外のうちの作業者が該部品実装機に対して作業する機外作業エリアを撮影する機外監視カメラと、前記機外監視カメラで撮影した画像を表示する表示装置と、前記機外監視カメラで撮影した画像を録画する録画装置とを備え、前記表示装置にリアルタイムで表示された画像又は前記録画装置から読み出されて再生された画像を見て前記機外作業エリアで作業者が作業した監視対象の状態を確認できるようにしたことを特徴とするものである。このようにすれば、部品実装機の機外作業エリアを機外監視カメラで撮影して表示装置にリアルタイムで表示された画像又は録画装置から読み出されて再生された画像を見て部品実装機の機外作業エリアで作業者が作業した監視対象の状態を確認できるため、部品実装機の稼働中にエラーの原因となる作業ミスの有無を監視して、エラー発生前に作業ミスを発見して、エラーを未然に防いだり、作業ミスが原因でエラーが発生した場合でも、その原因となる作業ミスを機外作業エリアの画像から解明することができる。
　この場合、部品実装機の機外作業エリアは、少なくともフィーダがセットされるエリアを含み、監視対象は、少なくとも部品実装機へのフィーダのセット中及びセット完了後の状態並びに前記フィーダへの部品供給テープのセット中及びセット完了後の状態とすれば良い。部品実装機へのフィーダのセット作業やフィーダへの部品供給テープのセット作業は、部品実装機の機外作業エリアで作業者が行う代表的な作業であるため、部品実装機へのフィーダのセット中及びセット完了後の状態並びに前記フィーダへの部品供給テープのセット中及びセット完了後の状態を監視対象とすれば、機外作業エリアで発生しやすい代表的な作業ミスをリアルタイムで監視したり、部品実装機のエラー発生時にその原因となった作業ミスを特定することができる。
　また、機外監視カメラで撮影した画像を表示する表示装置は、機外監視カメラが設置された部品実装機を制御するコンピュータのモニタ、部品実装機が設置された部品実装ラインを管理するホストコンピュータのモニタ、このホストコンピュータとネットワークで接続された外部のコンピュータのモニタ又は携帯端末のいずれであっても良い。
　また、録画装置は、機外監視カメラで撮影した画像を部品実装機のエラー信号をトリガーにしてそのトリガーが発生した時刻よりも所定時間溯った時点から録画し、その録画する画像データには、部品実装機のトレースログと同じ時刻情報と録画時間とエラー情報をリンクさせるようにしても良い。このようにすれば、部品実装機のエラー発生時に部品実装機の機外作業エリアの録画画像を、トレースログの解析結果やエラー情報と関連付けて確認することができ、部品実装機で発生したエラーの原因をより詳細に解析できる。
　更に、本発明は、機外監視カメラで撮影した画像を処理して監視対象の状態を認識する画像認識装置を備え、前記画像認識装置の認識結果に基づいて前記監視対象の状態が正常時の状態と異なることを検出したときにそれを前記表示装置に表示するようにしても良い。このようにすれば、画像処理技術により作業ミスを自動的に検出できると共に、その作業ミスを警告表示して、作業ミスした作業をやり直すように作業者に促すことができる。
図１は本発明の一実施例を示すモジュール型部品実装ラインの斜視図である。 図２は機外作業エリア監視システム全体のブロック図である。
　以下、本発明を実施するための形態を具体化した一実施例を説明する。
　まず、図１に基づいて部品実装ライン１０の構成を説明する。
　部品実装ライン１０のベース台１１上に、回路基板の搬送方向（Ｘ方向）に隣接して複数台の部品実装機１２が取り替え可能に整列配置されている。各部品実装機１２は、本体ベッド１３上に、部品を供給するフィーダ１４、回路基板２１を搬送するコンベア１５、吸着ノズル（図示せず）に吸着した部品を撮像する部品撮像用のカメラ１６、１本又は複数本の吸着ノズルを保持する実装ヘッド１７等を搭載して構成されている。実装ヘッド１７は、ＸＹ移動機構（図示せず）によってＸＹ方向に移動され、部品吸着動作と部品実装動作を行うようになっている。各部品実装機１２の上部フレーム１８の前面部には、液晶ディスプレイ、ＣＲＴ等のモニタ１９（表示装置）と、操作キー、タッチパネル等の操作部２０が設けられている。操作部２０をタッチパネルで構成する場合は、モニタ１９の画面に操作部２０を表示するようにしても良い。
　各部品実装機１２は、上流側の部品実装機１２から搬送されてくる回路基板２１をコンベア１５によって所定位置まで搬送してクランプ機構（図示せず）で該回路基板２１をクランプして位置決めすると共に、フィーダ１４によって供給される部品を実装ヘッド１７の吸着ノズルで吸着して、その吸着位置から撮像位置へ移動させて部品撮像用のカメラ１６で撮像して該部品を画像認識してからコンベア１５上の回路基板２１に実装する。
　更に、各部品実装機１２の上部フレーム１８の前面部（作業者が作業する側の部分）には、各部品実装機１２の機外のうちの作業者が該部品実装機１２に対して作業する機外作業エリアを撮影する機外監視カメラ２３が設置されている。この場合、各部品実装機１２の機外作業エリアは、少なくともフィーダ１４がセットされるエリアを含み、監視対象は、少なくとも部品実装機１２へのフィーダ１４のセット中及びセット完了後の状態並びに該フィーダ１４への部品供給テープのセット中及びセット完了後の状態となっている。
　各部品実装機１２へのフィーダ１４のセット作業やフィーダ１４への部品供給テープのセット作業は、部品実装機１２の機外作業エリアで作業者が行う代表的な作業であるため、部品実装機１２へのフィーダ１４のセット中及びセット完了後の状態や該フィーダ１４への部品供給テープのセット中及びセット完了後の状態（詳しくは部品供給テープを巻回したリール２２のフィーダ１４へのセット中及びセット完了後の状態や該リール２２から引き出した部品供給テープのフィーダ１４へのセット中及びセット完了後の状態）を監視対象とすれば、機外作業エリアで発生しやすい代表的な作業ミスをリアルタイムで監視したり、部品実装機１２のエラー発生時にその原因となった作業ミスを特定することができる。
　各部品実装機１２の動作を制御する制御装置３１（図２参照）は、コンピュータを主体として構成され、稼働中（生産中）に、フィーダ１４によって供給される部品を実装ヘッド１７の吸着ノズルで吸着して、その吸着位置から撮像位置へ移動させて部品撮像用のカメラ１６で撮像して該部品を画像認識してからコンベア１５上の回路基板２１に実装するという動作を制御する。各部品実装機１２の制御装置３１には、上述した機外監視カメラ２３、モニタ１９、操作部２０等が接続されていると共に、部品実装機１１の各機能の動作を制御する各種制御プログラム等を記憶した記憶装置３２（図２参照）等が接続されている。この記憶装置３２は、ハードディスク装置等の書き換え可能な不揮発性の記憶媒体により構成され、機外監視カメラ２３で撮影した画像を録画する録画装置としても機能するようになっている。
　また、各部品実装機１２の制御装置３１は、稼働中（生産中）に、部品実装機１２の各機能の動作履歴のデータやフィーダ１４の動作履歴のデータを所定の文字コードで記述したトレースログをログファイルにして記憶装置３２に保存するようにしている。各部品実装機１２の制御装置３１は、機外監視カメラ２３で撮影した画像を記憶装置３２に録画する際に、部品実装機１２のエラー信号をトリガーにしてそのトリガーが発生した時刻よりも所定時間溯った時点から録画し、その録画する画像データには、部品実装機１２のトレースログと同じ時刻情報と録画時間とエラー情報をリンクさせると共に、部品実装機１２のエラー発生時に、記憶装置３２に録画した機外監視カメラ２３の画像を部品実装機１２のトレースログと同じ時刻情報と録画時間とエラー情報をリンクさせてモニタ１９に表示する機能も搭載されている。
　更に、各部品実装機１２の制御装置３１は、機外監視カメラ２３で撮影した画像を処理して監視対象の状態（部品実装機１２へのフィーダ１４のセット中及びセット完了後の状態並びに該フィーダ１４への部品供給テープのセット中及びセット完了後の状態）を認識する画像認識装置としても機能し、その画像認識結果に基づいて前記監視対象の状態が正常時の状態と異なることを検出したときにそれを部品実装機１２のモニタ１９等に警告表示したり、音声等で作業者に警告するようにしている。
　部品実装ライン１０を構成する各部品実装機１２の機外監視カメラ２３で撮影した画像と、その画像認識結果（正常／異常）のデータは、該部品実装ライン１０を管理するホストコンピュータ４１にも送信される。ホストコンピュータ４１は、受信した各部品実装機１２の機外監視カメラ２３の画像の中から、ホストコンピュータ４１を操作する管理者等が選択した部品実装機１２の機外監視カメラ２３の画像を該ホストコンピュータ４１のモニタ４２（表示装置）に表示したり、上述した画像認識結果に基づいて監視対象の状態が正常時の状態と異なることが検出されたときにそれをホストコンピュータ４１のモニタ４２に警告表示したり、音声等で管理者等に警告するようにしている。尚、ホストコンピュータ４１が管理する部品実装ライン１０の本数は、１本のみであっても良いし、複数本であっても良い。
　ホストコンピュータ４１で受信した各部品実装機１２の機外監視カメラ２３の画像と、その画像認識結果（正常／異常）のデータは、該ホストコンピュータ４１とネットワークで接続された外部のコンピュータ（以下「外部ＰＣ」と表記する）４３や携帯端末４４にも送信され、それらを操作する者（管理者、作業者、技術者等）が選択した部品実装機１２の機外監視カメラ２３の画像を該外部ＰＣ４３のモニタ４５（表示装置）や携帯端末４４の画面に表示したり、上述した画像認識結果に基づいて監視対象の状態が正常時の状態と異なることが検出されたときにそれを該外部ＰＣ４３のモニタ４５や携帯端末４４の画面に警告表示したり、音声等で警告するようにしている。
　尚、部品実装機１２の機外監視カメラ２３の画像を、ホストコンピュータ４１のモニタ４２や、外部ＰＣ４３のモニタ４５や、携帯端末４４の画面に表示する場合、それらを操作する者が選択した１台分の機外監視カメラ２３の画像のみを表示するようにしても良いし、モニタ４２，４５や携帯端末４４の画面を複数に分割して、１つの画面に複数台分の機外監視カメラ２３の画像を分割表示するようにしても良い。或は、モニタ４２，４５や携帯端末４４の画面に表示する１台分又は複数台分の機外監視カメラ２３の画像を所定時間毎に自動的に他の機外監視カメラ２３の画像に切り換えるようにしても良い。
　また、ホストコンピュータ４１、外部ＰＣ４３及び携帯端末４４は、各部品実装機１２の記憶装置３２に録画された機外監視カメラ２３の画像を各部品実装機１２のトレースログと同じ時刻情報付きでダウンロードして再生する機能も搭載されている。
　以上説明した本実施例では、部品実装機１２の機外作業エリアを機外監視カメラ２３で撮影してモニタ１９，４２，４５や携帯端末４４にリアルタイムで表示された画像又は部品実装機１２の記憶装置３２から読み出されて再生された画像を見て部品実装機１２の機外作業エリアで作業者が作業した監視対象の状態を確認できるため、部品実装機１２の稼働中にエラーの原因となる作業ミスの有無を監視して、エラー発生前に作業ミスを発見してエラーを未然に防いだり、作業ミスが原因でエラーが発生した場合でも、その原因となる作業ミスを機外作業エリアの画像から解明することができる。これにより、作業ミスが原因でエラーが発生した場合でも、そのエラーの原因が作業ミスであることを早期に解明してエラーを短時間で解決することができ、その分、部品実装機１２の稼働率を向上させることができる。また、監視結果により作業ミスの内容や作業ミスの発生頻度も分かるため、作業者への「作業ミス防止」の注意喚起も行いやすくなり、作業ミスの減少にも繋がる。
　しかも、本実施例では、機外監視カメラ２３で撮影した画像を、部品実装機１２のエラー信号をトリガーにしてそのトリガーが発生した時刻よりも所定時間溯った時点から録画し、その録画する画像データには、部品実装機１２のトレースログと同じ時刻情報と録画時間とエラー情報をリンクさせるようにしたので、部品実装機１２のエラー発生時に部品実装機１２の機外作業エリアの録画画像を、トレースログの解析結果やエラー情報と関連付けて確認することができ、部品実装機１２で発生したエラーの原因をより詳細に解析できる。
　更に、本実施例では、機外監視カメラ２３で撮影した画像を処理して監視対象の状態を認識する機能を搭載し、その画像認識結果に基づいて監視対象の状態が正常時の状態と異なることを検出したときにそれを警告表示するようにしたので、画像処理技術により作業ミスを自動的に検出できると共に、その作業ミスを警告表示して、作業ミスした作業をやり直すように作業者に促すことができる。
　尚、図１の構成例では、各部品実装機１２にそれぞれ機外監視カメラ２３を設置するようにしたが、１台の機外監視カメラ２３の視野内に複数台の部品実装機１２の機外作業エリアを収めて１台の機外監視カメラ２３で複数台の部品実装機１２の機外作業エリアをまとめて撮影するようにしても良い。
　また、部品実装機の前面側と背面側の２箇所に機外作業エリアが存在する場合は、部品実装機の前面側と背面側にそれぞれ機外監視カメラを設置して、前面側と背面側の２箇所の機外作業エリアを監視するようにすれば良い。
　その他、本発明は、機外監視カメラ２３の設置場所を変更したり、部品実装機１２の機外作業エリアに存在するフィーダ１４以外の物まで監視するようにしても良い等、要旨を逸脱しない範囲内で種々変更して実施できることは言うまでもない。
　１０…部品実装ライン、１２…部品実装機、１４…フィーダ、１９…部品実装機のモニタ（表示装置）、２２…リール、２３…機外監視カメラ、３１…部品実装機の制御装置（コンピュータ，画像認識装置）、３２…記憶装置（録画装置）、４１…ホストコンピュータ、４２…ホストコンピュータのモニタ（表示装置）、４３…外部ＰＣ（外部のコンピュータ）、４４…携帯端末、４５…外部ＰＣのモニタ（表示装置）

Claims (5)

  1. 　部品実装機の機外のうちの作業者が該部品実装機に対して作業する機外作業エリアを撮影する機外監視カメラと、
    　前記機外監視カメラで撮影した画像を表示する表示装置と、
    　前記機外監視カメラで撮影した画像を録画する録画装置とを備え、
    　前記表示装置にリアルタイムで表示された画像又は前記録画装置から読み出されて再生された画像を見て前記機外作業エリアで作業者が作業した監視対象の状態を確認できるようにしたことを特徴とする部品実装機の機外作業エリア監視システム。
  2. 　前記機外作業エリアは、少なくともフィーダがセットされるエリアを含み、
    　前記監視対象は、少なくとも前記部品実装機への前記フィーダのセット中及びセット完了後の状態並びに前記フィーダへの部品供給テープのセット中及びセット完了後の状態であることを特徴とする請求項１に記載の部品実装機の機外作業エリア監視システム。
  3. 　前記表示装置は、前記機外監視カメラが設置された前記部品実装機を制御するコンピュータのモニタ、前記部品実装機が設置された部品実装ラインを管理するホストコンピュータのモニタ、前記ホストコンピュータとネットワークで接続された外部のコンピュータのモニタ又は携帯端末のいずれかであることを特徴とする請求項１又は２に記載の部品実装機の機外作業エリア監視システム。
  4. 　前記録画装置は、前記機外監視カメラで撮影した画像を前記部品実装機のエラー信号をトリガーにしてそのトリガーが発生した時刻よりも所定時間溯った時点から録画し、その録画する画像データには、前記部品実装機のトレースログと同じ時刻情報と録画時間とエラー情報をリンクさせることを特徴とする請求項１乃至３のいずれかに記載の部品実装機の機外作業エリア監視システム。
  5. 　前記機外監視カメラで撮影した画像を処理して前記監視対象の状態を認識する画像認識装置を備え、前記画像認識装置の認識結果に基づいて前記監視対象の状態が正常時の状態と異なることを検出したときにそれを前記表示装置に表示することを特徴とする請求項１乃至４のいずれかに記載の部品実装機の機外作業エリア監視システム。
PCT/JP2016/078206 2016-09-26 2016-09-26 部品実装機の機外作業エリア監視システム WO2018055754A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2018540583A JP6823661B2 (ja) 2016-09-26 2016-09-26 部品実装機の機外作業エリア監視システム
EP16916821.8A EP3518643B1 (en) 2016-09-26 2016-09-26 System for monitoring outside work area of component mounting machine
US16/328,457 US11464149B2 (en) 2016-09-26 2016-09-26 System for monitoring outside work area of component mounting machine
CN201680089592.6A CN109792858B (zh) 2016-09-26 2016-09-26 元件安装机的机外作业区域监视系统
PCT/JP2016/078206 WO2018055754A1 (ja) 2016-09-26 2016-09-26 部品実装機の機外作業エリア監視システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/078206 WO2018055754A1 (ja) 2016-09-26 2016-09-26 部品実装機の機外作業エリア監視システム

Publications (1)

Publication Number Publication Date
WO2018055754A1 true WO2018055754A1 (ja) 2018-03-29

Family

ID=61690247

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/078206 WO2018055754A1 (ja) 2016-09-26 2016-09-26 部品実装機の機外作業エリア監視システム

Country Status (5)

Country Link
US (1) US11464149B2 (ja)
EP (1) EP3518643B1 (ja)
JP (1) JP6823661B2 (ja)
CN (1) CN109792858B (ja)
WO (1) WO2018055754A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020095399A1 (ja) * 2018-11-08 2020-05-14 ヤマハ発動機株式会社 部品実装装置
WO2020176137A1 (en) 2019-02-28 2020-09-03 Nanotronics Imaging, Inc. Dynamic training for assembly lines
WO2020176908A1 (en) 2019-02-28 2020-09-03 Nanotronics Imaging, Inc. Assembly error correction for assembly lines
US11703824B2 (en) 2019-02-28 2023-07-18 Nanotronics Imaging, Inc. Assembly error correction for assembly lines

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019089825A1 (en) * 2017-11-02 2019-05-09 AMP Robotics Corporation Systems and methods for optical material characterization of waste materials using machine learning
JP7213433B2 (ja) 2018-04-18 2023-01-27 パナソニックＩｐマネジメント株式会社 部品実装システムおよびテープ切屑回収装置
CN115004876B (zh) * 2020-03-11 2023-12-05 株式会社富士 管理装置、安装关联装置、安装系统、管理方法及安装关联装置的控制方法
CN113288190A (zh) * 2021-05-27 2021-08-24 上海联影医疗科技股份有限公司 一种监控系统及医学系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0216891A (ja) * 1988-07-04 1990-01-19 Kao Corp 録画の編集装置
JPH0738279A (ja) * 1993-07-22 1995-02-07 Matsushita Electric Ind Co Ltd 電子部品実装結果管理システム
JPH09102700A (ja) * 1995-10-09 1997-04-15 Matsushita Electric Ind Co Ltd 品質分析監視方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01251458A (ja) * 1988-03-31 1989-10-06 Sony Corp 監視装置
US6788987B2 (en) * 2001-03-07 2004-09-07 Siemens Electronic Assembly Systems, Inc. System and processes for performing quick changeovers on assembly lines
EP1343363A1 (en) * 2002-03-08 2003-09-10 TraceXpert A/S Feeder verification with a camera
TW200419640A (en) * 2003-02-25 2004-10-01 Matsushita Electric Ind Co Ltd Electronic component placement machine and electronic component placement method
US20060075631A1 (en) * 2004-10-05 2006-04-13 Case Steven K Pick and place machine with improved component pick up inspection
US8594983B2 (en) * 2006-03-20 2013-11-26 Duetto Integrated Systems, Inc. System for manufacturing laminated circuit boards
US8091215B2 (en) * 2006-08-23 2012-01-10 Yamaha Hatsudoki Kabushiki Kaisha Tape feeder and mounting apparatus
JP4901442B2 (ja) 2006-12-04 2012-03-21 東京エレクトロン株式会社 トラブル原因究明支援装置，トラブル原因究明支援方法，プログラムを記憶する記憶媒体
JP4870054B2 (ja) 2007-09-20 2012-02-08 ヤマハ発動機株式会社 基板処理装置、表面実装機、印刷機、検査機、及び塗布機
JP5438434B2 (ja) * 2008-08-29 2014-03-12 Ｊｕｋｉ株式会社 電子部品実装装置
JP5454482B2 (ja) * 2011-01-20 2014-03-26 パナソニック株式会社 部品実装装置および部品実装方法
JP5854553B2 (ja) * 2011-10-18 2016-02-09 富士電機株式会社 目視検査支援装置及び目視検査支援装置の制御方法
WO2014076755A1 (ja) * 2012-11-13 2014-05-22 富士機械製造株式会社 基板生産状況監視装置
JP6238989B2 (ja) * 2013-08-06 2017-11-29 三菱電機株式会社 列車内監視方法及び列車内監視システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0216891A (ja) * 1988-07-04 1990-01-19 Kao Corp 録画の編集装置
JPH0738279A (ja) * 1993-07-22 1995-02-07 Matsushita Electric Ind Co Ltd 電子部品実装結果管理システム
JPH09102700A (ja) * 1995-10-09 1997-04-15 Matsushita Electric Ind Co Ltd 品質分析監視方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3518643A4 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020095399A1 (ja) * 2018-11-08 2020-05-14 ヤマハ発動機株式会社 部品実装装置
WO2020176137A1 (en) 2019-02-28 2020-09-03 Nanotronics Imaging, Inc. Dynamic training for assembly lines
WO2020176908A1 (en) 2019-02-28 2020-09-03 Nanotronics Imaging, Inc. Assembly error correction for assembly lines
EP3912003A4 (en) * 2019-02-28 2022-10-12 Nanotronics Imaging, Inc. ASSEMBLY ERROR CORRECTION FOR ASSEMBLY LINES
EP3908892A4 (en) * 2019-02-28 2022-10-12 Nanotronics Imaging, Inc. DYNAMIC LEARNING FOR ASSEMBLY LINES
US11675330B2 (en) 2019-02-28 2023-06-13 Nanotronics Imaging, Inc. System and method for improving assembly line processes
US11703824B2 (en) 2019-02-28 2023-07-18 Nanotronics Imaging, Inc. Assembly error correction for assembly lines

Also Published As

Publication number Publication date
EP3518643B1 (en) 2024-03-27
CN109792858B (zh) 2022-06-14
US20210168976A1 (en) 2021-06-03
EP3518643A4 (en) 2019-10-02
EP3518643A1 (en) 2019-07-31
US11464149B2 (en) 2022-10-04
JPWO2018055754A1 (ja) 2019-07-04
CN109792858A (zh) 2019-05-21
JP6823661B2 (ja) 2021-02-03

Similar Documents

Publication Publication Date Title
WO2018055754A1 (ja) 部品実装機の機外作業エリア監視システム
EP2922380B1 (en) Substrate production state monitoring device
JP6835878B2 (ja) 生産管理装置
JP5661527B2 (ja) 部品実装ラインの生産管理装置及び生産管理方法
US10366486B2 (en) Image processing device, mounting processing system, image processing method and program
JP2003304100A (ja) 部品装着管理方法、装着検査装置および装着システム
JP2014241344A (ja) テープフィーダの部品向き確認システム
WO2020026350A1 (ja) トレース支援装置
JP2002176290A (ja) 部品供給装置、部品供給方法、並びに部品実装装置
JP5100684B2 (ja) 電子部品装着装置の管理システムにおける管理方法
JP5845414B2 (ja) 電子部品実装装置および電子部品実装装置におけるフィーダ状態監視方法
JP2006100332A (ja) 表面実装機
JP2017199740A (ja) 部品実装機の表示システム
JP2006245028A (ja) 部品搭載装置及びその段取り替え位置教示方法
JP2005045018A (ja) 部品搭載装置及びその異常状態早期検出方法
JPWO2016194236A1 (ja) 部品実装ラインの生産管理システム
JP6424236B2 (ja) 対基板作業管理装置
JP2000022392A (ja) 実装機の電子部品配置管理装置
JP2017045791A (ja) 部品実装方法および部品実装装置
KR102524763B1 (ko) Smt 공정 라인 에러 알림 장치
JP7121138B2 (ja) 部品実装装置
JP2022064020A (ja) 操作ログ管理方法、操作ログ管理プログラム及び操作ログ管理装置
JP2007035659A (ja) 部品搭載装置
JP2003179395A (ja) 部品搭載装置の部品搭載位置決め方法
US20220180580A1 (en) Component mounting management apparatus, component mounting management method, component mounting management program, and recording medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16916821

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018540583

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016916821

Country of ref document: EP