JP6035302B2 - Product placement support apparatus and product placement support method on surface plate in welding robot - Google Patents

Product placement support apparatus and product placement support method on surface plate in welding robot Download PDF

Info

Publication number
JP6035302B2
JP6035302B2 JP2014205383A JP2014205383A JP6035302B2 JP 6035302 B2 JP6035302 B2 JP 6035302B2 JP 2014205383 A JP2014205383 A JP 2014205383A JP 2014205383 A JP2014205383 A JP 2014205383A JP 6035302 B2 JP6035302 B2 JP 6035302B2
Authority
JP
Japan
Prior art keywords
image data
product
surface plate
bird
welding robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014205383A
Other languages
Japanese (ja)
Other versions
JP2016076052A (en
Inventor
慶太 渡邉
慶太 渡邉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Amada Co Ltd
Original Assignee
Amada Holdings Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Amada Holdings Co Ltd filed Critical Amada Holdings Co Ltd
Priority to JP2014205383A priority Critical patent/JP6035302B2/en
Priority to PCT/JP2015/071609 priority patent/WO2016056293A1/en
Publication of JP2016076052A publication Critical patent/JP2016076052A/en
Application granted granted Critical
Publication of JP6035302B2 publication Critical patent/JP6035302B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/04Viewing devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing

Description

本発明は、溶接ロボットの定盤上に製品を位置決めするための、溶接ロボットにおける定盤上への製品配置支援装置及び製品配置支援方法に関する。   The present invention relates to a product placement support apparatus and product placement support method on a surface plate in a welding robot for positioning a product on the surface plate of a welding robot.

溶接ロボットを用いて製品を溶接する際には、溶接加工プログラムを用いて溶接加工を実行させる。溶接加工プログラムを用いて溶接加工を実行させる際には、製品を、溶接加工プログラムが示す定盤上の正確な位置に配置する必要がある。   When a product is welded using a welding robot, a welding process is executed using a welding program. When performing welding using a welding program, it is necessary to place the product at an accurate position on the surface plate indicated by the welding program.

製品を定盤上の正確な位置に配置するために、オペレータは、複数のジグを、製品を位置決めするための基準として定盤上に配置する。オペレータは、製品をジグに突き当てるようにして定盤上に位置決めする。これによって、製品は定盤上の正確な位置に配置されることになる。   In order to place the product at a precise position on the surface plate, the operator places a plurality of jigs on the surface plate as a reference for positioning the product. The operator positions the product on the surface plate so as to abut the jig. As a result, the product is placed at an accurate position on the surface plate.

特開2014−79864号公報JP 2014-79864 A

製品を溶接加工するロット数が多い場合には、製品を正確な位置に配置するためのジグを個々の製品に対応するように設計して製作すればよい。しかしながら、ロット数が少なく、多品種少量生産を行う場合には、製品ごとにジグを設計して製作することは困難である。   If the number of lots for welding the product is large, a jig for arranging the product at an accurate position may be designed and manufactured so as to correspond to each product. However, when the number of lots is small and multi-product small-quantity production is performed, it is difficult to design and manufacture jigs for each product.

多品種少量生産を行う場合には、複数の製品で汎用的に使用可能な簡易ジグが用いられる。ところが、簡易ジグを用いると、製品を定盤上の正確な位置に位置決めするのは容易ではない。そこで、製品を定盤上の正確な位置に容易に位置決めすることができる製品配置支援装置及び製品配置支援方法が望まれる。   When performing multi-product small-quantity production, simple jigs that can be used universally with a plurality of products are used. However, if a simple jig is used, it is not easy to position the product at an accurate position on the surface plate. Therefore, a product placement support apparatus and product placement support method that can easily position a product at an accurate position on a surface plate are desired.

本発明はこのような要望に対応するため、製品を定盤上の正確な位置に容易に位置決めすることができる溶接ロボットにおける定盤上への製品配置支援装置及び製品配置支援方法を提供することを目的とする。   In order to meet such a demand, the present invention provides a product placement support apparatus and product placement support method on a surface plate in a welding robot capable of easily positioning a product at an accurate position on the surface plate. With the goal.

本発明は、上述した従来の技術の課題を解決するため、製品を配置する前の状態の定盤を前記定盤の上方の固定位置より撮影した第1の画像データに、前記製品を上方より見た鳥瞰画像データを重畳して、第2の画像データを生成する鳥瞰画像重畳部と、前記第2の画像データをモニタに表示させるよう制御する表示制御部と、前記製品を前記定盤上に配置する前の状態の前記定盤を前記固定位置より撮影した第1の静止画データのうち、前記鳥瞰画像データを重畳する領域を固定画像データに置換した第1の置換画像データと、前記製品を前記定盤上に配置した状態の前記定盤を前記固定位置より撮影した第2の静止画データのうち、前記鳥瞰画像データを重畳する領域を前記固定画像データに置換した第2の置換画像データとを生成する置換画像生成部と、前記第1の置換画像データと前記第2の置換画像データとの差分値を生成する差分生成部と、前記差分生成部が生成した差分値に基づいて、前記製品が前記定盤上の定められた位置に配置されているか否かを判定する判定部とを備えることを特徴とする溶接ロボットにおける定盤上への製品配置支援装置を提供する。   In order to solve the above-described problems of the prior art, the present invention provides a first image data obtained by photographing a surface plate in a state before placing a product from a fixed position above the surface plate, the product from above. A bird's-eye image superimposing unit that superimposes the seen bird's-eye image data to generate second image data, a display control unit that controls to display the second image data on a monitor, and the product on the surface plate The first replacement image data in which the region where the bird's-eye image data is superimposed is replaced with the fixed image data among the first still image data obtained by photographing the surface plate in a state before being placed on the fixed position; Of the second still image data obtained by photographing the surface plate with the product placed on the surface plate from the fixed position, the second replacement is performed by replacing the area where the bird's-eye image data is superimposed with the fixed image data. Generate image data Based on the difference image generated by the replacement image generation unit, the difference generation unit that generates a difference value between the first replacement image data and the second replacement image data, and the difference value generated by the difference generation unit, the product is There is provided a product placement support apparatus on a surface plate in a welding robot, comprising: a determination unit that determines whether or not the surface is disposed at a predetermined position on the surface plate.

上記の溶接ロボットにおける定盤上への製品配置支援装置において、前記判定部によって前記製品が前記定盤上の定められた位置に配置されていないと判定されたとき、オペレータに対して、前記製品が前記定盤上の定められた位置に配置されていない旨を報知する報知部をさらに備えることが好ましい。   In the product placement support apparatus on the surface plate in the welding robot, when the determination unit determines that the product is not disposed at a predetermined position on the surface plate, the product is provided to an operator. It is preferable to further provide a notifying unit for notifying that is not arranged at a predetermined position on the surface plate.

上記の溶接ロボットにおける定盤上への製品配置支援装置において、前記判定部によって前記製品が前記定盤上の定められた位置に配置されていないと判定されたとき、前記報知部は、前記製品をジグで固定することを促すよう報知することが好ましい。   In the product placement support apparatus on the surface plate in the welding robot, when the determination unit determines that the product is not disposed at a predetermined position on the surface plate, the notification unit It is preferable to notify so as to prompt the user to fix the jig with a jig.

上記の溶接ロボットにおける定盤上への製品配置支援装置において、前記鳥瞰画像重畳部が前記第1の画像データに重畳する前記鳥瞰画像データとして、ワイヤフレーム形式の鳥瞰画像データとサーフェス形式の鳥瞰画像データとを選択する鳥瞰画像選択部をさらに備えることが好ましい。   In the product placement support apparatus on the surface plate in the welding robot, the bird's-eye image superimposing unit superimposes the first image data on the bird's-eye image data as a wire-frame format bird's-eye image data and a surface format bird's-eye image. It is preferable to further include a bird's-eye image selection unit that selects data.

本発明は、上述した従来の技術の課題を解決するため、前記製品を配置する前の状態の定盤を前記定盤の上方の固定位置より撮影した第1の画像データを生成し、前記第1の画像データに前記製品を上方より見た鳥瞰画像データを重畳して、第2の画像データを生成し、前記第2の画像データをモニタに表示し、前記製品を前記定盤上に配置する前の状態の前記定盤を前記固定位置より撮影した第1の静止画データを生成し、前記第1の静止画データのうち、前記鳥瞰画像データを重畳する領域を固定画像データに置換した第1の置換画像データを生成し、前記製品を前記定盤上に配置した状態の前記定盤を前記固定位置より撮影した第2の静止画データを生成し、前記第2の静止画データのうち、前記鳥瞰画像データを重畳する領域を前記固定画像データに置換した第2の置換画像データを生成し、前記第1の置換画像データと前記第2の置換画像データとを比較し、前記第1の置換画像データと前記第2の置換画像データとの比較結果に基づいて、前記製品が前記定盤上の定められた位置に配置されているか否かを判定することを特徴とする溶接ロボットにおける定盤上への製品配置支援方法を提供する。   In order to solve the above-described problems of the related art, the present invention generates first image data obtained by photographing a surface plate in a state before placing the product from a fixed position above the surface plate, The second image data is generated by superimposing bird's-eye image data of the product viewed from above on one image data, the second image data is displayed on a monitor, and the product is placed on the surface plate First still image data obtained by photographing the surface plate in a state before starting from the fixed position is generated, and a region in which the bird's-eye image data is superimposed is replaced with fixed image data in the first still image data. Generating first replacement image data, generating second still image data obtained by photographing the surface plate in a state where the product is arranged on the surface plate from the fixed position, and generating the second still image data Of these, the region where the bird's-eye image data is superimposed is Second replacement image data replaced with constant image data is generated, the first replacement image data is compared with the second replacement image data, and the first replacement image data and the second replacement image are compared. Provided is a product placement support method on a surface plate in a welding robot, wherein it is determined whether or not the product is disposed at a predetermined position on the surface plate based on a comparison result with data. To do.

上記の溶接ロボットにおける定盤上への製品配置支援方法において、前記製品を溶接するために前記溶接ロボットを制御する溶接加工プログラムが示す溶接位置と、前記定盤上に配置された前記製品の実際の溶接位置とのずれ量が、前記溶接ロボットによる溶接位置を補正する補正プログラムによる補正可能範囲内であるとき、前記製品が前記定盤上の定められた位置に配置されていると判定し、前記ずれ量が、前記補正可能範囲内にないとき、前記製品が前記定盤上の定められた位置に配置されていないと判定することが好ましい。   In the product placement support method on the surface plate in the welding robot, a welding position indicated by a welding processing program for controlling the welding robot to weld the product, and an actual state of the product placed on the surface plate When the amount of deviation from the welding position is within a correctable range by a correction program for correcting the welding position by the welding robot, it is determined that the product is arranged at a predetermined position on the surface plate, When the deviation amount is not within the correctable range, it is preferable to determine that the product is not disposed at a predetermined position on the surface plate.

上記の溶接ロボットにおける定盤上への製品配置支援方法において、前記製品が前記定盤上の定められた位置に配置されていないと判定したとき、オペレータに対して、前記定盤上の前記製品の位置の修正を促すよう報知することが好ましい。   In the product placement support method on the surface plate in the welding robot, when it is determined that the product is not disposed at a predetermined position on the surface plate, the product on the surface plate is notified to an operator. It is preferable to notify the user to urge correction of the position.

上記の溶接ロボットにおける定盤上への製品配置支援方法において、前記製品が前記定盤上の定められた位置に配置されていると判定したとき、オペレータに対して、前記製品をジグで固定することを促すよう報知することが好ましい。   In the product placement support method on the surface plate in the welding robot, when it is determined that the product is disposed at a predetermined position on the surface plate, the product is fixed to the operator with a jig. It is preferable to notify so as to prompt the user.

本発明の溶接ロボットにおける定盤上への製品配置支援装置及び製品配置支援方法によれば、製品を定盤上の正確な位置に容易に位置決めすることができる。   According to the product placement support apparatus and the product placement support method on the surface plate in the welding robot of the present invention, the product can be easily positioned at an accurate position on the surface plate.

一実施形態の製品配置支援装置を含む溶接ロボットシステムを示す図である。It is a figure which shows the welding robot system containing the product arrangement | positioning assistance apparatus of one Embodiment. 図1中のNC装置12の機能的な内部構成例を示すブロック図である。It is a block diagram which shows the functional internal structural example of NC apparatus 12 in FIG. モニタに表示され、カメラからの画像データに鳥瞰画像データが重畳されている状態の画像を示す図である。It is a figure which shows the image of the state displayed on the monitor and the bird's-eye view image data superimposed on the image data from a camera. ワイヤフレーム形式の鳥瞰画像データとサーフェス形式の鳥瞰画像データとを示す図である。It is a figure which shows the bird's-eye image data of a wire frame format, and the bird's-eye image data of a surface format. 製品配置前の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを白の画像データに置換した置換画像データを視覚的に示す図である。It is a figure which shows visually the substituted image data which replaced the image data of the area | region which superimposes a bird's-eye image data with the white image data among the still image data before product arrangement | positioning. 製品配置後の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを白の画像データに置換した置換画像データを視覚的に示す図である。It is a figure which shows visually the substituted image data which replaced the image data of the area | region which superimposes bird's-eye image data among the still image data after product arrangement | positioning with the white image data. 一実施形態の製品配置支援方法によって実行される製品配置支援手順を含み、溶接ロボットシステムで実行される製品の溶接加工手順を示すフローチャートである。It is a flowchart which shows the product processing assistance procedure performed with the welding robot system including the product placement assistance procedure performed by the product placement assistance method of one Embodiment.

以下、一実施形態の溶接ロボットにおける定盤上への製品配置支援装置及び製品配置支援方法について、添付図面を参照して説明する。   Hereinafter, a product placement support apparatus and product placement support method on a surface plate in a welding robot according to an embodiment will be described with reference to the accompanying drawings.

図1は、一実施形態の製品配置支援装置を含んで構成されている溶接ロボットシステムを示している。図1において、CAM11には、図示していないCADで作成されたCADデータファイルD10が入力される。CADデータファイルD10のCADデータは、製品の形状データを含む。   FIG. 1 shows a welding robot system that includes a product arrangement support device according to an embodiment. In FIG. 1, a CAD data file D10 created by a CAD (not shown) is input to the CAM 11. The CAD data of the CAD data file D10 includes product shape data.

CAM11は、溶接ヘッド22を後述する製品の撮影位置に移動するための移動プログラムを作成する。また、CAM11は、製品を溶接ロボット20によって溶接する際に用いる溶接加工プログラムを作成する。溶接加工プログラムは、製品の加工位置を示す座標情報を含む。   The CAM 11 creates a movement program for moving the welding head 22 to a product shooting position described later. Further, the CAM 11 creates a welding processing program used when the product is welded by the welding robot 20. The welding processing program includes coordinate information indicating the processing position of the product.

CAM11は、CADデータ(製品の形状データ)に基づいて、製品を上方から見た鳥瞰画像を示す鳥瞰画像データを作成する。CAM11は、ワイヤフレーム形式の鳥瞰画像データと、サーフェス形式の鳥瞰画像データとの双方を作成することが好ましい。ワイヤフレーム形式の鳥瞰画像データ及びサーフェス形式の鳥瞰画像データについての詳細は後述する。   Based on CAD data (product shape data), the CAM 11 creates bird's-eye image data indicating a bird's-eye image of the product viewed from above. It is preferable that the CAM 11 creates both the bird's-eye image data in the wire frame format and the bird's-eye image data in the surface format. Details of the wire-frame format bird's-eye image data and the surface-format bird's-eye image data will be described later.

NC装置12は、CADデータファイルD10と、CAM11によって作成された移動プログラム及び溶接加工プログラムと、鳥瞰画像データとを記憶部13に記憶させる。   The NC device 12 causes the storage unit 13 to store the CAD data file D10, the movement program and welding program created by the CAM 11, and the bird's-eye image data.

NC装置12は、記憶部13に記憶させた移動プログラム及び溶接加工プログラムを、それぞれ所定のタイミングで、溶接ロボット20を制御するロボット制御装置28に転送する。   The NC device 12 transfers the moving program and the welding program stored in the storage unit 13 to the robot control device 28 that controls the welding robot 20 at predetermined timings.

NC装置12が溶接ロボット20を直接制御してもよい。この場合、NC装置12は、記憶部13に記憶させた移動プログラム及び溶接加工プログラムを、それぞれ所定のタイミングで読み出す。   The NC device 12 may directly control the welding robot 20. In this case, the NC device 12 reads the movement program and the welding program stored in the storage unit 13 at predetermined timings.

NC装置12は、定盤27上に製品を配置する前に移動プログラムをロボット制御装置28に転送すればよい。NC装置12は、遅くとも製品の溶接を開始する前に溶接加工プログラムをロボット制御装置28に転送すればよい。   The NC device 12 may transfer the movement program to the robot control device 28 before placing the product on the surface plate 27. The NC device 12 may transfer the welding processing program to the robot control device 28 before starting the welding of the product at the latest.

NC装置12には、モニタ14と操作部15が接続されている。操作部15は、例えばキーボードとマウスを含む。オペレータは、操作部15を操作することによって、製品配置支援装置(溶接ロボットシステム)に対して各種の入力操作を行うことができる。   A monitor 14 and an operation unit 15 are connected to the NC device 12. The operation unit 15 includes a keyboard and a mouse, for example. The operator can perform various input operations on the product placement support device (welding robot system) by operating the operation unit 15.

溶接ロボット20は、多関節のロボット本体21を有する。ロボット本体21の先端部には、溶接ヘッド22が取り付けられている。溶接ヘッド22にはレーザ発振器23が接続されており、レーザ発振器23はレーザ光を溶接ヘッド22に供給する。   The welding robot 20 has an articulated robot body 21. A welding head 22 is attached to the tip of the robot body 21. A laser oscillator 23 is connected to the welding head 22, and the laser oscillator 23 supplies laser light to the welding head 22.

溶接ヘッド22は、カメラ24を内蔵している。カメラ24は、溶接ヘッド22がレーザ光を射出する方向と同じ方向に向けられている。カメラ24を溶接ヘッド22の外側に取り付けてもよい。但し、カメラ24を溶接ヘッド22の内部に取り付ける方が好ましい。   The welding head 22 has a camera 24 built therein. The camera 24 is oriented in the same direction as the direction in which the welding head 22 emits laser light. The camera 24 may be attached to the outside of the welding head 22. However, it is preferable to attach the camera 24 to the inside of the welding head 22.

カメラ24を、溶接ロボット20を設置している建屋の天井等、溶接ロボット20の上方に設置してもよい。この場合には、カメラ24を、定盤27の全体を撮影することができる位置に設置することが必要である。   The camera 24 may be installed above the welding robot 20 such as a ceiling of a building where the welding robot 20 is installed. In this case, it is necessary to install the camera 24 at a position where the entire surface plate 27 can be photographed.

ロボット本体21は、ロボット制御装置28による制御に基づいて、レール26上を移動するようになっている。レール26の側面近傍には、製品を配置する定盤27が設置されている。なお、レール26がない溶接ロボット20も存在する。この場合、ロボット本体21の位置は固定である。   The robot body 21 moves on the rail 26 based on control by the robot control device 28. In the vicinity of the side surface of the rail 26, a surface plate 27 on which products are arranged is installed. There is also a welding robot 20 without the rail 26. In this case, the position of the robot body 21 is fixed.

溶接ヘッド22が下に向けられていれば、カメラ24は定盤27や定盤27上に配置された製品を撮影する。カメラ24による撮影画像は、ロボット本体21に取り付けられたモニタ25に供給されて表示される。また、カメラ24による撮影画像はNC装置12に供給されて、モニタ14にも表示される。モニタ25を省略して、モニタ14のみとしてもよい。   If the welding head 22 is directed downward, the camera 24 photographs the surface plate 27 and the product placed on the surface plate 27. An image captured by the camera 24 is supplied to a monitor 25 attached to the robot body 21 and displayed. In addition, an image captured by the camera 24 is supplied to the NC device 12 and displayed on the monitor 14. The monitor 25 may be omitted and only the monitor 14 may be used.

カメラ24は、オペレータが製品を定盤27上に配置して位置決めするまで定盤27または製品を撮影すればよい。溶接ロボット20が製品を溶接加工するときには、カメラ24は定盤27または製品を撮影しない。   The camera 24 may shoot the surface plate 27 or the product until the operator places the product on the surface plate 27 and positions the product. When the welding robot 20 welds a product, the camera 24 does not photograph the surface plate 27 or the product.

図2は、図1中のNC装置12の機能的な内部構成例を示している。図2に示すNC装置12は、本実施形態の製品配置支援装置を構成する。   FIG. 2 shows a functional internal configuration example of the NC apparatus 12 in FIG. The NC device 12 shown in FIG. 2 constitutes the product arrangement support device of this embodiment.

図2において、鳥瞰画像選択部121には、記憶部13より読み出されたワイヤフレーム形式の鳥瞰画像データまたはサーフェス形式の鳥瞰画像データが入力される。鳥瞰画像選択部121は、オペレータによる操作部15の入力操作に応じて、ワイヤフレーム形式の鳥瞰画像データと、サーフェス形式の鳥瞰画像データとを選択的に出力する。   In FIG. 2, the bird's-eye image selection unit 121 receives the bird's-eye image data in the wire frame format or the bird's-eye image data in the surface format read from the storage unit 13. The bird's-eye image selection unit 121 selectively outputs the wire-frame format bird's-eye image data and the surface-format bird's-eye image data in accordance with the input operation of the operation unit 15 by the operator.

鳥瞰画像選択部121は、ワイヤフレーム形式の鳥瞰画像データが選択されたらワイヤフレーム形式の鳥瞰画像データを記憶部13より読み出し、サーフェス形式の鳥瞰画像データが選択されたらサーフェス形式の鳥瞰画像データを記憶部13より読み出せばよい。鳥瞰画像データは、鳥瞰画像重畳部122に入力される。   The bird's-eye image selection unit 121 reads the wire-frame format bird's-eye image data from the storage unit 13 when the wire-frame format bird's-eye image data is selected, and stores the surface-format bird's-eye image data when the surface-format bird's-eye image data is selected. What is necessary is just to read from the part 13. The bird's eye image data is input to the bird's eye image superimposing unit 122.

移動プログラムがロボット制御装置28に転送されると、ロボット制御装置28は、溶接ヘッド22を移動プログラムに従って定盤27の上方の所定の位置へと移動させる。溶接ヘッド22は、所定の位置で固定される。カメラ24が定盤27の全体を撮影できる位置を所定の固定位置とすればよい。   When the movement program is transferred to the robot control device 28, the robot control device 28 moves the welding head 22 to a predetermined position above the surface plate 27 according to the movement program. The welding head 22 is fixed at a predetermined position. A position where the camera 24 can photograph the entire surface plate 27 may be set as a predetermined fixed position.

カメラ24は、定盤27を上方より撮影する。この時点では、定盤27上には製品が配置されていないため、カメラ24は製品が配置されていない状態の定盤27を撮影する。   The camera 24 photographs the surface plate 27 from above. At this time, since no product is arranged on the surface plate 27, the camera 24 takes an image of the surface plate 27 in which no product is arranged.

カメラ24が定盤27を撮影することによって生成した画像データは、鳥瞰画像重畳部122に入力される。鳥瞰画像重畳部122がカメラ24からの画像データに鳥瞰画像データを重畳しない状態では、鳥瞰画像重畳部122はカメラ24からの画像データをそのまま表示制御部123へと供給する。   Image data generated by the camera 24 photographing the surface plate 27 is input to the bird's eye image superimposing unit 122. When the bird's-eye image superimposing unit 122 does not superimpose the bird's-eye image data on the image data from the camera 24, the bird's-eye image superimposing unit 122 supplies the image data from the camera 24 to the display control unit 123 as it is.

カメラ24が、製品が配置されていない状態で定盤27を撮影して生成した画像データを第1の画像データと称することとする。表示制御部123は、第1の画像データをモニタ14に表示させる。   Image data generated by the camera 24 by photographing the surface plate 27 in a state where no product is arranged is referred to as first image data. The display control unit 123 causes the monitor 14 to display the first image data.

鳥瞰画像重畳部122は、操作部15によって、第1の画像データに鳥瞰画像データを重畳させる入力操作があったら、第1の画像データに鳥瞰画像データを重畳する。第1の画像データに鳥瞰画像データを重畳した画像データを第2の画像データと称することとする。鳥瞰画像重畳部122は、第2の画像データを表示制御部123へと供給する。   The bird's-eye image superimposing unit 122 superimposes the bird's-eye image data on the first image data when the operation unit 15 performs an input operation for superimposing the bird's-eye image data on the first image data. Image data obtained by superimposing bird's-eye image data on first image data will be referred to as second image data. The bird's eye image superimposing unit 122 supplies the second image data to the display control unit 123.

溶接ヘッド22が固定された状態であるので、カメラ24の位置は固定である。即ち、カメラ24は定盤27を固定位置より定点撮影する。   Since the welding head 22 is in a fixed state, the position of the camera 24 is fixed. That is, the camera 24 takes a fixed point image of the surface plate 27 from a fixed position.

よって、モニタ14のピクセル座標と、カメラ24が撮影している実空間座標とを対応させることができる。溶接加工プログラムに含まれる製品の加工位置はワールド座標で指定されており、実空間座標と同じである。   Therefore, the pixel coordinates of the monitor 14 and the real space coordinates captured by the camera 24 can be associated with each other. The processing position of the product included in the welding processing program is specified in world coordinates and is the same as real space coordinates.

鳥瞰画像重畳部122は、製品の加工位置を示す座標情報に基づいて、鳥瞰画像データをモニタ14のどの位置に、どの大きさで表示すればよいかを計算することができる。   The bird's-eye image superimposing unit 122 can calculate which position on the monitor 14 and which size the bird's-eye image data should be displayed based on the coordinate information indicating the processing position of the product.

表示制御部123は、第2の画像データをモニタ14に表示させる。図3は、モニタ14に第2の画像データが供給されて表示される画像の例を示している。   The display control unit 123 causes the monitor 14 to display the second image data. FIG. 3 shows an example of an image displayed when the second image data is supplied to the monitor 14.

図3に示すように、モニタ14には定盤27が表示されている。定盤27の画像上に、鳥瞰画像データに基づく鳥瞰画像300が表示されている。鳥瞰画像300は、定盤27上に、製品を配置する際の位置決めの基準となる。   As shown in FIG. 3, a surface plate 27 is displayed on the monitor 14. A bird's-eye image 300 based on the bird's-eye image data is displayed on the image of the surface plate 27. The bird's-eye view image 300 serves as a positioning reference when a product is arranged on the surface plate 27.

図3においては、鳥瞰画像300はワイヤフレーム形式で表示されている。ワイヤフレーム形式とは、図4の(a)に示すように、鳥瞰画像300を線分301で表現する形式である。図4の(b)に示すように、鳥瞰画像300を面302で表現する形式のサーフェス形式で表示してもよい。   In FIG. 3, the bird's-eye view image 300 is displayed in a wire frame format. The wire frame format is a format in which the bird's-eye view image 300 is expressed by a line segment 301 as shown in FIG. As shown in FIG. 4B, the bird's-eye view image 300 may be displayed in a surface format in which the surface 302 is expressed.

上記のように、オペレータは、操作部15を操作することによって、鳥瞰画像300をワイヤフレーム形式で表示するか、サーフェス形式で表示するかを選択することができる。   As described above, the operator can select whether to display the bird's-eye view image 300 in the wire frame format or the surface format by operating the operation unit 15.

鳥瞰画像300をワイヤフレーム形式とすれば、定盤27は鳥瞰画像300によってほとんど隠されないので、定盤27を確認しやすい。製品が成形や穴を含む場合には、ワイヤフレーム形式よりもサーフェス形式の方が、製品を定盤27上に配置する際に製品の向きを把握しやすいことがある。このような場合には、鳥瞰画像300をサーフェス形式とすればよい。   If the bird's-eye view image 300 is in a wire frame format, the surface plate 27 is hardly hidden by the bird's-eye view image 300, so that the surface plate 27 can be easily confirmed. When the product includes moldings and holes, the surface format may be easier to grasp the product orientation when the product is placed on the surface plate 27 than the wire frame format. In such a case, the bird's-eye view image 300 may be in a surface format.

モニタ14には、カメラ24からの画像データがリアルタイムで表示されている。モニタ14には、図3に示すように製品を配置する際の位置決めの基準となる鳥瞰画像300が表示されている。オペレータは、モニタ14を確認しながら、製品を鳥瞰画像300に一致させるように、定盤27上に配置すればよい。   The monitor 14 displays the image data from the camera 24 in real time. As shown in FIG. 3, the monitor 14 displays a bird's-eye view image 300 serving as a positioning reference when a product is arranged. The operator may place the product on the surface plate 27 so that the product matches the bird's-eye view image 300 while checking the monitor 14.

図2に戻り、静止画取り込み部124は、第1の画像データに基づいて、第1の静止画データを生成する。静止画取り込み部124は、連続的なフレームとして入力される第1の画像データをキャプチャして第1の静止画データを生成することができる。   Returning to FIG. 2, the still image capturing unit 124 generates first still image data based on the first image data. The still image capturing unit 124 can capture first image data input as continuous frames and generate first still image data.

カメラ24が静止画データを生成し、静止画取り込み部124が、カメラ24が生成した静止画データを取り込むようにしてもよい。第1の静止画データは、カメラ24が生成した静止画データである場合を含む。   The camera 24 may generate still image data, and the still image capturing unit 124 may capture still image data generated by the camera 24. The first still image data includes a case where it is still image data generated by the camera 24.

置換画像生成部125には、第1の静止画データと鳥瞰画像データとが入力される。置換画像生成部125は、第1の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを例えば白の画像データに置換する。   The replacement image generation unit 125 receives first still image data and bird's-eye image data. The replacement image generation unit 125 replaces the image data of the region where the bird's-eye image data is superimposed in the first still image data with, for example, white image data.

図5は、第1の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを白の画像データに置換した第1の置換画像データ410を視覚的に示している。第1の置換画像データ410はモニタ14に表示される画像データではないが、説明の都合上、第1の置換画像データ410を視覚的に説明することとする。   FIG. 5 visually shows the first replacement image data 410 obtained by replacing the image data of the region where the bird's-eye image data is superimposed with the white image data in the first still image data. Although the first replacement image data 410 is not image data displayed on the monitor 14, for convenience of explanation, the first replacement image data 410 will be described visually.

図5に示すように、定盤27の鳥瞰画像データを重畳する領域(図3の鳥瞰画像300の領域)は、白画像400となっている。白の画像データは固定画像データの一例である。鳥瞰画像データを重畳する領域の画像データを、単一色の画像データに置換すればよい。単一色とは白または黒を含む任意の色である。   As shown in FIG. 5, the region on which the bird's-eye image data of the surface plate 27 is superimposed (the region of the bird's-eye image 300 in FIG. 3) is a white image 400. White image data is an example of fixed image data. What is necessary is just to replace the image data of the area | region which superimposes a bird's-eye image data with the image data of a single color. A single color is any color including white or black.

図5に示す第1の置換画像データ410は、製品配置前の置換画像データである。図2に示すように、第1の置換画像データ410は、画像記憶部126に入力されて記憶される。   First replacement image data 410 shown in FIG. 5 is replacement image data before product placement. As shown in FIG. 2, the first replacement image data 410 is input and stored in the image storage unit 126.

オペレータが製品を定盤27上に配置した後、カメラ24が、製品が配置された状態で定盤27を撮影して生成した画像データを第3の画像データと称することとする。   Image data generated by the camera 24 photographing the surface plate 27 with the product disposed after the operator has placed the product on the surface plate 27 will be referred to as third image data.

静止画取り込み部124は、第3の画像データに基づいて、第2の静止画データを生成する。同様に、第2の静止画データは、カメラ24が生成した静止画データである場合を含む。   The still image capturing unit 124 generates second still image data based on the third image data. Similarly, the second still image data includes a case where it is still image data generated by the camera 24.

置換画像生成部125には、第2の静止画データと鳥瞰画像データとが入力される。置換画像生成部125は、第2の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを例えば白の画像データに置換する。   The replacement image generation unit 125 receives the second still image data and the bird's-eye image data. The replacement image generation unit 125 replaces the image data of the region where the bird's-eye image data is superimposed in the second still image data with, for example, white image data.

図6は、第2の静止画データのうち、鳥瞰画像データを重畳する領域の画像データを白の画像データに置換した第2の置換画像データ420を視覚的に示している。同様に、第2の置換画像データ420はモニタ14に表示される画像データではないが、説明の都合上、第2の置換画像データ420を視覚的に説明することとする。   FIG. 6 visually shows second replacement image data 420 obtained by replacing the image data of the region where the bird's-eye image data is superimposed with the white image data in the second still image data. Similarly, the second replacement image data 420 is not image data displayed on the monitor 14, but the second replacement image data 420 will be described visually for convenience of explanation.

図6に示すように、定盤27の鳥瞰画像データを重畳する領域は、白画像400となっている。第1の置換画像データ410と第2の置換画像データ420とで用いる固定画像データは同じとすることが必要である。   As shown in FIG. 6, the region where the bird's-eye image data of the surface plate 27 is superimposed is a white image 400. The fixed image data used in the first replacement image data 410 and the second replacement image data 420 needs to be the same.

図6は、オペレータが、製品を鳥瞰画像300とずれた状態で定盤27上に配置した場合の第2の置換画像データ420を示している。製品の位置が鳥瞰画像300とずれていることから、第2の置換画像データ420は、ハッチングを付して示すように、白画像400からはみ出した製品の一部である、はみ出し画像405を含む。   FIG. 6 shows the second replacement image data 420 when the operator places the product on the surface plate 27 in a state of being shifted from the bird's-eye view image 300. Since the position of the product is shifted from the bird's-eye view image 300, the second replacement image data 420 includes a protruding image 405, which is a part of the product protruding from the white image 400, as shown by hatching. .

図6に示す第2の置換画像データ420は、製品配置後の置換画像データである。図2に示すように、第2の置換画像データ420は、画像記憶部126に入力されて記憶される。   The second replacement image data 420 shown in FIG. 6 is replacement image data after product placement. As shown in FIG. 2, the second replacement image data 420 is input and stored in the image storage unit 126.

差分生成部127には、第1の置換画像データ410と第2の置換画像データ420とが入力される。差分生成部127には、第1の置換画像データ410と第2の置換画像データ420との差分値を生成する。   The difference generation unit 127 receives the first replacement image data 410 and the second replacement image data 420. The difference generation unit 127 generates a difference value between the first replacement image data 410 and the second replacement image data 420.

具体的には、差分生成部127には、第1の置換画像データ410と第2の置換画像データ420との同じピクセル位置の画像データ(ピクセルデータ)のピクセル差分値を求める。そして、差分生成部127には、フレーム全体のピクセル差分値を積算して、積算値を第1の置換画像データ410と第2の置換画像データ420との差分値とする。   Specifically, the difference generation unit 127 obtains a pixel difference value of image data (pixel data) at the same pixel position in the first replacement image data 410 and the second replacement image data 420. Then, the difference generation unit 127 integrates the pixel difference values of the entire frame, and uses the integrated value as a difference value between the first replacement image data 410 and the second replacement image data 420.

オペレータが、製品を鳥瞰画像300と完全に一致させるように定盤27上に配置すれば、第1の置換画像データ410と第2の置換画像データ420とはほぼ同一となる。よって、個々のピクセル差分値はほぼ0であり、ピクセル差分値を積算した差分値は極めて小さい値となる。差分生成部127からは、極めて小さい値の差分値が出力される。   If the operator places the product on the surface plate 27 so as to completely match the bird's-eye view image 300, the first replacement image data 410 and the second replacement image data 420 are substantially the same. Therefore, each pixel difference value is almost 0, and the difference value obtained by integrating the pixel difference values is an extremely small value. The difference generator 127 outputs a very small difference value.

オペレータが、図6のように製品を鳥瞰画像300とずれた状態で定盤27上に配置すれば、はみ出し画像405の部分で所定のピクセル差分値が生じる。よって、差分生成部127からは、比較的大きな値の差分値が出力される。   If the operator places the product on the surface plate 27 in a state shifted from the bird's-eye view image 300 as shown in FIG. 6, a predetermined pixel difference value is generated in the portion of the protruding image 405. Accordingly, the difference generation unit 127 outputs a relatively large difference value.

差分生成部127によって生成された差分値は、判定部128に入力される。判定部128は、入力された差分値に基づいて、製品が定盤27上の定められた位置に配置されているか否かを判定する。   The difference value generated by the difference generation unit 127 is input to the determination unit 128. The determination unit 128 determines whether or not the product is arranged at a predetermined position on the surface plate 27 based on the input difference value.

具体的には、判定部128は、差分値と所定の閾値とを比較し、差分値が閾値以下であれば、製品の位置を“可”と判定する。判定部128は、差分値が閾値を超えていれば、製品の位置を“不可”と判定する。   Specifically, the determination unit 128 compares the difference value with a predetermined threshold value, and determines that the product position is “possible” if the difference value is equal to or less than the threshold value. The determination unit 128 determines that the product position is “impossible” if the difference value exceeds the threshold value.

差分生成部127は、第1の置換画像データ410と第2の置換画像データ420との同じピクセル位置のピクセル差分値が所定の閾値を超えるピクセルを検出してもよい。このようにすれば、はみ出し画像405は白画像400に対して水平方向または垂直方向に何ピクセルのずれ量があるかが分かる。   The difference generation unit 127 may detect pixels in which the pixel difference value at the same pixel position in the first replacement image data 410 and the second replacement image data 420 exceeds a predetermined threshold. In this way, it can be seen how many pixels the protruding image 405 has in the horizontal or vertical direction with respect to the white image 400.

判定部128は、ずれ量が所定の閾値以下であれば、製品の位置を“可”と判定し、閾値を超えていれば、製品の位置を“不可”と判定すればよい。   The determination unit 128 may determine the product position as “possible” if the deviation amount is equal to or less than a predetermined threshold, and may determine the product position as “impossible” if the deviation exceeds the threshold.

差分生成部127における差分の取り方、判定部128における判定の仕方は種々考えられ、以上説明した例に限定されるものではない。第1の置換画像データ410と第2の置換画像データ420とを比較し、比較結果に基づいて、製品の位置が“可”であるか“不可”であるかを判定すればよい。   Various ways of taking the difference in the difference generation unit 127 and how to make the determination in the determination unit 128 are conceivable, and are not limited to the examples described above. The first replacement image data 410 and the second replacement image data 420 may be compared to determine whether the product position is “permitted” or “impossible” based on the comparison result.

ところで、溶接ロボットシステムは、通常、溶接加工プログラムが示す溶接位置と、定盤27上に配置された製品の実際の溶接位置とが多少ずれていても、補正プログラムによって溶接位置を補正して溶接加工することができる。   By the way, the welding robot system normally corrects the welding position by the correction program and welds even if the welding position indicated by the welding processing program and the actual welding position of the product arranged on the surface plate 27 are slightly deviated. Can be processed.

判定部128は、溶接加工プログラムが示す溶接位置と実際の溶接位置とのずれ量が、溶接ロボット20による溶接位置を補正する補正プログラムによる補正可能範囲内であれば“可”と判定すればよい。判定部128は、ずれ量が補正可能範囲内になければ“不可”と判定すればよい。   The determination unit 128 may determine “Yes” if the deviation amount between the welding position indicated by the welding processing program and the actual welding position is within the correction range by the correction program for correcting the welding position by the welding robot 20. . The determination unit 128 may determine “impossible” if the deviation amount is not within the correctable range.

判定部128は、判定結果を示す情報を表示制御部123に供給する。表示制御部123は、判定結果が“可”であれば、例えば、オペレータに、製品を簡易ジグで固定することを促す文字情報をモニタ14に表示させる。文字情報は、一例として、「製品が正しい位置に配置されました。製品をジグで固定してください。」のような文章である。   The determination unit 128 supplies information indicating the determination result to the display control unit 123. If the determination result is “OK”, the display control unit 123 causes the monitor 14 to display character information that prompts the operator to fix the product with a simple jig, for example. The text information is, for example, a sentence such as “Product has been placed in the correct position. Please fix the product with a jig”.

表示制御部123は、判定結果が“不可”であれば、例えば、オペレータに、製品の位置が正しい位置ではないことを警告し、位置の修正を促す文字情報をモニタ14に表示させる。文字情報は、一例として、「製品が正しい位置に配置されていません。製品の位置を修正してください。」のような文章である。   If the determination result is “impossible”, for example, the display control unit 123 warns the operator that the position of the product is not the correct position, and causes the monitor 14 to display character information that prompts the position to be corrected. As an example, the character information is a sentence such as “The product is not arranged at the correct position. Please correct the position of the product”.

オペレータに、判定結果が“可”の状態と“不可”の状態とを、図示していないスピーカによって発生させる音で報知してもよい。オペレータに、判定結果をモニタ14に表示させる視覚的な情報と、スピーカより発生させる聴覚的な情報との双方で報知してもよい。   The operator may be informed of the determination result “possible” and “impossible” with sounds generated by a speaker (not shown). The operator may be notified by both visual information for displaying the determination result on the monitor 14 and auditory information generated from the speaker.

表示制御部123及びモニタ14、または、スピーカ及びその駆動部は、製品が定盤27上の定められた位置に配置されていないと判定されたとき、オペレータに対して、製品が定盤27上の定められた位置に配置されていない旨を報知する報知部である。   When the display control unit 123 and the monitor 14 or the speaker and its driving unit determine that the product is not arranged at a predetermined position on the surface plate 27, the product is displayed on the surface plate 27 to the operator. It is an alerting | reporting part which alert | reports that it is not arrange | positioned in the predetermined position.

表示制御部123及びモニタ14、または、スピーカ及びその駆動部は、製品が定盤27上の定められた位置に配置されていると判定されたとき、オペレータに対して、製品をジグ(例えば簡易ジグ)で固定することを促すよう報知する報知部である。   When it is determined that the display control unit 123 and the monitor 14 or the speaker and the driving unit thereof are arranged at a predetermined position on the surface plate 27, the display control unit 123 and the monitor 14 jig the product (for example, simple). It is a notification part which notifies to urge fixing with a jig.

次に、図7に示すフローチャートを用いて、本実施形態の製品配置支援方法によって実行される製品配置支援手順と、溶接ロボットシステムで実行される製品の全体的な溶接加工手順を説明する。   Next, the product placement support procedure executed by the product placement support method of the present embodiment and the overall product welding procedure executed by the welding robot system will be described using the flowchart shown in FIG.

図7において、溶接ロボットシステムが動作を開始すると、CAM11は、ステップS01にて、溶接加工プログラムを作成する。CAM11は、ステップS02にて、CADデータに基づいて、製品の鳥瞰画像データを作成する。CAM11は、ステップS03にて、溶接ヘッド22の移動プログラムを作成する。   In FIG. 7, when the welding robot system starts operation, the CAM 11 creates a welding process program in step S01. In step S02, the CAM 11 creates bird's-eye image data of the product based on the CAD data. The CAM 11 creates a moving program for the welding head 22 in step S03.

ステップS01〜S03の順番は図7に示す順番に限定されず、いずれの順番でもよい。CAM11は、ステップS01〜S03を同時並行的に実行させてもよい。   The order of steps S01 to S03 is not limited to the order shown in FIG. 7, and any order may be used. The CAM 11 may execute steps S01 to S03 in parallel.

NC装置12は、ステップS04にて、移動プログラムを実行させる。これによって、溶接ヘッド22(カメラ24)は定盤27上方の固定位置に移動する。NC装置12は、ステップS05にて、カメラ24による撮影を開始する。モニタ14には、カメラ24からの画像データがリアルタイムで表示される。   In step S04, the NC device 12 executes the movement program. As a result, the welding head 22 (camera 24) moves to a fixed position above the surface plate 27. The NC device 12 starts photographing with the camera 24 in step S05. The monitor 14 displays the image data from the camera 24 in real time.

NC装置12は、溶接ヘッド22が移動を停止したら、カメラ24を起動させて撮影を開始させてもよいし、操作部15による撮影開始の入力操作があったら撮影を開始させてもよい。   When the welding head 22 stops moving, the NC device 12 may start the camera 24 to start shooting, or may start shooting when there is an input operation for starting shooting by the operation unit 15.

NC装置12は、ステップS06にて、第1の静止画データを取り込む。NC装置12は、ステップS07にて、第1の置換画像データを生成する。NC装置12は、ステップS08にて、第1の画像データに鳥瞰画像データを重畳して、第2の画像データを生成する。モニタ14には、図3に示すような第2の画像データが表示される。   The NC device 12 takes in the first still image data in step S06. In step S07, the NC apparatus 12 generates first replacement image data. In step S08, the NC device 12 superimposes the bird's-eye image data on the first image data to generate second image data. The monitor 14 displays the second image data as shown in FIG.

オペレータは、モニタ14を確認しながら、製品を鳥瞰画像300に一致させるように、定盤27上に配置する。製品の配置を完了したら、オペレータは、操作部15によって、製品の配置を完了したことを示す入力操作を行う。   The operator arranges the product on the surface plate 27 so that the product matches the bird's-eye view image 300 while checking the monitor 14. When the arrangement of the product is completed, the operator performs an input operation indicating that the arrangement of the product is completed by the operation unit 15.

NC装置12は、ステップS09にて、製品の配置完了入力があったか否かを判定する。配置完了入力がなければ(NO)、NC装置12は、処理をステップS09に戻して、配置完了の入力を待つ。配置完了入力があれば(YES)、NC装置12は、処理をステップS10に移行させる。   In step S09, the NC device 12 determines whether or not a product placement completion input has been received. If there is no placement completion input (NO), the NC device 12 returns the process to step S09 and waits for the placement completion input. If there is an arrangement completion input (YES), the NC device 12 shifts the process to step S10.

NC装置12は、ステップS10にて、第2の静止画データを取り込む。NC装置12は、ステップS11にて、第2の置換画像データを生成する。NC装置12は、ステップS12にて、第1の置換画像データと第2の置換画像データとを比較する。第1の置換画像データと第2の置換画像データとの比較とは、第1の置換画像データと第2の置換画像データとの差分値の生成であってよい。   The NC device 12 takes in the second still image data in step S10. In step S11, the NC device 12 generates second replacement image data. In step S12, the NC device 12 compares the first replacement image data with the second replacement image data. The comparison between the first replacement image data and the second replacement image data may be generation of a difference value between the first replacement image data and the second replacement image data.

NC装置12は、ステップS13にて、製品が補正可能範囲内に配置されているか否かを判定する。製品が補正可能範囲内に配置されていれば(YES)、NC装置12は、ステップS14にて、製品を簡易ジグで固定するよう指示する。   In step S13, the NC device 12 determines whether or not the product is disposed within the correctable range. If the product is located within the correctable range (YES), the NC device 12 instructs the product to be fixed with a simple jig in step S14.

製品を簡易ジグで固定したら、NC装置12は、ステップS15にて、補正プログラムを実行させて、溶接加工位置を補正する。NC装置12は、ステップS16にて、溶接加工プログラムを実行させて、製品を溶接加工して終了する。   After fixing the product with the simple jig, the NC device 12 executes the correction program in step S15 to correct the welding position. In step S16, the NC device 12 executes a welding program, welds the product, and ends.

一方、ステップS13にて製品が補正可能範囲内に配置されていなければ(NO)、NC装置12は、ステップS17にて、警告表示を実行させる。オペレータは、モニタ14を確認しながら、製品を鳥瞰画像300に一致させるように、位置を修正する。   On the other hand, if the product is not disposed within the correctable range in step S13 (NO), the NC device 12 causes a warning display to be executed in step S17. The operator corrects the position so that the product matches the bird's-eye view image 300 while checking the monitor 14.

NC装置12は、ステップS18にて、製品の位置修正完了入力があったか否かを判定する。位置修正完了入力があれば(YES)、NC装置12は、処理をステップS13に戻す。位置修正完了入力がなければ(NO)、NC装置12は、処理を終了させる。   In step S18, the NC device 12 determines whether or not a product position correction completion input has been received. If there is a position correction completion input (YES), the NC device 12 returns the process to step S13. If there is no position correction completion input (NO), the NC device 12 ends the process.

以上のように、本実施形態の製品配置支援装置及び製品配置支援方法によれば、製品を定盤上の正確な位置に容易に位置決めすることができる。   As described above, according to the product placement support apparatus and the product placement support method of the present embodiment, the product can be easily positioned at an accurate position on the surface plate.

本実施形態の製品配置支援装置及び製品配置支援方法によれば、個々の製品に対応したジグを設計して製作する必要はない。本実施形態の製品配置支援装置及び製品配置支援方法によれば、簡易ジグを用いて、製品を定盤上の正確な位置に位置決めすることが可能となる。   According to the product placement support apparatus and product placement support method of the present embodiment, there is no need to design and manufacture jigs corresponding to individual products. According to the product arrangement support device and the product arrangement support method of the present embodiment, it is possible to position the product at an accurate position on the surface plate using a simple jig.

本発明は以上説明した本実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。   The present invention is not limited to the embodiment described above, and various modifications can be made without departing from the scope of the present invention.

12 NC装置
14 モニタ(報知部)
20 溶接ロボット
24 カメラ
121 鳥瞰画像選択部
122 鳥瞰画像重畳部
123 表示制御部(報知部)
124 静止画取り込み部
125 置換画像生成部
126 画像記憶部
127 差分生成部
128 判定部
12 NC device 14 Monitor (notification part)
DESCRIPTION OF SYMBOLS 20 Welding robot 24 Camera 121 Bird's-eye view image selection part 122 Bird's-eye view image superimposition part 123 Display control part (notification part)
124 still image capturing unit 125 replacement image generation unit 126 image storage unit 127 difference generation unit 128 determination unit

Claims (8)

製品を配置する前の状態の定盤を前記定盤の上方の固定位置より撮影した第1の画像データに、前記製品を上方より見た鳥瞰画像データを重畳して、第2の画像データを生成する鳥瞰画像重畳部と、
前記第2の画像データをモニタに表示させるよう制御する表示制御部と、
前記製品を前記定盤上に配置する前の状態の前記定盤を前記固定位置より撮影した第1の静止画データのうち、前記鳥瞰画像データを重畳する領域を固定画像データに置換した第1の置換画像データと、前記製品を前記定盤上に配置した状態の前記定盤を前記固定位置より撮影した第2の静止画データのうち、前記鳥瞰画像データを重畳する領域を前記固定画像データに置換した第2の置換画像データとを生成する置換画像生成部と、
前記第1の置換画像データと前記第2の置換画像データとの差分値を生成する差分生成部と、
前記差分生成部が生成した差分値に基づいて、前記製品が前記定盤上の定められた位置に配置されているか否かを判定する判定部と、
を備えることを特徴とする溶接ロボットにおける定盤上への製品配置支援装置。
The second image data is obtained by superimposing the bird's-eye image data of the product viewed from above on the first image data obtained by photographing the surface plate in a state before placing the product from a fixed position above the surface plate. A bird's eye image superimposing unit to be generated;
A display control unit that controls to display the second image data on a monitor;
Of the first still image data obtained by photographing the surface plate in a state before the product is placed on the surface plate from the fixed position, a region where the bird's-eye image data is superimposed is replaced with fixed image data. Of the replacement image data and the second still image data obtained by photographing the surface plate with the product placed on the surface plate from the fixed position, the region where the bird's-eye image data is superimposed is the fixed image data. A replacement image generation unit for generating second replacement image data replaced with
A difference generation unit that generates a difference value between the first replacement image data and the second replacement image data;
A determination unit that determines whether or not the product is arranged at a predetermined position on the surface plate, based on the difference value generated by the difference generation unit;
An apparatus for assisting product placement on a surface plate in a welding robot.
前記判定部によって前記製品が前記定盤上の定められた位置に配置されていないと判定されたとき、オペレータに対して、前記製品が前記定盤上の定められた位置に配置されていない旨を報知する報知部をさらに備えることを特徴とする請求項1記載の溶接ロボットにおける定盤上への製品配置支援装置。   When the determination unit determines that the product is not disposed at a predetermined position on the surface plate, the operator is informed that the product is not disposed at the predetermined position on the surface plate. The product placement support device on the surface plate in the welding robot according to claim 1, further comprising a notification unit that notifies 前記判定部によって前記製品が前記定盤上の定められた位置に配置されていないと判定されたとき、前記報知部は、前記製品をジグで固定することを促すよう報知することを特徴とする請求項2記載の溶接ロボットにおける定盤上への製品配置支援装置。   When the determination unit determines that the product is not arranged at a predetermined position on the surface plate, the notification unit notifies the user to urge the product to be fixed with a jig. The product placement support device on a surface plate in the welding robot according to claim 2. 前記鳥瞰画像重畳部が前記第1の画像データに重畳する前記鳥瞰画像データとして、ワイヤフレーム形式の鳥瞰画像データとサーフェス形式の鳥瞰画像データとを選択する鳥瞰画像選択部をさらに備えることを特徴とする請求項1〜3のいずれか1項に記載の溶接ロボットにおける定盤上への製品配置支援装置。   The bird's-eye image superimposing unit further includes a bird's-eye image selection unit that selects wire-frame-type bird's-eye image data and surface-format bird's-eye image data as the bird's-eye image data to be superimposed on the first image data. The product arrangement | positioning assistance apparatus on the surface plate in the welding robot of any one of Claims 1-3 to do. 製品を配置する前の状態の定盤を前記定盤の上方の固定位置より撮影した第1の画像データを生成し、
前記第1の画像データに前記製品を上方より見た鳥瞰画像データを重畳して、第2の画像データを生成し、
前記第2の画像データをモニタに表示し、
前記製品を前記定盤上に配置する前の状態の前記定盤を前記固定位置より撮影した第1の静止画データを生成し、
前記第1の静止画データのうち、前記鳥瞰画像データを重畳する領域を固定画像データに置換した第1の置換画像データを生成し、
前記製品を前記定盤上に配置した状態の前記定盤を前記固定位置より撮影した第2の静止画データを生成し、
前記第2の静止画データのうち、前記鳥瞰画像データを重畳する領域を前記固定画像データに置換した第2の置換画像データを生成し、
前記第1の置換画像データと前記第2の置換画像データとを比較し、
前記第1の置換画像データと前記第2の置換画像データとの比較結果に基づいて、前記製品が前記定盤上の定められた位置に配置されているか否かを判定する
ことを特徴とする溶接ロボットにおける定盤上への製品配置支援方法。
Generating first image data obtained by photographing a surface plate in a state before placing a product from a fixed position above the surface plate;
The second image data is generated by superimposing bird's-eye image data of the product viewed from above on the first image data,
Displaying the second image data on a monitor;
Generating first still image data obtained by photographing the surface plate in a state before the product is placed on the surface plate from the fixed position;
Generating first replacement image data in which the region where the bird's-eye image data is superimposed in the first still image data is replaced with fixed image data;
Generating second still image data obtained by photographing the surface plate in a state where the product is arranged on the surface plate from the fixed position;
Generating second replacement image data in which the fixed image data is replaced with a region in which the bird's-eye image data is superimposed in the second still image data;
Comparing the first replacement image data with the second replacement image data;
It is determined whether or not the product is arranged at a predetermined position on the surface plate based on a comparison result between the first replacement image data and the second replacement image data. Product placement support method on surface plate in welding robot.
前記製品を溶接するために前記溶接ロボットを制御する溶接加工プログラムが示す溶接位置と、前記定盤上に配置された前記製品の実際の溶接位置とのずれ量が、前記溶接ロボットによる溶接位置を補正する補正プログラムによる補正可能範囲内であるとき、前記製品が前記定盤上の定められた位置に配置されていると判定し、前記ずれ量が、前記補正可能範囲内にないとき、前記製品が前記定盤上の定められた位置に配置されていないと判定することを特徴とする請求項5記載の溶接ロボットにおける定盤上への製品配置支援方法。   The amount of deviation between the welding position indicated by the welding processing program for controlling the welding robot to weld the product and the actual welding position of the product arranged on the surface plate is the welding position by the welding robot. When it is within the correctable range by the correction program to be corrected, it is determined that the product is arranged at a predetermined position on the surface plate, and when the deviation amount is not within the correctable range, the product 6. The method of supporting placement of a product on a surface plate in a welding robot according to claim 5, wherein it is determined that is not disposed at a predetermined position on the surface plate. 前記製品が前記定盤上の定められた位置に配置されていないと判定したとき、オペレータに対して、前記定盤上の前記製品の位置の修正を促すよう報知することを特徴とする請求項5または6に記載の溶接ロボットにおける定盤上への製品配置支援方法。   The operator is notified to prompt correction of the position of the product on the surface plate when it is determined that the product is not arranged at a predetermined position on the surface plate. A method for assisting product placement on a surface plate in the welding robot according to 5 or 6. 前記製品が前記定盤上の定められた位置に配置されていると判定したとき、オペレータに対して、前記製品をジグで固定することを促すよう報知することを特徴とする請求項5〜7のいずれか1項に記載の溶接ロボットにおける定盤上への製品配置支援方法。   8. When it is determined that the product is arranged at a predetermined position on the surface plate, an operator is notified to urge the operator to fix the product with a jig. The product placement support method on the surface plate in the welding robot according to any one of the above.
JP2014205383A 2014-10-06 2014-10-06 Product placement support apparatus and product placement support method on surface plate in welding robot Active JP6035302B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2014205383A JP6035302B2 (en) 2014-10-06 2014-10-06 Product placement support apparatus and product placement support method on surface plate in welding robot
PCT/JP2015/071609 WO2016056293A1 (en) 2014-10-06 2015-07-30 Article-disposition assistance device and article-disposition assistance method for disposing article on surface plate of welding robot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014205383A JP6035302B2 (en) 2014-10-06 2014-10-06 Product placement support apparatus and product placement support method on surface plate in welding robot

Publications (2)

Publication Number Publication Date
JP2016076052A JP2016076052A (en) 2016-05-12
JP6035302B2 true JP6035302B2 (en) 2016-11-30

Family

ID=55652918

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014205383A Active JP6035302B2 (en) 2014-10-06 2014-10-06 Product placement support apparatus and product placement support method on surface plate in welding robot

Country Status (2)

Country Link
JP (1) JP6035302B2 (en)
WO (1) WO2016056293A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6495989B1 (en) 2017-10-02 2019-04-03 株式会社アマダホールディングス Program creation apparatus, welding system, and program creation method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012143844A (en) * 2011-01-13 2012-08-02 Azbil Corp Automatic assembling system and automatic assembling method
JP6091153B2 (en) * 2012-10-18 2017-03-08 株式会社アマダホールディングス Welding robot system and placement method of placement object on surface plate in welding robot

Also Published As

Publication number Publication date
WO2016056293A1 (en) 2016-04-14
JP2016076052A (en) 2016-05-12

Similar Documents

Publication Publication Date Title
JP6286276B2 (en) Welding machine and control method thereof
JP2017039168A (en) Expansion real interface for arranging welding work order
US10235772B2 (en) Installation error display control apparatus and installation error detection apparatus of onboard camera
JP5523730B2 (en) In-vehicle peripheral image display device
JP2007006115A (en) Projector with distortion correcting means
JP6068429B2 (en) Robot identification system
JP5887526B2 (en) Work detection system
JP2006304100A (en) Multi-projection system and monitoring method
JP6035302B2 (en) Product placement support apparatus and product placement support method on surface plate in welding robot
JP2014223732A5 (en)
JP2009289046A (en) Operation support device and method using three-dimensional data
JP6198990B2 (en) Work instruction system
JP2017019241A (en) Injection molding system
JP2016181753A (en) Information processing apparatus, information processing method, program, and system
JP2017068849A (en) Article assembling status information display device
JP2007208905A (en) Information presenting apparatus
JP2012199772A (en) Projector and projector installation method
JP2007010419A (en) Three-dimensional shape of object verifying system
JP6220514B2 (en) Robot control system and robot control method
CN114746207B (en) Repair welding equipment and repair welding method
JP2019188467A (en) Recording device, welding support device, recording method and program
ES2926792T3 (en) workbench system
JP6559425B2 (en) Laser irradiation control device
JPWO2018096669A1 (en) Laser processing apparatus, laser processing method, and laser processing program
JP2006320962A (en) Welding tool monitoring device, image processor, and program

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161031

R150 Certificate of patent or registration of utility model

Ref document number: 6035302

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350