JP3787230B2 - 溶接状態監視装置およびその方法 - Google Patents
溶接状態監視装置およびその方法 Download PDFInfo
- Publication number
- JP3787230B2 JP3787230B2 JP01988098A JP1988098A JP3787230B2 JP 3787230 B2 JP3787230 B2 JP 3787230B2 JP 01988098 A JP01988098 A JP 01988098A JP 1988098 A JP1988098 A JP 1988098A JP 3787230 B2 JP3787230 B2 JP 3787230B2
- Authority
- JP
- Japan
- Prior art keywords
- welding
- processing unit
- image
- image processing
- geometric feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003466 welding Methods 0.000 title claims description 119
- 238000012544 monitoring process Methods 0.000 title claims description 13
- 238000000034 method Methods 0.000 title claims description 7
- 238000012545 processing Methods 0.000 claims description 109
- 238000003384 imaging method Methods 0.000 claims description 28
- 238000001914 filtration Methods 0.000 claims description 25
- 238000004364 calculation method Methods 0.000 claims description 18
- 239000002184 metal Substances 0.000 claims description 16
- 238000006243 chemical reaction Methods 0.000 claims description 13
- 239000000463 material Substances 0.000 claims description 8
- 238000010276 construction Methods 0.000 claims description 6
- 238000002844 melting Methods 0.000 claims description 6
- 230000008018 melting Effects 0.000 claims description 6
- 238000012806 monitoring device Methods 0.000 claims description 6
- 238000011156 evaluation Methods 0.000 claims description 4
- 230000004927 fusion Effects 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 2
- 238000012795 verification Methods 0.000 claims description 2
- 238000003331 infrared imaging Methods 0.000 description 7
- 238000001816 cooling Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- 238000011088 calibration curve Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005272 metallurgy Methods 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Radiation Pyrometers (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は溶接状態を監視する溶接状態監視装置およびその方法に係り、とりわけ非接触の温度計測により溶接状態を監視する溶接状態監視装置およびその方法に関する。
【０００２】
【従来の技術】
発電プラント等においては、高容量化および高効率化等の要求に伴って構造部材間の溶接施工箇所が増大する傾向にあり、溶接品質の確保が極めて重要な課題となってきている。
【０００３】
このような溶接施工は従来、熟練した溶接士による手溶接で行われることが多かった。しかしながら、熟練した溶接士はその確保が難しく、また多大な人件費がかかるので、自動溶接機等を用いて溶接施工を自動化することが望まれている。このような自動溶接機等においては例えば、撮像装置を有する画像処理装置等に視覚による作業を代替させる試みがなされている。
【０００４】
ところで、溶接施工においては、溶接施工後の溶接金属の温度変化を計測することにより、溶接施工後の溶接状態の冶金的健全性を評価できることが知られている。このような評価方法は、溶接士のスキル等に依存しない自動溶接機等において特に有用であり、自動溶接機等による溶接施工後に溶接状態の冶金的健全性を評価することにより、一定の溶接品質を確保することができる。なお従来においては、溶接施工後の溶接金属の温度変化を計測するために接触式のセンサが用いられている。
【０００５】
【発明が解決しようとする課題】
上述したように従来においては、溶接施工後の溶接金属の温度変化を計測するために接触式のセンサが用いられている。しかしながら、このような接触式のセンサでは、溶接施工中における溶融金属の温度変化を計測することができないので、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができず、このため溶接品質が良好な信頼性の高い溶接を実現することができなかった。
【０００６】
本発明はこのような点を考慮してなされたものであり、溶接施工表面上の温度変化を非接触で計測することにより、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができるようにする溶接状態監視装置およびその方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は、溶接施工表面を連続的に撮像して映像情報を出力する映像化装置と、前記映像化装置から出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を抽出する画像処理装置と、前記画像処理装置により抽出された前記幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する判定装置とを備え、前記映像化装置は溶接トーチを有する溶接台車に取り付けられ、前記画像処理装置は、前記映像化装置から出力された映像情報をディジタルデータからなる時系列画像に変換するＡ／Ｄ変換処理部と、このＡ／Ｄ変換処理部により変換された各時点の画像に含まれるノイズ成分を除去する空間フィルタリング処理部と、この空間フィルタリング処理部によりノイズ成分が除去された各時点の画像から前記溶接施工表面上に形成される溶融部に対応する溶融部領域を抽出する領域分割処理部と、この領域分割処理部により抽出された溶融部領域の境界線上に位置する幾何学的な特徴点を求める論理フィルタリング処理部と、前記溶接台車の移動量に基づいて前記各時点の画像間での前記幾何学的な特徴点同士の対応関係を決定する画素間演算処理部とを有することを特徴とする溶接状態監視装置を提供する。
【０００８】
また本発明は、溶接施工表面を連続的に撮像して映像情報を出力する工程と、出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を、連続的に撮像された映像情報に含まれる各時点の画像ごとに抽出する工程と、抽出された各時点の画像間で対応関係にある幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する工程とを含むことを特徴とする溶接状態監視方法を提供する。
【０００９】
本発明によれば、溶接施工表面を撮像して得られた映像情報から溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を、連続的に撮像された映像情報に含まれる各時点の画像ごとに抽出するとともに、この抽出された各時点の画像間での対応関係にある幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出するので、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができる。従って、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができ、このため溶接品質が良好な信頼性の高い溶接を実現することができる。
【００１０】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。図１乃至図３は本発明による溶接状態監視装置の一実施の形態を示す図である。
【００１１】
まず、図１により、溶接状態監視装置の全体構成について説明する。図１に示すように、溶接状態監視装置は、溶接施工表面２０を連続的に撮像して映像信号（映像情報）を出力する映像化装置１と、映像化装置１から出力された映像信号に画像処理を施して溶接施工表面２０上に形成される溶融部（溶融池）２０ａに対応する幾何学的な特徴点を抽出する画像処理装置２と、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する判定装置３と、画像処理装置２による処理結果または判定装置３による評価結果を表示する表示装置４とを備えている。
【００１２】
このうち映像化装置１は、溶接施工表面２０から所定距離だけ離間して配置され溶接施工表面２０を連続的に撮像して映像信号を出力する赤外線撮像装置１ａと、赤外線撮像装置１ａに入力される入力光から溶接アーク光の影響を除去するためのバンドパスフィルタ１ｂとを有している。ここでバンドパスフィルタ１ｂは、赤外線波長帯域の光のみを選択的に透過させる狭帯域のフィルタである。また、赤外線撮像装置１ａおよびバンドパスフィルタ１ｂからなる映像化装置１は、溶接トーチ２１を有する溶接台車（図示せず）に取り付けられ、溶接施工中に溶接台車の移動（図１中の矢印の方向）に伴って移動するようになっている。ここで、映像化装置１の赤外線撮像装置１ａにより溶接施工表面２０を撮像して得られた映像信号は常時画像処理装置２に入力されるようになっている。
【００１３】
また画像処理装置２は、図２に示すように、映像化装置１の赤外線撮像装置１ａから出力された映像信号（アナログ信号）を標本および量子化して８ビットで２５６階調のディジタル信号（ディジタルデータ）からなる時系列画像に変換するＡ／Ｄ変換処理部５と、Ａ／Ｄ変換処理部５により変換された各時点の画像を順次保存するフレームメモリ６とを有している。ここでフレームメモリ６は、少なくとも第１フレームおよび第２フレームを有し、Ａ／Ｄ変換処理部５により変換された各時点の画像が順次保存されるようになっている。また画像処理装置２は、フレームメモリ６に保存された各時点の画像を平滑化して各時点の画像に含まれるノイズ成分を除去する空間フィルタリング処理部７と、空間フィルタリング処理部７によりノイズ成分が除去された各時点の画像（濃淡画像）を二階調の画像に変換するとともに、この変換された二階調の画像を領域分割して溶融部２０ａに対応する溶融部領域を抽出する領域分割処理部８と、領域分割処理部８により抽出された溶融部領域と母材領域との境界線上に位置する幾何学的な特徴点の座標値を求める論理フィルタリング処理部９とを有している。さらに画像処理装置２は、溶接台車の移動量と映像化装置１および溶接台車の物理的な位置関係と基づいて各時点の画像間での幾何学的な特徴点同士の対応関係を決定する画素間演算処理部１０を有している。
【００１４】
ここで、画像処理装置２のＡ／Ｄ変換処理部５、フレームメモリ６、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々はデータ転送用バス１２，１３を介して互いに接続されている。また、画像処理装置２のＡ／Ｄ変換処理部５、フレームメモリ６、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々はＣＰＵ１１により制御され、フレームメモリ６に保存された各時点の画像に対して空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々により画像処理が施されるようになっている。
【００１５】
さらに判定装置３は、溶接状態の冶金的健全性を評価するための材料（例えば母材）別の判定データを保持するデータベース１４と、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいてデータベース１４を参照して溶接施工中における溶接状態の冶金的健全性を評価する比較照合部１５とを有している。ここで比較照合部１５においては、画像処理装置２により抽出された各時点の画像間で対応関係にある幾何学的な特徴点の輝度値を時系列的に並べ替え、あらかじめ求められた校正曲線に基づいて絶対温度に校正して温度変化を算出するとともに、この算出結果（すなわち溶融金属の冷却速度）と、データベース１４に保持された材料別の判定データとを比較して所定の推論規則（例えばｉｆ−ｔｈｅｎルール）に従って溶接状態の冶金的健全性を評価するようになっている。
【００１６】
次に、このような構成からなる本実施の形態の作用について説明する。
【００１７】
図３に示すように、画像処理装置２に対して処理開始命令が与えられると、映像化装置１の赤外線撮像装置１ａから出力された映像信号（アナログ信号）が画像処理装置２のＡ／Ｄ変換処理部５に入力され、標本および量子化により８ビットで２５６階調のディジタル信号（ディジタルデータ）からなる時系列画像に変換される（ステップ１０１）。なお、変換後の各時点の画像はフレームメモリ６の第１フレームに保存される（ステップ１０２）。
【００１８】
その後、画像処理装置２において、フレームメモリ６の第１フレームに保存された所定時点の画像に対して空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０により画像処理が施され、溶接施工表面２０上に形成される溶融部２０ａに対応する幾何学的な特徴点が抽出される。
【００１９】
具体的には、まず、空間フィルタリング処理部７により、フレームメモリ６の第１フレームに保存された所定時点の画像を平滑化して画像に含まれるノイズ成分を除去し（ステップ１０３）、次いで、領域分割処理部８により、空間フィルタリング処理部７によりノイズ成分が除去された所定時点の画像（濃淡画像）を二階調の画像に変換するとともに、この変換された二階調の画像を領域分割して溶融部２０ａに対応する溶融部領域を抽出する（ステップ１０４）。
【００２０】
このようにして溶融部２０ａに対応する溶融部領域が抽出されると、論理フィルタリング処理部９により、領域分割処理部８により抽出された溶融部領域と母材領域との境界線を抽出するとともに（ステップ１０５）、この境界線上に位置する幾何学的な特徴点の座標値を求める（ステップ１０６）。
【００２１】
ここで、上述したステップ１０１乃至１０６の画像処理が時系列画像の最初の時点の画像（１枚目の画像）に対してなされた場合には（ステップ１０７）、フレームメモリ６の第１フレームに保存された画像を第２フレームにコピーした後（ステップ１０８）、次の時点の画像に対して上述したステップ１０１乃至１０６の処理を繰り返す。
【００２２】
一方、上述したステップ１０１乃至１０６の画像処理が時系列画像の２番目以降の時点の画像（２枚目以降の画像）に対してなされた場合には（ステップ１０７）、画素間演算処理部１０により、溶接台車の移動量と、映像化装置１および溶接台車の物理的な位置関係と基づいてフレームメモリ６の第１フレームおよび第２フレームに保存された画像の幾何学的な特徴点同士の対応関係を決定するとともに（ステップ１０９）、対応関係が決定された幾何学的な特徴点の輝度値を算出する（ステップ１１０）。なお、算出された幾何学的な特徴点の輝度値は記憶装置（図示せず）内に時系列的に保存される。
【００２３】
その後、判定装置３において、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化が算出され、この算出結果に基づいて溶接状態の冶金的健全性が評価される。
【００２４】
具体的には、判定装置３の比較照合部１５により、画像処理装置２により抽出された各時点の画像の幾何学的な特徴点の輝度値を時系列的に並べ替え、あらかじめ求められた校正曲線に基づいて絶対温度に校正して温度変化を算出するとともに、この算出結果（すなわち溶融金属の冷却速度）と、データベース１４に保持された材料別の判定データとを比較して所定の推論規則（例えばｉｆ−ｔｈｅｎルール）に従って溶接状態の冶金的健全性を評価する（ステップ１１１）。
【００２５】
このようにして判定装置３により溶接状態の冶金的健全性が評価されると、その評価結果は、表示装置４の画面上に表示されるとともに、記憶装置内に保存される（ステップ１１２）。
【００２６】
なお、上述したステップ１０１乃至１１２の処理は、判定装置３により溶接状態が異常であると評価され、または溶接が終了するまで繰り返される（ステップ１１３）。
【００２７】
このように本実施の形態によれば、画像処理装置２において、映像化装置１により溶接施工表面２０を撮像して得られた映像信号から溶接施工表面２０上に形成される溶融部２０ａに対応する幾何学的な特徴点を抽出するとともに、この抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、次いで、判定装置３により、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができる。従って、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができ、このため溶接品質が良好な信頼性の高い溶接を実現することができる。
【００２８】
なお上述した実施の形態において、画像処理装置２のＡ／Ｄ変換処理部５、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０等はいずれもＡ／Ｄ変換ボードまたは演算ユニット等としてハードウェア的に実現することができる他、プログラムモジュールとしてソフトウェア的に実現することもできる。
【００２９】
【発明の効果】
以上説明したように本発明によれば、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができるので、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性の評価しつつ自動溶接を進めることができ、これにより溶接品質が良好な信頼性の高い溶接を実現することができる。
【図面の簡単な説明】
【図１】本発明による溶接状態監視装置の一実施の形態を示すブロック図。
【図２】図１に示す画像処理装置および判定装置の詳細を示すブロック図。
【図３】図１および図２に示す溶接状態監視装置の作用を説明するためのフローチャート。
【符号の説明】
１ 映像化装置
１ａ 赤外線撮像装置
１ｂ バンドパスフィルタ
２ 画像処理装置
３ 判定装置
４ 表示装置
５ Ａ／Ｄ変換処理部
６ フレームメモリ
７ 空間フィルタリング処理部
８ 領域分割処理部
９ 論理フィルタリング処理部
１０ 画素間演算処理部
１１ ＣＰＵ
１２，１３ データ転送用バス
１４ データベース
１５ 比較照合部
２０ 溶接施工表面
２０ａ 溶融部
２１ 溶接トーチ
【発明の属する技術分野】
本発明は溶接状態を監視する溶接状態監視装置およびその方法に係り、とりわけ非接触の温度計測により溶接状態を監視する溶接状態監視装置およびその方法に関する。
【０００２】
【従来の技術】
発電プラント等においては、高容量化および高効率化等の要求に伴って構造部材間の溶接施工箇所が増大する傾向にあり、溶接品質の確保が極めて重要な課題となってきている。
【０００３】
このような溶接施工は従来、熟練した溶接士による手溶接で行われることが多かった。しかしながら、熟練した溶接士はその確保が難しく、また多大な人件費がかかるので、自動溶接機等を用いて溶接施工を自動化することが望まれている。このような自動溶接機等においては例えば、撮像装置を有する画像処理装置等に視覚による作業を代替させる試みがなされている。
【０００４】
ところで、溶接施工においては、溶接施工後の溶接金属の温度変化を計測することにより、溶接施工後の溶接状態の冶金的健全性を評価できることが知られている。このような評価方法は、溶接士のスキル等に依存しない自動溶接機等において特に有用であり、自動溶接機等による溶接施工後に溶接状態の冶金的健全性を評価することにより、一定の溶接品質を確保することができる。なお従来においては、溶接施工後の溶接金属の温度変化を計測するために接触式のセンサが用いられている。
【０００５】
【発明が解決しようとする課題】
上述したように従来においては、溶接施工後の溶接金属の温度変化を計測するために接触式のセンサが用いられている。しかしながら、このような接触式のセンサでは、溶接施工中における溶融金属の温度変化を計測することができないので、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができず、このため溶接品質が良好な信頼性の高い溶接を実現することができなかった。
【０００６】
本発明はこのような点を考慮してなされたものであり、溶接施工表面上の温度変化を非接触で計測することにより、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができるようにする溶接状態監視装置およびその方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明は、溶接施工表面を連続的に撮像して映像情報を出力する映像化装置と、前記映像化装置から出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を抽出する画像処理装置と、前記画像処理装置により抽出された前記幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する判定装置とを備え、前記映像化装置は溶接トーチを有する溶接台車に取り付けられ、前記画像処理装置は、前記映像化装置から出力された映像情報をディジタルデータからなる時系列画像に変換するＡ／Ｄ変換処理部と、このＡ／Ｄ変換処理部により変換された各時点の画像に含まれるノイズ成分を除去する空間フィルタリング処理部と、この空間フィルタリング処理部によりノイズ成分が除去された各時点の画像から前記溶接施工表面上に形成される溶融部に対応する溶融部領域を抽出する領域分割処理部と、この領域分割処理部により抽出された溶融部領域の境界線上に位置する幾何学的な特徴点を求める論理フィルタリング処理部と、前記溶接台車の移動量に基づいて前記各時点の画像間での前記幾何学的な特徴点同士の対応関係を決定する画素間演算処理部とを有することを特徴とする溶接状態監視装置を提供する。
【０００８】
また本発明は、溶接施工表面を連続的に撮像して映像情報を出力する工程と、出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を、連続的に撮像された映像情報に含まれる各時点の画像ごとに抽出する工程と、抽出された各時点の画像間で対応関係にある幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する工程とを含むことを特徴とする溶接状態監視方法を提供する。
【０００９】
本発明によれば、溶接施工表面を撮像して得られた映像情報から溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を、連続的に撮像された映像情報に含まれる各時点の画像ごとに抽出するとともに、この抽出された各時点の画像間での対応関係にある幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出するので、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができる。従って、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができ、このため溶接品質が良好な信頼性の高い溶接を実現することができる。
【００１０】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について説明する。図１乃至図３は本発明による溶接状態監視装置の一実施の形態を示す図である。
【００１１】
まず、図１により、溶接状態監視装置の全体構成について説明する。図１に示すように、溶接状態監視装置は、溶接施工表面２０を連続的に撮像して映像信号（映像情報）を出力する映像化装置１と、映像化装置１から出力された映像信号に画像処理を施して溶接施工表面２０上に形成される溶融部（溶融池）２０ａに対応する幾何学的な特徴点を抽出する画像処理装置２と、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する判定装置３と、画像処理装置２による処理結果または判定装置３による評価結果を表示する表示装置４とを備えている。
【００１２】
このうち映像化装置１は、溶接施工表面２０から所定距離だけ離間して配置され溶接施工表面２０を連続的に撮像して映像信号を出力する赤外線撮像装置１ａと、赤外線撮像装置１ａに入力される入力光から溶接アーク光の影響を除去するためのバンドパスフィルタ１ｂとを有している。ここでバンドパスフィルタ１ｂは、赤外線波長帯域の光のみを選択的に透過させる狭帯域のフィルタである。また、赤外線撮像装置１ａおよびバンドパスフィルタ１ｂからなる映像化装置１は、溶接トーチ２１を有する溶接台車（図示せず）に取り付けられ、溶接施工中に溶接台車の移動（図１中の矢印の方向）に伴って移動するようになっている。ここで、映像化装置１の赤外線撮像装置１ａにより溶接施工表面２０を撮像して得られた映像信号は常時画像処理装置２に入力されるようになっている。
【００１３】
また画像処理装置２は、図２に示すように、映像化装置１の赤外線撮像装置１ａから出力された映像信号（アナログ信号）を標本および量子化して８ビットで２５６階調のディジタル信号（ディジタルデータ）からなる時系列画像に変換するＡ／Ｄ変換処理部５と、Ａ／Ｄ変換処理部５により変換された各時点の画像を順次保存するフレームメモリ６とを有している。ここでフレームメモリ６は、少なくとも第１フレームおよび第２フレームを有し、Ａ／Ｄ変換処理部５により変換された各時点の画像が順次保存されるようになっている。また画像処理装置２は、フレームメモリ６に保存された各時点の画像を平滑化して各時点の画像に含まれるノイズ成分を除去する空間フィルタリング処理部７と、空間フィルタリング処理部７によりノイズ成分が除去された各時点の画像（濃淡画像）を二階調の画像に変換するとともに、この変換された二階調の画像を領域分割して溶融部２０ａに対応する溶融部領域を抽出する領域分割処理部８と、領域分割処理部８により抽出された溶融部領域と母材領域との境界線上に位置する幾何学的な特徴点の座標値を求める論理フィルタリング処理部９とを有している。さらに画像処理装置２は、溶接台車の移動量と映像化装置１および溶接台車の物理的な位置関係と基づいて各時点の画像間での幾何学的な特徴点同士の対応関係を決定する画素間演算処理部１０を有している。
【００１４】
ここで、画像処理装置２のＡ／Ｄ変換処理部５、フレームメモリ６、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々はデータ転送用バス１２，１３を介して互いに接続されている。また、画像処理装置２のＡ／Ｄ変換処理部５、フレームメモリ６、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々はＣＰＵ１１により制御され、フレームメモリ６に保存された各時点の画像に対して空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０の各々により画像処理が施されるようになっている。
【００１５】
さらに判定装置３は、溶接状態の冶金的健全性を評価するための材料（例えば母材）別の判定データを保持するデータベース１４と、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいてデータベース１４を参照して溶接施工中における溶接状態の冶金的健全性を評価する比較照合部１５とを有している。ここで比較照合部１５においては、画像処理装置２により抽出された各時点の画像間で対応関係にある幾何学的な特徴点の輝度値を時系列的に並べ替え、あらかじめ求められた校正曲線に基づいて絶対温度に校正して温度変化を算出するとともに、この算出結果（すなわち溶融金属の冷却速度）と、データベース１４に保持された材料別の判定データとを比較して所定の推論規則（例えばｉｆ−ｔｈｅｎルール）に従って溶接状態の冶金的健全性を評価するようになっている。
【００１６】
次に、このような構成からなる本実施の形態の作用について説明する。
【００１７】
図３に示すように、画像処理装置２に対して処理開始命令が与えられると、映像化装置１の赤外線撮像装置１ａから出力された映像信号（アナログ信号）が画像処理装置２のＡ／Ｄ変換処理部５に入力され、標本および量子化により８ビットで２５６階調のディジタル信号（ディジタルデータ）からなる時系列画像に変換される（ステップ１０１）。なお、変換後の各時点の画像はフレームメモリ６の第１フレームに保存される（ステップ１０２）。
【００１８】
その後、画像処理装置２において、フレームメモリ６の第１フレームに保存された所定時点の画像に対して空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０により画像処理が施され、溶接施工表面２０上に形成される溶融部２０ａに対応する幾何学的な特徴点が抽出される。
【００１９】
具体的には、まず、空間フィルタリング処理部７により、フレームメモリ６の第１フレームに保存された所定時点の画像を平滑化して画像に含まれるノイズ成分を除去し（ステップ１０３）、次いで、領域分割処理部８により、空間フィルタリング処理部７によりノイズ成分が除去された所定時点の画像（濃淡画像）を二階調の画像に変換するとともに、この変換された二階調の画像を領域分割して溶融部２０ａに対応する溶融部領域を抽出する（ステップ１０４）。
【００２０】
このようにして溶融部２０ａに対応する溶融部領域が抽出されると、論理フィルタリング処理部９により、領域分割処理部８により抽出された溶融部領域と母材領域との境界線を抽出するとともに（ステップ１０５）、この境界線上に位置する幾何学的な特徴点の座標値を求める（ステップ１０６）。
【００２１】
ここで、上述したステップ１０１乃至１０６の画像処理が時系列画像の最初の時点の画像（１枚目の画像）に対してなされた場合には（ステップ１０７）、フレームメモリ６の第１フレームに保存された画像を第２フレームにコピーした後（ステップ１０８）、次の時点の画像に対して上述したステップ１０１乃至１０６の処理を繰り返す。
【００２２】
一方、上述したステップ１０１乃至１０６の画像処理が時系列画像の２番目以降の時点の画像（２枚目以降の画像）に対してなされた場合には（ステップ１０７）、画素間演算処理部１０により、溶接台車の移動量と、映像化装置１および溶接台車の物理的な位置関係と基づいてフレームメモリ６の第１フレームおよび第２フレームに保存された画像の幾何学的な特徴点同士の対応関係を決定するとともに（ステップ１０９）、対応関係が決定された幾何学的な特徴点の輝度値を算出する（ステップ１１０）。なお、算出された幾何学的な特徴点の輝度値は記憶装置（図示せず）内に時系列的に保存される。
【００２３】
その後、判定装置３において、画像処理装置２により抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化が算出され、この算出結果に基づいて溶接状態の冶金的健全性が評価される。
【００２４】
具体的には、判定装置３の比較照合部１５により、画像処理装置２により抽出された各時点の画像の幾何学的な特徴点の輝度値を時系列的に並べ替え、あらかじめ求められた校正曲線に基づいて絶対温度に校正して温度変化を算出するとともに、この算出結果（すなわち溶融金属の冷却速度）と、データベース１４に保持された材料別の判定データとを比較して所定の推論規則（例えばｉｆ−ｔｈｅｎルール）に従って溶接状態の冶金的健全性を評価する（ステップ１１１）。
【００２５】
このようにして判定装置３により溶接状態の冶金的健全性が評価されると、その評価結果は、表示装置４の画面上に表示されるとともに、記憶装置内に保存される（ステップ１１２）。
【００２６】
なお、上述したステップ１０１乃至１１２の処理は、判定装置３により溶接状態が異常であると評価され、または溶接が終了するまで繰り返される（ステップ１１３）。
【００２７】
このように本実施の形態によれば、画像処理装置２において、映像化装置１により溶接施工表面２０を撮像して得られた映像信号から溶接施工表面２０上に形成される溶融部２０ａに対応する幾何学的な特徴点を抽出するとともに、この抽出された幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、次いで、判定装置３により、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができる。従って、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性を評価しつつ自動溶接を進めることができ、このため溶接品質が良好な信頼性の高い溶接を実現することができる。
【００２８】
なお上述した実施の形態において、画像処理装置２のＡ／Ｄ変換処理部５、空間フィルタリング処理部７、領域分割処理部８、論理フィルタリング処理部９および画素間演算処理部１０等はいずれもＡ／Ｄ変換ボードまたは演算ユニット等としてハードウェア的に実現することができる他、プログラムモジュールとしてソフトウェア的に実現することもできる。
【００２９】
【発明の効果】
以上説明したように本発明によれば、溶接施工中における溶接状態の冶金的健全性を非接触で評価することができるので、溶接士のスキル等に依存しない自動溶接機等において、溶接施工中における溶接状態の冶金的健全性の評価しつつ自動溶接を進めることができ、これにより溶接品質が良好な信頼性の高い溶接を実現することができる。
【図面の簡単な説明】
【図１】本発明による溶接状態監視装置の一実施の形態を示すブロック図。
【図２】図１に示す画像処理装置および判定装置の詳細を示すブロック図。
【図３】図１および図２に示す溶接状態監視装置の作用を説明するためのフローチャート。
【符号の説明】
１ 映像化装置
１ａ 赤外線撮像装置
１ｂ バンドパスフィルタ
２ 画像処理装置
３ 判定装置
４ 表示装置
５ Ａ／Ｄ変換処理部
６ フレームメモリ
７ 空間フィルタリング処理部
８ 領域分割処理部
９ 論理フィルタリング処理部
１０ 画素間演算処理部
１１ ＣＰＵ
１２，１３ データ転送用バス
１４ データベース
１５ 比較照合部
２０ 溶接施工表面
２０ａ 溶融部
２１ 溶接トーチ
Claims (7)
- 溶接施工表面を連続的に撮像して映像情報を出力する映像化装置と、
前記映像化装置から出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を抽出する画像処理装置と、
前記画像処理装置により抽出された前記幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する判定装置とを備え、
前記映像化装置は溶接トーチを有する溶接台車に取り付けられ、
前記画像処理装置は、前記映像化装置から出力された映像情報をディジタルデータからなる時系列画像に変換するＡ／Ｄ変換処理部と、このＡ／Ｄ変換処理部により変換された各時点の画像に含まれるノイズ成分を除去する空間フィルタリング処理部と、この空間フィルタリング処理部によりノイズ成分が除去された各時点の画像から前記溶接施工表面上に形成される溶融部に対応する溶融部領域を抽出する領域分割処理部と、この領域分割処理部により抽出された溶融部領域の境界線上に位置する幾何学的な特徴点を求める論理フィルタリング処理部と、前記溶接台車の移動量に基づいて前記各時点の画像間での前記幾何学的な特徴点同士の対応関係を決定する画素間演算処理部とを有することを特徴とする溶接状態監視装置。 - 前記映像化装置は、溶接施工表面を連続的に撮像して映像情報を出力する撮像装置と、前記撮像装置に入力される入力光から溶接アーク光の影響を除去するバンドパスフィルタとを有することを特徴とする請求項１記載の溶接状態監視装置。
- 前記画像処理装置は前記各時点の画像を順次保存するフレームメモリをさらに有し、このフレームメモリに保存された各時点の画像に対して前記空間フィルタリング処理部、前記領域分割処理部、前記論理フィルタリング処理部および前記画素間演算処理部の各々により画像処理が施されることを特徴とする請求項１記載の溶接状態監視装置。
- 前記判定装置は、溶接状態の冶金的健全性を評価するための材料別の判定データを保持するデータベースと、前記画像処理装置により抽出された前記幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて前記データベースを参照して溶接状態の冶金的健全性を評価する比較照合部とを有することを特徴とする請求項１記載の溶接状態監視装置。
- 前記判定装置の前記比較照合部は、前記画像処理装置により抽出された前記幾何学的な特徴点の輝度変化に基づいて算出された溶接施工中における溶融金属の温度変化と、前記データベースに保持された材料別の判定データとを比較して所定の推論規則に従って溶接状態の冶金的健全性を評価することを特徴とする請求項４記載の溶接状態監視装置。
- 前記画像処理装置による処理結果または前記判定装置による評価結果を表示する表示装置をさらに備えたことを特徴とする請求項１記載の溶接状態監視装置。
- 溶接施工表面を連続的に撮像して映像情報を出力する工程と、
出力された映像情報に画像処理を施して前記溶接施工表面上に形成される溶融部に対応する幾何学的な特徴点を、連続的に撮像された映像情報に含まれる各時点の画像ごとに抽出する工程と、
抽出された各時点の画像間で対応関係にある幾何学的な特徴点の輝度変化に基づいて溶接施工中における溶融金属の温度変化を算出し、この算出結果に基づいて溶接状態の冶金的健全性を評価する工程とを含むことを特徴とする溶接状態監視方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP01988098A JP3787230B2 (ja) | 1998-01-30 | 1998-01-30 | 溶接状態監視装置およびその方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP01988098A JP3787230B2 (ja) | 1998-01-30 | 1998-01-30 | 溶接状態監視装置およびその方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH11216563A JPH11216563A (ja) | 1999-08-10 |
| JP3787230B2 true JP3787230B2 (ja) | 2006-06-21 |
Family
ID=12011535
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP01988098A Expired - Fee Related JP3787230B2 (ja) | 1998-01-30 | 1998-01-30 | 溶接状態監視装置およびその方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3787230B2 (ja) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2406904A (en) * | 2003-10-09 | 2005-04-13 | Asahi Chemical Ind | Measuring the melting, softening or decomposition points by detecting a change in luminosity or reflectance of the sample |
| CN106325247B (zh) * | 2016-08-29 | 2019-04-23 | 中国一冶集团有限公司 | 施工现场电焊机信息动态管理装置、系统及方法 |
-
1998
- 1998-01-30 JP JP01988098A patent/JP3787230B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH11216563A (ja) | 1999-08-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3176537B1 (en) | System for automated in-process inspection of welds | |
| JP2023521379A (ja) | 溶接品質のｉｎ－ｓｉｔｕ検査のための方法 | |
| JP2006281270A (ja) | 手溶接作業分析装置および手溶接作業分析装置に適用する手溶接トーチ一体型監視カメラ | |
| CN111157539B (zh) | 焊缝形貌监控方法、系统、装置及可读存储介质 | |
| US20080237197A1 (en) | System and method for welding and real time monitoring of seam welded parts | |
| JP6191160B2 (ja) | 画像処理プログラムおよび画像処理装置 | |
| US20240335910A1 (en) | Welding phenomenon behavior measuring method, measuring device, welding system, and program | |
| JP2019174931A (ja) | 輪郭抽出装置及び輪郭抽出方法 | |
| JP3787230B2 (ja) | 溶接状態監視装置およびその方法 | |
| JP4513962B2 (ja) | 擬似欠陥画像作成方法及びこれを用いた装置 | |
| CN117169227A (zh) | 插头的生产方法、装置、设备及存储介质 | |
| JPH0224542A (ja) | 鋳片断面の品質評価装置 | |
| JP2769036B2 (ja) | 架空線の自動点検方法 | |
| JPH05149728A (ja) | 視覚認識装置 | |
| JPH06103967B2 (ja) | 架空線点検用画像処理装置 | |
| JP2543370B2 (ja) | 視覚センサを使用したシ―ラント検査方法 | |
| JP2002205166A (ja) | 溶接状態表示装置 | |
| JP5510398B2 (ja) | 溶接部検査装置 | |
| JPH06103968B2 (ja) | 架空線点検用画像処理装置 | |
| JPH11320012A (ja) | 鍛造素材の位置ずれ検出装置 | |
| JPS6385432A (ja) | 線状欠陥の検査方法 | |
| JP3289559B2 (ja) | 溶接位置検査装置および溶接システム | |
| WO2023002754A1 (ja) | 溶接関連情報の表示方法、表示装置、溶接システム、プログラム、および溶接関連情報の表示画面 | |
| CN118081171B (zh) | 应用于金属板焊接下的异常智能识别方法及系统 | |
| JP5047104B2 (ja) | アーク溶接の監視装置及びアーク溶接の監視方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20040319 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050523 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050531 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050726 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060317 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060324 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100331 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110331 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120331 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130331 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130331 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140331 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |