JP5704454B2 - Image processing apparatus and image processing method - Google Patents
Image processing apparatus and image processing method Download PDFInfo
- Publication number
- JP5704454B2 JP5704454B2 JP2011100799A JP2011100799A JP5704454B2 JP 5704454 B2 JP5704454 B2 JP 5704454B2 JP 2011100799 A JP2011100799 A JP 2011100799A JP 2011100799 A JP2011100799 A JP 2011100799A JP 5704454 B2 JP5704454 B2 JP 5704454B2
- Authority
- JP
- Japan
- Prior art keywords
- bead
- contour
- line
- line segment
- points
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B23—MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
- B23K—SOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
- B23K26/00—Working by laser beam, e.g. welding, cutting or boring
- B23K26/02—Positioning or observing the workpiece, e.g. with respect to the point of impact; Aligning, aiming or focusing the laser beam
- B23K26/03—Observing, e.g. monitoring, the workpiece
- B23K26/032—Observing, e.g. monitoring, the workpiece using optical means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B23—MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
- B23K—SOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
- B23K31/00—Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups
- B23K31/12—Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups relating to investigating the properties, e.g. the weldability, of materials
- B23K31/125—Weld quality monitoring
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B5/00—Measuring arrangements characterised by the use of mechanical techniques
- G01B5/0037—Measuring of dimensions of welds
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Mechanical Engineering (AREA)
- Plasma & Fusion (AREA)
- Quality & Reliability (AREA)
- Laser Beam Processing (AREA)
- Image Analysis (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Image Processing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Description
本発明は、レーザ溶接の溶接部分の画像に基づいて溶接部分に形成されるビードの形状を認識する画像処理装置及び画像処理方法に関する。 The present invention relates to an image processing apparatus and an image processing method for recognizing the shape of a bead formed on a welded part based on an image of a welded part of laser welding.
レーザ溶接等の溶接の分野においては、溶接品質を高めるために、溶接部分のビードの形状を解析すること、欠陥孔を識別すること等によって、溶接欠陥の有無を検査している。このような検査は、主に生産現場の溶接工程の後工程、又は溶接工程中に行なわれている。 In the field of welding such as laser welding, in order to improve the welding quality, the presence or absence of welding defects is inspected by analyzing the shape of the bead of the welded part, identifying defective holes, and the like. Such inspection is mainly performed after the welding process at the production site or during the welding process.
溶接工程の後工程の検査については、溶接工程後の溶接対象物に光(いわゆる「バックライト」)を照射することによって、溶接部分の欠陥孔を識別すること(いわゆる「バックライト方式の検査」)等が行なわれている。この検査では、溶接対象物に欠陥孔が発生している場合、照射した光が欠陥孔を透過するので、溶接部分の欠陥孔が識別されることとなる。しかしながら、生産現場では生産効率を高めるために工程数を減らすことが要求されている。そのため、溶接工程中に検査を行うことが望まれている。 As for the inspection of the post-welding process, the defect hole in the welded part is identified by irradiating light (so-called “backlight”) to the welding object after the welding process (so-called “backlight inspection”). ) Etc. are carried out. In this inspection, when a defect hole is generated in the welding object, the irradiated light is transmitted through the defect hole, so that the defect hole in the welded portion is identified. However, in production sites, it is required to reduce the number of processes in order to increase production efficiency. Therefore, it is desired to perform an inspection during the welding process.
そこで、溶接工程中の検査として、例えば、特許文献1及び特許文献2のように、溶接中に発せられるレーザ光が大きくなっている間に、溶接部分の光をカメラによって撮影し、撮影した画像を解析することによって、ビードの形状を解析し、溶接部分の欠陥を判別している。
Therefore, as an inspection during the welding process, for example, as in
しかしながら、溶接中のレーザ光が大きくなっている間にはプラズマ光が発生するので、特許文献1及び特許文献2の検査では、このようなプラズマ光の影響によって、ビードの形状を正確に認識できず、検査装置等の画像上でビードの形状を正確に形成できないことがある。一方で、ビードの形状を正確に認識でき、かつ検査装置等の画像上でビードの形状を正確に形成できたとしても、ビードの形状が鮮明となることによって、処理される画像データが増加し、画像処理の負荷が増加するという問題がある。この画像処理負荷の増加が、画像処理時間の増加をもたらし、かつ検査時間の増加をもたらして、その結果、生産効率が低下することとなる。
However, since the plasma light is generated while the laser beam being welded is large, the shape of the bead can be accurately recognized in the inspections of
本発明はこのような実状に鑑みてなされたものであって、その目的は、溶接欠陥の判別に用いられ、ビードの形状を正確に認識可能であり、画像処理負荷を低減可能である画像処理装置及び画像処理方法を提供することにある。 The present invention has been made in view of such a situation, and its purpose is used for discrimination of welding defects, and it is possible to accurately recognize the shape of a bead and to reduce the image processing load. An apparatus and an image processing method are provided.
課題を解決するために、本発明の一態様に係る画像処理装置は、レーザ溶接の溶接部分の画像に基づいて前記溶接部分に形成されるビードの形状を認識する画像処理装置において、レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定する基準線設定部と、前記取り込んだ画像の残熱発光の輝度が前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成する輪郭点形成部と、同一の前記基準線上における2つの前記輪郭点間に中間点を形成する中間点形成部と、複数の前記輪郭点に基づいて輪郭線を形成する輪郭線形成部と、前記基準線を設定する前に、前記取り込んだ画像に対応して、前記輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成する中心線形成部と、前記中間点及び輪郭線を形成する前に、前記中心線の湾曲を認識して、前記同一の基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向し、かつ前記中間点を形成する2つの輪郭点を判別する輪郭点判別部とを備え、前記輪郭点判別部により判別された2つの輪郭点を前記中間点の形成及び前記輪郭線の形成に用いるように構成されている。 In order to solve the problem, an image processing apparatus according to an aspect of the present invention is an image processing apparatus that recognizes the shape of a bead formed on a welded part based on an image of the welded part of laser welding. A reference line setting unit that sets a plurality of reference lines corresponding to the captured image, and a luminance of the residual heat emission of the captured image. and the boundary between the region where the brightness of greater than the set brightness threshold has regions before and chopped heat emission to identify the contour is smaller than the luminance threshold, and the reference line intersect Contour points are formed based on a plurality of contour points, contour point forming portions that form contour points, intermediate point forming portions that form intermediate points between two contour points on the same reference line a contour forming part of Forming a center line of the bead shape based on an approximate curve of a plurality of bead area points that are larger than the luminance threshold value corresponding to the captured image before setting the reference line Before the intermediate point and the contour line are formed, when the center line is recognized and more than two contour points are formed on the same reference line, the same reference across the bead in line with spaced and opposed, and a contour point determination unit for determining the two contour points forming the intermediate point, the two contour points is determined by the contour point determination unit It is configured to be used for forming the intermediate point and the contour line.
本発明の一態様に係る画像処理装置は、前記基準線に前記中心線の湾曲形状に対して平行となる部分が生じることを防止するように、前記基準線を調節する基準線調節部をさらに備えている。 The image processing apparatus according to an embodiment of the present invention is to prevent the resulting portions to be parallel to the curved shape of the center line before Symbol reference line, the reference line adjusting unit for adjusting the reference line It has more.
さらに、本発明の一態様に係る画像処理装置は、前記中間点及び輪郭線を形成する前に、前記同一の前記基準線上における2つの輪郭点間の線分長さを計算し、前記線分長さの頻度分布を計算し、前記輝度閾値より大きくなっている複数のビード領域点に基づいて前記ビードの幅を計算し、前記頻度分布を用いて前記ビードの幅に基づいて定めた上限線分閾値に対して長い線分、及び該ビードの幅に基づいて定めた下限線分閾値に対して短い線分を判別して、前記長い線分の両端の輪郭点、及び前記短い線分の両端の輪郭点を排除する輪郭点選別部をさらに備えている。また、前記長い線分を判別する上限線分閾値が前記ビードの幅の2倍となっており、前記短い線分を判別する下限線分閾値が前記ビードの幅の半分となっている。 Furthermore, the image processing apparatus according to an aspect of the present invention calculates a line segment length between two contour points on the same reference line before forming the intermediate point and the contour line, and the line segment A frequency distribution of length is calculated, the width of the bead is calculated based on a plurality of bead area points that are larger than the brightness threshold, and an upper limit line determined based on the width of the bead using the frequency distribution A long line segment with respect to the minute threshold value and a short line segment with respect to the lower limit line segment threshold value determined based on the width of the bead are determined, and the contour points at both ends of the long line segment and the short line segment A contour point selection unit that excludes contour points at both ends is further provided. Further, the upper limit line segment threshold value for determining the long line segment is twice the width of the bead, and the lower limit line segment threshold value for determining the short line segment is half the width of the bead.
課題を解決するために、本発明の一態様に係る画像処理方法は、レーザ溶接の溶接部分の画像に基づいて前記溶接部分に形成されるビードの形状を認識する画像処理方法において、前記取り込んだ画像に対応して、前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成するステップと、レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定するステップと、前記取り込んだ画像の残熱発光の輝度が前記輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成するするステップと、前記中心線の湾曲を認識して、同一の前記基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向する2つの輪郭点を判別するステップと、前記同一の基準線上における前記判別された2つの輪郭点間に中間点を形成するステップと、複数組の前記判別された2つの輪郭点に基づいて輪郭線を形成するステップとを含む。 In order to solve the problem, an image processing method according to an aspect of the present invention includes an image processing method for recognizing a shape of a bead formed in a welded part based on an image of a welded part of laser welding . Forming a centerline of the bead shape based on an approximate curve of a plurality of bead area points that are greater than a brightness threshold set to identify an outline of the bead corresponding to an image; and a laser Photographing the welded portion where the residual heat emission during welding occurs, and setting a plurality of reference lines corresponding to the captured image, and the luminance of the residual heat emission of the captured image is the luminance threshold value and the boundary between the region where greater going on region and the luminance of the residual heat emission is smaller than the luminance threshold, the place where the said reference line intersect, stearyl for forming the contour points And flop recognizes the curvature of the center line, if more than two of the contour points on the same the reference line is formed, at intervals across the bead at the same reference line counter a step of determining the two contour points of the steps of forming an intermediate point between the discriminated two contour points in the same standards line, based on two contour points that are a plurality of sets of the determination Forming a contour line.
本発明の一態様に係る画像処理方法は、前記基準線に前記中心線の湾曲形状に対して平行となる部分が生じることを防止するように、前記基準線を調節するステップをさらに含む。 Image processing method according to an embodiment of the present invention is to prevent the resulting portions to be parallel to the curved shape of the center line before Symbol reference line, further comprising the step of adjusting the reference line.
さらに、本発明の一態様に係る画像処理方法は、前記中間点を形成するステップ及び輪郭線を形成するステップの前に、前記同一の前記基準線上における2つの輪郭点間の線分長さを計算し、前記線分長さの頻度分布を計算し、前記輝度閾値より大きくなっている複数のビード領域点に基づいて前記ビードの幅を計算し、前記頻度分布を用いて前記ビードの幅に基づいて定めた上限線分閾値に対して長い線分、及び該ビードの幅に基づいて定めた下限線分閾値に対して短い線分を判別して、前記長い線分の両端の輪郭点、及び前記短い線分の両端の輪郭点を排除するステップをさらに含む。また、前記長い線分を判別する上限線分閾値が前記ビードの幅の2倍であり、前記短い線分を判別する下限線分閾値が前記ビードの幅の半分である。 Furthermore, in the image processing method according to one aspect of the present invention, before the step of forming the intermediate point and the step of forming the contour line, the line segment length between two contour points on the same reference line is set. Calculating a frequency distribution of the line segment length, calculating a width of the bead based on a plurality of bead area points that are larger than the luminance threshold, and using the frequency distribution to calculate the width of the bead A line segment that is long with respect to the upper limit line segment threshold value determined based on it, and a line segment that is short with respect to the lower limit line segment threshold value determined based on the width of the bead, and contour points at both ends of the long line segment, And excluding contour points at both ends of the short line segment. The upper limit line segment threshold value for determining the long line segment is twice the width of the bead, and the lower limit line segment threshold value for determining the short line segment is half of the width of the bead.
本発明の一態様に係る画像処理装置によれば、以下の効果を得ることができる。本発明の一態様に係る画像処理装置は、レーザ溶接の溶接部分の画像に基づいて前記溶接部分に形成されるビードの形状を認識する画像処理装置において、レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定する基準線設定部と、前記取り込んだ画像の残熱発光の輝度が前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成する輪郭点形成部と、同一の前記基準線上における2つの前記輪郭点間に中間点を形成する中間点形成部と、複数の前記輪郭点に基づいて輪郭線を形成する輪郭線形成部と、前記基準線を設定する前に、前記取り込んだ画像に対応して、前記輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成する中心線形成部と、前記中間点及び輪郭線を形成する前に、前記中心線の湾曲を認識して、前記同一の基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向し、かつ前記中間点を形成する2つの輪郭点を判別する輪郭点判別部とを備え、前記輪郭点判別部により判別された2つの輪郭点を前記中間点の形成及び前記輪郭線の形成に用いるように構成されている。そのため、溶接終了直後から溶接に用いられた光が消える前に発生する「残熱発光」に基づいて前記ビードの形状を認識するので、前記ビードの形状を認識する際に、溶接中に発生するプラズマ光の影響が少なくなる。従って、前記取り込んだ画像に基づいて、前記ビードの形状を正確に認識できる。その一方で、前記輪郭点は、前記基準線上のように前記表示する画像上の限られた範囲に形成されるので、前記表示される画像上の前記輪郭点の数が少なくなる。このような少ない数の前記輪郭点に基づいて、前記中間点、前記輪郭点及び前記輪郭線が形成されるので、処理される画像データが少なくなり、その結果、画像処理負荷が低減されることとなる。そして、湾曲した前記ビードの画像処理について、前記基準線上に2つより多くの前記輪郭点が形成された場合でも、前記ビードの形状に対応した前記輪郭線及び前記中心線を正確に認識し、かつ形成できる。よって、溶接欠陥の判別に用いられ、ビードの形状を正確に認識可能であり、かつ画像処理負荷を低減可能とする画像処理装置を提供できる。 According to the image processing device of one aspect of the present invention, the following effects can be obtained. An image processing apparatus according to an aspect of the present invention, in an image processing apparatus that recognizes the shape of a bead formed in a welded part based on an image of a welded part of laser welding, generates residual heat emission during laser welding. A reference line setting unit configured to set a plurality of reference lines corresponding to the captured image, and a residual heat emission luminance of the captured image to identify a contour line of the bead. the place where the border, and the said reference line intersecting between the regions is larger than the brightness threshold set as a region where luminance before chopped heat emission is smaller than the luminance threshold, forming a contour point A contour point forming unit, an intermediate point forming unit that forms an intermediate point between the two contour points on the same reference line, a contour line forming unit that forms a contour line based on a plurality of the contour points , Set the reference line A center line forming unit that forms a center line of the bead shape based on an approximate curve of a plurality of bead area points that are larger than the brightness threshold corresponding to the captured image, and the intermediate point and Before forming the contour line, when the curvature of the center line is recognized and more than two contour points are formed on the same reference line, the bead is straddled on the same reference line. A contour point discriminating unit that discriminates two contour points that face each other at an interval and that form the intermediate point, and the two contour points discriminated by the contour point discriminating unit are formed as the intermediate point and It is configured to be used for forming a contour line . Therefore, since the shape of the bead is recognized based on “residual heat emission” that occurs immediately after the end of welding and before the light used for welding disappears, it occurs during welding when the shape of the bead is recognized. The influence of plasma light is reduced. Accordingly, the bead shape can be accurately recognized based on the captured image. On the other hand, since the contour points are formed in a limited range on the displayed image as on the reference line, the number of contour points on the displayed image is reduced. Since the intermediate point, the contour point, and the contour line are formed based on such a small number of the contour points, the image data to be processed is reduced, and as a result, the image processing load is reduced. It becomes. And for image processing of the curved bead, even when more than two contour points are formed on the reference line, the contour line and the center line corresponding to the shape of the bead are accurately recognized, And can be formed. Therefore, it is possible to provide an image processing apparatus that is used for determining a welding defect, can accurately recognize the shape of the bead, and can reduce the image processing load.
本発明の一態様に係る画像処理装置では、前記基準線に前記中心線の湾曲形状に対して平行となる部分が生じることを防止するように、前記基準線を調節する基準線調節部をさらに備えているので、湾曲した前記ビードの画像処理について、前記同一の基準線上に前記ビードの湾曲した輪郭に沿って2つの輪郭点が形成されることを防止できる。すなわち、前記同一の基準線上における2つの輪郭点の組合せが、前記ビードの幅方向に跨る2つの輪郭点に限定されることとなる。このような2つの輪郭点に基づいて、前記中間点が正確に形成されることとなる。従って、画像処理負荷をさらに低減でき、前記輪郭線及び前記中心線をさらに正確に形成できる。 In the image processing device according to an aspect of the present invention, the image processing apparatus may further include a reference line adjustment unit that adjusts the reference line so as to prevent the reference line from being parallel to the curved shape of the center line. Thus, in the image processing of the curved bead, it is possible to prevent two contour points from being formed along the curved contour of the bead on the same reference line. That is, the combination of two contour points on the same reference line is limited to two contour points straddling the width direction of the bead. Based on these two contour points, the intermediate point is accurately formed. Therefore, the image processing load can be further reduced, and the contour line and the center line can be formed more accurately.
本発明の一態様に係る画像処理装置は、前記中間点及び輪郭線を形成する前に、前記同一の前記基準線上における2つの輪郭点間の線分長さを計算し、前記線分長さの頻度分布を計算し、前記輝度閾値より大きくなっている複数のビード領域点に基づいて前記ビードの幅を計算し、前記頻度分布を用いて前記ビードの幅に基づいて定めた上限線分閾値に対して長い線分、及び該ビードの幅に基づいて定めた下限線分閾値に対して短い線分を判別して、前記長い線分の両端の輪郭点、及び前記短い線分の両端の輪郭点を排除する輪郭点選別部をさらに備えている。また、前記長い線分を判別する上限線分閾値が前記ビードの幅の2倍となっており、前記短い線分を判別する下限線分閾値が前記ビードの幅の半分となっている。そのため、例えば、前記ビードの輪郭以外の要素に基づいて形成された前記輪郭点のように、前記輪郭線を形成するために不必要な前記輪郭点が排除されることとなり、より少ない数の正確な前記輪郭点を用いて前記輪郭線を形成できる。従って、画像処理負荷をさらに低減でき、前記ビードの形状をさらに正確に形成できる。 The image processing apparatus according to an aspect of the present invention calculates a line segment length between two contour points on the same reference line before forming the intermediate point and the contour line, and the line segment length The bead width is calculated based on a plurality of bead area points that are larger than the luminance threshold, and the upper limit line segment threshold value is determined based on the bead width using the frequency distribution. A long line segment, and a short line segment with respect to a lower limit line segment threshold determined based on the width of the bead, and the contour points at both ends of the long line segment and the end points of the short line segment A contour point selection unit that excludes contour points is further provided. Further, the upper limit line segment threshold value for determining the long line segment is twice the width of the bead, and the lower limit line segment threshold value for determining the short line segment is half the width of the bead. Therefore, for example, the contour points that are unnecessary for forming the contour line, such as the contour points formed based on elements other than the contour of the bead, are eliminated, and a smaller number of accurate points are obtained. The contour line can be formed using the contour points. Therefore, the image processing load can be further reduced, and the bead shape can be formed more accurately.
本発明の一態様に係る画像処理方法によれば、以下の効果を得ることができる。本発明の一態様に係る画像処理方法は、レーザ溶接の溶接部分の画像に基づいて前記溶接部分に形成されるビードの形状を認識する画像処理方法において、前記取り込んだ画像に対応して、前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成するステップと、レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定するステップと、前記取り込んだ画像の残熱発光の輝度が前記輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成するするステップと、前記中心線の湾曲を認識して、同一の前記基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向する2つの輪郭点を判別するステップと、前記同一の基準線上における前記判別された2つの輪郭点間に中間点を形成するステップと、複数組の前記判別された2つの輪郭点に基づいて輪郭線を形成するステップとを含む。そのため、溶接終了直後から溶接に用いられた光が消える前に発生する「残熱発光」に基づいて前記ビードの形状を認識するので、前記ビードの形状を認識する際に、溶接中に発生するプラズマ光の影響が少なくなる。従って、前記取り込んだ画像に基づいて、前記ビードの形状を正確に認識できる。その一方で、前記輪郭点は、前記基準線上のように前記表示する画像上の限られた範囲にのみ形成されるので、前記表示される画像上の前記輪郭点の数が少なくなる。このような少ない数の前記輪郭点に基づいて、前記中間点及び前記輪郭線が形成されるので、処理される画像データが少なくなり、その結果、画像処理負荷が低減されることとなる。そして、湾曲した前記ビードの画像処理について、前記基準線上に2つより多くの前記輪郭点が形成された場合でも、前記ビードの形状に対応した前記輪郭線及び前記中心線を正確に認識し、かつ形成できる。よって、溶接欠陥の判別に用いられ、ビードの形状を正確に認識可能であり、かつ画像処理負荷を低減可能とする画像処理装置を提供できる。 According to the image processing method of one aspect of the present invention, the following effects can be obtained. Image processing method according to an embodiment of the present invention is an image the image processing method of recognizing the shape of the bead formed in the welding portion based on the welding portion of the laser welding, so as to correspond to the captured image, wherein Forming a bead shape center line based on an approximate curve of a plurality of bead area points that are greater than a brightness threshold set to identify a bead contour; and residual heat emission during laser welding. Photographing the generated welded part and setting a plurality of reference lines corresponding to the captured image, and a region where the residual heat emission luminance of the captured image is greater than the luminance threshold and the boundary between the region where the brightness of the remaining heat emission is smaller than the luminance threshold, the place where the said reference line intersect, the steps of forming the contour points, bay of the center line And when two or more contour points are formed on the same reference line, two contour points that are opposed to each other across the bead on the same reference line are determined. a step, a step of forming an intermediate point between the discriminated two contour points in the same standards line, and forming a contour line based on the two contour points that are a plurality of sets of the determination Including. Therefore, since the shape of the bead is recognized based on “residual heat emission” that occurs immediately after the end of welding and before the light used for welding disappears, it occurs during welding when the shape of the bead is recognized. The influence of plasma light is reduced. Accordingly, the bead shape can be accurately recognized based on the captured image. On the other hand, since the contour points are formed only in a limited range on the displayed image as on the reference line, the number of contour points on the displayed image is reduced. Since the intermediate points and the contour lines are formed based on such a small number of the contour points, the image data to be processed is reduced, and as a result, the image processing load is reduced. And for image processing of the curved bead, even when more than two contour points are formed on the reference line, the contour line and the center line corresponding to the shape of the bead are accurately recognized, And can be formed. Therefore, it is possible to provide an image processing apparatus that is used for determining a welding defect, can accurately recognize the shape of the bead, and can reduce the image processing load.
本発明の一態様に係る画像処理方法では、前記基準線に前記中心線の湾曲形状に対して平行となる部分が生じることを防止するように、前記基準線を調節するステップをさらに含むので、湾曲した前記ビードの画像処理について、前記同一の基準線上に前記ビードの湾曲した輪郭に沿って2つの輪郭点が形成されることを防止できる。すなわち、前記同一の基準線上における2つの輪郭点の組合せが、前記ビードの幅方向に跨る2つの輪郭点に限定されることとなる。このような2つの輪郭点に基づいて、前記中間点が正確に形成されることとなる。従って、画像処理負荷をさらに低減でき、前記輪郭線及び前記中心線をさらに正確に形成できる。 In the image processing method according to an aspect of the present invention, the image processing method further includes a step of adjusting the reference line so as to prevent a portion that is parallel to the curved shape of the center line from occurring in the reference line. In the image processing of the curved bead, it is possible to prevent two contour points from being formed along the curved contour of the bead on the same reference line. That is, the combination of two contour points on the same reference line is limited to two contour points straddling the width direction of the bead. Based on these two contour points, the intermediate point is accurately formed. Therefore, the image processing load can be further reduced, and the contour line and the center line can be formed more accurately.
本発明の一態様に係る画像処理方法は、前記中間点を形成するステップ及び輪郭線を形成するステップの前に、前記同一の前記基準線上における2つの輪郭点間の線分長さを計算し、前記線分長さの頻度分布を計算し、前記輝度閾値より大きくなっている複数のビード領域点に基づいて前記ビードの幅を計算し、前記頻度分布を用いて前記ビードの幅に基づいて定めた上限線分閾値に対して長い線分、及び該ビードの幅に基づいて定めた下限線分閾値に対して短い線分を判別して、前記長い線分の両端の輪郭点、及び前記短い線分の両端の輪郭点を排除するステップをさらに含む。また、前記長い線分を判別する上限線分閾値が前記ビードの幅の2倍であり、前記短い線分を判別する下限線分閾値が前記ビードの幅の半分である。そのため、例えば、前記ビードの輪郭以外の要素に基づいて形成された前記輪郭点のように、前記輪郭線を形成するために不必要な前記輪郭点が排除されることとなり、より少ない数の正確な前記輪郭点を用いて前記輪郭線を形成できる。従って、画像処理負荷をさらに低減でき、前記ビードの形状をさらに正確に形成できる。 In the image processing method according to one aspect of the present invention, before the step of forming the intermediate point and the step of forming the contour line, a line segment length between two contour points on the same reference line is calculated. Calculating the frequency distribution of the line segment length, calculating the width of the bead based on a plurality of bead area points that are greater than the brightness threshold, and using the frequency distribution based on the width of the bead A long line segment with respect to the upper limit line segment threshold value determined, and a short line segment with respect to the lower limit line segment threshold value determined based on the width of the bead, the contour points at both ends of the long line segment, and the The method further includes the step of eliminating contour points at both ends of the short line segment. The upper limit line segment threshold value for determining the long line segment is twice the width of the bead, and the lower limit line segment threshold value for determining the short line segment is half of the width of the bead. Therefore, for example, the contour points that are unnecessary for forming the contour line, such as the contour points formed based on elements other than the contour of the bead, are eliminated, and a smaller number of accurate points are obtained. The contour line can be formed using the contour points. Therefore, the image processing load can be further reduced, and the bead shape can be formed more accurately.
[第1参考形態]
本発明の第1参考形態に係る画像処理装置を有する溶接欠陥判定システム(以下、「判定システム」という)、及び第1参考形態に係る画像処理方法を用いた溶接欠陥判定方法について説明する。最初に、図1を参照して、欠陥を判定する対象の溶接部分のビードmについて説明する。ビードmは略C字状に形成されており、詳細には、ビードmは、溶接開始地点に形成された始端部分m1と、溶接終了地点に形成された終端部分m2と、始端部分m1及び終端部分m2の間に形成された中間部分m3とを有している。第1参考形態では、ビードmの終端部分m2と、ビードmの中間部分m3における終端部分m2側の部分とを含む領域Jを欠陥判定の対象とする。なお、第1参考形態では、一例として、ビードmは略C字条に形成されているが、直線状、L字状、波状等のようなその他の形状であってもよい。
[First Reference Form]
A welding defect determination system (hereinafter referred to as “determination system”) having an image processing apparatus according to the first reference embodiment of the present invention and a welding defect determination method using the image processing method according to the first reference embodiment will be described. Initially, with reference to FIG. 1, the bead m of the welding part which determines the defect is demonstrated. The bead m is formed in a substantially C shape. Specifically, the bead m includes a start end portion m1 formed at a welding start point, a terminal end portion m2 formed at a welding end point, a start end portion m1, and a terminal end. And an intermediate portion m3 formed between the portions m2. In the first reference embodiment , the region J including the end portion m2 of the bead m and the end portion m2 side portion of the intermediate portion m3 of the bead m is set as a defect determination target. In the first reference embodiment , as an example, the bead m is formed in a substantially C-shape, but may have other shapes such as a straight shape, an L shape, a wave shape, and the like.
次に、図2を参照して判定システム1を説明する。判定システム1は画像取り込み装置2を有しており、この画像取り込み装置2は、溶接用のレーザを照射し、レーザ溶接時の残熱発光が生じている溶接部分を撮影し、かつ撮影した溶接部分の画像を取り込むように構成されている。判定システム1は画像処理装置3を有しており、画像処理装置3は、画像取り込み装置2により取り込んだ溶接部分の画像に基づいてビードmの形状を認識するように構成されている。判定システム1はビード形状判定装置4を有しており、このビード形状判定装置4は、画像処理装置3により認識されたビードの形状に基づいて、溶接部分の欠陥を判定するように構成されている。
Next, the
画像取り込み装置2について、図2及び図3を参照して説明する。図2を参照すると、画像取り込み装置2は、溶接部材Mに溶接用のレーザを照射するレーザ照射部5を有している。画像取り込み装置2は、レーザを照射した溶接部分の画像を連続的に撮影するモニタ部6を有している。画像取り込み装置2は、モニタ部6により撮影した画像を連続的に記憶する記憶部7を有している。画像取り込み装置2は、記憶部7に記憶された画像を取り込む画像取り込み部8を有している。
The
図3を参照すると、画像取り込み部8は、溶接終了直後から所定の時間t内に生じる残熱発光の画像を取り込むように構成されている。また、画像取り込み部8は、画像の平均輝度Gが所定の取り込み開始輝度閾値g1以上である場合に、画像の取り込みを開始し、画像の平均輝度Gが所定の取り込み終了輝度閾値g2以下である場合に、残熱発光が終了したと認識して、画像の取り込みを終了するように構成されている。 Referring to FIG. 3, the image capturing unit 8 is configured to capture an image of residual heat emission that occurs within a predetermined time t immediately after the end of welding. Further, the image capturing unit 8 starts capturing an image when the average luminance G of the image is equal to or higher than a predetermined capturing start luminance threshold g1, and the average luminance G of the image is equal to or lower than a predetermined capturing end luminance threshold g2. In such a case, it is recognized that the residual heat emission has ended, and the image capturing is ended.
一例として、画像取り込み装置2の詳細は、次のように構成されていると好ましい。残熱発光は、溶接終了直後から数十ms(ミリ秒)間生じた後に減衰するので、確認難くなる。そのため、所定の時間tは約20msであると好ましい。この場合、モニタ部6は、フレームレート約500Hz(周期2ms)の高速度カメラであるとよく、約10枚(=20ms÷2ms)の画像が取り込まれることとなる。また、モニタ部6は、高ダイナミックレンジカメラであると好ましく、信号検出のダイナミックレンジが広く、かつ計測可能な輝度の範囲が広くなっているので、溶接中及び溶接直後の画像を撮影できる。画像取り込み部8では、画像の取り込みを開始する開始輝度閾値g1が、溶接中及び溶接直後の平均輝度Gの中間値となっていると好ましい。画像の取り込みを終了する終了輝度閾値g2は、開始輝度閾値g1より小さく、かつ残熱発光を確認できない程に暗くなった状態の画像の平均輝度Gより大きくなっていると好ましい。
As an example, the details of the
画像処理装置3について、図2及び図4を参照して説明する。図2を参照すると、画像処理装置3はビード認識部9を有しており、このビード認識部9は、画像取り込み装置2によって取り込んだ画像に基づいて、ビード領域候補を認識するように構成されている。ビード領域候補は、所定の輪郭輝度閾値hより残熱発光の輝度Hが大きくなっている領域となっており、輪郭輝度閾値hは、ビードmの輪郭線を識別するように設定されている。画像処理装置3はビード判別部10を有しており、このビード判別部10は、複数のビード領域候補が認識された場合に、複数のビード領域候補から実際のビードに対応するビード領域Eを選択するように構成されている。なお、このビード領域Eは、複数のビード領域点eから構成されている。一例として、ビード領域点eは、画像上で1つ以上のピクセルにより表され、複数のビード領域点eは、互いに隣接して配置されるか、又はピクセル単位の間隔で配置されているとよい。また、ビード判別部10は、各ビード領域候補のアスペクト比(縦横比)l1/l2を計算し、このアスペクト比l1/l2に基づいて、複数のビード領域候補から実際のビードmに対応するビード領域Eを選択する構成となっている。例えば、アスペクト比l1/l2が一般的なビードmの横長形状に対応する値より大きくなっている場合に、このようなビード領域候補が実際のビードmに相当すると認識する設定であるとよい。実際のビードmと、溶接時に飛散するスパッタ粒子とにそれぞれ対応するビード領域候補が認識された場合、スパッタ粒子に対応するビード領域候補は、等方的な形状に形成されるのに対して、ビードmは横長形状に形成されることとなる。そのため、実際のビードmに対応するビード領域Eが正確に選択されることとなる。さらに、スパッタ粒子に対応するビード領域候補が、等方的な形状に形成されていない場合を考慮して、ビード判別部10は、複数のビード領域候補が時間を前後して取り込んだ画像にて移動しているか、又は停止しているかを判定し、かつ停止しているビード領域候補が実際のビードmに対応するビード領域Eであると認識するように構成されている。
The
図2を参照すると、画像処理装置3は基準線設定部11を有しており、この基準線設定部11は、取り込んだ画像にて複数の基準線Lを格子状に設定するように構成されている(図4を参照)。一例として、複数の基準線Lは、ピクセル単位の間隔を空けて配置されているとよく、複数の基準線L同士の間隔は、複数のビード領域点eの間隔より大きくなっていると好ましい。画像処理装置3は輪郭点形成部12を有しており、この輪郭点形成部12は、基準線L上にビードmの輪郭点pを形成するように構成されている(図4を参照)。画像処理装置3は中間点形成部13を有しており、この中間点形成部13は、同一の基準線L上に形成された2つの輪郭点p間の中間点qを形成するように構成されている(図4を参照)。画像処理装置3は輪郭線形成部14を有しており、この輪郭線形成部14は、複数の輪郭点pに基づいて輪郭線Pを形成するように構成されている(図4を参照)。画像処理装置3は第1の中心線形成部15を有しており、この第1の中心線形成部15は、複数の中間点qに基づいて中心線Qを形成するように構成されている(図4を参照)。
Referring to FIG. 2, the
輪郭点形成部12及び中間点形成部13の詳細について、図4を参照して説明する。輪郭点形成部12は、基準線L上に輪郭点pを形成する構成となっている。輪郭点pは、画像取り込み装置2によって取り込んだ画像に基づいて、ビードmの輪郭に相当する境界が基準線Lと交差する箇所に形成される。ビードmの輪郭に相当する境界は、残熱発光の輝度Hが、ビードmの輪郭線を識別するように設定した輪郭輝度閾値hより大きくなっている領域と、残熱発光の輝度Hが、輪郭輝度閾値hより小さくなっている領域との間に位置している。すなわち、輪郭輝度閾値hは、ビードmの輪郭に対応するように、ビードmの輪郭の内側領域に対応する残熱発光の輝度Hより小さく、かつビードmの輪郭の外側領域に対応する残熱発光の輝度Hより大きな値に設定されている。なお、一例として、輪郭輝度閾値g3は、ビードmの輪郭と残熱発光の輝度Hとの関係を予め求めておくことによって、設定されているとよい。さらに、中間点形成部13は、同一の基準線L上に形成された2つの輪郭点p同士の中点を中間点qとして形成するように構成されている。
Details of the contour
輪郭線形成部14及び第1の中心線形成部15の詳細について、図4を参照して説明する。輪郭線形成部14は、フィッティング関数f1を用いて、複数の輪郭点pに基づく輪郭線Pを形成する。一例として、互いに直角に交差するX軸及びY軸を定めた場合、フィッティング関数f1は、Y=aX2+bX+c、又はX=a’Y2+b’Y+c’であるとよく、これらの係数a、b及びc、又は係数a’、b’及びc’は、フィッティング関数f1と複数の輪郭点pとの距離の二乗和を最小とするように定められるとよい(最小二乗法)。さらに、フィッティング関数f1については、Y=aX2+bX+c、及びX=a’Y2+b’Y+c’のそれぞれの計算式に基づいて計算し、これらの内でフィッティング誤差が小さい方の計算式を選択し、この選択した計算式を用いて輪郭線Pを形成するとよい。なお、フィッティング関数f1は、3次関数、4次関数等の多項式関数、指数関数、対数関数等であってもよい。また、フィッティング関数f1は、輪郭点pに基づいて輪郭線Pを形成できれば、その他のフィッティングに用いられる関数であってもよい。
Details of the contour
また、第1の中心線形成部15は、フィッティング関数f2を用いて、複数の中間点qに基づいて中心線Qを形成するように構成されている。一例として、フィッティング関数f2は、フィッティング関数f1と同様になっているとよい。
The first center
ビード形状判定装置4について、図2、図5(a)、及び図5(b)を参照して説明する。ビード形状判定装置4は、画像処理装置3によって得られた輪郭点p、中間点q、輪郭線P、及び中心線Qに基づいて、ビードmの欠陥の有無を判定するように構成されている。ビード形状判定装置4の詳細について、図2を参照して説明すると、ビード形状判定装置4は代表点形成部16を有しており、代表点形成部16は、直角に交差するX軸及びY軸を定めた場合、複数の中点qの平均位置である代表中間点q1を形成するように構成されている(図5(a)及び図5(b)を参照)。この代表中間点q1のX座標は、複数の中間点qのX座標平均値となっており、代表中間点q1のY座標は、複数の中間点qのY座標平均値となっている。ビード形状判定装置4は終端点形成部17を有しており、終端点形成部17は、ビードmの終端部分m2にて輪郭線Pと中心線Qとが交差する点である終端中間点q2を形成するように構成されている(図5(a)及び図5(b)を参照)。ビード形状判定装置4は副代表点形成部18を有しており、副代表点形成部18は、代表中間点q1と終端中間点q2との間の中点である副代表中間点q3を形成するように構成されている(図5(a)及び図5(b)を参照)。ビード形状判定装置4は直線形成部19を有しており、直線形成部19は、終端中間点q2と副代表中間点q3とを結ぶ直線Rに対して垂直な方向に距離dの間隔を空けて、かつ直線Rに対して平行に配置される一対の直線U,Vを形成するように構成されている(図5(a)及び図5(b)を参照)。
The bead
一例として、図5(a)及び図5(b)に示すように、距離dは、ビードmの幅の半分以下であるとよい。この場合、ビードmの幅は、ビード領域点E、及び/又はこのビード領域E内の複数のビード領域点eと、ビード領域E及び/又はビード領域点eから計算されたアスペクト比l1/l2とに基づいて計算された代表幅であるとよい。ビード形状判定装置4は湾曲度計算部20を有しており、湾曲度計算部20は、ビードmの終端部分m2の溶接欠陥を判別するように構成されている。
As an example, as shown in FIGS. 5A and 5B, the distance d may be less than half the width of the bead m. In this case, the width of the bead m is equal to the bead area point E and / or a plurality of bead area points e in the bead area E, and the aspect ratio l1 / l2 calculated from the bead area E and / or the bead area point e. It is preferable that the representative width is calculated based on the above. The bead
湾曲度計算部20の詳細について、図5(a)及び図5(b)を参照して説明する。湾曲度計算部20は、ビードmの終端部分m2にて直線U,Vと輪郭線Pとがそれぞれ交差する点である境界点u,vを計算するように構成されている。湾曲度計算部20は、直線UVと終端中間点q2との距離を湾曲度Wとして計算するように構成されている。湾曲度Wは、図5(a)に示すように、境界点u,vを結ぶ直線UVを基準として終端中間点q2が副代表中間点q3と反対側に位置する場合、プラスの値であると識別される一方で、図5(b)に示すように、直線UVを基準として終端中間点q2が副代表中間点q3側に位置する場合、マイナスの値であると識別される。湾曲度Wがプラスの値である場合、図5(a)に示すように、終端部分m2は凸形状である。その一方で、湾曲度Wの値がマイナスである場合、図5(b)に示すように、終端部分m2は凹形状である。また、湾曲度計算部20では、終端部分m2にて欠陥の有無を判定するための湾曲度閾値wが設定されており、湾曲度Wが湾曲度閾値w以上である場合、終端部分m2は正常と判定される。その一方で、湾曲度Wが湾曲度閾値w以下である場合、終端部分m2には孔等の欠陥が発生していると判定される。一例として、湾曲度閾値wは0であると好ましい。
The detail of the
第1参考形態に係る画像処理方法を用いた溶接欠陥判定方法について、図6を参照して説明する。レーザ照射部5が溶接部材Mに溶接用のレーザを照射し、モニタ部6が、レーザを照射された溶接部分の画像を連続的に撮影し、記憶部7が、撮影された画像を記憶し、画像取り込み部8が、記憶部7から残熱発光が生じている画像を取り込む(S1)。ビード認識部9が、取り込んだ画像におけるビード領域候補を認識する。複数のビード領域候補が認識された場合、ビード判別部10が、実際のビードmに対応するビード領域Eを判別する。画像取り込み部8によって取り込まれた画像に対応して、基準線設定部11が複数の基準線Lを格子状に設定する(S2)。輪郭点形成部12が、基準線L上にビードmの輪郭点pを形成する(S3)。中間点形成部13が、同一の基準線L上に形成された2つの輪郭点p間の中間点qを形成する(S4)。輪郭線形成部14が、複数の輪郭点pに基づいて輪郭線Pを形成する(S5)。第1の中心線形成部15が、複数の中間点qに基づいて中心線Qを形成する(S6)。画像処理装置3により得られた中間点q、輪郭線P、及び中心線Qに基づいて、ビードmの欠陥の有無を判定する(S7)。
A welding defect determination method using the image processing method according to the first reference embodiment will be described with reference to FIG. The
ビードmの欠陥の有無を判定することについての詳細を説明する。代表点形成部16が、互いに直角に交差するX軸及びY軸を定めて、複数の中点qの平均位置である代表中間点q1を形成する。終端点形成部17が、ビードmの終端部分m2における輪郭線Pと中心線Qとの交点である終端中間点q2を形成する。副代表点形成部18が、代表中間点q1と終端中間点q2との間の中点である副代表中間点q3を形成する。直線形成部19が、終端中間点q2と副代表中間点q3とを結ぶ直線RSに対して垂直な方向に距離dの間隔を空けて、かつ直線Rに対して平行に配置される一対の直線U,Vを形成する。湾曲度計算部20が、終端部分m2にて直線U,Vと輪郭線Pとが交差する点である境界点u,vをそれぞれ計算する。さらに、湾曲度計算部20では、終端部分m2の湾曲度Wが湾曲度閾値w以上である場合、終端部分m2は正常と判定される。その一方で、湾曲度Wが湾曲度閾値w以下である場合、終端部分m2には孔等の欠陥が発生していると判定される。
Details of determining the presence or absence of a defect in the bead m will be described. The representative
以上のように本発明の第1参考形態によれば、残熱発光に基づいてビードmの形状を認識するので、ビードmの形状を認識する際に、溶接中に発生するプラズマ光の影響が少なくなる。従って、取り込んだ画像に基づいて、ビードmの輪郭線P及び中心線Qを正確に認識できる。その一方で、輪郭点p及び中間点qは、基準線L上のように限られた範囲に形成されるので、輪郭点p及び中間点qの数が少なくなる。このような少ない数の輪郭点pに基づいて中間点q及び輪郭線Pが形成され、かつ少ない数の中間点qに基づいて中心線Qが形成されるので、処理される画像データが少なくなり、その結果、画像処理負荷が低減されることとなる。よって、溶接欠陥の判別に用いられ、ビードmの形状を正確に認識可能であり、かつ画像処理負荷を低減可能とする画像処理装置3を提供できる。
As described above, according to the first reference embodiment of the present invention, since the shape of the bead m is recognized based on the residual heat emission, the influence of the plasma light generated during welding is recognized when the shape of the bead m is recognized. Less. Therefore, the contour line P and the center line Q of the bead m can be accurately recognized based on the captured image. On the other hand, since the contour point p and the intermediate point q are formed in a limited range as on the reference line L, the number of the contour point p and the intermediate point q is reduced. The intermediate point q and the contour line P are formed based on such a small number of contour points p, and the center line Q is formed based on the small number of intermediate points q, so that less image data is processed. As a result, the image processing load is reduced. Therefore, it is possible to provide the
[実施形態]
本発明の実施形態に係る画像処理装置及び画像処理方法について以下に説明する。本発明の実施形態の画像処理装置及び画像処理方法の基本的な構成要素は、第1参考形態の画像処理装置及び画像処理方法の構成と同様になっている。第1参考形態と同様な要素は、第1参考形態と同様の符号および名称を用いて説明する。ここでは、第1参考形態と異なる構成について説明する。
[Embodiment]
An image processing apparatus and an image processing method according to an embodiment of the present invention will be described below. The basic components of the image processing apparatus and the image processing method of the embodiment of the present invention are the same as those of the image processing apparatus and the image processing method of the first reference embodiment . Like elements in the first reference embodiment will be described using the same reference numerals and names as in the first reference embodiment. Here, a configuration different from the first reference embodiment will be described.
図7〜図10を参照して、判定システム21について説明する。図7を参照すると、判定システム21は、第1参考形態と同様の画像取り込み装置2、及びビード形状判定装置4を有している。判定システム21は、画像取り込み装置2により取り込んだ溶接部分の画像に基づいて、この溶接部分に形成されるビードmの形状を認識する画像処理装置22を有している。
The
図7を参照すると、画像処理装置22は、第1参考形態と同様のビード認識部9、ビード判別部10、基準線設定部11、輪郭点形成部12、中間点形成部13、及び輪郭線形成部14を有している。画像処理装置22は第2の中心線形成部23を有しており、この第2の中心線形成部23は、ビード認識部9及びビード判別部10により得られたビード領域E内の複数のビード領域点eに基づいて中心線Qを形成するように構成されている(図8を参照)。中心線形成部23では、複数のビード領域点eに基づいて近似曲線が計算され、この近似曲線が中心線Qとして形成される。例えば、この近似曲線は、対数近似曲線、多項式近似曲線、累乗近似曲線、指数近似曲線、移動平均曲線等であるとよい。画像処理装置22は湾曲形状認識部24を有しており、湾曲形状認識部24は、中心線Qに基づいてビードmの湾曲形状を認識するように構成されている(図8を参照)。画像処理装置22は基準線調節部25を有しており、この基準線調節部25は、図9に示すように基準線Lに中心線Qの湾曲形状に対して平行となる部分が生じることを防止するように構成されている。詳細には、基準線調節部25は、初期状態で直角となっている基準線L同士の交差角度zを変更可能とするように構成されている。再び、図7を参照すると、画像処理装置22は輪郭点判別部26を有しており、輪郭点判別部26は、中心線Qが湾曲し、かつ同一の基準線L上に2つより多くの輪郭点が形成された場合に、同一の基準線L上でビードmを跨いで間隔を空けて対向する2つの輪郭点pを判別し、このような輪郭点p以外の不要な輪郭点p’を排除するように構成されている(図10を参照)。
Referring to FIG. 7, the
本発明の実施形態に係る画像処理方法を用いた溶接欠陥判定方法について、図10を参照して説明する。第1参考形態と同様に、レーザ溶接時の残熱発光が生じている画像を取り込む(S21)。ビード認識部9が、取り込んだ画像におけるビード領域候補を認識する。複数のビード領域候補が認識された場合、ビード判別部10が、実際のビードmに対応するビード領域Eを判別する。第2の中心線形成部23が、ビード領域E内のビード領域点eに基づいて近似曲線を計算し、この近似曲線を中心線Qとして形成する(S22)。湾曲形状認識部24が、中心線Qに基づいてビードmの湾曲形状を認識する(S23)。基準線設定部11が、複数の基準線Lを格子状に設定する(S24)。基準線調節部25が、基準線Lに中心線Qに対して平行となる部分が生じることを防止するように、初期状態で直角となっている基準線L同士の交差角度zを変更する(S25)。輪郭点形成部12が、基準線L上にビードmの輪郭点pを形成する(S26)。輪郭点判別部26が、中心線Qが湾曲し、かつ同一の基準線L上に2つより多くの輪郭点pが形成された場合に、同一の基準線L上でビードmを跨いで間隔を空けて対向する2つの輪郭点pを判別する(S27)。中間点形成部13が、同一の基準線L上に形成され、かつ輪郭点判別部26により判別された2つの輪郭点p間の中間点qを形成する(S28)。輪郭線形成部14が、複数の輪郭点pに基づいて輪郭線Pを形成する(S29)。第1参考形態と同様に、画像処理装置22により得られた中間点q、輪郭線P、及び中心線Qに基づいて、ビードmの欠陥の有無を判定する(S30)。
A welding defect determination method using the image processing method according to the embodiment of the present invention will be described with reference to FIG. Similar to the first reference embodiment , an image in which residual heat emission during laser welding occurs is captured (S21). The
以上のように本発明の実施形態によれば、第1参考形態と同様の効果に加えて、次のような効果が得られる。本発明の実施形態によれば、輪郭点判別部26が、中心線Qが湾曲し、かつ同一の基準線L上に2つより多くの輪郭点pが形成された場合に、同一の基準線L上でビードmを跨いで間隔を空けて対向する2つの輪郭点pを判別する。そのため、湾曲したビードmの画像処理について、基準線L上に2つより多くの輪郭点pが形成された場合でも、ビードmの形状に対応した輪郭線P及び中心線Qを正確に認識し、かつ形成できる。
As described above, according to the embodiment of the present invention, in addition to the same effects as those of the first reference embodiment , the following effects can be obtained. According to the embodiment of the present invention, the contour
本発明の実施形態によれば、基準線調節部25は、基準線Lに中心線Qの湾曲形状に対して平行となる部分が生じることを防止する。そのため、湾曲したビードmの画像処理について、同一の基準線L上にビードmの湾曲した輪郭に沿って2つの輪郭点pが形成されることを防止できる。すなわち、同一の基準線L上における2つの輪郭点pの組合せが、ビードmの幅方向に跨る2つの輪郭点pに限定されることとなる。このような2つの輪郭点pに基づいて、中間点qが正確に形成されることとなる。従って、画像処理負荷をさらに低減でき、輪郭線P及び中心線Qをさらに正確に形成できる。
According to the embodiment of the present invention, the reference
[第2参考形態]
本発明の第2参考形態に係る画像処理装置及び画像処理方法について以下に説明する。第2参考形態の画像処理装置及び画像処理方法の基本的な構成要素は、第1参考形態の画像処理装置及び画像処理方法の構成と同様になっている。第1参考形態と同様な要素は、第1参考形態と同様の符号および名称を用いて説明する。ここでは、第1参考形態と異なる構成について説明する。
[Second Reference Form]
An image processing apparatus and an image processing method according to the second reference embodiment of the present invention will be described below. The basic components of the image processing apparatus and the image processing method according to the second reference embodiment are the same as those of the image processing apparatus and the image processing method according to the first reference embodiment . Like elements in the first reference embodiment will be described using the same reference numerals and names as in the first reference embodiment. Here, a configuration different from the first reference embodiment will be described.
図12及び図13を参照して、判定システム31について説明する。図12を参照すると、第1参考形態と同様の画像取り込み装置2、及びビード形状判定装置4を有している。判定システム31は画像処理装置32を有しており、この画像処理装置32は、画像取り込み装置2により取り込んだ溶接部分の画像に基づいて、この溶接部分に形成されるビードmの形状を認識するように構成されている。
The
図12を参照すると、画像処理装置32は、第1参考形態と同様のビード認識部9、ビード判別部10、基準線設定部11、輪郭点形成部12、中間点形成部13、輪郭線形成部14、及び中心線形成部15を有している。さらに、画像処理装置32は輪郭点選別部33を有しており、この輪郭点選別部33は、同一の基準線L上に位置する2つの輪郭点p間の線分長さKを計算するように構成されている。また、輪郭点選別部33は、図15に示すように、この線分長さKの頻度Nの分布を計算するように構成されている。さらに、輪郭点選別部33は、ビード認識部9及びビード判別部10により得られたビード領域E内の複数のビード領域点eに基づいて、ビードmの幅を計算するように構成されている。輪郭点選別部33は、ビードmの幅に基づいて定めた上限線分閾値k1に対して長い線分と、ビードの幅に基づいて定めた下限線分閾値k2に対して短い線分とを判別して、この長い線分の両端の輪郭点pと、この短い線分の両端の輪郭点pとを排除するように構成されている。この場合、ビードmの幅は、ビード領域点E、及び/又はこのビード領域E内の複数のビード領域点eと、ビード領域E及び/又はビード領域点eから計算されたアスペクト比l1/l2とに基づいて計算された代表幅であるとよい。上限線分閾値k1はビードの幅の2倍に設定されているとよく、下限線分閾値k2がビードの幅の半分に設定されているとよい。
Referring to FIG. 12, the
第2参考形態に係る画像処理方法を用いた溶接欠陥判定方法について、図14を参照して説明する。第1参考形態と同様に、レーザ溶接時の残熱発光が生じている画像を取り込む(S31)。ビード認識部9が、取り込んだ画像におけるビード領域候補を認識し、複数のビード領域候補が認識された場合、ビード判別部10が、実際のビードmに対応するビード領域Eを判別する。画像取り込み部8によって取り込まれた画像に対応して溶接部分のビードmの形状を、基準線設定部11が複数の基準線Lを格子状に設定する(S32)。輪郭点形成部12が、基準線L上にビードmの輪郭点pを形成する(S33)。輪郭点選別部33が、同一の基準線L上に位置する2つの輪郭点p間の線分長さKを計算し、線分長さKの頻度分布を計算し、複数のビード領域点eに基づいてビードmの幅を計算し、この頻度分布上で、ビードmの幅に基づいて定めた上限閾値k1に対して長い線分と、ビードmの幅に基づいて定めた下限閾値k2に対して短い線分とを判別し、この長い線分の両端の輪郭点と、この短い線分の両端の輪郭点とを排除する(S34)。中間点形成部13が、同一の基準線L上に形成された2つの輪郭点p間の中間点qを形成する(S35)。輪郭線形成部14が、複数の輪郭点pに基づいて輪郭線Pを形成する(S36)。第1の中心線形成部15が、複数の中間点qに基づいて中心線Qを形成する(S37)。第1参考形態と同様に、画像処理装置32により得られた中間点q、輪郭線P、及び中心線Qに基づいて、ビードmの欠陥の有無を判定する(S38)。
A welding defect determination method using the image processing method according to the second reference embodiment will be described with reference to FIG. Similar to the first reference embodiment , an image in which residual heat emission during laser welding occurs is captured (S31). When the
以上のように本発明の第2参考形態によれば、第1参考形態と同様の効果に加えて、次のような効果が得られる。本発明の第2参考形態によれば、輪郭点選別部33が、同一の基準線L上に位置する2つの輪郭点p間の線分長さKを計算し、線分長さKの頻度分布を計算し、ビードmの幅を計算し、この頻度分布上で、ビードmの幅に基づいて定めた上限線分閾値k1に対して長い線分と、ビードmの幅に基づいて定めた下限線分閾値k2に対して短い線分とを判別し、この長い線分の両端の輪郭点と、この短い線分の両端の輪郭点とを排除する。また、一例として、上限線分閾値k1はビードの幅の2倍に設定され、下限線分閾値k2がビードの幅の半分に設定されている。そのため、例えば、ビードmの輪郭以外の要素に基づいて形成された輪郭点のように、輪郭線Pを形成するために不必要な輪郭点が排除されることとなり、より少ない数の正確な輪郭点pを用いて輪郭線Pを形成できる。従って、画像処理負荷をさらに低減でき、前記ビードの形状をさらに正確に形成できる。
As described above, according to the second reference embodiment of the present invention, in addition to the same effects as those of the first reference embodiment , the following effects can be obtained. According to the second reference form of the present invention, the contour
ここまで本発明の実施形態及び参考形態について述べたが、本発明は既述の実施形態及び参考形態に限定されるものではなく、本発明の技術的思想に基づいて各種の変形及び変更が可能である。 Although the embodiments and reference embodiments of the present invention have been described so far, the present invention is not limited to the above-described embodiments and reference embodiments , and various modifications and changes can be made based on the technical idea of the present invention. It is.
例えば、本発明の第1変形例として、本発明の実施形態に係る画像処理装置22において、第2参考形態の輪郭点選別部33が設けられてもよい。第2参考形態と同様の効果が得られる。
For example, as a first modification of the present invention, in the
本発明の第2変形例として、本発明の実施形態並びに第1及び第2参考形態において、複数の基準線Lが、ビード領域E内の一点で互いに交差し、かつこの交差した点から放射状に延びるように設定されてもよい。本発明の実施形態並びに第1及び第2参考形態と同様の効果が得られる。 As a second modification of the present invention, in the embodiment and the first and second reference embodiment of the present invention, a plurality of the reference line L, and cross each other at a point in the bead region E, and radially from a point to the intersection It may be set to extend. The same effects as those of the embodiment of the present invention and the first and second reference embodiments can be obtained.
1,21,31 溶接欠陥判定システム(判定システム)
2 画像取り込み装置
3,22,32 画像処理装置
4 ビード形状判定装置
11 基準線設定部
12 輪郭点形成部
13 中間点形成部
14 輪郭線形成部
15 第1の中心線形成部
23 第2の中心線形成部
24 湾曲形状認識部
25 基準線調節部
26 輪郭点判別部
33 輪郭点選別部
m ビード
H 残熱発光の輝度
h 輪郭輝度閾値
e ビード領域点
L 基準線
p 輪郭点
q 中間点
P 輪郭線
Q 中心線
K 線分長さ
k1 上限線分閾値
k2 下限線分閾値
1,21,31 Weld defect determination system (determination system)
2
Claims (8)
レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定する基準線設定部と、
前記取り込んだ画像の残熱発光の輝度が前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成する輪郭点形成部と、
同一の前記基準線上における2つの前記輪郭点間に中間点を形成する中間点形成部と、
複数の前記輪郭点に基づいて輪郭線を形成する輪郭線形成部と、
前記基準線を設定する前に、前記取り込んだ画像に対応して、前記輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成する中心線形成部と、
前記中間点及び輪郭線を形成する前に、前記中心線の湾曲を認識して、前記同一の基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向し、かつ前記中間点を形成する2つの輪郭点を判別する輪郭点判別部と
を備え、
前記輪郭点判別部により判別された2つの輪郭点を前記中間点の形成及び前記輪郭線の形成に用いるように構成されている画像処理装置。 In an image processing apparatus for recognizing the shape of a bead formed in the welded part based on an image of a welded part of laser welding,
A reference line setting unit that captures the welded portion where residual heat emission during laser welding occurs and sets a plurality of reference lines corresponding to the captured image;
A region in which the captured luminance region and the front chopped heat emission is larger than the brightness threshold set as the luminance of the residual heat emission to identify the contour line of the bead of the image is smaller than the brightness threshold and a boundary between, on the place where the said reference line intersect, the contour point forming portion for forming a contour points,
An intermediate point forming unit that forms an intermediate point between the two contour points on the same reference line;
A contour line forming unit that forms a contour line based on a plurality of the contour points ;
Forming a center line of the bead shape based on an approximate curve of a plurality of bead area points that are larger than the luminance threshold value corresponding to the captured image before setting the reference line And
Recognizing the curvature of the center line before forming the intermediate point and the contour line, and when more than two contour points are formed on the same reference line, A contour point discriminating unit that discriminates two contour points that face each other across a bead and that form the intermediate point ;
An image processing apparatus configured to use two contour points discriminated by the contour point discriminating unit for forming the intermediate point and forming the contour line .
前記短い線分を判別する下限線分閾値が前記ビードの幅の半分となっている、請求項3に記載の画像処理装置。 The upper limit line segment threshold value for determining the long line segment is twice the width of the bead,
The image processing apparatus according to claim 3 , wherein a lower limit line segment threshold value for determining the short line segment is half the width of the bead.
前記取り込んだ画像に対応して、前記ビードの輪郭線を識別するように設定した輝度閾値より大きくなっている複数のビード領域点の近似曲線に基づいて前記ビードの形状の中心線を形成するステップと、
レーザ溶接時の残熱発光が生じている前記溶接部分を撮影し、かつ取り込んだ画像に対応して、複数の基準線を設定するステップと、
前記取り込んだ画像の残熱発光の輝度が前記輝度閾値より大きくなっている領域と前記残熱発光の輝度が前記輝度閾値より小さくなっている領域との間の境界と、前記基準線とが交差する箇所に、輪郭点を形成するするステップと、
前記中心線の湾曲を認識して、同一の前記基準線上に2つより多くの前記輪郭点が形成された場合に、前記同一の基準線上で前記ビードを跨いで間隔を空けて対向する2つの輪郭点を判別するステップと、
前記同一の基準線上における前記判別された2つの輪郭点間に中間点を形成するステップと、
複数組の前記判別された2つの輪郭点に基づいて輪郭線を形成するステップと
を含む画像処理方法。 In an image processing method for recognizing the shape of a bead formed in the welded part based on an image of a welded part of laser welding,
Forming a centerline of the bead shape based on an approximate curve of a plurality of bead area points that is greater than a brightness threshold set to identify the bead contour line corresponding to the captured image; When,
Photographing the welded portion where the residual heat emission during laser welding occurs, and setting a plurality of reference lines corresponding to the captured image;
The reference line intersects the boundary between the area where the residual heat emission luminance of the captured image is larger than the luminance threshold and the area where the residual heat emission luminance is lower than the luminance threshold. Forming a contour point at a location to be
When two or more contour points are formed on the same reference line by recognizing the curvature of the center line, two opposing points across the bead are spaced on the same reference line Determining a contour point;
Forming an intermediate point between the discriminated two contour points in the same standards line,
Forming a contour line based on a plurality of sets of the determined two contour points .
前記短い線分を判別する下限線分閾値が前記ビードの幅の半分である請求項7に記載の画像処理方法。
An upper limit line segment threshold value for determining the long line segment is twice the width of the bead;
The image processing method according to claim 7 , wherein a lower limit line segment threshold value for determining the short line segment is half of a width of the bead.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011100799A JP5704454B2 (en) | 2011-04-28 | 2011-04-28 | Image processing apparatus and image processing method |
DE102012207045.1A DE102012207045B4 (en) | 2011-04-28 | 2012-04-27 | Image processing apparatus and method |
CN201210132385.8A CN102756209B (en) | 2011-04-28 | 2012-04-27 | Image processing apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011100799A JP5704454B2 (en) | 2011-04-28 | 2011-04-28 | Image processing apparatus and image processing method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012234255A JP2012234255A (en) | 2012-11-29 |
JP5704454B2 true JP5704454B2 (en) | 2015-04-22 |
Family
ID=47007913
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011100799A Active JP5704454B2 (en) | 2011-04-28 | 2011-04-28 | Image processing apparatus and image processing method |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP5704454B2 (en) |
CN (1) | CN102756209B (en) |
DE (1) | DE102012207045B4 (en) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3404404A4 (en) * | 2016-01-14 | 2019-01-09 | Nissan Motor Co., Ltd. | Method for detecting hole in laser-welded portion and laser welding device |
KR101787387B1 (en) * | 2016-05-27 | 2017-10-19 | 주식회사 미루시스템즈 | Measuring Device Of Pattern Shape and Print Characteristics Using Printing Process |
CN107403144B (en) * | 2017-07-11 | 2020-09-11 | 北京小米移动软件有限公司 | Mouth positioning method and device |
EP4096861B1 (en) * | 2020-01-27 | 2024-03-20 | Comau S.p.A. | Method of monitoring the quality of a weld bead, related welding station and computer-program product |
CN114332475A (en) * | 2021-12-07 | 2022-04-12 | 江苏科技大学 | Ship weld joint feature identification method |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3757125A (en) * | 1970-12-26 | 1973-09-04 | Mitsubishi Electric Corp | Optical tracking apparatus |
WO1979000004A1 (en) * | 1977-06-16 | 1979-01-11 | Boc Ltd | Edge followers |
US4491719A (en) * | 1982-12-20 | 1985-01-01 | General Electric Company | Light pattern projector especially for welding |
JP3123146B2 (en) * | 1991-09-11 | 2001-01-09 | トヨタ自動車株式会社 | Weld bead quality inspection equipment |
JPH05256788A (en) * | 1992-03-12 | 1993-10-05 | Taiyo Yuden Co Ltd | Inspecting apparatus of external appearance of electronic component |
JPH0763694A (en) * | 1993-08-27 | 1995-03-10 | Hosei Brake Kogyo Kk | Nondestructive inspection apparatus for spot-welded part |
JPH0916768A (en) * | 1995-06-27 | 1997-01-17 | Meidensha Corp | Method for separating line element and symbol element for drawing reader |
JP3565060B2 (en) * | 1998-11-30 | 2004-09-15 | 松下電器産業株式会社 | Inspection method for conductive balls |
JP4309987B2 (en) * | 1999-02-12 | 2009-08-05 | 武藤工業株式会社 | Raster data editing method and apparatus |
JP4140218B2 (en) * | 2001-08-28 | 2008-08-27 | 松下電工株式会社 | Inspection method and apparatus for laser welds |
JP3949076B2 (en) | 2003-04-11 | 2007-07-25 | トヨタ自動車株式会社 | Laser welding quality evaluation apparatus and method |
SE526624C2 (en) * | 2003-06-06 | 2005-10-18 | Abb Ab | Evaluation of welding quality |
JP2007054879A (en) | 2005-08-26 | 2007-03-08 | Nippon Steel Corp | Hybrid welding equipment, and image processing method and image processing program of hybrid welding equipment |
CN100457353C (en) * | 2006-04-25 | 2009-02-04 | 南京理工大学 | Weld seam appearance, fused bath and seam near-infrared vision integral sensing checkout gear |
JP5058575B2 (en) * | 2006-12-12 | 2012-10-24 | キヤノン株式会社 | Image processing apparatus, control method therefor, and program |
CN101201329B (en) * | 2007-10-16 | 2011-06-22 | 西安交通大学 | Method for extracting and recognizing nondestructive detecting defect based on radial damping energy field |
WO2010035517A1 (en) * | 2008-09-25 | 2010-04-01 | コニカミノルタエムジー株式会社 | Medical image processing apparatus and program |
CN101750416A (en) * | 2008-12-19 | 2010-06-23 | 中国科学院沈阳自动化研究所 | Visual welding seam surface quality detection sensor based on line structure light |
-
2011
- 2011-04-28 JP JP2011100799A patent/JP5704454B2/en active Active
-
2012
- 2012-04-27 DE DE102012207045.1A patent/DE102012207045B4/en active Active
- 2012-04-27 CN CN201210132385.8A patent/CN102756209B/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
DE102012207045B4 (en) | 2021-12-23 |
DE102012207045A1 (en) | 2012-10-31 |
JP2012234255A (en) | 2012-11-29 |
CN102756209B (en) | 2015-01-21 |
CN102756209A (en) | 2012-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5672480B2 (en) | Apparatus and method for determining shape of terminal end of bead | |
JP5704454B2 (en) | Image processing apparatus and image processing method | |
US10019812B2 (en) | Graphic overlay for measuring dimensions of features using a video inspection device | |
JP5338890B2 (en) | Laser welding welding position detection apparatus and welding position detection method | |
US20180240246A1 (en) | Method and device for measuring features on or near an object | |
US10632570B2 (en) | Laser welding quality determination method and apparatus | |
JP7204359B2 (en) | Graphic overlay for measuring feature dimensions using video inspection equipment | |
WO2003093761A1 (en) | Method and instrument for measuring bead cutting shape of electric welded tube | |
JP2008267836A (en) | Surface flaw shape detection method for welded part, and computer program | |
JP2015054343A (en) | Laser welding quality determination device and laser welding quality determination method | |
KR102235832B1 (en) | Portable type welding inspection appatatus and inspection method | |
JPWO2018092492A1 (en) | Operation monitoring apparatus, method and program for high frequency resistance welding and induction heating welding of ERW steel pipe | |
JP2017148841A (en) | Welding processing system and welding failure detection method | |
JP4179558B2 (en) | Laser welding quality evaluation method and apparatus | |
US20190323828A1 (en) | Method for detecting shape of butt joint of welded steel pipe, and quality control method and apparatus for welded steel pipes using the shape detecting method | |
CA2998880A1 (en) | Method and device for measuring features on or near an object | |
JP2005014027A (en) | Weld zone image processing method, welding management system, feedback system for welding machine, and butt line detection system | |
JP4240220B2 (en) | Laser welding quality inspection method and apparatus | |
JP2009233753A (en) | Apparatus for detecting laser irradiation point and apparatus for detecting seam position in laser beam welding machine | |
JP3579788B2 (en) | Uranami welding control method and apparatus | |
WO2023068055A1 (en) | Method and device for monitoring welding, and method and device for laminate molding | |
JP2019060722A (en) | Tubular body inner surface inspection device and tubular body inner surface inspection method | |
JP4793161B2 (en) | Quality inspection method and apparatus for butt welds | |
Wang et al. | Feature information extraction method for narrow gap U-type groove based on laser vision | |
TW202205403A (en) | Laser processing device and laser processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141111 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150113 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150212 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5704454 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |