KR100671022B1 - Method for inspecting the image condition of welding robot by using laser vision sensor - Google Patents

Method for inspecting the image condition of welding robot by using laser vision sensor Download PDF

Info

Publication number
KR100671022B1
KR100671022B1 KR1020050060289A KR20050060289A KR100671022B1 KR 100671022 B1 KR100671022 B1 KR 100671022B1 KR 1020050060289 A KR1020050060289 A KR 1020050060289A KR 20050060289 A KR20050060289 A KR 20050060289A KR 100671022 B1 KR100671022 B1 KR 100671022B1
Authority
KR
South Korea
Prior art keywords
laser
vision sensor
area value
welding robot
welding
Prior art date
Application number
KR1020050060289A
Other languages
Korean (ko)
Other versions
KR20070005140A (en
Inventor
최윤서
강민구
Original Assignee
삼성중공업 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성중공업 주식회사 filed Critical 삼성중공업 주식회사
Priority to KR1020050060289A priority Critical patent/KR100671022B1/en
Publication of KR20070005140A publication Critical patent/KR20070005140A/en
Application granted granted Critical
Publication of KR100671022B1 publication Critical patent/KR100671022B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K9/00Arc welding or cutting
    • B23K9/12Automatic feeding or moving of electrodes or work for spot or seam welding or cutting
    • B23K9/127Means for tracking lines during arc welding or cutting
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K9/00Arc welding or cutting
    • B23K9/02Seam welding; Backing means; Inserts
    • B23K9/0216Seam profiling, e.g. weaving, multilayer
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1674Programme controls characterised by safety, monitoring, diagnostic
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/45Nc applications
    • G05B2219/45104Lasrobot, welding robot

Abstract

본 발명은 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법에 관한 것이다. 본 발명에 따른 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법은 레이저 비전 센서를 이용하여 촬영된 영상 데이터로부터 정상 상태에서의 레이저 띠 면적값을 설정하는 단계, 정상 상태에서의 레이저 띠의 면적값을 설정했던 위치로 용접 로봇을 이동시키는 단계, 위치에서 측정된 현재의 영상 데이터로부터 현재 레이저 띠의 면적값을 계산하는 단계, 현재 레이저 띠 면적값과 정상 상태에서의 레이저 띠 면적값의 크기를 비교하는 단계 및 레이저 띠 면적값의 비교에 근거하여 레이저 비전 센서를 구비한 용접 로봇의 용접 작업 진행 여부를 판단하는 단계를 포함한다.The present invention relates to a welding robot image state checking method using a laser vision sensor. In the welding robot image state checking method using the laser vision sensor according to the present invention, the laser band sensor in the normal state is set from the image data photographed using the laser vision sensor. Moving the welding robot to the set position; calculating the area value of the current laser stripe from the current image data measured at the position; and comparing the size of the current laser stripe area value with the laser stripe area value at a steady state. And determining whether or not the welding operation of the welding robot having the laser vision sensor is performed based on the comparison between the step and the laser strip area value.

용접 로봇, 레이저 비전 센서, 영상 데이터, 레이저 띠 Welding robot, laser vision sensor, image data, laser strip

Description

레이저 비전 센서를 이용한 용접 로봇의 영상 상태 점검 방법{Method for inspecting the image condition of welding robot by using laser vision sensor}Method for inspecting the image condition of welding robot by using laser vision sensor}

도 1은 종래 기술에 따른 용접 로봇 위빙 시스템을 개략적으로 나타난 구성도.1 is a schematic view showing a welding robot weaving system according to the prior art.

도 2는 본 발명의 바람직한 일 실시예에 따른 용접 로봇 영상 상태 점검 시스템을 개략적으로 나타낸 구성도.Figure 2 is a schematic diagram showing a welding robot image state checking system according to an embodiment of the present invention.

도 3은 본 발명의 바람직한 일 실시예에 따른 레이저 비전 센서를 이용한 로봇 용접이 영상 상태 점검을 수행하는 절차를 나타낸 순서도.3 is a flow chart illustrating a procedure for performing robot image welding by using a laser vision sensor according to an exemplary embodiment of the present invention.

도 4는 본 발명의 바람직한 일 실시예에 따른 레이저 비전 센서의 레이저 띠를 촬영한 영상 데이터를 나타낸 화면 예시도.Figure 4 is an exemplary screen showing image data photographing the laser strip of the laser vision sensor according to an embodiment of the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for main parts of the drawings>

210…로봇 제어부 211…프로세서210... Robot control unit 211. Processor

212…타이머 213…메모리212... Timer 213... Memory

214…면적 계산부 215…로봇 구동부214... Area calculating section 215... Robot drive unit

220…센서 제어부 222…센서 구동부220... Sensor control unit 222. Sensor drive

224…영상 처리부 230…용접 로봇224... Image processing unit 230. Welding robot

231…용접 토치 240…레이저 비전 센서231... Welding torch 240... Laser vision sensor

250…피용접물250... Welded object

본 발명은 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법 및 시스템에 관한 것이다.The present invention relates to a method and system for checking a welding robot image condition using a laser vision sensor.

일반적으로 용접 로봇은 자동차, 선박 등과 같이 금속 판재의 접합 공정에 사용되며, 작업 프로그램에 의해 자동적으로 용접 작업을 진행하게 된다. 용접 로봇은 작업 명령에 따라 로봇 팔에 부착된 용접 토치를 이용하여 피용접물의 용접선을 추종하면서 용접하게 된다.In general, the welding robot is used in the joining process of the metal plate, such as automobiles, ships, etc., the welding operation is automatically performed by the work program. The welding robot performs welding while following the welding line of the welded object by using a welding torch attached to the robot arm according to a work instruction.

이러한 기존 용접 로봇의 위빙 시스템에서 레이저 비전 센서로부터 획득한 영상 데이터로부터 용접선에 대한 3차원 좌표와 위빙(Weaving) 좌표를 구하고, 상기 위빙 좌표에 근거하여 용접 로봇이 구동되어지는 발명이 출원되어 있는 상태이다. 1997년 8월 28일자로 출원된 발명의 명칭이 "레이저 비전 센서를 이용한 용접 로봇의 제어 방법 및 장치"(이하 종래 발명으로 칭함)인 출원 번호 제10-1977-0042128호가 1999년 3월 15일자로 개시되어 있다.In the weaving system of the conventional welding robot, the invention in which the 3D coordinates and the weaving coordinates of the welding line are obtained from the image data obtained from the laser vision sensor and the welding robot is driven based on the weaving coordinates. to be. Application No. 10-1977-0042128, filed Aug. 28, 1997, entitled "Control Methods and Apparatus for Welding Robots Using Laser Vision Sensors" (hereinafter referred to as prior invention), issued Mar. 15, 1999. Is disclosed.

도 1은 종래 기술에 따른 용접 로봇 위빙 시스템을 개략적으로 나타난 구성 도이다.1 is a configuration diagram schematically showing a welding robot weaving system according to the prior art.

도 1을 참조하면, 레이저 비전 센서(laser vision sensor)를 이용한 용접 로봇의 위빙 시스템은 크게 로봇 제어부(210) 및 센서 제어부(220)로 나눌 수 있다. 또한 상기 용접 로봇(30)의 위빙 시스템은 상기 로봇 제어부(210)로부터 제어를 받는 용접 로봇(30), 상기 센서 제어부(220)로부터 제어를 받는 레이저 비전 센서(40)로 구성된다.Referring to FIG. 1, a weaving system of a welding robot using a laser vision sensor may be largely divided into a robot controller 210 and a sensor controller 220. In addition, the weaving system of the welding robot 30 is composed of a welding robot 30 under the control of the robot control unit 210, the laser vision sensor 40 under the control from the sensor control unit 220.

로봇 제어부(210)는 용접 로봇(30)을 제어시키기 위한 프로세서(11)와 용접 로봇(30)의 주기적인 제어를 위한 타이머(12)를 갖추고 있다. 또한 로봇 제어부(210)는 용접 로봇(30)의 제어를 위한 실행 프로그램과 프로그램의 실행 중에 처리해야 할 정보들을 저장한다. The robot controller 210 includes a processor 11 for controlling the welding robot 30 and a timer 12 for periodic control of the welding robot 30. In addition, the robot controller 210 stores an execution program for controlling the welding robot 30 and information to be processed during execution of the program.

센서 제어부(220)는 레이저 비전 센서(40)를 구동하기 위한 센서 구동부(21), 레이저 비전 센서(40)로부터 얻어진 영상 데이터를 처리하기 위한 영상 처리부(22) 및 처리한 영상으로부터 용접선의 좌표를 얻어내기 위한 좌표 변환부(23)로 구성된다.The sensor controller 220 adjusts the weld line coordinates from the sensor driver 21 for driving the laser vision sensor 40, the image processor 22 for processing the image data obtained from the laser vision sensor 40, and the processed image. It consists of the coordinate conversion part 23 for obtaining.

이러한 기존의 레이저 비전 센서를 지닌 용접 로봇의 가장 큰 문제점은 용접로봇이 용접시 레이저 비전 센서에 대한 의존도가 높다는 것이다. 그렇기 때문에 용접 로봇이 흄(Fume)이나 스패터(Spatter) 등으로 더럽혀진 영상 상태를 가지고 계속해서 작업을 진행하는 동안 정확한 이미지 프로세싱을 수행하지 못하게 된다. 이로 인해 실제 측정 정보와 프로세싱 된 정보가 일치하지 않을 뿐만 아니라 레이저 비전 센서로부터 제공된 데이터의 신뢰성도 떨어지게 된다. 결국 이러한 상태가 계속해서 누적되면 작업 효율 및 품질도 떨어질 뿐만 아니라 심지어는 작업 진행도 어려워 질 수 있는 문제점을 발생시킬 수 있다.The biggest problem of the welding robot with such a conventional laser vision sensor is that the welding robot is highly dependent on the laser vision sensor when welding. This prevents the welding robot from performing accurate image processing while continuing to work with an image state that is soiled with fume or spatter. This not only makes the actual measurement information inconsistent with the processed information, but also reduces the reliability of the data provided by the laser vision sensor. As a result, the accumulation of these conditions can lead to problems that not only reduce work efficiency and quality, but also make work difficult.

본 발명은 상기와 같은 문제를 해결하기 위한 것으로, 본 발명의 일 목적은 레이저 비전 센서로부터 촬영된 현재의 레이저 띠 면적값을 계산하여 설정된 정상 상태의 레이저 띠 면적값과 비교하여 영상 상태의 이상 여부를 판단할 수 있는 용접 로봇 영상 상태 점검 시스템 및 방법을 제공하는 것이다.The present invention is to solve the above problems, an object of the present invention is to calculate the current laser band area value taken from the laser vision sensor compared to the laser band area value of the normal state set whether the abnormal state of the image; It is to provide a welding robot image condition checking system and method that can determine.

본 발명의 다른 목적은 현재의 레이저 띠 면적값이 정상 상태에서 설정된 레이저 띠 면적값보다 현저하게 일정 비율 이상 면적 손실이 발생할 경우 용접 로봇의 용접 작업을 중단시킬 수 있는 용접 로봇 영상 상태 점검 시스템 및 방법을 제공하는 것이다.It is another object of the present invention to provide a welding robot image condition checking system and method that can interrupt the welding operation of a welding robot when an area loss occurs by a certain ratio or more than the laser band area value set in the normal state. To provide.

상술한 목적들을 달성하기 위하여, 본 발명의 일 측면에 따르면, 레이저 비전 센서를 이용하여 촬영된 영상 데이터로부터 정상 상태에서의 레이저 띠 면적값을 설정하는 단계, 상기 정상 상태에서의 레이저 띠의 면적값을 설정했던 위치로 용접 로봇을 이동시키는 단계, 상기 위치에서 측정된 현재의 영상 데이터로부터 현재 레이저 띠의 면적값을 계산하는 단계, 상기 현재 레이저 띠 면적값과 상기 정상 상태에서의 레이저 띠 면적값의 크기를 비교하는 단계 및 상기 레이저 띠 면적값의 비교에 근거하여 레이저 비전 센서를 구비한 용접 로봇의 용접 작업 진행 여부를 판단하는 단계를 포함하는 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법을 제공할 수 있다.In order to achieve the above objects, according to an aspect of the present invention, the step of setting the laser band area value in the steady state from the image data photographed using the laser vision sensor, the area value of the laser band in the steady state Moving the welding robot to a position where the position is set; calculating an area value of the current laser stripe from the current image data measured at the position; A method for checking a welding robot image state using a laser vision sensor, the method comprising: comparing a size and determining whether a welding operation of a welding robot having a laser vision sensor is performed based on a comparison of the laser band area values is provided. Can be.

바람직한 실시예에서, 상기 현재 레이저 띠 면적값이 상기 정상 상태에서의 레이저 띠 면적값보다 작은 경우, 상기 용접 로봇은 로봇 제어부의 제어에 따라 용접 작업을 중단시키거나 경보 알람을 발생시키는 것을 특징으로 할 수 있다. In a preferred embodiment, when the current laser stripe area value is smaller than the laser stripe area value in the normal state, the welding robot stops the welding operation or generates an alarm alarm under the control of the robot controller. Can be.

이어서, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. Next, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 2는 본 발명의 바람직한 일 실시예에 따른 용접 로봇 영상 상태 점검 시스템을 개략적으로 나타낸 구성도이다.Figure 2 is a schematic diagram showing a welding robot image state checking system according to an embodiment of the present invention.

도 2를 참조하면, 본 발명에 따른 용접 로봇 영상 상태 시스템은 로봇 제어부(210), 용접 로봇(230) 및 센서 제어부(220)와 레이저 비전 센서(240)를 포함하 는 레이저 비전 시스템으로 구성된다.Referring to FIG. 2, the welding robot image state system according to the present invention includes a laser control system including a robot controller 210, a welding robot 230, a sensor controller 220, and a laser vision sensor 240. .

로봇 제어부(210)는 타이머(212), 메모리(213), 면적 계산부(214), 로봇 구동부(215) 및 프로세서(211)를 포함한다. 상기 타이머(212)는 설정된 시간이 도래할 때마다 계수 완료 신호를 전송하는 기능을 포함한다. 또한, 로봇 제어부(210)는 레이저 비전 센서(240)로부터 측정된 영상 데이터로부터 용접 토치(231)에 대한 용접의 위빙 좌표를 산출하고 용접 로봇(230)의 동작을 제어하는 기능을 더 포함할 수 있다.The robot controller 210 includes a timer 212, a memory 213, an area calculator 214, a robot driver 215, and a processor 211. The timer 212 includes a function of transmitting a counting completion signal whenever a set time arrives. In addition, the robot controller 210 may further include a function of calculating the weaving coordinates of the welding of the welding torch 231 from the image data measured by the laser vision sensor 240 and controlling the operation of the welding robot 230. have.

메모리(213)는 용접 로봇(230)을 정상 상태에서 레이저 띠를 측정했던 위치로 이동시키기 위해 특정한 용접선의 중심점 좌표를 저장하는 기능을 포함한다. 또한 상기 메모리(213)는 면적 계산부(214)에서 계산된 정상 상태의 레이저 띠 면적값 및 현재 영상 상태의 레이저 띠 면적값을 저장하는 기능을 더 포함한다.The memory 213 includes a function of storing the center point coordinates of a specific welding line in order to move the welding robot 230 to the position where the laser band was measured in the normal state. The memory 213 further includes a function of storing the laser band area value of the steady state and the laser band area value of the current image state calculated by the area calculator 214.

면적 계산부(214)는 센서 제어부(220)로부터 제공된 영상 상태의 레이저 띠 면적값을 측정하는 기능을 포함한다. 상기 면적 계산부(214)에서 측정된 레이저 띠 면적값은 프로세서(211)로 전송되어 본 발명에 따른 레이저 띠 면적값 비교에 이용될 수 있다.The area calculator 214 includes a function of measuring a laser band area value of an image state provided from the sensor controller 220. The laser stripe area value measured by the area calculator 214 may be transmitted to the processor 211 and used to compare the laser stripe area values according to the present invention.

로봇 구동부(215)는 프로세서(211)의 지시에 따라 용접 로봇(230)을 구동시키는 기능을 포함한다. 또한 로봇 구동부(215)는 영상 상태와 관련된 이상 발생 시 메모리에 저장된 특정한 용접선 좌표를 이용하여 정상 상태에서 레이저 띠를 측정했던 위치로 용접 로봇(230)을 이동시키는 기능을 더 포함할 수 있다. 또한 로봇 구동부(215)는 프로세서(211)의 지시에 따라 용접 작업을 중단시키는 기능을 더 포 함할 수 있다.The robot driver 215 includes a function of driving the welding robot 230 according to the instruction of the processor 211. In addition, the robot driver 215 may further include a function of moving the welding robot 230 to a position where the laser band is measured in the normal state by using a specific welding line coordinate stored in the memory when an abnormality related to the image state occurs. In addition, the robot driver 215 may further include a function of stopping the welding operation according to the instruction of the processor 211.

프로세서(211)는 타이머(212), 메모리(213), 면적 계산부(214) 및 로봇 구동부(215)와 연동하고 타이머(212)의 완료 신호에 응답하여 용접 부위를 촬영하기 위한 요청 신호를 센서 제어부(220)로 전송하는 기능을 포함한다. 또한 상기 용접 로봇(230)의 용접 작업 진행 시 레이저 비전 센서(240)에서 측정된 영상 데이터로부터 용접선 좌표를 계산하지 못하는 경우, 면적 계산부(214)를 통해 계산된 현재 영상 상태의 레이저 띠 면적값을 제공받아 정상 상태의 레이저 띠 면적값과 비교하는 기능을 더 포함한다. 또한 프로세서(211)는 상기 레이저 띠 면적값 비교 시, 상기 현재 영상 상태의 레이저 띠 면적값이 정상 상태에서 설정된 레이저 띠 면적값보다 작은 경우 로봇 구동부(215)로 작업 중단을 지시하는 기능을 더 포함한다.The processor 211 interlocks with the timer 212, the memory 213, the area calculator 214, and the robot driver 215, and senses a request signal for photographing a welded portion in response to the completion signal of the timer 212. It includes a function for transmitting to the control unit 220. In addition, when the welding robot 230 does not calculate the weld line coordinates from the image data measured by the laser vision sensor 240 during the welding operation, the laser band area value of the current image state calculated by the area calculator 214. It further includes the function of receiving a comparison with the laser strip area value of the steady state. In addition, the processor 211 further includes a function of instructing the robot driver 215 to stop work when the laser stripe area value of the current image state is smaller than the laser stripe area value set in the normal state when comparing the laser stripe area values. do.

센서 제어부(220)는 로봇 제어부(210) 및 레이저 비전 센서(240)와 연동하며, 센서 구동부(222)와 영상 처리부(224)와 좌표 변환부(223)를 포함하여 구성된다. 상기 센서 제어부(220)는 로봇 제어부(210)의 용접선 정보 요청 신호에 따라 상기 레이저 비전 센서(240)를 구동시키고 상기 레이저 비전 센서(240)가 촬영한 영상 데이터를 입력받아 프로세서(211)로 전송하는 기능을 수행할 수 있다. 여기서 레이저 비전 센서(240)는 센서 제어부(220)의 영상 데이터 요청 신호에 따라 피용접물의 용접 부위를 촬영하는 기능을 수행한다.The sensor controller 220 is interlocked with the robot controller 210 and the laser vision sensor 240, and includes a sensor driver 222, an image processor 224, and a coordinate converter 223. The sensor controller 220 drives the laser vision sensor 240 according to the welding line information request signal of the robot controller 210, receives the image data photographed by the laser vision sensor 240, and transmits the image data to the processor 211. To perform the function. Here, the laser vision sensor 240 performs a function of photographing a welded portion of the welded object according to the image data request signal of the sensor controller 220.

상기 도 2에 도시된 본 발명에 바람직한 일 실시예에 따른 용접 로봇 영상 상태 점검 시스템을 개략적으로 설명하면 다음과 같다.Referring to the welding robot image state inspection system according to an embodiment of the present invention shown in FIG. 2 schematically.

상기 프로세서(211)는 타이머(212)의 완료 신호가 인가되면 영상 데이터 요 청 신호를 센서 구동부(222)로 전송한다. 상기 센서 구동부(222)는 영상 데이터 요청 신호를 레이저 비전 센서(240)로 전송하여 촬영을 개시할 수 있다. 상기 타이머(212)는 레이저 비전 센서에서 촬영된 영상 데이터로부터 용접선의 중심을 찾기 위한 샘플링 시간이 도래하면 완료 신호를 출력할 수 있다.When the completion signal of the timer 212 is applied, the processor 211 transmits an image data request signal to the sensor driver 222. The sensor driver 222 may transmit an image data request signal to the laser vision sensor 240 to start capturing. The timer 212 may output a completion signal when a sampling time for finding the center of the weld line arrives from the image data photographed by the laser vision sensor.

영상 처리부(224)는 레이저 비전 센서(240)가 촬영한 영상 데이터를 입력받고, 상기 영상 데이터를 프로세서(211)를 통해 면적 계산부(214)로 전송한다. 상기 좌표 변환부(223)는 상기 영상 처리부(224)가 처리한 영상으로부터 용접선의 좌표를 산출한다. The image processor 224 receives image data captured by the laser vision sensor 240 and transmits the image data to the area calculator 214 through the processor 211. The coordinate converter 223 calculates the coordinates of the weld line from the image processed by the image processor 224.

이후 프로세서(211)는 용접 작업 진행 시 레이저 비전 센서(240)에서 측정된 영상 데이터로부터 용접선 좌표를 계산하지 못하는 경우, 영상 상태와 관련된 이상이 발생되면 면적 계산부(214)로부터 계산된 정상 상태의 레이저 띠 면적값과 현재 영상 상태의 레이저 띠 면적값의 크기를 비교할 수 있다. 또한, 상기 프로세서(211)는 상기 레이저 띠 면적값 비교 시 정상 상태에서 설정된 레이저 띠 면적값보다 작은 경우 용접 로봇(230)의 작업 중단 여부를 판단할 수 있다.Thereafter, when the welding operation is performed, when the welding line coordinates cannot be calculated from the image data measured by the laser vision sensor 240, when the abnormality related to the image state occurs, the processor 211 may determine the normal state calculated from the area calculator 214. The size of the laser stripe area value and the laser stripe area value of the current image state can be compared. In addition, the processor 211 may determine whether the welding robot 230 is interrupted when the laser band area value is smaller than the laser band area value set in the normal state.

레이저 비전 센서(240)는 용접 토치(231)로부터 소정 거리만큼 떨어져 설치되는데, 이는 용접 토치(231)의 화염에 의해 촬영 영상이 불량해지는 것을 방지하기 위한 것이다. 상기 레이저 비전 센서(240)는 센서 구동부(222)의 구동 신호에 따라 피용접물(250)의 용접 부위를 촬영하여 영상 데이터를 영상 처리부(224)로 전송할 수 있다. 상기 레이저 비전 센서(240)는 피용접물(250)의 용접선 방향을 따라 이동하면서 용접선의 중심점을 촬영할 수 있다.The laser vision sensor 240 is installed away from the welding torch 231 by a predetermined distance, which is to prevent the photographed image from being deteriorated by the flame of the welding torch 231. The laser vision sensor 240 photographs a welded portion of the welded object 250 according to a driving signal of the sensor driver 222 and transmits the image data to the image processor 224. The laser vision sensor 240 may photograph the center point of the weld line while moving along the weld line direction of the welded object 250.

도 3은 본 발명의 바람직한 일 실시예에 따른 레이저 비전 센서를 이용한 로봇 용접이 영상 상태 점검을 수행하는 절차를 나타낸 순서도이다.3 is a flowchart illustrating a procedure of performing image state check by robot welding using a laser vision sensor according to an exemplary embodiment of the present invention.

도 3을 참조하면, 먼저 본 발명에 따른 용접 로봇 영상 상태 점검 시스템의 로봇 제어부는 레이저 비전 센서로부터 영상 데이터를 센서 제어부를 통해 제공받아 정상 상태의 레이저 띠 면적값을 설정한다(단계 301).Referring to FIG. 3, first, a robot controller of a welding robot image state checking system according to the present invention receives image data from a laser vision sensor through a sensor controller and sets a laser band area value in a normal state (step 301).

상기 로봇 제어부는 현재 영상 상태를 측정하기 위해 정상 상태에서 레이저 띠를 측정했던 위치로 용접 로봇을 이동시킨다(단계 303). 상기 용접 로봇이 현재 영상 데이터를 측정하기 위한 위치로 이동한 후, 로봇 제어부는 레이저 비전 센서를 통해 촬영한 현재의 영상 데이터를 이용하여 면적 계산부를 통해 현재 레이저 띠 면적값을 계산한다(단계 305). The robot controller moves the welding robot to the position where the laser band was measured in the normal state to measure the current image state (step 303). After the welding robot moves to a position for measuring current image data, the robot controller calculates a current laser stripe area value through an area calculator using the current image data captured by the laser vision sensor (step 305). .

이후 용접 제어부는 용접 작업을 진행시키기 전에 영상 상태를 점검하기 위해 상기 면적 계산부를 통해 계산된 현재 레이저 띠 면적값을 정상 상태에서 설정된 레이저 띠 면적값과 비교한다(단계 307). 상기 현재 레이저 띠 면적값이 정상 상태에서 설정한 레이저 띠 면적값보다 크거나 같은 경우, 센서 제어부를 통해 제공받는 영상 데이터를 바탕으로 용접 로봇을 제어하여 용접 작업을 진행시킬 수 있다(단계 309). 여기서 상기 현재 레이저 띠 면적값이 정상 상태에서 설정된 레이저 띠 면적값보다 작은 경우, 상기 로봇 제어부는 로봇 구동부를 통해 용접 로봇의 용접 작업을 중단시키거나 혹은 경보 알람을 발생시킬 수 있다(단계 311).Thereafter, the welding controller compares the current laser stripe area value calculated by the area calculator with the laser stripe area value set in the normal state to check the image state before proceeding the welding operation (step 307). When the current laser stripe area value is greater than or equal to the laser stripe area value set in the normal state, the welding operation may be performed by controlling the welding robot based on the image data provided through the sensor controller (step 309). Here, when the current laser stripe area value is smaller than the laser stripe area value set in the normal state, the robot control unit may stop the welding operation of the welding robot or generate an alarm alarm through the robot driving unit (step 311).

삭제delete

삭제delete

삭제delete

상기 용접 로봇의 작업 진행 시, 다음의 레이저 띠 영상이 획득되면 '현재의 레이저 띠 면적값을 계산하는 단계(305)'로 되돌아가 용접 작업을 계속해서 진행시킬 수 있다.During the operation of the welding robot, if the next laser band image is acquired, the process returns to the step 305 of calculating the current laser band area value, and may continue the welding operation.

도 4는 본 발명의 바람직한 일 실시예에 따른 레이저 비전 센서의 레이저 띠를 촬영한 영상 데이터를 나타낸 화면 예시도이다.4 is an exemplary view showing image data of photographing a laser strip of a laser vision sensor according to an exemplary embodiment of the present invention.

도 4를 참조하면, 도시된 화면은 레이저 비전 센서로부터 촬영된 정상 상태에서의 레이저 띠(401) 및 면적 손실이 발생한 현재 영상 상태에서의 레이저 띠(403)를 나타낸 화면이다. 상기 정상 상태의 레이저 띠(401) 및 면적 손실이 발생한 현재 영상 상태에서의 레이저 띠(403)는 레이저 띠의 면적값 비교를 위해 동일한 위치에서 촬영된 영상 데이터를 나타낸다.Referring to FIG. 4, the illustrated screen is a screen showing a laser strip 401 in a normal state photographed by a laser vision sensor and a laser strip 403 in a current image state where an area loss occurs. The laser strip 401 in the steady state and the laser strip 403 in the current image state where the area loss occurs represent image data photographed at the same position for comparing the area values of the laser strips.

정상 상태의 레이저 띠(401) 및 면적 손실이 발생한 현재 영상 상태의 레이저 띠(403)는 면적 계산부를 통해 면적값이 계산된다. The area of the laser band 401 in the steady state and the laser band 403 in the current image state in which the area loss occurs are calculated by the area calculator.

상기 정상 상태 레이저 띠(401)의 면적값은 용접 작업에 필요한 정확한 이미지 프로세싱의 기준이 될 수 있다. 또한 로봇 제어부는 정상 상태의 레이저 띠(401)의 면적값을 설정함으로써 레이저 비전 센서의 영상 상태 불량으로부터 용접 작업의 신뢰도를 높일 수 있다.The area value of the steady state laser strip 401 may be a reference for accurate image processing required for the welding operation. In addition, the robot controller may increase the reliability of the welding operation from the image state defect of the laser vision sensor by setting the area value of the laser strip 401 in the normal state.

면적 손실이 발생한 현재 상태의 레이저 띠(403)는 레이저의 영상 데이터를 받아들이는 레이저 비전 센서가 용접에 의한 아크(Arc), 흄(Fume), 스패터(Spatter) 등의 영향으로 용접을 하는 하나의 단위 시간동안 레이저 비전 센서로부 터 정상적인 영상 데이터를 얻지 못하는 경우에 발생될 수 있다.The laser strip 403 in the current state where the area loss occurs is a laser vision sensor that receives the image data of the laser welded under the influence of arc, fume, spatter, etc. by welding. This can occur if normal image data cannot be obtained from the laser vision sensor during the unit time of.

본 발명은 상기 실시예에 한정되지 않으며, 많은 변형이 본 발명의 사상 내에서 당 분야에서 통상의 지식을 가진 자에 의하여 가능함은 물론이다. The present invention is not limited to the above embodiments, and many variations are possible by those skilled in the art within the spirit of the present invention.

본 발명에 의하면 레이저 비전 센서로부터 촬영된 현재의 레이저 띠 면적값을 계산하여 설정된 정상 상태의 레이저 띠 면적값과 비교하여 영상 상태의 이상 여부를 판단할 수 있는 용접 로봇 영상 상태 점검 시스템 및 방법을 제공할 수 있다.According to the present invention, the present invention provides a welding robot image state checking system and method for determining an abnormal state of an image state by calculating a current laser band area value photographed from a laser vision sensor and comparing the laser band area value in a normal state. can do.

본 발명에 의하면 현재의 레이저 띠 면적값이 정상 상태에서 설정된 레이저 띠 면적값보다 작은 경우 용접 로봇의 용접 작업을 중단시킬 수 있는 용접 로봇 영상 상태 점검 시스템 및 방법을 제공할 수 있다.According to the present invention, when the current laser band area value is smaller than the laser band area value set in the normal state, it is possible to provide a welding robot image condition checking system and method capable of stopping the welding operation of the welding robot.

Claims (3)

레이저 비전 센서를 이용하여 촬영된 영상 데이터로부터 정상 상태에서의 레이저 띠 면적값을 설정하는 단계;Setting a laser band area value at a steady state from image data photographed using a laser vision sensor; 상기 정상 상태에서의 레이저 띠의 면적값을 설정했던 위치로 용접 로봇을 이동시키는 단계; Moving the welding robot to a position where the area value of the laser strip in the steady state is set; 상기 위치에서 측정된 현재의 영상 데이터로부터 현재 레이저 띠의 면적값을 계산하는 단계;Calculating an area value of a current laser strip from the current image data measured at the position; 상기 현재 레이저 띠 면적값과 상기 정상 상태에서의 레이저 띠 면적값의 크기를 비교하는 단계; 및Comparing the current laser stripe area value with a size of the laser stripe area value in the steady state; And 상기 레이저 띠 면적값의 비교에 근거하여 레이저 비전 센서를 구비한 용접 로봇의 용접 작업 진행 여부를 판단하는 단계Determining whether the welding operation of the welding robot including the laser vision sensor is in progress based on the comparison of the laser strip area values; 를 포함하는 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법.Welding robot image state checking method using a laser vision sensor comprising a. 제1항에 있어서,The method of claim 1, 상기 현재 레이저 띠 면적값이 상기 정상 상태에서의 레이저 띠 면적값보다 작은 경우, 상기 용접 로봇은 로봇 제어부의 제어에 따라 용접 작업을 중단하는 것을 특징으로 하는 레이저 비전 센서를 이용한 용접 로봇 영상 상태 점검 방법.When the current laser stripe area value is smaller than the laser stripe area value in the normal state, the welding robot stops the welding operation under the control of the robot control unit. . 삭제delete
KR1020050060289A 2005-07-05 2005-07-05 Method for inspecting the image condition of welding robot by using laser vision sensor KR100671022B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050060289A KR100671022B1 (en) 2005-07-05 2005-07-05 Method for inspecting the image condition of welding robot by using laser vision sensor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050060289A KR100671022B1 (en) 2005-07-05 2005-07-05 Method for inspecting the image condition of welding robot by using laser vision sensor

Publications (2)

Publication Number Publication Date
KR20070005140A KR20070005140A (en) 2007-01-10
KR100671022B1 true KR100671022B1 (en) 2007-01-19

Family

ID=37870825

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050060289A KR100671022B1 (en) 2005-07-05 2005-07-05 Method for inspecting the image condition of welding robot by using laser vision sensor

Country Status (1)

Country Link
KR (1) KR100671022B1 (en)

Also Published As

Publication number Publication date
KR20070005140A (en) 2007-01-10

Similar Documents

Publication Publication Date Title
JP3886014B2 (en) Automatic ultrasonic inspection apparatus, inspection method thereof, and manufacturing method using the inspection method
CN112154040B (en) Method for automatically determining optimal welding parameters for performing a weld on a workpiece
JP2007278809A (en) Method and device for inspecting spot welded part
KR20200136686A (en) Portable type welding inspection appatatus and inspection method
US20220120697A1 (en) Repair welding inspection device and repair welding inspection method
JP6735697B2 (en) Welding state determination system and welding state determination method
WO2020251038A1 (en) Repair weld control device and repair weld control method
KR100671024B1 (en) Method and system for conducting step welding of the welding robot by using laser vision sensor
JP4971272B2 (en) Spot welding gun management device
JP2001321971A (en) Control system for laser beam welding head and laser beam welding head equipped with the control system
KR100671022B1 (en) Method for inspecting the image condition of welding robot by using laser vision sensor
JP5636148B2 (en) Automatic welding machine position detection system
JP2001246582A (en) Working robot device
JPH11347985A (en) Trouble diagnostic method for robot system with visual sensor
JP3550191B2 (en) Welding robot
JPH09155543A (en) Automatic welding equipment
US11561204B2 (en) Display control system, inspection control system, display control method, and storage medium
CN114952067A (en) Welding quality detection method and system for underwater welding
JPH09248687A (en) Laser beam machining robot
KR100687813B1 (en) Method for providing welding robot with weaving by using laser vision sensor
KR200248899Y1 (en) automatic welding apparatus
JP2899642B2 (en) Processing position detection device and processing position detection method
JP2004074224A (en) Welding robot apparatus
JP2001038467A (en) Method and device for checking welding quality
JPH05138354A (en) Automatic welding profiling device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130102

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140102

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141231

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee