CN110293345A - 一种基于嵌入式视觉的相贯线焊接机器人 - Google Patents

一种基于嵌入式视觉的相贯线焊接机器人 Download PDF

Info

Publication number
CN110293345A
CN110293345A CN201910598615.1A CN201910598615A CN110293345A CN 110293345 A CN110293345 A CN 110293345A CN 201910598615 A CN201910598615 A CN 201910598615A CN 110293345 A CN110293345 A CN 110293345A
Authority
CN
China
Prior art keywords
module
welding
embedded
vision
intersecting line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910598615.1A
Other languages
English (en)
Inventor
李东洁
徐立航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin University of Science and Technology
Original Assignee
Harbin University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin University of Science and Technology filed Critical Harbin University of Science and Technology
Priority to CN201910598615.1A priority Critical patent/CN110293345A/zh
Publication of CN110293345A publication Critical patent/CN110293345A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K37/00Auxiliary devices or processes, not specially adapted to a procedure covered by only one of the preceding main groups
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K37/00Auxiliary devices or processes, not specially adapted to a procedure covered by only one of the preceding main groups
    • B23K37/02Carriages for supporting the welding or cutting element
    • B23K37/0252Steering means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Robotics (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Resistance Welding (AREA)

Abstract

一种基于嵌入式视觉的相贯线焊接机器人,它的特征在于能根据嵌入式视觉系统采集的信息,实现焊接焊缝的定位与避障。本技术领域属于相贯线焊接领域,针对在相贯线焊接领域存在的定位不准确,避障难克服的问题,设计了一种利用双目视觉定位的相贯线焊接机器人。双目视觉模块将采集到的相贯线焊缝的图像,通过三维立体还原算法,进行三维图像还原,然后标定出焊缝在三维图中坐标,将标定的数据传给底层嵌入式系统。嵌入式系统根据定位算法将焊枪精准的定位到焊缝焊接起始位置处,机器人开始工作,直至焊接结束。焊枪和机械臂处均安装有红外传感器,用于定位或焊接时的避障。当红外传感器检测到有障碍物时会自动调整机械臂的姿态,达到避障的效果。

Description

一种基于嵌入式视觉的相贯线焊接机器人
技术领域
本发明专利主要涉及机器人焊接领域,具体涉及一种基于嵌入式视觉的相贯线焊接机器人。
背景技术
现代焊接领域中焊接机器人种类繁多,但是能实现防止碰撞和焊缝定位功能的相贯线焊接机器人少之又少,因此大多数机器人仍采用焊缝固定且位置明确的简单焊接。考虑到焊缝和焊件的位置不明确,机械臂与形成相贯线的插接管道相碰撞等情况,此时焊接机器人应有更高的性能。
发明内容
本发明专利是一种基于嵌入式视觉的相贯线焊接机器人,它的主要特征是能够自动对焊件的焊缝进行识别标定,还能够实现对焊接机器人的防撞。当规划好焊接轨迹后,嵌入式处理器会控制焊枪按照规定的路径进行焊接。当传感器模块在焊接时采集到障碍物信息时,会立马将信息传给嵌入式处理器,嵌入式处理器会立刻做出反应,防止焊接机器人的焊枪模块和焊件之间碰撞。
双目视觉模块安装在机器人的焊枪的前端,在焊枪的各个机械臂上均安装有红外传感器,每个传感器均和嵌入式处理器的输入口相接,焊枪模块安装在焊接机械臂的末端。嵌入式处理器模块安装在焊接机器人的基座里面,电源模块安装在处理器模块的下端。
双目视觉模块将采集到的二维的图像信息传给嵌入式处理器,嵌入式处理器将输入的二维图像信息根据三维图像复原算法进行复原,然后在三维的复原图像中把焊缝的位置进行标定,做到对焊缝的精准的定位。
如图1所示,嵌入式双目视觉的相贯线焊接机器人的外部结构组成分为以下几个部分:外壳7、双目摄像头8、焊枪9、双目摄像头支架10、机械臂11、底盘12、履带式车轮13、电源开关14几部分组成。如图2所示,内部系统由嵌入式处理器模块1;电机驱动模块2;电源模块3;红外传感器模块4;嵌入式双目视觉模块5;显示屏幕6几大部分。如图4所示,相贯线焊缝15是由主管16和支管17插接相成的。核心是嵌入式双目视觉模块5和嵌入式处理器模块1,为检测、定位、跟踪相贯线焊缝提供了非常可靠的解决方案。
采用嵌入式双目视觉模块5,通过采集相贯线焊缝图像信息,识别焊缝的特征信息,通过KEIL编写程序实现对焊缝的识别与定位,从而得到焊缝的位置信息。将位置信息进行处理分析,获取目标的X、Y、Z位置信息,打包发给焊接机器人,从而实现系统对目标物体的识别。
以STM32单片机嵌入式处理器模块作为嵌入式处理器模块1,运动平台获取目标位置信息,通过KEIL编写程序,采用PID调节,使焊接机器人能对焊缝实现精准的定位,提高目标识别速效率,确保实时性。
采用红外传感器模块4,红外传感器安装在焊接机器人的机械臂上,当红外传感器采集到的有障碍物时,需要及时调整焊接机械臂的姿态,防止焊接机器人与焊件相撞。
技术方案
本发明的定位原理,以焊缝作为定位的目标,相贯线焊缝是两个相交管道形成的。根据焊接要求,需要焊接的相贯线焊缝大不一样。因此对焊缝的定位特别重要。
焊缝定位原理如图3所示,通过摄像头检测到焊缝,当摄像头的焦距和焊缝的尺寸已知,利用坐标系和摄像头坐标系间的变换,即可计算出焊缝相对于摄像头坐标系下的三维坐标。建立以焊缝中心为原点,其平面为XY的坐标系的向量空间,当摄像头中心位置与焊缝中心位置重合时,系统获取到的位置坐标信息为(0,0,0),实际检测到的目标位置信息中Z轴为负值。通过建立目标位置坐标信息,是嵌入式定位系统的基础。
机械臂防撞原理,根据提取的焊缝特征信息进行特征三维的复原。计算出相贯线的实际的高度三维坐标,并通过嵌入式系统与目标物体竖直方向的相对高度差,使嵌入式系统迅速地调整机械臂的位置和姿态。防止机械臂和焊件之间碰撞。
如图2所示,系统内部结构包括嵌入式处理器模块1:采用STM32处理器作为嵌入式处理器模块。电机驱模块2:采用全桥电机驱动芯片,电流最高5A,电压采用24V电源供电。电源模块3:系统采用24V可充放电锂电池供电,并作为电机驱动模块的电源,通过电压转换芯片为系统提供3.3V和5V的电源。红外传感器模块4:采用低功耗的红外传感器模块,本设计中采用的是HC-SR501型号,其工作电压为3.3V。嵌入式双目视觉模块5:采用嵌入式双目视觉模块,它是由一个基于STM32F4嵌入式单片机和摄像头组成的微型机器视觉模块,由5V电源供电。
如图5所示,系统软件主程序流程:嵌入式双目视觉焊接系统的软件设计首先对I/O口、PWM、SPI等进行初始化,并且初始化中断。判断系统是否初始化完毕。当判断为初始化完毕时,串口片选嵌入式双目视觉模块,获取一帧摄像头图像,判断图像中是否含有目标焊缝,当判断为含有时,接收传感器传来的焊缝相对于摄像头的三维坐标数据,解析坐标信息,根据相应的定位算法驱动电机运动,使嵌入式双目视觉焊接系统定位目标并能驱动机械臂准确到达最佳焊接位置处,机器人的运动包括前进、后退、左右移动、左右旋转、绕动。
附图说明
图1嵌入式双目视觉焊接机器人外部结构图
图2嵌入式双目视觉焊接系统内部结构图
图3焊缝定位原理
图4目标焊缝图
图5主程序流程图
图中:1—嵌入式处理器模块;2—电机驱动模块;3—电源模块;4—红外传感器模块;5—嵌入式双目视觉模块;6—显示屏;7—外壳;8—双目摄像头;9—焊枪;10—双目摄像头支架;11—机械臂;12—底盘;13—履带式车轮;14—电源开关;15—相贯线焊缝;16—主管;17—支管。
具体实施方式
外部系统连接:履带式车轮系统13和底盘12组成硬件运动平台,在该平台上固定各个电路模块,机械臂11末端支撑并固定焊枪9,双目摄像头支架10支撑并固定双目摄像头模块8,电源开关14安装在外壳7的侧面。
内部系统连接:电源模块与各个模块相连接,嵌入式处理器模块1的串口与嵌入式双目视觉模块5的串口相连接,嵌入式处理器模块1的通讯口与红外传感器模块4相连接,电机驱动模块2的串口与嵌入式处理器模块1的串口相连接。红外传感器模块采集相贯线的位置信号,转换成数字信号传送给嵌入式处理器模块,通过PID算法转换为PWM输出信号控制电机运动。
通过调试运行,嵌入式双目视觉焊接系统能够稳定工作,并且能实现自主的防撞。对焊缝的识别率较高,能够稳定跟随定位焊缝的运动,并使得焊枪能有最优的位置去焊接焊缝。

Claims (5)

1.一种基于嵌入式视觉的相贯线焊接机器人,其特征在于:它包括嵌入式处理器模块,双目视觉模块,电源模块,传感器模块,焊枪模块。双目视觉模块将采集到的图像信息传送给嵌入式处理器,嵌入式处理模块通过相应的算法将收到的图像进行三维复原,复原之后,从三维图中标定出相贯线焊缝的位置,然后嵌入式处理器将标定出的位置信息传送给焊枪模块,焊枪模块根据嵌入式处理器提供的位置进行焊接,传感器模块用于在焊枪移动时防止和焊接的管碰撞。电源模块和嵌入式处理器模块、双目视觉模块、传感器模块、焊枪模块连接,为这4个模块提供能量。
2.根据权利要求1所述的一种基于嵌入式视觉的相贯线焊接机器人,其特征在于:所述的视觉模块采用树莓派的CM3双目视觉模块,它主要用于对相贯线焊缝的三维的建模,将采集到的图像信息传送给嵌入式处理器。
3.根据权利要求1所述的一种基于嵌入式视觉的相贯线焊接机器人,其特征在于:所述的嵌入式处理模块采用ST系列的单片机,嵌入式处理器模块负责对双目视觉模块和传感器模块采集的图像信息和位置信息进行处理,负责控制焊枪模块。
4.根据权利要求1所述的一种基于嵌入式视觉的相贯线焊接机器人,其特征在与于:所述的传感器模块是红外传感器,当红外传感器模块采集到的障碍物时会将此信息传给嵌入式处理器,嵌入式处理器会立即做出反应,防止机械臂在焊接相贯线时与焊件发生碰撞。
5.根据权利要求1所述的一种基于嵌入式视觉的相贯线焊接机器人,其特征在于:所述的电源模块是能提供24V和12V、5V、3.3V电压的多输出电源,主要负责对其他模块提供能量。
CN201910598615.1A 2019-07-04 2019-07-04 一种基于嵌入式视觉的相贯线焊接机器人 Pending CN110293345A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910598615.1A CN110293345A (zh) 2019-07-04 2019-07-04 一种基于嵌入式视觉的相贯线焊接机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910598615.1A CN110293345A (zh) 2019-07-04 2019-07-04 一种基于嵌入式视觉的相贯线焊接机器人

Publications (1)

Publication Number Publication Date
CN110293345A true CN110293345A (zh) 2019-10-01

Family

ID=68030212

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910598615.1A Pending CN110293345A (zh) 2019-07-04 2019-07-04 一种基于嵌入式视觉的相贯线焊接机器人

Country Status (1)

Country Link
CN (1) CN110293345A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112518188A (zh) * 2020-12-09 2021-03-19 南昌大学 一种新型管道插接相贯线焊缝焊接机器人装置
CN112828418A (zh) * 2020-12-31 2021-05-25 北华航天工业学院 一种复合电力电杆钢制地基支座自动化焊接系统
CN113857727A (zh) * 2021-10-22 2021-12-31 大连中远海运川崎船舶工程有限公司 一种船舶舱盖舾装焊接智能化焊接台车
CN114406559A (zh) * 2022-01-26 2022-04-29 中国铁建电气化局集团有限公司 一种用于自动焊接设备的机械臂回零装置以及方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104400279A (zh) * 2014-10-11 2015-03-11 南京航空航天大学 基于ccd的管道空间焊缝自动识别与轨迹规划的方法及系统
US20170038756A1 (en) * 2015-08-07 2017-02-09 Spm Automation (Canada) Inc. Method of self-adjusting a machine to compensate for part-to-part variations
CN206519669U (zh) * 2016-10-25 2017-09-26 哈尔滨理工大学 一种基于视觉的双工位相贯线焊接装置
CN107263438A (zh) * 2017-07-24 2017-10-20 中广核研究院有限公司 核电站水下作业机器人
CN107718046A (zh) * 2017-10-24 2018-02-23 中广核研究院有限公司 用于水下焊接的机器人、机器人系统及作业方法
CN108748079A (zh) * 2018-06-29 2018-11-06 深圳市越疆科技有限公司 一种移动机械臂、控制实现方法及其遥控系统
CN109048926A (zh) * 2018-10-24 2018-12-21 河北工业大学 一种基于立体视觉的机器人智能避障系统及方法
CN109129480A (zh) * 2018-08-24 2019-01-04 上海理工大学 一种基于双目3d定位的机械臂加工系统
CN109129477A (zh) * 2018-08-21 2019-01-04 上海理工大学 一种基于双目焊接机械手的三维定位系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104400279A (zh) * 2014-10-11 2015-03-11 南京航空航天大学 基于ccd的管道空间焊缝自动识别与轨迹规划的方法及系统
US20170038756A1 (en) * 2015-08-07 2017-02-09 Spm Automation (Canada) Inc. Method of self-adjusting a machine to compensate for part-to-part variations
CN206519669U (zh) * 2016-10-25 2017-09-26 哈尔滨理工大学 一种基于视觉的双工位相贯线焊接装置
CN107263438A (zh) * 2017-07-24 2017-10-20 中广核研究院有限公司 核电站水下作业机器人
CN107718046A (zh) * 2017-10-24 2018-02-23 中广核研究院有限公司 用于水下焊接的机器人、机器人系统及作业方法
CN108748079A (zh) * 2018-06-29 2018-11-06 深圳市越疆科技有限公司 一种移动机械臂、控制实现方法及其遥控系统
CN109129477A (zh) * 2018-08-21 2019-01-04 上海理工大学 一种基于双目焊接机械手的三维定位系统
CN109129480A (zh) * 2018-08-24 2019-01-04 上海理工大学 一种基于双目3d定位的机械臂加工系统
CN109048926A (zh) * 2018-10-24 2018-12-21 河北工业大学 一种基于立体视觉的机器人智能避障系统及方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112518188A (zh) * 2020-12-09 2021-03-19 南昌大学 一种新型管道插接相贯线焊缝焊接机器人装置
CN112518188B (zh) * 2020-12-09 2022-06-14 南昌大学 一种新型管道插接相贯线焊缝焊接机器人装置
CN112828418A (zh) * 2020-12-31 2021-05-25 北华航天工业学院 一种复合电力电杆钢制地基支座自动化焊接系统
CN113857727A (zh) * 2021-10-22 2021-12-31 大连中远海运川崎船舶工程有限公司 一种船舶舱盖舾装焊接智能化焊接台车
CN114406559A (zh) * 2022-01-26 2022-04-29 中国铁建电气化局集团有限公司 一种用于自动焊接设备的机械臂回零装置以及方法

Similar Documents

Publication Publication Date Title
CN110293345A (zh) 一种基于嵌入式视觉的相贯线焊接机器人
CN104400279B (zh) 基于ccd的管道空间焊缝自动识别与轨迹规划的方法
CN104842362B (zh) 一种机器人抓取物料包的方法和机器人抓取装置
CN109604777A (zh) 基于激光结构光的焊缝视觉跟踪系统及方法
CN205736996U (zh) 一种电动车自动充电机械臂
CN109262623B (zh) 一种牵引导航自主移动机器人
CN207205619U (zh) 基于三维激光扫描的波纹焊缝跟踪系统
CN112248835B (zh) 一种充电机械臂控制方法和系统
CN105751199B (zh) 全液压自主移动机械臂的动作方法
CN110245599A (zh) 一种智能三维焊缝自主寻迹方法
CN105479490A (zh) 一种双机器人实时动态避障装置及其避障方法
CN105751200A (zh) 全液压自主移动机械臂的动作方法
CN206059830U (zh) 一种agv小车自动充电电刷接口
CN107433573A (zh) 智能双目自动抓取机械臂
CN107639319A (zh) 核电站水下焊接机器人、焊接系统及焊接方法
CN103279113B (zh) 一种分布式液压四足机器人控制系统及控制方法
CN105618930A (zh) 一种可移动式的野外管道激光修复装置
CN106787266A (zh) 一种移动机器人无线充电方法及装置
CN112958959A (zh) 一种基于三维视觉的自动化焊接和检测方法
CN206200973U (zh) 一种智能避障检测机器人
CN209699082U (zh) 一种智能巡检机器人
CN210133030U (zh) 车辆自动充电设备以及移动充电小车
CN209174850U (zh) 采用机器视觉定位大包下水口的装置
CN103077640A (zh) 机器人焊接3d辅助示教系统
CN110153602A (zh) 一种多方向激光视觉跟踪装置及其跟踪和控制的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191001