CN109332928B - 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法 - Google Patents

基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法 Download PDF

Info

Publication number
CN109332928B
CN109332928B CN201811238702.8A CN201811238702A CN109332928B CN 109332928 B CN109332928 B CN 109332928B CN 201811238702 A CN201811238702 A CN 201811238702A CN 109332928 B CN109332928 B CN 109332928B
Authority
CN
China
Prior art keywords
welding
robot
workpiece
model
quality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811238702.8A
Other languages
English (en)
Other versions
CN109332928A (zh
Inventor
管小兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Shanyang Intelligent Equipment Co ltd
Original Assignee
Jiangsu Shanyang Intelligent Equipment Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Shanyang Intelligent Equipment Co ltd filed Critical Jiangsu Shanyang Intelligent Equipment Co ltd
Priority to CN201811238702.8A priority Critical patent/CN109332928B/zh
Publication of CN109332928A publication Critical patent/CN109332928A/zh
Application granted granted Critical
Publication of CN109332928B publication Critical patent/CN109332928B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K31/00Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups
    • B23K31/02Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups relating to soldering or welding
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K31/00Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups
    • B23K31/12Processes relevant to this subclass, specially adapted for particular articles or purposes, but not covered by only one of the preceding main groups relating to investigating the properties, e.g. the weldability, of materials
    • B23K31/125Weld quality monitoring
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B23MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
    • B23KSOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
    • B23K37/00Auxiliary devices or processes, not specially adapted to a procedure covered by only one of the preceding main groups
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/32Operator till task planning
    • G05B2219/32335Use of ann, neural network

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Automation & Control Theory (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种基于深度学习在线检测的路灯灯杆自动焊接系统和焊接方法,焊接系统其包括焊接机器人、机器人控制器、高速摄像头、焊缝质量在线检测系统、电气控制及按钮站、焊接电源、机器人专用焊枪、清枪剪丝装置、头尾架变位机和机器人移动导轨;焊接机器人与机器人移动导轨滑动配合,机器人专用焊枪与焊接机器人活动连接,高速摄像头采集的图像通过通信线路传输至焊缝质量在线检测系统,通过焊缝质量在线检测系统进行焊缝质量的分析检测;需要焊接的工件通过头尾架变位机来固定和调节角度,以便于焊接机器人进行焊接。本发明实现了自动焊接和在线焊缝检测,简化了制造环节,提高了生产效率和合格率,降低了生产成本。

Description

基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法
技术领域
本发明涉及机械制造工艺领域,具体涉及一种基于深度学习的路灯灯杆系统及焊接方法。
背景技术
随着我国城市化进程的不断推进, 基础设施的大力建设,对各种建设原材料的需求与日俱增,例如在交通照明设备方面,对路灯灯杆的需求量在日益增加,对路灯灯杆的质量也提出了更高的要求,因此路灯灯杆的结构设计变得更加复杂,使得焊接的工作量占到了整个加工周期的一半以上,焊接的质量直接影响到整个灯杆的加工质量。目前国内灯杆的焊接方式大部分是人工焊接,人工焊接主要存在的问题是效率低下、劳动强度高、环境恶劣和成本较高。目前绝大多数的焊缝检测环节仍然使用人工检测的方式,存在效率低下的问题,而且焊缝焊接和质检是分离的步骤,由于塔杆体积较大和车间空间有限的问题,焊接完成后质检不通过的产品重新进行再次加工也非常繁琐。
发明内容
本发明第一个发明目的在于提供一种基于深度学习在线检测的路灯灯杆自动焊接系统,用以解决目前灯杆焊接效率低,劳动强度高、环境恶劣和成本较高等问题。
实现本发明的目的技术方案如下:
一种基于深度学习在线检测的路灯灯杆自动焊接系统,其包括焊接机器人、机器人控制器、高速摄像头、焊缝质量在线检测系统、电气控制及按钮站、焊接电源、机器人专用焊枪、清枪剪丝装置、头尾架变位机和机器人移动导轨;
焊接机器人采用六自由度的专用焊接机器人,其中三个自由度用来进行机器人的姿态调整,另外三个自由度用于焊枪的姿态调整,使得机器人能够完成结构复杂的焊接工作;同时采用先进的伺服技术保证机器人的动作速度和精度,提高工作效率;
机器人控制器用于进行焊接任务设定,通过配备的示教器支持在现场进行焊接机器人焊接参数的设定,示教完成后会将各个示教点的位置和姿态信息、运动参数和工艺参数存入控制器的内存,当焊接机器人进入自动工作模式后,根据存储在控制器内存的各项参数进行路径规划,驱动伺服系统进行焊接机器人位置和姿态的控制,同时实时采集机器人各个关节位置的反馈信息,不断修正误差,使得焊接机器人位置和姿态达到预期的目标;
高速摄像头用于实时采集工件焊缝的图像,输入焊缝质量检测装置进行灯杆焊缝在线质量检测;
焊缝质量在线检测系统主要由一台高性能服务器构成,核心是深度学习技术,通过采集足够数量质量良好的焊缝图像和存在质量问题的焊缝图像组成训练集和测试集,建立神经网络模型,对神经网络进行训练,利用测试集测试训练后的模型,若模型输出准确率达到标准则固化模型,构建分类器;若误差过大则重新训练并测试;在焊接过程中,焊缝质量检测系统对高速摄像头实时采集到的焊缝图像进行处理,通过分类器完成图像分类,快速评估灯杆焊缝质量,并将检测结果实时输入到机器人控制器,用来规划下一步的焊接任务;
电气控制系统用来进行对机器人、焊接电源、头尾架变位机的控制,压缩气体压力和保护气体压力的检测,控制工作站的启停操作;按钮站的启动和停止开关能够实现设备的运转和停止操作;
焊接电源配备齐全的通讯接口和I/O接口,全数字化系统,实现熔滴过渡的精细控制;采用一脉一滴控制技术,热输入少,工件变形小;使用软开关逆变技术,整机可靠性高、节能省电,实现无飞溅焊接;
清枪剪丝装置专用于机器人焊接系统的焊枪清理装置,将清枪、剪丝、喷油三种功能集成在一个工作平台,结构紧凑,维护方便;
头尾架变位机用于调整工件姿态,结合升降支撑装置能够使所有焊缝处于最佳焊接位置;头尾架变位机的伺服电机作为机器人的外部轴可自由编程,可与机器人系统轨迹插补,扩大焊接范围;伺服电机驱动精密减速机,齿轮在转动过程中始终与回转支撑啮合,驱动变位机转盘旋转;变位机基座采用优质型材焊接而成,经过退火处理;导电机构安装在回转座内,导电铜块在弹簧作用下保证焊接过程导电良好;
机器人移动导轨包括伺服电机和减速机,通过齿轮齿条传动;高精度齿轮齿条、导轨以及独特的齿轮背隙消除机构保证了导轨传动的精确性;机器人与机器人移动导轨组合使用,使得机器人焊接系统有很大的工作范围和柔性,即使大型复杂工件上可达性不好的空间焊缝,也能轻松胜任;
焊接机器人与机器人移动导轨滑动配合,机器人专用焊枪与焊接机器人活动连接,机器人控制器分别与焊接机器人、机器人移动导轨、机器人专用焊枪、清枪剪丝装置、高速摄像头、焊缝质量在线检测系统和电气控制及按钮站通信连接,高速摄像头采集的图像通过通信线路传输至焊缝质量在线检测系统,通过焊缝质量在线检测系统进行焊缝质量的分析检测;需要焊接的工件通过头尾架变位机来固定和调节角度,以便于焊接机器人进行焊接。
本发明第二个发明目的在于提供一种基于深度学习在线检测的路灯灯杆自动焊接方法,具体方案如下:
一种基于深度学习在线检测的路灯灯杆自动焊接系统的焊接方法,其包括以下步骤:
1)焊接机器人、机器人控制器的初始化,包括上电,功能自检和就绪;
2)将待焊接工件固定到变位机上,工件姿态由变位机进行调整,使工件在焊接过程中始终保持最佳焊接姿态;
3)通过机器人控制器和配备的示教器进行焊接机器人的现场编程和示教,依靠配备的完善软件指令集和硬件结构,能够精确地控制焊接过程中的各项参数,包括焊接速度、角度、位移参数,示教完成后,这些参数就存入机器人控制器的内存中,此后的焊接操作中焊接机器人就以这些参数为依据进行自动焊接;
4)完成示教操作后,焊接机器人就能够自动进行焊接任务,配合变位机和移动导轨能够实现较大行程和较复杂空间位置的焊接任务,由于工件在安装和变位机控制中会存在位置偏差,焊接机器人会根据焊缝的实际位置与示教位置的偏差判断出焊缝的起始点,焊接机器人按照设定的程序将带电焊丝接触工件时,焊丝与工件之间会产生电压降,机器人控制器接收到这个信号后以此为依据进行数据修正,保证焊接轨迹的精确性;
5)焊接完成后,通过配备在焊接机器人上的高速摄像头能够快速采集清晰完整的焊缝图像,将采集到的图像输入到焊缝质量在线检测系统即时评估焊缝质量,若焊缝质量良好则继续进行下面的任务,若存在问题则进行补焊或其它处理;
6)完成当前的焊接任务并判定焊缝质量良好后,若整个工件还有其它焊接任务,则继续进行下一步的任务,通过操作变位机和焊接机器人移动导轨使焊接机器人和工件处于一个合适的相对位置继续进行焊接任务;若完成了全部的焊接任务则结束焊接操作,焊接机器人和变位机回复到初始位置姿态;
7)焊接结束后焊接机器人回到安全位置,操作人员进入焊接工作区卸下焊接完成的工件,安装待焊接的工件,再次启动焊接任务,如此往复操作。
上述方案中,在步骤5中,焊缝质量检测包括训练模型和测试模型两部分;
训练模型包括以下步骤:1)数据准备:采集焊缝正常、咬边、气孔、未焊透、裂纹和夹渣的图片各1000-10000张,其中一部分作为训练集,另一部分作为测试集;2)预处理:由于训练集的样本图片为彩色图片,直接进行处理运算量过大,所以将训练集的图片进行灰度化和归一化操作,规范化输入样本,提高处理速度;3)形成训练模型:深度学习模型中的卷积神经网络直接利用图像像素信息作为输入,最大程度上保留了输入图像的所有信息,通过卷积操作进行特征的提取和高层抽象,模型直接输出图像识别的结果;卷积神经网络由卷积层、池化层、全连接层组成,卷积神经网络通过卷积模拟特征区分,通过池化降低数据维度,最后的全连接层为传统的神经网络,完成分类任务;训练过程传统神经网络类似,采用反向传播算法;首先初始化卷积神经网络,主要是初始化权矩阵,此时权矩阵的值都是随机的,然后随机从训练集中抽取一张样本图片,预处理后进行若干次卷积、池化处理,再经过全连接层输出结果,与理想输出的结果进行比对,按极小化误差的方法反向传播调整权矩阵,当迭代到一定次数或误差小于一定的阈值后结束训练,再从测试集中抽取样本图片输入到神经网络中进行测试,统计输出结果的准确率,若准确率达到允许范围则将该模型固化,作为产品焊缝质量检测的分类器;
测试模型包括以下步骤:1)随机从测试集中抽取一个样本,进行预处理操作;2)将预处理好的样本输入已经训练好的模型中;3)通过若干次卷积和池化处理,再经过全连接层输出分类结果;4)将得到的分类结果和正确结果进行比对,记录本次判断的准确性;5)再次随机抽取样本重复1~4步,统计判断的准确性,达到设定的测试次数后计算该模型输出的准确率,若准确率高于规定的阈值则认为该模型是可靠的,否则需要重新训练模型。
本发明的有益效果如下:本发明的基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法,进行路灯灯杆的自动化焊接操作,焊接效率高,焊接质量更高,劳动强度和生产环境明显改善,生产成本降低,本发明运用深度学习技术进行焊缝质量检测,简化制造环节,提高生产效率和合格率。
附图说明
图1为本发明的基于深度学习在线检测的路灯灯杆自动焊接系统的示意图;
图2为本发明的基于深度学习在线检测的路灯灯杆自动焊接方法的工作流程图;
图3为本发明的在线检测方案训练模型流程图;
图4为本发明的在线检测方案测试模型流程图。
具体实施方式
为使本发明解决的技术问题、采用方案和实现效果表达的更加清楚明了,下面将结合附图进一步详细描述,所有实例描述仅为本发明的部分不是全部的实例,本邻域技术人员没有创造性的成果的其他实例都属于本发明保护的范围。
如图1所示为本发明的基于深度学习在线检测的路灯灯杆自动焊接系统,其包括焊接机器人、机器人控制器、高速摄像头、焊缝质量在线检测系统、电气控制及按钮站、焊接电源、机器人专用焊枪、清枪剪丝装置、头尾架变位机和机器人移动导轨;
焊接机器人采用六自由度的专用焊接机器人,其中三个自由度用来进行机器人的姿态调整,另外三个自由度用于焊枪的姿态调整,使得机器人能够完成结构复杂的焊接工作;同时采用先进的伺服技术保证机器人的动作速度和精度,提高工作效率;
机器人控制器用于进行焊接任务设定,通过配备的示教器支持在现场进行焊接机器人焊接参数的设定,示教完成后会将各个示教点的位置和姿态信息、运动参数和工艺参数存入控制器的内存,当焊接机器人进入自动工作模式后,根据存储在控制器内存的各项参数进行路径规划,驱动伺服系统进行焊接机器人位置和姿态的控制,同时实时采集机器人各个关节位置的反馈信息,不断修正误差,使得焊接机器人位置和姿态达到预期的目标;
高速摄像头用于实时采集工件焊缝的图像,输入焊缝质量检测装置进行灯杆焊缝在线质量检测;
焊缝质量在线检测系统主要由一台高性能服务器构成,核心是深度学习技术,通过采集足够数量质量良好的焊缝图像和存在质量问题的焊缝图像组成训练集和测试集,建立神经网络模型,对神经网络进行训练,利用测试集测试训练后的模型,若模型输出准确率达到标准则固化模型,构建分类器;若误差过大则重新训练并测试;在焊接过程中,焊缝质量检测系统对高速摄像头实时采集到的焊缝图像进行处理,通过分类器完成图像分类,快速评估灯杆焊缝质量,并将检测结果实时输入到机器人控制器,用来规划下一步的焊接任务;
电气控制系统用来进行对机器人、焊接电源、头尾架变位机的控制,压缩气体压力和保护气体压力的检测,控制工作站的启停操作;按钮站的启动和停止开关能够实现设备的运转和停止操作;
焊接电源配备齐全的通讯接口和I/O接口,全数字化系统,实现熔滴过渡的精细控制;采用一脉一滴控制技术,热输入少,工件变形小;使用软开关逆变技术,整机可靠性高、节能省电,实现无飞溅焊接;
清枪剪丝装置专用于机器人焊接系统的焊枪清理装置,将清枪、剪丝、喷油三种功能集成在一个工作平台,结构紧凑,维护方便;
头尾架变位机用于调整工件姿态,结合升降支撑装置能够使所有焊缝处于最佳焊接位置;头尾架变位机的伺服电机作为机器人的外部轴可自由编程,可与机器人系统轨迹插补,扩大焊接范围;伺服电机驱动精密减速机,齿轮在转动过程中始终与回转支撑啮合,驱动变位机转盘旋转;变位机基座采用优质型材焊接而成,经过退火处理;导电机构安装在回转座内,导电铜块在弹簧作用下保证焊接过程导电良好;
机器人移动导轨包括伺服电机和减速机,通过齿轮齿条传动;高精度齿轮齿条、导轨以及独特的齿轮背隙消除机构保证了导轨传动的精确性;机器人与机器人移动导轨组合使用,使得机器人焊接系统有很大的工作范围和柔性,即使大型复杂工件上可达性不好的空间焊缝,也能轻松胜任;
焊接机器人与机器人移动导轨滑动配合,机器人专用焊枪与焊接机器人活动连接,机器人控制器分别与焊接机器人、机器人移动导轨、机器人专用焊枪、清枪剪丝装置、高速摄像头、焊缝质量在线检测系统和电气控制及按钮站通信连接,高速摄像头,采集的图像通过通信线路传输至焊缝质量在线检测系统,通过焊缝质量在线检测系统进行焊缝质量的分析检测;需要焊接的工件通过头尾架变位机来固定和调节角度,以便于焊接机器人进行焊接。
为了保证操作人员人身安全,在焊接机器人的活动范围外部设置了安全防护围栏:用以隔绝焊接机器人在进行工作时的操作空间与操作人员的工作空间。
如图2所示为基于深度学习在线检测的路灯灯杆自动焊接系统的焊接方法,其包括以下步骤:
1)焊接机器人、机器人控制器的初始化,包括上电,功能自检和就绪;
2)将待焊接工件固定到变位机上,工件姿态由变位机进行调整,使工件在焊接过程中始终保持最佳焊接姿态;
3)通过机器人控制器和配备的示教器进行焊接机器人的现场编程和示教,依靠配备的完善软件指令集和硬件结构,能够精确地控制焊接过程中的各项参数,包括焊接速度、角度、位移参数,示教完成后,这些参数就存入机器人控制器的内存中,此后的焊接操作中焊接机器人就以这些参数为依据进行自动焊接;
4)完成示教操作后,焊接机器人就能够自动进行焊接任务,配合变位机和移动导轨能够实现较大行程和较复杂空间位置的焊接任务,由于工件在安装和变位机控制中会存在位置偏差,焊接机器人会根据焊缝的实际位置与示教位置的偏差判断出焊缝的起始点,焊接机器人按照设定的程序将带电焊丝接触工件时,焊丝与工件之间会产生电压降,机器人控制器接收到这个信号后以此为依据进行数据修正,保证焊接轨迹的精确性;
5)焊接完成后,通过配备在焊接机器人上的高速摄像头能够快速采集清晰完整的焊缝图像,将采集到的图像输入到焊缝质量在线检测系统即时评估焊缝质量,若焊缝质量良好则继续进行下面的任务,若存在问题则进行补焊或其它处理;
6)完成当前的焊接任务并判定焊缝质量良好后,若整个工件还有其它焊接任务,则继续进行下一步的任务,通过操作变位机和焊接机器人移动导轨使焊接机器人和工件处于一个合适的相对位置继续进行焊接任务;若完成了全部的焊接任务则结束焊接操作,焊接机器人和变位机回复到初始位置姿态;
7)焊接结束后焊接机器人回到安全位置,操作人员进入焊接工作区卸下焊接完成的工件,安装待焊接的工件,再次启动焊接任务,如此往复操作。
如图2和3所示,在步骤5中,焊缝质量检测包括训练模型和测试模型两部分;
训练模型包括以下步骤:1)数据准备:采集焊缝正常、咬边、气孔、未焊透、裂纹和夹渣的图片各1000-10000张,其中一部分作为训练集,另一部分作为测试集;2)预处理:由于训练集的样本图片为彩色图片,直接进行处理运算量过大,所以将训练集的图片进行灰度化和归一化操作,规范化输入样本,提高处理速度;3)形成训练模型:深度学习模型中的卷积神经网络直接利用图像像素信息作为输入,最大程度上保留了输入图像的所有信息,通过卷积操作进行特征的提取和高层抽象,模型直接输出图像识别的结果;卷积神经网络由卷积层、池化层、全连接层组成,卷积神经网络通过卷积模拟特征区分,通过池化降低数据维度,最后的全连接层为传统的神经网络,完成分类任务;训练过程传统神经网络类似,采用反向传播算法;首先初始化卷积神经网络,主要是初始化权矩阵,此时权矩阵的值都是随机的,然后随机从训练集中抽取一张样本图片,预处理后进行若干次卷积、池化处理,再经过全连接层输出结果,与理想输出的结果进行比对,按极小化误差的方法反向传播调整权矩阵,当迭代到一定次数或误差小于一定的阈值后结束训练,再从测试集中抽取样本图片输入到神经网络中进行测试,统计输出结果的准确率,若准确率达到允许范围则将该模型固化,作为产品焊缝质量检测的分类器;
测试模型包括以下步骤:1)随机从测试集中抽取一个样本,进行预处理操作;2)将预处理好的样本输入已经训练好的模型中;3)通过若干次卷积和池化处理,再经过全连接层输出分类结果;4)将得到的分类结果和正确结果进行比对,记录本次判断的准确性;5)再次随机抽取样本重复1~4步,统计判断的准确性,达到设定的测试次数后计算该模型输出的准确率,若准确率高于规定的阈值则认为该模型是可靠的,否则需要重新训练模型。
需要说明的是,以上所述仅为本发明的几个优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然能够对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均包含在本发明的保护范围之内。

Claims (3)

1.一种基于深度学习在线检测的路灯灯杆自动焊接系统,其特征在于:其包括焊接机器人、机器人控制器、高速摄像头、焊缝质量在线检测系统、电气控制及按钮站、焊接电源、机器人专用焊枪、清枪剪丝装置、头尾架变位机和机器人移动导轨;
焊接机器人采用六自由度的专用焊接机器人,其中三个自由度用来进行机器人的姿态调整,另外三个自由度用于焊枪的姿态调整,使得机器人能够完成结构复杂的焊接工作;同时采用先进的伺服技术保证机器人的动作速度和精度,提高工作效率;
机器人控制器用于进行焊接任务设定,通过配备的示教器支持在现场进行焊接机器人焊接参数的设定,示教完成后会将各个示教点的位置和姿态信息、运动参数和工艺参数存入控制器的内存,当焊接机器人进入自动工作模式后,根据存储在控制器内存的各项参数进行路径规划,驱动伺服系统进行焊接机器人位置和姿态的控制,同时实时采集机器人各个关节位置的反馈信息,不断修正误差,使得焊接机器人位置和姿态达到预期的目标;
高速摄像头配置在焊接机器人上,用于实时采集工件焊缝的图像,输入焊缝质量检测装置进行灯杆焊缝在线质量检测;
焊缝质量在线检测系统主要由一台高性能服务器构成,核心是深度学习技术,通过采集足够数量质量良好的焊缝图像和存在质量问题的焊缝图像组成训练集和测试集,建立神经网络模型,对神经网络进行训练,利用测试集测试训练后的模型,若模型输出准确率达到标准则固化模型,构建分类器;若误差过大则重新训练并测试;在焊接过程中,焊缝质量检测系统对高速摄像头实时采集到的焊缝图像进行处理,通过分类器完成图像分类,快速评估灯杆焊缝质量,并将检测结果实时输入到机器人控制器,用来规划下一步的焊接任务;
电气控制系统用来进行对机器人、焊接电源、头尾架变位机的控制,压缩气体压力和保护气体压力的检测,控制工作站的启停操作;按钮站的启动和停止开关能够实现设备的运转和停止操作;
焊接电源配备齐全的通讯接口和I/O接口,全数字化系统,实现熔滴过渡的精细控制;采用一脉一滴控制技术,热输入少,工件变形小;使用软开关逆变技术,整机可靠性高、节能省电,实现无飞溅焊接;
清枪剪丝装置专用于机器人焊接系统的焊枪清理装置,将清枪、剪丝、喷油三种功能集成在一个工作平台,结构紧凑,维护方便;
头尾架变位机用于调整工件姿态,结合升降支撑装置能够使所有焊缝处于最佳焊接位置;头尾架变位机的伺服电机作为机器人的外部轴可自由编程,可与机器人系统轨迹插补,扩大焊接范围;伺服电机驱动精密减速机,齿轮在转动过程中始终与回转支撑啮合,驱动变位机转盘旋转;变位机基座采用优质型材焊接而成,经过退火处理;导电机构安装在回转座内,导电铜块在弹簧作用下保证焊接过程导电良好;
机器人移动导轨包括伺服电机和减速机,通过齿轮齿条传动;高精度齿轮齿条、导轨以及独特的齿轮背隙消除机构保证了导轨传动的精确性;机器人与机器人移动导轨组合使用,使得机器人焊接系统有很大的工作范围和柔性,即使大型复杂工件上可达性不好的空间焊缝,也能轻松胜任;
焊接机器人与机器人移动导轨滑动配合,机器人专用焊枪与焊接机器人活动连接,机器人控制器分别与焊接机器人、机器人移动导轨、机器人专用焊枪、清枪剪丝装置、高速摄像头、焊缝质量在线检测系统和电气控制及按钮站通信连接,高速摄像头采集的图像通过通信线路传输至焊缝质量在线检测系统,通过焊缝质量在线检测系统进行焊缝质量的分析检测;需要焊接的工件通过头尾架变位机来固定和调节角度,以便于焊接机器人进行焊接。
2.一种应用权利要求1所述的基于深度学习在线检测的路灯灯杆自动焊接系统的焊接方法,其特征在于:其包括以下步骤:
1)焊接机器人、机器人控制器的初始化,包括上电,功能自检和就绪;
2)将待焊接工件固定到变位机上,工件姿态由变位机进行调整,使工件在焊接过程中始终保持最佳焊接姿态;
3)通过机器人控制器和配备的示教器进行焊接机器人的现场编程和示教,依靠配备的完善软件指令集和硬件结构,能够精确地控制焊接过程中的各项参数,包括焊接速度、角度、位移参数,示教完成后,这些参数就存入机器人控制器的内存中,此后的焊接操作中焊接机器人就以这些参数为依据进行自动焊接;
4)完成示教操作后,焊接机器人就能够自动进行焊接任务,配合变位机和移动导轨能够实现较大行程和较复杂空间位置的焊接任务,由于工件在安装和变位机控制中会存在位置偏差,焊接机器人会根据焊缝的实际位置与示教位置的偏差判断出焊缝的起始点,焊接机器人按照设定的程序将带电焊丝接触工件时,焊丝与工件之间会产生电压降,机器人控制器接收到这个信号后以此为依据进行数据修正,保证焊接轨迹的精确性;
5)焊接完成后,通过配备在焊接机器人上的高速摄像头能够快速采集清晰完整的焊缝图像,将采集到的图像输入到焊缝质量在线检测系统即时评估焊缝质量,若焊缝质量良好则继续进行下面的任务,若存在问题则进行补焊或其它处理;
6)完成当前的焊接任务并判定焊缝质量良好后,若整个工件还有其它焊接任务,则继续进行下一步的任务,通过操作变位机和焊接机器人移动导轨使焊接机器人和工件处于一个合适的相对位置继续进行焊接任务;若完成了全部的焊接任务则结束焊接操作,焊接机器人和变位机回复到初始位置姿态;
7)焊接结束后焊接机器人回到安全位置,操作人员进入焊接工作区卸下焊接完成的工件,安装待焊接的工件,再次启动焊接任务,如此往复操作。
3.根据权利要求2所述的基于深度学习在线检测的路灯灯杆自动焊接方法,其特征在于:在步骤5中,焊缝质量检测包括训练模型和测试模型两部分;
训练模型包括以下步骤:1)数据准备:采集焊缝正常、咬边、气孔、未焊透、裂纹和夹渣的图片各1000-10000张,其中一部分作为训练集,另一部分作为测试集;2)预处理:由于训练集的样本图片为彩色图片,直接进行处理运算量过大,所以将训练集的图片进行灰度化和归一化操作,规范化输入样本,提高处理速度;3)形成训练模型:深度学习模型中的卷积神经网络直接利用图像像素信息作为输入,最大程度上保留了输入图像的所有信息,通过卷积操作进行特征的提取和高层抽象,模型直接输出图像识别的结果;卷积神经网络由卷积层、池化层、全连接层组成,卷积神经网络通过卷积模拟特征区分,通过池化降低数据维度,最后的全连接层为传统的神经网络,完成分类任务;训练过程传统神经网络类似,采用反向传播算法;首先初始化卷积神经网络,主要是初始化权矩阵,此时权矩阵的值都是随机的,然后随机从训练集中抽取一张样本图片,预处理后进行若干次卷积、池化处理,再经过全连接层输出结果,与理想输出的结果进行比对,按极小化误差的方法反向传播调整权矩阵,当迭代到一定次数或误差小于一定的阈值后结束训练,再从测试集中抽取样本图片输入到神经网络中进行测试,统计输出结果的准确率,若准确率达到允许范围则将该模型固化,作为产品焊缝质量检测的分类器;
测试模型包括以下步骤:1)随机从测试集中抽取一个样本,进行预处理操作;2)将预处理好的样本输入已经训练好的模型中;3)通过若干次卷积和池化处理,再经过全连接层输出分类结果;4)将得到的分类结果和正确结果进行比对,记录本次判断的准确性;5)再次随机抽取样本重复1~4步,统计判断的准确性,达到设定的测试次数后计算该模型输出的准确率,若准确率高于规定的阈值则认为该模型是可靠的,否则需要重新训练模型。
CN201811238702.8A 2018-10-23 2018-10-23 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法 Active CN109332928B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811238702.8A CN109332928B (zh) 2018-10-23 2018-10-23 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811238702.8A CN109332928B (zh) 2018-10-23 2018-10-23 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法

Publications (2)

Publication Number Publication Date
CN109332928A CN109332928A (zh) 2019-02-15
CN109332928B true CN109332928B (zh) 2021-07-23

Family

ID=65311308

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811238702.8A Active CN109332928B (zh) 2018-10-23 2018-10-23 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法

Country Status (1)

Country Link
CN (1) CN109332928B (zh)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110070792A (zh) * 2019-04-28 2019-07-30 陈龙 人工智能实验室
JP7357463B2 (ja) * 2019-05-08 2023-10-06 株式会社東芝 判定装置、判定システム、溶接システム、判定方法、プログラム、及び記憶媒体
CN110315534B (zh) * 2019-05-11 2022-07-15 深圳市鲲鹏智能装备制造有限公司 船舶焊接机器人离线编程的处理方法和系统
CN110378045A (zh) * 2019-07-24 2019-10-25 湘潭大学 一种基于深度学习的导轨精度预维护方法
CN114630734B (zh) * 2019-09-30 2024-07-26 西门子股份公司 具有专用硬件加速的支持机器学习的视觉伺服
CN113012090B (zh) * 2019-12-20 2024-03-01 中国科学院沈阳计算技术研究所有限公司 一种基于可移动摄像头的多工序工件质量检测方法及装置
CN111347187B (zh) * 2020-03-02 2021-09-03 哈尔滨工业大学 用于触点材料熔焊模拟的试验装置及过程参数测量方法
CN111461006B (zh) * 2020-03-31 2023-07-25 哈尔滨航耀光韬科技有限公司 一种基于深度迁移学习的光学遥感图像杆塔位置检测方法
CN111451608B (zh) * 2020-04-08 2022-07-29 北京博清科技有限公司 焊接方法、焊接装置、存储介质和处理器
FR3109325B1 (fr) * 2020-04-20 2022-03-18 Air Liquide Procédé et dispositif de détermination de la performance d’un procédé de soudage
CN112017183B (zh) * 2020-10-22 2021-02-02 南京知谱光电科技有限公司 电弧图像与电弧光谱信息协同的焊丝成分在线检测方法
CN112598253A (zh) * 2020-12-17 2021-04-02 北京航天新立科技有限公司 一种电缆智能生产平台
CN113008304B (zh) * 2021-03-01 2023-12-22 甘肃旭康材料科技有限公司 测试样品的质量检测方法及系统
CN113579545A (zh) * 2021-08-19 2021-11-02 航天智造(上海)科技有限责任公司 一种智能自决策熔池监测系统
CN113787296A (zh) * 2021-09-01 2021-12-14 广西建工集团建筑机械制造有限责任公司 一种拉杆翻转模与机器人联动控制方法
CN113695713B (zh) * 2021-09-17 2023-05-26 蕴硕物联技术(上海)有限公司 一种热水器内胆焊接质量在线监测方法及装置
CN114888500A (zh) * 2022-03-09 2022-08-12 柳州铁道职业技术学院 一种铁路定型组合柜配线自动焊接机器人
CN114425768B (zh) * 2022-03-31 2022-08-12 常州捷仕特机器人科技有限公司 一种用于搬运机器人的集成式搬运装置
CN114654468A (zh) * 2022-04-12 2022-06-24 东莞理工学院 基于视觉的焊接机器人控制系统
CN114654469A (zh) * 2022-04-12 2022-06-24 东莞理工学院 基于深度学习的焊接机器人控制系统
CN115229374B (zh) * 2022-07-07 2024-04-26 武汉理工大学 一种基于深度学习的汽车白车身焊缝质量检测方法、装置
CN115502443B (zh) * 2022-08-16 2023-05-12 浙江聚智信阀业有限公司 多工位固定球阀阀座圈智能钻孔复合一体机
CN115415713B (zh) * 2022-09-15 2024-06-11 南通鋆鼎精密金属制造有限公司 一种风电机舱设备平台智能焊接装置
CN116787017B (zh) * 2023-07-14 2024-03-12 湖南摩码智能机器人有限公司 水轮机座环焊接机器人的控制方法及其系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0632860B2 (ja) * 1985-12-09 1994-05-02 株式会社神戸製鋼所 溶接ロボツト装置
JP2764485B2 (ja) * 1991-08-27 1998-06-11 ファナック株式会社 リアルタイムセンサの診断方法
CN102909499A (zh) * 2011-08-03 2013-02-06 重庆长安凌云汽车零部件有限公司 汽车儿童安全座椅固定器机器人焊接智能工作站
CN102941426B (zh) * 2012-12-07 2015-05-13 厦门实启机械有限公司 一种与机器人相配合的智能变位系统
CN103028870A (zh) * 2012-12-11 2013-04-10 南京熊猫电子股份有限公司 焊接机器人系统
CN105195864B (zh) * 2015-07-17 2018-12-25 江西洪都航空工业集团有限责任公司 用于双焊缝弧焊焊接的双机器人工作站
CN205650975U (zh) * 2016-02-23 2016-10-19 南京中建化工设备制造有限公司 基于结构光视觉的非标件自动化焊接加工系统
CN105891215B (zh) * 2016-03-31 2019-01-29 浙江工业大学 基于卷积神经网络的焊接视觉检测方法及装置
CN107610111B (zh) * 2017-09-12 2019-12-10 武汉大学 一种基于深度学习的焊点图像检测方法

Also Published As

Publication number Publication date
CN109332928A (zh) 2019-02-15

Similar Documents

Publication Publication Date Title
CN109332928B (zh) 基于深度学习在线检测的路灯灯杆自动焊接系统及焊接方法
CN110524581B (zh) 一种柔性焊接机器人系统及其焊接方法
CN210155545U (zh) 一种用于道岔制造过程自动化在线检测设备
CN103273490B (zh) 一种用于焊接的工业机器人
CN105033419B (zh) 基于熔池图像焊缝跟踪的移动式焊接机器人装置
CN111618396A (zh) 基于视觉表征的多层多道焊接装置及焊接方法
CN103716620B (zh) 摄像头模组自动功能测试机
CN110756359B (zh) 一种基于视觉的自动喷涂装置及方法
CN102003943A (zh) 一种利用激光的非接触锻件直径在线测量的方法
CN102049638A (zh) 环缝焊接机器人装置
CN106180006B (zh) 非晶合金铁芯自动检测装置及其检测方法
CN102607437A (zh) 漆包线线径移动式在线检测装置及检测方法
CN108127238A (zh) 非平整面自主识别机器人增材成形的方法
CN105244728A (zh) 一种线缆自动分线设备及其分线方法
CN112730441B (zh) 一种特钢棒材表面缺陷检测修磨系统及其检测、修磨方法
CN115178870A (zh) 一种石油压裂液容器生产装置及方法
CN205317686U (zh) 一种工件方向自动检测装置
CN108627519A (zh) 自动化工业视觉探伤设备、探伤组件及系统
CN207077080U (zh) 基于十字型激光器的焊缝跟踪控制装置
CN111420883A (zh) 一种货车枕簧视觉检测及智能选配系统和使用方法
CN102506776A (zh) X射线轮毂自动检测装置及其控制方法
CN110124941A (zh) 用于电池模组涂胶的智能快速编程平台及其编程方法
CN204008557U (zh) 用于铁路货车摇枕或侧架的水浸超声波自动探伤控制系统
CN110303223A (zh) 一种龙门式焊接机器人及工艺
CN104562108B (zh) 齿轮轮齿电刷镀实验平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant