CN211102139U

CN211102139U - 一种基于工业相机的高动态视觉系统

Info

Publication number: CN211102139U
Application number: CN201921358621.1U
Authority: CN
Inventors: 石永华; 张抱日; 占爱文
Original assignee: South China University of Technology SCUT
Current assignee: South China University of Technology SCUT
Priority date: 2019-08-21
Filing date: 2019-08-21
Publication date: 2020-07-28
Anticipated expiration: 2029-08-21

Abstract

本实用新型公开了一种基于工业相机的高动态视觉系统，包括工业相机和激光熔敷头或焊枪固定于机器人机械臂或运动机构末端，工业相机和激光熔敷头或焊枪通过连杆保持相对位置固定；相机防水防尘罩置于工业相机的外部；局部干法排水罩固定于激光熔敷头或焊枪上，在焊枪移动时局部干法密封罩跟着激光熔敷头或焊枪一起移动；运动控制系统于所述运动执行机构或机器人相连，接收运动执行机构或机器人接收指令并反馈；单片机与工业相机连接；运动执行机构或机器人通过夹具与激光熔敷头或焊枪连接；焊接电源或激光器与激光熔敷头或焊枪连接，通过输出功率控制激光熔敷头或焊枪；工控机，连接工业相机，使工业相机透过局部干法排水罩透明窗进行视觉监控。

Description

一种基于工业相机的高动态视觉系统

技术领域

本实用新型涉及高动态视觉技术领域，尤其涉及一种应用于水下增材修复过程中激光熔敷或焊接电弧等离子体超强光照场景下基于工业相机的高动态视觉的系统。

背景技术

随着海洋资源的大规模开发利用，各种海洋工程结构(如码头、船舶、采油平台、管道等)大量建造和使用。由于海水腐蚀、海洋应力作用、外力撞击等造成海洋结构物意外损坏的情况也不时发生。因此，海洋工程结构受损后原位快速水下增材修复技术的应用也日益广泛。

水下增材修复过程中，通常采用在受损部位进行激光熔敷金属、电弧堆焊金属等方式进行增材修复，在这些水下增材修复过程中，激光熔敷或电弧焊接产生很强烈的激光或电弧等离子体，这些激光或电弧等离子体光强很大，遮盖了熔池和焊道等的视觉观测，使得在激光熔敷或电弧焊接过程中不容易看清楚待修复的基体、熔池和修复质量情况。随着水下增材修复质量和性能要求的提高，水下增材激光熔敷和电弧焊接朝着自动化和智能化的技术方向发展，实时获取增材修复过程中激光熔敷或焊接区域的视觉信息显得尤为重要。

为了实时观测水下增材修复激光熔敷或电弧焊接过程中熔敷或焊接区域的状态，需要实时观测等离子体、熔池状态、焊道凝固成形、待修复基体位置等信息。有研究者采用普通的工业相机拍摄焊接过程的图像以获取焊接熔池区域的信息。但是由于激光或电弧等离子体光强度的动态范围(达70db以上)超过了普通的工业相机的可观测动态范围(一般为20～60db)，导致无法使用相同的曝光参数来同时采集到激光熔敷或电弧焊接过程中等离子体、熔池状态、焊道凝固成形、待修复基体位置等的清晰图像，例如当熔池良好曝光时，焊道凝固成形、基体位置的像素点会欠曝光；而当焊道成形或基体位置良好曝光时，熔池的像素点过曝光。如果采用普通焊接护目镜片进行减光，则同时降低了等离子体、熔池、焊道和基体的亮度，无法同时看清等离子体、熔池、焊道和基体位置等。

发明内容

为解决上述技术问题，本实用新型的目的是提供一种基于工业相机的高动态视觉系统。

本实用新型的目的通过以下的技术方案来实现：

一种基于工业相机的高动态视觉系统，包括所述系统包括激光熔敷头或焊枪、工业相机、相机防水防尘罩、局部干法排水罩、运动控制系统、单片机、运动执行机构或机器人、焊接电源或激光器与工控机；

所述工业相机和激光熔敷头或焊枪固定于机器人机械臂或运动机构末端，工业相机和激光熔敷头或焊枪通过连杆保持相对位置固定；

所述相机防水防尘罩置于工业相机的外部；

所述局部干法排水罩固定于激光熔敷头或焊枪上，在焊枪移动时局部干法密封罩跟着激光熔敷头或焊枪一起移动；

运动控制系统于所述运动执行机构或机器人相连，接收运动执行机构或机器人接收指令并反馈；

单片机与工业相机连接；

运动执行机构或机器人通过夹具与激光熔敷头或焊枪连接；

焊接电源或激光器与激光熔敷头或焊枪连接，通过输出功率控制激光熔敷头或焊枪；

工控机，连接工业相机，使工业相机透过局部干法排水罩透明窗进行视觉监控。

与现有技术相比，本实用新型的一个或多个实施例可以具有如下优点：

本发明提供的系统可实现在水下激光熔敷或电弧焊接过程实时观测，采集激光熔敷或焊接过程中熔池区域信息，图像清晰完整。可用于视觉检测，也可以通过数据流传输到下一个处理模块，以进行进一步激光熔敷或焊接特征提取。

附图说明

图1是基于工业相机的高动态视觉系统结构图；

图2是单片机产生的一个周期内多个不同占空比的矩形波示意图。

具体实施方式

为使本实用新型的目的、技术方案和优点更加清楚，下面将结合实施例及附图对本实用新型实施方式作进一步详细的描述。

如图1所示，为基于工业相机的高动态视觉系统结，包括激光熔敷头或焊枪5、工业相机6、相机防水防尘罩7、局部干法排水罩8、运动控制系统9、单片机10、运动执行机构或机器人11、焊接电源或激光器12与工控机 13；

所述工业相机和激光熔敷头或焊枪固定于机器人机械臂或运动机构末端，工业相机和激光熔敷头或焊枪通过连杆14保持相对位置固定；

所述相机防水防尘罩置于工业相机的外部；

单片机与工业相机连接；

运动执行机构或机器人通过夹具与激光熔敷头或焊枪连接；

上述局部干法排水罩包括密封圈、透明窗、进气口和出气口；所述密封圈设置在排水罩体的底部，以阻止焊接过程中水的渗透；所述透明窗设置在局部干法排水罩的一端，以使图像进行图像采集；所述进气口设置于与透明窗相对的一端即局部干法排水罩的另一端；

在所述局部干法排水罩一端下部增设一凸出体，在该凸出体的端部设置出气口。

激光熔敷或电弧焊接开始前先通过进气口3持续通保护气，通过压力排出局部干法排水罩中的水，剩余的气体通过出气口4排出，可为激光熔敷或电弧焊接后焊道的冷却提供保护。

上述局部干法排水罩同时具有排水、排开空气、透光的功能，在激光熔敷或焊接过程中能提供局部干法激光熔敷或电弧焊接的相对干的环境条件，相比普通排水罩增加一段开口长度，用于保护气出气并且为激光熔敷或电弧焊接后的焊道冷却提供惰性气体保护。同时排水罩具有透光能力，能让外部相机透过透明窗口2进行图像采集。

上述激光熔敷头或焊枪、局部干法排水罩与工业相机通过固定装置保持相对位置固定，并通过运动执行机构或机器人控制沿着焊缝运动，完成激光熔敷或焊接过程及视觉检测。

上述工业相机为触发模式工业相机，且触发信号为矩形波形。工业相机处于外部触发模式，并通过外部输入触发信号，所述触发信号为矩形波形；所述信号波形具有高电平与低电平两种状态，分别对应3.3V与0V；当工业相机接收到低电平转高电平信号时候，工业相机快门打开；当接收到高电平转低电平信号时候，相机快门关闭；相机打开与关闭之间的这段时间即为相机采集一帧图片的曝光时间。

上述矩形波产生方式是通过单片机产生，矩形波的设计策略遵循“同周期，变占空比”的原则，即根据要采集图片的频率确定周期长度，每个周期内都包含几个高电平段以及几个低电平段，然后根据选定的曝光时间再确定不同占空比，改变高电平的长度。

上所述曝光时间即矩形波高电平长度选择采用相机标定方法，通过标定相机的响应函数，得到激光熔敷或电弧焊接区域实际辐射度与图像灰度值之间的对应关系；要将感兴趣区域得到良好曝光，即图片中该区域具有接近125 的灰度值，以此可以得到感兴趣区域的合适曝光时间值。并通过控制高电平时间控制相机的曝光时间，以获得激光熔敷或电弧焊接区域感兴趣部分清晰的图像。

本实施例中，激光熔敷头或焊枪固定在局部干法排水罩中，从进气口通保护气后可以将水从出气口压出实现水下局部干法激光熔敷或电弧焊接。

单片机所产生的周期信号是占空比不同的连续矩形波信号。

工业相机和激光熔敷头或焊枪通过焊枪夹持装置固定在运动执行机构或机械臂末端，相机和激光熔敷头或焊枪之间通过连杆保持相对位置固定。

本发明通过截取一个周期内曝光时间不同的多幅图像中信息清晰的部分图像，通过图像处理和融合算法合成为同时反映等离子体、熔池15、焊道和基体信息的高动态图像。

上述的图像处理和融合算法为：

1)采用梯度法计算每张图像每个像素点的x、y方向梯度值；

公式(1)、(2)中的F_n(x,y)、F_n(x+1,y)、F_n(x,y+1)分别为第n幅图像像素点(x,y)、(x+1,y)、(x,y+1)的灰度值，

分别为第n幅图像像素点(x,y)的x、y方向梯度值。

2)求出每个像素点梯度向量的模值和梯度方向；

3)比较每张图像对应像素点的梯度向量模值大小，选择最大值作为新合成图像该像素点的梯度模值；

4)根据新合成图像上每个像素点的梯度模值g(x,y)和在原图像序列所对应的梯度方向，获得新合成图像上每个像素点的x、y方向梯度值g^x(x,y)、 g^y(x,y)，则该像素点梯度向量为G(x,y)＝[g^x(x,y),g^y(x,y)]^T；

5)新合成图像的梯度向量与像素点灰度值存在如下关系：

公式中

为了求得新合成图像上每个像素点的灰度值，对公式(5)进行微分变换，得泊松方程为

加上狄利克雷边界约束条件：新合成图像的融合边界灰度值等于每张图像上对应边界灰度值的平均值，即

该公式中(x,y)为边界像素点的坐标；

因此可以根据泊松方程求解方法将公式(5)化为矩阵化方程组形式： Ax＝b，最后利用雅可比迭代法求解可得新合成图像的灰度值。

将相机和激光熔敷头或焊枪固定于机器人机械臂或运动机构末端，相机和激光熔敷头/焊枪保持相对位置固定；为使用多重曝光成像技术实现水下增材修复激光熔敷或电弧焊接的等离子体16、熔池15、焊道和基体信息的观测，利用单片机产生如图2所示的一个周期内多个不同占空比的矩形波。例如图 2中设置一个周期时间T为100ms；设置了四种不同占空比的矩形波分别对应四种曝光时间，T₁、T₂、T₃、T₄为相机拍摄一帧图像所花费的时间，为25ms； T_1h、T_2h、T_3h、T_4h为四种不同时间长度的高电平段，分别为18ms、3ms、12 ms、6ms，对应于四种不同的曝光时间；获得一个时间周期T内的四张不同曝光时间的图像后在工控机上采用图像融合算法合成为一张高动态图像，即高动态图像的时间周期为拍摄四张不同曝光时间的图像所花费时间之和，为 100ms。

由于等离子体、熔池、焊道和基体之间的动态范围过大，无法使用相同的曝光参数来同时采集到等离子体、熔池、焊道和基体的清晰图像，通过调整矩形波的占空比改变曝光时间可以控制相机曝光量，使得能够分别清晰拍摄熔池部分和锁孔部分的图像。曝光时间通过激光熔敷或电弧焊接区域光强辐射度与灰度值的关系来确定，辐射度强的区域其灰度值越大，设定曝光时间使得感兴趣区域图像的灰度值在125附近，该曝光时间即为合适的对应于该感兴趣区域辐射度的时间。将不同曝光时间的图像通过信号线传输至工控机，通过图像融合技术将一个周期内等离子体、熔池、焊道和基体的清晰图像合成为一个高动态图像，最终形成高动态视频流实时显示在高清显示屏上。

虽然本实用新型所揭露的实施方式如上，但所述的内容只是为了便于理解本实用新型而采用的实施方式，并非用以限定本实用新型。任何本实用新型所属技术领域内的技术人员，在不脱离本实用新型所揭露的精神和范围的前提下，可以在实施的形式上及细节上作任何的修改与变化，但本实用新型的专利保护范围，仍须以所附的权利要求书所界定的范围为准。

Claims

1.一种基于工业相机的高动态视觉系统，其特征在于，所述系统包括激光熔敷头或焊枪、工业相机、相机防水防尘罩、局部干法排水罩、运动控制系统、单片机、运动执行机构或机器人、焊接电源或激光器与工控机；

所述相机防水防尘罩置于工业相机的外部；

单片机与工业相机连接；

运动执行机构或机器人通过夹具与激光熔敷头或焊枪连接；

2.如权利要求1所述的基于工业相机的高动态视觉系统，其特征在于，所述局部干法排水罩包括密封圈、透明窗、进气口和出气口；所述密封圈设置在排水罩体的底部，以阻止焊接过程中水的渗透；所述透明窗设置在局部干法排水罩的一端，以使图像进行图像采集；所述进气口设置于与透明窗相对的一端即局部干法排水罩的另一端；

3.如权利要求1所述的基于工业相机的高动态视觉系统，其特征在于，激光熔敷头或焊枪、局部干法排水罩与工业相机通过固定装置保持相对位置固定，并通过运动执行机构或机器人控制沿着焊缝运动，完成激光熔敷或焊接过程及视觉检测。

4.如权利要求1所述的基于工业相机的高动态视觉系统，其特征在于，所述工业相机为触发模式工业相机，且触发信号为矩形波形。