CN113223071A - 一种基于点云重建的工件焊缝定位的方法 - Google Patents

一种基于点云重建的工件焊缝定位的方法 Download PDF

Info

Publication number
CN113223071A
CN113223071A CN202110536950.6A CN202110536950A CN113223071A CN 113223071 A CN113223071 A CN 113223071A CN 202110536950 A CN202110536950 A CN 202110536950A CN 113223071 A CN113223071 A CN 113223071A
Authority
CN
China
Prior art keywords
workpiece
robot
coordinate system
point cloud
welding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110536950.6A
Other languages
English (en)
Other versions
CN113223071B (zh
Inventor
张旭堂
吴广昊
陈晓峰
孔民秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology
Original Assignee
Harbin Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology filed Critical Harbin Institute of Technology
Priority to CN202110536950.6A priority Critical patent/CN113223071B/zh
Publication of CN113223071A publication Critical patent/CN113223071A/zh
Application granted granted Critical
Publication of CN113223071B publication Critical patent/CN113223071B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30152—Solder

Abstract

本发明涉及焊接，更具体的说是一种基于点云重建的工件焊缝定位的方法。所述方法包括以下步骤：步骤一、使用三维激光密集点云扫描系统获取所述工件的点云信息；步骤二、使用MC算法重建所述工件的模型获得STL格式的模型文件；步骤三、将所述模型文件转化为IGS文件；步骤四、使用OCC库对所述IGS文件进行解析以获取焊缝的轮廓线。使用组合特征点的方法定位机器人基坐标系与工件的位置关系，最后即可得到机器人基坐标系与焊缝之间的位置关系，解决了机器人焊接焊缝时精度不足的问题。

Description

一种基于点云重建的工件焊缝定位的方法
技术领域
本发明涉及焊接，更具体的说是一种基于点云重建的工件焊缝定位的方法。
背景技术
传统的人工焊接会因为操作人员的身体、心理因素所影响，很难保证焊接的稳定性，因而使用自动化的焊接方式就显得尤为重要。目前国内外都是使用较为传统的可编程示教机器人，加装如CCD视觉传感器，但它仍然存在以下缺点：1.视觉传感器容易受到焊接时的光线影响，容易产生偏差，也为后续的图像处理制造麻烦；2.对于示教的方式，工业机器人只能重复输入指令的内容，对于较为复杂的焊接任务难以保证精度。
发明内容
本发明提供一种基于点云重建的工件焊缝定位的方法，目的是可以提高焊接精度。
上述目的通过以下技术方案来实现：
一种基于点云重建的工件焊缝定位的方法，所述方法包括以下步骤：
步骤一、使用三维激光密集点云扫描系统获取所述工件的点云信息；
步骤二、使用MC算法重建所述工件的模型获得STL格式的模型文件；
步骤三、将所述模型文件转化为IGS文件；
步骤四、使用OCC库对所述IGS文件进行解析以获取焊缝的轮廓线。
其中所述扫描系统采用XTOM-MATRIX-3M三维激光密集点云扫描系统。
上述方法还使用一种绑定有TCP的多自由度机器人；所述方法还包括将所述多自由度机器人与所述工件的进行定位的步骤。
其中所述多自由度机器人采用QJRH4-1六轴垂直多关节机器人。
所述定位的步骤包括：
a)建立所述多关节机器人的D-H参数表来确定每个关节的运动关系；
b)将焊枪与所述多关节机器人的第六轴进行装配；
c)测量所述焊枪中心到所述第六轴中心的距离求出对应的刚体转换矩阵；
d)在所述多关节机器人及所述工件之外空间内的一点设定一个接收器作为外部测量设备坐标系，以TCP原始坐标作为特征点1、TCP沿所述多关节机器人基坐标系x轴正方向移动一段距离作为特征点2和TCP沿机器人基坐标系y轴正方向移动一段距离作为特征点3，使用特征点1、2和3形成组合坐标点来构建机器人位姿信息获得坐标系Ⅰ；
e)在所述工件待焊接表面上选取三个特征点来构建所述工件该面的位姿信息获得坐标系Ⅱ；
f)建立坐标系Ⅰ与坐标系Ⅱ的转换矩阵：
T机器人→工件＝T机器人 -1T工件；
g)通过所述转换矩阵求出焊缝相对于机器人的位置关系。
本发明一种基于点云重建的工件焊缝定位的方法的有益效果为：
使用三维激光密集点云扫描系统获取待焊接工件的点云信息，然后使用MC算法重建工件模型并使用OCC库进行解析提取轮廓线进而定位焊缝与工件的位置；使用组合特征点的方法定位机器人基坐标系与工件的位置关系，最后即可得到机器人基坐标系与焊缝之间的位置关系，解决了机器人焊接焊缝时精度不足的问题。
附图说明
图1是本发明的流程图；
图2是本发明一个待焊接的T型结构工件；
图3是本发明中点云数据重建的待焊接的T型结构工件模型；
图4是本发明对待焊接的T型结构工件提取的轮廓线；
图5是本发明中机器人信号发射器设定的位置；
图6是本发明中待焊接的T型结构工件信号发射器设定的位置。
具体实施方式
一种基于点云重建的工件焊缝定位的方法，具体步骤由以下两部分组成：
(1)定位焊缝与工件的位置关系
如图2所示，举例为一个待焊接的T型结构。使用XTOM-MATRIX-3M三维激光密集点云扫描系统获取待焊接工件的点云信息，使用MC(Marching Cubes)算法重建待焊接工件的模型如图3所示，将文件转化为IGS文件并使用OCC库进行解析获取焊缝的轮廓线，进而获取焊缝与工件的位置关系如图4所示。
(2)定位机器人与工件的位置关系
本专利使用的是QJRH4-1六轴垂直多关节机器人，建立机器人的D-H参数表来确定每个关节的运动关系。由于焊枪是与机器人的第六轴装配的，即手腕圆周运动处，所以可以将机器人TCP与机器人六轴坐标系的位姿变换视为刚体变换，那么，可以通过测量焊枪中心到第六轴中心的距离而求出对应的刚体转换矩阵。
在机器人及工件之外空间内的一点设定一个接收器，该接收器作为外部测量设备坐标系；以TCP原始坐标作为特征点1、TCP沿机器人基坐标系x轴正方向移动一段距离作为特征点2和TCP沿机器人基坐标系y轴正方向移动一段距离作为特征点3。使用这三个组合坐标点来构建机器人位姿信息如图5所示以获得坐标系Ⅰ(机器人坐标系)；在工件待焊接表面上选取三个特征点来构建工件该面的位姿信息如图6所示以获得坐标系Ⅱ(工件坐标系)。建立坐标系Ⅰ与坐标系Ⅱ的转换矩阵：
T机器人→工件＝T机器人 -1T工件
最后通过所述转换矩阵求出焊缝相对于机器人的位置关系。

Claims (5)

1.一种基于点云重建的工件焊缝定位的方法，所述方法包括以下步骤：
步骤一、使用三维激光密集点云扫描系统获取所述工件的点云信息；
步骤二、使用MC算法重建所述工件的模型获得STL格式的模型文件；
步骤三、将所述模型文件转化为IGS文件；
步骤四、使用OCC库对所述IGS文件进行解析以获取焊缝的轮廓线。
2.根据权利要求1所述的方法，其中所述扫描系统采用XTOM-MATRIX-3M三维激光密集点云扫描系统。
3.根据权利要求2所述的方法，还使用一种绑定有TCP的多自由度机器人；
所述方法还包括将所述多自由度机器人与所述工件的进行定位的步骤。
4.根据权利要求3所述的方法，其中所述多自由度机器人采用QJRH4-1六轴垂直多关节机器人。
5.根据权利要求4所述的方法，所述定位的步骤包括：
a)建立所述多关节机器人的D-H参数表来确定每个关节的运动关系；
b)将焊枪与所述多关节机器人的第六轴进行装配；
c)测量所述焊枪中心到所述第六轴中心的距离求出对应的刚体转换矩阵；
d)在所述多关节机器人及所述工件之外空间内的一点设定一个接收器作为外部测量设备坐标系，以TCP原始坐标作为特征点1、TCP沿所述多关节机器人基坐标系x轴正方向移动一段距离作为特征点2和TCP沿机器人基坐标系y轴正方向移动一段距离作为特征点3，使用特征点1、2和3形成组合坐标点来构建机器人位姿信息获得坐标系Ⅰ；
e)在所述工件待焊接表面上选取三个特征点来构建所述工件该面的位姿信息获得坐标系Ⅱ；
f)建立坐标系Ⅰ与坐标系Ⅱ的转换矩阵：
T机器人→工件＝T机器人 -1T工件；
g)通过所述转换矩阵求出焊缝相对于机器人的位置关系。
CN202110536950.6A 2021-05-18 2021-05-18 一种基于点云重建的工件焊缝定位的方法 Active CN113223071B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110536950.6A CN113223071B (zh) 2021-05-18 2021-05-18 一种基于点云重建的工件焊缝定位的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110536950.6A CN113223071B (zh) 2021-05-18 2021-05-18 一种基于点云重建的工件焊缝定位的方法

Publications (2)

Publication Number Publication Date
CN113223071A true CN113223071A (zh) 2021-08-06
CN113223071B CN113223071B (zh) 2022-08-26

Family

ID=77092531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110536950.6A Active CN113223071B (zh) 2021-05-18 2021-05-18 一种基于点云重建的工件焊缝定位的方法

Country Status (1)

Country Link
CN (1) CN113223071B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114682963A (zh) * 2022-03-25 2022-07-01 中铁科工集团有限公司 一种焊缝识别定位检测方法、装置及计算机可读存储介质
CN114799521A (zh) * 2022-06-02 2022-07-29 南京理工大学 一种蒙皮骨架激光自动焊接方法、装置及电子设备

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002301672A (ja) * 2001-04-03 2002-10-15 Yaskawa Electric Corp 産業用ロボットの位置制御方法
CN101559512A (zh) * 2009-05-21 2009-10-21 山东大学 基于激光测距的平板对接焊缝焊接轨迹检测与控制方法
CN103322953A (zh) * 2013-05-22 2013-09-25 北京配天大富精密机械有限公司 工件坐标系的标定方法、装置及工件加工处理方法、装置
US20170027168A1 (en) * 2015-07-27 2017-02-02 Stephan HEATH Methods, products, and systems relating to making, providing, and using nanocrystalline (nc) products comprising nanocrystalline cellulose (ncc), nanocrystalline (nc) polymers and/or nanocrystalline (nc) plastics or other nanocrystals of cellulose composites or structures, in combination with other materials
CN108555423A (zh) * 2018-01-16 2018-09-21 中国计量大学 三维焊缝自动识别装置及方法
CN109685778A (zh) * 2018-12-12 2019-04-26 重庆大学 一种基于ct切片的机械零件的几种常见几何量检测方法
CN110039523A (zh) * 2019-05-20 2019-07-23 北京无远弗届科技有限公司 一种工业机器人视觉伺服系统、伺服方法及装置
CN110111424A (zh) * 2019-05-07 2019-08-09 易思维（杭州）科技有限公司 基于线结构光测量的圆弧状物的三维重建方法
US20200269340A1 (en) * 2018-07-25 2020-08-27 Tonggao Advanced Manufacturing Technology Co., Ltd. Active Laser Vision Robust Weld Tracking System and Weld Position Detection Method
CN111745266A (zh) * 2020-06-09 2020-10-09 宝冠科技(苏州)有限公司 基于3d视觉寻位的瓦楞板焊接轨迹生成方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002301672A (ja) * 2001-04-03 2002-10-15 Yaskawa Electric Corp 産業用ロボットの位置制御方法
CN101559512A (zh) * 2009-05-21 2009-10-21 山东大学 基于激光测距的平板对接焊缝焊接轨迹检测与控制方法
CN103322953A (zh) * 2013-05-22 2013-09-25 北京配天大富精密机械有限公司 工件坐标系的标定方法、装置及工件加工处理方法、装置
US20170027168A1 (en) * 2015-07-27 2017-02-02 Stephan HEATH Methods, products, and systems relating to making, providing, and using nanocrystalline (nc) products comprising nanocrystalline cellulose (ncc), nanocrystalline (nc) polymers and/or nanocrystalline (nc) plastics or other nanocrystals of cellulose composites or structures, in combination with other materials
CN108555423A (zh) * 2018-01-16 2018-09-21 中国计量大学 三维焊缝自动识别装置及方法
US20200269340A1 (en) * 2018-07-25 2020-08-27 Tonggao Advanced Manufacturing Technology Co., Ltd. Active Laser Vision Robust Weld Tracking System and Weld Position Detection Method
CN109685778A (zh) * 2018-12-12 2019-04-26 重庆大学 一种基于ct切片的机械零件的几种常见几何量检测方法
CN110111424A (zh) * 2019-05-07 2019-08-09 易思维（杭州）科技有限公司 基于线结构光测量的圆弧状物的三维重建方法
CN110039523A (zh) * 2019-05-20 2019-07-23 北京无远弗届科技有限公司 一种工业机器人视觉伺服系统、伺服方法及装置
CN111745266A (zh) * 2020-06-09 2020-10-09 宝冠科技(苏州)有限公司 基于3d视觉寻位的瓦楞板焊接轨迹生成方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
徐龙等: "基于低成本激光扫描工件的快速建模算法研究", 《工业控制计算机》 *
文瑞洁: "《三维激光点云的处理及重建技术研究》", 《中国优秀硕士毕业论文》 *
杨培等: "基于结构光三维视觉的再制造工件的测量及重建", 《焊接学报》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114682963A (zh) * 2022-03-25 2022-07-01 中铁科工集团有限公司 一种焊缝识别定位检测方法、装置及计算机可读存储介质
CN114799521A (zh) * 2022-06-02 2022-07-29 南京理工大学 一种蒙皮骨架激光自动焊接方法、装置及电子设备
CN114799521B (zh) * 2022-06-02 2024-02-20 南京理工大学 一种蒙皮骨架激光自动焊接方法、装置及电子设备

Also Published As

Publication number Publication date
CN113223071B (zh) 2022-08-26

Similar Documents

Publication Publication Date Title
CN112122840B (zh) 一种基于机器人焊接的视觉定位焊接系统及焊接方法
CN108801142B (zh) 一种特大尺寸工件双移动测量机器人系统及方法
CN113223071B (zh) 一种基于点云重建的工件焊缝定位的方法
CN108871209B (zh) 一种大尺寸工件移动测量机器人系统及方法
CN108827155B (zh) 一种机器人视觉测量系统及方法
CN110170995B (zh) 一种基于立体视觉的机器人快速示教方法
CN112453648B (zh) 一种基于3d视觉的离线编程激光焊缝跟踪系统
CN110102855A (zh) 一种机器人智能化焊接系统、设备和方法
CN112847353B (zh) 一种基于离线编程软件的多段焊缝轨迹修正方法
CN108481323A (zh) 基于增强现实的机器人运动轨迹自动编程系统及方法
CN113146620B (zh) 基于双目视觉的双臂协作机器人系统和控制方法
CN112958959A (zh) 一种基于三维视觉的自动化焊接和检测方法
CN114571153B (zh) 一种基于3d点云的焊缝识别与机器人焊缝跟踪方法
CN110171000B (zh) 坡口切割方法、装置及控制设备
CN110988586A (zh) 一种配网带电作业机器人作业精准定位方法及系统
CN114474041A (zh) 一种基于协作机器人的焊接自动化智能引导方法及系统
CN113246142B (zh) 一种基于激光引导的测量路径规划方法
CN112223292A (zh) 结构件焊缝智能磨抛机器人在线打磨系统
CN111730245A (zh) 焊接系统及铸件缺陷补焊方法
CN117047237B (zh) 一种异形件智能柔性焊接系统与方法
CN114515924A (zh) 一种基于焊缝识别的塔脚工件自动焊接系统及方法
CN114434059B (zh) 复合机器人和三维视觉的大型结构件自动焊接系统及方法
CN114347038A (zh) 一种交汇管道双臂协作焊接机器人及控制系统
CN112719702B (zh) 一种复杂管路智能装配与焊接一体化装置及方法
Xu et al. Advances in multi-robotic welding techniques: A review

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant