CN110095069A - 一种高铁白车身装配质量检测系统和方法 - Google Patents

一种高铁白车身装配质量检测系统和方法 Download PDF

Info

Publication number
CN110095069A
CN110095069A CN201910322429.5A CN201910322429A CN110095069A CN 110095069 A CN110095069 A CN 110095069A CN 201910322429 A CN201910322429 A CN 201910322429A CN 110095069 A CN110095069 A CN 110095069A
Authority
CN
China
Prior art keywords
image
light
image processing
capture device
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910322429.5A
Other languages
English (en)
Inventor
侯天龙
孙永奎
马磊
杨尧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southwest Jiaotong University
Original Assignee
Southwest Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southwest Jiaotong University filed Critical Southwest Jiaotong University
Priority to CN201910322429.5A priority Critical patent/CN110095069A/zh
Publication of CN110095069A publication Critical patent/CN110095069A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开一种高铁白车身装配质量检测系统和方法,系统包括结构光投射器、图像采集设备和图像处理系统;结构光投射器向被装配件表面投射线线激光,并接收图像处理系统的控制信号;图像采集设备采集线激光被装配件表面特征调制后的结构光图像,并传输给图像处理系统;图像处理系统对采集到的图像进行预处理,并进行光条纹中心提取,再根据标定好的系统参数进行计算,将光条纹中心的图像坐标转化为对应距离信息。本发明利用图像处理算法的高效和灵活实现快速测量,可以实现宽范围的测量,还可实现装配特征的提取,同时可通过算法完成动态测量的引导,提高了检测精度和检测效率。

Description

一种高铁白车身装配质量检测系统和方法
技术领域
本发明涉及装配质量检测技术领域,具体为一种高铁白车身装配质量检测系统和方法。
背景技术
列车白车身是一个复杂的组合结构件,它是由百余种、甚至数百种薄板冲压件经过焊接、铆接、机械联接及粘接而成。其中在装配过程中,装配质量将会影响后续的焊接质量,而列车白车身焊接质量的优劣对整车质量起着决定性作用。已有的焊缝宽度检测方法中常用的传统方法为人工目测法,通过人工作业的方式对缝隙宽度进行测量,由于人工作业的局限性和人眼长时间工作导致的疲劳会引起漏测或者误测,同时效率较低。因此,列车白车身智能装配质量的在线检测对于企业的生产效率具有非凡的意义,焊缝的宽度、深度及装配件的高差度是装配质量的重要指标。
常用的自动化装配质量检测技术包括接触式测量和非接触式测量,接触式测量实时性差,且会受到检测目标材质的限制影响,造价昂贵,对操作人的健康也会产生一些影响。
列车白车身装配质量检测是智能装配过程中的一个重要环节,其中传感器的研究是核心。传统的机器视觉传感器是将被测物表面进行采集后被动获得被测物表面的特征信息,因此获得的仅仅是被测物表面的二维平面的特征信息。
图1为现有的二维激光传感器,该传感器的测量原理是激光束被一组特定透镜放大用以形成一条静态线激光,投射到被测物表面上。激光接受器是一套高品质的光学系统,将线激光的漫反射光投射到高度敏感的传感器感光矩阵上,高度敏感的感光元件CMOS矩阵可以接收从被测物体反射回来的光线,形成高精度轮廓影像。最终根据接受到的线激光点数输出一组二维坐标值,坐标系的原点与传感器本身相对固定。轮廓改变都会改变投射到被测物体表面的线激光的形状,从而改变感光器件矩阵上的影像结果。如果移动探头或者被测物体,可以得到若干扫描线轮廓,将这些轮廓合成就可以行成3D影像结果。这个影像也被称作“点云”,因为影像由数千个独立测量点所组成。
但是,激光传感器在高精度测量时,由于精度限制,水平方向测量范围较小;垂直方向受到系统结构的影响,垂直方向测试范围较小。而且在三维测量过程中仅仅完成三维尺寸的测量,需要通过引导才能完成动态测量。另外,激光传感器的成本较高,功能比较单一。
发明内容
针对上述问题,本发明的目的在于提供一种高铁白车身装配质量检测系统和方法,采用结构光机器视觉测量技术对装配过程中的装配质量进行全自动高精度测量,通过图像采集设备采集信息实现装配缝隙的实时检测,可减少人工处理过程所带入的误差,提高检测效率。技术方案如下:
一种高铁白车身装配质量检测系统,包括结构光投射器、图像采集设备和图像处理系统;结构光投射器向被装配件表面投射线线激光,并接收图像处理系统的控制信号;图像采集设备采集线激光被装配件表面特征调制后的结构光图像,并传输给图像处理系统;图像处理系统对采集到的图像进行预处理,并进行光条纹中心提取,再根据标定好的系统参数进行计算,将光条纹中心的图像坐标转化为对应距离信息。
一种高铁白车身装配质量检方法,包括以下步骤:
步骤1:通过测量前的系统初始化标定对图像采集设备和测试系统进行标定,完成三维空间坐标和二维平面的转换,得到相应的转换矩阵;
步骤2:通过图像采集设备采集结构光图像;
步骤3:通过图像处理算法进行光条纹中心提取,得到光条纹中心线;
步骤4:结合系统初始化标定坐标实现像素坐标和物理坐标的转化,得到实际的三维尺寸信息;
步骤5:根据三维尺寸信息进行质量评估并生成评估结果。
进一步的,所述系统初始化标定包括相机标定和系统标定;
所述相机标定的步骤为:
步骤1):首先获取标定板,通过图像采集设备拍摄标定板图像;
步骤2):根据角点提取算法计算出图像采集设备内参矩阵和镜头畸变参数。
步骤3):对标定参数进行可行性验证;
所述系统标定的步骤为:
步骤1):首先在三维空间内获取不共面的三条线段,根据三角形原理和空间几何可得空间内的约束关系;
步骤2):利用空间内约束关系和像平面的三条线段的关系,可运用非线性优化方法求出最优解。
步骤3):通过三条线段中标定点的三维坐标,得到对应的光平面参数,计算出标定所得到的光平面方程。
步骤4):根据光平面方程获得三维坐标的转换矩阵,实现像素坐标系和世界坐标系的转换。
更进一步的,所述步骤3具体为:
步骤a:首先根据光条纹上下沿,计算出光条纹的宽度,通过光条纹宽度求出光条纹线上相邻的两个中心点。采用方向优先原则,光条纹中心线的提取从中心点开始,向两边同时进行,对图像中感兴趣特征进行提取,同时去除无效特征,降低噪声干扰;
步骤b:采用Hessian矩阵算法与脊线跟踪算法相结合,采用Hssion矩阵求解结构光中心点的法线方向,沿法线方向利用Taylor级数展开求得亚像素坐标;
步骤c:利用光条纹边缘的光强变化很快,而边缘之外的图像相应的灰度值变化很小的特点,采用梯度算子找到光条纹的边缘,同时预估出结构光条纹的中心线,再使用加权重心法准确的提取出结构光条纹的中心。
步骤d:结合Hession矩阵算法提取的中心条纹和用梯度算子所得中心线进行拟合,得到光条纹的中心线。
本发明的有益效果是:
1)本发明采用线结构光和图像采集设备组合成三维尺寸测量,图像采集设备采集到携带平面轮廓信息的线结构光,利用图像处理算法的高效和灵活实现快速测量。
2)本发明可通过修改系统图像采集系统和结构光投射器的相对安装方式,可以实现宽范围的测量。
3)本发明采用多种图像处理算法相结合,不仅可实现装配特征的提取,同时可通过算法完成动态测量的引导,提高了检测精度和检测效率。
附图说明
图1为现有二维激光传感器示意图。
图2为本发明高铁白车身装配质量检测系统的结构示意图。
图3为本发明测量系统流程框图。
图4为本发明测量系统的核心算法流程图。
图中:1-激光传感器;2-线激光;3-激光接收器;4-图像采集设备;5-结构光投射器;6-图像处理系统;7-高铁白车身型材。
具体实施方式
下面结合附图和具体实施例对本发明做进一步详细说明。本发明的测量系统的主要组成部分有:结构光投射器、图像采集设备、图像处理系统。系统的结构如图2所示。图像采集设备和结构光投射器均可通过线缆与图像处理系统进行连接,图像处理系统通过线缆实现对结构光投射器的控制,而图像采集设备的核心功能为图像采集和传输。
该系统主要实现对高铁白车身装配质量检测,系统采用斜射式三角测量原理安装方式,结构光投射器投射到装配件表面时,线激光被装配件表面特征调制,图像采集设备采集到调制的结构光图像,计算机对采集到的图像进行预处理,然后对采集的光条纹图像进行光条纹中心的提取,根据标定好的系统参数进行计算将光条纹中心的图像坐标转化为对应距离信息。
本发明的测量系统流程图如图3所示,该系统主要功能为通过测量前的系统初始化标定对图像采集设备和测试系统进行标定,完成三维空间坐标和二维平面的转换,得到相应的转换矩阵;在系统进行测量时,图像采集设备采集到图像后通过图像处理算法获取线结构光的中心线,结合系统初始化标定坐标实现像素坐标和物理坐标的转化,得到实际的三维尺寸。系统的测量流程核心功能有两部分:系统初始化标定和图像处理算法。
本发明测量方法中核心算法为系统初始化标定和图像处理,系统初始化标定又分为相机标定和系统标定,图像处理主要采用脊线跟踪很Hession矩阵结合的滤波降噪算法和加权重心法求中心线,其算法流程图如图4所示。
相机标定采用传统的角点提取算法,解决相机的径向畸变和切向畸变,通过标定系统确定世界坐标系、相机坐标系、像素坐标系和像平面坐标系之间的相对关系。系统标定采用基于空间几何约束的光平面标定方法,通过空间内不共面的三条线段,利用空间内约束关系和像平面的三条线段的关系,获得三维坐标的转换矩阵,实现像素坐标系和世界坐标系的转换。
系统测量的核心方法就是图像处理,采用脊线跟踪算法与Hessian矩阵算法相结合,通过脊线跟踪,对图像中感兴趣特征进行提取,同时去除无效特征,降低噪声干扰,弥补Hessian矩阵算法在噪声处理及运算效率方面的不足,采用Hssion矩阵求解结构光法线方向,沿法线方向利用Taylor级数展开求得亚像素坐标,采用基于梯度算子的加权重心法实现条纹中心的提取,通过梯度算子找到光条纹的边缘,再使用加权重心法提取出光条纹的中心。

Claims (4)

1.一种高铁白车身装配质量检测系统,其特征在于,包括结构光投射器、图像采集设备和图像处理系统;结构光投射器向被装配件表面投射线线激光,并接收图像处理系统的控制信号;图像采集设备采集线激光被装配件表面特征调制后的结构光图像,并传输给图像处理系统;图像处理系统对采集到的图像进行预处理,并进行光条纹中心提取,再根据标定好的系统参数进行计算,将光条纹中心的图像坐标转化为对应距离信息。
2.一种如权利要求1所述的高铁白车身装配质量检测系统的检测方法,其特征在于,包括以下步骤:
步骤1:通过测量前的系统初始化标定对图像采集设备和测试系统进行标定,完成三维空间坐标和二维平面的转换,得到相应的转换矩阵;
步骤2:通过图像采集设备采集结构光图像;
步骤3:通过图像处理算法进行光条纹中心提取,得到亚像素级别的光条纹中心线;
步骤4:根据光条纹中心线在像素坐标系中的坐标值,结合系统初始化得到的转换矩阵实现像素坐标和物理坐标的转化,得到实际的三维尺寸信息;
步骤5:根据三维尺寸信息进行质量评估并生成评估结果。
3.根据权利要求2所述的检测方法,其特征在于,所述系统初始化标定包括图像采集设备标定和系统标定;
所述图像采集设备标定的步骤为:
步骤1):首先获取标定板,通过图像采集设备拍摄标定板图像;
步骤2):根据角点提取算法计算出图像采集设备内参矩阵和镜头畸变参数;
步骤3):对标定参数进行可行性验证;
所述系统标定的步骤为:
步骤1):首先在三维空间内获取不共面的三条线段,根据三角形原理和空间几何得到空间内的约束关系;
步骤2):利用空间内约束关系和像平面的三条线段的关系,运用非线性优化方法求出最优解;
步骤3):通过三条线段中标定点的三维坐标,得到对应的光平面参数,计算出标定所得到的光平面方程;
步骤4):根据光平面方程获得三维坐标的转换矩阵,实现像素坐标系和世界坐标系的转换。
4.根据权利要求2所述的检测方法,其特征在于,所述步骤3具体为:
步骤a:首先根据光条纹上下沿,计算出光条纹的宽度,通过光条纹宽度求出光条纹线上相邻的两个中心点;采用方向优先原则,光条纹中心线的提取从中心点开始,向两边同时进行,对图像中感兴趣特征进行提取,同时去除无效特征,降低噪声干扰;
步骤b:采用Hessian矩阵算法与脊线跟踪算法相结合,采用Hssion矩阵求解结构光中心点的法线方向,沿法线方向利用Taylor级数展开求得亚像素坐标;
步骤c:利用光条纹边缘的光强变化很快,而边缘之外的图像相应的灰度值变化很小的特点,采用梯度算子找到光条纹的边缘,同时预估出结构光条纹的中心线,再使用加权重心法准确的提取出结构光条纹的中心;
步骤d:结合Hession矩阵算法提取的中心条纹和用梯度算子所得中心线进行拟合,得到光条纹的中心线。
CN201910322429.5A 2019-04-22 2019-04-22 一种高铁白车身装配质量检测系统和方法 Pending CN110095069A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910322429.5A CN110095069A (zh) 2019-04-22 2019-04-22 一种高铁白车身装配质量检测系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910322429.5A CN110095069A (zh) 2019-04-22 2019-04-22 一种高铁白车身装配质量检测系统和方法

Publications (1)

Publication Number Publication Date
CN110095069A true CN110095069A (zh) 2019-08-06

Family

ID=67445450

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910322429.5A Pending CN110095069A (zh) 2019-04-22 2019-04-22 一种高铁白车身装配质量检测系统和方法

Country Status (1)

Country Link
CN (1) CN110095069A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111023999A (zh) * 2019-12-26 2020-04-17 北京交通大学 一种基于空间编码结构光的稠密点云生成方法
CN111300418A (zh) * 2020-03-13 2020-06-19 易思维(杭州)科技有限公司 装配过程中的间隙面差调整方法
CN113182701A (zh) * 2021-03-29 2021-07-30 大族激光科技产业集团股份有限公司 激光加工方法、装置、设备及存储介质
CN115144399A (zh) * 2022-08-30 2022-10-04 吉林省信息技术研究所 一种基于机器视觉的装配质量检测方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004301752A (ja) * 2003-03-31 2004-10-28 Tdk Corp 表面欠陥の検出方法及び装置
CN101499168A (zh) * 2009-03-19 2009-08-05 哈尔滨工业大学 基于脊线跟踪与海森矩阵的结构光光条中心提取方法
CN105783726A (zh) * 2016-04-29 2016-07-20 无锡科技职业学院 一种基于线结构光视觉检测的曲线焊缝三维重建方法
CN107578464A (zh) * 2017-06-30 2018-01-12 长沙湘计海盾科技有限公司 一种基于线激光扫描的传送带工件三维轮廓测量方法
CN107687819A (zh) * 2017-08-01 2018-02-13 大连理工大学 一种快速高精度的光条中心亚像素提取方法
CN109596059A (zh) * 2019-01-07 2019-04-09 南京航空航天大学 一种基于平行线结构光的飞机蒙皮间隙与阶差测量方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004301752A (ja) * 2003-03-31 2004-10-28 Tdk Corp 表面欠陥の検出方法及び装置
CN101499168A (zh) * 2009-03-19 2009-08-05 哈尔滨工业大学 基于脊线跟踪与海森矩阵的结构光光条中心提取方法
CN105783726A (zh) * 2016-04-29 2016-07-20 无锡科技职业学院 一种基于线结构光视觉检测的曲线焊缝三维重建方法
CN107578464A (zh) * 2017-06-30 2018-01-12 长沙湘计海盾科技有限公司 一种基于线激光扫描的传送带工件三维轮廓测量方法
CN107687819A (zh) * 2017-08-01 2018-02-13 大连理工大学 一种快速高精度的光条中心亚像素提取方法
CN109596059A (zh) * 2019-01-07 2019-04-09 南京航空航天大学 一种基于平行线结构光的飞机蒙皮间隙与阶差测量方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
孙晓明: "基于结构光的公路路面裂缝检测关键技术研究", 《中国博士学位论文全文数据库工程科技Ⅱ辑》 *
李春明等: "精确的线结构光中心提取算法研究", 《机械与电子》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111023999A (zh) * 2019-12-26 2020-04-17 北京交通大学 一种基于空间编码结构光的稠密点云生成方法
CN111023999B (zh) * 2019-12-26 2020-12-01 北京交通大学 一种基于空间编码结构光的稠密点云生成方法
CN111300418A (zh) * 2020-03-13 2020-06-19 易思维(杭州)科技有限公司 装配过程中的间隙面差调整方法
CN111300418B (zh) * 2020-03-13 2021-03-16 易思维(杭州)科技有限公司 装配过程中的间隙面差调整方法
CN113182701A (zh) * 2021-03-29 2021-07-30 大族激光科技产业集团股份有限公司 激光加工方法、装置、设备及存储介质
CN115144399A (zh) * 2022-08-30 2022-10-04 吉林省信息技术研究所 一种基于机器视觉的装配质量检测方法及装置
CN115144399B (zh) * 2022-08-30 2023-01-13 吉林省信息技术研究所 一种基于机器视觉的装配质量检测方法及装置

Similar Documents

Publication Publication Date Title
CN110095069A (zh) 一种高铁白车身装配质量检测系统和方法
CN108088390B (zh) 一种焊接检测中基于双目线结构光的光条中心三维坐标获取方法
US10690492B2 (en) Structural light parameter calibration device and method based on front-coating plane mirror
US6909514B2 (en) Wheel profile inspection apparatus and method
CN111122598B (zh) 一种钢轨表面缺陷三维检测系统及方法
CN106595519B (zh) 一种基于激光mems投影的柔性三维轮廓测量方法及装置
CN108802043B (zh) 隧道检测装置、检测系统及隧道病害信息提取方法
CN109099859B (zh) 大口径光学元件表面缺陷三维形貌测量装置和方法
CN105092607B (zh) 球面光学元件表面缺陷评价方法
CN107121093A (zh) 一种基于主动视觉的齿轮测量装置及测量方法
CN104266608B (zh) 视觉传感器现场标定装置和标定方法
CN110425998B (zh) 灰度图像耦合特征点高度的构件三维测量方法
CN105526882A (zh) 基于结构光测量的道岔磨耗检测系统及其检测方法
CN110296667A (zh) 基于线结构光多角度投影的高反射表面三维测量方法
CN109307480A (zh) 一种透射元件多表面面形检测方法
KR20160121509A (ko) 2개의 카메라로부터의 곡선의 세트의 구조형 광 매칭
CN106908453A (zh) 一种印刷线路板的检测方法及检测装置
CN111879264A (zh) 一种基于线结构光的平整度测量与评估系统
KR101090082B1 (ko) 단일 카메라 및 레이저를 이용한 계단 치수 측정 시스템 및 방법
CN108303040B (zh) 基于平面复眼和同轴结构光的三维测量系统及使用方法
CN112747671B (zh) 三维检测系统和三维检测方法
CN109506562A (zh) 一种用于太阳翼展开锁定深度检测的双目视觉测量装置
CN106123808B (zh) 一种用于汽车后视镜镜面角度偏转测量的方法
CN104266607A (zh) 镜面目标轮廓光学测量系统和方法
CN113494891B (zh) 一种用于火车承载鞍整体型面测量的多视角拼接方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190806

RJ01 Rejection of invention patent application after publication