CN107741606A - 一种塑料热铆接组装监测方法及装置 - Google Patents

一种塑料热铆接组装监测方法及装置 Download PDF

Info

Publication number
CN107741606A
CN107741606A CN201710770109.7A CN201710770109A CN107741606A CN 107741606 A CN107741606 A CN 107741606A CN 201710770109 A CN201710770109 A CN 201710770109A CN 107741606 A CN107741606 A CN 107741606A
Authority
CN
China
Prior art keywords
module
light source
collimated light
detected
auxiliary
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710770109.7A
Other languages
English (en)
Other versions
CN107741606B (zh
Inventor
戴宜全
孔啸
张伟建
孔飞
刘效
张伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JIANGSU RUNMO AUTOMOTIVE INSEPECTION EQUIPMENT CO.,LTD.
Original Assignee
Jiangsu Yi Ying Intelligent Equipment Industry Innovation Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Yi Ying Intelligent Equipment Industry Innovation Research Institute Co Ltd filed Critical Jiangsu Yi Ying Intelligent Equipment Industry Innovation Research Institute Co Ltd
Priority to CN201710770109.7A priority Critical patent/CN107741606B/zh
Publication of CN107741606A publication Critical patent/CN107741606A/zh
Application granted granted Critical
Publication of CN107741606B publication Critical patent/CN107741606B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01VGEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V8/00Prospecting or detecting by optical means
    • G01V8/10Detecting, e.g. by using light barriers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8806Specially adapted optical and illumination features
    • G01N2021/8829Shadow projection or structured background, e.g. for deflectometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques

Landscapes

  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Geophysics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

本发明涉及汽车零部件检测技术领域,具体涉及一种塑料热铆接组装监测方法及装置,利用辅助运送定位模块将待检测件运送到统一的光学检测视场位置、强准直光源模块斜射产生阴影区以及摄像模块进行图像采集,通过图像分析判断待测件是否合格,并通过SVM分类器对焊接情况进行质量评价;本发明可以实现快速高精度在线监测汽车车门等组件成品、半成品在装配过程中的漏装、缺陷识别及质量评价,提高自动装配线生产效率和质量。

Description

一种塑料热铆接组装监测方法及装置
技术领域
本发明涉及汽车零部件检测技术领域,具体涉及一种塑料热铆接组装监测方法及装置。
背景技术
随着塑料在汽车轻量化中的大量使用,对塑料铆接产品的质量判断至关重要。在常见的装配技术中,塑料热铆接组装是相对简单、低廉、高效的永久性固定装配方法,可实现多点同时进行铆接固定,无需外加零部件、填料和其他费用。但对于汽车门板、仪表板这类内外饰件而言,其表面质量要求高且结构复杂,在装配过程中容易因为焊接工艺参数控制和定位误差而形成缺陷,特别是当前国内还主要以人工焊接装配为主,造成最终产品普遍有焊接缺陷或装配质量不高。针对上述问题,专利CN106078153A(电动汽车车门结构及其装配装置及装配、检测方法),提出了车门设计及对应于该设计形式车门的检测方法,但不涉及光学检测技术;专利CN103245263A(一种汽车门护板装配检测辅具及其检测方法),虽然涉及到反光镜光学元件,但其检测主要通过人为操作起到方便观察的作用,不涉及图像采集及分析工作,在形式上也大不相同;文献“红外热成像技术在热铆产品质量检测中的应用”(期刊来源:科技传播,作者:何路路、任子真,2015)中明确指出采用红外线检测技术而非本专利所采用的普通相机的原因之一就是,普通可见光相机采集到的图像目标和背景颜色一致,会导致目标与背景边缘不清晰。
发明内容
针对上述存在的问题,本发明提出一种塑料热铆接组装监测方法及装置,以实现塑料热铆接自动装配线的测量反馈。
为实现上述目的,本发明具体技术方案如下:一种塑料热铆接组装监测方法,包括以下步骤:
1)初始化灰度阈值和相对阈值,转步骤2);
2)训练SVM分类器并分等级,即按照对应光照下焊接局部图像的亮度统计、均方差、对比度特征将训练样本分类质量等级打分,分别对SVM分类器进行训练,得到对应所述特征的多个SVM分类器,转步骤3);
3)定位待检测件,由辅助运送定位模块将待检测件运送到统一的光学检测视场位置,转步骤4);
4)图像采集,在系统控制模块的控制下,通过摄像模块分别采集不同强准直光源照射下的图像,转步骤5);
5)判断金属螺钉是否缺失,即判断采集到的图像中金属螺钉对应区域内的像素值,若金属螺钉对应区域内的像素值均小于灰度阈值则判定为金属螺钉缺失,即不合格,转步骤7),否则转步骤6);
6)判断是否漏焊,即将不同强准直光源照射下的图像对应像素值相减并取绝对值,若绝对值均超过相对阈值,则判定为漏焊,即不合格,转步骤7),否则转步骤8);
7)采用SVM分类器对焊接情况进行质量评价;
8)待检测件合格。
本发明还提供了一种塑料热铆接组装监测装置,包括强准直光源模块、摄像模块、系统控制模块和辅助运送定位模块;其中辅助运送定位模块用于将待检测件运送到统一的光学检测视场位置;强准直光源模块用于斜射铆柱形成特定暗影区;摄像模块包含CCD和镜头,用于从焊柱顶端对焊柱进行摄像,摄像物距由所选用的镜头和拍摄分辨率要求决定;系统控制模块用于控制强准直光源光强及开关、图像采集节拍、辅助运送节拍、图像分析及铆接质量判断。
进一步地,上述料热铆接组装监测装置,其特征在于所述强准直光源模块,在具体应用中根据需要可设置多组,不同组强准直光源模块采用环形对称布置。
与现有技术相比,本发明可以实现快速高精度在线监测汽车车门等组件成品、半成品在装配过程中的漏装、缺陷识别及质量评价,提高自动装配线生产效率和质量。
附图说明
图1是塑料热铆接组装装置光路布置示意图。
图2是塑料热铆接组装检测流程图。
具体实施方式
下面结合附图和实施实例对本发明作进一步描述。
塑料热铆接组装装置包括强准直光源模块、摄像模块、系统控制模块和辅助运送定位模块,其中辅助运送定位模块用于将待检测件运送到统一的光学检测视场位置;强准直光源模块用于斜射铆柱形成特定暗影区,具体应用中根据需要可设置多组强准直光源模块,不同组强准直光源模块采用环形对称布置;摄像模块包含CCD和镜头,用于从焊柱顶端适当物距对焊柱进行摄像,其中物距由所选用的镜头和拍摄分辨率要求决定;系统控制模块用于控制强准直光源光强及开关、图像采集节拍、辅助运送节拍、图像分析及铆接质量判断。
塑料热铆接组装装置光路布置示意图如图1图所示,图中1为摄像模块,2为强准直透镜,3是焊柱。本实施例中包含两组强准直光源模块,焊柱由铆桩和铆柱组成,强准直光源斜射到组件待检测部位焊柱,摄像器从顶部摄像。
图2是塑料热铆接组装检测流程图,包括如下步骤:
1)初始化灰度阈值和相对阈值,其中,灰度阈值和相对阈值大小可根据工况准直光源光亮度适当调整,本实施例中灰度阈值为250,相对阈值为64,转步骤2);
2)训练支持向量机SVM(Support Vector Machine)分类器并分等级,即按照对应光照下焊接局部图像的亮度统计、均方差、对比度特征将训练样本分类质量等级打分,分别对SVM分类器进行训练,得到对应所述特征的多个SVM分类器;其中,训练支持向量机SVM包括如下步骤:
2.1)初始化粒子群的参数,本实施例中惯性权重参数设为w=1;学习因子均为c1=c2=2;
2.2)确定适应度函数,通过个体粒子所对应初始的惩罚系数和核函数参数来建立支持向量机的学习模型,并引入训练样本,计算出个体粒子所对应的适应度值;
2.3)更新极值、速度和位置,即当个体的适应度值小于个体极值或者全局极值,则将个体的适应度值代替个体极值或者全局极值,并将新生成的极值进行速度的更新;
2.4)进化搜索,每个粒子根据更新后的速度和位置重新进行搜索,并迭代重复步骤2.3)直到满足退出迭代条件(以迭代总次数或迭代更新量足够小作为迭代退出条件);
2.5)迭代完成,将最优参数c,g赋给支持向量机分类器;
3)定位待检测件,由辅助运送定位模块将待检测件运送到统一的光学检测视场位置,转步骤4);
4)图像采集,在系统控制模块的控制下,通过摄像模块分别采集不同强准直光源照射下的图像,转步骤5);本实施例中,开启左光源、关闭右光源,拍摄图1;开启右光源、关闭左光源,拍摄图2;
5)判断金属螺钉是否缺失,即判断采集到的图像中金属螺钉对应区域内的像素值,若金属螺钉对应区域内的像素灰度值均小于灰度阈值则判定为金属螺钉缺失,即不合格,转步骤7),否则转步骤6);
6)将采集到的两幅图像对应像素值相减并取绝对值,若绝对值超过相对阈值,则判定为漏焊,即不合格,转步骤7),否则转步骤8);
7)采用SVM分类器对焊接情况进行质量评价;
8)待检测件合格。

Claims (3)

1.一种塑料热铆接组装监测方法,其特征在于,包括以下步骤:
1)初始化灰度阈值和相对阈值,转步骤2);
2)训练SVM分类器并分等级,即按照对应光照下焊接局部图像的亮度统计、均方差、对比度特征将训练样本分类质量等级打分,分别对SVM分类器进行训练,得到对应所述特征的多个SVM分类器,转步骤3);
3)定位待检测件,由辅助运送定位模块将待检测件运送到统一的光学检测视场位置,转步骤4);
4)图像采集,在系统控制模块的控制下,通过摄像模块分别采集不同强准直光源照射下的图像,转步骤5);
5)判断金属螺钉是否缺失,即判断采集到的图像中金属螺钉对应区域内的像素值,若金属螺钉对应区域内的像素值均小于灰度阈值则判定为金属螺钉缺失,即不合格,转步骤7),否则转步骤6);
6)判断是否漏焊,即将不同强准直光源照射下的图像对应像素值相减并取绝对值,若绝对值均超过相对阈值,则判定为漏焊,即不合格,转步骤7),否则转步骤8);
7)采用SVM分类器对焊接情况进行质量评价;
8)待检测件合格。
2.一种塑料热铆接组装监测装置,其特征在于,包括强准直光源模块、摄像模块、系统控制模块和辅助运送定位模块;其中辅助运送定位模块用于将待检测件运送到统一的光学检测视场位置;强准直光源模块用于斜射铆柱形成特定暗影区;摄像模块包含CCD和镜头,用于从焊柱顶端对焊柱进行摄像,摄像物距由所选用的镜头和拍摄分辨率要求决定;系统控制模块用于控制强准直光源光强及开关、图像采集节拍、辅助运送节拍、图像分析及铆接质量判断。
3.如权利要求2所述的塑料热铆接组装监测装置,其特征在于所述强准直光源模块,在具体应用中根据需要可设置多组,不同组强准直光源模块采用环形对称布置。
CN201710770109.7A 2017-08-31 2017-08-31 一种塑料热铆接组装监测方法及装置 Active CN107741606B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710770109.7A CN107741606B (zh) 2017-08-31 2017-08-31 一种塑料热铆接组装监测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710770109.7A CN107741606B (zh) 2017-08-31 2017-08-31 一种塑料热铆接组装监测方法及装置

Publications (2)

Publication Number Publication Date
CN107741606A true CN107741606A (zh) 2018-02-27
CN107741606B CN107741606B (zh) 2019-02-22

Family

ID=61235111

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710770109.7A Active CN107741606B (zh) 2017-08-31 2017-08-31 一种塑料热铆接组装监测方法及装置

Country Status (1)

Country Link
CN (1) CN107741606B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109089411A (zh) * 2018-07-26 2018-12-25 江苏传艺科技股份有限公司 一种剪刀脚组装性能检测方法及自动检测系统
CN113487533A (zh) * 2021-05-19 2021-10-08 东北大学 一种基于机器学习的零件装配质量数字化检测系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1393690A (zh) * 2001-06-21 2003-01-29 株式会社理光 缺陷检查装置及其方法
US7173692B2 (en) * 2003-05-06 2007-02-06 Yutaka Co., Ltd. Device and method for optically inspecting operating holes formed in heads of screws
CN104101608A (zh) * 2014-07-01 2014-10-15 南京航空航天大学 可对多型号不规则形状产品进行缺陷检测的智能检测装置
CN104122265A (zh) * 2013-04-28 2014-10-29 郑州大学 钣金螺丝孔螺纹缺失检查方法及其系统
CN106872487A (zh) * 2017-04-21 2017-06-20 佛山市南海区广工大数控装备协同创新研究院 一种基于视觉的表面瑕疵检测方法及装置
CN107093175A (zh) * 2017-04-21 2017-08-25 华南师范大学 一种动力电池焊接质量检测方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1393690A (zh) * 2001-06-21 2003-01-29 株式会社理光 缺陷检查装置及其方法
US7173692B2 (en) * 2003-05-06 2007-02-06 Yutaka Co., Ltd. Device and method for optically inspecting operating holes formed in heads of screws
CN104122265A (zh) * 2013-04-28 2014-10-29 郑州大学 钣金螺丝孔螺纹缺失检查方法及其系统
CN104101608A (zh) * 2014-07-01 2014-10-15 南京航空航天大学 可对多型号不规则形状产品进行缺陷检测的智能检测装置
CN106872487A (zh) * 2017-04-21 2017-06-20 佛山市南海区广工大数控装备协同创新研究院 一种基于视觉的表面瑕疵检测方法及装置
CN107093175A (zh) * 2017-04-21 2017-08-25 华南师范大学 一种动力电池焊接质量检测方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109089411A (zh) * 2018-07-26 2018-12-25 江苏传艺科技股份有限公司 一种剪刀脚组装性能检测方法及自动检测系统
CN113487533A (zh) * 2021-05-19 2021-10-08 东北大学 一种基于机器学习的零件装配质量数字化检测系统及方法
CN113487533B (zh) * 2021-05-19 2023-11-14 东北大学 一种基于机器学习的零件装配质量数字化检测系统及方法

Also Published As

Publication number Publication date
CN107741606B (zh) 2019-02-22

Similar Documents

Publication Publication Date Title
CN103707781B (zh) 基于距离图像的驾驶员座椅位置自动调整系统
US20190287237A1 (en) Method and system for automatic quality inspection of materials and virtual material surfaces
CN102497952B (zh) 激光处理头以及用于补偿激光处理头的聚焦位置的改变的方法
CN112083017A (zh) 焊缝内部缺陷智能检测装置、方法及介质
CN102292187B (zh) 用于监控要在工件上实施的激光加工过程的方法和装置以及具有这种装置的激光加工头
CN103164708B (zh) 确定车辆承载检测的像素分类阈值
CN110216080A (zh) 一种基于图像对比的pcb加工产线的质量监控系统
CN108760747A (zh) 一种3d打印模型表面缺陷视觉检测方法
CN107756814A (zh) 检测系统、方法及所适用的3d打印设备
CN105044122A (zh) 一种基于半监督学习模型的铜件表面缺陷视觉检测系统及检测方法
CN107741606B (zh) 一种塑料热铆接组装监测方法及装置
CN109142381B (zh) 一种高速视觉检测识别设备
US11203494B2 (en) System and method for sorting moving objects
JP2015519554A5 (zh)
Zhang et al. Prediction of keyhole TIG weld penetration based on high-dynamic range imaging
CN115631138A (zh) 一种锆合金板材激光切割质量监检测方法与装置
CN108426891A (zh) 一种光器件引脚焊接质量检测方法及装置
CN106568577A (zh) 一种光学无热化设计检测系统及检测方法
Khan et al. Automatic inspection system using machine vision
JP2013539052A (ja) レトロ反射型撮像
CN107741425A (zh) 一种用于增材制造的表面缺陷实时检测装置
CN109738454A (zh) 一种软包电池极耳焊缝检测装置及方法
CN113935971A (zh) 一种复合材料表面缺陷的检测方法及装置
CN108956613A (zh) 玻璃锡缺陷视觉鉴别系统
CN116402797A (zh) 基于双精度成像模组的大幅面微小缺陷检测系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211223

Address after: 212000 floors 2-3, building 1, No. 106, Ruishan East Road, Dantu new town, Zhenjiang City, Jiangsu Province

Patentee after: JIANGSU RUNMO AUTOMOTIVE INSEPECTION EQUIPMENT CO.,LTD.

Address before: 21213 No. 9 Ruishan East Road, Dantu new town, Dantu District, Zhenjiang City, Jiangsu Province

Patentee before: JIANGSU YIRUN INTELLIGENT EQUIPMENT INDUSTRY INNOVATION RESEARCH INSTITUTE CO.,LTD.