CN101074877A - 复合材料铺放质量视频检测系统及间隙检测方法 - Google Patents
复合材料铺放质量视频检测系统及间隙检测方法 Download PDFInfo
- Publication number
- CN101074877A CN101074877A CN 200710024357 CN200710024357A CN101074877A CN 101074877 A CN101074877 A CN 101074877A CN 200710024357 CN200710024357 CN 200710024357 CN 200710024357 A CN200710024357 A CN 200710024357A CN 101074877 A CN101074877 A CN 101074877A
- Authority
- CN
- China
- Prior art keywords
- light source
- video
- gap
- video image
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 239000002131 composite material Substances 0.000 title claims abstract description 19
- 230000007480 spreading Effects 0.000 title claims description 7
- 238000003892 spreading Methods 0.000 title claims description 7
- 238000001514 detection method Methods 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 24
- 238000012545 processing Methods 0.000 claims description 23
- 238000012113 quantitative test Methods 0.000 claims description 6
- 230000008054 signal transmission Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 5
- 230000011218 segmentation Effects 0.000 claims description 5
- 238000012360 testing method Methods 0.000 claims description 5
- 238000007405 data analysis Methods 0.000 claims description 3
- 230000007547 defect Effects 0.000 claims description 3
- 230000002950 deficient Effects 0.000 claims description 3
- 238000002203 pretreatment Methods 0.000 abstract description 2
- 238000003708 edge detection Methods 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 13
- 150000001875 compounds Chemical class 0.000 description 7
- 239000000126 substance Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 239000010410 layer Substances 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012372 quality testing Methods 0.000 description 2
- 238000011282 treatment Methods 0.000 description 2
- 239000011157 advanced composite material Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 239000011229 interlayer Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000006798 recombination Effects 0.000 description 1
- 238000005215 recombination Methods 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004441 surface measurement Methods 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
一种复合材料铺放质量视频检测系统及间隙检测方法，属复合材料铺放质量检测系统及检测方法。该系统包括视频采集系统(001)、背景光源系统(002)、视频图像处理系统(003)以及处理结果输出系统(004)；所述检测方法，包括视频图像的采集，视频图像数据的存储，重新组合图像数据，对重新组合图像数据进行滤波去噪、阈值分割、边缘检测的预处理，利用扫描法逐行/列或隔行/列扫描预处理后的图像数据，通过处理后的数据分析定量分析间隙尺寸。该系统提供了减少视频图像处理数据量、提高间隙测量速度、满足系统实时性要求的采集图像重构方法。该检测方法操作简单、方便，主要用于复合材料结构件加工过程中的铺放间隙检测。
Description
技术领域
本发明涉及复合材料铺放工艺过程中同一铺放层相邻预浸带间的缝隙自动检测技术，该技术涉及复合材料结构件加工过程中的铺放层表面质量实时检测方法。利用视频图像处理技术，实现铺放间隙的高性能、低成本测量。
背景技术
先进复合材料结构具有高比强度、高比模量、耐疲劳、工艺性好等特点，能有效提高飞机性能，大量使用复合材料是航空器发展趋势：如美国第四代战斗机(F22、F35)、大型飞机(A380、787和A400M等)均大量采用复合材料结构部件提高飞机性能。作为复合材料通用制造技术，复合材料铺放可以实现复合材料设计制造技术的大跨度进步，具有重要的应用价值与技术进步意义。复合材料铺放技术是一项新型的加工技术，涉及复合材料加工、机械制造、自动控制技术以及传感检测技术等相关领域，相关技术的研究正在展开，其中铺放过程中预浸带间间隙的实时监控问题，是实现铺放工艺自动化的前提保障和必要基础。
与传统机械加工工艺相比，复合材料的铺放具有以下几点特殊性：1、材料的特殊性：采用的预浸料成型，加工过程中的预浸料变形难以精确控制；2、加工工艺的特殊性：工件的加工通过逐层铺叠而非切削实现，容易产生加工形变；3、加工工件表面比较粗造。鉴于上述原因，复合材料铺放技术要求对铺放工艺过程实施严格的质量控制，确保加工工件的外形尺寸和质量符合工艺要求，铺放工艺过程中的间隙实时检测是解决上述问题的最有效方法之一。
复合材料铺放的在线质量检测主要的任务之一就是检测同一铺放层相邻两条预浸带间的间隙是否满足工艺要求，属于表面质量检测问题。复合材料预侵带厚度薄(标准厚度约0.15mm)，且表面呈波浪型，给检测带来了极大的困难。基于视频图像处理的检测技术是近几年发展起来的测控技术，相对于传统检测方法，设备简单，成本低廉，而且包含信息量巨大，非常适合于复合材料自动铺放工艺过程中的质量检测。如美国专利(7171003B2)利用背景光源组和CCD组成的视频图像采集系统，其中背景光源组中包括红外光源，提高图像对比度，采集反射的铺放表面图像，检测表面间隙，该发明采用光源入射角度为45°。该发明中利用设置阈值的方式二值化图像，并在此基础上实现检测。
发明内容
1、一种复合材料铺放质量视频检测系统，其特征在于：包括视频采集系统、背景光源系统、视频图像处理系统以及结果输出系统：
所述的视频采集系统，用于采集被测区域的视频图像，包括CCD摄像机、镜头、视频信号传输接口，CCD摄像机输入端与镜头相连，CCD摄像机的输出端通过视频信号传输接口与视频图像处理系统相连；
所述的背景光源系统，用于提供稳定的检测环境并提高采集图像的对比度，包括光源、光源电源及光源支架，光源电源与光源相连，光源安装在光源支架上，并通过光源支架连于铺放头；
所述的视频图像处理系统的输出连于结果输出系统的输入。
2、一种如权利要求1所述的复合材料铺放质量视频间隙检测方法。其特征在于，该间隙检测方法由视频图像处理系统提供，具体步骤包括：
(9)从视频采集系统中摄取目标检测区域视频图像；
(10)将视频图像数据放入系统内存指定存储单元；
(11)重新组合图像数据；
(12)对重新组合图像数据进行预处理，预处理包括滤波去噪、阈值分割、边缘检测；
(13)利用扫描法逐行/列或隔行/列扫描预处理后的图像数据，并通过处理后的数据分析，定量分析间隙尺寸；
(14)若检测间隙大于或等于指定阈值，则确定为缺陷疑似，并对此疑似缺陷作进一步的定量分析，保存结果；
(15)若对连续3帧图像的检测均有缺陷疑似，则确定为间隙超限，并给出报警信息，按照要求停止铺放过程；
(16)若步骤(5)的检测间隙小于指定阈值，则继续直至整个铺放过程结束。
附图说明
图1是本发明的复合材料铺放质量视频检测系统组成原理示意图；
图1中的标号名称：001-视频采集系统，002-背景光源系统，003-视频图像处理系统，004-结果输出系统，005-CCD摄像机，006-镜头，007-视频信号传输接口，008-光源，009-光源电源，010-光源支架。
图2是本发明的加工工件表面及图像采集工作区示意图；
图3是本发明中重新组合方法及组合结果示意图；
图4是本发明中列扫描检测方法示意图；
图5是本发明中间隙检测处理流程图。
具体实施方式
本发明提供一种在复合材料铺放工艺过程中，同一铺放层相邻预浸带缝隙(间隙)自动检测方法，实现间隙的高精度在线测量。
本发明提供了复合材料铺放工艺过程中层间相邻预浸带间隙表面测量的系统及方法，所述系统如图1所示，包括：视频采集系统001、背景光源系统002、视频图像处理系统003以及处理结果输出系统004。系统间隙采集工作区域如图2所示。
如上所述的视频采集系统001用于采集被测区域的视频图像，主要包括一台CCD摄像机005、镜头006及视频信号传输接口007。
如上所述的背景光源系统002用于提供稳定的检测环境并提高采集图像的对比度，主要包括一台光源008、光源电源009及光源支架010。
如上所述的系统，利用工件加工面表面特性，在光源入射角度合理时可以提供对比度高的采集图像。
如上所述的视频图像处理系统003提供了基于视频图像处理的间隙检测方法，其中滤波去噪、阈值分割、边缘检测均采用现在常用的图像及信号处理技术。间隙测量及分析采用行抽样扫描测量的方法，具体思想如下：对采集到的视频图像，按照需求选取若干区域重新组合，形成一个新的图像数据集合，该集合可以看作是一幅图像，对重新组合的数据集合做滤波去噪、阈值分割、边缘检测等前处理后，再对分割后的二值化图像进行行/列扫描，测量间隙所占象素个数换算获得的。图像重新组合的目的主要是为了减少计算量，提高图像处理速度，满足检测实时性要求，重新组合方法如图3所示。
行/列扫描基本思想为：对于重组后的数据二值化处理后，即获得了二值化图像，所谓行/列扫描就是指提取该二值化图像中的某一行/列数据，根据该行/列象素的灰度跳变点，判断间隙起始、结束位置，并以此计算间隙尺寸(每个象素点对应实际的面积已知)。为了获得可靠的间隙检测数据，采取两级判断分析的方法：首先判断间隙跳变点：如果是理想图像，扫描过程中应该有两次灰度跳变，跳变点将即为间隙。但实际情况往往存在噪声等因素，扫描行的灰度跳变点不止两个，可以根据间隙和噪声的特点加以判断。噪声一般两突变点间隔较小，而间隙的跳变点间隔较大，因此可以在检测到跳变时，向该点两边再做一次连续多个象素的二次扫描，如果有跳变点判断为噪声，如果没有判断为间隙的边缘。
其次判断检测数据的有效性：有时噪声较大，上述方法无法判断。可以在重组数据集合内进行非连续的多行/列扫描，如果数据接近，认为是间隙。相反，则需重新判断。该检测方法原理如图4所示。
如上所述的检测系统提供的间隙检测方法，通过下述技术方案予以实现，包括下述步骤：
(1)从视频采集系统001中摄取目标检测区域视频图像；
(2)将视频图像数据放入系统内存指定存储单元；
(3)重新组合图像数据；
(4)对重新组合图像数据进行预处理，预处理包括滤波去噪、阈值分割、边缘检测等；
(5)利用扫描法逐行/列或隔行/列扫描预处理后的图像数据，并通过处理后的数据分析，定量分析间隙尺寸；
(6)若检测间隙大于或等于指定阈值，则确定为缺陷疑似，并对此疑似缺陷作进一步的定量分析，保存结果；
(7)若对连续多帧(本发明中采用连续3帧)图像的检测均有缺陷疑似，则确定为间隙超限，并给出报警信息，按照要求停止铺放过程；
(8)若步骤(5)的检测间隙小于指定阈值，则继续直至整个铺放过程结束。
处理流程如图5所示。
复合材料铺放工艺过程中间隙在线实时提取
大型复合材料结构件的铺放过程中，需要铺放间隙一般要求必须小于给定的范围，同时不允许出现重叠。现代铺放设备基本实现自动化，设备控制精度和铺放速度比较高，可达每秒半米以上，需要实时监控并调整铺放头工作位置。对铺放头水平位置的检测可以借助于间隙检测实现，同时间隙检测也可以测量加工质量，为质量监控及铺放头控制提供必要的检测参数。尤其在铺放头控制过程中，需要了解铺放头的横向位置变化情况以及变化趋势，就必须要实时提取间隙尺寸。
本实施例中，CCD采用德国Basler公司的A312f型号工业摄像机，该摄像机采用标准1394接口，视频图像采集速率可达30帧/秒以上，能够满足要求；镜头采用日本Tokina的10倍手动变焦镜头，确保采集图像精度和质量，光源采用日本CGS公司的工业级LED光源。
检测过程中采用本发明中的间隙检测提取方法，实时提取间隙的宽度大小，显示并反馈给铺放头控制系统。
Claims (2)
1、一种复合材料铺放质量视频检测系统，其特征在于：包括视频采集系统(001)、背景光源系统(002)、视频图像处理系统(003)、结果输出系统(004)：
所述的视频采集系统(001)，用于采集被测区域的视频图像，包括CCD摄像机(005)、镜头(006)、视频信号传输接(007)，CCD摄像机(005)输入端与镜头(006)相连，CCD摄像机(005)的输出端通过视频信号传输接(007)与视频图像处理系统(003)相连；
所述的背景光源系统(002)，用于提供稳定的检测环境并提高采集图像的对比度，包括光源(008)、光源电源(009)及光源支架(010)，光源电源(009)与光源(008)相连，光源(008)安装在光源支架(010)上，并通过光源支架(010)连于铺放头；
所述的视频图像处理系统(003)的输出连于结果输出系统(004)的输入。
2、一种如权利要求1所述的复合材料铺放质量视频间隙检测方法，其特征在于，该间隙检测方法由视频图像处理系统(003)提供，具体步骤包括：
(1)从视频采集系统(001)中摄取目标检测区域视频图像；
(2)将视频图像数据放入系统内存指定存储单元；
(3)重新组合图像数据；
(4)对重新组合图像数据进行预处理，预处理包括滤波去噪、阈值分割、边缘检测；
(5)利用扫描法逐行/列或隔行/列扫描预处理后的图像数据，并通过处理后的数据分析，定量分析间隙尺寸；
(6)若检测间隙大于或等于指定阈值，则确定为缺陷疑似，并对此疑似缺陷作进一步的定量分析，保存结果；
(7)若对连续3帧图像的检测均有缺陷疑似，则确定为间隙超限，并给出报警信息，按照要求停止铺放过程；
(8)若步骤(5)的检测间隙小于指定阈值，则继续直至整个铺放过程结束。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200710024357 CN101074877A (zh) | 2007-06-14 | 2007-06-14 | 复合材料铺放质量视频检测系统及间隙检测方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200710024357 CN101074877A (zh) | 2007-06-14 | 2007-06-14 | 复合材料铺放质量视频检测系统及间隙检测方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101074877A true CN101074877A (zh) | 2007-11-21 |
Family
ID=38976062
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200710024357 Pending CN101074877A (zh) | 2007-06-14 | 2007-06-14 | 复合材料铺放质量视频检测系统及间隙检测方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101074877A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102353677A (zh) * | 2011-09-14 | 2012-02-15 | 南京航空航天大学 | 高对比度复合材料铺放间隙图像的采集参数 |
| CN102374848A (zh) * | 2011-09-14 | 2012-03-14 | 南京航空航天大学 | 复合材料铺放间隙图像的快速检测方法 |
| CN106426980A (zh) * | 2016-10-19 | 2017-02-22 | 山东理工大学 | 风电叶片真空灌注制造中纤维布的自动铺层设备 |
| CN106482653A (zh) * | 2015-08-28 | 2017-03-08 | 华硕电脑股份有限公司 | 光学量测装置以及间隙量测方法 |
| CN107984770A (zh) * | 2017-12-08 | 2018-05-04 | 广州大学 | 基于机器视觉的碳纤维预浸料定角度铺放方法及装置 |
| CN108805857A (zh) * | 2017-04-28 | 2018-11-13 | 波音公司 | 复合材料制造工艺的工艺控制 |
| CN109870460A (zh) * | 2019-03-24 | 2019-06-11 | 哈尔滨理工大学 | 一种基于机器视觉的复合材料电池盒表面质量检测方法 |
| CN112102310A (zh) * | 2020-09-27 | 2020-12-18 | 江苏恒宝智能系统技术有限公司 | 一种复合材料的预浸料丝铺放缺陷检测方法及系统 |
| CN112950524A (zh) * | 2019-11-22 | 2021-06-11 | 中国商用飞机有限责任公司 | 一种铺贴操作监控方法及装置 |
| CN114818799A (zh) * | 2022-04-15 | 2022-07-29 | 西南交通大学 | 复合材料叠层构件钻锪一体加工监测信号分割方法 |
| CN115471481A (zh) * | 2022-09-20 | 2022-12-13 | 盐城工学院 | 一种基于深度学习的复合机在线质量监测系统 |
| CN116124754A (zh) * | 2023-04-17 | 2023-05-16 | 山东省中源联科生物工程集团有限公司 | 通过图像分析检测透明质酸钠凝胶中交联剂残留量的方法 |
-
2007
- 2007-06-14 CN CN 200710024357 patent/CN101074877A/zh active Pending
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102374848A (zh) * | 2011-09-14 | 2012-03-14 | 南京航空航天大学 | 复合材料铺放间隙图像的快速检测方法 |
| CN102353677A (zh) * | 2011-09-14 | 2012-02-15 | 南京航空航天大学 | 高对比度复合材料铺放间隙图像的采集参数 |
| CN106482653A (zh) * | 2015-08-28 | 2017-03-08 | 华硕电脑股份有限公司 | 光学量测装置以及间隙量测方法 |
| US10475199B2 (en) | 2015-08-28 | 2019-11-12 | Asustek Computer Inc. | Optical measurement device and the method using thereof |
| CN106426980A (zh) * | 2016-10-19 | 2017-02-22 | 山东理工大学 | 风电叶片真空灌注制造中纤维布的自动铺层设备 |
| CN108805857B (zh) * | 2017-04-28 | 2023-08-25 | 波音公司 | 复合材料制造工艺的工艺控制 |
| CN108805857A (zh) * | 2017-04-28 | 2018-11-13 | 波音公司 | 复合材料制造工艺的工艺控制 |
| CN107984770A (zh) * | 2017-12-08 | 2018-05-04 | 广州大学 | 基于机器视觉的碳纤维预浸料定角度铺放方法及装置 |
| CN109870460A (zh) * | 2019-03-24 | 2019-06-11 | 哈尔滨理工大学 | 一种基于机器视觉的复合材料电池盒表面质量检测方法 |
| CN112950524A (zh) * | 2019-11-22 | 2021-06-11 | 中国商用飞机有限责任公司 | 一种铺贴操作监控方法及装置 |
| CN112102310A (zh) * | 2020-09-27 | 2020-12-18 | 江苏恒宝智能系统技术有限公司 | 一种复合材料的预浸料丝铺放缺陷检测方法及系统 |
| CN112102310B (zh) * | 2020-09-27 | 2023-12-12 | 江苏恒宝智能系统技术有限公司 | 一种复合材料的预浸料丝铺放缺陷检测方法及系统 |
| CN114818799A (zh) * | 2022-04-15 | 2022-07-29 | 西南交通大学 | 复合材料叠层构件钻锪一体加工监测信号分割方法 |
| CN114818799B (zh) * | 2022-04-15 | 2024-03-19 | 西南交通大学 | 复合材料叠层构件钻锪一体加工监测信号分割方法 |
| CN115471481A (zh) * | 2022-09-20 | 2022-12-13 | 盐城工学院 | 一种基于深度学习的复合机在线质量监测系统 |
| CN116124754A (zh) * | 2023-04-17 | 2023-05-16 | 山东省中源联科生物工程集团有限公司 | 通过图像分析检测透明质酸钠凝胶中交联剂残留量的方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101074877A (zh) | 复合材料铺放质量视频检测系统及间隙检测方法 | |
| CN102175700B (zh) | 数字x射线图像焊缝分割和缺陷检测方法 | |
| JP4169573B2 (ja) | パターン検査方法及び検査装置 | |
| CN106093068A (zh) | 锂电池极片表面缺陷检测装置的成像系统及其使用方法 | |
| CN101063659A (zh) | 纸张纸病检测系统 | |
| CN103163150A (zh) | 一种线缆表面缺陷在线检测装置及方法 | |
| CN1940555A (zh) | 一种农产品内外品质检测方法及装置 | |
| CN1393690A (zh) | 缺陷检查装置及其方法 | |
| CN113899752B (zh) | 采用双排链刮板机内链板裂纹的视觉检测装置进行链板裂纹的检测方法 | |
| CN102175692A (zh) | 织物坯布疵点快速检测系统及方法 | |
| CN109738454B (zh) | 一种软包电池极耳焊缝检测装置及方法 | |
| EP2284520A1 (en) | Assembly for the inspection in a continuous manner of cells, strings and photovoltaic modules and inspection method thereof | |
| CN114636706A (zh) | 一种太阳能电池片在镀膜后的图像检测的综合方法及装置 | |
| CN1815489A (zh) | 一种智能图像计数方法 | |
| CN109856155A (zh) | 一种基于偏振光的液晶显示屏表面检测装置及方法 | |
| CN111260617A (zh) | 一种基于深度学习的太阳能电池板缺陷检测方法 | |
| CN113916127A (zh) | 一种气门导管成品外观视觉检测系统及检测方法 | |
| US8094922B2 (en) | Crack measuring method and apparatus | |
| CN106526917A (zh) | 一种采用线阵相机扫描的液晶屏点阵检测装置 | |
| CN109387527A (zh) | 一种膜上膜内缺陷的检测方法 | |
| CN103364413A (zh) | 标识检测与产品分级控制系统及方法 | |
| CN102128838A (zh) | 基板内部缺陷检查装置及方法 | |
| CN106053485A (zh) | 基于机器视觉的钢球表面缺陷智能环形循检的新型算法 | |
| CN111398294B (zh) | 一种基于机器视觉的秸秆颗粒缺陷检测系统及检测方法 | |
| KR20130099551A (ko) | 태양전지 웨이퍼 비전 검사기의 카메라 시스템 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20071121 |