CN106226325A - 一种基于机器视觉的座椅表面缺陷检测系统及其方法 - Google Patents

Abstract

本发明公开了一种基于机器视觉的座椅表面缺陷检测系统，包括机械臂、数控装置、激光测距仪、图像采集装置、图像处理和分析平台和数据库系统，其中激光测距仪和图像采集装置安装在机械臂上；数控装置连接机械臂；图像采集装置连接图像处理和分析平台；图像处理和分析平台连接数据库系统，数据库系统用于存储图像处理和分析平台的检测分析结果。与现有技术相比，本发明提高了产品质量检测水平，提高了产品质量检测的效率，是智能化工业制造的一个有益补充，不仅解放了劳动力，而且推动了企业利用信息技术改造提升传统生产流程，同时，本发明使用单个相机，代替多个相机以降低检测成本，单帧拍摄降低了信息处理的压力，使得系统更简单、稳定。

Description

一种基于机器视觉的座椅表面缺陷检测系统及其方法

技术领域

本发明涉及机器视觉检测领域，尤其涉及一种基于机器视觉的座椅表面缺陷检测系统及其方法。

背景技术

座椅是汽车整车的核心部件之一，包含了大量的科技价值与形象价值。目前，我国约有700家汽车座椅生产商，江苏、浙江以及广东是我国汽车座椅的生产中心，但小规模汽车座椅生产企业数量多，低端汽车座椅产品充斥市场，存在产能过剩问题。同时，这也导致国内汽车座椅企业无序竞争现象严重。目前我国大多数座椅生产线采用的还是传统的人工串连生产方式，生产效率低下，而且出错率高。

在大批量工业生产过程中，用人工视觉检查产品质量效率低且精度不高，用机器视觉检测方法可以大大提高生产效率和生产的自动化程度。本发明的目的在于使用视觉检测来代替座椅生产线的座椅表面缺陷检测，视觉识别座椅表面的油污，划痕，皱褶，线头和接缝异常以及安装差错等缺陷，提高检测的效率和准确度。

汽车座椅检测装置的研制(吴彦强，张若青.测控技术,2013,32(3):120-123.)，该文献设计了以SIMATIC S7-300系列PLC为核心控制器的汽车座椅检测装置。测控系统通过TCP/IP协议将PLC与组态王开发的人机界面相连；通过采用零漂移补偿以及软硬件滤波技术,提高了测试信号的精度和稳定性；编程中采用的模块化结构,使程序的执行效率大大提高,且具有良好的可读性和易维护性，然而该文献主要针对汽车座椅结构的检测。

纵观国内外，机器视觉在汽车制造和检测领域的应用主要有汽车整车尺寸测量、气缸盖检测、汽车金属铸件检测、汽车发动机装配检测。但在汽车座椅表面缺陷检测中，目前都采用人工视觉检查产品质量，效率低且精度不高，随着劳动力成本的提高，检测成本也在上升。

为克服现有技术的不足，本申请人在2016年4月11日递交了一份申请号为201610217127.8名称为基于机器视觉的汽车座椅表面缺陷检测系统及检测方法的专利申请。该申请的技术方案包括光源装置、单片机数控装置、图像采集装置、图像处理和分析平台、数据库系统以及硬件装置，所述图像采集装置、图像处理和分析平台以及数据库系统顺序连接，所述光源装置设置在硬件装置上，所述单片机数控装置与光源装置电连接；所述光源装置用于提高待测特征对比度、简化图像处理程序；所述单片机数控装置，用于调整、控制光源颜色和照度；所述图像采集装置，用于采集所述检测图像并发送至所述图像处理和分析平台；所述图像处理和分析平台，用于对采集到的图形进行特征识别，并根据拾取的特征判断待检测座椅是否有缺陷；所述数据库系统，用于存储所述检测分析结果。

该申请中的技术方案中用于拍摄汽车座椅的各个方向上需要设置多个静态相机，检测成本较高，同时获取图像信息量较大，同时对所有图像处理时往往要花费较多的时间，同时CPU运转率较高，检测系统不太稳定。

发明内容

为克服现有技术的不足，本发明提出一种基于机器视觉的座椅表面缺陷检测系统及其方法。

本发明的技术方案是这样的：一种基于机器视觉的座椅表面缺陷检测系统，包括机械臂、数控装置、激光测距仪、图像采集装置、图像处理和分析平台和数据库系统，其中

所述激光测距仪和图像采集装置安装在所述机械臂上；

所述数控装置连接所述机械臂，用于调整和控制机械臂的运动路径；

所述图像采集装置连接所述图像处理和分析平台，用于采集检测图像并发送至所述图像处理和分析平台；

所述图像处理和分析平台连接所述数据库系统，所述图像处理和分析平台用于对采集到的图形进行特征识别，并根据识别的特征判断待检测座椅是否有缺陷，所述数据库系统用于存储所述图像处理和分析平台的检测分析结果。

进一步地，所述机械臂为六自由度机械臂。

进一步地，所述图像采集装置无线连接所述图像处理和分析平台。

进一步地，所述图像处理和分析平台无线连接所述数据库系统。

进一步地，所述图像采集装置包括工业相机、镜头、AD转换装置和图像采集卡，所述镜头固定在所述工业相机上，所述工业相机和所述AD转换装置、图像采集卡进行电连接；

所述工业相机用于实时采集图像；

所述AD转换装置将采集到的图像转换为数字图像；

所述图像采集卡用于将所述数字图像并发送至所述图像处理和分析平台。

本发明还提供一种基于机器视觉的座椅表面缺陷检测方法，包括步骤

S1：向数据库系统中输入座椅模板信息；

S2：组装座椅，运输到机械臂下方；

S3：机械臂根据数控装置的路径规划和激光测距仪的距离反馈，带动图像采集装置分别对座椅的不同位置进行拍摄；

S4：将拍摄到的图像发送到图像处理和分析平台进行图像处理和分析；

S5：将图像处理和分析平台的分析结果存储至数据库系统中。

进一步地，步骤S4中图像处理和分析平台进行图像处理和分析的过程包括步骤

S41：对所述检测图像使用分类器算法，进行颜色识别与材质识别，然后与模板相匹配，判断座椅是否组装错误，蒙皮材料是否出错；

S42：对所述检测图像使用形态学处理和阈值选取进行线头位置、接缝位置识别；

S43：对所述检测图像进行特征提取、分析算法来进行判断线头缺陷和接缝缺陷；

若上述步骤有一步检测到缺陷，直接报错，产品不合格；

若上述步骤都合格，重置处理过的检测图像，进行一下步骤：

S44：对所述检测图像使用高斯混合建模、形态学、图像卷积组合算法进行纹理滤波，减少座椅表面纹理干扰；

S45：对所述检测图像进行阈值处理，再使用边缘检测算法，提取特征，与划痕、褶皱和油污特征模板进行匹配，判断座椅表面是否有划痕、褶皱或油污，生成检测分析结果。

更进一步地，步骤S41包括步骤：通过数据库系统，对检测图像进行模板匹配，确定检测图像类型，再获取检测图像的颜色和特征，与模板数据进行对比，将获取数据与模板数据做数学运算，若模板数据与获取数据差小于一定范围，则产品皮料、组装合格。

更进一步地，步骤S43包括步骤：对图像进行RGB到灰度图像转换，再进行阈值选择、外轮廓特征提取，然后使用区域分割对连接线进行提取，除去其它无关背景，再与连接线模板进行模板匹配，判断是否有线头，接缝是否有破损。

进一步地，步骤S5包括步骤：

S51：给所述检测分析结果添加存储标识信息生成待存储分析结果；

S52：将所述存储分析结果存储至数据库中。

本发明的有益效果在于，与现有技术相比，本发明提高了产品质量检测水平，提高了产品质量检测的效率，是智能化工业制造的一个有益补充，不仅解放了劳动力，而且推动了企业利用信息技术改造提升传统生产流程，同时，本发明使用单个相机，代替多个相机以降低检测成本，单帧拍摄降低了图像处理和分析平台信息处理的压力，使得系统更简单、稳定。

附图说明

图1是本发明一种基于机器视觉的座椅表面缺陷检测系统结构示意图。

图2是本发明一种基于机器视觉的座椅表面缺陷检测系统电路连接示意图。

图3是本发明一种基于机器视觉的座椅表面缺陷检测方法流程图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参见图1和图2，本发明一种基于机器视觉的座椅表面缺陷检测系统，包括机械臂3、数控装置1、激光测距仪5、图像采集装置4、图像处理和分析平台2和数据库系统6，其中

所述激光测距仪5和图像采集装置4安装在所述机械臂3上；

所述数控装置1连接所述机械臂3，用于调整和控制机械臂的运动路径；

所述图像采集装置4连接所述图像处理和分析平台2，用于采集检测图像并发送至所述图像处理和分析平台2；

所述图像处理和分析平台2连接所述数据库系统6，所述图像处理和分析平台2用于对采集到的图形进行特征识别，并根据识别的特征判断待检测座椅是否有缺陷，所述数据库系统6用于存储所述图像处理和分析平台的检测分析结果。

所述机械臂3可设置于附加框体上，也可设置于如图1所述的龙门架7上。

所述激光测距仪，用于测量采集系统到座椅表面的距离，并反馈给数控装置；

所述数控装置1连接有电源和机械臂3，所述数控装置1通过激光测距仪5反馈数据控制机械臂末端位置，使图像采集系统与座椅表面保持恒定距离。

所述数控系统1控制机械臂3运动，使得图像采集系统获取座椅表面各个不同部位的清晰图像。

在本发明的某些实施例中，所述机械臂3为六自由度机械臂。

本发明的某些实施例中，所述图像采集装置无线连接所述图像处理和分析平台，所述图像处理和分析平台无线连接所述数据库系统。

所述图像采集装置4包括工业相机、镜头、AD转换装置和图像采集卡，所述镜头固定在所述工业相机上，所述工业相机和所述AD转换装置、图像采集卡进行电连接；所述工业相机用于实时采集图像；所述AD转换装置将采集到的图像转换为数字图像；所述图像采集卡用于将所述数字图像并发送至所述图像处理和分析平台。

本发明还提供一种基于机器视觉的座椅表面缺陷检测方法，包括步骤

S1：向数据库系统中输入座椅模板信息；

S2：组装座椅，运输到机械臂下方；

S3：机械臂根据数控装置的路径规划和激光测距仪的距离反馈，带动图像采集装置分别对座椅的不同位置进行拍摄；

S4：将拍摄到的图像发送到图像处理和分析平台进行图像处理和分析；

S5：将图像处理和分析平台的分析结果存储至数据库系统中。

其中，步骤S4中图像处理和分析平台进行图像处理和分析的过程包括步骤

S41：对所述检测图像使用分类器算法，进行颜色识别与材质识别，然后与模板相匹配，判断座椅是否组装错误，蒙皮材料是否出错；

S42：对所述检测图像使用形态学处理和阈值选取进行线头位置、接缝位置识别；

S43：对所述检测图像进行特征提取、分析算法来进行判断线头缺陷和接缝缺陷；

若上述步骤有一步检测到缺陷，直接报错，产品不合格；

若上述步骤都合格，重置处理过的检测图像，进行一下步骤：

S44：对所述检测图像使用高斯混合建模、形态学、图像卷积组合算法进行纹理滤波，减少座椅表面纹理干扰；

S45：对所述检测图像进行阈值处理，再使用边缘检测算法，提取特征，与划痕、褶皱和油污特征模板进行匹配，判断座椅表面是否有划痕、褶皱或油污，生成检测分析结果。

其中，步骤S41包括步骤：通过数据库系统，对检测图像进行模板匹配，确定检测图像类型，再获取检测图像的颜色和特征，与模板数据进行对比，将获取数据与模板数据做数学运算，若模板数据与获取数据差小于一定范围，则产品皮料、组装合格。

其中，步骤S43包括步骤：对图像进行RGB到灰度图像转换，再进行阈值选择、外轮廓特征提取，然后使用区域分割对连接线进行提取，除去其它无关背景，再与连接线模板进行模板匹配，判断是否有线头，接缝是否有破损。

其中，步骤S5包括步骤：

S51：给所述检测分析结果添加存储标识信息生成待存储分析结果；

S52：将所述存储分析结果存储至数据库中。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种基于机器视觉的座椅表面缺陷检测系统，其特征在于，包括机械臂、数控装置、激光测距仪、图像采集装置、图像处理和分析平台和数据库系统，其中

所述激光测距仪和图像采集装置安装在所述机械臂上；

所述数控装置连接所述机械臂，用于调整和控制机械臂的运动路径；

所述图像采集装置连接所述图像处理和分析平台，用于采集检测图像并发送至所述图像处理和分析平台；

所述图像处理和分析平台连接所述数据库系统，所述图像处理和分析平台用于对采集到的图形进行特征识别，并根据识别的特征判断待检测座椅是否有缺陷，所述数据库系统用于存储所述图像处理和分析平台的检测分析结果。

2.如权利要求1所述的基于机器视觉的座椅表面缺陷检测系统，其特征在于，所述机械臂为六自由度机械臂。

3.如权利要求1所述的基于机器视觉的座椅表面缺陷检测系统，其特征在于，所述图像采集装置无线连接所述图像处理和分析平台。

4.如权利要求1所述的基于机器视觉的座椅表面缺陷检测系统，其特征在于，所述图像处理和分析平台无线连接所述数据库系统。

5.如权利要求1所述的基于机器视觉的座椅表面缺陷检测系统，其特征在于，所述图像采集装置包括工业相机、镜头、AD转换装置和图像采集卡，所述镜头固定在所述工业相机上，所述工业相机和所述AD转换装置、图像采集卡进行电连接；

所述工业相机用于实时采集图像；

所述AD转换装置将采集到的图像转换为数字图像；

所述图像采集卡用于将所述数字图像并发送至所述图像处理和分析平台。

6.一种基于机器视觉的座椅表面缺陷检测方法，其特征在于，包括步骤

S1：向数据库系统中输入座椅模板信息；

S2：组装座椅，运输到机械臂下方；

S3：机械臂根据数控装置的路径规划和激光测距仪的距离反馈，带动图像采集装置分别对座椅的不同位置进行拍摄；

S4：将拍摄到的图像发送到图像处理和分析平台进行图像处理和分析；

S5：将图像处理和分析平台的分析结果存储至数据库系统中。

7.如权利要求6所述的基于机器视觉的座椅表面缺陷检测方法，其特征在于，步骤S4中图像处理和分析平台进行图像处理和分析的过程包括步骤

S41：对所述检测图像使用分类器算法，进行颜色识别与材质识别，然后与模板相匹配，判断座椅是否组装错误，蒙皮材料是否出错；

S42：对所述检测图像使用形态学处理和阈值选取进行线头位置、接缝位置识别；

S43：对所述检测图像进行特征提取、分析算法来进行判断线头缺陷和接缝缺陷；

若上述步骤有一步检测到缺陷，直接报错，产品不合格；

若上述步骤都合格，重置处理过的检测图像，进行一下步骤：

S44：对所述检测图像使用高斯混合建模、形态学、图像卷积组合算法进行纹理滤波，减少座椅表面纹理干扰；

S45：对所述检测图像进行阈值处理，再使用边缘检测算法，提取特征，与划痕、褶皱和油污特征模板进行匹配，判断座椅表面是否有划痕、褶皱或油污，生成检测分析结果。

8.如权利要求8所述的基于机器视觉的座椅表面缺陷检测方法，其特征在于，步骤S41包括步骤：通过数据库系统，对检测图像进行模板匹配，确定检测图像类型，再获取检测图像的颜色和特征，与模板数据进行对比，将获取数据与模板数据做数学运算，若模板数据与获取数据差小于一定范围，则产品皮料、组装合格。

9.如权利要求7所述的基于机器视觉的座椅表面缺陷检测方法，其特征在于，步骤S43包括步骤：对图像进行RGB到灰度图像转换，再进行阈值选择、外轮廓特征提取，然后使用区域分割对连接线进行提取，除去其它无关背景，再与连接线模板进行模板匹配，判断是否有线头，接缝是否有破损。

10.如权利要求6所述的基于机器视觉的座椅表面缺陷检测方法，其特征在于，步骤S5包括步骤：

S51：给所述检测分析结果添加存储标识信息生成待存储分析结果；

S52：将所述存储分析结果存储至数据库中。