CN114894807A - 一种工件表面橘皮的检测设备、方法及装置 - Google Patents

一种工件表面橘皮的检测设备、方法及装置 Download PDF

Info

Publication number
CN114894807A
CN114894807A CN202210529561.5A CN202210529561A CN114894807A CN 114894807 A CN114894807 A CN 114894807A CN 202210529561 A CN202210529561 A CN 202210529561A CN 114894807 A CN114894807 A CN 114894807A
Authority
CN
China
Prior art keywords
orange peel
workpiece
sample
detection model
detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210529561.5A
Other languages
English (en)
Inventor
沈志
俞裕生
王鹏
张富辉
沙瑞斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fuyao Glass Industry Group Co Ltd
Original Assignee
Fuyao Glass Industry Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuyao Glass Industry Group Co Ltd filed Critical Fuyao Glass Industry Group Co Ltd
Priority to CN202210529561.5A priority Critical patent/CN114894807A/zh
Publication of CN114894807A publication Critical patent/CN114894807A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84—Systems specially adapted for particular applications
    • G01N21/88—Investigating the presence of flaws or contamination
    • G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01—Arrangements or apparatus for facilitating the optical investigation
    • G01N21/13—Moving of cuvettes or solid samples to or from the investigating station
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
    • G01N35/02—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor using a plurality of sample containers moved by a conveyor system past one or more treatment or analysis stations
    • G01N35/025—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor using a plurality of sample containers moved by a conveyor system past one or more treatment or analysis stations having a carousel or turntable for reaction cells or cuvettes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30164—Workpiece; Machine component

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Chemical & Material Sciences (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Immunology (AREA)
  • Analytical Chemistry (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Mathematical Physics (AREA)
  • Biomedical Technology (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Signal Processing (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种工件表面橘皮的检测设备、方法及装置，设备包括：一计算机，一个或多个摄像头和一传送装置；计算机与工业摄像头通信连接，工业摄像头将拍摄到的视频数据发送至计算机；工业摄像头放置在传送装置的一端，传送装置用于将其上的待检测工件运送至工业摄像头的摄像范围内。本申请首先针对橘皮检测设备进行了改进，通过在传送装置的一端设置一个或多个工业摄像头，工业摄像头连接计算机，实现了利用传送装置运输原理将工件批量传送至工业摄像头前完成图片收集工作；其次，在计算机中内置预先训练好的神经网络模型，利用神经网络模型对拍摄的工件照片进行橘皮检测，极大地提升了检测速度，并且可以进行大规模地批量检测。

Description

一种工件表面橘皮的检测设备、方法及装置
技术领域
本申请属于检测技术领域，具体地讲，涉及一种工件表面橘皮的检测设备、方法及装置。
背景技术
在现有技术中，汽车外饰亮饰条在出厂之前需要对其表面进行橘皮检测，如果无橘皮情况则为合格品，如果只有轻微橘皮的工件需要通过特定的抛光处理满足工件的表面要求，而如果是有严重的橘皮则需要退膜重喷。
现有的橘皮检测仪器需人工手持橘皮检测仪在待检测零件表面检测，最后通过橘皮仪上显示的数值来判断汽车外饰亮饰条是否合格。这种人工持仪器检测的方式只能进行单个工件的检测，耗费时间长，工件量产后无法对所有的工件进行一一检测，不仅自动化程度低，而且人力成本高昂。
发明内容
本申请提供了一种工件表面橘皮的检测设备、方法及装置，以至少解决现有的手持橘皮检测仪无法进行大规模批量检测且检测效率低下的问题。
根据本申请的第一个方面，提供了一种工件表面橘皮的检测设备，包括：
一计算机，至少一工业摄像头和一传送装置；
计算机与工业摄像头通信连接，工业摄像头将拍摄到的视频数据发送至计算机；
工业摄像头放置在传送装置的一端，传送装置用于将其上的待检测工件运送至工业摄像头的摄像范围内。
在一实施例中，传送装置包括：一驱动设备，一传送轮组以及皮带；驱动设备与传送轮组连接，用于驱动传送轮组朝同一方向转动；皮带包覆在传送轮组上，当传送轮组在驱动设备的驱动下滚动时，带动皮带一起转动。
在一实施例中，驱动设备为电机。
根据本申请的第二个方面，还提供了一种工件表面橘皮的检测方法，应用在工件表面橘皮的检测设备上，包括：
根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据；
根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；橘皮检测模型为预先训练的。
在一实施例中，工件表面橘皮的检测方法还包括：
根据橘皮检测结果对工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
在一实施例中，橘皮检测模型的训练方法包括：
通过工业摄像头采集橘皮样件的样本图片；
对样本图片进行分类获得分类样本；
根据分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
在一实施例中，对样本图片进行分类获得分类样本，包括：
将样本图片输入训练好的目标检测模型获得部位分类样本。
在一实施例中，目标检测模型的训练方法包括：
将样本图片中样件的不同部位进行标签；
将带标签的样本图片输入目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
根据本申请的第三个方面，还提供了一种工件表面橘皮的检测装置，应用在工件表面橘皮的检测设备上，包括：
部位提取单元，用于根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据；
部位检测单元，用于根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；橘皮检测模型为预先训练的。
在一实施例中，工件表面橘皮的检测装置还包括：
质量分类单元，用于根据橘皮检测结果对工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
在一实施例中，橘皮检测模型的训练方法包括：
通过工业摄像头采集橘皮样件的样本图片；
对样本图片进行分类获得分类样本；
根据分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
在一实施例中，对样本图片进行分类获得分类样本，包括：
将样本图片输入训练好的目标检测模型获得部位分类样本；目标检测模型为YOLOv3检测系统。
在一实施例中，目标检测模型的训练方法包括：
将样本图片中样件的不同部位进行标签；
将带标签的样本图片输入目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
本申请首先针对橘皮检测设备进行了改进，通过在传送装置的一端设置若干工业摄像头，工业摄像头连接计算机，实现了利用传送装置运输原理将工件批量传送至工业摄像头前完成图片收集工作；其次，在计算机中内置预先训练好的神经网络模型，利用神经网络模型对拍摄的工件照片进行橘皮检测，极大地提升了检测速度，并且可以进行大规模地批量检测。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请提供的一种橘皮检测设备。
图2为本申请提供的一种橘皮检测方法的流程图。
图3为本申请实施例中将图片按照工件不同部位进行提取的示意图。
图4为本申请实施例中橘皮检测模型的训练方法的流程图。
图5为本申请实施例中目标检测模型的训练方法的流程图。
图6为本申请提供的一种工件表面橘皮的检测装置的结构框图。
图7为本申请实施例中一种电子设备的具体实施方式。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
现有的橘皮检测仪器需人工手持橘皮检测仪在待检测零件表面检测，最后通过橘皮仪上显示的数值来判断汽车外饰亮饰条是否合格。这种人工持仪器检测的方式只能进行单个工件的检测，耗费时间长，工件量产后无法对所有的工件进行一一检测，不仅自动化程度低，而且人力成本高昂。
为了解决这一问题，本申请提供了一种工件表面橘皮的检测设备，如图1所示，包括：
一计算机，若干个工业摄像头和一传送装置；
计算机与工业摄像头通信连接，工业摄像头将拍摄到的视频数据发送至计算机；
工业摄像头放置在传送装置的一端，传送装置用于将其上的待检测工件运送至工业摄像头的摄像范围内。
在一实施例中，传送装置包括：一驱动设备，一传送轮组以及皮带；驱动设备与传送轮组连接，用于驱动传送轮组朝同一方向转动；皮带包覆在传送轮组上，当传送轮组在驱动设备的驱动下滚动时，带动皮带一起转动。
在一实施例中，驱动设备为电机。
在一具体实施例中，当需要对大批量汽车外饰亮饰条(工件)进行橘皮检测时，将工件放置在传送装置一端的传送带上，在电机的驱动下，传送带将工件运输至传送装置另一端的工业摄像头的摄像范围内，工业摄像头拍摄下工件的图像数据后将其传输到后端连接的计算机中，由内置在计算机中的神经网络模型对图像数据进行识别，从而判断工件橘皮的严重程度。
图1所示的工件表面橘皮的检测设备通过在传送装置的一端设置若干工业摄像头，工业摄像头连接计算机，实现了利用传送装置运输原理将工件批量传送至工业摄像头前完成图片收集工作。
基于本申请提供的工件表面橘皮的检测设备，本申请还提供了一种工件表面橘皮的检测方法，应用在工件表面橘皮的检测设备上，如图2所示包括：
S201：根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据。
S202：根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测。橘皮检测模型为预先训练的。
在一具体实施例中，检测设备的工业摄像头拍摄传送装置上的待检测工件的图片，然后将图片发送至后端的计算机中，计算机将图片按照工件不同部位进行提取，如图3所示，将汽车外饰亮饰条整体分成左腿部、右腿部和头部等多个部位分类，摄像头的数量可以为一个或多个。除了按照左腿部、右腿部和头部进行分类之外，还可以按照工件的上半部分和下半部分进行分类，具体的部位分类不以此为限。然后根据不同的部位类型送入不同的橘皮检测模型中进行橘皮检测，例如，有专门用于检测左腿部的橘皮检测模型、专门用于检测右腿部的橘皮检测模型以及专门用于检测头部的检测模型。
图2所示的方法的执行主体为PC、计算机等设备，通过在橘皮检测设备的计算机中内置预先训练好的神经网络模型，利用神经网络模型对拍摄的工件照片进行橘皮检测，极大地提升了检测速度，并且可以进行大规模地批量检测。
在一实施例中，工件表面橘皮的检测方法还包括：
根据橘皮检测结果对工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
在一具体实施例中，将亮饰条的质量(橘皮严重程度)分为三类：无橘皮的工件为合格产品，具有轻微橘皮的工件需通过特定的抛光处理以满足工件的表面要求，具有严重橘皮的产品需退膜重喷。在一具体实施例中，只要有一个部位为轻微橘皮，则该工件就需要抛光处理。只要有一个部位出现严重橘皮，则该亮饰条需要退膜重喷。
在一实施例中，如图4所示，橘皮检测模型的训练方法包括：
S401：通过工业摄像头采集橘皮样件的样本图片。
S402：对样本图片进行分类获得分类样本。
S403：根据分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
在一实施例中，对样本图片进行分类获得分类样本，包括：
将样本图片输入训练好的目标检测模型获得部位分类样本；目标检测模型为YOLOv3检测系统。
在一实施例中，如图5所示，目标检测模型的训练方法包括：
S501：将样本图片中样件的不同部位进行标签。
S502：将带标签的样本图片输入目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
在一具体实施例中，首先可以通过人工喷漆制造亮饰条表面的橘皮缺陷来采集图片作为数据集或者收集工厂生产过程中实际产品的橘皮缺陷的图片作为数据集。然后使用工业摄像机采集亮饰条的图片。完成图片采集后，使用LabelImg将亮饰条的左腿部、右腿部和头部分别标上标签。将带标签的数据集输入目标检测模型如YOLOv3进行训练，训练后的目标检测模型可实现自动将亮饰条不同部位识别出来。然后将打死标签的数据集再次输入目标检测模型中，将亮饰条不同部位的图片检测出来并存入不同文件夹，再将每个文件夹中的图片根据橘皮严重程度进行分类，划分为“无橘皮”，“轻微橘皮”“严重橘皮”。
将所有文件夹按照文件夹的类型分别输入对应的卷积神经网络模型中进行训练，例如，将存有“头部”图像的文件夹输入到专门用于识别头部的卷积神经网络模型中进行训练，卷积神经网络模型可以为VGG19等。为保证现有数据集尽可能具有多样性，需对数据进行数据增强，包含旋转图片、翻转图片、调整图片亮度与对比度等。为保证图片能具有较为明显的特征，需对图片进行预处理，包含均值滤波处理等。神经网络包含各种成熟的模型如DenseNet121、ResNet152等。此处根据提取工件部位的数量训练不同个数的神经网络模型。
训练完成后，将亮饰条放入工作台，实现自动化图片采集处理与分类，具体地：
工作人员将工件放入传送装置的传送带上，传送带将工件运送至工业摄像头一端，摄像头采集工件的图片，后台计算机从工件图片中检测工件不同部位的图片，并将不同部位的图片分别送入不同的神经网络模型中进行橘皮严重程度检测。
在本申请的另一实施例中，还可以将图片的预处理方式变更为中值滤波等方式，本申请对图片的预处理方式不作限定。
另外，本申请中的目标检测模型还可以为YOLOv4，Fast R-CNN等系统，本申请提供的橘皮检测设备、方法及装置不仅可以应用于汽车亮饰条的检测，还可以用于水切亮饰条、上框饰条的检测中。
本申请提供的橘皮检测设备、方法和装置不仅解决了现有的橘皮检测仪无法进行大批量检测的问题，而且还具备高度自动化的特质，节约了人工成本。
基于同一发明构思，本申请实施例还提供了一种工件表面橘皮的检测装置，可以用于实现上述实施例中所描述的方法，如下面实施例所述。由于该工件表面橘皮的检测装置解决问题的原理与工件表面橘皮的检测方法相似，因此工件表面橘皮的检测装置的实施可以参见商户协议签约存储方法的实施，重复之处不再赘述。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的系统较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
本申请还提供了一种工件表面橘皮的检测装置，应用在工件表面橘皮的检测设备上，如图6所示，包括：
局部提取单元601，用于根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据；
局部检测单元602，用于根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；橘皮检测模型为预先训练的。
在一实施例中，工件表面橘皮的检测装置还包括：
质量分类单元，用于根据橘皮检测结果对工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
在一实施例中，橘皮检测模型的训练方法包括：
通过工业摄像头采集橘皮样件的样本图片；
对样本图片进行分类获得分类样本；
根据分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
在一实施例中，对样本图片进行分类获得分类样本，包括：
将样本图片输入训练好的目标检测模型获得部位分类样本；目标检测模型为YOLOv3检测系统。
在一实施例中，目标检测模型的训练方法包括：
将样本图片中样件的不同部位进行标签；
将带标签的样本图片输入目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
本申请首先针对橘皮检测设备进行了改进，通过在传送装置的一端设置若干工业摄像头，工业摄像头连接计算机，实现了利用传送装置运输原理将工件批量传送至工业摄像头前完成图片收集工作；其次，在计算机中内置预先训练好的神经网络模型，利用神经网络模型对拍摄的工件照片进行橘皮检测，极大地提升了检测速度，并且可以进行大规模地批量检测。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
本申请的实施例还提供能够实现上述实施例中的方法中全部步骤的一种电子设备的具体实施方式，参见图7，所述电子设备具体包括如下内容：
处理器(processor)701、内存702、通信接口(Communications Interface)703、总线704和非易失性存储器705；
其中，所述处理器701、内存702、通信接口703通过所述总线704完成相互间的通信；
所述处理器701用于调用所述内存702和非易失性存储器705中的计算机程序，所述处理器执行所述计算机程序时实现上述实施例中的方法中的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
S201：根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据。
S202：根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测。橘皮检测模型为预先训练的。
本申请的实施例还提供能够实现上述实施例中的方法中全部步骤的一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中的方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
S201：根据获取的工件表面图像数据按照预设的规则进行工件不同部位的提取，获得部位图像数据。
S202：根据部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测。橘皮检测模型为预先训练的。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于硬件+程序类实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。虽然本说明书实施例提供了如实施例或流程图所述的方法操作步骤，但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的装置或终端产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境，甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下，并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。为了描述的方便，描述以上装置时以功能分为各种模块分别描述。当然，在实施本说明书实施例时可以把各模块的功能在同一个或多个软件和/或硬件中实现，也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
本领域技术人员应明白，本说明书的实施例可提供为方法、系统或计算机程序产品。因此，本说明书实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本说明书实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本说明书实施例的至少一个实施例或示例中。
在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。以上所述仅为本说明书实施例的实施例而已，并不用于限制本说明书实施例。对于本领域技术人员来说，本说明书实施例可以有各种更改和变化。凡在本说明书实施例的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本说明书实施例的权利要求范围之内。

Claims (18)

1.一种工件表面橘皮的检测设备，其特征在于，包括：计算机，至少一工业摄像头和一传送装置；
所述传送装置用于将待检测工件传送至所述工业摄像头的摄像范围内；
所述工业摄像头，设置在所述传送装置的一端，用于采集所述待检测工件的图片；
所述计算机连接所述工业摄像头，用于对所述待检测工件的图片进行橘皮检测。
2.根据权利要求1所述的工件表面橘皮的检测设备，其特征在于，所述计算机包括：
数据接收端口，用于获取工件表面图像数据；
提取模块，用于按照预设的图像提取规则从所述工件表面图像数据中对工件不同部位进行提取，获得工件的部位图像数据；
橘皮检测模块，用于根据所述部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；所述橘皮检测模型是利用分类后的橘皮样件的样本图片训练得到的。
3.根据权利要求1所述的工件表面橘皮的检测设备，其特征在于，所述传送装置包括：一驱动设备，一传送轮组以及皮带；所述驱动设备与传送轮组连接，用于驱动传送轮组转动；所述皮带包覆在所述传送轮组上，当所述传送轮组在所述驱动设备的驱动下滚动时，带动所述皮带一起转动。
4.根据权利要求1所述的工件表面橘皮的检测设备，其特征在于，所述驱动设备为电机。
5.一种工件表面橘皮的检测方法，应用在工件表面橘皮的检测设备上，其特征在于，包括：
获取工件表面图像数据；
按照预设的图像提取规则从所述工件表面图像数据中对工件不同部位进行提取，获得工件的部位图像数据；
根据所述部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；所述橘皮检测模型是利用分类后的橘皮样件的样本图片训练得到的。
6.根据权利要求5所述的工件表面橘皮的检测方法，其特征在于，还包括：
根据橘皮检测结果对所述工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
7.根据权利要求5所述的工件表面橘皮检测方法，其特征在于，所述橘皮检测模型的训练方法包括：
采集橘皮样件的样本图片；
对样本图片进行分类获得分类样本；
根据所述分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
8.根据权利要求7所述的工件表面橘皮检测方法，其特征在于，所述对样本图片进行分类获得分类样本，包括：
将所述样本图片输入训练好的目标检测模型获得部位分类样本。
9.根据权利要求8所述的工件表面橘皮检测方法，其特征在于，所述目标检测模型的训练方法包括：
将所述样本图片中样件的不同部位添加标签；
将带标签的所述样本图片输入所述目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
10.根据权利要求7所述的工件表面橘皮检测方法，其特征在于，所述根据所述分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型，包括：
判断所述分类样本的橘皮严重程度，并将所述分类样本与橘皮严重程度进行匹配；
将所述分类样本与对应的橘皮严重程度输入预先建立的神经网络模型进行训练获得橘皮检测模型。
11.一种工件表面橘皮的检测装置，应用在工件表面橘皮的检测设备上，其特征在于，包括：
部位提取单元，用于获取工件表面图像数据，按照预设的图像提取规则从所述工件表面图像数据中对工件不同部位进行提取，获得工件的部位图像数据；
部位检测单元，用于根据所述部位图像数据所属的部位分类匹配对应的橘皮检测模型对工件进行橘皮检测；所述橘皮检测模型是利用分类后的橘皮样件的样本图片训练得到的。
12.根据权利要求11所述的工件表面橘皮的检测装置，其特征在于，还包括：
质量分类单元，用于根据橘皮检测结果对所述工件进行质量分类，并根据质量分类结果决定是否进行抛光或返工。
13.根据权利要求11所述的工件表面橘皮检测装置，其特征在于，所述橘皮检测模型的训练方法包括：
通过工业摄像头采集橘皮样件的样本图片；
对样本图片进行分类获得分类样本；
根据所述分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型。
14.根据权利要求13所述的工件表面橘皮检测装置，其特征在于，所述对样本图片进行分类获得分类样本，包括：
将所述样本图片输入训练好的目标检测模型获得部位分类样本。
15.根据权利要求13所述的工件表面橘皮检测装置，其特征在于，所述目标检测模型的训练方法包括：
将所述样本图片中样件的不同部位进行标签；
将带标签的所述样本图片输入所述目标检测模型进行训练，训练后的目标检测模型可以识别图片中工件的部位分类。
16.根据权利要求13所述的工件表面橘皮检测装置，其特征在于，所述根据所述分类样本对预先建立的卷积神经网络模型进行训练获得橘皮检测模型，包括：
判断所述分类样本的橘皮严重程度，并将所述分类样本与橘皮严重程度进行匹配；
将所述分类样本与对应的橘皮严重程度输入预先建立的神经网络模型进行训练获得橘皮检测模型。
17.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求5至10中任一项所述工件表面橘皮的检测方法。
18.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求5至10中任一项所述工件表面橘皮的检测方法。
CN202210529561.5A 2022-05-16 2022-05-16 一种工件表面橘皮的检测设备、方法及装置 Pending CN114894807A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210529561.5A CN114894807A (zh) 2022-05-16 2022-05-16 一种工件表面橘皮的检测设备、方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210529561.5A CN114894807A (zh) 2022-05-16 2022-05-16 一种工件表面橘皮的检测设备、方法及装置

Publications (1)

Publication Number Publication Date
CN114894807A true CN114894807A (zh) 2022-08-12

Family

ID=82723011

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210529561.5A Pending CN114894807A (zh) 2022-05-16 2022-05-16 一种工件表面橘皮的检测设备、方法及装置

Country Status (1)

Country Link
CN (1) CN114894807A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013091370A1 (zh) * 2011-12-22 2013-06-27 中国科学院自动化研究所 基于三维深度图像信息的并行统计学习人体部位检测方法
CN110009630A (zh) * 2019-04-15 2019-07-12 中国医学科学院皮肤病医院 一种基于深度学习的皮肤目标区域自动检测方法
CN112748120A (zh) * 2020-12-29 2021-05-04 中国联合网络通信集团有限公司 缺陷检测系统及方法、装置、设备和存储介质
WO2021217852A1 (zh) * 2020-04-30 2021-11-04 平安科技（深圳）有限公司 损伤检测方法、装置、电子设备及介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013091370A1 (zh) * 2011-12-22 2013-06-27 中国科学院自动化研究所 基于三维深度图像信息的并行统计学习人体部位检测方法
CN110009630A (zh) * 2019-04-15 2019-07-12 中国医学科学院皮肤病医院 一种基于深度学习的皮肤目标区域自动检测方法
WO2021217852A1 (zh) * 2020-04-30 2021-11-04 平安科技（深圳）有限公司 损伤检测方法、装置、电子设备及介质
CN112748120A (zh) * 2020-12-29 2021-05-04 中国联合网络通信集团有限公司 缺陷检测系统及方法、装置、设备和存储介质

Similar Documents

Publication Publication Date Title
CN109724984B (zh) 一种基于深度学习算法的缺陷检测识别装置和方法
Braglia et al. SMED enhanced with 5-Whys Analysis to improve set-upreduction programs: the SWAN approach
CN102253048B (zh) 可用于多种产品检测的机器视觉检测方法及系统
CN108364311A (zh) 一种金属部件自动定位方法及终端设备
CN111311487B (zh) 一种光伏组件图像的快速拼接方法及系统
CN111951232A (zh) 一种金属粉末注射成型外观缺陷检测方法及系统
CN105426899A (zh) 车辆识别方法、装置和客户端
CN104952754A (zh) 基于机器视觉的镀膜后硅片分选方法
CN111899219A (zh) 一种输电线路机巡的图像识别方法及系统
CN113627293A (zh) 混合物搅拌均匀性检测方法、装置及搅拌设备
CN204148152U (zh) 大型多品种混搭内衣自动化分拣生产线
CN103577252A (zh) 一种软件分类的方法及装置
CN117434082A (zh) 用于硅胶制品生产线的质量检测方法及其系统
CN116251712A (zh) 一种自动化组装生产线及控制方法
CN114359155A (zh) 一种覆膜方法及系统
CN114618788A (zh) 基于视觉检测的手套分拣装置及方法
CN114894807A (zh) 一种工件表面橘皮的检测设备、方法及装置
CN113487538B (zh) 一种多目标分割缺陷检测方法、装置及其计算机存储介质
CN117055249B (zh) 一种液晶显示屏组装加工线抽样质检分析系统
CN111486790A (zh) 一种电池全尺寸检测方法与装置
CN114677597B (zh) 基于改进YOLOv5网络的齿轮缺陷视觉检测方法及系统
CN111659633A (zh) 工装产品分类系统、方法
CN108957384B (zh) 一种周转箱及电能计量设备方向判别方法与装置
CN116681995A (zh) 基于grpc的多模型融合方案在显示屏检测中的应用
CN109345519A (zh) 基于深度学习yolo算法的线束连接器加工型号检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination