CN110298819A - 一种目标对象的质检方法及边缘计算设备 - Google Patents
一种目标对象的质检方法及边缘计算设备 Download PDFInfo
- Publication number
- CN110298819A CN110298819A CN201910432190.7A CN201910432190A CN110298819A CN 110298819 A CN110298819 A CN 110298819A CN 201910432190 A CN201910432190 A CN 201910432190A CN 110298819 A CN110298819 A CN 110298819A
- Authority
- CN
- China
- Prior art keywords
- target object
- edge calculations
- characteristic
- mathematical model
- video frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004364 calculation method Methods 0.000 title claims abstract description 125
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000007547 defect Effects 0.000 claims abstract description 87
- 238000013178 mathematical model Methods 0.000 claims abstract description 76
- 238000007689 inspection Methods 0.000 claims abstract description 18
- 238000012549 training Methods 0.000 claims description 45
- 238000004519 manufacturing process Methods 0.000 claims description 16
- 230000015654 memory Effects 0.000 claims description 14
- 238000012937 correction Methods 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 6
- 238000012790 confirmation Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 2
- 241000406668 Loxodonta cyclotis Species 0.000 claims 2
- 230000007306 turnover Effects 0.000 abstract 1
- 238000001514 detection method Methods 0.000 description 12
- 238000004422 calculation algorithm Methods 0.000 description 11
- 238000013527 convolutional neural network Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000002950 deficient Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000006872 improvement Effects 0.000 description 2
- 241000256844 Apis mellifera Species 0.000 description 1
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical group [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000011038 discontinuous diafiltration by volume reduction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
- G05B19/41875—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by quality surveillance of production
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
- G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
- G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/06—Recognition of objects for industrial automation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Biodiversity & Conservation Biology (AREA)
- Biomedical Technology (AREA)
- Evolutionary Biology (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Probability & Statistics with Applications (AREA)
- Computational Linguistics (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种目标对象的质检方法及边缘计算设备，其中，所述方法包括：边缘计算设备接收目标对象当前待质检的目标图像；基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。本申请提供的技术方案，能够在节省人工成本的情况下，提高目标对象的质检效率。
Description
技术领域
本发明涉及互联网技术领域，特别涉及一种目标对象的质检方法及边缘计算设备。
背景技术
随着工业制造水平的不断提高，用户和生产企业对产品质量的要求越来越高。产品除了要求满足使用性能外，还需要有良好的表面质量。但是，在制造产品的过程中，表面缺陷的产生往往是不可避免的。表面缺陷是产品表面出现物理或化学性质不均匀的局部区域，如表面的划痕、斑点、孔洞、褶皱等等。表面缺陷不仅影响产品的美观和舒适度，而且一般也会对其使用性能带来不良影响，所以生产企业需要对产品的表面缺陷进行检测，从而有效控制产品质量。
目前，传统的检测产品表面缺陷的方法是人工检测，然而该方法会带来抽检率低、准确性不高、实时性差、效率低、劳动强度大、受人工经验和主观因素的影响大等不利因素，因此，目前亟需一种更加有效的产品质检方法。
发明内容
本申请的目的在于提供一种目标对象的质检方法及边缘计算设备，能够在节省人工成本的情况下，提高目标对象的质检效率。
为实现上述目的，本申请一方面提供一种目标对象的质检方法，所述方法包括：边缘计算设备接收目标对象当前待质检的目标图像；基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
为实现上述目的，本申请另一方面还提供一种边缘计算设备，所述边缘计算设备包括：目标图像接收单元，用于接收目标对象当前待质检的目标图像；缺陷识别单元，用于基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
为实现上述目的，本申请另一方面还提供一种边缘计算设备，所述边缘计算设备包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的目标对象的质检方法。
由上可见，本申请提供的技术方案，可以采用机器学习的方法，针对目标对象的大量样本进行训练，从而得到能够识别缺陷的数理模型，后续便可以利用该数理模型来检测当前生产的目标对象是否存在缺陷。具体地，边缘计算设备可以在本地存储完成训练的数理模型，并可以利用该数理模型，自动地针对目标对象当前待质检的目标图像进行检测，从而判断该目标图像中的目标对象是否存在缺陷。由上可见，本申请利用机器学习的方法训练得到数理模型后，能够自动地对目标对象的缺陷进行检测，从而节省了大量的人工成本，并且具备较高的检测效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施方式中产品线系统的结构示意图；
图2是本发明实施方式中目标对象的质检方法示意图；
图3是本发明实施方式中边缘计算设备的功能模块示意图；
图4是本发明实施方式中边缘计算设备的结构示意图；
图5是本发明实施方式中计算机终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
本申请提供一种目标对象的质检方法，所述目标对象可以是产品线上生产的任意产品。该方法可以应用于如图1所示的产品线系统中，在所述产品线系统中，在每个产品的生产台上可以部署多个具备摄像功能的图像采集设备。该图像采集设备可以实时拍摄完成制作的产品，从而得到产品的视频流数据。在所述产品线系统中，还可以包括边缘计算平台和多个边缘计算设备。其中，所述边缘计算设备可以与一个或者多个图像采集设备相连，从而可以获取所述一个或者多个图像采集设备拍摄的视频流数据。所述边缘计算设备一方面可以根据获取的视频流数据生成产品的图像样本，并可以将图像样本上传至边缘计算平台，从而通过边缘计算平台进行数理模型的训练过程。另一方面，边缘计算设备还可以根据训练得到的数理模型，对产品进行缺陷检测。在实际应用中，边缘计算设备的计算能力通常会低于边缘计算平台，因此，在边缘计算设备中可以完成缺陷检测、视频流数据预处理等简单的计算过程，而在边缘计算平台中则可以进行数理模型训练等复杂的计算过程。
请参阅图2，本申请提供的目标对象的质检方法，可以由上述的边缘计算设备执行，并且该方法可以包括以下步骤。
S1：边缘计算设备接收目标对象当前待质检的目标图像。
在本实施方式中，图像采集设备与所述边缘计算设备之间可以通过有线或者无线的方式进行通信。例如，图像采集设备与所述边缘计算设备之间可以通过网线连接，从而通过网线传输图像采集设备拍摄的视频流数据。此外，图像采集设备与所述边缘计算设备之间也可以通过WiFi、蓝牙、ZigBee(紫蜂)、移动通信(2G/3G/4G/5G)等无线通信方式进行数据传输。在所述边缘计算设备中，可以预先安装视频流读取工具，并可以在该视频流读取工具中配置图像采集设备的通信地址。这样，通过该视频流读取工具，边缘计算设备可以实时获取图像采集设备针对当前的目标对象拍摄的视频流数据。在一个具体的应用示例中，所述视频流读取工具可以是ffmpeg工具，并且边缘计算设备与图像采集设备之间可以遵循实时流传输协议(Real Time Streaming Protocol，RTSP)进行视频流数据的传输。
在本实施方式中，所述视频流数据中可以包含不同类型的视频帧。例如，所述视频流数据中可以包括I帧(关键帧)、P帧(前向预测编码帧)以及B帧(双向预测内插编码帧)。其中，I帧可以完整保留视频画面的内容，而P帧通常只会保留与I帧的差别，B帧只会保留与前后视频帧之间的差别。鉴于此，I帧可以独立进行解码，并在解码后能够还原出视频画面的内容。而P帧和B帧则无法进行独立解码，而是需要与I帧或者前后视频帧共同解码，才能还原出视频画面的内容。因此，当边缘计算设备获取到目标对象的视频流数据后，可以从所述视频流数据中识别出能够独立解码并还原出视频画面内容的视频帧，这一类的视频帧可以作为目标对象的有效视频帧。
在一个实施方式中，视频流数据中不同类型的视频帧可以通过标志位来识别。具体地，在视频帧的头部信息中，可以包含用于表征视频帧类型的字段。举例来说，该字段可以是picture_coding_type字段。通过识别该字段中携带的标志位，便可以确定出当前视频帧的类型。这样，边缘计算设备可以遍历所述视频流数据中的各个视频帧，并识别各个所述视频帧的头部信息中的指定字段，该指定字段便可以是上述的picture_coding_type字段。若所述指定字段中携带的标志位表征所述视频帧为关键帧，则可以将所述视频帧作为所述目标对象的有效视频帧。这些有效视频帧经过解码之后，都可以完整地展示视频帧的内容，从而可以针对这些有效视频帧进行产品的缺陷检测。
在本实施方式中，从视频流数据中识别出的有效视频帧的数据量通常较大，如果直接将识别出的有效视频帧上传至边缘计算平台进行数理模型的训练，一方面会导致数据传输的带宽消耗量较大，另一方面也会导致数理模型的训练过程中所需处理的数据量较大。鉴于此，在本实施方式中，边缘计算设备可以对识别出的有效视频帧进行数据过滤的处理。具体地，针对目标对象拍摄的图像中，背景往往是相同的，因此在识别出所述有效视频帧后，可以将所述有效视频帧中的背景滤除。在实际应用中，目标对象所处的背景可以是纯色背景，并且背景色与目标对象的颜色以及目标对象的表面可能出现的缺陷的颜色均不相同。例如，目标对象的颜色为银色，目标对象的表面可能出现的缺陷的颜色为黑色，那么背景色可以采用绿色。这样，可以在边缘计算设备中预先录入目标对象所处背景的背景色，当边缘计算设备识别出有效视频帧后，可以读取所述背景色，并在所述有效视频帧展示的视频画面中，将所述背景色滤除。这样，边缘计算设备便可以将滤除了背景色的视频画面对应的数据作为从所述有效视频帧中提取的特征数据，该特征数据的数据量相比有效视频帧的数据量有所减少，从而可以减少传输过程和训练过程的数据量。
在另一个实施方式中，边缘计算设备还可以采用目标检测算法，从所述有效视频帧展示的视频画面中，识别出所述目标对象，这样也能够滤除有效视频帧中的背景，从而得到目标对象的特征数据。在实际应用中，边缘计算设备可以从众多的目标检测算法中选择一种来进行目标对象的识别，这些目标检测算法可以包括R-CNN(Regions with CNN，区域相关的卷积神经网络)、Fast R-CNN(快速R-CNN)、ION(Inside-Outside Net，内外网络)、HyperNet(超网络)等算法。
当然，在实际应用中，边缘计算设备还可以采用其它的图像压缩算法，对有效视频帧的数据进行压缩，并将压缩后的有效视频帧上传至边缘计算平台，本申请对减少有效视频帧的数据量的算法并不做限定，任何能够实现数据量减少的算法都包含在本申请的保护范围内。
在本实施方式中，在提取出所述目标对象的特征数据后，边缘计算设备可以将特征数据上传至边缘计算平台，以通过边缘计算平台训练目标对象的数理模型。具体地，边缘计算设备上传的特征数据中，可以包含各种各样的缺陷。在数理模型的训练阶段，质检人员可以在边缘计算平台中对各个特征数据进行人工标注，从而标注出特征数据中包含的缺陷类型以及缺陷位置。这样，特征数据的人工标注结果可以被所述边缘计算平台接收。根据人工标注结果表征的缺陷类型，边缘计算平台可以对特征数据进行分类，从而形成训练样本集。在该训练样本集中，针对每种不同的缺陷类型，都可以具备大量的特征数据的样本。后续，可以将该训练样本集输入预设的数理模型，从而对该预设的数理模型进行训练。
在实际应用中，所述数理模型可以是现有的分类器。例如，所述数理模型可以是K-近邻分类器、朴素贝叶斯分类器、支持向量机分类器、决策树分类器、卷积神经网络分类器等。在训练时，可以将训练样本输入该数理模型中，数理模型的输出结果可以是一个概率向量。举例来说，训练样本中共包含了13中不同的缺陷类型，那么数理模型输出的结果可以是包含13个概率值的概率向量，其中的每个概率值可以表示属于某一种缺陷类型的概率。在判断数理模型的输出结果是否正确时，可以将最大的概率值对应的缺陷类型作为根据输入的训练样本预测得到的缺陷类型。在训练初期，预测得到的缺陷类型可能与输入的训练样本实际表征的缺陷类型不一致，此时则需要对数理模型进行多次校正，直至训练后的数理模型对输入的特征数据处理得到的缺陷识别结果与所述输入的特征数据的人工标注结果一致。这样，经过大量训练样本的不断训练，可以对数理模型中的参数进行反复校正，从而使得数理模型能够正确地预测出训练样本中包含的缺陷类型。
S5：基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
在本实施方式中，边缘计算平台完成数理模型的训练后，可以将数理模型反馈给所述边缘计算设备。所述边缘计算设备可以在本地存储该数理模型，这样，边缘计算设备在获取到当前待质检的目标图像后，可以将该目标图像输入本地存储的数理模型，并根据所述数理模型的输出结果判断所述目标对象在所述目标图像中是否存在缺陷。
在实际应用中，所述数理模型可以包括模型算法、模型元数据以及模型权重参数。其中，所述模型算法可以与数理模型的类型相匹配，例如，对于卷积神经网络分类器而言，采用的算法就是卷积神经网络算法。所述模型元数据，可以指数理模型训练过程中使用的训练样本集。在实际应用中，所述训练样本集可以包括特征数据的数据集以及各种缺陷的缺陷数据集。所述模型权重参数可以作为判定缺陷的阈值。具体地，在判断所述目标对象在所述目标图像中是否存在缺陷时，可以将所述概率向量中的任一目标概率值与所述模型权重参数进行比较，若所述目标概率值大于或者等于所述模型权重参数，可以将所述目标概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷，举例来说，数理模型针对输入的目标图像，输出结果为包含13个概率值的概率向量。然后，边缘计算设备可以将这13个概率值分别与所述模型权重参数进行比较，如果在这13个概率值中，只有表征黑线的概率值大于该模型权重参数，那么就表明通过数理模型的检测，该目标对象在所述目标图像中存在的缺陷类型就是黑线。此外，如果概率向量中的各个概率值均小于该模型权重参数，则表明目标图像中不存在缺陷。通过这种检测方式，如果在概率向量中同时存在多个概率值都大于或者等于该模型权重参数，那么就表明目标对象在目标图像中存在两种及两种以上的缺陷。
在另一个实施方式中，边缘计算设备可能仅仅需要判定目标对象在目标图像中是否存在缺陷，而并不关心存在几种缺陷，在这种情况下，边缘计算设备可以在所述概率向量包含的多个概率值中确定出最大概率值，并将所述最大概率值与所述模型权重参数进行比较，若所述最大概率值大于或者等于所述模型权重参数，则可以将所述最大概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷。如果最大概率值小于该模型权重参数，则表明目标图像中不存在缺陷。
在本实施方式中，边缘计算设备在判定所述目标对象在所述目标图像中存在缺陷时，表明目标对象的生产线可能存在工艺故障，此时，边缘计算设备可以通过OT(OperationTechnology，操作技术)层，向生产车间的工控设备发送停止生产指令。这样，工控设备便可以暂停所述目标对象的生产线。同时，边缘计算设备还可以发出报警提示信息，并在所述目标图像中标注出所述缺陷所处的位置，以提醒质检人员来对目标图像中的缺陷进行复检。在实际应用中，所述报警提示信息可以是声光信息，也可以是在电子看板上展示的文字或者图形信息。质检人员在观察目标图像中标注出的缺陷位置后，如果发现确实存在缺陷，则可以对目标对象的生产线进行检修。而如果质检人员发现目标图像中并不存在缺陷，或者缺陷识别的类型有误，那么便可以向边缘计算设备反馈误报确认指令，表示边缘计算设备针对目标图像的识别结果是错误的。在这种情况下，表明边缘计算设备中的数理模型可能存在识别误差。此时，边缘计算设备可以将所述目标图像上传至所述边缘计算平台。这样，边缘计算平台可以按照上述的方式，生成该目标图像的人工标注结果，并可以利用该人工标注结果对完成训练的数理模型进行校正，使得校正后的数理模型能够正确地根据该目标图像判断目标对象是否存在缺陷。最终，边缘计算平台可以将完成校正的数理模型发送至边缘计算设备。这样，边缘计算设备可以接收所述边缘计算平台反馈的校正后的数理模型，并利用所述校正后的数理模型替换本地存储的数理模型，后续便可以利用校正后的数理模型进行缺陷识别。
在本实施方式中，针对不同的目标对象，可以训练不同的数理模型。这样，在边缘计算设备本地，也可以存储不同的数理模型。当边缘计算设备获取到目标对象的目标图像时，可以先识别目标对象的类型，并可以选用与所述目标对象的类型相匹配的数理模型，对所述目标图像进行检测。
本申请还提供一种边缘计算设备，请参阅图3，所述边缘计算设备包括：
目标图像接收单元，用于接收目标对象当前待质检的目标图像；
缺陷识别单元，用于基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
在一个实施方式中，所述边缘计算设备还包括：
特征数据提取单元，用于从所述目标对象的视频流数据中提取所述目标对象的特征数据，将所述特征数据上传至边缘计算平台，边缘计算平台根据接收的特征数据训练目标对象的数理模型。
在一个实施方式中，所述特征数据提取单元包括：
有效视频帧识别模块，用于从所述视频流数据中识别所述目标对象的有效视频帧，并从所述有效视频帧中提取所述目标对象的特征数据。
在一个实施方式中，所述有效视频帧识别模块包括：
指定字段识别模块，用于遍历所述视频流数据中的各个视频帧，并识别各个所述视频帧的头部信息中的指定字段；
关键帧识别模块，用于若所述指定字段中携带的标志位表征所述视频帧为关键帧，将所述视频帧作为所述目标对象的有效视频帧。
在一个实施方式中，所述有效视频帧识别模块包括：
背景过滤模块，用于读取所述目标对象所处背景的背景色，并在所述有效视频帧展示的视频画面中，将所述背景色滤除；
特征数据确定模块，用于将滤除了背景色的视频画面对应的数据作为从所述有效视频帧中提取的所述目标对象的特征数据。
在一个实施方式中，所述边缘计算平台包括：
标注结果接收单元，用于接收所述特征数据的人工标注结果，所述人工标注结果至少用于表征所述特征数据中存在的缺陷类型；
训练单元，用于按照缺陷类型对所述特征数据进行分类，形成训练样本集，并利用所述训练样本集对预设的数理模型进行训练，以使得训练后的数理模型对输入的特征数据处理得到的缺陷识别结果与所述输入的特征数据的人工标注结果一致。
在一个实施方式中，完成训练的所述数理模型中至少包括模型权重参数，所述模型权重参数作为判定缺陷的阈值，并且所述数理模型的输出结果为包含多个概率值的概率向量，其中，不同的概率值对应不同的缺陷类型。
在一个实施方式中，所述质检单元包括：
遍历比较模块，用于将所述概率向量中的任一目标概率值与所述模型权重参数进行比较，若所述目标概率值大于或者等于所述模型权重参数，将所述目标概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷。
在一个实施方式中，所述质检单元包括：
最大概率值比较模块，用于在所述概率向量包含的多个概率值中确定出最大概率值，并将所述最大概率值与所述模型权重参数进行比较，若所述最大概率值大于或者等于所述模型权重参数，将所述最大概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷。
在一个实施方式中，所述边缘计算设备还包括：
停工指令发送单元，用于在判定所述目标对象在所述目标图像中存在缺陷时，向工控设备发送停止生产指令，以使得所述工控设备暂停所述目标对象的生产线；
报警提示单元，用于发出报警提示信息，并在所述目标图像中标注出所述缺陷所处的位置。
在一个实施方式中，所述边缘计算设备还包括：
目标图像上传单元，用于若接收到针对所述报警提示信息的误报确认指令，将所述目标图像上传至所述边缘计算平台，以使得所述边缘计算平台根据所述目标图像对所述数理模型进行校正；
模型替换单元，用于接收所述边缘计算平台反馈的校正后的数理模型，并利用所述校正后的数理模型替换本地存储的数理模型。
请参阅图4，本申请还提供一种边缘计算设备，所述边缘计算设备包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的目标对象的质检方法。
请参阅图5，在本申请中，上述实施例中的技术方案均可以应用于如图5所示的计算机终端10上。计算机终端10可以包括一个或多个(图中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输模块106。本领域普通技术人员可以理解，图5所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图5中所示更多或者更少的组件，或者具有与图5所示不同的配置。
存储器104可用于存储应用软件的软件程序以及模块，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
由上可见，本申请提供的技术方案，可以采用机器学习的方法，针对目标对象的大量样本进行训练，从而得到能够识别缺陷的数理模型，后续便可以利用该数理模型来检测当前生产的目标对象是否存在缺陷。具体地，边缘计算设备可以实时获取产品线中针对目标对象拍摄的视频流数据，该视频流数据中可以包括各个视频帧的数据。在实际应用中，并非每一个视频帧都能单独展示目标对象的图像。鉴于此，边缘计算设备在获取到目标对象的视频帧数据后，可以从中识别出能够单独展示目标对象的图像的有效视频帧，并可以从识别出的有效视频帧中提取出目标对象的特征数据后，将特征数据上传至边缘计算平台。边缘计算平台在接收到目标对象大量的特征数据后，可以通过机器学习的方法，利用这些特征数据训练目标对象的数理模型。在完成训练之后，边缘计算平台可以将完成训练的数理模型发送至边缘计算设备。这样，边缘计算设备可以在本地存储完成训练的数理模型，并可以利用该数理模型，自动地针对目标对象当前待质检的目标图像进行检测，从而判断该目标图像中的目标对象是否存在缺陷。由上可见，本申请利用机器学习的方法训练得到数理模型后，能够自动地对目标对象的缺陷进行检测，从而节省了大量的人工成本，并且具备较高的检测效率。
本说明书中的各个实施方式均采用递进的方式描述，各个实施方式之间相同相似的部分互相参见即可，每个实施方式重点说明的都是与其他实施方式的不同之处。尤其，针对边缘计算设备的实施方式来说，均可以参照前述方法的实施方式的介绍对照解释。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (19)
1.一种目标对象的质检方法，其特征在于，所述方法包括：
边缘计算设备接收目标对象当前待质检的目标图像；
基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
2.根据权利要求1所述的方法，其特征在于，所述数理模型为依据所述目标对象的视频流数据训练得到，所述训练的方法包括以下步骤：
从所述目标对象的视频流数据中提取所述目标对象的特征数据，将所述特征数据上传至边缘计算平台，边缘计算平台根据接收的特征数据训练目标对象的数理模型。
3.根据权利要求2所述的方法，其特征在于，从所述目标对象的视频流数据中提取所述目标对象的特征数据包括：
从所述视频流数据中识别所述目标对象的有效视频帧，并从所述有效视频帧中提取所述目标对象的特征数据。
4.根据权利要求3所述的方法，其特征在于，从所述视频流数据中识别所述目标对象的有效视频帧包括：
遍历所述视频流数据中的各个视频帧，并识别各个所述视频帧的头部信息中的指定字段；若所述指定字段中携带的标志位表征所述视频帧为关键帧，将所述视频帧作为所述目标对象的有效视频帧。
5.根据权利要求3所述的方法，其特征在于，从所述有效视频帧中提取所述目标对象的特征数据包括：
读取所述目标对象所处背景的背景色，并在所述有效视频帧展示的视频画面中，将所述背景色滤除；
将滤除了背景色的视频画面对应的数据作为从所述有效视频帧中提取的所述目标对象的特征数据。
6.根据权利要求2所述的方法，其特征在于，所述数理模型由所述边缘计算平台按照以下方式训练得到：
所述边缘计算平台接收所述特征数据的人工标注结果，所述人工标注结果至少用于表征所述特征数据中存在的缺陷类型；
所述边缘计算平台按照缺陷类型对所述特征数据进行分类，形成训练样本集，并利用所述训练样本集对预设的数理模型进行训练，以使得训练后的数理模型对输入的特征数据处理得到的缺陷识别结果与所述输入的特征数据的人工标注结果一致。
7.根据权利要求1或6所述的方法，其特征在于，完成训练的所述数理模型中至少包括模型权重参数，所述模型权重参数作为判定缺陷的阈值，并且所述数理模型的输出结果为包含多个概率值的概率向量，其中，不同的概率值对应不同的缺陷类型。
8.根据权利要求7所述的方法，其特征在于，判断所述目标对象在所述目标图像中是否存在缺陷包括：
将所述概率向量中的任一目标概率值与所述模型权重参数进行比较，若所述目标概率值大于或者等于所述模型权重参数，将所述目标概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷。
9.根据权利要求7所述的方法，其特征在于，判断所述目标对象在所述目标图像中是否存在缺陷包括：
在所述概率向量包含的多个概率值中确定出最大概率值，并将所述最大概率值与所述模型权重参数进行比较，若所述最大概率值大于或者等于所述模型权重参数，将所述最大概率值对应的缺陷类型作为所述目标对象在所述目标图像中存在的缺陷。
10.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在判定所述目标对象在所述目标图像中存在缺陷时，向工控设备发送停止生产指令，以使得所述工控设备暂停所述目标对象的生产线；
发出报警提示信息，并在所述目标图像中标注出所述缺陷所处的位置。
11.根据权利要求10所述的方法，其特征在于，所述方法还包括：
若接收到针对所述报警提示信息的误报确认指令，将所述目标图像上传至所述边缘计算平台，以使得所述边缘计算平台根据所述目标图像对所述数理模型进行校正；
接收所述边缘计算平台反馈的校正后的数理模型，并利用所述校正后的数理模型替换本地存储的数理模型。
12.一种边缘计算设备，其特征在于，所述边缘计算设备包括：
目标图像接收单元，用于接收目标对象当前待质检的目标图像；
缺陷识别单元，用于基于边缘计算平台的数理模型，对所述目标图像进行识别，以判断所述目标对象是否存在缺陷。
13.根据权利要求12所述的边缘计算设备，其特征在于，所述边缘计算设备还包括：
特征数据提取单元，用于从所述目标对象的视频流数据中提取所述目标对象的特征数据，将所述特征数据上传至边缘计算平台，边缘计算平台根据接收的特征数据训练目标对象的数理模型。
14.根据权利要求13所述的边缘计算设备，其特征在于，所述特征数据提取单元包括：
有效视频帧识别模块，用于从所述视频流数据中识别所述目标对象的有效视频帧，并从所述有效视频帧中提取所述目标对象的特征数据。
15.根据权利要求14所述的边缘计算设备，其特征在于，所述有效视频帧识别模块包括：
指定字段识别模块，用于遍历所述视频流数据中的各个视频帧，并识别各个所述视频帧的头部信息中的指定字段；
关键帧识别模块，用于若所述指定字段中携带的标志位表征所述视频帧为关键帧，将所述视频帧作为所述目标对象的有效视频帧。
16.根据权利要求14所述的边缘计算设备，其特征在于，所述有效视频帧识别模块包括：
背景过滤模块，用于读取所述目标对象所处背景的背景色，并在所述有效视频帧展示的视频画面中，将所述背景色滤除；
特征数据确定模块，用于将滤除了背景色的视频画面对应的数据作为从所述有效视频帧中提取的所述目标对象的特征数据。
17.根据权利要求12所述的边缘计算设备，其特征在于，所述边缘计算设备还包括：
停工指令发送单元，用于在判定所述目标对象在所述目标图像中存在缺陷时，向工控设备发送停止生产指令，以使得所述工控设备暂停所述目标对象的生产线；
报警提示单元，用于发出报警提示信息，并在所述目标图像中标注出所述缺陷所处的位置。
18.根据权利要求17所述的边缘计算设备，其特征在于，所述边缘计算设备还包括：
目标图像上传单元，用于若接收到针对所述报警提示信息的误报确认指令，将所述目标图像上传至所述边缘计算平台，以使得所述边缘计算平台根据所述目标图像对所述数理模型进行校正；
模型替换单元，用于接收所述边缘计算平台反馈的校正后的数理模型，并利用所述校正后的数理模型替换本地存储的数理模型。
19.一种边缘计算设备，其特征在于，所述边缘计算设备包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现如权利要求1至11中任一所述的方法。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910432190.7A CN110298819A (zh) | 2019-05-23 | 2019-05-23 | 一种目标对象的质检方法及边缘计算设备 |
| PCT/CN2019/096174 WO2020232816A1 (zh) | 2019-05-23 | 2019-07-16 | 一种目标对象的质检方法及边缘计算设备 |
| EP19920647.5A EP3770851A4 (en) | 2019-05-23 | 2019-07-16 | QUALITY INSPECTION PROCESS FOR TARGET OBJECT, AND PERIPHERAL COMPUTER DEVICE |
| US17/061,475 US20210034044A1 (en) | 2019-05-23 | 2020-10-01 | Method for quality controling of target object and edge computing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910432190.7A CN110298819A (zh) | 2019-05-23 | 2019-05-23 | 一种目标对象的质检方法及边缘计算设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110298819A true CN110298819A (zh) | 2019-10-01 |
Family
ID=68027120
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910432190.7A Pending CN110298819A (zh) | 2019-05-23 | 2019-05-23 | 一种目标对象的质检方法及边缘计算设备 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20210034044A1 (zh) |
| EP (1) | EP3770851A4 (zh) |
| CN (1) | CN110298819A (zh) |
| WO (1) | WO2020232816A1 (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110866901A (zh) * | 2019-11-05 | 2020-03-06 | 中国科学院计算机网络信息中心 | 一种基于边缘计算技术的质检方法及系统 |
| CN111090243A (zh) * | 2018-10-23 | 2020-05-01 | 宁波方太厨具有限公司 | 一种实现厨房电器智能互联的方法 |
| CN111462167A (zh) * | 2020-04-21 | 2020-07-28 | 济南浪潮高新科技投资发展有限公司 | 一种结合边缘计算与深度学习的智能终端视频分析算法 |
| CN113804244A (zh) * | 2020-06-17 | 2021-12-17 | 鸿富锦精密电子(天津)有限公司 | 缺陷分析方法及装置、电子装置及计算机可读存储介质 |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112184701A (zh) * | 2020-10-22 | 2021-01-05 | 中国联合网络通信集团有限公司 | 检测结果的确定方法、装置及系统 |
| CN114627360B (zh) * | 2020-12-14 | 2024-07-23 | 南瑞集团有限公司 | 基于级联检测模型的变电站设备缺陷识别方法 |
| CN113850285A (zh) * | 2021-07-30 | 2021-12-28 | 安徽继远软件有限公司 | 基于边缘计算的输电线路缺陷识别方法及系统 |
| CN113759854B (zh) * | 2021-09-18 | 2023-09-05 | 富联裕展科技(深圳)有限公司 | 基于边缘计算的智能工厂管控系统及方法 |
| CN116547661A (zh) * | 2021-12-03 | 2023-08-04 | 宁德时代新能源科技股份有限公司 | 用于图像分割的数据标注方法和系统以及图像分割装置 |
| CN115909177B (zh) * | 2023-02-22 | 2023-08-22 | 江苏甬金金属科技有限公司 | 一种传送轧带的表面智能监测方法及系统 |
| CN117703325B (zh) * | 2024-02-06 | 2024-05-07 | 西安思坦仪器股份有限公司 | 油田波码分注注水地面控制系统 |
| CN117893952B (zh) * | 2024-03-15 | 2024-06-28 | 视睿（杭州）信息科技有限公司 | 基于深度学习的视频马赛克缺陷检测方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170161884A1 (en) * | 2015-12-03 | 2017-06-08 | International Business Machines Corporation | Work-piece defect inspection via optical images and ct images |
| CN109064454A (zh) * | 2018-07-12 | 2018-12-21 | 上海蝶鱼智能科技有限公司 | 产品缺陷检测方法及系统 |
| CN109242825A (zh) * | 2018-07-26 | 2019-01-18 | 北京首钢自动化信息技术有限公司 | 一种基于深度学习技术的钢铁表面缺陷识别方法和装置 |
| CN109461149A (zh) * | 2018-10-31 | 2019-03-12 | 泰州市创新电子有限公司 | 喷漆表面缺陷的智能检测系统及方法 |
| CN109671058A (zh) * | 2018-12-05 | 2019-04-23 | 武汉精立电子技术有限公司 | 一种大分辨率图像的缺陷检测方法及系统 |
| CN109711474A (zh) * | 2018-12-24 | 2019-05-03 | 中山大学 | 一种基于深度学习的铝材表面缺陷检测算法 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9740951B2 (en) * | 2015-09-11 | 2017-08-22 | Intel Corporation | Technologies for object recognition for internet-of-things edge devices |
| CN105844238A (zh) * | 2016-03-23 | 2016-08-10 | 乐视云计算有限公司 | 视频鉴别方法及系统 |
| US20180374022A1 (en) * | 2017-06-26 | 2018-12-27 | Midea Group Co., Ltd. | Methods and systems for improved quality inspection |
| US10593033B2 (en) * | 2017-06-27 | 2020-03-17 | Nec Corporation | Reconstructor and contrastor for medical anomaly detection |
| CN107292885A (zh) * | 2017-08-08 | 2017-10-24 | 广东工业大学 | 一种基于自动编码器的产品缺陷分类识别方法及装置 |
| CN108830837B (zh) * | 2018-05-25 | 2021-03-09 | 北京百度网讯科技有限公司 | 一种用于检测钢包溶蚀缺陷的方法和装置 |
| CN108961239A (zh) * | 2018-07-02 | 2018-12-07 | 北京百度网讯科技有限公司 | 连铸坯质量检测方法、装置、电子设备及存储介质 |
| CN109084955A (zh) * | 2018-07-02 | 2018-12-25 | 北京百度网讯科技有限公司 | 显示屏质量检测方法、装置、电子设备及存储介质 |
-
2019
- 2019-05-23 CN CN201910432190.7A patent/CN110298819A/zh active Pending
- 2019-07-16 EP EP19920647.5A patent/EP3770851A4/en not_active Withdrawn
- 2019-07-16 WO PCT/CN2019/096174 patent/WO2020232816A1/zh unknown
-
2020
- 2020-10-01 US US17/061,475 patent/US20210034044A1/en not_active Abandoned
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170161884A1 (en) * | 2015-12-03 | 2017-06-08 | International Business Machines Corporation | Work-piece defect inspection via optical images and ct images |
| CN109064454A (zh) * | 2018-07-12 | 2018-12-21 | 上海蝶鱼智能科技有限公司 | 产品缺陷检测方法及系统 |
| CN109242825A (zh) * | 2018-07-26 | 2019-01-18 | 北京首钢自动化信息技术有限公司 | 一种基于深度学习技术的钢铁表面缺陷识别方法和装置 |
| CN109461149A (zh) * | 2018-10-31 | 2019-03-12 | 泰州市创新电子有限公司 | 喷漆表面缺陷的智能检测系统及方法 |
| CN109671058A (zh) * | 2018-12-05 | 2019-04-23 | 武汉精立电子技术有限公司 | 一种大分辨率图像的缺陷检测方法及系统 |
| CN109711474A (zh) * | 2018-12-24 | 2019-05-03 | 中山大学 | 一种基于深度学习的铝材表面缺陷检测算法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111090243A (zh) * | 2018-10-23 | 2020-05-01 | 宁波方太厨具有限公司 | 一种实现厨房电器智能互联的方法 |
| CN111090243B (zh) * | 2018-10-23 | 2023-04-14 | 宁波方太厨具有限公司 | 一种实现厨房电器智能互联的方法 |
| CN110866901A (zh) * | 2019-11-05 | 2020-03-06 | 中国科学院计算机网络信息中心 | 一种基于边缘计算技术的质检方法及系统 |
| CN111462167A (zh) * | 2020-04-21 | 2020-07-28 | 济南浪潮高新科技投资发展有限公司 | 一种结合边缘计算与深度学习的智能终端视频分析算法 |
| CN113804244A (zh) * | 2020-06-17 | 2021-12-17 | 鸿富锦精密电子(天津)有限公司 | 缺陷分析方法及装置、电子装置及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2020232816A1 (zh) | 2020-11-26 |
| EP3770851A4 (en) | 2021-07-21 |
| EP3770851A1 (en) | 2021-01-27 |
| US20210034044A1 (en) | 2021-02-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110298819A (zh) | 一种目标对象的质检方法及边缘计算设备 | |
| CN110059635B (zh) | 一种皮肤瑕疵检测方法及装置 | |
| US20220189002A1 (en) | Method and system for defect inspection based on deep learning | |
| CN110414321B (zh) | 自动识别晃动视频的方法和系统 | |
| CN111310826B (zh) | 样本集的标注异常检测方法、装置及电子设备 | |
| CN112560816A (zh) | 一种基于YOLOv4的设备指示灯识别方法及系统 | |
| CN109919064B (zh) | 一种轨道交通车厢内实时人数统计方法和装置 | |
| CN110599453A (zh) | 一种基于图像融合的面板缺陷检测方法、装置及设备终端 | |
| CN115131283A (zh) | 目标对象的缺陷检测、模型训练方法、装置、设备及介质 | |
| CN115170550A (zh) | 一种基于深度学习的电池缺陷检测方法及系统 | |
| CN108391092A (zh) | 基于深度学习的危险物识别系统 | |
| CN112434178A (zh) | 图像分类方法、装置、电子设备和存储介质 | |
| CN113792578A (zh) | 用于变电站异常的检测方法、设备及系统 | |
| CN113269039A (zh) | 一种在岗人员行为识别方法和系统 | |
| CN110263622A (zh) | 列车火情监测方法、装置、终端及存储介质 | |
| CN111126112B (zh) | 候选区域确定方法和装置 | |
| US9984294B2 (en) | Image classification method and apparatus for preset tour camera | |
| CN112883755A (zh) | 一种基于深度学习与行为先验的吸烟和打电话检测方法 | |
| CN111723767B (zh) | 一种图像处理方法、装置及计算机存储介质 | |
| CN103913150A (zh) | 智能电能表电子元器件一致性检测方法 | |
| CN117351472A (zh) | 烟叶信息检测方法、装置及电子设备 | |
| CN109063544A (zh) | 一种泥头车检测的方法、系统、计算机设备及存储介质 | |
| CN108073854A (zh) | 一种现场巡检的检测方法及装置 | |
| CN111179241A (zh) | 一种面板缺陷检测和分类方法及系统 | |
| Grabs et al. | Supervised Machine Learning based Classification of Video Traffic Types |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191001 |
|
| RJ01 | Rejection of invention patent application after publication |