CN114821073A - 一种便携智能开壳机的状态识别方法、设备 - Google Patents

一种便携智能开壳机的状态识别方法、设备 Download PDF

Info

Publication number
CN114821073A
CN114821073A CN202210737639.2A CN202210737639A CN114821073A CN 114821073 A CN114821073 A CN 114821073A CN 202210737639 A CN202210737639 A CN 202210737639A CN 114821073 A CN114821073 A CN 114821073A
Authority
CN
China
Prior art keywords
melon seed
shell
melon
clustering
shells
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210737639.2A
Other languages
English (en)
Other versions
CN114821073B (zh
Inventor
刘强林
任福国
李加旺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Liaocheng Yulin Industrial Design Co ltd
Original Assignee
Liaocheng Yulin Industrial Design Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Liaocheng Yulin Industrial Design Co ltd filed Critical Liaocheng Yulin Industrial Design Co ltd
Priority to CN202210737639.2A priority Critical patent/CN114821073B/zh
Publication of CN114821073A publication Critical patent/CN114821073A/zh
Application granted granted Critical
Publication of CN114821073B publication Critical patent/CN114821073B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/54—Extraction of image or video features relating to texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Geometry (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Telephone Function (AREA)

Abstract

本发明涉及数据识别领域，具体涉及一种便携智能开壳机的状态识别方法、设备。本发明的便携智能开壳机的状态识别方法、设备均应用电子设备进行图形识别，根据识别到的图形得到了待识别开壳机的实际开壳率，若所述实际开壳率不小于设定开壳率阈值，则判定待识别开壳机的状态正常；若所述实际开壳率小于设定开壳率阈值，则判定待识别开壳机的状态不正常。本发明实现了对便携智能开壳机状态的自动判断，减少了人力资源占用，解决了现有采用人工检测的方式对便携智能开壳机的状态进行识别时存在的占用人力资源较多的问题。

Description

一种便携智能开壳机的状态识别方法、设备
技术领域
本发明涉及数据识别领域，具体涉及一种便携智能开壳机的状态识别方法、设备。
背景技术
由于便携智能开壳机具有体积小、便于携带、能够方便人们生活的优点，便携智能开壳机已经越来越普及。为了保证便携智能开壳机的出厂质量，便携智能开壳机生产厂家在便携智能开壳机出厂前需要对便携智能开壳机的状态进行识别，即检测待出厂的便携智能开壳机的性能是否符合出厂要求，符合出厂要求即状态正常，不符合出厂要求即状态不正常。现有的便携智能开壳机生产厂家多采用人工检测的方式对便携智能开壳机的状态进行识别，存在占用人力资源较多的问题。
发明内容
为了解决现有采用人工检测的方式对便携智能开壳机的状态进行识别时存在的占用人力资源较多的问题，本发明的目的在于提供一种便携智能开壳机的状态识别方法、设备。
一方面，本发明提供了一种便携智能开壳机的状态识别方法，包括以下步骤：
获取目标区域的RGB图像，并对所述目标区域的RGB图像进行灰度化处理，得到目标区域的灰度图像；所述目标区域位于待识别开壳机的出料口下方；
利用语义分割网络识别所述目标区域的灰度图像中的瓜子壳和瓜子仁，并利用边缘检测方法识别各瓜子壳和瓜子仁的轮廓，计算各瓜子壳和瓜子仁轮廓的尖锐程度；
计算各瓜子壳和瓜子仁轮廓内的各像素点灰度共生矩阵的特征值，根据所述特征值计算各瓜子壳和瓜子仁轮廓内的纹理规则程度；所述特征值包括纹理对比度描述因子和能量描述因子；
根据各瓜子壳和瓜子仁轮廓内的纹理规则程度和对应的尖锐程度计算任意两瓜子壳和瓜子仁轮廓之间的聚类距离，根据所述聚类距离对各瓜子壳和瓜子仁轮廓进行聚类，得到瓜子仁聚类簇；根据所述瓜子仁聚类簇中瓜子仁的数量判断待识别开壳机的实际开壳率，若所述实际开壳率不小于设定开壳率阈值，则判定待识别开壳机的状态正常；若所述实际开壳率小于设定开壳率阈值，则判定待识别开壳机的状态不正常。
另一方面，本发明还提供了一种便携智能开壳机的状态识别设备，包括处理器和存储器，所述处理器加载并执行所述存储器上存储的计算机程序，以实现上述的便携智能开壳机的状态识别方法。
进一步的，所述计算各瓜子壳和瓜子仁轮廓的尖锐程度，包括：
计算每一瓜子壳和瓜子仁轮廓上的边缘像素点的切线斜率变化率，绘制成切线斜率变化率-概率直方图，记为o-p直方图；
根据每一瓜子壳和瓜子仁轮廓对应的o-p直方图，得到每一瓜子壳和瓜子仁轮廓的尖锐程度：
Figure 100002_DEST_PATH_IMAGE001
其中，
Figure 15408DEST_PATH_IMAGE002
为某一瓜子壳和瓜子仁轮廓的尖锐程度，
Figure 807914DEST_PATH_IMAGE003
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中的第i种切线斜率变化率，
Figure 412420DEST_PATH_IMAGE004
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中第i种切线斜率变化率出现的概率，m为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中切线斜率变化率的种类数量。
进一步的，所述根据所述特征值计算各瓜子壳和瓜子仁轮廓内的纹理规则程度，包括：
利用如下公式计算各瓜子壳和瓜子仁轮廓内的纹理规则程度：
Figure 338787DEST_PATH_IMAGE005
其中，
Figure 559684DEST_PATH_IMAGE006
为某瓜子壳和瓜子仁轮廓内的纹理规则程度，
Figure 257513DEST_PATH_IMAGE007
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的纹理对比度描述因子，
Figure 134333DEST_PATH_IMAGE008
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的能量描述因子，n为该瓜子壳和瓜子仁轮廓内包含的像素点数量。
进一步的，所述根据各瓜子壳和瓜子仁轮廓内的纹理规则程度和对应的尖锐程度计算任意两瓜子壳和瓜子仁轮廓之间的聚类距离，包括：
利用如下公式计算聚类距离：
Figure 880703DEST_PATH_IMAGE009
其中，d为两瓜子壳和瓜子仁轮廓之间的聚类距离，
Figure 690528DEST_PATH_IMAGE010
为两瓜子壳和瓜子仁轮廓之间的尖锐程度差值，
Figure 100002_DEST_PATH_IMAGE011
为两瓜子壳和瓜子仁轮廓之间的纹理规则程度差值。
进一步的，所述根据所述聚类距离对各瓜子壳和瓜子仁轮廓进行聚类，得到瓜子仁聚类簇，包括：
计算聚类效果面积评价指标
Figure 621575DEST_PATH_IMAGE012
，其中，
Figure 188953DEST_PATH_IMAGE013
为聚类效果面积评价指标，
Figure 660386DEST_PATH_IMAGE014
为平均面积最大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值，
Figure 980509DEST_PATH_IMAGE015
为平均面积第二大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值；
计算聚类效果直线评价指标
Figure 223402DEST_PATH_IMAGE016
，其中，
Figure 324082DEST_PATH_IMAGE017
为聚类效果直线评价指标，b为平均面积第二大的聚类簇中瓜子壳和瓜子仁轮廓的数量，
Figure 146676DEST_PATH_IMAGE018
为平均面积第二大的聚类簇中第i个瓜子壳和瓜子仁轮廓内包含的直线数量；
利用如下公式计算聚类效果综合评价指标：
Figure 852464DEST_PATH_IMAGE019
其中，
Figure 922051DEST_PATH_IMAGE020
为聚类效果综合评价指标，e3为各类的类内距离的均值，e4为各类与其它类别的质心之间的距离的均值；
设置K的初始值为2，聚类完成后将计算E的大小，记为E1；然后再设置K的值为3，再次计算E的大小，记为E2；比较E1和E2的大小，若E1大于E2，那么将K=3对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇；若E1小于E2，那么将K=2对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇。
进一步的，所述根据所述瓜子仁聚类簇中瓜子仁的数量判断待识别开壳机的实际开壳率，包括：
利用如下公式计算待识别开壳机的实际开壳率：
Figure 198443DEST_PATH_IMAGE021
其中，L为待识别开壳机的实际开壳率，N为投入瓜子开壳机的瓜子数量，a为瓜子仁聚类簇中瓜子仁的数量。
有益效果：本发明基于获取的便携智能开壳机出料口下方的图像，实现了对便携智能开壳机状态的自动判断，解决现有采用人工检测的方式对便携智能开壳机的状态进行识别时存在的占用人力资源较多的问题。
附图说明
图1是本发明的一种便携智能开壳机的状态识别方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行介绍。
便携智能开壳机的状态识别方法实施例：
为了解决现有采用人工检测的方式对便携智能开壳机的状态进行识别时存在的占用人力资源较多的问题，本实施例提供了一种便携智能开壳机的状态识别方法，如图1所示，包括以下步骤：
（1）获取目标区域的RGB图像，并对所述目标区域的RGB图像进行灰度化处理，得到目标区域的灰度图像；所述目标区域位于待识别开壳机的出料口下方。
为了对待出厂的便携智能开壳机的状态进行识别，即检测待出厂的便携智能开壳机是否符合出厂要求，本实施例对待出厂的便携智能开壳机进行了测试。本实施例的便携智能开壳机为葵花籽（简称瓜子）开壳机，为了简便，接下来将待识别的便携智能开壳机简称为瓜子开壳机。
测试过程中，采用机械手臂将设定数量（记为N）的颗粒饱满的瓜子依次放入瓜子开壳机的进料口，将瓜子放入进料口完毕后，采集瓜子开壳机出料口下方的图像。如果瓜子开壳机的状态正常，那么采集到的图像中瓜子仁的数量约等于投入的瓜子的数量，该瓜子开壳机的开壳率较高，是符合出厂要求的；如果瓜子开壳机的状态不正常，那么采集到的图像中瓜子仁的数量小于投入的瓜子的数量，该瓜子开壳机的开壳率较低，是不符合出厂要求的。鉴于此，本实施例对采集的瓜子开壳机出料口下方的图像进行分析，以识别图像中的瓜子仁，得到图像中瓜子仁的数量，进而判定瓜子开壳机状态的是否正常。本实施例采用机械手臂进行瓜子的投入，作为其它实施方式，也可以采用其它方式实现瓜子的投入，本发明不对瓜子的投入方式做要求。
为了简便，接下来将采集到的待识别开壳机的出料口下方图像简称为目标区域图像；本实施例采集的目标区域图像为RGB图像，利用加权平均值法对该目标区域的RGB图像进行灰度化处理，得到目标区域的灰度图像。利用加权平均值法进行灰度化处理的过程为现有技术，此处不再赘述。
（2）利用语义分割网络识别所述目标区域的灰度图像中的瓜子壳和瓜子仁，并利用边缘检测方法识别各瓜子壳和瓜子仁的轮廓，计算各瓜子壳和瓜子仁轮廓的尖锐程度；
本实施例使用语义分割网络来区分目标区域的灰度图像中的背景区域和非背景区域，非背景区域即瓜子壳和瓜子仁区域，本实施例中的瓜子壳指的是未开壳成功的其内还有瓜子仁的瓜子，以及开壳成功的其内不含有瓜子仁的瓜子外皮。本实施例具体使用ResNet神经网络来区分目标区域的灰度图像中的背景区域和非背景区域，ResNet神经网络的输入为目标区域的灰度图像，输出为包含包子皮和瓜子仁的区域图像。在对ResNet神经网络进行训练的过程中，ResNet神经网络的标签分为两种，一种是背景，一种是瓜子壳和瓜子仁，将瓜子壳和瓜子仁区域标记为1，将背景区域标记为0。ResNet神经网络所用损失函数为交叉熵损失函数。
在得到了目标区域的灰度图像中的瓜子壳和瓜子仁区域后，使用现有的边缘检测方法得到目标区域中瓜子壳和瓜子仁的轮廓（此时还不能够区分轮廓是瓜子壳轮廓还是瓜子仁轮廓，因此先称为瓜子壳和瓜子仁轮廓）。为了实现对瓜子壳和瓜子仁的区分，考虑到瓜子仁的胚根部分比瓜子壳（本实施例此处的瓜子壳是相对较为完整的瓜子壳，而不是指被破碎的瓜子壳，开壳成功后的瓜子壳既有可能是相对较为完整的瓜子壳，也有可能是被破碎的瓜子壳）的胚根部分要尖锐的多，本实施例计算了各瓜子壳和瓜子仁轮廓的尖锐程度，具体过程如下：
计算每一瓜子壳和瓜子仁轮廓上的边缘像素点的切线斜率变化率，绘制成切线斜率变化率-概率直方图，记为o-p直方图。
根据每一瓜子壳和瓜子仁轮廓对应的o-p直方图，可以得到每一瓜子壳和瓜子仁轮廓的尖锐程度：
Figure 339574DEST_PATH_IMAGE001
其中，
Figure 447339DEST_PATH_IMAGE002
为某一瓜子壳和瓜子仁轮廓的尖锐程度，
Figure 15723DEST_PATH_IMAGE003
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中的第i种切线斜率变化率，
Figure 779411DEST_PATH_IMAGE004
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中第i种切线斜率变化率出现的概率，m为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中切线斜率变化率的种类数量。当切线斜率变化率的值越大且出现的频率越高时，
Figure 396337DEST_PATH_IMAGE002
的值越大，说明该瓜子壳和瓜子仁的轮廓越尖锐。
（3）计算各瓜子壳和瓜子仁轮廓内的各像素点灰度共生矩阵的特征值，根据所述特征值计算各瓜子壳和瓜子仁轮廓内的纹理规则程度；
瓜子壳相较于瓜子仁而言，瓜子壳具有以下特点：纹理为纵向纹理，即由瓜子壳一端到另一端的条状纹理；鉴于此，为了更好地区分瓜子壳和瓜子仁，本实施例还计算了各瓜子壳和瓜子仁轮廓内的纹理规则程度，具体过程如下：
对于任一瓜子壳和瓜子仁轮廓内的任一像素点，根据该像素点周围8邻域内的像素点构建该像素点对应的灰度共生矩阵。现有方法构建灰度共生矩阵时一般选择0 、45 、90 和135 这四个方向构建灰度共生矩阵，本实施例计算灰度共生矩阵时选择两个方向构建灰度共生矩阵，这两个方向的获取过程为：对于任一瓜子壳和瓜子仁轮廓，对该轮廓进行最小外接矩形的拟合，获取矩形长边中线以及宽边中线，将两个中线的方向作为灰度共生矩阵的两个方向。构建灰度共生矩阵的过程为现有技术，此处不再赘述。
利用如下公式计算各瓜子壳和瓜子仁轮廓内的纹理规则程度：
Figure 545559DEST_PATH_IMAGE005
其中，
Figure 97894DEST_PATH_IMAGE006
为某瓜子壳和瓜子仁轮廓内的纹理规则程度，
Figure 598145DEST_PATH_IMAGE007
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的纹理对比度描述因子，
Figure 566232DEST_PATH_IMAGE008
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的能量描述因子，n为该瓜子壳和瓜子仁轮廓内包含的像素点数量。
纹理对比度描述因子反映了图像的清晰度和纹理的沟纹深浅，纹理对比度描述因子越大，纹理的沟纹越深，反差越大，效果越清晰；反之，则沟纹较浅，效果模糊。能量描述因子反映了图像灰度分布均匀程度和纹理粗细度，若灰度共生矩阵的元素值相近，则能量较小，表示纹理细致；若灰度共生矩阵中一些值大，而其它值小，则能量值较大；能量值大表明一种较均一和规则变化的纹理模式。
当某瓜子壳和瓜子仁轮廓内各像素点对应的灰度共生矩阵的纹理对比度描述因子和能量描述因子越大时，该瓜子壳和瓜子仁轮廓对应的W越大，说明该轮廓内纹理越规律，那么该瓜子壳和瓜子仁轮廓越为瓜子壳对应的轮廓的可能性越大。
（4）根据各瓜子壳和瓜子仁轮廓内的纹理规则程度和对应的尖锐程度计算任意两瓜子壳和瓜子仁轮廓之间的聚类距离，根据所述聚类距离对各瓜子壳和瓜子仁轮廓进行聚类，得到瓜子仁聚类簇；根据所述瓜子仁聚类簇中瓜子仁的数量判断待识别开壳机的实际开壳率，若所述实际开壳率不小于设定开壳率阈值，则判定待识别开壳机的状态正常；若所述实际开壳率小于设定开壳率阈值，则判定待识别开壳机的状态不正常。
为了区分瓜子壳和瓜子仁，本实施例采用K-means算法对各瓜子壳和瓜子仁轮廓进行聚类。本实施例采用的聚类距离为：
Figure 773223DEST_PATH_IMAGE009
其中，d为两瓜子壳和瓜子仁轮廓之间的聚类距离，
Figure 948989DEST_PATH_IMAGE010
为两瓜子壳和瓜子仁轮廓之间的尖锐程度差值，
Figure 421690DEST_PATH_IMAGE011
为两瓜子壳和瓜子仁轮廓之间的纹理规则程度差值。
由于瓜子壳在被开壳后可能会裂开，形成一些碎壳，这些破壳会存在一些尖锐的角，容易与瓜子仁在进行聚类时混淆，因此，为了避免破碎的瓜子壳对聚类结果的影响，本实施例提供了一种自适应K值的K-means算法，K=2或3，通过改变K值和对改变K值后的聚类结果进行分析，进而确定优选K值。本实施例确定K值的过程如下：
①计算聚类效果面积评价指标；
本实施例进行测试用的瓜子为颗粒饱满的瓜子，若存在破碎瓜子壳，那么其轮廓面积应是最小的，故选取聚类簇中平均面积较大的两个聚类簇，计算这两个聚类簇之间的面积差异，若面积差异过大，则说明聚类效果不好，这两个聚类簇之间面积差异越小，说明聚类效果越好。利用如下公式计算聚类效果面积评价指标：
Figure 505053DEST_PATH_IMAGE022
其中，
Figure 102301DEST_PATH_IMAGE013
为聚类效果面积评价指标，
Figure 121072DEST_PATH_IMAGE013
越小，说明聚类效果越好；
Figure 143386DEST_PATH_IMAGE014
为平均面积最大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值；
Figure 233702DEST_PATH_IMAGE015
为平均面积第二大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值。
②计算聚类效果直线评价指标；
瓜子壳在被破碎时，易于从中间劈开形成直线边缘，使用霍夫直线检测便可将直线边缘识别，故本实施例通过霍夫直线检测平均面积第二大的聚类簇中各瓜子壳和瓜子仁轮廓，统计每个轮廓内是否含有直线，检测得到的直线越多，说明聚类效果越不好。
Figure 25072DEST_PATH_IMAGE023
其中，
Figure 11482DEST_PATH_IMAGE017
为聚类效果直线评价指标，
Figure 645726DEST_PATH_IMAGE017
越小，说明聚类效果越好，b为平均面积第二大的聚类簇中瓜子壳和瓜子仁轮廓的数量，
Figure 759306DEST_PATH_IMAGE018
为平均面积第二大的聚类簇中第i个瓜子壳和瓜子仁轮廓内包含的直线数量。
③计算聚类效果综合评价指标；
为了提高对聚类结果评价的准确性，本实施例还根据类内差异最小原则计算了各类的类内距离的均值，将该均值作为聚类效果评价因子e3；还根据类间差异最大原则计算了各类与其它类别的质心之间的距离的均值，将该均值作为聚类效果评价因子e4。类内差异最小原则和类间差异最大原则为现有技术，此处不再赘述。
利用如下公式计算聚类效果综合评价指标：
Figure 123292DEST_PATH_IMAGE019
其中，
Figure 93653DEST_PATH_IMAGE020
为聚类效果综合评价指标，
Figure 277510DEST_PATH_IMAGE020
的值越大，说明聚类效果越不好。
设置K的初始值为2，聚类完成后将计算E的大小，记为E1；然后再设置K的值为3，再次计算E的大小，记为E2。比较E1和E2的大小，若E1大于E2，那么将K=3对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇；若E1小于E2，那么将K=2对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇。
统计面积第二大的聚类簇的簇数，记为a，该值即瓜子仁聚类簇中瓜子仁的数量，即实际开壳成功的瓜子仁数量。根据实际开壳成功的瓜子仁数量计算瓜子开壳机的实际开壳率，公式如下：
Figure 381732DEST_PATH_IMAGE021
其中，L为开壳机的实际开壳率，N为投入瓜子开壳机的瓜子数量，a为瓜子仁聚类簇中瓜子仁的数量。
设置阈值f=0.95，当瓜子开壳机实际开壳率L小于阈值f时，判定该瓜子开壳机运行状态差，为非正常状态，不可出厂；当瓜子开壳机实际开壳率L不小于阈值f时，判定该瓜子开壳机运行状态好，为正常状态，可出厂。
本实施例基于获取的便携智能开壳机出料口下方的图像，实现了对便携智能开壳机状态的自动判断，解决现有采用人工检测的方式对便携智能开壳机的状态进行识别时存在的占用人力资源较多的问题。
便携智能开壳机的状态识别设备实施例：
本实施例的便携智能开壳机的状态识别设备包括处理器和存储器，所述处理器加载并执行所述存储器上存储的计算机程序，以实现如上述便携智能开壳机的状态识别方法实施例的便携智能开壳机的状态识别方法。便携智能开壳机的状态识别方法已经在上述便携智能开壳机的状态识别方法实施例中进行了说明，此处不再赘述。
以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围，均应包含在本申请的保护范围之内。

Claims (7)

1.一种便携智能开壳机的状态识别方法，其特征在于，包括以下步骤：
获取目标区域的RGB图像，并对所述目标区域的RGB图像进行灰度化处理，得到目标区域的灰度图像；所述目标区域位于待识别开壳机的出料口下方；
利用语义分割网络识别所述目标区域的灰度图像中的瓜子壳和瓜子仁，并利用边缘检测方法识别各瓜子壳和瓜子仁的轮廓，计算各瓜子壳和瓜子仁轮廓的尖锐程度；
计算各瓜子壳和瓜子仁轮廓内的各像素点灰度共生矩阵的特征值，根据所述特征值计算各瓜子壳和瓜子仁轮廓内的纹理规则程度；所述特征值包括纹理对比度描述因子和能量描述因子；
根据各瓜子壳和瓜子仁轮廓内的纹理规则程度和对应的尖锐程度计算任意两瓜子壳和瓜子仁轮廓之间的聚类距离，根据所述聚类距离对各瓜子壳和瓜子仁轮廓进行聚类，得到瓜子仁聚类簇；根据所述瓜子仁聚类簇中瓜子仁的数量判断待识别开壳机的实际开壳率，若所述实际开壳率不小于设定开壳率阈值，则判定待识别开壳机的状态正常；若所述实际开壳率小于设定开壳率阈值，则判定待识别开壳机的状态不正常。
2.根据权利要求1所述的便携智能开壳机的状态识别方法，其特征在于，所述计算各瓜子壳和瓜子仁轮廓的尖锐程度，包括：
计算每一瓜子壳和瓜子仁轮廓上的边缘像素点的切线斜率变化率，绘制成切线斜率变化率-概率直方图，记为o-p直方图；
根据每一瓜子壳和瓜子仁轮廓对应的o-p直方图，得到每一瓜子壳和瓜子仁轮廓的尖锐程度：
Figure DEST_PATH_IMAGE001
其中，
Figure 151203DEST_PATH_IMAGE002
为某一瓜子壳和瓜子仁轮廓的尖锐程度，
Figure 558045DEST_PATH_IMAGE003
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中的第i种切线斜率变化率，
Figure 370143DEST_PATH_IMAGE004
为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中第i种切线斜率变化率出现的概率，m为该瓜子壳和瓜子仁轮廓的切线斜率变化率-概率直方图中切线斜率变化率的种类数量。
3.根据权利要求1所述的便携智能开壳机的状态识别方法，其特征在于，所述根据所述特征值计算各瓜子壳和瓜子仁轮廓内的纹理规则程度，包括：
利用如下公式计算各瓜子壳和瓜子仁轮廓内的纹理规则程度：
Figure 419002DEST_PATH_IMAGE005
其中，
Figure 711574DEST_PATH_IMAGE006
为某瓜子壳和瓜子仁轮廓内的纹理规则程度，
Figure 961421DEST_PATH_IMAGE007
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的纹理对比度描述因子，
Figure 983517DEST_PATH_IMAGE008
为该瓜子壳和瓜子仁轮廓内第i个像素点的灰度共生矩阵中的能量描述因子，n为该瓜子壳和瓜子仁轮廓内包含的像素点数量。
4.根据权利要求1所述的便携智能开壳机的状态识别方法，其特征在于，所述根据各瓜子壳和瓜子仁轮廓内的纹理规则程度和对应的尖锐程度计算任意两瓜子壳和瓜子仁轮廓之间的聚类距离，包括：
利用如下公式计算聚类距离：
Figure 570487DEST_PATH_IMAGE009
其中，d为两瓜子壳和瓜子仁轮廓之间的聚类距离，
Figure 779883DEST_PATH_IMAGE010
为两瓜子壳和瓜子仁轮廓之间的尖锐程度差值，
Figure DEST_PATH_IMAGE011
为两瓜子壳和瓜子仁轮廓之间的纹理规则程度差值。
5.根据权利要求1所述的便携智能开壳机的状态识别方法，其特征在于，所述根据所述聚类距离对各瓜子壳和瓜子仁轮廓进行聚类，得到瓜子仁聚类簇，包括：
计算聚类效果面积评价指标
Figure 216943DEST_PATH_IMAGE012
，其中，
Figure 675737DEST_PATH_IMAGE013
为聚类效果面积评价指标，
Figure 66398DEST_PATH_IMAGE014
为平均面积最大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值，为平均面积第二大的聚类簇中各瓜子壳和瓜子仁轮廓面积的均值；
计算聚类效果直线评价指标
Figure 254934DEST_PATH_IMAGE015
，其中，
Figure 846583DEST_PATH_IMAGE016
为聚类效果直线评价指标，b为平均面积第二大的聚类簇中瓜子壳和瓜子仁轮廓的数量，
Figure 979625DEST_PATH_IMAGE017
为平均面积第二大的聚类簇中第i个瓜子壳和瓜子仁轮廓内包含的直线数量；
利用如下公式计算聚类效果综合评价指标：
Figure 111660DEST_PATH_IMAGE018
其中，
Figure 826806DEST_PATH_IMAGE019
为聚类效果综合评价指标，e3为各类的类内距离的均值，e4为各类与其它类别的质心之间的距离的均值；
设置K的初始值为2，聚类完成后将计算E的大小，记为E1；然后再设置K的值为3，再次计算E的大小，记为E2；比较E1和E2的大小，若E1大于E2，那么将K=3对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇；若E1小于E2，那么将K=2对应的聚类结果中平均面积第二大的聚类簇判定为瓜子仁聚类簇。
6.根据权利要求1所述的便携智能开壳机的状态识别方法，其特征在于，所述根据所述瓜子仁聚类簇中瓜子仁的数量判断待识别开壳机的实际开壳率，包括：
利用如下公式计算待识别开壳机的实际开壳率：
Figure 917253DEST_PATH_IMAGE020
其中，L为待识别开壳机的实际开壳率，N为投入瓜子开壳机的瓜子数量，a为瓜子仁聚类簇中瓜子仁的数量。
7.一种便携智能开壳机的状态识别设备，包括处理器和存储器，其特征在于，所述处理器加载并执行所述存储器上存储的计算机程序，以实现如权利要求1-6任一项所述的便携智能开壳机的状态识别方法。
CN202210737639.2A 2022-06-28 2022-06-28 一种便携智能开壳机的状态识别方法、设备 Active CN114821073B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210737639.2A CN114821073B (zh) 2022-06-28 2022-06-28 一种便携智能开壳机的状态识别方法、设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210737639.2A CN114821073B (zh) 2022-06-28 2022-06-28 一种便携智能开壳机的状态识别方法、设备

Publications (2)

Publication Number Publication Date
CN114821073A true CN114821073A (zh) 2022-07-29
CN114821073B CN114821073B (zh) 2022-09-13

Family

ID=82522752

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210737639.2A Active CN114821073B (zh) 2022-06-28 2022-06-28 一种便携智能开壳机的状态识别方法、设备

Country Status (1)

Country Link
CN (1) CN114821073B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115018845A (zh) * 2022-08-09 2022-09-06 聊城市泓润能源科技有限公司 一种润滑油磨粒质量检测方法
CN116713373A (zh) * 2023-08-10 2023-09-08 聊城市誉林工业设计有限公司 基于量产工业数据分析的换向片冲压工艺力补偿系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103955695A (zh) * 2013-11-27 2014-07-30 苏州清研微视电子科技有限公司 计算机基于灰度共生矩阵能量变化智能识别视频中人眼状态的方法
CN110717540A (zh) * 2019-10-10 2020-01-21 中国电子科技集团公司第三十八研究所 一种对雷达新辐射源个体的识别方法及装置
CN110930353A (zh) * 2019-07-03 2020-03-27 研祥智能科技股份有限公司 孔位保护门状态检测方法、装置、计算机设备和存储介质
US20210374466A1 (en) * 2020-05-26 2021-12-02 Zhejiang University Water level monitoring method based on cluster partition and scale recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103955695A (zh) * 2013-11-27 2014-07-30 苏州清研微视电子科技有限公司 计算机基于灰度共生矩阵能量变化智能识别视频中人眼状态的方法
CN110930353A (zh) * 2019-07-03 2020-03-27 研祥智能科技股份有限公司 孔位保护门状态检测方法、装置、计算机设备和存储介质
CN110717540A (zh) * 2019-10-10 2020-01-21 中国电子科技集团公司第三十八研究所 一种对雷达新辐射源个体的识别方法及装置
US20210374466A1 (en) * 2020-05-26 2021-12-02 Zhejiang University Water level monitoring method based on cluster partition and scale recognition

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
余丽萍等: "基于灰度共生矩阵的断口图像识别", 《计算机仿真》 *
王波等: "一种基于联合轮廓特征矢量的目标识别方法", 《传感器与微系统》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115018845A (zh) * 2022-08-09 2022-09-06 聊城市泓润能源科技有限公司 一种润滑油磨粒质量检测方法
CN115018845B (zh) * 2022-08-09 2022-10-25 聊城市泓润能源科技有限公司 一种润滑油磨粒质量检测方法
CN116713373A (zh) * 2023-08-10 2023-09-08 聊城市誉林工业设计有限公司 基于量产工业数据分析的换向片冲压工艺力补偿系统
CN116713373B (zh) * 2023-08-10 2023-10-31 聊城市誉林工业设计有限公司 基于量产工业数据分析的换向片冲压工艺力补偿系统

Also Published As

Publication number Publication date
CN114821073B (zh) 2022-09-13

Similar Documents

Publication Publication Date Title
CN114821073B (zh) 一种便携智能开壳机的状态识别方法、设备
CN115294140B (zh) 一种五金零件缺陷检测方法及系统
US10319096B2 (en) Automated tattoo recognition techniques
US7162081B2 (en) Method and apparatus for determining regions of interest in images and for image transmission
CN111915418A (zh) 一种互联网金融欺诈行为在线检测方法及其装置
CN114240807B (zh) 一种基于机器视觉的花生黄曲霉素检测方法及系统
CN114897773A (zh) 一种基于图像处理的扭曲木材检测方法及系统
CN111428701B (zh) 小面积指纹图像特征提取方法、系统、终端及存储介质
CN110874835B (zh) 作物叶部病害抗性鉴定方法、系统、电子设备及存储介质
CN114671214B (zh) 基于高压变频器的煤矿输送皮带调速方法
CN115239736A (zh) 用于金刚石磨轮生产的磨料层混料质量监测方法
Halac et al. Almonds classification using supervised learning methods
CN116246174B (zh) 基于图像处理的甘薯种类识别方法
CN111428064B (zh) 小面积指纹图像快速索引方法、装置、设备及存储介质
CN112288561A (zh) 基于dbscan算法的互联网金融欺诈行为检测方法
CN115115622B (zh) 一种冲压端子视觉检测装置
CN116563296A (zh) 一种用于腹部ct图像的识别方法
CN114550167B (zh) 一种基于人工智能的梨的品质分类方法及装置
CN114937165B (zh) 一种类簇合并方法、装置、终端及计算机可读存储介质
CN112862767B (zh) 基于度量学习的解决难分不平衡样本的表面缺陷检测方法
Vertan et al. Reusing the Otsu threshold beyond segmentation
Arora et al. A machine vision based approach to Cashew Kernel grading for efficient industry grade application
CN111597934A (zh) 用于为统计应用处理训练数据的系统和方法
Kalaiselvi et al. A Study on Validation Metrics of Digital Image Processing
CN112704259B (zh) 一种密集烟叶识别的打叶质量评价方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant