CN116228775B - 基于机器视觉的接触器完整性检测方法 - Google Patents

基于机器视觉的接触器完整性检测方法 Download PDF

Info

Publication number
CN116228775B
CN116228775B CN202310518570.9A CN202310518570A CN116228775B CN 116228775 B CN116228775 B CN 116228775B CN 202310518570 A CN202310518570 A CN 202310518570A CN 116228775 B CN116228775 B CN 116228775B
Authority
CN
China
Prior art keywords
characteristic
splitting
pixel point
window
line hole
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310518570.9A
Other languages
English (en)
Other versions
CN116228775A (zh
Inventor
何凯强
何祉辰
何佳泓
何俞瑾
郑微丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shide Electric Group Co ltd
Original Assignee
Shide Electric Group Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shide Electric Group Co ltd filed Critical Shide Electric Group Co ltd
Priority to CN202310518570.9A priority Critical patent/CN116228775B/zh
Publication of CN116228775A publication Critical patent/CN116228775A/zh
Application granted granted Critical
Publication of CN116228775B publication Critical patent/CN116228775B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0014Image feed-back for automatic industrial control, e.g. robot with camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y04INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
    • Y04SSYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
    • Y04S10/00Systems supporting electrical power generation, transmission or distribution
    • Y04S10/50Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Robotics (AREA)
  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

本发明涉及图像数据处理技术领域,提出了基于机器视觉的接触器完整性检测方法,包括:获得HSV线孔图像和线孔局部区域;根据HSV线孔图像的像素点差异得到颜色变化差异系数;根据线孔局部区域的像素点的窗口内的颜色变化差异系数得到入线孔劈裂破损特征方向和变化特征方向;根据入线孔劈裂破损特征方向和变化特征方向得到第一集合和第二集合,并得到劈裂破损扩张系数;根据劈裂破损扩张系数得到自适应扩张变化宽度对黑色劈裂特征提取部分进行调整,调整后得到特征窗口的特征数值;根据标准特征窗口和特征窗口的特征数值的差异判断是否出现了劈裂破损,完成接触器完整性的检测。本发明进一步提高了对接触器完整性检测的准确性效果。

Description

基于机器视觉的接触器完整性检测方法
技术领域
本发明涉及图像数据处理技术领域,具体涉及基于机器视觉的接触器完整性检测方法。
背景技术
接触器是利用电磁作用原理的一种大功率开关器件,广泛应用于航空航天、电子设备系统中。在电路自动控制过程中起到快速切断与接通电路的控制作用,适合频繁的电路控制系统,是一种重要的电路自动控制元件。为了确保接触器正常工作,通常情况下接触器表面会使用绝缘外壳进行保护处理,避免内部电磁控制处理过程受到干扰。但生产加工过程中由于设备故障和操作人员操作故障导致接触器表面绝缘外壳入线孔位置容易出现劈裂破损现象,破坏了接触器表面的绝缘外壳的完整性,对接触器整体性能造成较大的影响。传统Haar特征描述算子计算过程中窗口变化特征不能与较为复杂的接触器表面入线孔区域的缺陷异常变化特征相吻合,导致对接触器完整性检测的精确程度较差的缺点,因此本发明调整Haar特征描述算子的窗口解决此问题。
发明内容
本发明提供基于机器视觉的接触器完整性检测方法,以解决传统Haar特征描述算子计算过程中窗口变化特征不能与较为复杂的接触器表面入线孔区域的缺陷异常变化特征相吻合,导致对接触器完整性检测的精确程度较差的缺点的问题,所采用的技术方案具体如下:
本发明一个实施例提供了基于机器视觉的接触器完整性检测方法,该方法包括以下步骤:
获得表面灰度图像,对表面灰度图像进行分割得到线孔掩膜,根据线孔掩膜得到HSV线孔图像;
根据HSV线孔图像中每个像素点与其邻域像素点在H通道、S通道、V通道的灰度值差异得到每个像素点颜色变化差异系数;
在线孔局部区域内,每个像素点得到一个第一窗口,将第一窗口内像素点的颜色变化差异系数构建颜色差异海森矩阵,根据颜色差异海森矩阵的特征值得到每个像素点的入线孔劈裂破损特征方向和变化特征方向;
根据每个像素点的入线孔劈裂破损特征方向得到角度变化范围,将第一窗口内的像素点记为窗口像素点,将所有入线孔劈裂破损特征方向处于像素点的角度变化范围内的窗口像素点记为第一集合,将在第一集合中的每个窗口像素点的变化特征方向上的窗口像素点记为第二集合,根据第二集合上的每个窗口像素点的方向差异与颜色变化差异系数的差异得到每个像素点的劈裂破损扩张系数;
获取在线孔局部区域中像素点的特征窗口、黑色劈裂特征提取部分和白色劈裂特征提取部分,根据劈裂破损扩张系数计算得到自适应扩张变化宽度,根据自适应扩张变化宽度的奇偶性对黑色劈裂特征提取部分大小进行调整,根据调整后的黑色劈裂特征提取部分和白色劈裂特征提取部分的像素点数量得到特征窗口的特征数值;
获得标准特征窗口,根据所有标准特征窗口和特征窗口的特征数值的差异判断接触器入线孔部分是否出现了劈裂破损,完成接触器完整性的检测。
优选的,所述对表面灰度图像进行分割得到线孔掩膜的方法为:
使用OTSU算法对表面灰度图像进行分割得到表面二值图像,表面二值图像上的线孔区域内灰度值为1,表面二值图像上其他区域的灰度值为0,将表面二值图像记为线孔掩膜。
优选的,所述根据颜色差异海森矩阵的特征值得到每个像素点的入线孔劈裂破损特征方向和变化特征方向的方法为:
将颜色差异海森矩阵计算得到的最小特征值对应的特征向量的方向记为入线孔劈裂破损特征方向,颜色差异海森矩阵计算得到的最大特征值对应的特征向量的方向记为变化特征方向。
优选的,所述根据每个像素点的入线孔劈裂破损特征方向得到角度变化范围的方法为:
对于每个像素点,以其所对应的入线孔劈裂特征方向为中间方向,入线孔劈裂特征方向顺时针旋转45度,得到方向范围的结束值,入线孔劈裂特征方向逆时针旋转45度,得到方向范围的起始值,令起始值对应的方向到结束值对应的方向构成的90度角度为角度变化范围。
优选的,所述根据第二集合上的每个窗口像素点的方向差异与颜色变化差异系数的差异得到每个像素点的劈裂破损扩张系数的方法为:
Figure SMS_1
式中,
Figure SMS_4
为线孔局部区域中第i个像素点的颜色变化差异系数,
Figure SMS_6
为线孔局 部区域中第i个像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点,
Figure SMS_8
为 线孔局部区域中第i个像素点对应的入线孔劈裂特征方向,
Figure SMS_3
为线孔局部区域中第i个 像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点的入线孔劈裂特征方 向,
Figure SMS_5
为线孔局部区域中第i个像素点对应的集合的像素点数量即第一集合中的像素点数 量,
Figure SMS_7
为线孔局部区域中第i个像素点对应的第一集合的第s个像素点的变化特征方向上 的像素点数量,即第二集合中的像素点数量,
Figure SMS_9
表示为计算方向的角度,
Figure SMS_2
表示第i个像素 点的劈裂破损扩张系数。
优选的,所述根据自适应扩张变化宽度的奇偶性对黑色劈裂特征提取部分大小进行调整的方法为:
在未调整时,黑色劈裂特征提取部分的中心点和特征窗口的中心相同,预设一个 黑色劈裂特征提取部分的初始宽度为
Figure SMS_10
,若黑色劈裂特征提取部分宽度的大小为奇数,那么 中心点位置不变,将
Figure SMS_11
作为黑色劈裂特征提取部分的宽度,若黑色劈裂特征提取部分宽 度的大小为偶数,那么初始黑色劈裂特征提取部分位置不变,此时以中心点为中心作竖直 直线和水平直线将黑色劈裂特征提取部分分为四部分,第一部分为左上部分,第二部分为 右上部分,第三部分为右下部分,第四部分为左下部分,每个部分对应两个扩充方向,左上 部分对应向左和向上扩充,右上部分对应向右和向上扩充,右下部分对应向右和向下扩充, 左下部分对应向左和向下扩充,此时得到特征窗口中心点的入线孔劈裂特征方向,此时若 入线孔劈裂特征方向在第几个部分,则得到该部分对应的扩充方向,黑色劈裂特征提取部 分向扩充方向上扩充Dq个像素,其中
Figure SMS_12
,将黑色劈裂特征提取部分分为四部分 的直线,水平方向左侧直线属于第一部分,竖直方向上侧直线属于第二部分,水平方向右侧 直线属于第三部分,竖直方向下侧直线属于第四部分。
本发明的有益效果是:本发明实施例对接触器表面入线孔位置处劈破损缺陷的特征方向进行提取计算,并根据该特征方向变化角度范围内不同方向特征计算构造得到了接触器入线孔的扩张系数,对接触器表面入线孔局部位置处劈裂破损缺陷的变化特征进行较为准确的计算分析,规避了传统算法中使用灰度特征计算过程中由于灰度级限制无法准确描述入线孔局部图像区域的劈裂破损缺陷特征的缺点。进一步地,本发明实施例结合计算得到的接触器入线孔扩张系数构建对传统Haar特征描述算子窗口进行自适应调节变化,有效地规避了传统Haar特征描述算子计算过程中无法准确描述接触器入线孔劈裂破损变化特征导致最终对接触器完整性检测误差较大的影响,进一步提高了对接触器完整性检测的准确性效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一个实施例所提供的基于机器视觉的接触器完整性检测方法的流程示意图;
图2为入线孔劈裂破损特征方向;
图3为黑色劈裂特征提取部分扩充示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明一个实施例提供的基于机器视觉的接触器完整性检测方法流程图,该方法包括以下步骤:
步骤S001,使用CDD工业相机采集表面图像和表面灰度图像。
为了避免采集获取得到的接触器表面图像质量较差对后续接触器完整性检测的准确性效果影响,需要选择合适的图像拍摄采集设备。由于CCD工业相机相较于传统CMOS相机具有成像细节清晰无拖影、功率低、整体图像质量较高的特点。因此使用CCD工业相机对接触器表面进行拍摄,采集获取得到接触器表面RGB颜色空间下的图像。同时,为了消除由于拍摄采集工作环境中光照不充分导致的接触器表面入线孔位置出现虚影、阴影等现象,设置相应的LED光源。
使用CCD工业相机采集得到RGB图像记为表面图像,由于在工作环境中会出现噪声,随机噪声对后续接触器表面完整性检测的准确程度的影响,因此使用滤波对RGB图像进行处理得到预处理后的表面图像,尽可能减弱甚至消除采集过程中的随机噪声对接触器完整性检测过程中的影响,将预处理后的表面图像同样记为表面图像,后续所述表面图像皆为预处理后的表面图像。将表面图像进行灰度化得到表面灰度图像,将表面图像转换为HSV颜色空间下便于后续提取得到相应的表面图像中不同像素点位置处的颜色特征数值。同时还需要采集获取得到接触器入线孔位置正常无缺陷的图像,便于后续对接触器表面缺陷检测的进一步分析计算。
至此,得到了表面图像和表面灰度图像。
步骤S002,根据HSV线孔图像得到颜色变化差异系数,根据颜色变化差异系数得到像素点的入线孔劈裂破损特征方向和变化特征方向,根据入线孔劈裂破损特征方向的差异得到劈裂破损扩张系数。
对于获取得到的表面灰度图像,但表面图像中背景信息十分繁杂,不利于对接触器入线口位置处的劈裂破损状态进行检测和判断。因此将表面灰度图像作为输入,使用OTSU算法对表面灰度图像进行分割得到表面二值图像,其中表面二值图像上的线孔区域内灰度值为1,表面二值图像上其他区域的灰度值为0,由此得到了一张线孔掩膜。
使用线控区域掩膜对表面图像进行遮罩,即线孔掩膜和表面图像每个通道中同位置的像素点灰度值相乘,获取得到接触器表面入线孔区域局部的RGB图像,简称为RGB线孔图像。将RGB线孔图像从RGB颜色空间转换到HSV颜色空间,得到HSV线孔图像,根据HSV线孔图像中不同像素点在不同通道上的值得到每个像素点的颜色变化差异系数,公式如下:
Figure SMS_13
式中,
Figure SMS_23
表示为HSV线孔图像中第
Figure SMS_15
个像素点在H通道上的灰度值,
Figure SMS_19
表示为HSV线 孔图像中第
Figure SMS_25
个像素点在S通道上的灰度值,
Figure SMS_28
表示为HSV线孔图像中第
Figure SMS_26
个像素点在V通道 上的灰度值,
Figure SMS_29
表示为HSV线孔图像中第
Figure SMS_24
个像素点的八邻域内的第k个像素点在H通道上 的灰度值,
Figure SMS_27
表示为HSV线孔图像中第
Figure SMS_14
个像素点的八邻域内的第k个像素点在S通道上的 灰度值,
Figure SMS_21
表示为HSV线孔图像中第
Figure SMS_17
个像素点的八邻域内的第k个像素点在V通道上的灰 度值,
Figure SMS_20
为以2为底的底数函数,
Figure SMS_18
为意义参数,
Figure SMS_22
表示为HSV线孔图像中第
Figure SMS_16
个像素点 的颜色变化差异系数。
底数函数的作用是原始HSV颜色通道数值进行变换,避免过大的数值对后续计算 过程产生较大的计算误差,令
Figure SMS_30
可以避免计算过程中产生的非负数对后续进一步计算 过程的影响,本实施例不对
Figure SMS_31
的取值进行限定,实施过程中可以设定其他值,本实施例以
Figure SMS_32
为例进行叙述。
通过上述公式可以计算获取得到RGB线孔图像处像素点的颜色变化差异系数
Figure SMS_33
的数值大小,将RGB线孔图像的像素点所在区域记为线孔局部区域,由于灰度图像线孔局部 区域中正常像素点位置颜色变化差异不大,因此计算获取得到的线孔局部区域中像素点的 颜色变化差异系数
Figure SMS_34
数值较小。反之,当对应位置出现由于外力导致的劈裂破损时,对应 的劈裂区域像素点位置颜色数值发生较大变化,通过计算获取得到的接触器表面入线孔像 素点位置处的颜色变化差异系数
Figure SMS_35
会相应增大。
对于表面灰度图像的线孔局部区域,以每个像素点为中心,构成大小为
Figure SMS_36
的局 部窗口,对于该窗口中不同像素点处的颜色变化差异系数构成大小为
Figure SMS_37
的局部矩阵,根 据局部矩阵构建得到像素点
Figure SMS_38
位置处的颜色差异海森矩阵
Figure SMS_39
。计算颜色差异海森矩阵的特 征值,得到最小特征值对应的特征向量,将该向量所指向的方向记为入线孔劈裂破损特征 方向
Figure SMS_40
。海森矩阵的获得以及海森矩阵特征值与特征向量的求解过程是一种公知技术,在 此不再赘述。
得到的特征向量
Figure SMS_41
的方向对应了线孔局部区域中表面颜色差异系数变化较为平 缓的方向,即入线孔劈裂特征方向。反之线孔局部区域处海森矩阵最大特征值对应的特征 向量的方向对应了颜色差异系数变化剧烈的像素点方向,与入线孔劈裂特征方向相垂直, 该特征向量所指向的方向记为第i个像素点的变化特征方向。同理得到所有像素点的入线 孔劈裂特征方向和变化特征方向。
对于每个像素点,以其所对应的入线孔劈裂特征方向为中间方向,入线孔劈裂特 征方向顺时针旋转45度,得到方向范围的结束值,入线孔劈裂特征方向逆时针旋转45度,得 到方向范围的起始值,令起始值对应的方向到结束值对应的方向构成的90度角度为角度变 化范围,所述如图2所示,图中
Figure SMS_42
为第i个像素点的入线孔劈裂特征方向。
在线孔局部区域中以第i个像素点为中心的5×5窗口区域内,获取窗口区域内所 有像素点的入线孔劈裂特征方向,若这些特征方向在以第i个像素点对应的角度变化范围 内,保留这些特征方向,将这些特征方向对应的像素点记为集合
Figure SMS_44
,将集合
Figure SMS_46
的像素点数量 记为
Figure SMS_48
;对于集合
Figure SMS_45
内的第s个像素点,统计第s个像素点的变化特征方向上的像素点属于 窗口区域的像素点的数量,记为
Figure SMS_47
,获取
Figure SMS_49
的像素点中的第t个像素点的颜色变化差 异系数,记为
Figure SMS_50
, 第t个像素点的入线孔劈裂破损特征方向,记为
Figure SMS_43
需要说明的是,像素点的变化特征方向上的像素点的数量,是指以像素点为端点做一条与像素点变化特征方向同向的一条射线并在在该射线上的像素点的数量。
根据每个像素点的颜色变化差异系数和像素点对应的在角度变化范围内的像素点的颜色变化差异系数得到每个像素点的劈裂破损扩张系数,公式如下:
Figure SMS_51
式中,
Figure SMS_53
为线孔局部区域中第i个像素点的颜色变化差异系数,
Figure SMS_56
为线孔局 部区域中第i个像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点,
Figure SMS_58
为 线孔局部区域中第i个像素点对应的入线孔劈裂特征方向,
Figure SMS_54
为线孔局部区域中第i个 像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点的入线孔劈裂特征方 向,
Figure SMS_55
为线孔局部区域中第i个像素点对应的集合的像素点数量,
Figure SMS_57
为线孔局部区域中 第i个像素点对应的集合的第s个像素点的变化特征方向上的像素点数量,
Figure SMS_59
表示为计算 方向的角度,
Figure SMS_52
表示第i个像素点的劈裂破损扩张系数。
计算得到线孔局部区域中每个像素点的劈裂破损扩张系数,将劈裂破损扩张系数进行线性归一化处理。
当接触器入线孔位置处由于机械外力导致的入线孔出现劈裂破损缺陷时,在接触 器入线孔劈裂破损特征方向周围方向上会出现也会一定程度的劈裂破损,当入线孔位置处 的劈裂破损越严重时,计算得到的像素点周围局部方向上的劈裂破损越多,方向差异越大。 同时由于不同方向的劈裂破损像素点同为劈裂破损像素点,劈裂破损特征方向对应的颜色 变化差异越小,通过计算得到对应的像素带点
Figure SMS_60
位置处的劈裂破损扩张系数
Figure SMS_61
数值会相应 增大。
步骤S003,获取特征窗口,根据劈裂破损扩张系数计算得到自适应扩张变化宽度,根据自适应扩张变化宽度得到特征窗口的特征值。
在线孔局部区域中,不同像素点处的劈裂损伤程度可能有所不同,因此需要对传统Haar特征描述算子进行自适应调节。
根据Haar特征描述算子的工作原理可知,需要对Haar特征描述算子的窗口内的像素点进行标记,需要标记出Haar特征描述算子的窗口内的黑色区域和白色区域,需要说明的是,所述的黑色和白色是公知的Haar特征描述算子中的概念,本实施例在也引用这种概念,本实施例中将Haar特征描述算子的窗口内的黑色区域和白色区域分别称为黑色劈裂特征提取部分和白色劈裂特征提取部分,将Haar特征描述算子的窗口记为特征窗口。
根据劈裂破损扩张系数调整黑色劈裂特征提取部分的大小,公式如下:
Figure SMS_62
式中,
Figure SMS_63
为Haar特征描述算子的特征窗口内的黑色劈裂特征提取部分大小,黑色劈 裂特征提取部分的大小为
Figure SMS_64
,在本实施例中取
Figure SMS_65
为3,
Figure SMS_66
为表面灰度图像中第i个像素点 的劈裂破损扩张系数,
Figure SMS_67
为Haar特征描述算子的窗口中所有像素点的劈裂破损扩张系数 的均值大小,
Figure SMS_68
为黑色劈裂特征提取部分调整后的宽度,将该值向上取整,特征窗口的大 小在本实施例中取宽度为9,特征窗口的中心点即为第i个像素点。
通过上述公式可以计算得到黑色劈裂特征提取部分调整后的宽度
Figure SMS_69
的数值大 小,当对应像素点的位置发生较为严重的劈裂破损时,对应主劈裂破损方向周围方向也会 出现相应的劈裂破损缺陷,为了覆盖提取计算不同方向上的劈裂破损特征,需要对Haar特 征描述算子覆盖宽度进行自适应缩放。
当像素点所在的位置出现了较为严重的劈裂破损时,此时通过计算得到的劈裂破 损扩张系数
Figure SMS_70
大于窗口均值
Figure SMS_71
的数值,对特征窗口内黑色劈裂特征提取部分进行扩大,获 取得到的劈裂破损扩张系数
Figure SMS_72
小于窗口均值
Figure SMS_73
时,对特征窗口内黑色劈裂特征提取部分 会相应缩小,进可能避免过多的覆盖到正常像素点区域引起计算过程中的误差。
具体的,在未调整时,黑色劈裂特征提取部分的中心点和特征窗口的中心相同,黑 色劈裂特征提取部分的初始宽度
Figure SMS_74
为3,若经过计算后,若黑色劈裂特征提取部分宽度的大 小为奇数,那么中心点位置不变,将
Figure SMS_75
作为黑色劈裂特征提取部分的宽度,若经过计算后 黑色劈裂特征提取部分宽度的大小为偶数,那么初始黑色劈裂特征提取部分位置不变,此 时以中心点为中心作竖直直线和水平直线将黑色劈裂特征提取部分分为四部分,第一部分 为左上部分,第二部分为右上部分,第三部分为右下部分,第四部分为左下部分,每个部分 对应两个扩充方向,左上部分对应向左和向上扩充,右上部分对应向右和向上扩充,右下部 分对应向右和向下扩充,左下部分对应向左和向下扩充,此时得到特征窗口中心点的入线 孔劈裂特征方向,此时若入线孔劈裂特征方向在第几个部分,则得到该部分对应的扩充方 向,黑色劈裂特征提取部分向扩充方向上扩充Dq个像素,其中
Figure SMS_76
,值得说明的 是,将黑色劈裂特征提取部分分为四部分的直线,水平方向左侧直线属于第一部分,竖直方 向上侧直线属于第二部分,水平方向右侧直线属于第三部分,竖直方向下侧直线属于第四 部分。
以下举一个例子说明为黑色劈裂特征提取部分的宽度为偶数的情况,例如计算后的宽度大小为6,中心点的入线孔劈裂特征方向为水平向右的方向,那么由于水平右侧直线属于第三部分,第三部分对应向右和向下扩充,因此将黑色劈裂特征提取部分向右扩充6-3个像素点大小,向下扩充6-3个像素点大小,具体如图3所示,该图中的1表示初始的黑色劈裂特征提取部分,该图中的2表示初始的白色劈裂特征提取部分,该图中的3表示黑色劈裂特征提取部分扩充后的部分。
在Haar特征描述算子中,黑色劈裂特征提取部分随着对应像素点位置处的劈裂破损严重程度自适应变化,当对应的像素点的位置处劈裂破损较为严重时,对应的黑色劈裂特征提取部分也会随之相应增大。
对于每个特征窗口,根据特征窗口内黑色劈裂特征提取部分和白色劈裂特征提取部分像素点的颜色变化差异系数的差异得到特征窗口的特征数值,公式如下:
Figure SMS_77
式中,
Figure SMS_78
表示第i个特征窗口内黑色劈裂特征提取部分的第
Figure SMS_79
个像素点的颜色 变化差异系数,
Figure SMS_80
表示第i个特征窗口内白色劈裂特征提取部分的第
Figure SMS_81
个像素点的颜色 变化差异系数,
Figure SMS_82
为特征窗口内黑色劈裂特征提取部分的像素点数量,
Figure SMS_83
为特征窗口内 白色色劈裂特征提取部分的像素点数量,
Figure SMS_84
表示第i个特征窗口的特征数值。当特征数值 越大,说明对应窗口中发生劈裂破损缺陷的可能性越高,其中第i个特征窗口为以第i个像 素点为中心的特征窗口。
针对接触器表面入线孔孔劈裂破损严重程度,对传统Haar特征描述算子的特征描述窗口进行自适应调节变化,与入线孔劈裂破损变化相吻合,避免传统Haar特征描述算子中无法对变化的劈裂方向特征进行较为准确计算导致对后续接触器完整性检测精确度较低的影响。
至此得到了每个特征窗口的特征数值。
步骤S004,将表面图像和标准表面图像的特征数值的差异来判断接触器表面的完整性。
通过上述步骤获得表准无缺陷的接触器表面图像记为标准表面图像,同样得到线 孔局部区域,得到标准特征数值
Figure SMS_85
,根据标准特征数值和特征数值的差异判断线孔局部 区域是否出现劈裂破损,公式如下:
Figure SMS_86
式中,
Figure SMS_87
表示第i个特征窗口的特征数值,
Figure SMS_88
表示第i个特征窗口的标准特征数 值,
Figure SMS_89
表示特征窗口的数量,
Figure SMS_90
为特征值差异性。
使用同样的方法对于标准表面图像和表面图像划分的窗口相同,得到相同数量相同大小的窗口,都为N,当特征值差异性越大时,说明待检测的接触器入线孔与正常标准的接触器入线孔之间的变化差异越大,使用线性归一化的方法将特征值差异性归一化,此时若归一化后的特征值差异性大于经验阈值0.7时,认为此时接触器入线孔部分出现了劈裂破损,接触器表面的完整性不符合要求。
至此完成了接触器的完整性检测。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.基于机器视觉的接触器完整性检测方法,其特征在于,该方法包括以下步骤:
获得表面灰度图像,对表面灰度图像进行分割得到线孔掩膜,根据线孔掩膜得到HSV线孔图像;
根据HSV线孔图像中每个像素点与其邻域像素点在H通道、S通道、V通道的灰度值差异得到每个像素点颜色变化差异系数;
在线孔局部区域内,每个像素点得到一个第一窗口,将第一窗口内像素点的颜色变化差异系数构建颜色差异海森矩阵,根据颜色差异海森矩阵的特征值得到每个像素点的入线孔劈裂破损特征方向和变化特征方向;
根据每个像素点的入线孔劈裂破损特征方向得到角度变化范围,将第一窗口内的像素点记为窗口像素点,将所有入线孔劈裂破损特征方向处于像素点的角度变化范围内的窗口像素点记为第一集合,将在第一集合中的每个窗口像素点的变化特征方向上的窗口像素点记为第二集合,根据第二集合上的每个窗口像素点的方向差异与颜色变化差异系数的差异得到每个像素点的劈裂破损扩张系数;
获取在线孔局部区域中像素点的特征窗口、黑色劈裂特征提取部分和白色劈裂特征提取部分,根据劈裂破损扩张系数计算得到自适应扩张变化宽度,根据自适应扩张变化宽度的奇偶性对黑色劈裂特征提取部分大小进行调整,根据调整后的黑色劈裂特征提取部分和白色劈裂特征提取部分的像素点数量得到特征窗口的特征数值;
获得标准特征窗口,根据所有标准特征窗口和特征窗口的特征数值的差异判断接触器入线孔部分是否出现了劈裂破损,完成接触器完整性的检测。
2.根据权利要求1所述的基于机器视觉的接触器完整性检测方法,其特征在于,所述对表面灰度图像进行分割得到线孔掩膜的方法为:
使用OTSU算法对表面灰度图像进行分割得到表面二值图像,表面二值图像上的线孔区域内灰度值为1,表面二值图像上其他区域的灰度值为0,将表面二值图像记为线孔掩膜。
3.根据权利要求1所述的基于机器视觉的接触器完整性检测方法,其特征在于,所述根据颜色差异海森矩阵的特征值得到每个像素点的入线孔劈裂破损特征方向和变化特征方向的方法为:
将颜色差异海森矩阵计算得到的最小特征值对应的特征向量的方向记为入线孔劈裂破损特征方向,颜色差异海森矩阵计算得到的最大特征值对应的特征向量的方向记为变化特征方向。
4.根据权利要求1所述的基于机器视觉的接触器完整性检测方法,其特征在于,所述根据每个像素点的入线孔劈裂破损特征方向得到角度变化范围的方法为:
对于每个像素点,以其所对应的入线孔劈裂特征方向为中间方向,入线孔劈裂特征方向顺时针旋转45度,得到方向范围的结束值,入线孔劈裂特征方向逆时针旋转45度,得到方向范围的起始值,令起始值对应的方向到结束值对应的方向构成的90度角度为角度变化范围。
5.根据权利要求1所述的基于机器视觉的接触器完整性检测方法,其特征在于,所述根据第二集合上的每个窗口像素点的方向差异与颜色变化差异系数的差异得到每个像素点的劈裂破损扩张系数的方法为:
Figure QLYQS_1
式中,
Figure QLYQS_4
为线孔局部区域中第i个像素点的颜色变化差异系数,/>
Figure QLYQS_6
为线孔局部区域中第i个像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点,/>
Figure QLYQS_8
为线孔局部区域中第i个像素点对应的入线孔劈裂特征方向,/>
Figure QLYQS_3
为线孔局部区域中第i个像素点对应的集合的第s个像素点的变化特征方向上的第t个像素点的入线孔劈裂特征方向,/>
Figure QLYQS_5
为线孔局部区域中第i个像素点对应的集合的像素点数量即第一集合中的像素点数量,
Figure QLYQS_7
为线孔局部区域中第i个像素点对应的第一集合的第s个像素点的变化特征方向上的像素点数量,即第二集合中的像素点数量,/>
Figure QLYQS_9
表示为计算方向的角度,/>
Figure QLYQS_2
表示第i个像素点的劈裂破损扩张系数。
6.根据权利要求1所述的基于机器视觉的接触器完整性检测方法,其特征在于,所述根据自适应扩张变化宽度的奇偶性对黑色劈裂特征提取部分大小进行调整的方法为:
在未调整时,黑色劈裂特征提取部分的中心点和特征窗口的中心相同,预设一个黑色劈裂特征提取部分的初始宽度为
Figure QLYQS_10
,若黑色劈裂特征提取部分宽度的大小为奇数,那么中心点位置不变,将/>
Figure QLYQS_11
作为黑色劈裂特征提取部分的宽度,若黑色劈裂特征提取部分宽度的大小为偶数,那么初始黑色劈裂特征提取部分位置不变,此时以中心点为中心作竖直直线和水平直线将黑色劈裂特征提取部分分为四部分,第一部分为左上部分,第二部分为右上部分,第三部分为右下部分,第四部分为左下部分,每个部分对应两个扩充方向,左上部分对应向左和向上扩充,右上部分对应向右和向上扩充,右下部分对应向右和向下扩充,左下部分对应向左和向下扩充,此时得到特征窗口中心点的入线孔劈裂特征方向,此时若入线孔劈裂特征方向在第几个部分,则得到该部分对应的扩充方向,黑色劈裂特征提取部分向扩充方向上扩充Dq个像素,其中/>
Figure QLYQS_12
,将黑色劈裂特征提取部分分为四部分的直线,水平方向左侧直线属于第一部分,竖直方向上侧直线属于第二部分,水平方向右侧直线属于第三部分,竖直方向下侧直线属于第四部分。
CN202310518570.9A 2023-05-10 2023-05-10 基于机器视觉的接触器完整性检测方法 Active CN116228775B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310518570.9A CN116228775B (zh) 2023-05-10 2023-05-10 基于机器视觉的接触器完整性检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310518570.9A CN116228775B (zh) 2023-05-10 2023-05-10 基于机器视觉的接触器完整性检测方法

Publications (2)

Publication Number Publication Date
CN116228775A CN116228775A (zh) 2023-06-06
CN116228775B true CN116228775B (zh) 2023-07-04

Family

ID=86570060

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310518570.9A Active CN116228775B (zh) 2023-05-10 2023-05-10 基于机器视觉的接触器完整性检测方法

Country Status (1)

Country Link
CN (1) CN116228775B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117350985B (zh) * 2023-10-24 2024-04-19 云途信息科技(杭州)有限公司 井盖病害检测方法、装置、计算机设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004170394A (ja) * 2002-10-29 2004-06-17 Toppan Printing Co Ltd 刷版検査装置及び刷版検査システム
WO2012154320A1 (en) * 2011-03-31 2012-11-15 Sage Electrochromics, Inc Method and system for detecting and repairing defects in an electrochromic device using thermal imaging
CN114820493A (zh) * 2022-04-15 2022-07-29 西南交通大学 一种制孔导致的复合材料孔口劈裂检测方法
CN115496918A (zh) * 2022-11-16 2022-12-20 山东高速股份有限公司 基于计算机视觉的高速公路路况异常检测方法及系统
CN115631173A (zh) * 2022-10-28 2023-01-20 兰州理工大学 一种复合薄膜缺陷识别方法
CN115937204A (zh) * 2023-01-09 2023-04-07 江苏惠汕新能源集团有限公司 一种焊管生产质量检测方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004170394A (ja) * 2002-10-29 2004-06-17 Toppan Printing Co Ltd 刷版検査装置及び刷版検査システム
WO2012154320A1 (en) * 2011-03-31 2012-11-15 Sage Electrochromics, Inc Method and system for detecting and repairing defects in an electrochromic device using thermal imaging
CN103562962A (zh) * 2011-03-31 2014-02-05 赛智电致变色公司 用于使用热成像检测和修复电致变色装置中的缺陷的系统和方法
CN114820493A (zh) * 2022-04-15 2022-07-29 西南交通大学 一种制孔导致的复合材料孔口劈裂检测方法
CN115631173A (zh) * 2022-10-28 2023-01-20 兰州理工大学 一种复合薄膜缺陷识别方法
CN115496918A (zh) * 2022-11-16 2022-12-20 山东高速股份有限公司 基于计算机视觉的高速公路路况异常检测方法及系统
CN115937204A (zh) * 2023-01-09 2023-04-07 江苏惠汕新能源集团有限公司 一种焊管生产质量检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Aleksandr V. Konoshenko ; Elena V. Shvedova.Diagnostics of Defective Areas of Liquid Insulation of Oil-Filled Electrical Equipment with Structural Heterogeneity.《 2019 International Russian Automation Conference (RusAutoCon)》.2019,第1-4页. *
基于机器视觉的发光字符的缺陷检测方法研究;李晋鑫沙玲;《农业装备与车辆工程》;第114-118页 *

Also Published As

Publication number Publication date
CN116228775A (zh) 2023-06-06

Similar Documents

Publication Publication Date Title
CN111028213B (zh) 图像缺陷检测方法、装置、电子设备及存储介质
CN116309537B (zh) 一种极耳模具表面油污的缺陷检测方法
CN116228775B (zh) 基于机器视觉的接触器完整性检测方法
CN115619793B (zh) 基于计算机视觉的电源适配器外观质量检测方法
CN108734704B (zh) 基于灰度方差归一化的输电导线断股检测方法
CN116337879B (zh) 一种电缆绝缘表皮磨损缺陷快速检测方法
CN115375588B (zh) 基于红外成像的电网变压器故障识别方法
CN112132196B (zh) 一种结合深度学习和图像处理的烟盒缺陷识别方法
CN115294099B (zh) 一种钢板轧制过程发纹缺陷的检测方法及系统
CN108037142B (zh) 基于图像灰度值的掩膜版光学缺陷检测方法
CN116188468B (zh) 一种hdmi线缆传输分拣智能控制系统
CN115631116B (zh) 基于双目视觉的飞行器电力巡检系统
CN116862910B (zh) 基于自动化裁切生产的视觉检测方法
CN116523921A (zh) 一种针对极耳翻折情况的检测方法、装置和系统
CN113996500A (zh) 一种基于视觉点胶机器人的点胶智能识别系统
CN116993718A (zh) 基于机器视觉的tft阵列基板缺陷检测方法
CN117152165A (zh) 感光芯片缺陷的检测方法、装置、存储介质及电子设备
CN113012121B (zh) 裸片扫描结果的处理方法、装置、电子设备与存储介质
CN110827272B (zh) 一种基于图像处理的轮胎x光图像缺陷检测方法
CN114359156A (zh) 基于图像识别的绝缘子掉串故障检测方法
CN117115172B (zh) 一种基于机器视觉的阿胶品质检测方法及系统
CN118096723B (zh) 一种机器人电缆生产质量视觉检测方法
CN117152687B (zh) 一种通信线路状态监测系统
CN114724041B (zh) 基于深度学习的电力设备红外热图的识别方法及系统
CN116805405B (zh) 用于铣床设备的智能防护方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20230606

Assignee: Zhejiang Mamba Intelligent Technology Co.,Ltd.

Assignor: Shide Electric Group Co.,Ltd.

Contract record no.: X2023980039869

Denomination of invention: Contactor Integrity Detection Method Based on Machine Vision

Granted publication date: 20230704

License type: Common License

Record date: 20230817

EE01 Entry into force of recordation of patent licensing contract