CN112784847B - 一种超高速撞击损伤检测图像的分割识别方法 - Google Patents

一种超高速撞击损伤检测图像的分割识别方法 Download PDF

Info

Publication number
CN112784847B
CN112784847B CN202110119960.XA CN202110119960A CN112784847B CN 112784847 B CN112784847 B CN 112784847B CN 202110119960 A CN202110119960 A CN 202110119960A CN 112784847 B CN112784847 B CN 112784847B
Authority
CN
China
Prior art keywords
image
pixel
infrared
segmentation
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110119960.XA
Other languages
English (en)
Other versions
CN112784847A (zh
Inventor
黄雪刚
雷光钰
谭旭彤
石安华
罗庆
覃金贵
周浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ultra High Speed Aerodynamics Institute China Aerodynamics Research and Development Center
Original Assignee
Ultra High Speed Aerodynamics Institute China Aerodynamics Research and Development Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ultra High Speed Aerodynamics Institute China Aerodynamics Research and Development Center filed Critical Ultra High Speed Aerodynamics Institute China Aerodynamics Research and Development Center
Priority to CN202110119960.XA priority Critical patent/CN112784847B/zh
Publication of CN112784847A publication Critical patent/CN112784847A/zh
Application granted granted Critical
Publication of CN112784847B publication Critical patent/CN112784847B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • G06F18/232Non-hierarchical techniques
    • G06F18/2321Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
    • G06F18/23213Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions with fixed number of clusters, e.g. K-means clustering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Probability & Statistics with Applications (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种超高速撞击损伤检测图像的分割识别方法,包括:提取每类缺陷的典型瞬态响应;获得红外重构图像;多目标优化算法结合分割模型对红外重构图像进行背景区域和缺陷区域的分离;在噪声去除、保留细节和保持边缘三种目的指导下构建红外图像分割函数;使用多目标优化算法结合分割模型在红外重构图像中对试件缺陷实现一次性分割,根据偏好来调整权重向量;对像素点进行类别划分,得到最后的分割图像。本发明利用多目标优化理论对红外重构图像中的撞击损伤区域进行分割,针对噪声问题和边缘模糊问题构造目标函数以提高分割的精度,缺陷检测率高,降低了误检率,有效提取出重构图像中的损伤缺陷区域,以便于复杂超高速撞击损伤的量化研究。

Description

一种超高速撞击损伤检测图像的分割识别方法
技术领域
本发明属于航天器维修保障与在轨风险评估技术领域,更具体地说,本发明涉及一种超高速撞击损伤检测图像的分割识别方法。
背景技术
航天器在发射和在轨运行过程中,极易遭受各类微小物体的意外撞击,比如太空垃圾碎片、微小流星体、剥落的涂层等。特别是日益增加的太空垃圾碎片对在轨航天的危害最大,由于这个微小碎片具有极高的撞击速度(通常达到几公里每秒甚至十几公里每秒),极易导致航天器表面产生各类超高速撞击损伤,比如穿孔、撞击坑、层裂、剥落等,使得航天器的结构发生破坏或者部件功能下降/失效。因此,为保证在轨航天器的正常工作,必须对航天器表面损伤进行有效的检测,从而对超高速撞击导致的风险进行评估,指导航天器的维修保障。可见,利用各类检测数据对损伤类型和损伤程度进行有效地识别和判读,这对于开展航天器损伤评估和风险预测是非常重要的。
红外热成像技术具有安全、直观、快速、高效、检测面积大、无接触等优点,在航天器在轨检测中发挥了重要作用,其基础原理是:基于傅里叶传热与红外辐射原理,当被检对象受到外部热激励时(太阳光照射或人工光源照射),由于材料缺陷的存在导致热传导过程受到影响,并表现为被检对象表面瞬态温度响应的差异,通过红外热像仪采集表面温度场响应,从而了解被检对象表面和内部的缺陷状态。红外成像仪采集到的数据是由多帧红外热图像构成的红外热图像序列数据,其包含了被检区域内每个像素点的温度变化信息(瞬态热响应曲线),通过对红外热图像序列数据进行分析和处理,获取缺陷的重构图像,从而实现对撞击损伤缺陷的可视化检测。
为了对损伤缺陷进行精确评估,就需要对缺陷的红外重构图像中目标缺陷区域与背景区域进行有效分离。区别于常规的自然可见光图像,红外图像具有较低的分辨率和模糊的边缘,尤其是在复杂的检测背景中,由于背景中存在其他热源或者是材料本身的热反射性强等原因,会导致背景区域重叠和混乱,降低目标与背景之间的对比度,严重干扰重构图像中的缺陷识别,并对缺陷区域精确提取和类型准确识别造成较大困难。为解决上述问题,需要通过图像分割算法对原始图像进行处理,将目标区域与背景区域有效分离,可见,正确分割缺陷成为目标识别过程中的关键步骤。在现有的研究中,通过利用FCM算法及其改进的算法对图像进行分割,但是这些分割问题往往面向的是一个损伤函数,即一个目标函数。一方面,如果在充分满足保留细节的前提下,缺陷的检测率虽有一定的提高,但是也保留了噪声,容易对缺陷识别造成误判,导致误检率的上升。另一方面,若只满足对图像进行整体去噪,由于微小空间碎片撞击导致的损伤缺陷尺寸小且数量多,这些同噪音近似的微小缺陷会一并随着去噪过程而去除,降低了缺陷的检测率和检测精度。因此,上述常规分割方法运用到本发明对象,即缺陷的红外重构图像中,由于不能权衡缺陷的误检率与检测率,分割效果不尽人意。特别是考虑到红外热图像反映的是试件的热辐射信息,容易受到环境、成像链路等影响,使得获得的缺陷红外重构图像背景噪声大。同时,由于缺陷区域与背景区域的表面热辐射能力的差异,使得缺陷的红外重构图像的边缘不够平滑、边缘区域划分不够清晰,也不利于图像分割。
为了降低缺陷的误检率并提高检测率,去除噪声并充分保留细节,我们设置了噪声消除函数和细节保留函数,并且考虑到红外图像反映的是通过施加热激励后不同区域的温度差异,而温度变化是连续的,因此各区域之间没有明显的轮廓划分,所以我们又引入了一个边缘保持函数,以实现对缺陷的准确分割。在设置噪声消除函数时,通过设置模糊因子充分考虑红外图像的邻域信息尽可能地消除噪声像素点对红外图像分割的影响,但是红外图像受到噪声影响较大,在噪声消除效果不好时,可能会出现相似的两类缺陷分为一类、将噪声和边界分为一类的情况,故我们引入了一个衡量类间离散度的函数,能够灵活调整各类别聚类中心之间的距离,来解决相似性较小的不同缺陷类别之间的像素点难以区分的问题。在设置细节保留函数时,为了保留更多的缺陷细节信息,需要分割后图像的紧致性小且分离性大,并且为了增强微小缺陷信息,这里考虑到邻域像素点和中心像素点位置和颜色之间的相关性,引入了一个相关性系数,如果邻域像素与中心像素的相关性较大,则在目标函数中考虑该像素的信息,如果邻域像素与中心像素的相关性较小,则在目标函数中不考虑该像素的信息。在设置边缘保持函数时,利用局部梯度信息,通过计算边缘像素来对红外图像进行边缘修订,准确分割的关键是邻域像素对中心像素的影响程度,因此这里基于像素灰度差的相关性来计算邻域像素对中心像素的影响程度,相关性大的,说明该邻域像素和中心像素属于同一类,并通过放大邻域像素对中心像素隶属度的影响来增强缺陷边缘信息,从而提高图像分割效果。
在实现三个分割性能时,去除噪声的同时会模糊掉一些细节和边缘信息,而保留清晰的细节和边缘信息又会影响去除噪声的效果。为了实现红外图像的准确分割,我们既想在去除噪声的同时又能保留清晰的细节和边缘信息。若仅用分割模型,实现三个分割性能的目标函数在构成分割函数时对应的权重系数待定,需要不断调试来确定权重系数,以控制各个目标函数之间的平衡,算法的计算效率和普适性低,不能保证最后红外重构图像的分割质量。基此,在设置了实现三个分割性能的目标函数构成分割模型后,本发明将多目标优化算法和分割模型相结合,通过权重向量将多目标优化问题分解为若干个标量子问题,每个子问题的权重向量的分量能够反映每个目标函数对分割目标函数重要程度,利用多目标算法在空间中搜索的过程中结合自适应权重向量调整,在调整权重向量时,由于红外图像受噪声影响大,并且设置的细节保留函数和边缘保持函数都与缺陷的细节信息有关,所以我们希望在分割目标函数中,噪声消除函数的影响大一点,将噪声消除作为偏好,基于这个偏好来调整权重向量,根据权重向量来自适应匹配各个目标函数的权重系数,来控制各个目标函数之间的平衡,并且同时求取各类别的聚类中心,再通过计算像素点与聚类中心的距离,将像素点进行类别划分,实现一次性分割红外重构图像。
本发明基于多目标优化分割的缺陷检测,使用红外热像仪记录被测对象表面温度场变化,满足原位、非接触的无损检测需求,通过对红外热图像序列进行分析处理,满足对复杂缺陷高精度检测和识别需求。算法使用变换行列步长的方式对红外热图像序列进行采样,获得具有典型温度变化特征的瞬态热响应曲线构成的数据集,提高后续数据分类的速度。利用FCM算法得到个像素点与聚类中心的隶属度,对比隶属度大小对数据集中每一瞬态热响应曲线进行分类,并选取分类后的典型热响应曲线进行红外热图像重建,获得缺陷重构图像。在此基础上,本发明进一步利用多目标优化理论进行红外重构图像中的缺陷分割,针对噪声问题和边缘模糊问题分别构造合适的目标函数以提高分割的精度,既保证了缺陷的检测率高同时也降低了误检率,从而有效提取出重构图像中的损伤缺陷区域,以便于复杂缺陷的量化研究。
发明内容
本发明的一个目的是解决至少上述问题和/或缺陷,并提供至少后面将说明的优点。
为了实现根据本发明的这些目的和其它优点,提供了一种超高速撞击损伤检测图像的分割识别方法,包括:
步骤一、对采集到的试件红外数据在提取有效信息后,按照缺陷类型对其进行分类并提取每类缺陷的典型瞬态响应;
步骤二、将选择出的典型瞬态热响应构成变换矩阵,获得红外重构图像;
步骤三、使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离;在噪声去除、保留细节和保持边缘三种目的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置多目标优化问题;
步骤四、使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割,具体步骤为:
步骤S41、多目标优化算法参数初始化;获取M×N个均匀分布的权重向量,并计算每个权重向量最近的T个权重向量;在满足多目标优化问题的可行空间中均匀采样产生初始种群;初始化多目标优化函数;采用基于切比血夫分解模型子问题;设置外部种群EP为空集;
步骤S42、进化多目标优化算法,更新种群中的个体;每次更新个体后,将噪声消除作为偏好,根据偏好来调整权重向量;
步骤S43、从多目标优化算法得到的最优聚类中心集中选择权衡解,作为最终的聚类中心;
步骤S44、计算红外热图像中的像素点到聚类中心的距离;
步骤S45、根据红外热图像中像素点到聚类中心的距离对像素点进行类别划分,划分结束后得到最后试件缺陷红外重构图像的分割图像。
优选的是,其中,所述步骤一的具体方法为:对采集到的试件d维红外热图像序列S(m,n,:),m=1,...,M,n=1,...N,采用分块分步长的方式提取有效的瞬态热响应,其中m和n分别表示三维矩阵的第m行和第n列,第三个维度表示红外热图像的帧数;对提取出的有效瞬态热响应根据缺陷类型K,对其划分为K个区域,从划分好的各类缺陷区域中提取最能代表当前类别缺陷特征的典型瞬态热响应。
优选的是,其中,所述步骤二获得红外重构图像的具体方法为:由步骤一提取出的K个d维典型瞬态热响应,获得维度为d×K的线性变化矩阵H1,将S(m,n,:)由三维矩阵化为二维矩阵,即对红外热视频中每一帧图像向量化,将每一帧图像矩阵按列取值并排列后得到包含一帧的像素点温度信息的向量且作为新矩阵的行向量,构建出一个新的二维矩阵P(x,y)a×b,a=d,b=M×N;用矩阵H1对P进行线性变换,即
Figure BDA0002921662540000051
其中
Figure BDA0002921662540000052
为矩阵H1的K×d维伪逆矩阵;将二维图像矩阵O再按行取值构成原图像尺寸大小的二维图像,得到K张大小为M×N的红外重构图像。
优选的是,其中,所述步骤三使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离的具体方法包括:在噪声去除、保留细节及保持边缘三中目的的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置的多目标优化问题如下式所示:
minF(ν)=[f1(ν),f2(v),f3(v)]T
s.t v=(v1,…,vc)T
其中,c为分类数目,v=(v1,…,vc)T表示一组候选聚类中心;利用权重向量在空间中搜索最能权衡好这三个目标函数的最优解,作为聚类中心;
步骤S31、f1(v)为解决噪声问题的单目标噪声去除函数SGNS;在FCM算法中引入模糊因子,利用重构图像邻域窗内像素点的欧式距离dij来确定像素点间的空间约束关系的基础上,正对差异不大的相近类别之间难以区分的问题再引入一个类间离散度度量函数;f1(v)的表达式如下式所示:
Figure BDA0002921662540000061
其中,MN是红外重构图像中像素点个数,c是聚类数目,uti是像素点xi对聚类中心vt的隶属度,Vati为模糊因子,其定义式为:
Figure BDA0002921662540000062
Ni是以像素点xi为中心的邻域像素集合,dij是像素xi和像素xj的欧氏距离,距离中心像素越近的邻域像素点对中心像素的影响作用也越强;ηt为类间离散度参数,vt为聚类中心代表当前类别像素点的温度均值,
Figure BDA0002921662540000063
为红外图像中所有像素点的温度均值;函数f1(v)需要满足:
Figure BDA0002921662540000064
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000065
Figure BDA0002921662540000066
聚类中心vt更新公式为:
Figure BDA0002921662540000067
步骤S32、f2(v)为解决细节保留问题的单目标细节保留函数SGDR;考虑图像局部空间能进一步指导图像像素的分割,有利于决绝边缘模糊的问题,并引入一个衡量像素位置及像素颜色的相关系数mij,构造细节保留函数f2(v)如下式所示:
Figure BDA0002921662540000068
其中,MN是红外重构图像中像素点个数,c是聚类数目,vt是聚类中心,uti是像素点xi对聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Ni是像素点xi的邻域像素,
Figure BDA00029216625400000711
是邻域像素集合Ni中的像素个数,α是控制空间信息约束的参数,
Figure BDA0002921662540000071
表示邻域像素xi与中心像素vt的相关性,记像素xi和vt的空间坐标分别为(xim,yin)、(vtm,vtn),灰度值分别为g(xi)、g(vt),则有
Figure BDA0002921662540000072
Figure BDA0002921662540000073
其中,λs是空间尺度的影响因子,λg是灰度尺度影响因子,
Figure BDA0002921662540000074
为以像素xi为中心的邻域像素的平均灰度方差,其计算式为:
Figure BDA0002921662540000075
函数f2(v)需要满足:
Figure BDA0002921662540000076
利用拉格朗日数乘法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000077
Figure BDA0002921662540000078
聚类中心vt的更新公式为:
Figure BDA0002921662540000079
步骤S33、f3(v)为解决边缘保持问题的单目标边缘保持函数SOEM;为了获得准确的分割结果,在目标函数中引入一个根据灰度级进行分割的边缘保持函数,并且为了加强边缘信息,引入了一个放大函数Ati放大邻域像素xi对中心像素隶属度的影响,构造的边缘保持函数如下式所示:
Figure BDA00029216625400000710
其中,MN是红外重构图像中像素点个数,c是聚类数目,n表示像素点的灰度值,uti表示灰度值为n的像素点xi关于当前聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Un为红外图像灰度级为n的数目,ψn为灰度值为n的像素点个数,
Figure BDA0002921662540000081
为像素点xi的邻域像素的灰度值的加权和,
Figure BDA0002921662540000082
Ni是xi的邻域像素集合,
Figure BDA0002921662540000083
是集合Ni中像素点的个数,β是局部空间信息影响因子;
Figure BDA0002921662540000084
Ni是以像素xi为中心的邻域像素集合,
Figure BDA0002921662540000085
是集合Ni中的像素点个数,
Figure BDA0002921662540000086
g(xi)和g(xj)分别表示像素点xi和其邻域像素xj的灰度值,
Figure BDA0002921662540000087
为邻域像素集合Ni中的像素xj与中心像素xi的平均灰度差;函数f3(v)需要满足:
Figure BDA0002921662540000088
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000089
Figure BDA00029216625400000810
聚类中心的更新公式为:
Figure BDA00029216625400000811
由此完成了红外图像分割函数的构建。
优选的是,其中,所述步骤四使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割的具体步骤为:
步骤S41、多目标优化算法参数初始化,具体步骤包括:
步骤S411、多目标优化的目标函数F(v),最大迭代次数gmax,阈值ζ、ε;种群大小M×N;每个邻域中权重向量的个数T;
步骤S412、获取M×N个均匀分布的权重向量:λ1,…,λMN并计算每个权重向量最近的T个权重向量B(i)={i1,…,iT},i=1,…,MN,
Figure BDA0002921662540000091
是λi最近的T个权重向量;
步骤S413、在满足多目标优化问题的可行空间中均匀采样产生初始种群s1,…,sMN,令FVi=F(si),i=1,…,MN;
步骤S414、初始化
Figure BDA0002921662540000092
满足其为图像分割多目标优化问题中的每个目标函数的最优值;
步骤S415、采用基于切比雪夫的分解模型分解子问题,其中第j个子问题为:
Figure BDA0002921662540000093
上式中,
Figure BDA0002921662540000094
是第j个子问题的权重向量,
Figure BDA0002921662540000095
控制噪声抑制函数的权值,
Figure BDA0002921662540000096
控制细节保留函数的权重,
Figure BDA0002921662540000097
控制边缘保持函数的权重;
Figure BDA0002921662540000098
Figure BDA0002921662540000099
Figure BDA00029216625400000910
分别三个函数当前的最优函数值;
步骤S416、设置外部种群EP为空集;
步骤S42、进行多目标优化算法更新;当小于最大迭代次数gmax的时候,每迭代一次更新权重向量一次,先进入步骤S421更新个体,再进行步骤S422调整权重向量;
步骤S421、更新种群中的个体,包括:
步骤S4211、复制:从权重向量B(i)中随机选取两个序号k,l,运用差分进化算法由sk,sl产生一个对于图像分割多目标问题新的解e;
步骤S4212、改进:对e进行图像分割多目标优化问题中所提出的约束条件处理产生e′;
步骤S4213、更新参考点f*:若参考点的数值f*<f*(e'),则f*=f*(e');
步骤S4214、根据Tchebycheff的数学表达式若gte(e'|λj,f*)≤gte(sjj,f*),j∈B(i),则sj=e′,,FVi=F(e′),更新邻域解,种群中的个体更新便完成;
步骤S422、调整权重向量,具体包括:
步骤S4221、计算种群中的个体
Figure BDA00029216625400000911
到当前聚类中心
Figure BDA00029216625400000912
的距离:
Figure BDA00029216625400000913
选择使得Dist最小的U个个体作为理想参考点;
步骤S4222、找到
Figure BDA0002921662540000101
为中心,半径为r的高维球区域
Figure BDA0002921662540000102
内的所有个体
Figure BDA0002921662540000103
计算
Figure BDA0002921662540000104
内所有个体的标准差:
Figure BDA0002921662540000105
其中,
Figure BDA0002921662540000106
为分布在
Figure BDA0002921662540000107
内所有个体的平均值,R为
Figure BDA0002921662540000108
内的个体数目,
Figure BDA0002921662540000109
r=1,…,R为分布在
Figure BDA00029216625400001010
内的个体;
步骤S4223、从U个个体中选择标准差
Figure BDA00029216625400001011
最小的Up个个体,作为偏好区域参考点,对这Up个个体的每个个体
Figure BDA00029216625400001012
和其对应的权重向量λUp做以下更新操作:
步骤S42231、计算基权重向量:
Figure BDA00029216625400001013
其中f*为图像分割多目标优化问题中每个目标函数的最优值;
步骤S42232、在种群中找到离
Figure BDA00029216625400001014
欧式距离最远的个体
Figure BDA00029216625400001015
其中,
Figure BDA00029216625400001016
并找到其对应的权重向量λm
步骤S42233、计算生成的权重向量:
λUpnew=λUp+step·λm
其中,λUpnew=(λUpnew1Upnew2Upnew3),Step为设置的步长参数;
步骤S42234、利用偏好区域参考点
Figure BDA00029216625400001017
和距离最远的个体
Figure BDA00029216625400001018
随机生成一个新解
Figure BDA00029216625400001019
有:
Figure BDA00029216625400001020
步骤S42235、生成新的个体
Figure BDA00029216625400001021
作为新的聚类中心:以
Figure BDA00029216625400001022
为中心,根据设置的三类目标函数对应的隶属度计算公式和聚类中心计算公式,计算当前隶属度:
Figure BDA00029216625400001023
根据当前隶属度计算新聚类中心,计算式为:
Figure BDA00029216625400001024
步骤S42236、用新的个体
Figure BDA00029216625400001025
替换
Figure BDA00029216625400001026
权重向量调整完成;
步骤S423、更新EP:移除所有被F(e′)支配的向量,若F(e′)不被EP里面向量所支配,把e′加入EP;
步骤S43、终止迭代;若满足终止条件g=gmax;输出EP得到最优即得到使图像分割多目标问题达到最优聚类中心集;否则增加迭代次数g=g+1转到步骤S42;
步骤S45、从步骤S43得到的最优聚类中心集中,选取权衡解sq作为最终的聚类中心,计算空间中像素点xi,i=1,…,MN到各聚类中心sq的距离:
Figure BDA0002921662540000111
其中,
Figure BDA0002921662540000112
和xi=(xim,xin)分别为权衡解sq和像素点xi的空间位置坐标;
步骤S45、将像素点划分为距离最近的那一类缺陷区域,分类结束后得到试件缺陷红外重构图像的分割图像。
本发明至少包括以下有益效果:本发明提供的超高速撞击损伤检测图像的分割识别方法通过红外热图像序列数据中温度点最大值进行列向搜索比较获得变换列步长,同时利用瞬态热响应曲线中温度最大值对数据进行分块,获得每个数据块的变换行步长,使用变换列步长和变换行步长进行采样获得具有含有典型温度变化的瞬态热响应曲线构成的采样数据集,使用FCM算法,得到了采样数据集分类的隶属度。利用隶属度对数据集中每一瞬态热响应曲线进行分类,并利用分类后的典型热响应曲线进行重构缺陷图像。将多目标优化算法结合分割模型,实现缺陷的一次性分割。
同时,本发明超高速撞击损伤检测图像的分割识别方法,还具有以下有益效果:
(1)、本发明提出的多目标优化的热图像分割框架将多目标理论引入,针对需要被解决的三个目标问题分别建立目标函数,针对性地解决分割问题,使获得的分割图像是三者的权衡,分割获得的结果图像兼具噪声消除、细节保留和边缘保持三种性能。在设置了实现三个分割性能的目标函数构成分割模型后,本发明将多目标优化算法和分割模型相结合,通过权重向量将多目标优化问题分解为若干个标量子问题,每个子问题的权重向量的分量能够反映每个目标函数对分割目标函数重要程度,利用多目标算法在空间中搜索的过程中结合自适应权重向量调整,在调整权重向量时,由于红外图像受噪声影响大,并且设置的细节保留函数和边缘保持函数都与缺陷的细节信息有关,所以我们希望在分割目标函数中,噪声消除函数的影响大一点,将噪声消除作为偏好,基于这个偏好来调整权重向量,根据权重向量来自适应匹配各个目标函数的权重系数,来控制各个目标函数之间的平衡,并且同时求取各类别的聚类中心,再通过计算像素点与聚类中心的距离,将像素点进行类别划分,实现一次性分割红外重构图像。
(2)、本发明提出的分割模型,结合了多目标优化算法,在权衡好三个分割性能的同时,解决了分割模型存在的需要实时更新各个目标函数的权重系数问题。通过在空间中搜索不断更新权重系数,同时求取聚类中心,搜索结束后一次性分割红外图像,在确保分割质量的同时,计算效率更高,普适性更强。
本发明的其它优点、目标和特征将部分通过下面的说明体现,部分还将通过对本发明的研究和实践而为本领域的技术人员所理解。
附图说明:
图1为本发明超高速撞击损伤检测图像的分割识别方法流程图;
图2为本发明实施例中多目标优化问题求解后得到的PF面图;
图3为本发明实施例中撞击坑边缘的TTR曲线;
图4为本发明实施例中撞击坑边缘TTR曲线对应的红外重构图像;
图5为本发明实施例中撞击坑背景区域的TTR曲线;
图6为本发明实施例中撞击坑背景区域TTR曲线对应的红外重构图像;
图7为本发明实施例中撞击坑内部的TTR曲线;
图8为本发明实施例中撞击坑内部TTR曲线对应的红外重构图像;
图9为本发明实施例撞击坑内部重构图像缺陷分割结果图;
图10为本发明实施例撞击坑边缘重构图像缺陷分割结果图。
具体实施方式:
下面结合附图对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
应当理解,本文所使用的诸如“具有”、“包含”以及“包括”术语并不配出一个或多个其它元件或其组合的存在或添加。
如图1所示:本发明的一种超高速撞击损伤检测图像的分割识别方法,包括:
步骤一、对采集到的试件红外数据在提取有效信息后,按照缺陷类型对其进行分类并提取每类缺陷的典型瞬态响应;
步骤二、将选择出的典型瞬态热响应构成变换矩阵,获得红外重构图像;
步骤三、使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离;在噪声去除、保留细节和保持边缘三种目的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置多目标优化问题;
步骤四、使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割,具体步骤为:
步骤S41、多目标优化算法参数初始化;获取M×N个均匀分布的权重向量,并计算每个权重向量最近的T个权重向量;在满足多目标优化问题的可行空间中均匀采样产生初始种群;初始化多目标优化函数;采用基于切比血夫分解模型子问题;设置外部种群EP为空集;
步骤S42、进化多目标优化算法,更新种群中的个体;每次更新个体后,将噪声消除作为偏好,根据偏好来调整权重向量;
步骤S43、从多目标优化算法得到的最优聚类中心集中选择权衡解,作为最终的聚类中心;
步骤S44、计算红外热图像中的像素点到聚类中心的距离;
步骤S45、根据红外热图像中像素点到聚类中心的距离对像素点进行类别划分,划分结束后得到最后试件缺陷红外重构图像的分割图像。
在上述技术方案中,所述步骤一的具体方法为:对采集到的试件d维红外热图像序列S(m,n,:),m=1,...,M,n=1,...N,采用分块分步长的方式提取有效的瞬态热响应,其中m和n分别表示三维矩阵的第m行和第n列,第三个维度表示红外热图像的帧数;对提取出的有效瞬态热响应根据缺陷类型K,对其划分为K个区域,从划分好的各类缺陷区域中提取最能代表当前类别缺陷特征的典型瞬态热响应。
在上述技术方案中,所述步骤二获得红外重构图像的具体方法为:由步骤一提取出的K个d维典型瞬态热响应,获得维度为d×K的线性变化矩阵H1,将S(m,n,:)由三维矩阵化为二维矩阵,即对红外热视频中每一帧图像向量化,将每一帧图像矩阵按列取值并排列后得到包含一帧的像素点温度信息的向量且作为新矩阵的行向量,构建出一个新的二维矩阵P(x,y)a×b,a=d,b=M×N;用矩阵H1对P进行线性变换,即
Figure BDA0002921662540000141
其中
Figure BDA0002921662540000142
为矩阵H1的K×d维伪逆矩阵;将二维图像矩阵O再按行取值构成原图像尺寸大小的二维图像,得到K张大小为M×N的红外重构图像。
在上述技术方案中,所述步骤三使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离,缺陷的红外重构图像受复杂能量来源、成像链路、试件表面杂质等带来的背景噪声大,红外重构图像颜色信息弱,对比度差的问题,使得一般分割方式不能获得良好的分割结果因此在噪声去除、保留细节及保持边缘三中目的的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置的多目标优化问题如下式所示:
minF(ν)=[f1(ν),f2(v),f3(v)]T
s.t v=(v1,…,vc)T
其中,c为分类数目,v=(v1,…,vc)T表示一组候选聚类中心;利用权重向量在空间中搜索最能权衡好这三个目标函数的最优解,作为聚类中心;
步骤S31、f1(v)为解决噪声问题的单目标噪声去除函数SGNS;在FCM算法中引入模糊因子,利用重构图像邻域窗内像素点的欧式距离dij来确定像素点间的空间约束关系的基础上,正对差异不大的相近类别之间难以区分的问题再引入一个类间离散度度量函数;f1(v)的表达式如下式所示:
Figure BDA0002921662540000143
其中,MN是红外重构图像中像素点个数,c是聚类数目,uti是像素点xi对聚类中心vt的隶属度,Vati为模糊因子,其定义式为:
Figure BDA0002921662540000144
Ni是以像素点xi为中心的邻域像素集合,dij是像素xi和像素xj的欧氏距离,距离中心像素越近的邻域像素点对中心像素的影响作用也越强;ηt为类间离散度参数,vt为聚类中心代表当前类别像素点的温度均值,
Figure BDA0002921662540000151
为红外图像中所有像素点的温度均值;函数f1(v)需要满足:
Figure BDA0002921662540000152
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000153
Figure BDA0002921662540000154
聚类中心vt更新公式为:
Figure BDA0002921662540000155
步骤S32、f2(v)为解决细节保留问题的单目标细节保留函数SGDR;考虑图像局部空间能进一步指导图像像素的分割,有利于决绝边缘模糊的问题,并引入一个衡量像素位置及像素颜色的相关系数mij,构造细节保留函数f2(v)如下式所示:
Figure BDA0002921662540000156
其中,MN是红外重构图像中像素点个数,c是聚类数目,vt是聚类中心,uti是像素点xi对聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Ni是像素点xi的邻域像素,
Figure BDA0002921662540000157
是邻域像素集合Ni中的像素个数,α是控制空间信息约束的参数,
Figure BDA0002921662540000158
表示邻域像素xi与中心像素vt的相关性,记像素xi和vt的空间坐标分别为(xim,yin)、(vtm,vtn),灰度值分别为g(xi)、g(vt),则有
Figure BDA0002921662540000159
Figure BDA00029216625400001510
其中,λs是空间尺度的影响因子,λg是灰度尺度影响因子,
Figure BDA0002921662540000161
为以像素xi为中心的邻域像素的平均灰度方差,其计算式为:
Figure BDA0002921662540000162
函数f2(v)需要满足:
Figure BDA0002921662540000163
利用拉格朗日数乘法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000164
Figure BDA0002921662540000165
聚类中心vt的更新公式为:
Figure BDA0002921662540000166
步骤S33、f3(v)为解决边缘保持问题的单目标边缘保持函数SOEM;为了获得准确的分割结果,在目标函数中引入一个根据灰度级进行分割的边缘保持函数,并且为了加强边缘信息,引入了一个放大函数Ati放大邻域像素xi对中心像素隶属度的影响,构造的边缘保持函数如下式所示:
Figure BDA0002921662540000167
其中,MN是红外重构图像中像素点个数,c是聚类数目,n表示像素点的灰度值,uti表示灰度值为n的像素点xi关于当前聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Un为红外图像灰度级为n的数目,ψn为灰度值为n的像素点个数,
Figure BDA0002921662540000168
为像素点xi的邻域像素的灰度值的加权和,
Figure BDA0002921662540000169
Ni是xi的邻域像素集合,
Figure BDA00029216625400001610
是集合Ni中像素点的个数,β是局部空间信息影响因子;
Figure BDA00029216625400001611
Ni是以像素xi为中心的邻域像素集合,
Figure BDA00029216625400001612
是集合Ni中的像素点个数,
Figure BDA0002921662540000171
g(xi)和g(xj)分别表示像素点xi和其邻域像素xj的灰度值,
Figure BDA0002921662540000172
为邻域像素集合Ni中的像素xj与中心像素xi的平均灰度差;函数f3(v)需要满足:
Figure BDA0002921662540000173
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure BDA0002921662540000174
Figure BDA0002921662540000175
聚类中心的更新公式为:
Figure BDA0002921662540000176
由此完成了红外图像分割函数的构建。
在上述技术方案中,所述步骤四使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割的具体步骤为:
步骤S41、多目标优化算法参数初始化,具体步骤包括:
步骤S411、多目标优化的目标函数F(v),最大迭代次数gmax,阈值ζ、ε;种群大小M×N;每个邻域中权重向量的个数T;
步骤S412、获取M×N个均匀分布的权重向量:λ1,…,λMN并计算每个权重向量最近的T个权重向量B(i)={i1,…,iT},i=1,…,MN,
Figure BDA0002921662540000177
是λi最近的T个权重向量;
步骤S413、在满足多目标优化问题的可行空间中均匀采样产生初始种群s1,…,sMN,令FVi=F(si),i=1,…,MN;
步骤S414、初始化
Figure BDA0002921662540000178
满足其为图像分割多目标优化问题中的每个目标函数的最优值;
步骤S415、采用基于切比雪夫的分解模型分解子问题,其中第j个子问题为:
Figure BDA0002921662540000181
上式中,
Figure BDA0002921662540000182
是第j个子问题的权重向量,
Figure BDA0002921662540000183
控制噪声抑制函数的权值,
Figure BDA0002921662540000184
控制细节保留函数的权重,
Figure BDA0002921662540000185
控制边缘保持函数的权重;
Figure BDA0002921662540000186
Figure BDA0002921662540000187
Figure BDA0002921662540000188
分别三个函数当前的最优函数值;
步骤S416、设置外部种群EP为空集;
步骤S42、进行多目标优化算法更新;当小于最大迭代次数gmax的时候,每迭代一次更新权重向量一次,先进入步骤S421更新个体,再进行步骤S422调整权重向量;
步骤S421、更新种群中的个体,包括:
步骤S4211、复制:从权重向量B(i)中随机选取两个序号k,l,运用差分进化算法由sk,sl产生一个对于图像分割多目标问题新的解e;
步骤S4212、改进:对e进行图像分割多目标优化问题中所提出的约束条件处理产生e′;
步骤S4213、更新参考点f*:若参考点的数值f*<f*(e'),则f*=f*(e');
步骤S4214、根据Tchebycheff的数学表达式若gte(e'|λj,f*)≤gte(sjj,f*),j∈B(i),则sj=e′,,FVi=F(e′),更新邻域解,种群中的个体更新便完成;
步骤S422、调整权重向量,具体包括:
步骤S4221、计算种群中的个体
Figure BDA0002921662540000189
到当前聚类中心
Figure BDA00029216625400001810
的距离:
Figure BDA00029216625400001811
选择使得Dist最小的U个个体作为理想参考点;
步骤S4222、找到
Figure BDA00029216625400001812
为中心,半径为r的高维球区域
Figure BDA00029216625400001813
内的所有个体
Figure BDA00029216625400001814
计算
Figure BDA00029216625400001815
内所有个体的标准差:
Figure BDA00029216625400001816
其中,
Figure BDA00029216625400001817
为分布在
Figure BDA00029216625400001818
内所有个体的平均值,R为
Figure BDA00029216625400001819
内的个体数目,
Figure BDA00029216625400001820
r=1,…,R为分布在
Figure BDA00029216625400001821
内的个体;
步骤S4223、从U个个体中选择标准差
Figure BDA00029216625400001822
最小的Up个个体,作为偏好区域参考点,对这Up个个体的每个个体
Figure BDA0002921662540000191
和其对应的权重向量λUp做以下更新操作:
步骤S42231、计算基权重向量:
Figure BDA0002921662540000192
其中f*为图像分割多目标优化问题中每个目标函数的最优值;
步骤S42232、在种群中找到离
Figure BDA0002921662540000193
欧式距离最远的个体
Figure BDA0002921662540000194
其中,
Figure BDA0002921662540000195
并找到其对应的权重向量λm
步骤S42233、计算生成的权重向量:
λUpnew=λUp+step·λm
其中,λUpnew=(λUpnew1Upnew2Upnew3),Step为设置的步长参数;
步骤S42234、利用偏好区域参考点
Figure BDA0002921662540000196
和距离最远的个体
Figure BDA0002921662540000197
随机生成一个新解
Figure BDA0002921662540000198
有:
Figure BDA0002921662540000199
步骤S42235、生成新的个体
Figure BDA00029216625400001910
作为新的聚类中心:以
Figure BDA00029216625400001911
为中心,根据设置的三类目标函数对应的隶属度计算公式和聚类中心计算公式,计算当前隶属度:
Figure BDA00029216625400001912
根据当前隶属度计算新聚类中心,计算式为:
Figure BDA00029216625400001913
步骤S42236、用新的个体
Figure BDA00029216625400001914
替换
Figure BDA00029216625400001915
权重向量调整完成;
步骤S423、更新EP:移除所有被F(e′)支配的向量,若F(e′)不被EP里面向量所支配,把e′加入EP;
步骤S43、终止迭代;若满足终止条件g=gmax;输出EP得到最优即得到使图像分割多目标问题达到最优聚类中心集;否则增加迭代次数g=g+1转到步骤S42;
步骤S45、从步骤S43得到的最优聚类中心集中,选取权衡解sq作为最终的聚类中心,计算空间中像素点xi,i=1,…,MN到各聚类中心sq的距离:
Figure BDA00029216625400001916
其中,
Figure BDA0002921662540000201
和xi=(xim,xin)分别为权衡解sq和像素点xi的空间位置坐标;
步骤S45、将像素点划分为距离最近的那一类缺陷区域,分类结束后得到试件缺陷红外重构图像的分割图像。
综上,本发明提出了一种超高速撞击损伤检测图像的分割识别方法。变量区间搜索的自动分割方法是为了实现红外视频分割获得待分类数据集,数据集中包含了典型变化特征的温度曲线。FCM算法获得数据集相应的聚类,利用像素点与聚类中心的隶属度进行“软”划分,提高分类结果的可靠性。分类后的每一类数据子集中都含有相应的温度变化特征。利用主要特征对红外热图像序列进行重构由此获得缺陷的红外重构图像,反映出试件的缺陷特征。对于含有突出缺陷的红外重构图像进行目标分割获得的结果图像既能实现噪声消除又能保证细节保留,边缘保持也能提高图像分割的精度。
实施例:
在本实施例中,红外热像仪共采集了362帧像素大小为512×640的图像。即每张图上共有327680个温度点,每个温度点的温度值被记录362次,这种时变的温度条件构成了温度点的瞬态热响应TTR。步骤一在从红外热序列中提取有效瞬态热响应后,再对根据缺陷类型进行区域划分,从划分好的每类区域中,提取典型瞬态热响应。在提取有效瞬态热响应时,设置参数ReCL=0.92,
Figure BDA0002921662540000202
从327680个温度点中提取了包含完整缺陷信息的397个有效瞬态热响应。根据像素点对每类聚类中心的隶属度进行软化分,将161,230和6条热响应曲线划分到相应分类。从每类缺陷区域中提取代表该类缺陷信息的典型瞬态热响应,代表三个缺陷区域的典型瞬态热响应构成矩阵X1。对原二维矩阵P(x,y)362×327680进行线性变换,使用
Figure BDA0002921662540000203
其中,
Figure BDA0002921662540000204
为X1的伪逆矩阵,得到二维图像矩阵O,将二维图像矩阵O再按行取值重构成原图像尺寸大小512×640的二维图像,得到3张大小为512×640的红外重构图像,红外缺陷重构图像及对应的TTR曲线见图3、图4、图5、图6、图7和图8;
如图3~图8所示分类出的TTR曲线可观察到不同分类的TTR在温度上升率和温度下降率都有不同的差异,可以根据差异以及红外重构图像颜色的凸显区域来判断重构图像中的表达区域类型,试件的区域类型有撞击坑边缘、背景区域以及撞击坑内部,其中图3和图4分别是撞击坑边缘的TTR曲线和对应的红外重构图像,图5和图6分别是撞击坑背景区域的TTR曲线和对应的红外重构图像,图7和图8分别是撞击坑内部的TTR曲线和对应的红外重构图像。
本发明中多目标优化分割算法的最大代数设置为200,每次更新个体后,基于偏好区域调整权重向量。在根据分割性能设置的目标函数中,设置平滑参数m为2,聚类数目c为3。得到如图2所示的得到由帕累托最优集在空间上形成的曲面PF前沿面。从PF前沿面中选择权衡解作为最终聚类中心,计算红外重构图像中的像素点与聚类中心的距离,将像素点划分为距离近的那一类缺陷,聚类结束后得到红外图像的分割图像,一次性得到分割后的图像如图9、图10所示,图9为撞击坑内部红外重构图像缺陷分割结果图,图10为撞击坑边缘红外重构图像缺陷分割结果图。实验结果证实本文构建的噪声消除函数f1(v)、细节保留函数f2(v)和边缘保持函数f3(v)分别可以起到抑制噪声、保留细节和保持边缘的作用,将缺陷区域和背景区域准确剥离,实现红外图像的准确分割。
这里说明的设备数量和处理规模是用来简化本发明的说明的。对本发明的应用、修改和变化对本领域的技术人员来说是显而易见的。
尽管本发明的实施方案已公开如上,但其并不仅仅限于说明书和实施方式中所列运用,它完全可以被适用于各种适合本发明的领域,对于熟悉本领域的人员而言,可容易地实现另外的修改,因此在不背离权利要求及等同范围所限定的一般概念下,本发明并不限于特定的细节和这里示出与描述的图例。

Claims (5)

1.一种超高速撞击损伤检测图像的分割识别方法,其特征在于,包括以下步骤:
步骤一、对采集到的试件红外数据在提取有效信息后,按照缺陷类型对其进行分类并提取每类缺陷的典型瞬态响应;
步骤二、将选择出的典型瞬态热响应构成变换矩阵,获得红外重构图像;
步骤三、使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离;在噪声去除、保留细节和保持边缘三种目的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置多目标优化问题;
步骤四、使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割,具体步骤为:
步骤S41、多目标优化算法参数初始化;获取M×N个均匀分布的权重向量,并计算每个权重向量最近的T个权重向量;在满足多目标优化问题的可行空间中均匀采样产生初始种群;初始化多目标优化函数;采用基于切比雪 夫分解模型子问题;设置外部种群EP为空集;
步骤S42、进化多目标优化算法,更新种群中的个体;每次更新个体后,将噪声消除作为偏好,根据偏好来调整权重向量;
步骤S43、从多目标优化算法得到的最优聚类中心集中选择权衡解,作为最终的聚类中心;
步骤S44、计算红外热图像中的像素点到聚类中心的距离;
步骤S45、根据红外热图像中像素点到聚类中心的距离对像素点进行类别划分,划分结束后得到最后试件缺陷红外重构图像的分割图像。
2.如权利要求1所述的超高速撞击损伤检测图像的分割识别方法,其特征在于,所述步骤一的具体方法为:对采集到的试件d维红外热图像序列S(m,n,:),m=1,...,M,n=1,...N,采用分块分步长的方式提取有效的瞬态热响应,其中m和n分别表示三维矩阵的第m行和第n列,第三个维度表示红外热图像的帧数;对提取出的有效瞬态热响应根据缺陷类型K,对其划分为K个区域,从划分好的各类缺陷区域中提取最能代表当前类别缺陷特征的典型瞬态热响应。
3.如权利要求2所述的超高速撞击损伤检测图像的分割识别方法,其特征在于,所述步骤二获得红外重构图像的具体方法为:由步骤一提取出的K个d维典型瞬态热响应,获得维度为d×K的线性变化矩阵H1,将S(m,n,:)由三维矩阵化为二维矩阵,即对红外热视频中每一帧图像向量化,将每一帧图像矩阵按列取值并排列后得到包含一帧的像素点温度信息的向量且作为新矩阵的行向量,构建出一个新的二维矩阵P(x,y)a×b,a=d,b=M×N;用矩阵H1对P进行线性变换,即
Figure FDA0002921662530000021
其中
Figure FDA0002921662530000022
为矩阵H1的K×d维伪逆矩阵;将二维图像矩阵O再按行取值构成原图像尺寸大小的二维图像,得到K张大小为M×N的红外重构图像。
4.如权利要求1所述的超高速撞击损伤检测图像的分割识别方法,其特征在于,所述步骤三使用多目标优化算法结合分割模型对含有M×N个像素点的红外重构图像x=(x1,…,xMN)进行背景区域和缺陷区域的分离的具体方法包括:在噪声去除、保留细节及保持边缘三中目的的指导下构建红外图像分割函数,采用多目标优化算法权衡设置的三个目标函数,设置的多目标优化问题如下式所示:
min F(ν)=[f1(ν),f2(v),f3(v)]T
s.t v=(v1,…,vc)T
其中,c为分类数目,v=(v1,…,vc)T表示一组候选聚类中心;利用权重向量在空间中搜索最能权衡好这三个目标函数的最优解,作为聚类中心;
步骤S31、f1(v)为解决噪声问题的单目标噪声去除函数SGNS;在FCM算法中引入模糊因子,利用重构图像邻域窗内像素点的欧式距离dij来确定像素点间的空间约束关系的基础上,正对差异不大的相近类别之间难以区分的问题再引入一个类间离散度度量函数;f1(v)的表达式如下式所示:
Figure FDA0002921662530000023
其中,MN是红外重构图像中像素点个数,c是聚类数目,uti是像素点xi对聚类中心vt的隶属度,Vati为模糊因子,其定义式为:
Figure FDA0002921662530000031
Ni是以像素点xi为中心的邻域像素集合,dij是像素xi和像素xj的欧氏距离,距离中心像素越近的邻域像素点对中心像素的影响作用也越强;ηt为类间离散度参数,vt为聚类中心代表当前类别像素点的温度均值,
Figure FDA0002921662530000032
为红外图像中所有像素点的温度均值;函数f1(v)需要满足:
Figure FDA0002921662530000033
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure FDA0002921662530000034
Figure FDA0002921662530000035
聚类中心vt更新公式为:
Figure FDA0002921662530000036
步骤S32、f2(v)为解决细节保留问题的单目标细节保留函数SGDR;考虑图像局部空间能进一步指导图像像素的分割,有利于决绝边缘模糊的问题,并引入一个衡量像素位置及像素颜色的相关系数mij,构造细节保留函数f2(v)如下式所示:
Figure FDA0002921662530000037
其中,MN是红外重构图像中像素点个数,c是聚类数目,vt是聚类中心,uti是像素点xi对聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Ni是像素点xi的邻域像素,
Figure FDA0002921662530000038
是邻域像素集合Ni中的像素个数,α是控制空间信息约束的参数,
Figure FDA0002921662530000039
表示邻域像素xi与中心像素vt的相关性,记像素xi和vt的空间坐标分别为(xim,yin)、(vtm,vtn),灰度值分别为g(xi)、g(vt),则有
Figure FDA00029216625300000310
Figure FDA0002921662530000041
其中,λs是空间尺度的影响因子,λg是灰度尺度影响因子,
Figure FDA00029216625300000412
为以像素xi为中心的邻域像素的平均灰度方差,其计算式为:
Figure FDA0002921662530000042
函数f2(v)需要满足:
Figure FDA0002921662530000043
利用拉格朗日数乘法求得像素xi相对于聚类中心vt的隶属度为
Figure FDA0002921662530000044
Figure FDA0002921662530000045
聚类中心vt的更新公式为:
Figure FDA0002921662530000046
步骤S33、f3(v)为解决边缘保持问题的单目标边缘保持函数SOEM;为了获得准确的分割结果,在目标函数中引入一个根据灰度级进行分割的边缘保持函数,并且为了加强边缘信息,引入了一个放大函数Ati放大邻域像素xi对中心像素隶属度的影响,构造的边缘保持函数如下式所示:
Figure FDA0002921662530000047
其中,MN是红外重构图像中像素点个数,c是聚类数目,n表示像素点的灰度值,uti表示灰度值为n的像素点xi关于当前聚类中心vt的隶属度,m∈[1,∞)为平滑参数,Un为红外图像灰度级为n的数目,ψn为灰度值为n的像素点个数,
Figure FDA0002921662530000048
为像素点xi的邻域像素的灰度值的加权和,
Figure FDA0002921662530000049
Ni是xi的邻域像素集合,
Figure FDA00029216625300000410
是集合Ni中像素点的个数,β是局部空间信息影响因子;
Figure FDA00029216625300000411
Ni是以像素xi为中心的邻域像素集合,BNi是集合Ni中的像素点个数,
Figure FDA0002921662530000051
g(xi)和g(xj)分别表示像素点xi和其邻域像素xj的灰度值,
Figure FDA0002921662530000052
为邻域像素集合Ni中的像素xj与中心像素xi的平均灰度差;函数f3(v)需要满足:
Figure FDA0002921662530000053
利用拉格朗日乘数法求得像素xi相对于聚类中心vt的隶属度为
Figure FDA0002921662530000054
Figure FDA0002921662530000055
聚类中心的更新公式为:
Figure FDA0002921662530000056
由此完成了红外图像分割函数的构建。
5.如权利要求1所述的超高速撞击损伤检测图像的分割识别方法,其特征在于,所述步骤四使用多目标优化算法结合分割模型在像素点个数为M×N的红外重构图像中对试件缺陷实现一次性分割的具体步骤为:
步骤S41、多目标优化算法参数初始化,具体步骤包括:
步骤S411、多目标优化的目标函数F(v),最大迭代次数gmax,阈值ζ、ε;种群大小M×N;每个邻域中权重向量的个数T;
步骤S412、获取M×N个均匀分布的权重向量:λ1,…,λMN并计算每个权重向量最近的T个权重向量B(i)={i1,…,iT},i=1,…,MN,
Figure FDA0002921662530000057
是λi最近的T个权重向量;
步骤S413、在满足多目标优化问题的可行空间中均匀采样产生初始种群s1,…,sMN,令FVi=F(si),i=1,…,MN;
步骤S414、初始化
Figure FDA0002921662530000058
满足其为图像分割多目标优化问题中的每个目标函数的最优值;
步骤S415、采用基于切比雪夫的分解模型分解子问题,其中第j个子问题为:
Figure FDA0002921662530000061
上式中,
Figure FDA0002921662530000062
是第j个子问题的权重向量,
Figure FDA0002921662530000063
控制噪声抑制函数的权值,
Figure FDA0002921662530000064
控制细节保留函数的权重,
Figure FDA00029216625300000621
控制边缘保持函数的权重;
Figure FDA0002921662530000065
Figure FDA0002921662530000066
Figure FDA0002921662530000067
分别三个函数当前的最优函数值;
步骤S416、设置外部种群EP为空集;
步骤S42、进行多目标优化算法更新;当小于最大迭代次数gmax的时候,每迭代一次更新权重向量一次,先进入步骤S421更新个体,再进行步骤S422调整权重向量;
步骤S421、更新种群中的个体,包括:
步骤S4211、复制:从权重向量B(i)中随机选取两个序号k,l,运用差分进化算法由sk,sl产生一个对于图像分割多目标问题新的解e;
步骤S4212、改进:对e进行图像分割多目标优化问题中所提出的约束条件处理产生e′;
步骤S4213、更新参考点f*:若参考点的数值f*<f*(e'),则f*=f*(e');
步骤S4214、根据Tchebycheff的数学表达式若gte(e'|λj,f*)≤gte(sjj,f*),j∈B(i),则sj=e′,FVi=F(e′),更新邻域解,种群中的个体更新便完成;
步骤S422、调整权重向量,具体包括:
步骤S4221、计算种群中的个体
Figure FDA0002921662530000068
到当前聚类中心
Figure FDA0002921662530000069
的距离:
Figure FDA00029216625300000610
选择使得Dist最小的U个个体作为理想参考点;
步骤S4222、找到
Figure FDA00029216625300000611
为中心,半径为r的高维球区域
Figure FDA00029216625300000612
内的所有个体
Figure FDA00029216625300000613
计算
Figure FDA00029216625300000614
内所有个体的标准差:
Figure FDA00029216625300000615
其中,
Figure FDA00029216625300000616
为分布在
Figure FDA00029216625300000617
内所有个体的平均值,R为
Figure FDA00029216625300000618
内的个体数目,
Figure FDA00029216625300000619
r=1,…,R为分布在
Figure FDA00029216625300000620
内的个体;
步骤S4223、从U个个体中选择标准差
Figure FDA0002921662530000071
最小的Up个个体,作为偏好区域参考点,对这Up个个体的每个个体
Figure FDA0002921662530000072
和其对应的权重向量λUp做以下更新操作:
步骤S42231、计算基权重向量:
Figure FDA0002921662530000073
其中f*为图像分割多目标优化问题中每个目标函数的最优值;
步骤S42232、在种群中找到离
Figure FDA0002921662530000074
欧式距离最远的个体
Figure FDA0002921662530000075
其中,
Figure FDA0002921662530000076
并找到其对应的权重向量λm
步骤S42233、计算生成的权重向量:
λUpnew=λUp+step·λm
其中,λUpnew=(λUpnew1Upnew2Upnew3),Step为设置的步长参数;
步骤S42234、利用偏好区域参考点
Figure FDA0002921662530000077
和距离最远的个体
Figure FDA0002921662530000078
随机生成一个新解
Figure FDA0002921662530000079
有:
Figure FDA00029216625300000710
步骤S42235、生成新的个体
Figure FDA00029216625300000711
作为新的聚类中心:以
Figure FDA00029216625300000712
为中心,根据设置的三类目标函数对应的隶属度计算公式和聚类中心计算公式,计算当前隶属度:
Figure FDA00029216625300000713
根据当前隶属度计算新聚类中心,计算式为:
Figure FDA00029216625300000714
步骤S42236、用新的个体
Figure FDA00029216625300000715
替换
Figure FDA00029216625300000716
权重向量调整完成;
步骤S423、更新EP:移除所有被F(e′)支配的向量,若F(e′)不被EP里面向量所支配,把e′加入EP;
步骤S43、终止迭代;若满足终止条件g=gmax;输出EP得到最优即得到使图像分割多目标问题达到最优聚类中心集;否则增加迭代次数g=g+1转到步骤S42;
步骤S45、从步骤S43得到的最优聚类中心集中,选取权衡解sq作为最终的聚类中心,计算空间中像素点xi,i=1,…,MN到各聚类中心sq的距离:
Figure FDA0002921662530000081
其中,
Figure FDA0002921662530000082
和xi=(xim,xin)分别为权衡解sq和像素点xi的空间位置坐标;
步骤S45、将像素点划分为距离最近的那一类缺陷区域,分类结束后得到试件缺陷红外重构图像的分割图像。
CN202110119960.XA 2021-01-28 2021-01-28 一种超高速撞击损伤检测图像的分割识别方法 Active CN112784847B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110119960.XA CN112784847B (zh) 2021-01-28 2021-01-28 一种超高速撞击损伤检测图像的分割识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110119960.XA CN112784847B (zh) 2021-01-28 2021-01-28 一种超高速撞击损伤检测图像的分割识别方法

Publications (2)

Publication Number Publication Date
CN112784847A CN112784847A (zh) 2021-05-11
CN112784847B true CN112784847B (zh) 2022-03-04

Family

ID=75759451

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110119960.XA Active CN112784847B (zh) 2021-01-28 2021-01-28 一种超高速撞击损伤检测图像的分割识别方法

Country Status (1)

Country Link
CN (1) CN112784847B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114882387B (zh) * 2022-07-12 2022-09-16 江苏宝诺铸造有限公司 一种磨削工艺中轴承滚道撞伤识别及自动抛光定位方法
CN115601367B (zh) * 2022-12-15 2023-04-07 苏州迈创信息技术有限公司 一种led灯芯缺陷检测方法
CN116091504B8 (zh) * 2023-04-11 2023-09-15 重庆大学 基于图像处理的连接管连接头质量检测方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109559309A (zh) * 2018-11-30 2019-04-02 电子科技大学 基于均匀进化的多目标优化红外热图像缺陷特征提取方法
CN109767438A (zh) * 2019-01-09 2019-05-17 电子科技大学 一种基于动态多目标优化的红外热图像缺陷特征识别方法
CN111598887A (zh) * 2020-05-25 2020-08-28 中国空气动力研究与发展中心超高速空气动力研究所 一种基于lvq-gmm算法和多目标优化分割算法的航天器缺陷检测方法
CN112016628A (zh) * 2020-09-04 2020-12-01 中国空气动力研究与发展中心超高速空气动力研究所 一种基于动态多目标预测的空间碎片撞击损伤判读方法
CN112016627A (zh) * 2020-09-04 2020-12-01 中国空气动力研究与发展中心超高速空气动力研究所 一种在轨航天器微小撞击损伤可视化检测评估方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846841B2 (en) * 2018-05-29 2020-11-24 University Of Electronic Science And Technology Of China Method for separating out a defect image from a thermogram sequence based on feature extraction and multi-objective optimization

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109559309A (zh) * 2018-11-30 2019-04-02 电子科技大学 基于均匀进化的多目标优化红外热图像缺陷特征提取方法
CN109767438A (zh) * 2019-01-09 2019-05-17 电子科技大学 一种基于动态多目标优化的红外热图像缺陷特征识别方法
CN111598887A (zh) * 2020-05-25 2020-08-28 中国空气动力研究与发展中心超高速空气动力研究所 一种基于lvq-gmm算法和多目标优化分割算法的航天器缺陷检测方法
CN112016628A (zh) * 2020-09-04 2020-12-01 中国空气动力研究与发展中心超高速空气动力研究所 一种基于动态多目标预测的空间碎片撞击损伤判读方法
CN112016627A (zh) * 2020-09-04 2020-12-01 中国空气动力研究与发展中心超高速空气动力研究所 一种在轨航天器微小撞击损伤可视化检测评估方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Infrared image segmentation of aircraft skin damage based on the game between MRF and improved GVF snake;Kun Wang etc.;《2017 29th Chinese Control And Decision Conference (CCDC)》;20170717;全文 *
分解多目标算法在航天器损伤红外检测中的应用;薛婷;《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》;20200715;全文 *

Also Published As

Publication number Publication date
CN112784847A (zh) 2021-05-11

Similar Documents

Publication Publication Date Title
CN112884716B (zh) 一种超高速撞击损伤区域特征强化方法
CN112784847B (zh) 一种超高速撞击损伤检测图像的分割识别方法
CN111598887B (zh) 一种基于lvq-gmm算法和多目标优化分割算法的航天器缺陷检测方法
CN112818822B (zh) 一种航空航天复合材料损伤区域自动识别方法
Prakash et al. Detection of leaf diseases and classification using digital image processing
CN112819775B (zh) 一种航空航天复合材料损伤检测图像的分割强化方法
CN108537102B (zh) 基于稀疏特征与条件随机场的高分辨sar图像分类方法
CN109492706B (zh) 一种基于循环神经网络的染色体分类预测装置
CN112270697B (zh) 一种结合超分辨率重建的卫星序列影像运动目标检测方法
Khan et al. A customized Gabor filter for unsupervised color image segmentation
Travieso et al. Pollen classification based on contour features
Wollmann et al. Deep Consensus Network: Aggregating predictions to improve object detection in microscopy images
Panati et al. Feature relevance evaluation using grad-CAM, LIME and SHAP for deep learning SAR data classification
CN114972882B (zh) 基于多注意力机制的磨损表面损伤深度估计方法及系统
CN117576079A (zh) 一种工业产品表面异常检测方法、装置及系统
Chen et al. A novel graphical model approach to segmenting cell images
D'Elia et al. Detection of microcalcifications clusters in mammograms through TS-MRF segmentation and SVM-based classification
He et al. Multiphase level set model with local K-means energy for histology image segmentation
CN112819778B (zh) 一种航天材料损伤检测图像多目标全像素分割方法
Yang et al. Pseudo-representation labeling semi-supervised learning
Vig et al. Entropy-based multilevel 2D histogram image segmentation using DEWO optimization algorithm
García et al. Pollen grains contour analysis on verification approach
CN112906713B (zh) 一种航空航天复合材料损伤可视化特征提取方法
CN114970862A (zh) 一种基于多实例知识蒸馏模型的pdl1表达水平预测方法
Wang et al. Bright-field to fluorescence microscopy image translation for cell nuclei health quantification

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant