CN106548483B - 一种基于三维超像素分割的材料晶粒边缘提取方法 - Google Patents

一种基于三维超像素分割的材料晶粒边缘提取方法 Download PDF

Info

Publication number
CN106548483B
CN106548483B CN201610948455.5A CN201610948455A CN106548483B CN 106548483 B CN106548483 B CN 106548483B CN 201610948455 A CN201610948455 A CN 201610948455A CN 106548483 B CN106548483 B CN 106548483B
Authority
CN
China
Prior art keywords
pixel
super
distance
dimensional
cluster centre
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610948455.5A
Other languages
English (en)
Other versions
CN106548483A (zh
Inventor
杨宁
邓博
赵天云
郭雷
邱硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Priority to CN201610948455.5A priority Critical patent/CN106548483B/zh
Publication of CN106548483A publication Critical patent/CN106548483A/zh
Application granted granted Critical
Publication of CN106548483B publication Critical patent/CN106548483B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • G06F18/232Non-hierarchical techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • G06T2207/10061Microscopic image from scanning electron microscope
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20024Filtering details
    • G06T2207/20032Median filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30136Metal

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种基于三维超像素分割的材料晶粒边缘提取方法,依据镍合金晶粒图像以凸多边形为主的特点,采用以正六棱柱为初始聚类对镍合金晶粒图像进行超像素分割,并通过超像素聚类得镍合金晶粒边缘提取结果。试验结果表明,本发明在包含大量晶粒、碳化物和噪声的镍合金切片图像中,具有边缘连续性好,轮廓保持性好,提取速度较快的特点。

Description

一种基于三维超像素分割的材料晶粒边缘提取方法
技术领域
本发明属于图像边缘提取领域,具体涉及一种基于三维超像素分割的材料晶粒边缘提取方法。
背景技术
在材料工业,设计和开发了一种具有所需性能的新材料需要花费科学家和工程师数年时间。这个过程通常涉及多轮样品生成测试和显微结构分析。在材料科学和工程上精确的材料晶粒图像分割是十分重要的。材料是由大量颗粒组成,这些晶粒可以通过显微镜切片成像。从图像分割上,我们可以获得基本的晶粒微观图像,其尺寸,形状和毗邻关系通常决定样品的物理,机械和化学性能,如亮度,硬度,刚性,导电性,渗透率和热稳定性。然而,晶粒分割是一个有挑战性的难题,因为:1、甚至一个材料晶粒样本可能含有数以百计的晶粒;2、碳化物和噪声可能降低图像品质。在材料科学界,在材料样品中提取所有晶粒的一种常见的做法是人工分割每个二维图像切片,然后依据二维切片获得的相应片段重建三维晶粒。鉴于大量晶粒和切片,人工分割是非常繁琐,耗时且容易出错。
现有的图像分割算法有:基于阈值的图像分割,其效果依赖于阈值的选择,对噪声敏感;基于区域增长法的图像分割,很容易产生过图像过分割现象,分水岭算法可以说就是典型的代表;基于聚类法的图像分割,聚类分割中对图像特征的提取、相似度的计算和正确的聚类方法是基于聚类图像分割的研究关键和难点;基于变形模型的图像分割,但其存在天然的缺陷,变形模型对初始轮廓的选取很敏感,初始轮廓的选取能影响分割的效果。材料晶粒边界复杂,图像中存在大量晶粒,图像中的噪声及杂质都使得图像的边缘提取难度增加。国内外对于材料晶粒的边缘提取研究相对较少,通常在提取边缘之后还需人工修复。因此,对于材料晶粒的边缘提取技术还需进一步深入研究。
发明内容
要解决的技术问题
为了避免现有技术的不足之处,本发明提出一种基于三维超像素分割的材料晶粒边缘提取方法。
技术方案
一种基于三维超像素分割的材料晶粒边缘提取方法,其特征在于步骤如下:
步骤1、预处理:将读入L张扫描电镜的切片图像构建为体数据V=[X,Y,Z],每张切片图像大小为M×N;其中X,Y表示连续切片图像的大小,为体数据的长和宽;Z连续切片数据的张数,为体数据的高;
对体数据进行三维中值滤波:V’=med{f(x-k,y-l,z-j),(k,l,j∈W)}
其中:f(x,y,z)和V’分别为由L张扫描电镜切片图像构建的原始体数据和经三维中值滤波后的体数据,med表示取中值操作,W为三维滑动模板,k、l、j为二维滑动模板的长、宽、高;
步骤2、聚类初始化:设定k个超像素,在经中值滤波后体数据V'内均匀的分配k个大小相近的正六棱柱三维超像素区域,种子点即正六棱柱三维超像素区域的中心,计算相邻种子点间的距离S;在种子点的3×3×3邻域内重新选择种子点,初始化聚类中心C、像素点分配标签l、像素点到聚类中心的距离d;具体过程如下:
步骤a、相邻种子点间距离:
经中值滤波后体数据V'内共有M×N×L个像素点,在图像内均匀分配k个大小相近的正六棱柱三维超像素区域,每个三维超像素大小为得到k个正六棱柱,以正六棱柱的中心点为种子点,计算相邻种子点间距离为:
步骤b、重新选择种子点:以种子点为中心,在3×3×3邻域内计算所有像素点的梯度值,将种子点移到3×3×3邻域内梯度最小的点;
步骤c、初始化:
初始化聚类中心Ck为[0,0,0,0],像素点分配标签l为-1,像素点到聚类中心的距离d为无穷;
步骤3、迭代优化:如果像素到聚类中心的距离小于前值D'<d(i),则更新它的距离、像素点标签d(i)=D,l(i)=k,并用均值更新聚类中心Ck,直到残差小于阈值时,迭代停止;
距离度量:取最小值对应的种子点作为该像素点的聚类中心Ck,计算其2S×2S×2S邻域内每个像素到聚类中心的距离D',即灰度距离和空间距离的标准欧式距离;计算每个搜索到的像素点与该种子点的距离公式:
其中,dg代表灰度距离,ds代表三维空间距离,Ns是聚类内最大三维空间距离,定义为Ns=S,适用于每个聚类,大灰度距离Ng随图片不同而不同;
步骤4、清除孤立区域:通过形态学清除迭代优化完成后小的孤立区域,将清除的区域分配到邻近的聚类,区域被重新编号,生成临近矩阵Am
步骤5、超像素聚类:使用DBSCAN聚类算法对超像素进行聚类,输入迭代优化后的像素点标签l,聚类中心Ck,临近矩阵Am,距离阈值E,通过DBSCAN聚类算法对超像素进行聚类,产生新的聚类标签lc,新的聚类中心C;通过新的聚类标签lc即产生了对图像的分割,绘制边缘达到基于三维超像素分割的材料晶粒边缘提取。
所述最大灰度距离Ng取值范围1~40。
所述最大灰度距离Ng取10。
所述距离阈值E取值范围5~10。
有益效果
本发明提出的一种基于三维超像素分割的材料晶粒边缘提取方法,依据镍合金晶粒图像以凸多边形为主的特点,采用以正六棱柱为初始聚类对镍合金晶粒图像进行超像素分割,并通过超像素聚类得镍合金晶粒边缘提取结果。试验结果表明,本发明在包含大量晶粒、碳化物和噪声的镍合金切片图像中,具有边缘连续性好,轮廓保持性好,提取速度较快的特点。
附图说明
图1本发明结构原理图;
图2超像素聚类原理图;
图3三维超像素分割材料晶粒图像结果
图4基于三维超像素分割的镍合金晶粒边缘提取结果
具体实施方式
现结合实施例、附图对本发明作进一步描述:
用于实施的硬件环境是:英特尔酷睿i3-4160双核3.60G计算机、4.0GB内存、2G显卡,运行的软件环境是:Matlab R2012b,Windows 7。我们用Matlab R2012b软件实现了本发明提出的方法。
本发明具体实施如下:
步骤1:预处理。读入L张镍合金晶粒连续切片图像,每张切片图像大小为M×N,构建离散体数据V=M×N×L。体数据V由L张灰度空间的镍合金晶粒图构成,所以其体数据取值范围均为[0,255]。
构建体数据
V=[X,Y,Z]
其中X,Y表示连续切片图像的大小,即体数据的长和宽;Z表示读入连续切片数据的张数,即体数据的高。
对图像进行滤波模板为3×3×3的中值滤波
V'=med{f(x-k,y-l,z-j),(k,l,j∈W)}
其中f(x,y,z)和V'分别为由L张扫描电镜切片图像构建的原始体数据和经三维中值滤波后的体数据,med表示取中值操作,在体数据中使用滤波模板W为3×3×3的中值滤波,该中值滤波有效的去除了孤立噪点,并保持了图像的的边缘特性。
步骤2:聚类初始化。镍合金材料晶粒切片的形状多为凸多边形,为更好的在三维空间拟合晶粒边缘,预设初始三维超像素区域的形状为正六棱柱。按照预设的超像素个数k,在离散体数据V'内均匀的分配k个大小相近的正六棱柱三维超像素区域,种子点即正六棱柱三维超像素区域的中心,计算得出相邻种子点间的距离S。S的计算方法如下:
体数据V内共有M×N×L=I个像素点,在图像内均匀分配k个相同尺寸的三维超像素,每个三维超像素大小为正六棱柱边长为a,依据正六棱柱几何知识,计算相邻种子点间距离为:
在种子点的3×3×3邻域内重新选择新的种子点,为了避免种子点落在梯度较大的
轮廓边界上,影响后续聚类。在3×3×3邻域内计算所有像素点的梯度值,将种子点移
到3×3×3邻域内梯度最小的点。各像素的梯度计算方式如下:
(c)初始化聚类中心C、像素点分配标签l、像素点到聚类中心的距离d。具体描述
如下:初始化
初始化聚类中心Ck为[0,0,0,0,0],像素点分配标签l为-1,像素点到聚类中心的距离d为无穷。
步骤3:迭代优化。对于聚类中心Ck,计算其2S×2S邻域内每个像素到聚类中心的距离D',如果D'<d(i),则d(i)=D,l(i)=k,并用均值更新聚类中心Ck,直到残差小于阈值时,迭代停止。
每个像素点都会被多个种子点搜索到,所以每个像素点都会有一个与周围种子点的距离,取最小值对应的种子点作为该像素点的聚类中心。包括灰度距离和空间距离。对于每个搜索到的像素点,分别计算它和该种子点的距离。距离计算方法如下:
其中,dg代表灰度距离,ds代表三维空间距离,Ns是聚类内最大三维空间距离,定义为Ns=S,适用于每个聚类。最大灰度距离Ng随图片不同而不同,故取固定常数(取值范围[1,40],一般取10)。
步骤5:清除孤立区域。经过上述迭代优化可能出现以下瑕疵:出现多连通情况、超像素尺寸过小,单个超像素被切割成多个不连续超像素等。这些情况可以通过形态学清除小的孤立区域解决。将清除的区域分配到邻近的聚类,区域被重新编号,生成临近矩阵Am
步骤6:超像素聚类。使用DBSCAN聚类算法对超像素进行聚类,输入迭代优化后的像素点标签l,聚类中心Ck,临近矩阵Am,距离阈值E(取值范围[5,10]),通过DBSCAN聚类算法对超像素进行聚类,产生新的聚类标签lc,新的聚类中心C。通过新的聚类标签lc即产生了对图像的分割,绘制边缘达到基于三维超像素分割的材料晶粒边缘提取。

Claims (4)

1.一种基于三维超像素分割的材料晶粒边缘提取方法,其特征在于步骤如下:
步骤1、预处理:将读入L张扫描电镜的切片图像构建为体数据V=[X,Y,Z],每张切片图像大小为M×N;其中X,Y表示连续切片图像的大小,为体数据的长和宽;Z为连续切片数据的张数,为体数据的高;
对体数据进行三维中值滤波:V'=med{f(x-a,y-b,z-c),(a,b,c∈W)}
其中:f(x,y,z)和V′分别为由L张扫描电镜切片图像构建的原始体数据和经三维中值滤波后的体数据,med表示取中值操作,W为三维滑动模板,a、b、c为三维滑动模板的长、宽、高;
步骤2、聚类初始化:设定k′个超像素,在经中值滤波后体数据V'内均匀的分配k′个大小相近的正六棱柱三维超像素区域,种子点即正六棱柱三维超像素区域的中心,计算相邻种子点间的距离S;在种子点的3×3×3邻域内重新选择种子点,初始化聚类中心Ck、像素点分配标签l、像素点到聚类中心的距离d;具体过程如下:
步骤a、相邻种子点间距离:
经中值滤波后体数据V'内共有M×N×L个像素点,在体数据V'内均匀分配k′个大小相近的正六棱柱三维超像素区域,每个三维超像素大小为得到k′个正六棱柱,以正六棱柱的中心点为种子点,计算相邻种子点间距离为:
步骤b、重新选择种子点:以种子点为中心,在3×3×3邻域内计算所有像素点的梯度值,将种子点移到3×3×3邻域内梯度最小的点;
步骤c、初始化:
初始化聚类中心Ck为[0,0,0,0],像素点分配标签l为-1,像素点到聚类中心的距离d为无穷;
步骤3、迭代优化:如果像素点到聚类中心的距离小于前值,即D<d,则更新像素点到聚类中心的距离d=D、像素点分配标签l=k,并用均值更新聚类中心Ck,直到残差小于阈值时,迭代停止;
距离度量:取最小值对应的种子点作为像素点的聚类中心Ck,计算其2S×2S×2S邻域内每个像素点到聚类中心的距离D',即灰度距离和空间距离的标准欧式距离;计算每个搜索到的像素点与种子点的距离公式:
其中,dg代表灰度距离,ds代表三维空间距离,Ns是聚类内最大三维空间距离,定义为Ns=S,适用于每个聚类,最大灰度距离Ng随图像不同而不同;
步骤4、清除孤立区域:通过形态学清除迭代优化完成后小的孤立区域,将清除的区域分配到邻近的聚类,区域被重新编号,生成临近矩阵Am
步骤5、超像素聚类:使用DBSCAN聚类算法对超像素进行聚类,输入迭代优化后的像素点分配标签l,聚类中心Ck,临近矩阵Am,距离阈值E,通过DBSCAN聚类算法对超像素进行聚类,产生新的像素点分配标签lc,新的聚类中心C;生成新的像素点分配标签lc即产生了对图像的分割,绘制边缘即实现基于三维超像素分割的材料晶粒边缘提取。
2.根据权利要求1所述基于三维超像素分割的材料晶粒边缘提取方法,其特征在于:所述最大灰度距离Ng取值范围1~40。
3.根据权利要求1所述基于三维超像素分割的材料晶粒边缘提取方法,其特征在于:所述最大灰度距离Ng取10。
4.根据权利要求1所述基于三维超像素分割的材料晶粒边缘提取方法,其特征在于:所述距离阈值E取值范围5~10。
CN201610948455.5A 2016-10-27 2016-10-27 一种基于三维超像素分割的材料晶粒边缘提取方法 Active CN106548483B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610948455.5A CN106548483B (zh) 2016-10-27 2016-10-27 一种基于三维超像素分割的材料晶粒边缘提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610948455.5A CN106548483B (zh) 2016-10-27 2016-10-27 一种基于三维超像素分割的材料晶粒边缘提取方法

Publications (2)

Publication Number Publication Date
CN106548483A CN106548483A (zh) 2017-03-29
CN106548483B true CN106548483B (zh) 2019-04-19

Family

ID=58392560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610948455.5A Active CN106548483B (zh) 2016-10-27 2016-10-27 一种基于三维超像素分割的材料晶粒边缘提取方法

Country Status (1)

Country Link
CN (1) CN106548483B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109615630A (zh) * 2019-01-18 2019-04-12 东北大学 基于图像处理技术的半连续铸造铝硅合金微观组织分析方法
CN115662553B (zh) * 2022-12-13 2023-03-21 北京科技大学 一种材料微观组织信息数据库的构建方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102637253A (zh) * 2011-12-30 2012-08-15 清华大学 基于视觉显著性和超像素分割的视频前景目标提取方法
CN104680538A (zh) * 2015-03-09 2015-06-03 西安电子科技大学 基于超像素的sar图像cfar目标检测方法
CN104835196A (zh) * 2015-05-12 2015-08-12 东华大学 一种车载红外图像彩色化三维重建方法
CN105138970A (zh) * 2015-08-03 2015-12-09 西安电子科技大学 基于空间信息的极化sar图像分类方法
CN105528794A (zh) * 2016-01-15 2016-04-27 上海应用技术学院 基于混合高斯模型与超像素分割的运动目标检测方法
CN105701448A (zh) * 2015-12-31 2016-06-22 湖南拓视觉信息技术有限公司 三维人脸点云鼻尖检测方法及应用其的数据处理装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6463101B2 (ja) * 2014-12-01 2019-01-30 キヤノン株式会社 領域分割装置及び方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102637253A (zh) * 2011-12-30 2012-08-15 清华大学 基于视觉显著性和超像素分割的视频前景目标提取方法
CN104680538A (zh) * 2015-03-09 2015-06-03 西安电子科技大学 基于超像素的sar图像cfar目标检测方法
CN104835196A (zh) * 2015-05-12 2015-08-12 东华大学 一种车载红外图像彩色化三维重建方法
CN105138970A (zh) * 2015-08-03 2015-12-09 西安电子科技大学 基于空间信息的极化sar图像分类方法
CN105701448A (zh) * 2015-12-31 2016-06-22 湖南拓视觉信息技术有限公司 三维人脸点云鼻尖检测方法及应用其的数据处理装置
CN105528794A (zh) * 2016-01-15 2016-04-27 上海应用技术学院 基于混合高斯模型与超像素分割的运动目标检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Image Segmentation for Automated Taxiing of Unmanned Aircraft;William Eaton 等;《2015 International Conference on Unmanned Aircraft Systems (ICUAS)》;20151231;1-8
一种基于区域中心点的聚类算法;范敏 等;《计算机工程与科学》;20140930;第36卷(第9期);1611-1616
结合SLIC超像素和DBSCAN聚类的眼底图像硬性渗出检测方法;凌朝东 等;《华侨大学学报(自然科学版)》;20150731;第36卷(第4期);399-405

Also Published As

Publication number Publication date
CN106548483A (zh) 2017-03-29

Similar Documents

Publication Publication Date Title
Bao et al. Field-based architectural traits characterisation of maize plant using time-of-flight 3D imaging
CN109523566A (zh) 一种砂岩薄片显微图像的自动分割方法
CN107256558A (zh) 一种无监督式的宫颈细胞图像自动分割方法及系统
Machairas et al. Waterpixels: Superpixels based on the watershed transformation
CN110443809A (zh) 带边界约束的结构敏感性彩色图像分割超像素化方法
CN106548483B (zh) 一种基于三维超像素分割的材料晶粒边缘提取方法
CN109087283B (zh) 基于细胞团的宫颈细胞病理切片病变细胞识别方法及系统
CN112686902A (zh) 核磁共振影像中脑胶质瘤识别与分割的两阶段计算方法
Dou et al. Medical image super-resolution via minimum error regression model selection using random forest
CN116523898A (zh) 一种基于三维点云的烟草表型性状提取方法
JP2019058073A (ja) 画像処理装置、細胞認識装置、細胞認識方法および細胞認識プログラム
CN104732230A (zh) 一种基于细胞核统计信息的病理图像局部特征提取方法
CN113029899B (zh) 一种基于显微图像处理的砂岩渗透率计算方法
CN111709992B (zh) 一种用于编织陶瓷基复合材料经纬纱交叉处定位方法
CN110322440B (zh) 一种细胞显微图像数据扩充的方法
Abinaya et al. Jasmine flower segmentation: A superpixel based approach
CN117197686A (zh) 一种基于卫星影像的高标准农田地块边界自动识别方法
CN109961451A (zh) 一种基于边缘信息的材料晶粒组织分割方法
Chen et al. A robust object segmentation network for underwater scenes
Islam et al. Multi-step level set method for segmentation of overlapping cervical cells
CN112950585B (zh) 基于液基薄层细胞检测技术的宫颈癌细胞智能检测方法
Ester et al. Valuing vicinity: Memory attention framework for context-based semantic segmentation in histopathology
CN110969628B (zh) 一种基于变分水平集的超像素分割方法
Javed et al. Population density estimation using textons
Hofmann et al. Image segmentation based on hexagonal sampling grids

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant