CN109492544B - 一种通过增强光学显微镜对动物纤维进行分类的方法 - Google Patents

一种通过增强光学显微镜对动物纤维进行分类的方法 Download PDF

Info

Publication number
CN109492544B
CN109492544B CN201811224702.2A CN201811224702A CN109492544B CN 109492544 B CN109492544 B CN 109492544B CN 201811224702 A CN201811224702 A CN 201811224702A CN 109492544 B CN109492544 B CN 109492544B
Authority
CN
China
Prior art keywords
fiber
image
skeleton
detected
classifying
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811224702.2A
Other languages
English (en)
Other versions
CN109492544A (zh
Inventor
椴树·巴斯
奥克萨娜·维切斯沃夫娜·曼玉黑娜
椰鲁恩·马赛尔·德·克鲁特
伊夫金妮娅·巴尔玛西诺瓦
马丁·明克
优翰·伯特兰
陈辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lanbo Suzhou Intelligent Technology Co ltd
Original Assignee
Lanbo Suzhou Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lanbo Suzhou Intelligent Technology Co ltd filed Critical Lanbo Suzhou Intelligent Technology Co ltd
Priority to CN201811224702.2A priority Critical patent/CN109492544B/zh
Publication of CN109492544A publication Critical patent/CN109492544A/zh
Application granted granted Critical
Publication of CN109492544B publication Critical patent/CN109492544B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695—Preprocessing, e.g. image segmentation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种通过增强光学显微镜对动物纤维进行分类的方法，包括：从若干焦点堆栈图像中选择出清晰图像；融合输出加权图像；对加权图像进行二值化；识别待测纤维；为二值图像中的每一待测纤维建立掩膜；对掩膜执行腐蚀算法，直至保留1像素宽的骨架；从若干骨架中提取不具有短枝的骨架，收集坐标并排序；使骨架由曲线转变为直线，并将待测纤维的像素点重新定位到骨架上，得到纤维图像；对纤维图像进行预处理步骤并将若干纤维片段输入卷积神经网络分类并输出，和/或将若干纤维图像输入半启发式算法模块分类并输出。本发明将光学显微镜的高分辨率图片与分析图像处理、深度学习相结合，以便自动或半自动地检测和分类羊毛纤维的混合物。

Description

一种通过增强光学显微镜对动物纤维进行分类的方法
技术领域
本发明涉及纤维分类的技术领域，尤其涉及一种通过增强光学显微镜对动物纤维进行分类的方法。
背景技术
目前的天然纤维分类工作流程受到ISO标准和扩展的中国标准的严格监管。为了区分一种天然纤维与另一种天然纤维的来源(例如来自羊毛的绒或来自牦牛的绒)，其步骤的顺序通常由人类专家进行图像采集、测量纤维直径、并识别鳞片的全部排列来进行。这是一项耗时的任务，需要专家的专业知识和奉献精神。特别是对于纤维混合物，需要以更高的精度进行识别。
一些高质量的纤维仅通过光学显微镜难以区分，因此需要使用扫描电子显微镜(SEM)，并咨询相应的专家以得出确定的答案，这需要更长的时间。
实际上，目前已出现采用视觉进行天然纤维分类的方法，但是利用高分辨率的扫描电子显微图像对天然纤维进行分类的方法亟待开发。
发明内容
有鉴于此，本发明的目的在于提供一种通过增强光学显微镜对动物纤维进行分类的方法。
为了实现上述目的，本发明采取的技术方案为：
一种通过增强光学显微镜对动物纤维进行分类的方法，其中，包括：
步骤S1：提供待测纤维的若干焦点堆栈图像，并从若干所述焦点堆栈图像中选择出若干清晰图像，若干所述清晰图像中位置相同的像素为对应像素；
步骤S2：选取每一所述清晰图像中的对应像素，计算每一所述对应像素中的最大值和最小值的加权和，并融合输出加权图像；
步骤S3：对所述加权图像进行二值化，得到二值图像；
步骤S4；识别所述二值图像中的所述待测纤维；
步骤S5：为所述二值图像中的每一所述待测纤维建立掩膜；
步骤S6：针对每一所述待测纤维，对所述掩膜执行腐蚀算法，直至保留1像素宽的骨架；
步骤S7：从若干所述骨架中提取不具有短枝的骨架；
步骤S8：收集不具有所述短枝的所述骨架的坐标并排序；
步骤S9：建立一坐标集，将不具有短枝的所述骨架分别映射至所述坐标集以使所述骨架由曲线转变为直线，并根据所述待测纤维的像素点与所述骨架之间的坐标关系，将所述待测纤维的像素点重新定位到所述骨架上，形成拉直的纤维图像，并执行步骤S10.1至步骤S10.2和/或步骤S11.1；
步骤S10.1：对所述纤维图像进行预处理步骤，得到若干具有相同高度和相同宽度的纤维片段；
步骤S10.2：将若干所述纤维片段输入卷积神经网络，所述卷积神经网络对所述纤维片段进行分类并输出；
步骤S11.1：将若干所述纤维图像输入半启发式算法模块，所述半启发式算法模块对所述纤维图像进行分类并输出；
其中，所述卷积神经网络包括若干用于检测视觉特性的卷积块、以及若干用于分类的密集块，所述卷积神经网络通过纤维图像训练集和纤维图像验证集进行训练；
其中，所述半启发式算法模块预设有纤维的特征向量标准数据集，所述半启发式算法模块检测所述待测纤维的特征向量并与所述特征向量标准数据集相比对，从而进行分类并输出。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S10.1中，所述预处理步骤包括：
步骤S10.11：将所述纤维图像的高度扩展至第一指定像素；
步骤S10.12：将所述纤维图像切割成若干宽度为第二指定像素的部分，从而得到若干高度为第一指定像素、宽度为第二指定像素的所述纤维片段。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，所述特征向量用于描述纤维的物理特性或视觉特性，所述特征向量包括：用于描述纤维的空间尺寸的第一度量组、用于描述纤维的边界形貌的第二度量组、用于描述纤维的鳞片形态的第三度量组和用于描述纤维的颜色的第四度量组。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，所述卷积神经网络和所述半启发式算法模块分别预设有若干类型标签，所述卷积神经网络和所述半启发式算法模块分别输出所述待测纤维被分类为其中一所述类型标签的概率。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，所述卷积神经网络和所述半启发式算法模块均将具有最高概率的所述类型标签作为结果标签。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，还包括：
步骤S12，判断所述卷积神经网络输出的所述结果标签和所述半启发式算法模块输出的所述结果标签是否相同，若相同则执行步骤S13，若不相同则执行步骤S14；
步骤S13：将所述待测纤维分类为所述结果标签；
步骤S14：将所述待测纤维分类为未识别结果。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，计算若干所述焦点堆栈图像的二阶导数的总方差，并根据所述焦点堆栈图像的二阶导数的总方差中的最小值选择出所述清晰图像。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，采用OTSU算法对所述加权图像进行二值化。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S4中，通过判断边界是否满足面积的标准、纵横比的标准和/或边界至骨架的距离的标准以识别所述待测纤维。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S5中，反转所述二值图像并对反转的所述二值图像进行膨胀算法，以对提取的每一所述待测纤维建立所述掩膜。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S7中，通过设定所述腐蚀算法的腐蚀距离的阈值去除所述短枝，以提取不具有所述短枝的所述骨架；
或，通过仅选取长枝，以提取不具有所述短枝的骨架。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S8中，根据所述骨架的图像的连通性收集所述骨架的坐标并排序。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，在所述步骤S9中，所述坐标集内的坐标为所述待测纤维的像素点和所述骨架之间的最小距离矢量。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，为所述卷积神经网络输出的概率设置第一最小阈值，若所述卷积神经网络输出的所述概率小于所述第一最小阈值，则所述卷积神经网络将所述结果标签标记为未识别。
上述的通过增强光学显微镜对动物纤维进行分类的方法，其中，为所述半启发式算法模块的概率设置第二最小阈值，若所述半启发式算法模块输出的所述概率小于所述第二最小阈值，则所述半启发式算法模块将所述结果标签标记为未识别。
本发明由于采用了上述技术，使之与现有技术相比具有的积极效果是：
(1)本发明将光学显微镜的高分辨率图片与分析图像处理、深度学习相结合，以便自动或半自动地检测和分类羊毛纤维的混合物，通过自动工作或半自动工作提高羊毛混合物分类的速度，时间效率和准确性。
附图说明
图1是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第一实施例的流程图。
图2是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第二实施例的流程图。
图3是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第三实施例的流程图。
图4是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第三实施例的流程图。
图5是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第四实施例的流程图。
图6是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A1的示意图。
图7是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A1的示意图。
图8是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A2的示意图。
图9是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A2的示意图。
图10是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A3的示意图。
图11是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A4至步骤A7的示意图。
图12是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A8至步骤A9的示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明，但不作为本发明的限定。
第一实施例：
图1是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第一实施例的流程图，图6是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A1的示意图，图7是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A1的示意图，图8是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A2的示意图，图9是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A2的示意图，图10是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A3的示意图，图11是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A4至步骤A7的示意图，图12是本发明的通过增强光学显微镜对动物纤维进行分类的方法的步骤A8至步骤A9的示意图，请参见图1、图6至图12所示，示出了第一种较佳实施例的通过增强光学显微镜对动物纤维进行分类的方法，包括：
步骤A1：提供待测纤维的若干焦点堆栈图像，并从若干焦点堆栈图像中选择出清晰图像，若干清晰图像中位置相同的像素为对应像素；
步骤A2：选取每一组清晰图像中的对应像素，计算每一组对应像素中的最大值和最小值的加权和，并融合输出加权图像；
步骤A3：对加权图像进行二值化，得到二值图像；
步骤A4；识别二值图像中的待测纤维；
步骤A5：为二值图像中的每一待测纤维建立掩膜；
步骤A6：针对每一待测纤维，对掩膜执行腐蚀算法，直至保留1像素宽的骨架；
步骤A7：从若干骨架中提取不具有短枝的骨架；
步骤A8：收集不具有短枝的骨架的坐标并排序；
步骤A9：建立一坐标集，将不具有短枝的所述骨架分别映射至所述坐标集以使所述骨架由曲线转变为直线，并根据所述待测纤维的像素点与所述骨架之间的坐标关系，将所述待测纤维的像素点重新定位到所述骨架上，形成拉直的纤维图像；
步骤A10.1：对纤维图像进行预处理步骤，得到若干具有相同高度和相同宽度的纤维片段；
步骤A10.2：将若干纤维片段输入卷积神经网络，卷积神经网络对纤维片段进行分类并输出结果标签；
其中，卷积神经网络包括若干用于检测视觉特性的卷积块、以及若干用于分类的密集块，卷积神经网络通过纤维图像训练集和纤维图像验证集进行训练。
第二实施例：
图2是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第二实施例的流程图，请参见图2所示，示出了第二种较佳实施例的通过增强光学显微镜对动物纤维进行分类的方法，包括：
步骤B1：提供待测纤维的若干焦点堆栈图像，并从若干焦点堆栈图像中选择出清晰图像，若干清晰图像中位置相同的像素为对应像素；
步骤B2：选取每一组清晰图像中的对应像素，计算每一组对应像素中的最大值和最小值的加权和，并融合输出加权图像；
步骤B3：对加权图像进行二值化，得到二值图像；
步骤B4；识别二值图像中的待测纤维；
步骤B5：为二值图像中的每一待测纤维建立掩膜；
步骤B6：针对每一待测纤维，对掩膜执行腐蚀算法，直至保留1像素宽的骨架；
步骤B7：从若干骨架中提取不具有短枝的骨架；
步骤B8：收集不具有短枝的骨架的坐标并排序；
步骤B9：建立一坐标集，将不具有短枝的所述骨架分别映射至所述坐标集以使所述骨架由曲线转变为直线，并根据所述待测纤维的像素点与所述骨架之间的坐标关系，将所述待测纤维的像素点重新定位到所述骨架上，形成拉直的纤维图像；
步骤B11.1：将若干纤维图像输入半启发式算法模块，半启发式算法模块对纤维图像进行分类并输出结果标签；
其中，半启发式算法模块预设有纤维的特征向量标准数据集，半启发式算法模块检测待测纤维的特征向量并与特征向量标准数据集相比对。
第三实施例：
图3是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第三实施例的流程图，图4是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第三实施例的流程图，请参见图3、图4所示，示出了第三种较佳实施例的通过增强光学显微镜对动物纤维进行分类的方法，包括：
步骤C1：提供待测纤维的若干焦点堆栈图像，并从若干焦点堆栈图像中选择出清晰图像，若干清晰图像中位置相同的像素为对应像素；
步骤C2：选取每一组清晰图像中的对应像素，计算每一组对应像素中的最大值和最小值的加权和，并融合输出加权图像；
步骤C3：对加权图像进行二值化，得到二值图像；
步骤C4；识别二值图像中的待测纤维；
步骤C5：为二值图像中的每一待测纤维建立掩膜；
步骤C6：针对每一待测纤维，对掩膜执行腐蚀算法，直至保留1像素宽的骨架；
步骤C7：从若干骨架中提取不具有短枝的骨架；
步骤C8：收集不具有短枝的骨架的坐标并排序；
步骤C9：建立一坐标集，将不具有短枝的所述骨架分别映射至所述坐标集以使所述骨架由曲线转变为直线，并根据所述待测纤维的像素点与所述骨架之间的坐标关系，将所述待测纤维的像素点重新定位到所述骨架上，形成拉直的纤维图像，执行步骤C10.1至步骤C10.2和步骤C11.1；
步骤C10.1：对纤维图像进行预处理步骤，得到若干具有相同高度和相同宽度的纤维片段；
步骤C10.2：将若干纤维片段输入卷积神经网络，卷积神经网络对纤维片段进行分类并输出标签；
步骤C11.1：将若干纤维图像输入半启发式算法模块，半启发式算法模块对纤维图像进行分类并输出结果标签；
步骤C12，判断卷积神经网络输出的结果标签和半启发式算法模块输出的结果标签是否相同，若相同则执行步骤C13，若不相同则执行步骤C14；
步骤C13：将待测纤维分类为结果标签；
步骤C14：将待测纤维分类为未识别结果。
其中，卷积神经网络包括若干用于检测视觉特性的卷积块、以及若干用于分类的密集块，卷积神经网络通过纤维图像训练集和纤维图像验证集进行训练；
其中，半启发式算法模块预设有纤维的特征向量标准数据集，半启发式算法模块检测待测纤维的特征向量并与特征向量标准数据集相比对。
进一步，作为一种较佳的实施例，特征向量用于描述纤维的物理特性或视觉特性，特征向量包括：用于描述纤维的空间尺寸的第一度量组、用于描述纤维的边界形貌的第二度量组、用于描述纤维的鳞片形态的第三度量组和用于描述纤维的颜色的第四度量组。
更进一步，作为一种较佳的实施例，卷积神经网络和半启发式算法模块分别预设有若干类型标签，卷积神经网络和半启发式算法模块分别输出待测纤维被分类为其中一类型标签的概率。
再进一步，作为一种较佳的实施例，卷积神经网络和半启发式算法模块均将具有最高概率的类型标签作为结果标签。
以上所述仅为本发明较佳的实施例，并非因此限制本发明的实施方式及保护范围。
本发明在上述基础上还具有如下实施方式：
本发明的进一步实施例中，第一度量组描述了纤维的在大尺寸上的形状和结构，第二度量组进一步地描述了纤维的边界和内部的微观结构，第三度量组更进一步地描述了纤维的内部的鳞片的微观结构，第四度量组描述了纤维的颜色。
本发明的进一步实施例中，优选地，所述第一度量值可以或至少包括：纤维的中线的长度、沿纤维的弧长测量的纤维直径的最大值、沿纤维的弧长测量的纤维直径的最小值、沿纤维的弧长测量的纤维直径的平均值、纤维直径的绝对标准差、经过平均值归一化的纤维直径的绝对标准差、纤维直径的偏度、纤维直径的峰度以及纤维直径的空间变化。
本发明的进一步实施例中，沿纤维的水平中线使用1D信号，即可直接得到或计算得到第二度量组的若干特征。
本发明的进一步实施例中，优选地，所述第二度量值可以或至少包括：分形、纤维边界的顶部和纤维边界的底部的协方差、纤维边界的每个点处的切线斜率的协方差、纤维高度的最大值和纤维高度的最小值之间的平均距离、纤维的边缘处的鳞片高度的平均正斜率、纤维的边缘处的鳞片高度的平均负斜率。
本发明的进一步实施例中，通过归一化1D信号测量纤维内部的鳞片形态得到第三组度量值的若干特征。
本发明的进一步实施例中，优选地，所述第三度量值可以或至少包括：所获得的归一化1D信号的功率谱密度。
本发明的进一步实施例中，优选地，所述第四度量组可以或至少包括：纤维在CIELab系统中的每一通道的强度的最大值、纤维在CIELab系统中的每一通道的强度的最大值的一半处的两个值、以及纤维在RGB系统中的每一通道的平均强度。
其中，L通道为明度通道、a通道和b通道为两个色度通道，R通道、G通道和B通道分别为红色通道、绿色通道和蓝色通道。
本发明的进一步实施例中，为卷积神经网络输出的概率设置第一最小阈值，若卷积神经网络输出的概率小于第一最小阈值，则卷积神经网络将结果标签标记为未识别。
本发明的进一步实施例中，为半启发式算法模块的概率设置第二最小阈值，若半启发式算法模块输出的概率小于第二最小阈值，则半启发式算法模块将结果标签标记为未识别。
第四实施例：
图5是本发明的通过增强光学显微镜对动物纤维进行分类的方法的第四实施例的流程图，请参见图5所示，第四种较佳的实施例在第一实施例或第三实施例的基础上，进一步地包括：一种预处理步骤，预处理步骤包括：
步骤D10.11：将纤维图像的高度扩展至第一指定像素；
步骤D10.12：将纤维图像切割成若干宽度为第二指定像素的部分，从而得到若干高度为第一指定像素、宽度为第二指定像素的纤维片段。
进一步，作为一种较佳的实施例，在步骤D10.11中，通过填充空像素将纤维图像的高度扩展至第一指定像素。
具体地，在步骤D10.11中，将纤维图像的高度通过填充0像素扩展至224像素。
具体地，在步骤D10.12中，将纤维图像切割成若干个宽度为384像素的部分，从而得到尺寸为224×384像素的纤维片段。
第五实施例：
第五种较佳的实施例在第一实施例、第二实施例或第三实施例的基础上，进一步地包括：在步骤S4中，通过判断边界是否满足面积的标准、纵横比的标准和/或边界至骨架的距离的标准以识别待测纤维。
此外，作为一种较佳的实施例，在步骤A1/B1/C1中，计算若干焦点堆栈图像的二阶导数的总方差，并根据焦点堆栈图像的二阶导数的总方差中的最小值选择出清晰图像。
进一步，作为一种较佳的实施例，在步骤A1/B1/C1中，每一清晰图像的第i行第j列的像素为对应像素，在步骤A2/B2/C2中，在第i行第j列的所有对应像素中选取最大值和最小值进行加权求和，并融合输出加权图像。
另外，作为一种较佳的实施例，在步骤A3/B3/C3中，采用OTSU算法对加权图像进行二值化。
还有，作为一种较佳的实施例，在步骤A4/B4/C4中，通过判断边界是否满足面积的标准、纵横比的标准和/或边界至骨架的距离的标准以识别待测纤维，以区分单个待测纤维与图像的其余部分(包括直线、曲线、线段和重叠的部分)。其中，面积的标准、纵横比的标准、边界至骨架的距离的标准可根据待测纤维的实际情况具体定义，用于找到边界所包围的区域的面积和形状，从而找到待测纤维的边界。
具体地，可以使用不同的方式进行最佳的纤维提取，以总变差和拉普拉斯算子为例，在其中一个较佳的实施例中可以使用纵横比将二值图像中的图形分类为待测纤维，在另一个较佳的实施例中，可以使用边界的半径变化将二值图像中的图形分类为待测纤维，从而取出二值图像的背景中的干扰物(例如噪点)。
进一步，作为一种较佳的实施例，在步骤A5/B5/C5中，反转二值图像并对反转的二值图像进行膨胀算法，以对提取的每一待测纤维建立掩膜。
可选择地，作为一种较佳的实施例，在步骤A7/B7/C7中，通过设定腐蚀算法的腐蚀距离的阈值去除短枝，以提取不具有短枝的骨架；
可选择地，作为一种较佳的实施例，在步骤A7/B7/C7中，通过仅选取长枝，以提取不具有短枝的骨架。
本发明的进一步实施例中，通过定义骨架的形状、长度等以将骨架区分为长枝或短枝。
还有，作为一种较佳的实施例，在步骤A8/B8/C8中，根据骨架的图像的连通性收集骨架的坐标并排序。
另一方面，作为一种较佳的实施例，在步骤A9/B9/C9中，坐标集内的坐标为待测纤维的像素点和骨架之间的最小距离矢量。
以上仅为本发明较佳的实施例，并非因此限制本发明的实施方式及保护范围，对于本领域技术人员而言，应当能够意识到凡运用本发明说明书及图示内容所作出的等同替换和显而易见的变化所得到的方案，均应当包含在本发明的保护范围内。

Claims (9)

1.一种通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，包括：
步骤S1：提供待测纤维的若干焦点堆栈图像，并从若干所述焦点堆栈图像中选择出若干清晰图像，若干所述清晰图像中位置相同的像素为对应像素；
步骤S2：选取每一所述清晰图像中的对应像素，计算每一所述对应像素中的最大值和最小值的加权和，并融合输出加权图像；
步骤S3：对所述加权图像进行二值化，得到二值图像；
步骤S4：识别所述二值图像中的所述待测纤维；
步骤S5：为所述二值图像中的每一所述待测纤维建立掩膜；
步骤S6：针对每一所述待测纤维，对所述掩膜执行腐蚀算法，直至保留1像素宽的骨架；
步骤S7：从若干所述骨架中提取不具有短枝的骨架；
步骤S8：收集不具有所述短枝的所述骨架的坐标并排序；
步骤S9：建立一坐标集，将不具有短枝的所述骨架分别映射至所述坐标集以使所述骨架由曲线转变为直线，并根据所述待测纤维的像素点与所述骨架之间的坐标关系，将所述待测纤维的像素点重新定位到所述骨架上，形成拉直的纤维图像，并执行步骤S10.1至步骤S10.2和/或步骤S11.1；
步骤S10.1：对所述纤维图像进行预处理步骤，得到若干具有相同高度和相同宽度的纤维片段；
步骤S10.2：将若干所述纤维片段输入卷积神经网络，所述卷积神经网络对所述纤维片段进行分类并输出；
步骤S11.1：将若干所述纤维图像输入半启发式算法模块，所述半启发式算法模块对所述纤维图像进行分类并输出；
其中，所述卷积神经网络包括若干用于检测视觉特性的卷积块、以及若干用于分类的密集块，所述卷积神经网络通过纤维图像训练集和纤维图像验证集进行训练；
其中，所述半启发式算法模块预设有纤维的特征向量标准数据集，所述半启发式算法模块检测所述待测纤维的特征向量并与所述特征向量标准数据集相比对，从而进行分类并输出；
在所述步骤S9中，所述坐标集内的坐标为所述待测纤维的像素点和所述骨架之间的最小距离矢量。
2.根据权利要求1所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，在所述步骤S10.1中，所述预处理步骤包括：
步骤S10.11：将所述纤维图像的高度扩展至第一指定像素；
步骤S10.12：将所述纤维图像切割成若干宽度为第二指定像素的部分，从而得到若干高度为第一指定像素、宽度为第二指定像素的所述纤维片段。
3.根据权利要求2所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，所述特征向量包括：用于描述纤维的空间尺寸的第一度量组、用于描述纤维的边界形貌的第二度量组、用于描述纤维的鳞片形态的第三度量组和用于描述纤维的颜色的第四度量组。
4.根据权利要求3所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，所述卷积神经网络和所述半启发式算法模块分别预设有若干类型标签，所述卷积神经网络和所述半启发式算法模块分别输出所述待测纤维被分类为其中一所述类型标签的概率。
5.根据权利要求4所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，所述卷积神经网络和所述半启发式算法模块均将具有最高概率的所述类型标签作为结果标签。
6.根据权利要求5所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，还包括：
步骤S12，判断所述卷积神经网络输出的所述结果标签和所述半启发式算法模块输出的所述结果标签是否相同，若相同则执行步骤S13，若不相同则执行步骤S14；
步骤S13：将所述待测纤维分类为所述结果标签；
步骤S14：将所述待测纤维分类为未识别结果。
7.根据权利要求1所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，在所述步骤S4中，通过判断边界是否满足面积的标准、纵横比的标准和/或边界至骨架的距离的标准以识别所述待测纤维。
8.根据权利要求1所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，在所述步骤S5中，反转所述二值图像并对反转的所述二值图像进行膨胀算法，以对提取的每一所述待测纤维建立所述掩膜。
9.根据权利要求1所述的通过增强光学显微镜对动物纤维进行分类的方法，其特征在于，在所述步骤S7中，通过设定所述腐蚀算法的腐蚀距离的阈值去除所述短枝，以提取不具有所述短枝的所述骨架；
或，通过仅选取长枝，以提取不具有所述短枝的骨架。
CN201811224702.2A 2018-10-19 2018-10-19 一种通过增强光学显微镜对动物纤维进行分类的方法 Active CN109492544B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811224702.2A CN109492544B (zh) 2018-10-19 2018-10-19 一种通过增强光学显微镜对动物纤维进行分类的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811224702.2A CN109492544B (zh) 2018-10-19 2018-10-19 一种通过增强光学显微镜对动物纤维进行分类的方法

Publications (2)

Publication Number Publication Date
CN109492544A CN109492544A (zh) 2019-03-19
CN109492544B true CN109492544B (zh) 2023-01-03

Family

ID=65692273

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811224702.2A Active CN109492544B (zh) 2018-10-19 2018-10-19 一种通过增强光学显微镜对动物纤维进行分类的方法

Country Status (1)

Country Link
CN (1) CN109492544B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110047074A (zh) * 2019-05-17 2019-07-23 广东工业大学 纺织品的纤维混和含量检测、逆向工程分析方法及设备
CN110648312A (zh) * 2019-09-03 2020-01-03 上海工程技术大学 一种基于鳞片形态特征分析的羊毛与羊绒纤维识别方法
CN114067122B (zh) * 2022-01-18 2022-04-08 深圳市绿洲光生物技术有限公司 一种两级式二值化图像处理方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101358931A (zh) * 2008-08-22 2009-02-04 北京中棉机械成套设备有限公司 棉花中异性纤维的检测计量装置及检测计量方法
CN105095907A (zh) * 2014-05-12 2015-11-25 浙江理工大学 一种基于rbf神经网络的棉花异质纤维鉴别方法
CN106780597A (zh) * 2016-08-08 2017-05-31 大连工业大学 一种基于图像处理对纤维增强复合材料中纤维特征的提取方法
US9691161B1 (en) * 2015-09-25 2017-06-27 A9.Com, Inc. Material recognition for object identification
CN107240141A (zh) * 2017-05-19 2017-10-10 华南理工大学 一种基于图像处理的纸张纤维素纤维二维结构重建方法
CN107909107A (zh) * 2017-11-14 2018-04-13 深圳码隆科技有限公司 纤维检测方法、装置及电子设备
CN108038838A (zh) * 2017-11-06 2018-05-15 武汉纺织大学 一种棉麻纤维种类自动检测方法和系统
CN108090498A (zh) * 2017-12-28 2018-05-29 广东工业大学 一种基于深度学习的纤维识别方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101358931A (zh) * 2008-08-22 2009-02-04 北京中棉机械成套设备有限公司 棉花中异性纤维的检测计量装置及检测计量方法
CN105095907A (zh) * 2014-05-12 2015-11-25 浙江理工大学 一种基于rbf神经网络的棉花异质纤维鉴别方法
US9691161B1 (en) * 2015-09-25 2017-06-27 A9.Com, Inc. Material recognition for object identification
CN106780597A (zh) * 2016-08-08 2017-05-31 大连工业大学 一种基于图像处理对纤维增强复合材料中纤维特征的提取方法
CN107240141A (zh) * 2017-05-19 2017-10-10 华南理工大学 一种基于图像处理的纸张纤维素纤维二维结构重建方法
CN108038838A (zh) * 2017-11-06 2018-05-15 武汉纺织大学 一种棉麻纤维种类自动检测方法和系统
CN107909107A (zh) * 2017-11-14 2018-04-13 深圳码隆科技有限公司 纤维检测方法、装置及电子设备
CN108090498A (zh) * 2017-12-28 2018-05-29 广东工业大学 一种基于深度学习的纤维识别方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Fiber Image Classification Using Convolutional Neural Networks;Xinxin Wang et al.;《The 2017 4th International Conference on Systems and Informatics (ICSAI 2017)》;20171231;第1214-1218页 *

Also Published As

Publication number Publication date
CN109492544A (zh) 2019-03-19

Similar Documents

Publication Publication Date Title
CN105139386B (zh) 一种快速自动检测电气接插件焊点不合格品的图像处理方法
CN109492544B (zh) 一种通过增强光学显微镜对动物纤维进行分类的方法
US8824773B2 (en) Defect observation method and defect observation device
CN114419025A (zh) 一种基于图像处理的纤维板质量评估方法
CN110210477B (zh) 一种数字式仪表读数识别方法
WO2014087689A1 (ja) 画像処理装置、画像処理システム及びプログラム
CN108520514B (zh) 基于计算机视觉的印刷电路板电子元器一致性检测方法
CN108133216B (zh) 基于机器视觉的可实现小数点读取的数码管读数识别方法
CN111242899B (zh) 基于图像的瑕疵检测方法及计算机可读存储介质
CN115082466B (zh) 一种pcb表面焊点缺陷检测方法及系统
CN109668909A (zh) 一种玻璃缺陷检测方法
CN115731228B (zh) 一种镀金芯片缺陷检测系统和方法
CN111122590A (zh) 一种陶瓷表面缺陷检测装置及检测方法
CN115294159A (zh) 金属紧固件腐蚀区域分割方法
CN112508913A (zh) 基于图像检测的电缆截面边沿检测方法
CN115082776A (zh) 一种基于图像识别的电能表自动检测系统及方法
CN110826571B (zh) 一种用于图像快速识别及特征匹配的图像遍历算法
CN111915509A (zh) 基于图像处理去阴影优化的保护压板状态辨识方法
CN110909751B (zh) 用于变电站绝缘子清扫机器人的视觉识别方法、系统及介质
CN113793322A (zh) 一种对磁性材料自动检测的方法、电子设备和存储介质
KR101801266B1 (ko) 이미지 분류 방법 및 장치
CN113435285A (zh) 一种血液肿瘤染色体核型自动分析方法及系统
CN112509026A (zh) 一种绝缘子裂缝长度识别方法
CN115131539B (zh) 基于机器视觉的铝模板自动识别与分类系统
CN109543531B (zh) 一种纤维提取和纤维视觉矫正的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant