CN114445408A - 一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 - Google Patents
一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 Download PDFInfo
- Publication number
- CN114445408A CN114445408A CN202210370970.5A CN202210370970A CN114445408A CN 114445408 A CN114445408 A CN 114445408A CN 202210370970 A CN202210370970 A CN 202210370970A CN 114445408 A CN114445408 A CN 114445408A
- Authority
- CN
- China
- Prior art keywords
- pathogen
- pathogens
- variance
- filtering
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 244000052769 pathogen Species 0.000 title claims abstract description 215
- 230000001717 pathogenic effect Effects 0.000 title claims abstract description 107
- 238000001514 detection method Methods 0.000 title claims abstract description 90
- 238000001914 filtration Methods 0.000 title claims abstract description 88
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000001737 promoting effect Effects 0.000 title description 2
- 238000012549 training Methods 0.000 claims abstract description 20
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 7
- 238000013135 deep learning Methods 0.000 claims abstract description 7
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 5
- 230000002146 bilateral effect Effects 0.000 claims description 31
- 210000004392 genitalia Anatomy 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 9
- 230000028327 secretion Effects 0.000 claims description 9
- 230000000694 effects Effects 0.000 claims description 6
- 241000894006 Bacteria Species 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 101100068884 Arabidopsis thaliana GLV11 gene Proteins 0.000 description 11
- 101100033912 Schizosaccharomyces pombe (strain 972 / ATCC 24843) rgf1 gene Proteins 0.000 description 11
- 238000009499 grossing Methods 0.000 description 10
- 210000004027 cell Anatomy 0.000 description 8
- 210000000265 leukocyte Anatomy 0.000 description 6
- 238000012552 review Methods 0.000 description 6
- 101100068889 Arabidopsis thaliana GLV5 gene Proteins 0.000 description 5
- 101100248195 Schizosaccharomyces pombe (strain 972 / ATCC 24843) rgf2 gene Proteins 0.000 description 5
- 239000003086 colorant Substances 0.000 description 4
- 210000002919 epithelial cell Anatomy 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000003794 Gram staining Methods 0.000 description 3
- 206010046914 Vaginal infection Diseases 0.000 description 3
- 201000008100 Vaginitis Diseases 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 210000005002 female reproductive tract Anatomy 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 206010061218 Inflammation Diseases 0.000 description 1
- 230000001580 bacterial effect Effects 0.000 description 1
- 244000052616 bacterial pathogen Species 0.000 description 1
- 210000003756 cervix mucus Anatomy 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000004043 dyeing Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 1
- 230000004054 inflammatory process Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000011206 morphological examination Methods 0.000 description 1
- 210000004400 mucous membrane Anatomy 0.000 description 1
- 210000005000 reproductive tract Anatomy 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
- G06T2207/20028—Bilateral filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
Abstract
本发明涉及一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质,包括以下步骤:S1:构建用于检测孢子和芽生孢子的病原体训练集;S2:基于S1构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的人工智能目标检测模型;S3:基于改进的循环导向滤波算法对原图进行滤波操作;S4:检测输入图像中的病原体:将输入图像按照S3进行滤波操作,然后将滤波后的图像输入到S2训练出的病原体的人工智能目标检测模型进行病原体检测,得到病原体的位置信息。本发明通过采用基于改进的循环导向滤波算法,并将处理后的图像输入到基于卷积神经网络的深度学习目标检测模型,有效提升病原体的检出率。
Description
技术领域
本发明涉及女性生殖道微生态中病原体的检测方法,特别涉及一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质。
背景技术
孢子和芽生孢子是女性生殖道中常见的致病病原体,一定条件下侵犯女性下生殖道而引起外阴皮肤黏膜炎症,引发女性霉菌性阴道炎,也常称为真菌性阴道炎,因此提高孢子和芽生孢子检出率对诊断女性霉菌性阴道炎起到了至关重要的作用。目前针对女性生殖道分泌物生物标本的革兰氏染色方法合显微镜100倍高倍物镜下的病原体形态学检查是最常用的检验方法,也是女性生殖道病原体检测的金标准。
目前基于病原体的专家标注数据库和卷积神经网络的目标检测深度学习方法可大幅度提高显微镜下图像的病原体的检测。但是因为对于制作的阴道分泌物生物标本涂片有厚有薄,有稀有稠等因素,所以拍摄的显微镜下的图像有可能背景简单,即病原体周边无或少量其他细胞、细菌等目标物,也有可能背景复杂,即病原体与生物标本中的其他细胞、细菌堆叠在一起,同时又因为高倍物镜景深非常小,可能造成图像中的病原体不在对焦平面上,所以病原体区域是比较模糊等复杂情况。同一个目标检测模型,对于同一场景下,在对焦平面的清晰图像和不在对焦平面上的模糊图像检测结果会不同,不在对焦平面上的图像造成病原体漏检的可能性更大。基于以上理由,考虑通过对图像进行平滑滤波操作,凸显有可能包含病原体的区域并同时虚化或者去除背景,然后再输入到训练的病原体目标检测模型中,进一步提升病原体的检出率。
目前针对图像的平滑滤波操作,特别是保持边缘的平滑滤波操作用途广泛,其中双边滤波(Bilateral Filter)是具有保持目标物边缘轮廓的最常用的平滑滤波算法,联合双边滤波(Joint/Cross Bilateral Filter 或称交叉双边滤波)是对双边滤波的改进,循环导向滤波(Rolling Guidance Filter 或称滚动导向滤波、迭代引导滤波)是基于联合双边滤波的改进,可以起到虚化平滑背景并保持目标物的边缘和轮廓的作用。然而普通的循环导向滤波存在以下问题:一是,普通的循环导向滤波有三个参数,分别是滤波器窗口大小、颜色差异的方差和距离差异的方差,但是同一组参数,针对不同的图像并不能同时都达到理想的效果,即针对不同的图像,需要分别调节三个不同的参数,才有可能达到想要的结果,即使针对同一张图像,这些参数往往需要多次调试实验所得,因此该普通的循环导向滤波方法步骤繁琐且应用于经革兰氏染色的女性生殖道分泌物生物标本的显微图像的这种特殊场景下检测识别病原体时不具有通用性。二是,采用普通循环导向滤波处理后,虽然虚化了图像中的背景,但是图像中的病原体有的变得清晰有的变得模糊,甚至分辨不清楚病原体的形态,图像整体和病原体周边区域的整体背景虚化效果不好,仍然可以看到其他目标物的边缘轮廓;三是,存在病原体受其他目标物干扰,甚至与其他目标物相连,影响病原体形态的情况,容易造成病原体的漏检。
发明内容
本发明要解决的技术问题是克服现有技术的上述缺陷,提供一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质,本发明检测方法针对经革兰氏染色的女性生殖道分泌物生物标本的显微图像的这种特殊场景具有通用性,本发明通过采用基于改进的循环导向滤波算法提出一种虚化平滑背景并同时凸显包含病原体区域的方法,并将处理后的图像输入到基于卷积神经网络的深度学习目标检测模型,从而提升病原体的检出率。
本发明是通过以下技术方案实现的:
一种基于改进的循环导向滤波算法的提升病原体检测方法,包括以下步骤:
S1:构建用于检测孢子和芽生孢子的病原体训练集;
S2:基于S1构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的人工智能目标检测模型;
S3:基于改进的循环导向滤波算法对原图进行滤波操作,包括以下步骤:
S32:基于高参数值组生成导向图,具体步骤如下:
S33:基于低参数值组生成输入图,得到彩色的24位图;
S34:将S32中的导向图和S33中的输入图进行联合双边滤波得到平滑了背景并同时凸显了保持颜色信息的病原体区域的滤波效果图;
S4:检测输入图像中的病原体:将输入图像按照S3进行滤波操作,然后将滤波后的图像输入到S2训练出的病原体的人工智能目标检测模型进行病原体检测,得到病原体的位置信息。
作为优化,所述S1中构建用于检测孢子和芽生孢子的病原体训练集,具体步骤如下:采集包含孢子和芽生孢子的经革兰氏染色的女性下生殖道分泌物生物标本的显微图像,并交由相关领域专家标注出图像中的病原体的类别和位置,从而构建出用于检测孢子和芽生孢子的病原体训练集。
作为优化,所述S2中基于S1构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的的人工智能目标检测模型,具体步骤如下:利用主干网络,如VGG-19、ResNet-50、ResNet-101、Inception V3、mobilenetv2等结合目前主流的深度学习目标检测框架方法,如SSD、Faster-RCNN、YOLO等或及其相关延伸的框架训练基于卷积神经网络的人工智能目标检测模型。
作为优化,所述S34中将S32中的导向图和S33中的输入图进行联合双边滤波,具体
步骤如下:将作为联合双边滤波的导向图,作为联合双边滤波的输入图,同时使用
小的核滤波器窗口、低颜色差异方差、低距离差异方差,进行联合双边
滤波,带入以下公式,设定
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以上基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以上基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
本发明的有益效果是:
1:针对经革兰氏染色的女性下生殖道分泌物生物标本的显微图像,本发明可以使用固定参数针对不同的显微图像,均可达到虚化平滑背景,同时凸显包含病原体的区域,无需针对不同图像设置不同参数,通用性较强。
2:本发明可以虚化平滑掉图像中病原体周边的目标物,保证病原体的轮廓形状不受其他目标物的影响,提取到更完整形态的病原体,提升病原体的检出率。
3:本发明可以虚化平滑图像中的背景,同时加强病原体的边缘,更加凸显病原体的区域。
4:本发明可以使得不在对焦平面上的模糊的病原体更加清晰,轮廓更加完整,进一步提升病原体的检出率。
附图说明
下面结合附图对一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质作进一步说明:
图1为本发明整个过程的流程示意图;
图2为本发明改进的循环导向滤波方法的流程示意图;
图3(a)为背景比较简单,背景是尺度很大的上皮细胞和尺度很小的细菌的示例图;
图3(b)为针对图3(a)进行普通循环导向滤波的示例图(第一组参数);
图3(c)为针对图3(a)进行普通环导向滤波的示例图(第二组参数);
图3(d)为图3(b)和图3(c)进行联合双边滤波的示例图;
图3(e)为本发明针对图3(a)生成的导向图的示例图;
图3(f)为本发明针对图3(a)进行滤波的示例图;
图3(g)为目标检测模型针对图3(a)检测出的病原体的示例图;
图3(h)为目标检测模型针对图3(b)检测出的病原体的示例图;
图3(i)为目标检测模型针对图3(c)检测出的病原体的示例图;
图3(j)为目标检测模型针对图3(d)检测出的病原体的示例图;
图3(k)为目标检测模型针对图3(f)检测出的病原体的示例图;
图4(a)为背景相对复杂,背景是尺度中等的白细胞和尺度较大的细菌的示例图;
图4(b)为针对图4(a)进行普通循环导向滤波的示例图(第一组参数);
图4(c)为针对图4(a)进行普通循环导向滤波的示例图(第二组参数);
图4(d)为图4(b)和图4(c)进行联合双边滤波的示例图;
图4(e)为本发明针对图4(a)生成的导向图的示例图;
图4(f)为本发明针对图4(a)进行滤波的示例图;
图4(g)为目标检测模型针对图4(a)检测出的病原体的示例图;
图4(h)为目标检测模型针对图4(b)检测出的病原体的示例图;
图4(i)为目标检测模型针对图4(c)检测出的病原体的示例图;
图4(j)为目标检测模型针对图4(d)检测出的病原体的示例图;
图4(k)为目标检测模型针对图4(f)检测出的病原体的示例图;
图5(a)为背景复杂,铺满了尺度中等的白细胞和尺度较大的细菌的示例图;
图5(b)为针对图5(a)进行普通循环导向滤波的示例图(第一组参数);
图5(c)为针对图5(a)进行普通循环导向滤波的示例图(第二组参数);
图5(d)为图5(b)和图5(c)进行联合双边滤波的示例图;
图5(e)为本发明针对图5(a)生成的导向图的示例图;
图5(f)为本发明针对图5(a)进行滤波的示例图;
图5(g)为目标检测模型针对图5(a)检测出的病原体的示例图;
图5(h)为目标检测模型针对图5(b)检测出的病原体的示例图;
图5(i)为目标检测模型针对图5(c)检测出的病原体的示例图;
图5(j)为目标检测模型针对图5(d)检测出的病原体的示例图;
图5(k)为目标检测模型针对图5(f)检测出的病原体的示例图。
具体实施方式
为了更加清楚地说明本发明所述的技术手段及有益效果,以下结合附图,对本发明进行详细的说明,如图1所示,具体步骤如下:
步骤一:构建用于检测孢子和芽生孢子的病原体训练集。采集包含孢子和芽生孢子的经革兰氏染色的女性妇科下生殖道分泌物标本的显微图像,并交由相关领域专家标注出图像中的病原体的类别和位置,从而构建出用于检测孢子和芽生孢子的病原体训练集。
步骤二:基于步骤一构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的人工智能目标检测模型。本实施例中采用主干卷积神经网络ResNet-101结合SSD的深度学习目标检测框架训练检测孢子和芽生孢子病原体的人工智能目标检测模型。
步骤三:对输入的经革兰氏染色的女性下生殖道分泌物生物标本的原显微图像
进行改进的循环导向滤波操作。经革兰氏染色的女性下生殖道分泌物生物标本的原显微图
像,在颜色显示上呈现一些特殊性,如上皮细胞、白细胞等常被染成偏浅红色,病原体和阳
性杆菌等常被染成深紫黑色,及已知上皮细胞的尺寸较大,病原体的尺寸比白细胞小,比细
菌要大很多等尺寸特性,改进普通循环导向滤波,具体步骤如图2所示。
为了清楚的展现本发明改进的循环导向滤波操作的具体提升效果,选取三种存在病原体但是背景不同的场景:
第一个场景:背景比较简单,背景是尺度很大的上皮细胞和尺度很小的细菌,如图3(a)所示,包含4个病原体,其中位置3和位置4处的病原体比较模糊,不在焦平面上,位置1和位置2的病原体与细胞在边缘上有连接。
第二个场景:背景相对复杂,背景是尺度中等的白细胞和尺度较大的细菌,如图4(a)所示,包含3个病原体,其中位置3处的病原体比较模糊,不在焦平面上,位置2和位置3处的病原体的边缘上附着着一些细菌,影响了其病原体本来的形态轮廓。
第三个场景:背景复杂,铺满了尺度中等的白细胞和尺度较大的细菌,如图5(a)所示,包含5个病原体,其中焦平面上在细菌上,除了位置3处的病原体,其他所有的病原体都比较模糊,不在焦平面上,而且这些病原体均与其他目标物的边缘有连接。
本实施例中具体的参数和步骤如下:
初始化参数的值,设定=80,=30,=60,=20,=
101,=51,,,,,,其中,, ,利用大的核滤波器窗口=101、高颜色差异方差=80、高距离差异方差=60,这三个参数记为第一
组参数,,带入以下公式,设定记为公式1:
循环迭代后的最终结果从视觉上看是单通道的灰度8位图,其实是一个24位
图,只是没有了革兰氏染色后的图片颜色信息,但是凸显了包含经革兰氏染色后颜色较深
的病原体区域,其中包括在焦平面上的清晰的病原体区域,也包括不在焦平面上有些模糊
的病原体区域,并同时虚化平滑掉了背景中细菌等尺度小的目标物及染色较浅的细胞区
域,起到了凸显病原体区域的作用。图3(a)、图4(a)和图5(a)迭代后得到结果,如图3
(e)、图4(e)和图5(e)所示。
其中联合双边滤波的结果设定记为, 其结果凸显了保持颜色信息的病原体区
域,其中包括在焦平面上的清晰的病原体区域,也包括不在焦平面上有些模糊的病原体区
域,虚化平滑掉了背景中颜色较深的细菌等尺度小的目标物及染色较浅的细胞等其他区
域。图3(a)、图4(a)和图5(a)经过以上处理后的最终结果,如图3(f)、图4(f)和图5(f)所
示。
将本发明和普通循环导向滤波的结果进行比较,普通循环导向滤波分别对图3(a)、图4(a)、图5(a)进行处理,其中采用第一组参数,即滤波器窗口的大小的直径为101,颜色差异的方差为80,距离差异的方差为60,迭代次数是4,设定该参数的循环导向滤波记为RGF1,滤波后的结果如图3(b)、4(b)和5(b)所示,采用第二组参数,即滤波器窗口的大小的直径为51,颜色差异的方差为30,距离差异的方差为20,迭代次数是4,设定该参数的循环导向滤波记为 RGF2,滤波后的结果如图3(c)、4(c)和5(c)所示,将以上RGF1和RGR2的结果进行联合双边滤波(JBF)记为RGF1_RGF2_JBF,图3(b)和图3(c)联合双边滤波后的结果为3(d), 图4(b)和图4(c)联合双边滤波后的结果为4(d), 图5(b)和图5(c)联合双边滤波后的结果为5(d)。
以下从4个方面进行比较:
1、本发明和普通循环导向滤波在参数的通用性上的对比结果:
不同图像,经相同的第一组参数的RGF1(普通循环导向滤波)处理后,虽然虚化了图像中背景,但是图像中的病原体有的变得清晰有的变得模糊,如图3(b)位置2的病原体变得清晰,位置3的病原体变得模糊,如图4(b)位置1的病原体变得清晰,但是图4(b)位置2和位置3的病原体变得模糊。如图5(b)位置1、位置2的病原体变得清晰,位置3、位置4、位置5的病原体变得模糊。
而不同图像,经相同参数的本发明处理后,不仅虚化了背景,而且使得病原体区域均变得更加清晰,如图3(f)、4(f)和5(f)所示。
总之,本发明首先初始化8个滤波参数,然后基于高参数值组采用改进的循环导向滤波算法生成导向图,得到视觉上呈现灰色的24位图,其次基于低参数值组生成输入图,得到保留颜色信息的彩色的24位图,最后将灰色的24位导向图和彩色的24位输入图进行联合双边滤波得到凸显了保持颜色信息的病原体区域,本发明可以使用固定参数针对不同的显微图像,均可达到虚化平滑背景,同时凸显包含病原体的区域,无需针对不同图像设置不同参数,其稳定性好,通用性强。
2、本发明和普通循环导向滤波在提取到病原体的清晰度和完整度上的对比结果:
经RGF1处理后的图像,病原体的区域有可能变得更加模糊,甚至分辨不清楚病原体的形态,如图3(b)位置3的病原体,图4(b)的位置2和位置3的病原体,而经本发明处理后,同一位置处的病原体变得更加清晰,如图3(f)位置3的病原体,图4(f)的位置2和位置3的病原体。同时,经RGF1处理后的图像,病原体的边缘变得更加模糊,轮廓的完整度不好,如图5(b)位置3、位置4、位置5处的病原体,而经本发明处理后,同一位置处的病原体的边缘变得更加清晰,轮廓更完整,如图5(f)位置3、位置4、位置5处的病原体。
总之,本发明改进的循环导向滤波方法在提取到病原体的清晰度更佳,而且提取到更完整形态的病原体,提升病原体的检出率。
、本发明和普通循环导向滤波在提取到病原体是否受其周围其他目标物影响其形态的对比结果:
经RGF2和RGF1_RGF2_JBF处理后的图像,病原体受其他目标物干扰,甚至与其他目标物相连,影响病原体原来的形态,如图3(c)和图3(d)位置4的病原体与细胞的边缘相连、图4(c)和图4(d)的位置2和位置3的病原体与细菌的边缘相连,边缘均受影响,影响了病原体的形态,而经本发明处理后,同一位置处的病原体其边缘也变得更加清晰,并虚化了与其相连的其他的目标物,更加还原病原体的形态,如图3(f)位置4的病原体与细胞边缘已经完全分开,图4(f)的位置2和位置3的病原体周边的细菌已经被虚化,更加还原了病原体的形态。
总之,本发明改进的循环导向滤波方法可以虚化平滑掉图像中病原体周边的目标物,保证病原体的轮廓形状不受其他目标物的影响,更加还原了病原体的形态,提升病原体的检出率。
、本发明和普通循环导向滤波在病原体周边小区域的背景是否被虚化的对比结果:
经RGF1、RGF2和RGF1_RGF2_JBF处理后,图像整体和病原体周边区域的整体背景虚化效果不好,仍然可以看到其他目标物的边缘轮廓,如图3(b)、图3(c)和图3(d)位置4的病原体,图4(c)的位置2和位置3的病原体,图5(b)、图5(c)和图5(d)的位置3、位置4和位置5的病原体,而经本发明处理后的,同一位置处病原体周边的小区域的背景虚化程度更高,更加凸显病原体,如图3(f)位置4的病原体,图4(f)的位置2和位置3的病原体,图5(f)的位置3、位置4和位置5的病原体。
总之,本发明改进的循环导向滤波方法可以虚化平滑图像中的背景,同时加强病原体的边缘,更加凸显病原体的区域,进而提升病原体的检出率。
综合以上对比结果,基于以上四点,本发明改进的循环导向滤波方法比普通循环导向滤波在处理经革兰氏染色的女性下生殖道分泌物生物标本的显微图像上有明显提升效果。
步骤四:检测图像3(a)、4(a)和5(a)中的病原体。将图像按照步骤三本发明改进的循环导向滤波操作,然后将滤波后的图像3(f)、4(f)和5(f)输入到步骤二训练出的病原体的人工智能目标检测模型进行病原体检测,得到病原体的位置信息,分别如图3(k)、4(k)、5(k)所示,对比分别将原图直接输入到同一目标检测模型得到的病原体的位置信息,分别如图3(h)、4(h)、5(h)所示,将通过RGF1滤波后的图像输入到同一目标检测模型得到的病原体的位置信息,分别如图3(i)、4(i)、5(i)所示, 将通过RGF2滤波后的图像输入到同一目标检测模型得到的病原体的位置信息,分别如图3(j)、4(j)、5(j)所示, 将通过RGF1_RGF2_JBF滤波后的图像输入到同一目标检测模型得到的病原体的位置信息,分别如图3(j)、4(j)、5(j)所示,检测到的病原体的个数对比如下表1所示:
由表1结合图3(g)、图4(g)、图5(g)以及人工审核结果可知,将原图直接输入到同一目标检测模型后,图3(g)中漏检2个病原体,包括不在焦平面上模糊的位置3和与其他目标物边缘接触边缘模糊的位置4处的病原体;图4(g)中漏检2个病原体,包括与其他目标物边缘接触边缘模糊的位置2和位置3处的病原体;图5(g)中漏检3个病原体,包括边缘模糊并与其他目标物边缘接触的位置2、位置4和位置5处的病原体。
由表1结合图3(h)、图4(h)、图5(h)以及人工审核结果可知,将普通导向滤波RGF1进行滤波后的图像输入到同一目标检测模型后,图3(h)中漏检2个病原体,分别是位置3和位置4处的病原体,经RGF1滤波后这两个位置处的病原体已经很模糊,看不清楚轮廓;图4(h)中漏检2个病原体,位置2和位置3处的病原体,经RGF1滤波后这两个位置处的病原体已经很模糊,看不清楚轮廓;图5(h)中漏检3个病原体,分别是位置3、位置4和位置5处的病原体,经RGF1滤波后这三个位置处的病原体的边界模糊,也与其他目标的边界未很清楚的分开。
由表1结合图3(i)、图4(i)、图5(i)以及人工审核结果可知,将普通导向滤波RGF2进行滤波后的图像输入到同一目标检测模型后,图3(i)中漏检1个病原体,位置3的病原体与周边其他目标物的边界未清除的分开;图4(i)中漏检2个病原体,分别是位置2和位置3处的病原体,这两个病原体未与周边目标物的边界清楚分开;图5(i)中未漏检病原体,但是显然该图中其他位置的虚化程度不如本发明的虚化程度。
由表1结合图3(j)、图4(j)、图5(j)以及人工审核结果可知,将RGF1_RGF2_JBF滤波后的图像输入到同一目标检测模型后,图3(j)中漏检2个病原体,分别是位置3和位置4处的病原体,经滤波后这两个位置处的病原体已经很模糊,看不清楚轮廓;图4(j)中漏检2个病原体,包括与其他目标物边缘接触边缘模糊而且整体也模糊的位置2和位置3处的病原体;图5(j)中漏检3个病原体,包括边缘模糊并与其他目标物边缘接触的位置3、位置4和位置5处的病原体。
由表1结合图3(k)、图4(k)、图5(k)以及人工审核结果可知,经本发明改进的循环导向滤波后的结果输入到人工智能目标检测模型中得到的病原体的数量与人工审核的数量是一致的。因此,本发明通过采用基于改进的循环导向滤波算法提出一种虚化平滑背景并同时凸显包含病原体区域的方法,并将处理后的图像输入到基于卷积神经网络的深度学习人工智能目标检测模型,可有效提升病原体的检出率。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现本发明实施例中基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现本发明实施例中基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
上述具体实施方式仅是本发明的具体个案,并非是对本发明作其它形式的限制,任何熟悉本专业的技术人员可能利用上述揭示的技术内容加以变更或改型为等同变化的等效实施方式。但是凡是未脱离本发明技术原理的前提下,依据本发明的技术实质对以上实施方式所作的任何简单修改、等同变化与改型,皆应落入本发明的专利保护范围。
Claims (7)
1.一种基于改进的循环导向滤波算法的提升病原体检测方法,其特征在于,包括以下步骤:
S1:构建用于检测孢子和芽生孢子的病原体训练集;
S2:基于S1构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的人工智能目标检测模型;
S3:基于改进的循环导向滤波算法对原图进行滤波操作,包括以下步骤:
S32:基于高参数值组生成导向图,具体步骤如下:
S33:基于低参数值组生成输入图,得到彩色的24位图;
S34:将S32中的导向图和S33中的输入图进行联合双边滤波得到平滑了背景并同时凸显了保持颜色信息的病原体区域的滤波效果图;
S4:检测输入图像中的病原体:将输入图像按照S3进行滤波操作,然后将滤波后的图像输入到S2训练出的病原体的人工智能目标检测模型进行病原体检测,得到病原体的位置信息。
2.如权利要求1所述的一种基于改进的循环导向滤波算法的提升病原体检测方法,其特征在于:所述S1中构建用于检测孢子和芽生孢子的病原体训练集,具体步骤如下:采集包含孢子和芽生孢子的经革兰氏染色的女性下生殖道分泌物生物标本的显微图像,并交由相关领域专家标注出图像中的病原体的类别和位置,从而构建出用于检测孢子和芽生孢子的病原体训练集。
3.如权利要求2所述的一种基于改进的循环导向滤波算法的提升病原体检测方法,其特征在于:所述S2中基于S1构建的孢子和芽生孢子的病原体训练集,训练检测孢子和芽生孢子病原体的的人工智能目标检测模型,具体步骤如下:利用主干网络VGG-19、ResNet-50、ResNet-101、Inception V3或mobilenetv2结合目前主流的深度学习目标检测框架方法,SSD、Faster-RCNN、YOLO或及其相关延伸的框架训练基于卷积神经网络的人工智能目标检测模型。
6.一种计算机设备,包括存储器和处理器,其特征在于,所述存储器存储有计算机程序,所述处理器执行时实现权利要求1-5任一所述计算机程序时实现基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
7.一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-5任一所述基于改进的循环导向滤波算法的提升病原体检测方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210370970.5A CN114445408B (zh) | 2022-04-11 | 2022-04-11 | 一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210370970.5A CN114445408B (zh) | 2022-04-11 | 2022-04-11 | 一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114445408A true CN114445408A (zh) | 2022-05-06 |
CN114445408B CN114445408B (zh) | 2022-06-24 |
Family
ID=81359334
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210370970.5A Active CN114445408B (zh) | 2022-04-11 | 2022-04-11 | 一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114445408B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114821272A (zh) * | 2022-06-28 | 2022-07-29 | 上海蜜度信息技术有限公司 | 图像识别方法、系统、介质、电子设备及目标检测模型 |
Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103745231A (zh) * | 2014-01-16 | 2014-04-23 | 华南农业大学 | 小麦矮腥黑穗病tck及其近似种tct的冬孢子图像鉴定方法 |
CN104091179A (zh) * | 2014-07-01 | 2014-10-08 | 北京工业大学 | 小麦白粉病菌孢子图片的智能识别方法 |
CN104651462A (zh) * | 2015-01-29 | 2015-05-27 | 华南农业大学 | 基于显微图像分析的稻瘟病菌孢子检测方法 |
CN108564124A (zh) * | 2018-04-13 | 2018-09-21 | 山东农业大学 | 一种基于支持向量机的稻瘟病菌孢子显微图像检测识别方法 |
CN110458808A (zh) * | 2019-07-10 | 2019-11-15 | 山东仕达思生物产业有限公司 | 基于形态学与yolo算法的女性生殖道病原体识别方法 |
CN110580699A (zh) * | 2019-05-15 | 2019-12-17 | 徐州医科大学 | 基于改进Faster RCNN算法的病理图像细胞核检测方法 |
CN110689021A (zh) * | 2019-10-17 | 2020-01-14 | 哈尔滨理工大学 | 一种基于深度学习的低可见度环境下实时目标检测方法 |
CN111260638A (zh) * | 2020-01-19 | 2020-06-09 | 陕西未来健康科技有限公司 | 基于卷积神经网络的脑脊液细胞和病原体的自动检测计数方法及系统 |
CN111582349A (zh) * | 2020-04-30 | 2020-08-25 | 陕西师范大学 | 一种基于YOLOv3和核相关滤波改进的目标跟踪算法 |
CN111754457A (zh) * | 2020-05-15 | 2020-10-09 | 中山大学 | 一种基于角膜共聚焦图像的菌丝筛查系统 |
CN112950636A (zh) * | 2021-04-29 | 2021-06-11 | 山东仕达思生物产业有限公司 | 基于R3Det的女性阴道病原体的旋转框目标检测方法 |
CN112966645A (zh) * | 2021-03-24 | 2021-06-15 | 山东仕达思生物产业有限公司 | 一种妇科微生态中多种类型杆菌的智能检测和分类计数方法 |
CN113033417A (zh) * | 2021-03-29 | 2021-06-25 | 山东仕达思生物产业有限公司 | 一种妇科微生态中孢子的检测识别方法、设备及存储介质 |
CN113111796A (zh) * | 2021-04-19 | 2021-07-13 | 山东仕达思生物产业有限公司 | 一种芽生孢子的自动细化标注类别的检测识别方法 |
CN113158979A (zh) * | 2021-05-14 | 2021-07-23 | 山东仕达思医疗科技有限公司 | 一种妇科显微图像大视野下白细胞的检测识别方法 |
CN113205052A (zh) * | 2021-05-10 | 2021-08-03 | 江苏硕世生物科技股份有限公司 | 基于残差深度网络的孢子芽孢识别方法、系统及介质 |
CN113850725A (zh) * | 2020-07-15 | 2021-12-28 | 南京航空航天大学 | 一种滤波增强深度学习的被动式太赫兹图像目标检测方法 |
-
2022
- 2022-04-11 CN CN202210370970.5A patent/CN114445408B/zh active Active
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103745231A (zh) * | 2014-01-16 | 2014-04-23 | 华南农业大学 | 小麦矮腥黑穗病tck及其近似种tct的冬孢子图像鉴定方法 |
CN104091179A (zh) * | 2014-07-01 | 2014-10-08 | 北京工业大学 | 小麦白粉病菌孢子图片的智能识别方法 |
CN104651462A (zh) * | 2015-01-29 | 2015-05-27 | 华南农业大学 | 基于显微图像分析的稻瘟病菌孢子检测方法 |
CN108564124A (zh) * | 2018-04-13 | 2018-09-21 | 山东农业大学 | 一种基于支持向量机的稻瘟病菌孢子显微图像检测识别方法 |
CN110580699A (zh) * | 2019-05-15 | 2019-12-17 | 徐州医科大学 | 基于改进Faster RCNN算法的病理图像细胞核检测方法 |
CN110458808A (zh) * | 2019-07-10 | 2019-11-15 | 山东仕达思生物产业有限公司 | 基于形态学与yolo算法的女性生殖道病原体识别方法 |
CN110689021A (zh) * | 2019-10-17 | 2020-01-14 | 哈尔滨理工大学 | 一种基于深度学习的低可见度环境下实时目标检测方法 |
CN111260638A (zh) * | 2020-01-19 | 2020-06-09 | 陕西未来健康科技有限公司 | 基于卷积神经网络的脑脊液细胞和病原体的自动检测计数方法及系统 |
CN111582349A (zh) * | 2020-04-30 | 2020-08-25 | 陕西师范大学 | 一种基于YOLOv3和核相关滤波改进的目标跟踪算法 |
CN111754457A (zh) * | 2020-05-15 | 2020-10-09 | 中山大学 | 一种基于角膜共聚焦图像的菌丝筛查系统 |
CN113850725A (zh) * | 2020-07-15 | 2021-12-28 | 南京航空航天大学 | 一种滤波增强深度学习的被动式太赫兹图像目标检测方法 |
CN112966645A (zh) * | 2021-03-24 | 2021-06-15 | 山东仕达思生物产业有限公司 | 一种妇科微生态中多种类型杆菌的智能检测和分类计数方法 |
CN113033417A (zh) * | 2021-03-29 | 2021-06-25 | 山东仕达思生物产业有限公司 | 一种妇科微生态中孢子的检测识别方法、设备及存储介质 |
CN113111796A (zh) * | 2021-04-19 | 2021-07-13 | 山东仕达思生物产业有限公司 | 一种芽生孢子的自动细化标注类别的检测识别方法 |
CN112950636A (zh) * | 2021-04-29 | 2021-06-11 | 山东仕达思生物产业有限公司 | 基于R3Det的女性阴道病原体的旋转框目标检测方法 |
CN113205052A (zh) * | 2021-05-10 | 2021-08-03 | 江苏硕世生物科技股份有限公司 | 基于残差深度网络的孢子芽孢识别方法、系统及介质 |
CN113158979A (zh) * | 2021-05-14 | 2021-07-23 | 山东仕达思医疗科技有限公司 | 一种妇科显微图像大视野下白细胞的检测识别方法 |
Non-Patent Citations (1)
Title |
---|
MICHAEL BRUNK 等: "HyphaTracker: An ImageJ toolbox for time-resolved analysis of spore germination in filamentous fungi", 《SCIENTIFIC REPORTS》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114821272A (zh) * | 2022-06-28 | 2022-07-29 | 上海蜜度信息技术有限公司 | 图像识别方法、系统、介质、电子设备及目标检测模型 |
Also Published As
Publication number | Publication date |
---|---|
CN114445408B (zh) | 2022-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107038446B (zh) | 一种主动照明下基于重叠边缘检测的夜间双果重叠番茄识别方法 | |
CN108805040A (zh) | 一种基于分块的有遮挡人脸识别算法 | |
CN108268859A (zh) | 一种基于深度学习的人脸表情识别方法 | |
CN110136149A (zh) | 基于深度神经网络的白细胞定位与分割方法 | |
CN103955949B (zh) | 基于Mean-shift算法的运动目标检测方法 | |
CN107516316A (zh) | 一种在fcn中引入聚焦机制对静态人体图像进行分割的方法 | |
CN107705288A (zh) | 伪目标运动强干扰下的危险气体泄漏红外视频检测方法 | |
Chen et al. | Facial expression recognition based on edge detection | |
CN114445408B (zh) | 一种基于改进的循环导向滤波算法的提升病原体检测方法、设备及存储介质 | |
CN109241963B (zh) | 基于Adaboost机器学习的胶囊胃镜图像中出血点智能识别方法 | |
CN107169996A (zh) | 一种视频中动态人脸识别方法 | |
CN104992448B (zh) | 机器人防损伤采摘葡萄的自动定位方法 | |
CN112784767A (zh) | 基于白细胞显微图像的细胞实例分割算法 | |
Wollmann et al. | Multi-channel deep transfer learning for nuclei segmentation in glioblastoma cell tissue images | |
Aung et al. | Live and dead cells counting from microscopic trypan blue staining images using thresholding and morphological operation techniques | |
CN113033417B (zh) | 一种妇科微生态中孢子的检测识别方法、设备及存储介质 | |
CN110633676A (zh) | 一种自动识别脑脊液细胞图像信息方法 | |
Liu et al. | Implementation System of Human Eye Tracking Algorithm Based on FPGA. | |
CN112633370B (zh) | 一种针对丝状真菌形态的检测方法、装置、设备及介质 | |
He | The influence of image enhancement algorithm on face recognition system | |
Chen et al. | Dust Image Enhancement Algorithm Based on Feature Transformation | |
Wang et al. | Nuclei segmentation of cervical cell images based on intermediate segment qualifier | |
CN110991223B (zh) | 一种基于迁移学习的美瞳识别方法及系统 | |
CN105760848A (zh) | 一种基于环形模板卷积的瞳孔定位方法 | |
Liu et al. | A Tongue Segmentation Algorithm Based on LBP Feature and Cascade Classifier |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: A method, device, and storage medium for enhancing pathogen detection based on an improved loop guided filtering algorithm Granted publication date: 20220624 Pledgee: Bank of China Limited Jinan Huaiyin sub branch Pledgor: SHANDONG STARS BIOINDUSTRY CO.,LTD. Registration number: Y2024980006615 |