CN113610766A - 显微图像分析方法、装置、存储介质及电子设备 - Google Patents

显微图像分析方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN113610766A
CN113610766A CN202110784889.7A CN202110784889A CN113610766A CN 113610766 A CN113610766 A CN 113610766A CN 202110784889 A CN202110784889 A CN 202110784889A CN 113610766 A CN113610766 A CN 113610766A
Authority
CN
China
Prior art keywords
microscopic image
image
machine learning
learning model
training
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110784889.7A
Other languages
English (en)
Inventor
芦姗
王璠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Yueshi Intelligent Technology Co ltd
Original Assignee
Beijing Yueshi Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Yueshi Intelligent Technology Co ltd filed Critical Beijing Yueshi Intelligent Technology Co ltd
Priority to CN202110784889.7A priority Critical patent/CN113610766A/zh
Publication of CN113610766A publication Critical patent/CN113610766A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G06N3/084—Backpropagation, e.g. using gradient descent
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10056—Microscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Medical Informatics (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • Apparatus Associated With Microorganisms And Enzymes (AREA)

Abstract

本申请公开了一种显微图像分析方法、装置、存储介质及电子设备，属于微生物分析技术领域。其中，显微图像分析方法，包括：获取显微图像；将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，其中，训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。该方法通过对机器学习模型引入不确定性估计，并进行了迭代训练，从而利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果。

Description

显微图像分析方法、装置、存储介质及电子设备
技术领域
本申请涉及微生物分析技术领域，具体涉及一种显微图像分析方法、装置、存储介质及电子设备。
背景技术
显微图像是指在显微镜里观察到的图像。目前，对微生物的研究和分析主要是通过显微图像进行的。
显微图像的观察分析工作较为复杂繁琐，并且专业性较强，现有的显微图像分析判断方法耗费人力，分析判断效率低，准确性差，并且人工成本和时间成本较高。
发明内容
本申请实施例的目的是提供一种显微图像分析方法、装置、存储介质及电子设备，以至少解决现有显微图像分析判断方法耗费人力，分析判断效率低，准确性差，并且人工成本和时间成本较高的问题。
本申请的技术方案如下：
根据本申请实施例的第一方面，提供一种显微图像分析方法，方法可以包括：
获取显微图像；
将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，其中，训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
进一步地，当不确定性估计大于预设值时，在将显微图像输入到训练好的机器学习模型中，得到微生物分析结果和对微生物分析结果的不确定性估计之后，方法还包括：
发出对显微图像进行人工核查的提醒信息。
进一步地，机器学习模型包括：特征提取网络、全连接层和判别器，训练好的机器学习模型是通过下述方法训练得到的：
获取显微图像训练数据集，显微图像训练数据集中每个训练图像均有对应的标签；
将显微图像训练数据集中的训练图像输入全连接层中，得到预测结果；
利用判别器根据训练图像对应的标签对预测结果进行判断；
当判断结果小于或等于预设值时，得到训练好的机器学习模型。
进一步地，获取显微图像训练数据集包括：
获取显微训练图像；
对显微训练图像进行标注，得到带标注图像数据；
对带标注图像数据进行数据增广，得到显微图像训练数据集。
进一步地，数据增广包括：图像平移、图像旋转、图像镜像变换、改变图像对比度及改变图像亮度。
进一步地，将显微图像训练数据集中的训练图像输入全连接层中，得到预测结果，包括：
将显微图像训练数据集中的训练图像输入特征提取网络中，提取训练图像的图像特征；
将图像特征分别输入两个全连接层中，得到预测均值和预测方差；
根据预测均值与预测方差生成预测结果。
进一步地，当判断结果超过预设值时，方法还包括：
计算损失值与机器学习模型的网络参数之间梯度关系；
通过利用显微图像训练数据集迭代训练机器学习模型，根据梯度关系调整网络参数以使损失值减小。
根据本申请实施例的第二方面，提供一种显微图像分析装置，该装置可以包括：
获取模块，用于获取显微图像；
特征提取模块，用于将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
预测模块，用于将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，其中，训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
根据本申请实施例的第三方面，提供一种电子设备，该电子设备可以包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，处理器被配置为执行指令，以实现如第一方面的任一项实施例中所示的显微图像分析方法。
根据本申请实施例的第四方面，提供一种存储介质，当存储介质中的指令由信息处理装置或者服务器的处理器执行时，以使信息处理装置或者服务器实现以实现如第一方面的任一项实施例中所示的显微图像分析方法。
本申请的实施例提供的技术方案至少带来以下有益效果：
本申请实施例通过对机器学习模型引入不确定性估计，并进行了迭代训练，从而利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限值本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理，并不构成对本申请的不当限定。
图1是根据一示例性实施例示出的显微图像分析流程示意图；
图2是根据一示例性实施例示出的卷积神经网络中不确定性估计的引入示意图；
图3是根据一示例性实施例示出的显微图像分析装置结构示意图；
图4是根据一示例性实施例示出的电子设备结构示意图；
图5是根据一示例性实施例示出的电子设备的硬件结构示意图。
具体实施方式
为了使本领域普通人员更好地理解本申请的技术方案，下面将结合附图，对本申请实施例中的技术方案进行清楚、完整地描述。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在显微图像分析中，例如，医学领域的微生态分析、生物领域的微生物检验、以及其他各种领域的显微图像内容分析等。显微图像分析过程大多是通过人工观察显微镜的目镜，对包含的主题进行辨识和统计得到；也可以借助摄像软件通过密集采点和拍摄得到显微图像后，再做人工分析。但是分析过程完全依靠人工很耗费时间和精力，而且会因眼睛疲惫有误判和漏掉的情况。该过程人工成本和时间成本消耗巨大，并且分析结果的准确性无从判断，为此发明人提出一种显微图像分析方法、装置、存储介质及电子设备，以至少解决现有显微图像分析判断方法耗费人力，分析判断效率低，准确性差，并且人工成本和时间成本较高的问题。
下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的显微图像分析方法进行详细地说明。
如图1所示，在本申请实施例的第一方面，提供一种显微图像分析方法，方法可以包括：
S110：获取显微图像；
S120：将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
S130：将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，其中，训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
上述实施例方法通过对机器学习模型引入不确定性估计，并进行了迭代训练，从而利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果。
上述各步骤的具体实现方式将在下文中进行详细描述。
首先介绍步骤S110，获取显微图像。
本步骤中的显微图像是借助于显微镜和摄像软件，通过密集采点、对焦和拍摄，得到的显微图像。
接下来介绍一下步骤S120，将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征和步骤S130，将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计。
本步骤中的训练好的机器学习模型是通过下述方法训练得到的。
示例性的，机器学习模型包括：特征提取网络、全连接层和判别器，训练好的机器学习模型得训练方法包括：
S121：获取显微图像训练数据集，显微图像训练数据集中每个训练图像均有对应的标签。
具体的，采集显微图像
Figure BDA0003158328260000061
随机采样M(M＜N)张进行人工标注，得到有标签的数据集Dl
Figure BDA0003158328260000062
其中，
Figure BDA0003158328260000063
是对应标签，这个数据集就是卷积神经网络的训练集，会对训练集做数据增广，该数据增广可以包括平移、旋转、镜像变换、改变对比度、调整亮度等，得到数据集Dl。
上述方法得到的数据集增加数据量和多样性，从而加强算法的鲁棒性。
S122：将显微图像训练数据集中的训练图像输入全连接层中，得到预测结果。
可选的，在步骤中使用卷积神经网络，并且在卷积神经网络中引入不确定性估计。
该过程整个卷积神经网络(CNN)可用f表示，图像
Figure BDA0003158328260000064
经过CNN得到特征
Figure BDA0003158328260000065
CNN的架构根据分析的内容而定，可以将f拆分为K个模块，即：
Figure BDA0003158328260000066
第K个模块的输出是图像的特征：
Figure BDA0003158328260000067
不确定性估计可以插入到任意特征之后，不确定性的引入可以在特征提取的任意阶段，不限于最后一层。最简单、最好理解的方式是在整个网络特征的后面，如图2所示。fk之后的特征为FeatK一般会经过全连接层(FC)这样的映射函数得到最后结果。根据贝叶斯理论，特征可由均值和方差组合而成，在神经网络中，可以当作分别经两个FC层同时预测均值μ(FeatK)和方差∑(FeatK)，最后特征表示为：
μ(FeatK)+α∑(FeatK)。
这样这个特征就可以像正常的特征一样使用，例如，后面接判别器用来判别主体类型。
S123：利用判别器根据训练图像对应的标签对预测结果进行判断；
S124：当判断结果小于或等于预设值时，得到训练好的机器学习模型。
其中，本实施例中的机器学习模型可以是卷积神经网络也可以是其他神经网络模型、或者机器学习领域的其他提取特征的模型。
具体的，卷积神经网络的训练基本流程如图2所示，先对网络参数进行初始化，图像
Figure BDA0003158328260000071
输入网络得到FeatK，再经FC层得到μ(FeatK)+α∑(FeatK)，进一步预测出目标形式的结果yj。根据分析任务目标的不同选择合适的损失函数L(·，·)，计算预测结果与标签
Figure BDA0003158328260000072
之间的差异
Figure BDA0003158328260000073
为了使均值和方差服从正态分布，可以加约束，令均值接近1，方差接近0，惩罚差距过大的情况：
Figure BDA0003158328260000074
整个训练的优化目标为
Figure BDA0003158328260000075
根据链式法则和反向传播算法，可计算出损失值关于网络每个参数的梯度，为了减小损失，利用优化算法，通过更新迭代，在一定迭代次数后，可以训出比较好的网络参数，使预测的分析结果更加准确。
利用上述方法训练好的机器学习模型进行显微图像分析，具体可以包括：
将显微图像Iu输入到训练好的卷积神经网络中，网络在给出预测结果的同时，还能得到对预测结果的不确定性∑(FeatK)。这个不确定性∑(FeatK)值越低，说明网络对自己输出的结果比较确定；这个不确定性∑(FeatK)值越大，说明对结果越不确定，可以交给人工核查。
上述实施例方法有助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题，节约人工成本。
利用上述显微图像分析方法可以得到图像中所有微生物的类型、位置、尺寸和状态等信息。并且该方法是快速且较为准确的分析算法。对于难度比较大的图像，自动化分析算法也会有不确定的情况，如果能同时给出不确定性估计，可以将不确定的结果给人工核查，以增加分析结果的准确性。
在本申请的一些可选实施例中，当不确定性估计大于预设值时，在将显微图像输入到训练好的机器学习模型中，得到微生物分析结果和对微生物分析结果的不确定性估计之后，方法还包括：
发出对显微图像进行人工核查的提醒信息。
本实施例方法在对微生物分析不准确时可以使用者进行人工核查，也就是在不确定性∑(FeatK)值超过预设值时，可以交给人工核查。其中，预设值可以根据经验设置，在此不做限定。
在本申请的一些可选实施例中，机器学习模型包括：全连接层和判别器，训练好的机器学习模型是通过下述方法训练得到的：
获取显微图像训练数据集，显微图像训练数据集中每个训练图像均有对应的标签；
将显微图像训练数据集中的训练图像输入全连接层中，得到预测结果；
利用判别器根据训练图像对应的标签对预测结果进行判断；
当判断结果小于或等于预设值时，得到训练好的机器学习模型。
本实施例方法通过对机器学习模型引入不确定性估计，并进行了训练，根据判别器的判别结果判断该机器学习模型是否符合要求，当判断结果小于或等于预设值时，利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果。其中，预设值可以根据经验设置，再此不做限定。
在本申请的一些可选实施例中，获取显微图像训练数据集包括：
获取显微训练图像；
对显微训练图像进行标注，得到带标注图像数据；
对带标注图像数据进行数据增广，得到显微图像训练数据集。
在本申请的一些可选实施例中，数据增广包括：图像平移、图像旋转、图像镜像变换、改变图像对比度及改变图像亮度。
本实施例方法得到的数据集增加数据量和多样性，从而加强算法的鲁棒性。利用本实施例方法得到的数据集训练的模型进行显微图像分析助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题，节约人工成本。
在本申请的一些可选实施例中，将显微图像训练数据集中的训练图像输入全连接层中，得到预测结果，包括：
将显微图像训练数据集中的训练图像输入特征提取网络中，提取训练图像的图像特征；
将图像特征分别输入两个全连接层中，得到预测均值和预测方差；
根据预测均值与预测方差生成预测结果。
本实施例方法是根据贝叶斯理论，特征可由均值和方差组合而成，在神经网络中，可以当作分别经两个FC层同时预测均值μ(FeatK)和方差∑(FeatK)，最后特征表示为
μ(FeatK)+α∑(FeatK)。
这样这个特征就可以像正常的特征一样使用，例如，后面接判别器用来判别主体类型。利用本实施例方法训练的模型进行显微图像分析助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题，节约人工成本。
在本申请的一些可选实施例中，当判断结果超过预设值时，方法还包括：
计算损失值与机器学习模型的网络参数之间梯度关系；
通过利用显微图像训练数据集迭代训练机器学习模型，根据梯度关系调整网络参数以使损失值减小。
具体的，根据链式法则和反向传播算法，可计算出损失值关于网络每个参数的梯度，为了减小损失，利用常见的优化算法，通过更新迭代，在一定迭代次数后，可以训出比较好的网络参数，使预测的分析结果更加准确。
利用本实施例方法训练的模型进行显微图像分析助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题，节约人工成本。
需要说明的是，本申请实施例提供的显微图像分析方法，执行主体可以为显微图像分析装置，或者该显微图像分析装置中的用于执行显微图像分析的方法的控制模块。本申请实施例中以显微图像分析装置执行显微图像分析的方法为例，说明本申请实施例提供的显微图像分析的装置。
如图3所示，在本申请实施例的第二方面，提供一种显微图像分析装置，该装置可以包括：
获取模块310，用于获取显微图像；
特征提取模块320，用于将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
预测模块330，用于将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，其中，训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
上述实施例装置利用获取模块310获取显微图像，利用特征提取模块320将显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征，并利用预测模块330将显微图像特征输入训练好的机器学习模型的全连接层中，得到微生物分析结果和对微生物分析结果的不确定性估计，该装置利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果，有助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题。
本申请实施例中的显微图像分析装置可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。
本申请实施例中的显微图像分析装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。
本申请实施例提供的显微图像分析装置能够实现图1和图2的方法实施例实现的各个过程，为避免重复，这里不再赘述。
可选地，如图4所示，本申请实施例还提供一种电子设备400，包括处理器401，存储器402，存储在存储器402上并可在所述处理器401上运行的程序或指令，该程序或指令被处理器401执行时实现上述显微图像分析方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图5为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、以及处理器510等部件。
本领域技术人员可以理解，电子设备500还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。
上述实施例设备通过对机器学习模型引入不确定性估计，并进行了迭代训练，从而利用该训练好的机器学习模型进行显微图像的分析，可以高效地获得分析结果及对对结果的不确定性估计，节省了人工成本和时间成本，不确定性估计能更好地帮助理解分析结果。该设备助于提升显微图像分析的速度和准确性，有效地解决了显微图像自动分析过程中的不确定性问题。
应理解的是，本申请实施例中，输入单元504可以包括图形处理器(GraphicsProcessing Unit，GPU)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元506可包括显示面板5061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板5061。用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071，也称为触摸屏。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器509可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器510可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。
本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述显微图像分析方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述显微图像分析该设备方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种显微图像分析方法，其特征在于，包括：
获取显微图像；
将所述显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
将所述显微图像特征输入所述训练好的机器学习模型的全连接层中，得到微生物分析结果和对所述微生物分析结果的不确定性估计，其中，所述训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
2.根据权利要求1所述的方法，其特征在于，当所述不确定性估计大于预设值时，在所述将所述显微图像输入到训练好的机器学习模型中，得到微生物分析结果和对所述微生物分析结果的不确定性估计之后，所述方法还包括：
发出对所述显微图像进行人工核查的提醒信息。
3.根据权利要求1或2所述的方法，其特征在于，所述机器学习模型包括：特征提取网络、全连接层和判别器，所述训练好的机器学习模型是通过下述方法训练得到的：
获取显微图像训练数据集，所述显微图像训练数据集中每个训练图像均有对应的标签；
将所述显微图像训练数据集中的训练图像输入所述全连接层中，得到预测结果；
利用判别器根据所述训练图像对应的标签对所述预测结果进行判断；
当判断结果小于或等于预设值时，得到训练好的机器学习模型。
4.根据权利要求3所述的方法，其特征在于，所述获取显微图像训练数据集包括：
获取显微训练图像；
对所述显微训练图像进行标注，得到带标注图像数据；
对所述带标注图像数据进行数据增广，得到显微图像训练数据集。
5.根据权利要求4所述的方法，其特征在于，所述数据增广包括：图像平移、图像旋转、图像镜像变换、改变图像对比度及改变图像亮度。
6.根据权利要求3-5任一项所述的方法，其特征在于，所述将所述显微图像训练数据集中的训练图像输入所述全连接层中，得到预测结果，包括：
将所述显微图像训练数据集中的训练图像输入特征提取网络中，提取所述训练图像的图像特征；
将所述图像特征分别输入两个全连接层中，得到预测均值和预测方差；
根据所述预测均值与所述预测方差生成所述预测结果。
7.根据权利要求3-5任一项所述的方法，其特征在于，当判断结果超过预设值时，所述方法还包括：
计算损失值与所述机器学习模型的网络参数之间梯度关系；
通过利用所述显微图像训练数据集迭代训练所述机器学习模型，根据所述梯度关系调整所述网络参数以使损失值减小。
8.一种显微图像分析装置，其特征在于，包括：
获取模块，用于获取显微图像；
特征提取模块，用于将所述显微图像输入到训练好的机器学习模型的特征提取网络中，得到显微图像特征；
预测模块，用于将所述显微图像特征输入所述训练好的机器学习模型的全连接层中，得到微生物分析结果和对所述微生物分析结果的不确定性估计，其中，所述训练好的机器学习模型为引入不确定性估计并通过迭代训练的机器学习模型。
9.一种电子设备，其特征在于，包括：包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-7任一项所述的显微图像分析方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-7任一项所述的显微图像分析方法的步骤。
CN202110784889.7A 2021-07-12 2021-07-12 显微图像分析方法、装置、存储介质及电子设备 Pending CN113610766A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110784889.7A CN113610766A (zh) 2021-07-12 2021-07-12 显微图像分析方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110784889.7A CN113610766A (zh) 2021-07-12 2021-07-12 显微图像分析方法、装置、存储介质及电子设备

Publications (1)

Publication Number Publication Date
CN113610766A true CN113610766A (zh) 2021-11-05

Family

ID=78337457

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110784889.7A Pending CN113610766A (zh) 2021-07-12 2021-07-12 显微图像分析方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN113610766A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107609598A (zh) * 2017-09-27 2018-01-19 武汉斗鱼网络科技有限公司 图像鉴别模型训练方法、装置及可读存储介质
CN109145846A (zh) * 2018-08-30 2019-01-04 苏州富莱智能科技有限公司 材料微观结构智能识别分析系统及分析方法
CN110232678A (zh) * 2019-05-27 2019-09-13 腾讯科技（深圳）有限公司 一种图像不确定度预测方法、装置、设备及存储介质
WO2020083073A1 (zh) * 2018-10-23 2020-04-30 苏州科达科技股份有限公司 非机动车图像多标签分类方法、系统、设备及存储介质
CN111242222A (zh) * 2020-01-14 2020-06-05 北京迈格威科技有限公司 分类模型的训练方法、图像处理方法及装置
CN111414942A (zh) * 2020-03-06 2020-07-14 重庆邮电大学 一种基于主动学习和卷积神经网络的遥感图像分类方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107609598A (zh) * 2017-09-27 2018-01-19 武汉斗鱼网络科技有限公司 图像鉴别模型训练方法、装置及可读存储介质
CN109145846A (zh) * 2018-08-30 2019-01-04 苏州富莱智能科技有限公司 材料微观结构智能识别分析系统及分析方法
WO2020083073A1 (zh) * 2018-10-23 2020-04-30 苏州科达科技股份有限公司 非机动车图像多标签分类方法、系统、设备及存储介质
CN110232678A (zh) * 2019-05-27 2019-09-13 腾讯科技（深圳）有限公司 一种图像不确定度预测方法、装置、设备及存储介质
CN111242222A (zh) * 2020-01-14 2020-06-05 北京迈格威科技有限公司 分类模型的训练方法、图像处理方法及装置
CN111414942A (zh) * 2020-03-06 2020-07-14 重庆邮电大学 一种基于主动学习和卷积神经网络的遥感图像分类方法

Similar Documents

Publication Publication Date Title
CN110163082B (zh) 一种图像识别网络模型训练方法、图像识别方法及装置
CN112241452B (zh) 一种模型训练方法、装置、电子设备及存储介质
CN109308490B (zh) 用于生成信息的方法和装置
CN110472494A (zh) 脸部特征提取模型训练方法、脸部特征提取方法、装置、设备及存储介质
EP1586897A1 (en) Image analysis supporting method, image analysis supporting program, and image analysis supporting device
CN112818888B (zh) 视频审核模型训练方法、视频审核方法及相关装置
CN113284142A (zh) 图像检测方法、装置、计算机可读存储介质及计算机设备
CN111126347A (zh) 人眼状态识别方法、装置、终端及可读存储介质
CN112614072A (zh) 一种图像复原方法、装置、图像复原设备及存储介质
CN112288699A (zh) 图像相对清晰度的评估方法、装置、设备和介质
CN113191183A (zh) 人员重新识别中的无监督域纠正伪标签方法及装置
CN113792807B (zh) 皮肤病分类模型训练方法、系统、介质和电子设备
CN111127432B (zh) 一种医学图像检测方法、装置、设备及存储介质
CN111462087B (zh) 基于人工智能的图像检测方法、装置、系统及存储介质
CN113610766A (zh) 显微图像分析方法、装置、存储介质及电子设备
CN115482436B (zh) 图像筛选模型的训练方法、装置以及图像筛选方法
CN116630624A (zh) 光伏板图像分割方法及其模型的训练方法、装置
CN113158870B (zh) 2d多人姿态估计网络的对抗式训练方法、系统及介质
CN113055599B (zh) 摄像头的切换方法、装置、电子设备和可读存储介质
CN115439850A (zh) 基于审单的图文字符识别方法、装置、设备及存储介质
CN112819079A (zh) 模型的采样算法匹配方法、装置和电子设备
CN112730437A (zh) 基于深度可分离卷积神经网络的喷丝板表面缺陷检测方法、装置、存储介质及设备
JP4955609B2 (ja) 消失点追跡方法及び消失点追跡装置
CN117392527B (zh) 一种高精度水下目标分类检测方法及其模型搭建方法
Zhu et al. Personalized Federated Learning via ADMM with Moreau Envelope

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination