CN112819076A - 基于深度迁移学习的医学图像分类模型的训练方法及装置 - Google Patents

基于深度迁移学习的医学图像分类模型的训练方法及装置 Download PDF

Info

Publication number
CN112819076A
CN112819076A CN202110147726.8A CN202110147726A CN112819076A CN 112819076 A CN112819076 A CN 112819076A CN 202110147726 A CN202110147726 A CN 202110147726A CN 112819076 A CN112819076 A CN 112819076A
Authority
CN
China
Prior art keywords
medical image
classification model
training
image
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110147726.8A
Other languages
English (en)
Other versions
CN112819076B (zh
Inventor
龙军
费洪晓
向佳元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Central South University
Original Assignee
Central South University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Central South University filed Critical Central South University
Priority to CN202110147726.8A priority Critical patent/CN112819076B/zh
Publication of CN112819076A publication Critical patent/CN112819076A/zh
Application granted granted Critical
Publication of CN112819076B publication Critical patent/CN112819076B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/047—Probabilistic or stochastic networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G06T2207/20032—Median filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30096—Tumor; Lesion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Computational Linguistics (AREA)
  • Biomedical Technology (AREA)
  • Software Systems (AREA)
  • Biophysics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

本发明公开了一种基于深度迁移学习的医学图像分类模型的训练方法及装置，其中方法包括：获取已标注的医学图像并进行预处理，得到医学图像样本集；利用医学图像样本集训练CNN网络模型得到第一分类模型；获取在ImageNet图像数据集上预先训练好的VGG‑16网络模型和ResNet‑50网络模型；基于迁移学习方法分别利用医学图像样本集再次训练VGG‑16网络模型和ResNet‑50网络模型，分别得到第二分类模型和第三分类模型；将上述三个分类模型的输出连接到投票机制模块的输入构成医学图像分类模型。采用迁移学习方法训练得到第二分类模型和第三分类模型，解决了标注医学图像少导致训练出来的模型精度低问题；将三个预测结果结合投票机制得到分类结果，提高了模型的准确性、泛化性和鲁棒性。

Description

基于深度迁移学习的医学图像分类模型的训练方法及装置
技术领域
本发明涉及医学技术领域，尤其涉及一种基于深度迁移学习的医学图像分类模型的训练方法及装置。
背景技术
前列腺癌是一种常见的癌症，也是导致癌症死亡的常见原因。目前的前列腺癌检测方法包括使用前列腺特异性抗原(PSA)检测进行筛查，然后经直肠穿刺活检，但存在假阴性和分期不足的问题。近年来，多参数磁共振成像(mpMRI)被发现是一种有价值的诊断工具，用于前列腺癌的检测、定位和分期。计算机辅助检测(CAD)系统在辅助可以提供更多可重复的结果，同时消耗更少的时间。利用数据表征算法，可以从图像中提取大量定量特征，通过深度学习算法可以建立特征和诊断之间的关系。
传统的分类方法依赖于手工特征的选择，并要求对先验领域知识有清晰的认识。特征学习方法可以有效地检测不同模式的视觉特征，但由于医学图像缺乏标注数据，无法准确地训练高可用度的模型。由于前列腺医学图像数据量稀少、病理特征复杂和人工标注耗时费力，现有的PCa(前列腺癌)分类的传统方法泛化性较差，且基于深度学习的PCa分类网络可解释性弱。
发明内容
本发明提供了一种基于深度迁移学习的医学图像分类模型的训练方法及装置，以解决现有的医学图像分类模型准确性低的问题。
第一方面，提供了一种基于深度迁移学习的医学图像分类模型的训练方法，包括：
获取已标注的医学图像并进行预处理，得到医学图像样本集；
利用医学图像样本集训练CNN网络模型得到第一分类模型；
获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；
基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
上述方案提供的医学图像分类模型的训练方法，借助ImageNet图像数据集预先训练好VGG-16网络模型和ResNet-50网络模型，然后基于迁移学习方法利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，进而得到第二分类模型和第三分类模型，解决了标注医学图像少导致训练出来的模型精度低、可用度低的问题，提高了医学图像分类的准确性。本方案采用了三个不同分类模型，具备不同的功能，并将三个分类模型的预测结果进行综合结合投票机制得到最终的分类结果，提高了医学图像分类模型的准确性，具有更好的泛化性和鲁棒性。
进一步地，对已标注的医学图像的预处理过程包括：
对已标注的医学图像进行双立方插值处理，统一医学图像的分辨率；
对插值处理后的医学图像进行图像配准，将所有插值处理后的医学图像变换到同一坐标系下；
对图像配准后的医学图像进行归一化处理，提取医学图像中的病灶区域，并使用Z-score标准化方法将其标准化。
进一步地，所述归一化处理之后还包括：
对归一化处理之后的医学图像进行数据增强，扩大医学图像样本集。
进一步地，所述数据增强包括对医学图像进行水平翻转50％、向上翻转、向下翻转、高斯滤波、均值滤波和中值滤波中的一种或多种，然后加入噪声。
在已标注的医学图像数量有限的情况下，通过数据增强方式增加训练样本的多样性，可提高最后训练得到的模型的鲁棒性，避免过拟合。
进一步地，所述对已标注的医学图像进行双立方插值处理，包括：
采用基于BiCubic基函数的双立方插值法对已标注的医学图像进行插值处理；其中，BiCubic基函数的构造形式如下所示：
Figure BDA0002931298270000021
其中，a取-0.5，x表示源图像中像素点的横坐标或纵坐标，W(x)表示源图像中对应像素点的横坐标或纵坐标的权重；则源图像中像素点P对应在目标图像上的像素点B的像素值B(X,Y)可通过下式得到：
Figure BDA0002931298270000022
其中，am,n表示a(m,n)的像素值，W(m)表示a(m,n)横坐标上的权重，W(n)表示a(m,n)纵坐标上的权重，a(m,n)(m,n＝0,1,2,3)表示源图像中距离像素点P最近的16个像素点；
所述对图像配准后的医学图像进行归一化处理，包括：
根据已标注的医学图像去除非病灶区域，提取病灶区域；
使用Z-score标准化方法将每个病灶区域的所有像素值转换为均值为0、标准差为1的公共尺度；其中，标准化过程中处理公式如下所示：
Figure BDA0002931298270000031
Figure BDA0002931298270000032
其中，μ是病灶区域图像的均值，X表示病灶区域图像矩阵，σ表示标准差，N表示病灶区域图像的像素数量。
对医学图像进行归一化操作，目的是将像素值变换到某个区间实现数据中心化，数据中心化符合数据分布规律，能增加模型的泛化能力。
进一步地，所述第一分类模型通过如下过程训练得到：
基于CNN-6构建网络模型，其前两个卷积层包含大小为3×3的32个核，后两个卷积层包含大小为3×3的64个核；第2和第4个卷积层与2×2维的最大池化层交错，差值为0.25；倒数第二层是512个神经元的全连接层和0.5个缺失层，最后一层是30个神经元的全连接层；ReLU激活函数应用于所有四个卷积层和倒数第二层的全连接层，最后一层通过softmax函数输出预测概率，确定医学图像的分类类别；
使用gloot统一来初始权重，然后利用医学图像样本集训练上述基于CNN-6构建的网络模型，得到第一分类模型。
进一步地，所述第二分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于VGG-16网络结构的模型进行训练，得到预先训练好的VGG-16网络模型；
冻结预先训练好的VGG-16网络模型的预设数量的早期层，用30个神经元替换VGG-16网络模型最后一个全连接层，然后使用gloot统一重新初始化VGG-16网络模型最后的三个全连接层的权重；最后利用医学图像样本集对上述改进后的VGG-16网络模型进行训练，得到第二分类模型。
进一步地，所述第三分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于ResNet-50网络结构的模型进行训练，得到预先训练好的ResNet-50网络模型；
冻结预先训练好的ResNet-50网络模型的预设数量的早期层，用30个神经元替换ResNet-50网络模型最后一个全连接层，然后使用gloot统一重新初始化ResNet-50网络模型最后一个全连接层的权重；最后利用医学图像样本集对上述改进后的ResNet-50网络模型进行训练，得到第三分类模型。
本发明在训练第二分类模型和第三分类模型的过程中，使用Adma优化器和分类交叉熵损失函数在ImageNet图像数据集上对32个小批量的改进后的网络模型进行训练。
设Z为n幅医学图像的医学图像训练数据集。从无到有训练最后一层(top layer(s))是一个迭代的过程，找到使CNN(VGG-16、ResNet-50均属于CNN网络结构)的经验损失最小的权重w。分类交叉熵损失函数如下式所示：
Figure BDA0002931298270000041
其中，xi是Z的第i幅图像，f(xi,w)是xi的类别yi的预测概率，y′i是xi的真实类别，l(yi,y′i)是用于yi预测的惩罚函数，其如下式所示：
Figure BDA0002931298270000042
其中，yi∈{1,...,C}，C为常数，其取值与类别总数相等，
Figure BDA0002931298270000043
Figure BDA0002931298270000044
当使用当前权重应用到小批量时，根据损失函数L的梯度计算更新的权重，使用Adma来计算个体的自适应学习率来控制权重更新的大小。
进一步地，所述投票机制模块采用的投票机制通过如下公式表示：
Figure BDA0002931298270000045
其中，x表示输入的医学图像，y表示预测分类标号，
Figure BDA0002931298270000046
表示第i个分类模型的预测概率值，σ(·)表示三个分类模型输入的预测概率的均值，三个分类模型输入的预测概率对应权重为wk,k∈[1,2,3]，argmax(·)表示均值输出最大。
第二方面，提供了一种基于深度迁移学习的医学图像分类模型的训练装置，包括：
图像获取模块，用于获取已标注的医学图像并进行预处理，得到医学图像样本集；
第一模型生成模块，用于利用医学图像样本集训练CNN网络模型得到第一分类模型；
第二模型生成模块，用于获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；并基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
医学图像分类模型生成模块，用于将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
第三方面，提供了一种前列腺医学图像分类模型的训练方法，其训练方法采用如上所述的一种基于深度迁移学习的医学图像分类模型的训练方法，其中医学图像为前列腺医学图像。
有益效果
本发明提出了一种基于深度迁移学习的医学图像分类模型的训练方法及装置，借助ImageNet图像数据集预先训练好VGG-16网络模型和ResNet-50网络模型，然后基于迁移学习方法利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，进而得到第二分类模型和第三分类模型，解决了标注医学图像少导致训练出来的模型精度低、可用度低的问题，提高了医学图像分类的准确性。本方案采用了三个不同分类模型，具备不同的功能，并将三个分类模型的预测结果进行综合结合投票机制得到最终的分类结果，提高了医学图像分类模型的准确性，具有更好的泛化性和鲁棒性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种基于深度迁移学习的医学图像分类模型的训练方法的流程图；
图2是本发明实施例提供的基于深度迁移学习的医学图像分类模型的分类架构图；
图3是本发明实施例提供的图像配准过程图；
图4是本发明实施例提供的一种对医学图像进行数据增强的示例图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将对本发明的技术方案进行详细的描述。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式，都属于本发明所保护的范围。
需要说明的是，在本发明的描述中，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或顺序。此外，在本发明的描述中，除非另有说明，“多个”的含义是指至少两个。
实施例1
如图1、图2所示，本实施例提供了一种基于深度迁移学习的医学图像分类模型的训练方法，包括：
S1：获取已标注的医学图像并进行预处理，得到医学图像样本集；
S2：利用医学图像样本集训练CNN网络模型得到第一分类模型；
S3：获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；
S4：基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
S5：将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
上述方案提供的医学图像分类模型的训练方法，借助ImageNet图像数据集预先训练好VGG-16网络模型和ResNet-50网络模型，然后基于迁移学习方法利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，进而得到第二分类模型和第三分类模型，解决了标注医学图像少导致训练出来的模型精度低、可用度低的问题，提高了医学图像分类的准确性。本方案采用了三个不同分类模型，具备不同的功能，并将三个分类模型的预测结果进行综合结合投票机制得到最终的分类结果，提高了医学图像分类模型的准确性，具有更好的泛化性和鲁棒性。
本实施例中，对已标注的医学图像的预处理过程包括：
S11：对已标注的医学图像进行双立方插值处理，统一医学图像的分辨率。考虑到医学图像是在不同的条件下采集的(例如，不同的扫描仪和采集配置)，为了保证可靠的数据属性，需要进行图像插值步骤，可用图像的特征是在3D空间中具有相同的分辨率(即各向同性体素)。双立方插值的目的就是通过找到影响因子来获得目标图像对应点的像素值，达到图像缩放的目的，本实施例中使用基于BiCubic基函数的双立方插值法，以获得1.0mm3的分辨率。具体包括：
采用基于BiCubic基函数的双立方插值法对已标注的医学图像进行插值处理；其中，BiCubic基函数的构造形式如下所示：
Figure BDA0002931298270000071
其中，a取-0.5，x表示源图像中像素点的横坐标或纵坐标，W(x)表示源图像中对应像素点的横坐标或纵坐标的权重；则源图像中像素点P对应在目标图像上的像素点B的像素值B(X,Y)可通过下式得到：
Figure BDA0002931298270000072
其中，am,n表示a(m,n)的像素值，W(m)表示a(m,n)横坐标上的权重，W(n)表示a(m,n)纵坐标上的权重，a(m,n)(m,n＝0,1,2,3)表示源图像中距离像素点P最近的16个像素点。
S12：对插值处理后的医学图像进行图像配准，将所有插值处理后的医学图像变换到同一坐标系下。医疗图像采集过程中，不同时刻或视角以及采集协议不一的情况下，需要将不同坐标系的图像变换到同一坐标系。图像配准则是通过寻找合适的空间变换，对图像进行刚性/非刚性变换，空间定位一致实现图像融合。以不同参数的核磁共振图为例，图像配准选择T2w为固定图像，PDw、ADC和Ktrans为运动图像，最后对运动图像进行变换使得四种图像在空间上互相配准，以上操作都是使用Dipy包完成的，Dipy包为现有技术，其配准过程可参见图3，在此不再做赘述。
S13：对图像配准后的医学图像进行归一化处理，提取医学图像中的病灶区域，并使用Z-score标准化方法将其标准化。具体包括：
根据已标注的医学图像去除非病灶区域，提取病灶区域；以前列腺医学图像为例，则根据已标注的前列腺医学图像去除不包含前列腺区域的切片，减少负样本所占比例，对病变信息提取病灶区域；
使用Z-score标准化方法将每个病灶区域的所有像素值转换为均值为0、标准差为1的公共尺度；其中，标准化过程中处理公式如下所示：
Figure BDA0002931298270000073
Figure BDA0002931298270000074
其中，μ是病灶区域图像的均值，X表示病灶区域图像矩阵，σ表示标准差，N表示病灶区域图像的像素数量。对医学图像进行归一化操作，目的是将像素值变换到某个区间实现数据中心化，数据中心化符合数据分布规律，能增加模型的泛化能力。
S14：对归一化处理之后的医学图像进行数据增强，扩大医学图像样本集。其中，所述数据增强包括对医学图像进行水平翻转50％、向上翻转、向下翻转、高斯滤波、均值滤波和中值滤波中的一种或多种，然后加入噪声。如图4所示，即为一种对医学图像进行数据增强的示例图。
在已标注的医学图像数量有限的情况下，通过数据增强方式增加训练样本的多样性，可提高最后训练得到的模型的鲁棒性，避免过拟合。
本实施例中，所述第一分类模型通过如下过程训练得到：
基于CNN-6构建网络模型，其前两个卷积层包含大小为3×3的32个核，后两个卷积层包含大小为3×3的64个核；第2和第4个卷积层与2×2维的最大池化层交错，差值为0.25；倒数第二层是512个神经元的全连接层和0.5个缺失层，最后一层是30个神经元的全连接层；ReLU激活函数应用于所有四个卷积层和倒数第二层的全连接层，最后一层通过softmax函数输出预测概率，确定医学图像的分类类别；
使用gloot统一来初始权重，然后利用医学图像样本集训练上述基于CNN-6构建的网络模型，得到第一分类模型。
本实施例中，所述第二分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于VGG-16网络结构的模型进行训练，得到预先训练好的VGG-16网络模型；
冻结预先训练好的VGG-16网络模型的预设数量的早期层，用30个神经元替换VGG-16网络模型最后一个全连接层，本实施例中，优选冻结除最后三层全连接层的其它层，然后使用gloot统一重新初始化VGG-16网络模型最后的三个全连接层的权重；最后利用医学图像样本集对上述改进后的VGG-16网络模型进行训练，得到第二分类模型。
本实施例中，所述第三分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于ResNet-50网络结构的模型进行训练，得到预先训练好的ResNet-50网络模型；
冻结预先训练好的ResNet-50网络模型的预设数量的早期层，本实施例中，优选冻结除最后一层全连接层的其它层，用30个神经元替换ResNet-50网络模型最后一个全连接层，然后使用gloot统一重新初始化ResNet-50网络模型最后一个全连接层的权重；最后利用医学图像样本集对上述改进后的ResNet-50网络模型进行训练，得到第三分类模型。
本实施例中，在训练第二分类模型和第三分类模型的过程中，使用Adma优化器和分类交叉熵损失函数在ImageNet图像数据集上对32个小批量的改进后的网络模型进行训练。
设Z为n幅医学图像的医学图像训练数据集。从无到有训练最后一层(top layer(s))是一个迭代的过程，找到使CNN(VGG-16、ResNet-50均属于CNN网络结构)的经验损失最小的权重w。分类交叉熵损失函数如下式所示：
Figure BDA0002931298270000091
其中，xi是Z的第i幅图像，f(xi,w)是xi的类别yi的预测概率，y′i是xi的真实类别，k(yi,y′i)是用于yi预测的惩罚函数，其如下式所示：
Figure BDA0002931298270000092
其中，yi∈{1,...,C}，C为常数，其取值与类别总数相等，
Figure BDA0002931298270000093
Figure BDA0002931298270000094
当使用当前权重应用到小批量时，根据损失函数L的梯度计算更新的权重，使用Adma来计算个体的自适应学习率来控制权重更新的大小。
本实施例中，投票机制模块接收三个CNN计算的每种模式的强度，使用了不同的CNN，它们各自有不同的功能，来探索网络深度的核心重要性。CNN的输出组合负责产生每个模态的最终强度。投票机制是在Kuncheva等人的加权多数投票基础上的改进，本实施例使用了一个称为平均投票的组合规则，并给每个CNN产生的强度赋予不同的权重。
具体地，所述投票机制模块采用的投票机制通过如下公式表示：
Figure BDA0002931298270000095
其中，x表示输入的医学图像，y表示预测分类标号，
Figure BDA0002931298270000096
表示第i个分类模型的预测概率值，σ(·)表示三个分类模型输入的预测概率的均值，三个分类模型输入的预测概率对应权重为wk,k∈[1,2,3]，argmax(·)表示均值输出最大。
具体实施时，可利用Grad-CAM算法使用感兴趣或者制定类别的梯度解释在CNN模型的分类结果，可视化图像分类。
实施例2
本实施例提供了一种基于深度迁移学习的医学图像分类模型的训练装置，包括：
图像获取模块，用于获取已标注的医学图像并进行预处理，得到医学图像样本集；
第一模型生成模块，用于利用医学图像样本集训练CNN网络模型得到第一分类模型；
第二模型生成模块，用于获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；并基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
医学图像分类模型生成模块，用于将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
实施例3
本实施例提供了一种前列腺医学图像分类模型的训练方法，其训练方法采用如实施例1所述的一种基于深度迁移学习的医学图像分类模型的训练方法，其中医学图像为前列腺医学图像。
实施例4
本实施例提供了一种计算机可读存储介质，其存储有计算机程序，该计算机程序被处理器加载时执行如实施例1或实施例3所述的方法。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
可以理解的是，上述各实施例中相同或相似部分可以相互参考，在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
为了进一步理解本发明的方案，在此以前列腺癌医学图像为例提供一个分类实验对本方案进行说明。
实验环境为Python，使用Keras库来实现深度cnn。在实验中加载Keras提供的预先训练好的cnn的权重。
数据集包括204名患者的训练数据集(330例可疑病变)和140名患者的测试数据集(208例)。由于T2横切面、ADC值、DWI、KTrans均为前列腺的横切面，故将它们结合起来用于前列腺病变的分类。T2矢状位序列是前列腺的侧视面，则没有使用。对于每一个发现，前列腺解剖区域的分配是可行的。前列腺可细分为4个解剖区:外周区(PZ)，占腺组织的70-80％，约占前列腺癌的70％；过渡区(TZ)，占腺组织的5％，约占PCa(前列腺癌)的25％；中央区域(仅作说明)，占腺组织的20％，约占PCa的5％；和非腺体的前纤维肌间质(AS)。PROSTATEx挑战中的训练和测试样本来自PZ、TZ、AS和精囊(SV)，如表1所示。
表1 ProstateX数据集划分
Figure BDA0002931298270000111
在对少量数据进行清理后，本发明选择了201名受试者，其中321项发现用于培训和验证目的。为了扩大和平衡训练数据集，本发明使用了翻转和转换原始数据。作为数据扩充的结果，本发明生成了5个交叉验证数据集，每个交叉验证数据集有10000个训练和2000个验证样本。在每一折叠中进行训练验证的分离，使得研究结果在前列腺区域的分布得以保留。图像强度归一化到[0,1]范围内。T2为40×40×40mm，DWI为32×32×12，DCE-MRI为32×32×12，以寻找位置为中心的3D patch作为CNN的输入。
为了训练网络，本发明使用了随机梯度下降算法与Adam更新规则，10次一个小批量64，和一个二元交叉熵损失函数。本发明使用He方法从高斯分布随机初始化CNN的权值。本发明还对所有层的中间响应进行批处理正常化，以加速收敛。为了防止过拟合，除了批量归一化之外，本发明还使用了概率为0.25的dropout和对神经元权重有惩罚的L2正则化。通过监控验证性能，本发明使用了一种早期停止策略，并在验证集上选择了精确度最高的最佳模型。交叉验证用于为卷积层找到输入通道和过滤器数量的最佳组合。
表2不同模型下区域精度对比
Figure BDA0002931298270000121
基于迁移学习和投票机制的分类模型在ProstateX(前列腺)数据集上进行端到端的训练，其Top-1 Accuary在PZ上高达93.08％，TZ达到81.34，AS达到83.45，SV达到82.93。在训练过程中，RseNet50网络分类结果，相对于VGG网络具有更少的尺寸和参数量，却有更高的精度；根据不同模型的加权平均组合，能够有限对前列腺区域分类，且精度达到最好的性能。
本发明提出了一种基于深度迁移学习的医学图像分类模型的训练方法及装置，该医学图像分类模型模型由三个不同深度的cnn组成，通过对预测概率加权平均进行组合。为了避免过拟合和获取特征信息，通过翻转和噪声等进行数据增强缓解类别不平衡，网络深度对于当前任务至关重要，迁移学习方法可以受益于在ImageNet数据集上预先训练的CNN捕捉到的一般特征，以及在医学图像上从头训练的极深CNN和另一个“浅层”CNN的顶层捕捉到的领域特定特征。实验结果表明引入深度迁移学习改善前列腺图像分类，具有泛化性和鲁棒性。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，包括：
获取已标注的医学图像并进行预处理，得到医学图像样本集；
利用医学图像样本集训练CNN网络模型得到第一分类模型；
获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；
基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
2.根据权利要求1所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，对已标注的医学图像的预处理过程包括：
对已标注的医学图像进行双立方插值处理，统一医学图像的分辨率；
对插值处理后的医学图像进行图像配准，将所有插值处理后的医学图像变换到同一坐标系下；
对图像配准后的医学图像进行归一化处理，提取医学图像中的病灶区域，并使用Z-score标准化方法将其标准化。
3.根据权利要求2所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述归一化处理之后还包括：
对归一化处理之后的医学图像进行数据增强，扩大医学图像样本集。
4.根据权利要求3所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述数据增强包括对医学图像进行水平翻转50％、向上翻转、向下翻转、高斯滤波、均值滤波和中值滤波中的一种或多种，然后加入噪声。
5.根据权利要求2所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述对已标注的医学图像进行双立方插值处理，包括：
采用基于BiCubic基函数的双立方插值法对已标注的医学图像进行插值处理；其中，BiCubic基函数的构造形式如下所示：
Figure FDA0002931298260000011
其中，a取-0.5，x表示源图像中像素点的横坐标或纵坐标，W(x)表示源图像中对应像素点的横坐标或纵坐标的权重；则源图像中像素点P对应在目标图像上的像素点B的像素值B(X,Y)可通过下式得到：
Figure FDA0002931298260000021
其中，am,n表示a(m,n)的像素值，W(m)表示a(m,n)横坐标上的权重，W(n)表示a(m,n)纵坐标上的权重，a(m,n)(m,n＝0,1,2,3)表示源图像中距离像素点P最近的16个像素点；
所述对图像配准后的医学图像进行归一化处理，包括：
根据已标注的医学图像去除非病灶区域，提取病灶区域；
使用Z-score标准化方法将每个病灶区域的所有像素值转换为均值为0、标准差为1的公共尺度；其中，标准化过程中处理公式如下所示：
Figure FDA0002931298260000022
Figure FDA0002931298260000023
其中，μ是病灶区域图像的均值，X表示病灶区域图像矩阵，σ表示标准差，N表示病灶区域图像的像素数量。
6.根据权利要求1所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述第一分类模型通过如下过程训练得到：
基于CNN-6构建网络模型，其前两个卷积层包含大小为3×3的32个核，后两个卷积层包含大小为3×3的64个核；第2和第4个卷积层与2×2维的最大池化层交错，差值为0.25；倒数第二层是512个神经元的全连接层和0.5个缺失层，最后一层是30个神经元的全连接层；ReLU激活函数应用于所有四个卷积层和倒数第二层的全连接层，最后一层通过softmax函数输出预测概率，确定医学图像的分类类别；
使用gloot统一来初始权重，然后利用医学图像样本集训练上述基于CNN-6构建的网络模型，得到第一分类模型。
7.根据权利要求1所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述第二分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于VGG-16网络结构的模型进行训练，得到预先训练好的VGG-16网络模型；
冻结预先训练好的VGG-16网络模型的预设数量的早期层，用30个神经元替换VGG-16网络模型最后一个全连接层，然后使用gloot统一重新初始化VGG-16网络模型最后的三个全连接层的权重；最后利用医学图像样本集对上述改进后的VGG-16网络模型进行训练，得到第二分类模型。
8.根据权利要求1所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述第三分类模型通过如下过程训练得到：
获取ImageNet图像数据集；
对ImageNet图像数据集中的ImageNet图像进行预处理，对RGB三个通道分别减去ImageNet图像数据集的均值，并进行正则化操作，得到ImageNet图像训练集；
利用ImageNet图像训练集对基于ResNet-50网络结构的模型进行训练，得到预先训练好的ResNet-50网络模型；
冻结预先训练好的ResNet-50网络模型的预设数量的早期层，用30个神经元替换ResNet-50网络模型最后一个全连接层，然后使用gloot统一重新初始化ResNet-50网络模型最后一个全连接层的权重；最后利用医学图像样本集对上述改进后的ResNet-50网络模型进行训练，得到第三分类模型。
9.根据权利要求1所述的基于深度迁移学习的医学图像分类模型的训练方法，其特征在于，所述投票机制模块采用的投票机制通过如下公式表示：
Figure FDA0002931298260000031
其中，x表示输入的医学图像，y表示预测分类标号，
Figure FDA0002931298260000032
表示第i个分类模型的预测概率值，σ(·)表示三个分类模型输入的预测概率的均值，三个分类模型输入的预测概率对应权重为wk,k∈[1,2,3]，argmax(·)表示均值输出最大。
10.一种基于深度迁移学习的医学图像分类模型的训练装置，其特征在于，包括：
图像获取模块，用于获取已标注的医学图像并进行预处理，得到医学图像样本集；
第一模型生成模块，用于利用医学图像样本集训练CNN网络模型得到第一分类模型；
第二模型生成模块，用于获取在ImageNet图像数据集上预先训练好的VGG-16网络模型和ResNet-50网络模型；并基于迁移学习方法分别利用医学图像样本集再次训练VGG-16网络模型和ResNet-50网络模型，分别得到第二分类模型和第三分类模型；
医学图像分类模型生成模块，用于将第一分类模型、第二分类模型、第三分类模型的输出连接到投票机制模块的输入构成医学图像分类模型，其中，投票机制模块基于预设投票机制输出最终医学图像分类结果为医学图像分类模型的分类结果。
CN202110147726.8A 2021-02-03 2021-02-03 基于深度迁移学习的医学图像分类模型的训练方法及装置 Active CN112819076B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110147726.8A CN112819076B (zh) 2021-02-03 2021-02-03 基于深度迁移学习的医学图像分类模型的训练方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110147726.8A CN112819076B (zh) 2021-02-03 2021-02-03 基于深度迁移学习的医学图像分类模型的训练方法及装置

Publications (2)

Publication Number Publication Date
CN112819076A true CN112819076A (zh) 2021-05-18
CN112819076B CN112819076B (zh) 2022-06-17

Family

ID=75860794

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110147726.8A Active CN112819076B (zh) 2021-02-03 2021-02-03 基于深度迁移学习的医学图像分类模型的训练方法及装置

Country Status (1)

Country Link
CN (1) CN112819076B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112466461A (zh) * 2020-10-26 2021-03-09 淮阴工学院 一种基于多网络集成的医疗图像智能诊断方法
CN113378984A (zh) * 2021-07-05 2021-09-10 国药(武汉)医学实验室有限公司 一种医学图像分类方法、系统、终端以及存储介质
CN113592027A (zh) * 2021-08-16 2021-11-02 南京工程学院 一种基于迁移学习的医疗图像分类方法
CN114092740A (zh) * 2021-11-11 2022-02-25 成都云芯医联科技有限公司 一种ai辅助下的免疫侧流传感的解析方法
CN114202524A (zh) * 2021-12-10 2022-03-18 中国人民解放军陆军特色医学中心 多模态医学图像的性能评价方法与系统
CN115147668A (zh) * 2022-09-06 2022-10-04 北京鹰瞳科技发展股份有限公司 疾病分类模型的训练方法、疾病分类的方法及相关产品
CN115546109A (zh) * 2022-09-09 2022-12-30 武汉中数医疗科技有限公司 一种基于机器学习的甲状腺采样数据识别方法及装置
CN115797266A (zh) * 2022-11-09 2023-03-14 北京百度网讯科技有限公司 医学图像处理模型的训练方法、图像处理方法、装置
CN115797750A (zh) * 2023-02-02 2023-03-14 天津滨海迅腾科技集团有限公司 一种基于深度学习算法的大尺寸图像快速传输方法
CN116012649A (zh) * 2022-12-30 2023-04-25 东莞理工学院 用于医学图像的集成学习投票分类方法、系统及终端
CN116630867A (zh) * 2023-07-25 2023-08-22 深圳市美侨医疗科技有限公司 一种基于Mask R-CNN的白带滴虫检测与跟踪方法
CN116704305A (zh) * 2023-06-20 2023-09-05 华中科技大学同济医学院附属协和医院 基于深度学习算法的超声心动图多模态多切面分类方法
CN117351293A (zh) * 2023-12-04 2024-01-05 天津医科大学口腔医院 一种联合学习的牙周病图像分类方法及设备
CN117454940A (zh) * 2023-12-21 2024-01-26 天津市肿瘤医院（天津医科大学肿瘤医院） 训练方法和用于预测甲状腺结节转移情况的图像处理方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2073500A1 (en) * 2007-12-21 2009-06-24 SES Astra S.A. Method for controlling the transfer of data entities from a server unit on a communication channel
US20090324060A1 (en) * 2008-06-30 2009-12-31 Canon Kabushiki Kaisha Learning apparatus for pattern detector, learning method and computer-readable storage medium
CN102521656A (zh) * 2011-12-29 2012-06-27 北京工商大学 非平衡样本分类的集成迁移学习方法
CN106780482A (zh) * 2017-01-08 2017-05-31 广东工业大学 一种医学图像分类方法
CN108647741A (zh) * 2018-05-18 2018-10-12 湖北工业大学 一种基于迁移学习的图像分类方法和系统
US20180307942A1 (en) * 2015-06-05 2018-10-25 Gracenote, Inc. Logo Recognition in Images and Videos
CN108960073A (zh) * 2018-06-05 2018-12-07 大连理工大学 面向生物医学文献的跨模态图像模式识别方法
CN108985173A (zh) * 2018-06-19 2018-12-11 奕通信息科技（上海）股份有限公司 面向有标记噪声表观年龄数据库的深度网络迁移学习方法
EP3617943A1 (en) * 2018-08-30 2020-03-04 Topcon Corporation Multivariate and multi-resolution retinal image anomaly detection system
CN111079620A (zh) * 2019-12-10 2020-04-28 北京小蝇科技有限责任公司 基于迁移学习的白细胞图像检测识别模型构建方法及应用
CN111783841A (zh) * 2020-06-09 2020-10-16 中科院成都信息技术股份有限公司 基于迁移学习和模型融合的垃圾分类方法、系统及介质
CN112270379A (zh) * 2020-11-13 2021-01-26 北京百度网讯科技有限公司 分类模型的训练方法、样本分类方法、装置和设备

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2073500A1 (en) * 2007-12-21 2009-06-24 SES Astra S.A. Method for controlling the transfer of data entities from a server unit on a communication channel
US20090324060A1 (en) * 2008-06-30 2009-12-31 Canon Kabushiki Kaisha Learning apparatus for pattern detector, learning method and computer-readable storage medium
CN102521656A (zh) * 2011-12-29 2012-06-27 北京工商大学 非平衡样本分类的集成迁移学习方法
US20180307942A1 (en) * 2015-06-05 2018-10-25 Gracenote, Inc. Logo Recognition in Images and Videos
CN106780482A (zh) * 2017-01-08 2017-05-31 广东工业大学 一种医学图像分类方法
CN108647741A (zh) * 2018-05-18 2018-10-12 湖北工业大学 一种基于迁移学习的图像分类方法和系统
CN108960073A (zh) * 2018-06-05 2018-12-07 大连理工大学 面向生物医学文献的跨模态图像模式识别方法
CN108985173A (zh) * 2018-06-19 2018-12-11 奕通信息科技（上海）股份有限公司 面向有标记噪声表观年龄数据库的深度网络迁移学习方法
EP3617943A1 (en) * 2018-08-30 2020-03-04 Topcon Corporation Multivariate and multi-resolution retinal image anomaly detection system
CN111079620A (zh) * 2019-12-10 2020-04-28 北京小蝇科技有限责任公司 基于迁移学习的白细胞图像检测识别模型构建方法及应用
CN111783841A (zh) * 2020-06-09 2020-10-16 中科院成都信息技术股份有限公司 基于迁移学习和模型融合的垃圾分类方法、系统及介质
CN112270379A (zh) * 2020-11-13 2021-01-26 北京百度网讯科技有限公司 分类模型的训练方法、样本分类方法、装置和设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
MINEGISHI H ET AL: "Vote-based Image classification Using Linear Manifolds", 《JOURNAL OF THE INSTITUTE OF IMAGE ELECTRONICS ENGINEERS OF JAPAN》 *
贾广象等: "基于图像目标特征空间自学习分类算法", 《计算机工程与应用》 *
陈力等: "深度神经网络内部迁移的信息几何度量分析", 《湖南大学学报(自然科学版)》 *

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112466461A (zh) * 2020-10-26 2021-03-09 淮阴工学院 一种基于多网络集成的医疗图像智能诊断方法
CN113378984B (zh) * 2021-07-05 2023-05-02 国药(武汉)医学实验室有限公司 一种医学图像分类方法、系统、终端以及存储介质
CN113378984A (zh) * 2021-07-05 2021-09-10 国药(武汉)医学实验室有限公司 一种医学图像分类方法、系统、终端以及存储介质
CN113592027A (zh) * 2021-08-16 2021-11-02 南京工程学院 一种基于迁移学习的医疗图像分类方法
CN114092740A (zh) * 2021-11-11 2022-02-25 成都云芯医联科技有限公司 一种ai辅助下的免疫侧流传感的解析方法
CN114202524A (zh) * 2021-12-10 2022-03-18 中国人民解放军陆军特色医学中心 多模态医学图像的性能评价方法与系统
CN115147668A (zh) * 2022-09-06 2022-10-04 北京鹰瞳科技发展股份有限公司 疾病分类模型的训练方法、疾病分类的方法及相关产品
CN115147668B (zh) * 2022-09-06 2022-12-27 北京鹰瞳科技发展股份有限公司 疾病分类模型的训练方法、疾病分类的方法及相关产品
CN115546109A (zh) * 2022-09-09 2022-12-30 武汉中数医疗科技有限公司 一种基于机器学习的甲状腺采样数据识别方法及装置
CN115546109B (zh) * 2022-09-09 2023-10-27 武汉中数医疗科技有限公司 一种基于机器学习的甲状腺采样数据识别方法及装置
CN115797266A (zh) * 2022-11-09 2023-03-14 北京百度网讯科技有限公司 医学图像处理模型的训练方法、图像处理方法、装置
CN116012649B (zh) * 2022-12-30 2023-09-19 东莞理工学院 用于医学图像的集成学习投票分类方法、系统及终端
CN116012649A (zh) * 2022-12-30 2023-04-25 东莞理工学院 用于医学图像的集成学习投票分类方法、系统及终端
CN115797750B (zh) * 2023-02-02 2023-04-25 天津滨海迅腾科技集团有限公司 一种基于深度学习算法的大尺寸图像快速传输方法
CN115797750A (zh) * 2023-02-02 2023-03-14 天津滨海迅腾科技集团有限公司 一种基于深度学习算法的大尺寸图像快速传输方法
CN116704305A (zh) * 2023-06-20 2023-09-05 华中科技大学同济医学院附属协和医院 基于深度学习算法的超声心动图多模态多切面分类方法
CN116630867A (zh) * 2023-07-25 2023-08-22 深圳市美侨医疗科技有限公司 一种基于Mask R-CNN的白带滴虫检测与跟踪方法
CN116630867B (zh) * 2023-07-25 2023-11-17 深圳市美侨医疗科技有限公司 一种基于Mask R-CNN的白带滴虫检测与跟踪方法
CN117351293A (zh) * 2023-12-04 2024-01-05 天津医科大学口腔医院 一种联合学习的牙周病图像分类方法及设备
CN117351293B (zh) * 2023-12-04 2024-02-06 天津医科大学口腔医院 一种联合学习的牙周病图像分类方法及设备
CN117454940A (zh) * 2023-12-21 2024-01-26 天津市肿瘤医院（天津医科大学肿瘤医院） 训练方法和用于预测甲状腺结节转移情况的图像处理方法
CN117454940B (zh) * 2023-12-21 2024-04-09 天津市肿瘤医院（天津医科大学肿瘤医院） 训练方法和用于预测甲状腺结节转移情况的图像处理方法

Also Published As

Publication number Publication date
CN112819076B (zh) 2022-06-17

Similar Documents

Publication Publication Date Title
CN112819076B (zh) 基于深度迁移学习的医学图像分类模型的训练方法及装置
Bernal et al. Deep convolutional neural networks for brain image analysis on magnetic resonance imaging: a review
Patravali et al. 2D-3D fully convolutional neural networks for cardiac MR segmentation
Wu et al. Discrimination and conversion prediction of mild cognitive impairment using convolutional neural networks
Ghafoorian et al. Non-uniform patch sampling with deep convolutional neural networks for white matter hyperintensity segmentation
Wan et al. Accurate segmentation of overlapping cells in cervical cytology with deep convolutional neural networks
Zhu et al. Exploiting interslice correlation for MRI prostate image segmentation, from recursive neural networks aspect
Biffi et al. Explainable anatomical shape analysis through deep hierarchical generative models
Kumar et al. An approach for brain tumor detection using optimal feature selection and optimized deep belief network
Feng et al. Supervoxel based weakly-supervised multi-level 3D CNNs for lung nodule detection and segmentation
CN115147600A (zh) 基于分类器权重转换器的gbm多模态mr图像分割方法
Behar et al. ResNet50-Based Effective Model for Breast Cancer Classification Using Histopathology Images.
Dinsdale et al. Stamp: simultaneous training and model pruning for low data regimes in medical image segmentation
Al Jannat et al. Detection of multiple sclerosis using deep learning
Murmu et al. A novel Gateaux derivatives with efficient DCNN-Resunet method for segmenting multi-class brain tumor
Carmo et al. Extended 2D consensus hippocampus segmentation
Mohanaprakash et al. Detection of Brain Cancer through Enhanced Particle Swarm Optimization in Artificial Intelligence Approach
Zhang et al. Lesion detection of computed tomography and magnetic resonance imaging image based on fully convolutional networks
Afzal et al. A Transfer Learning-Based Approach to Detect Cerebral Microbleeds.
Ghazi et al. Deep Learning Methods for Identification of White Matter Fiber Tracts: Review of State-of-the-Art and Future Prospective
Mortazi et al. Weakly supervised segmentation by a deep geodesic prior
Carmo et al. Extended 2d volumetric consensus hippocampus segmentation
Yu et al. 3D convolutional networks based automatic diagnosis of Alzheimer's disease using structural MRI
Kolarik et al. Planar 3D transfer learning for end to end unimodal MRI unbalanced data segmentation
Mathew et al. Deep convolutional neural network with transfer learning for automatic brain tumor detection from MRI

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant