CN109583297B - 视网膜oct体数据识别方法及装置 - Google Patents

视网膜oct体数据识别方法及装置 Download PDF

Info

Publication number
CN109583297B
CN109583297B CN201811249854.8A CN201811249854A CN109583297B CN 109583297 B CN109583297 B CN 109583297B CN 201811249854 A CN201811249854 A CN 201811249854A CN 109583297 B CN109583297 B CN 109583297B
Authority
CN
China
Prior art keywords
image
images
target
training
neural network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811249854.8A
Other languages
English (en)
Other versions
CN109583297A (zh
Inventor
孙延奎
邱嘉铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN201811249854.8A priority Critical patent/CN109583297B/zh
Publication of CN109583297A publication Critical patent/CN109583297A/zh
Application granted granted Critical
Publication of CN109583297B publication Critical patent/CN109583297B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G06V20/647—Three-dimensional objects by matching two-dimensional images to three-dimensional objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/23—Clustering techniques
    • G06F18/232—Non-hierarchical techniques
    • G06F18/2321—Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
    • G06F18/23213—Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions with fixed number of clusters, e.g. K-means clustering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images

Abstract

本发明实施例提供一种视网膜OCT体数据识别方法及装置，其中方法包括：获取待识别图像，对待识别图像进行处理，获得目标待识别图像，目标待识别图像为视网膜OCT体数据的多个二维切片图像；根据目标卷积神经网络对目标待识别图像进行识别，获得目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果。本发明实施例利用自监督迭代学习的方法，先利用初始标签和训练样本训练卷积神经网络，再对训练样本图像进行重新分类，并结合聚类或阈值过滤等方法对训练样本图像进行重标签；反复迭代训练与重标签的流程，得到目标卷积神经网络，从而能够在仅有三维级别标签的图像的条件下，提高识别准确率。

Description

视网膜OCT体数据识别方法及装置
技术领域
本发明实施例涉及医学图像分析技术领域，尤其涉及一种视网膜OCT体数据识别方法及装置。
背景技术
视网膜OCT(Optical Coherence tomography，光学相干断层扫描)图像识别技术是通过给定视网膜OCT三维体数据，从而判断体数据为正常或异常。现有技术往往先利用机器学习的方法，对三维体数据的二维切片图像进行逐张诊断，再通过投票等方式汇总得到OCT体数据的识别结论。然而，现有技术中的训练分类器需要的是二维级别的标签，而原生的OCT三维体数据仅仅具有三维体数据标签。目前获得二维级别标签的方法主要有两种，一种是人工标注，另一种是直接用体数据的标签作为体数据内所有二维级别的标签。而体数据往往拥有上百张的二维图片，人工标注起来非常困难，且效率低下。而直接用体数据级别标签作为二维级别标签的方法也是一种不可靠的手段，因为往往体数据中只会有部分二维图像含有异常特征，此时那些不含异常特征的二维图像会被赋予不准确甚至是错误的标签。
目前仍没有针对该问题对已有方法进行改进的方法。
发明内容
针对现有技术存在的问题，本发明实施例提供一种视网膜OCT体数据识别方法及装置。
本发明实施例提供一种视网膜OCT体数据识别方法，包括：
获取待识别图像，所述待识别图像为视网膜OCT体数据图像；对所述待识别图像进行处理，获得目标待识别图像，所述目标待识别图像为视网膜OCT体数据的多个二维切片图像；
根据目标卷积神经网络对所述目标待识别图像进行识别，获得所述目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；所述待识别图像的识别结果用于表征待识别图像为正常或异常，所述目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
本发明实施例提供一种视网膜OCT体数据识别装置，包括：
获取模块，用于获取待识别图像，所述待识别图像为视网膜OCT体数据图像；对所述待识别图像进行处理，获得目标待识别图像，所述目标待识别图像为视网膜OCT体数据的多个二维切片图像；
识别模块，用于根据目标卷积神经网络对所述目标待识别图像进行识别，获得所述目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；所述待识别图像的识别结果用于表征待识别图像为正常或异常，所述目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
本发明实施例提供的视网膜OCT体数据识别方法及装置，通过在训练卷积神经网络的过程中，对体数据的二维切片图像的标签进行筛选和迭代更新，用标签更新后的二维切片图像再次训练卷积神经网络，从而获得训练好的卷积神经网络；通过训练好的卷积神经网络对视网膜OCT体数据图像进行识别与分类，准确度更高。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为根据本发明实施例提供的视网膜OCT体数据识别方法流程图；
图2为根据本发明实施例提供的视网膜OCT体数据识别装置结构示意图；
图3为根据本发明实施例提供的电子设备结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为了解决现有技术存在的问题，本发明实施例提出了一种视网膜OCT体数据识别方法及装置，首先将三维体数据拆分成多张二维切片图像，并以三维体数据标签标注二维切片图像，在训练卷积神经网络的过程中，利用自监督迭代学习的方法，先利用初始标签和训练样本训练卷积神经网络，再对训练样本图像进行重新分类，并结合聚类或阈值过滤等方法对训练样本图像进行重标签；反复迭代训练与重标签的流程，得到目标卷积神经网络，从而能够在仅有三维级别标签的图像的条件下，提高识别准确率。
图1为根据本发明实施例提供的视网膜OCT体数据识别方法流程图，如图1所示，包括：
S1、获取待识别图像，所述待识别图像为视网膜OCT体数据图像；对所述待识别图像进行处理，获得目标待识别图像，所述目标待识别图像为视网膜OCT体数据的多个二维切片图像；
需要说明的是，首先获取视网膜OCT(Optical Coherence tomography，光学相干断层扫描)体数据图像，视网膜OCT体数据图像为待识别图像。由于视网膜OCT体数据图像为三维级别的图像，因此，需要对其进行处理，即将三维体数据图像拆分，获取多张二维切片图像。根据卷积神经网络要求的输入的图像大小，将所有二维切片图像放缩至同一尺寸，例如224*224的大小，从而获取的二维切片图像即为目标待识别图像。
应当理解的是，选取卷积神经网络可以有多种选择，例如深度残差网络(Deepresidual network，ResNet)等，本发明实施例对卷积神经网络的模型选取不作限制。
S2、根据目标卷积神经网络对所述目标待识别图像进行识别，获得所述目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；所述待识别图像的识别结果用于表征待识别图像为正常或异常，所述目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
需要说明的是，将得到的二维切片图像输入至已训练好的目标卷积神经网络中，利用该卷积神经网络对多张二维切片图像进行识别与分类。目标卷积神经网络对于每张二维切片图像输出识别结果，识别结果为“正常”或者“异常”，若为“异常”则还需给出对应的“异常”类型。
本发明实施例提供的视网膜OCT体数据识别方法，通过将三维体数据拆分成多张二维切片图像，并以训练好的卷积神经网络对二维切片图像进行识别与分类，再根据各二维切片图像的识别结果，得到三维体数据的识别结果，准确度更高。
可以理解的是，实际应用中仍存在人为实时识别的检测方式，不仅耗费人力精力，还容易疏忽出错。为了解决这些问题，本发明实施例采用机器学习的方式，利用卷积神经网络和样本二维切片图像，预先训练卷积神经网络；然后利用训练好的卷积神经网络对二维切片图像进行识别与分类，大大地提高了识别的准确率。
应当清楚的是，神经网络学习训练首先应该得到携带有识别结果标签的图像组成的训练样本集，然后对该训练样本集进行处理，使得该训练样本集中的图像具有统一的某些特性，以便支持神经网络对处理后的训练样本集进行识别训练，进而利用训练好的目标卷积神经网络对二维切片图像进行识别与检测。因此，在上述实施例的基础上，作为一种可选的实施例，利用自监督迭代学习的方法对卷积神经网络进行训练、以获得目标卷积神经网络的训练过程包括如下步骤：
S21、获取训练样本集，所述训练样本集包括多个样本视网膜OCT体数据图像；
S22、对所述训练样本集中的图像进行处理，获得目标训练样本集；所述目标训练样本集包括多个样本二维切片图像，所述样本二维切片图像具有初始标签；
S23、利用自监督迭代学习的方法，利用训练样本图像和初始标签训练卷积神经网络，获得候选卷积神经网络；
S24、利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签；
S25、反复迭代训练与重标签的流程，直至满足训练终止条件，得到最终的目标卷积神经网络；
其中，所述训练条件包括：
与上一个迭代步相比，当前迭代步所得的候选卷积神经网络在目标训练样本集上的识别正确率的提高幅度小于阈值；其中，所述识别正确率是根据目标验证样本集中的图像的识别结果标签和目标验证样本集中的图像的识别结果获得的；所述目标验证样本集包括多个验证样本二维切片图像。
需要说明的是，获取训练样本集后，对训练样本集中的图像进行处理，获得目标训练样本集；将目标训练样本集中的图像输入至卷积神经网络中进行训练。应当理解的是，选取卷积神经网络可以有多种选择，例如深度残差网络等；为了说明方便，本发明实施例以深度残差网络为例。利用事先在ImageNet数据集上预训练的权重，对深度残差网络进行初始化，然后利用带动量的随机梯度下降法，将S22中得到的带初始标签的样本二维切片图像输入至深度残差网络中进行有监督训练，从而获得初步训练好的深度残差网络模型，即候选卷积神经网络。其中，带动量的随机梯度下降法的公式如下：
Figure BDA0001841404590000051
Wt＝Wt-1-αVt； (2)
式中Wt和Wt-1分别为第t步和第t-1步中深度残差网络的权重，
Figure BDA0001841404590000052
为损失函数L关于Wt-1的梯度，β为动量因子。本发明实施例中，β的值设为0.9。Vt和Vt-1分别为第t步和第t-1步中利用公式(1)计算得到的带动量的梯度，α为学习率。其中，α的取值范围通常在10-3至10-4之间，本发明实施例可以根据实际情况进行调整。
利用候选卷积神经网络对训练样本图像进行重新分类，可选的，可以利用聚类或阈值过滤的方法对训练样本图像进行重标签，将重标签后的样本二维切片图像输入候选卷积神经网络进行迭代训练，直至候选卷积神经网络满足训练终止条件。此时，将满足训练终止条件的候选卷积神经网络作为目标卷积神经网络，该目标卷积神经网络用以在应用阶段对二维切片图像和OCT体数据图像进行识别与分类。
需要说明的是，需要对候选卷积神经网络反复进行迭代训练与重标签的流程，直至满足训练终止条件，最后才得到最终的目标卷积神经网络。本发明实施例中，训练终止条件包括：与上一个迭代步相比，当前迭代步所得的候选卷积神经网络在目标训练样本集上的识别正确率不再显著提高，即提高幅度小于阈值。验证样本集包括多个验证样本二维切片图像，用来验证候选卷积神经网络的识别正确率。具体的，可以通过将验证样本集中的图像的识别结果标签和验证样本集中的图像的识别结果进行比对，获得识别正确的体数据个数，从而计算得到识别正确率(分类准确率)。其计算公式如下：
Figure BDA0001841404590000061
其中，ncorrect为识别正确的体数据个数，ntotal为体数据的总个数，CCR为识别正确率。
需要说明的是，S22中为了使训练样本集中的图像具有统一的某些特性，一般在训练过程中，都包括预处理和归一化处理的步骤。预处理的目的是消除图像中的无关信息，提高后续图像识别训练的可靠性和稳定性。本发明实施例中，可以通过水平镜像变换等处理，或者增加数据的数量，以增强训练的鲁棒性。归一化处理的目的是消除图像中由于拍摄环境等干扰因素影响而产生的差异，消除图像之间的量纲影响；同时，归一化处理让神经网络学习的模型更加符合实际情况，从而获得更好的训练结果。因此，基于上述实施例，作为一种可选的实施例，对所述训练样本集中的图像进行处理，获得目标训练样本集，包括如下步骤：
S221、对训练样本集中的图像进行预处理，获得预处理训练样本集；
S222、对预处理训练样本集中的图像进行归一化处理，获得归一化训练样本集；
S223、对归一化训练样本集中的各个图像设置对应的识别结果标签，获得目标训练样本集；
需要说明的是，首先获得训练样本集中的图像，该图像为三维体数据图像。将三维体数据图像拆分为多张二维切片图像，所有的二维切片图像组成了预处理训练样本集。对预处理训练样本集中的二维切片图像作归一化处理，例如包括尺寸处理，本发明实施例可以将二维切片图像归一化尺寸为224*224的大小，以获得归一化训练样本集。然后将归一化训练样本集中的二维切片图像的识别结果标签，设置为其所述的体数据的标签，从而获得目标训练样本集；其中，二维切片图像的识别结果标签用于监督卷积神经网络的训练。对应地，对待识别图像进行处理，获得目标待识别图像，包括：
S11、对待识别图像进行预处理，获得预处理图像；
S12、对待识别图像进行归一化处理，获得归一化图像；
S13、对归一化图像设置对应的识别结果标签，获得目标待识别图像。
利用候选卷积神经网络对样本二维切片图像进行重标签时，对于每个体数据对应的所有二维切片图像，根据二元性先验理论，可利用聚类或阈值过滤等方法，对各二维切片图像进行重标签。因此，在上述实施例的基础上，作为一种可选的实施例，本发明实施例利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签，可以包括如下步骤：
S2401、将目标训练样本集中的图像输入至候选卷积神经网络重新进行分类，获得识别结果标签类别的置信概率；
S2402、对于识别结果标签为异常的目标训练样本集图像，若置信概率超过预设阈值，则保持识别结果标签不变；否则，则将识别结果标签更新为正常；对于识别结果标签为正常的目标训练样本集图像不作处理。
需要说明的是，对于各体数据的所有二维切片图像，若其所属的识别结果标签所属类别的置信概率超过预设阈值，则保持其标签不变；例如，本发明实施例中，可以将阈值设置为0.8。若其所属的识别结果标签所属类别的置信概率未超过预设阈值，更新其标签为正常类别。对于原本识别结果标签为正常的二维切片图像，则不做任何处理。
应当清楚，本发明实施例利用标签筛选方法对二维切片图像的标签进行更新，可选择多种方法，例如聚类方法、阈值过滤方法等，上述实施例给出了采用阈值过滤方法进行重标签的步骤。同样，可采用聚类方法。若采用聚类方法对训练样本图像进行重标签，可以包括如下步骤：
S2411、将目标训练样本集中的图像分为两组，获取每组图像的平均置信概率；
S2412、对于平均置信概率较高的组，维持组内图像的识别结果标签不变；对于平均置信概率较低的组，将组内图像的识别结果标签更新为正常。
需要说明的是，将目标训练样本集中的图像输入至候选卷积神经网络重新进行机器学习训练，获得识别结果标签类别的置信概率。然后利用例如K-means聚类方法，将一个体数据的所有二维切片图像的标签分成两部分，然后对于二维切片图像标签所属类别的平均置信概率较高的那一部分，维持其中所有二维切片图像的标签不变，而将另外一部分中所有二维切片图像的标签更新为正常类别。
需要说明的是，对卷积神经网络进行训练，需要预先设置一定的参数，以使得训练符合要求。因此，在上述实施例的基础上，预设卷积神经网络训练参数包括：预设分类器类型和预设训练终止条件；预设分类器类型为多分类。
本发明实施例提供的视网膜OCT体数据识别方法，首先将三维体数据拆分成多张二维切片图像，并以三维体数据标签标注二维切片图像，在训练卷积神经网络的过程中，对二维切片图像的标签进行筛选和迭代更新，用标签更新后的二维切片图像再次训练卷积神经网络，从而获得训练好的卷积神经网络；通过训练好的卷积神经网络对视网膜OCT体数据图像进行识别与分类，显著地提高了准确度。
图2为根据本发明实施例提供的视网膜OCT体数据识别装置结构示意图，如图2所示，包括获取模块201和识别模块202，其中：获取模块201用于获取待识别图像，待识别图像为视网膜OCT体数据图像；对待识别图像进行处理，获得目标待识别图像，目标待识别图像为视网膜OCT体数据的多个二维切片图像；识别模块202用于根据目标卷积神经网络对目标待识别图像进行识别，获得目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；待识别图像的识别结果用于表征待识别图像为正常或异常，目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
需要说明的是，首先获取视网膜OCT(Optical Coherence tomography，光学相干断层扫描)体数据图像，视网膜OCT体数据图像为待识别图像。由于视网膜OCT体数据图像为三维级别的图像，因此，需要对其进行处理，即将三维体数据图像拆分，获取多张二维切片图像。根据卷积神经网络要求的输入的图像大小，将所有二维切片图像放缩至同一尺寸，例如224*224的大小，从而获取的二维切片图像即为目标待识别图像。然后将得到的二维切片图像输入至已训练好的目标卷积神经网络中，利用该卷积神经网络对多张二维切片图像进行识别与分类。目标卷积神经网络对于每张二维切片图像输出识别结果，识别结果为“正常”或者“异常”。
本发明实施例提供的视网膜OCT体数据识别装置，通过将OCT体数据拆分成多张二维切片图像，并以训练好的卷积神经网络对二维切片图像进行识别与分类，准确度更高。
在上述实施例的基础上，作为一种可选的实施例，本发明实施例还包括训练模块，用以对目标卷积神经网络进行基于自监督迭代学习的训练。训练模块包括：
训练样本获取单元，用于获取训练样本集，所述训练样本集包括多个样本视网膜OCT体数据图像；
预处理单元，用于对所述训练样本集中的图像进行处理，获得目标训练样本集；所述目标训练样本集包括多个样本二维切片图像，所述样本二维切片图像具有初始标签；
训练单元，用于利用自监督迭代学习的方法，利用训练样本图像和初始标签训练卷积神经网络，获得候选卷积神经网络；
重标签单元，用于利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签；
迭代单元，用于反复迭代训练与重标签的流程，直至满足训练终止条件，得到最终的目标卷积神经网络；
其中，所述训练条件包括：与上一个迭代步相比，当前迭代步所得的候选卷积神经网络在目标训练样本集上的识别正确率的提高幅度小于阈值；其中，所述识别正确率是根据验证样本集中的图像的识别结果标签和验证样本集中的图像的识别结果获得的；所述验证样本集包括多个验证样本二维切片图像。
本发明实施例是用于执行上述各方法实施例的，具体流程和详细内容请参照上述实施例，此处不再赘述。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
举个例子如下：
图3示例了一种服务器的实体结构示意图，如图3所示，该服务器可以包括：处理器(processor)310、通信接口(Communications Interface)320、存储器(memory)330和通信总线340，其中，处理器310，通信接口320，存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑指令，以执行如下方法：获取待识别图像，待识别图像为视网膜OCT体数据图像；对待识别图像进行处理，获得目标待识别图像，目标待识别图像为视网膜OCT体数据的多个二维切片图像；根据目标卷积神经网络对目标待识别图像进行识别，获得目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；待识别图像的识别结果用于表征待识别图像为正常或异常，目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
此外，上述的存储器330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本发明实施例提供一种非暂态计算机可读存储介质，该非暂态计算机可读存储介质存储计算机指令，该计算机指令使计算机执行上述实施例所提供的视网膜OCT体数据识别方法，例如包括：获取待识别图像，待识别图像为视网膜OCT体数据图像；对待识别图像进行处理，获得目标待识别图像，目标待识别图像为视网膜OCT体数据的多个二维切片图像；根据目标卷积神经网络对目标待识别图像进行识别，获得目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；待识别图像的识别结果用于表征待识别图像为正常或异常，目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到。
另外，本领域内的技术人员应当理解的是，在本发明的申请文件中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明的说明书中，说明了大量具体细节。然而应当理解的是，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。类似地，应当理解，为了精简本发明公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。
然而，并不应将该公开的方法解释呈反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种视网膜OCT体数据识别方法，其特征在于，包括：
获取待识别图像，所述待识别图像为视网膜OCT体数据图像；对所述待识别图像进行处理，获得目标待识别图像，所述目标待识别图像为视网膜OCT体数据的多个二维切片图像；
根据目标卷积神经网络对所述目标待识别图像进行识别，获得所述目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；所述待识别图像的识别结果用于表征待识别图像为正常或异常，所述目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到；
其中，所述目标卷积神经网络的基于自监督迭代学习的训练过程包括：
获取训练样本集，所述训练样本集包括多个样本视网膜OCT体数据图像；
对所述训练样本集中的图像进行处理，获得目标训练样本集；所述目标训练样本集包括多个样本二维切片图像，所述样本二维切片图像具有初始标签；
利用自监督迭代学习的方法，利用训练样本图像和初始标签训练卷积神经网络，获得候选卷积神经网络；
利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签；
反复迭代训练与重标签的流程，直至满足训练终止条件，得到最终的目标卷积神经网络；
其中，训练条件包括：
与上一个迭代步相比，当前迭代步所得的候选卷积神经网络在目标训练样本集上的识别正确率的提高幅度小于阈值；其中，所述识别正确率是根据验证样本集中的图像的识别结果标签和验证样本集中的图像的识别结果获得的；所述验证样本集包括多个验证样本二维切片图像。
2.根据权利要求1所述的方法，其特征在于，所述根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果，之后还包括：
对于每个待识别图像，统计各个异常类别的识别结果对应的目标待识别图像的数量，获得数量最多的某一异常类别；
若所述异常类别所占的目标待识别图像数量占全部目标待识别图像的数量的比例超过一定上限，则将所述待识别图像的识别结果更新为所述异常类别，否则，将所述待识别图像的识别结果更新为正常。
3.根据权利要求1所述的方法，其特征在于，所述对所述训练样本集中的图像进行处理，获得目标训练样本集，包括：
对训练样本集中的图像进行预处理，获得预处理训练样本集；
对所述预处理训练样本集中的图像进行归一化处理，获得归一化训练样本集；
对所述归一化训练样本集中的各个图像设置对应的识别结果标签，获得所述目标训练样本集；
对应地，
所述对所述待识别图像进行处理，获得多个目标待识别图像，包括：
对所述待识别图像进行预处理，获得预处理图像；
对所述待识别图像进行归一化处理，获得归一化图像；
对所述归一化图像设置对应的识别结果标签，获得所述目标待识别图像。
4.根据权利要求1所述的方法，其特征在于，所述利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签，包括：
将所述目标训练样本集中的图像输入至候选卷积神经网络重新进行分类，获得识别结果标签类别的置信概率；
对于识别结果标签为异常的目标训练样本集图像，若所述置信概率超过预设阈值，则保持所述识别结果标签不变；否则，则将所述识别结果标签更新为正常；对于识别结果标签为正常的目标训练样本集图像不作处理。
5.根据权利要求4所述的方法，其特征在于，所述利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签，还包括：
将所述目标训练样本集中的图像分为两组，获取每组图像的平均置信概率；
对于平均置信概率较高的组，维持组内图像的识别结果标签不变；对于平均置信概率较低的组，将组内图像的识别结果标签更新为正常。
6.根据权利要求1所述的方法，其特征在于，所述训练过程还包括：预设卷积神经网络训练参数，包括预设分类器类型和预设训练终止条件；所述预设分类器类型为多分类。
7.一种视网膜OCT体数据识别装置，其特征在于，包括：
获取模块，用于获取待识别图像，所述待识别图像为视网膜OCT体数据图像；对所述待识别图像进行处理，获得目标待识别图像，所述目标待识别图像为视网膜OCT体数据的多个二维切片图像；
识别模块，用于根据目标卷积神经网络对所述目标待识别图像进行识别，获得所述目标待识别图像的识别结果；根据待识别图像的每个目标待识别图像的识别结果，给出待识别图像的识别结果；所述待识别图像的识别结果用于表征待识别图像为正常或异常，所述目标卷积神经网络是基于样本二维切片图像、对应的识别结果标签和基于自监督迭代学习的卷积神经网络训练算法预先训练得到；
所述目标卷积神经网络的基于自监督迭代学习的训练过程包括：
获取训练样本集，所述训练样本集包括多个样本视网膜OCT体数据图像；
对所述训练样本集中的图像进行处理，获得目标训练样本集；所述目标训练样本集包括多个样本二维切片图像，所述样本二维切片图像具有初始标签；
利用自监督迭代学习的方法，利用训练样本图像和初始标签训练卷积神经网络，获得候选卷积神经网络；
利用候选卷积神经网络对训练样本图像进行重新分类，根据聚类或阈值过滤的方法，对训练样本图像进行重标签；
反复迭代训练与重标签的流程，直至满足训练终止条件，得到最终的目标卷积神经网络；
其中，训练条件包括：
与上一个迭代步相比，当前迭代步所得的候选卷积神经网络在目标训练样本集上的识别正确率的提高幅度小于阈值；其中，所述识别正确率是根据验证样本集中的图像的识别结果标签和验证样本集中的图像的识别结果获得的；所述验证样本集包括多个验证样本二维切片图像。
8.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至6任一项所述视网膜OCT体数据识别方法的步骤。
9.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至6任一项所述视网膜OCT体数据识别方法的步骤。
CN201811249854.8A 2018-10-25 2018-10-25 视网膜oct体数据识别方法及装置 Active CN109583297B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811249854.8A CN109583297B (zh) 2018-10-25 2018-10-25 视网膜oct体数据识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811249854.8A CN109583297B (zh) 2018-10-25 2018-10-25 视网膜oct体数据识别方法及装置

Publications (2)

Publication Number Publication Date
CN109583297A CN109583297A (zh) 2019-04-05
CN109583297B true CN109583297B (zh) 2020-10-02

Family

ID=65920648

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811249854.8A Active CN109583297B (zh) 2018-10-25 2018-10-25 视网膜oct体数据识别方法及装置

Country Status (1)

Country Link
CN (1) CN109583297B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110163260A (zh) * 2019-04-26 2019-08-23 平安科技（深圳）有限公司 基于残差网络的图像识别方法、装置、设备及存储介质
CN110163849A (zh) * 2019-04-28 2019-08-23 上海鹰瞳医疗科技有限公司 训练数据处理方法、分类模型训练方法及设备
CN110659673A (zh) * 2019-09-04 2020-01-07 清华大学 视网膜光学相干层析体数据自动识别方法及装置
CN111027378B (zh) * 2019-11-01 2023-08-18 深圳大学 行人重识别的方法、装置、终端及存储介质
CN110853764B (zh) * 2019-11-28 2023-11-14 成都中医药大学 一种糖尿病证候预测系统
CN111738284B (zh) * 2019-11-29 2023-11-17 北京沃东天骏信息技术有限公司 一种物体识别方法、装置、设备及存储介质
CN110909820B (zh) * 2019-12-02 2023-04-07 齐鲁工业大学 基于自监督学习的图像分类方法及系统
CN111652084B (zh) * 2020-05-13 2023-04-25 清远市智慧农业研究院 一种异常蛋鸡识别方法及装置
CN112381169B (zh) * 2020-11-23 2023-01-13 济南博观智能科技有限公司 一种图像识别方法、装置、电子设备及可读存储介质
CN112990108B (zh) * 2021-04-19 2022-12-27 四川省水利科学研究院 一种基于卷积神经网络实现堤坝护坡的系统
CN114529772B (zh) * 2022-04-19 2022-07-15 广东唯仁医疗科技有限公司 Oct三维图像分类方法、系统、计算机装置及存储介质
CN117313899B (zh) * 2023-11-23 2024-02-23 全芯智造技术有限公司 用于数据处理的方法、设备和介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107437092A (zh) * 2017-06-28 2017-12-05 苏州比格威医疗科技有限公司 基于三维卷积神经网络的视网膜oct图像的分类算法
CN108510467A (zh) * 2018-03-28 2018-09-07 西安电子科技大学 基于深度可变形卷积神经网络的sar图像目标识别方法
CN108830856A (zh) * 2018-05-25 2018-11-16 南京理工大学 一种基于时间序列sd-oct视网膜图像的ga自动分割方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5751815B2 (ja) * 2010-12-09 2015-07-22 キヤノン株式会社 画像処理装置、撮影システム、画像処理方法及びプログラム
EP2865323B1 (en) * 2013-10-23 2022-02-16 Canon Kabushiki Kaisha Retinal movement tracking in optical coherence tomography
US10463247B2 (en) * 2015-06-22 2019-11-05 The Regents Of The University Of California Automatic three-dimensional segmentation method for OCT and doppler OCT angiography

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107437092A (zh) * 2017-06-28 2017-12-05 苏州比格威医疗科技有限公司 基于三维卷积神经网络的视网膜oct图像的分类算法
CN108510467A (zh) * 2018-03-28 2018-09-07 西安电子科技大学 基于深度可变形卷积神经网络的sar图像目标识别方法
CN108830856A (zh) * 2018-05-25 2018-11-16 南京理工大学 一种基于时间序列sd-oct视网膜图像的ga自动分割方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
RetiNet: Automatic AMD identification in OCT volumetric data;S. Apostolopoulos 等;《arxiv》;20161031;第1-14页 *
光学相干层析医学图像处理及其应用;孙延奎;《光学精密工程》;20140430;第22卷(第4期);第1086-1104页 *
光学相干层析视网膜体数据的3维分割;樊鲁杰 等;《中国图象图形学报》;20130331;第18卷(第3期);第330-335页 *

Also Published As

Publication number Publication date
CN109583297A (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
CN109583297B (zh) 视网膜oct体数据识别方法及装置
US10943096B2 (en) High-quality training data preparation for high-performance face recognition systems
Opelt et al. Incremental learning of object detectors using a visual shape alphabet
US8224092B2 (en) Word detection method and system
US8923608B2 (en) Pre-screening training data for classifiers
US20140270489A1 (en) Learned mid-level representation for contour and object detection
CN111813997B (zh) 入侵分析方法、装置、设备及存储介质
US9589351B2 (en) System and method for pet face detection
WO2020164278A1 (zh) 一种图像处理方法、装置、电子设备和可读存储介质
CN103839041A (zh) 客户端特征的识别方法和装置
CN109840413B (zh) 一种钓鱼网站检测方法及装置
KR101545809B1 (ko) 차량 번호판 이중 검출 방법 및 장치
US20170039451A1 (en) Classification dictionary learning system, classification dictionary learning method and recording medium
CN107066980B (zh) 一种图像变形检测方法及装置
CN110796210A (zh) 一种标签信息的识别方法及装置
CN109635796B (zh) 调查问卷的识别方法、装置和设备
CN114386013A (zh) 学籍自动认证方法、装置、计算机设备及存储介质
CN113378852A (zh) 关键点检测方法、装置、电子设备及存储介质
CN112818946A (zh) 年龄识别模型的训练、年龄识别方法、装置及电子设备
CN112749737A (zh) 图像分类方法及装置、电子设备、存储介质
CN110414229B (zh) 操作命令检测方法、装置、计算机设备及存储介质
CN114119970B (zh) 目标跟踪方法及装置
CN115424093A (zh) 一种识别眼底图像中细胞的方法及装置
CN111695117B (zh) 一种webshell脚本检测方法及装置
CN112699908B (zh) 标注图片的方法、电子终端、计算机可读存储介质及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant