CN109829882A - 一种糖尿病视网膜病变分期预测方法 - Google Patents

一种糖尿病视网膜病变分期预测方法 Download PDF

Info

Publication number
CN109829882A
CN109829882A CN201811548010.3A CN201811548010A CN109829882A CN 109829882 A CN109829882 A CN 109829882A CN 201811548010 A CN201811548010 A CN 201811548010A CN 109829882 A CN109829882 A CN 109829882A
Authority
CN
China
Prior art keywords
stages
training
lesion
network model
color picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811548010.3A
Other languages
English (en)
Other versions
CN109829882B (zh
Inventor
陈新建
汪竟成
陈润航
王猛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou bigway Medical Technology Co., Ltd
Original Assignee
Suzhou Were Medical Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Were Medical Technology Co Ltd filed Critical Suzhou Were Medical Technology Co Ltd
Priority to CN201811548010.3A priority Critical patent/CN109829882B/zh
Publication of CN109829882A publication Critical patent/CN109829882A/zh
Application granted granted Critical
Publication of CN109829882B publication Critical patent/CN109829882B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开了一种糖尿病视网膜病变分期预测方法,所述方法包括以下步骤:采集糖尿病患者的眼底彩照图像;将眼底彩照图像输入已训练好的单纯分期网络模型,获取糖网分期结果特征;将眼底彩照图像输入已训练好的病灶分割网络模型,获取糖网病灶分割结果特征;将糖网分期结果特征与糖网病灶分割结果特征进行组合,获得分割分期组合特征;根据预判定的各分期最佳分类器和各最佳分类器的优先级,结合所述分割分期组合特征预测糖尿病视网膜病变分期类别。本发明的方法采用多种分类器进行分割分期组合特征到糖网分期类别的拟合,并充分利用不同分类器的优势,组合得到更加准确和鲁棒的分期结果。

Description

一种糖尿病视网膜病变分期预测方法
技术领域
本发明涉及一种糖尿病视网膜病变分期预测方法,属于图像处理分析技术领域。
背景技术
基于眼底彩照的糖尿病视网膜病变(简称糖网)图像的分期具有重要的临床意义。目前的糖网分期方法存在以下几方面的局限性:基于人工的方法通常依赖于医生的临床经验,对于同样的眼底图像,不同的医生可能给出不同的分期诊断结果,因此对于医生的水平有较高的要求;耗费时间较长,病患和医生数量的不对等导致病人需要花费大量时间在等待医生诊断上。同时,目前已有的基于眼底彩照的糖尿病视网膜病变的自动分类方法无法有效获取并利用糖网疾病的各种病灶信息,算法的准确率和鲁棒性都不够理想。
发明内容
本发明的目的在于提供一种糖尿病视网膜病变分期预测方法,以解决现有技术中存在的上述多项缺陷或缺陷之一。
为达到上述目的,本发明采用如下技术方案:
一种糖尿病视网膜病变分期预测方法,包括以下步骤:
采集糖尿病患者的眼底彩照图像;
将眼底彩照图像输入已训练好的单纯分期网络模型,获取糖网分期结果特征;
将眼底彩照图像输入已训练好的病灶分割网络模型,获取糖网病灶分割结果特征;
将糖网分期结果特征与糖网病灶分割结果特征进行组合,获得分割分期组合特征;
根据预判定的各分期最佳分类器和各最佳分类器的优先级,结合所述分割分期组合特征预测糖尿病视网膜病变分期类别。
进一步,所述单纯分期网络模型的训练方法包括:
采用ResNet-50网络模型作为训练模型,采集不同病变程度的眼底彩照图像作为训练样本;
将不同病变程度的眼底彩照图像按照样本占比的倒数进行重采样,保证各期的图像样本数一致;
随着训练的进行将重采样比例恢复到接近真实的数据集中的比例,重采样比例:wi=rt-1wo+(1-rt-1)wf,wo表示训练开始时的重采样比例,保证重采样后各类样本的数量相等;wf表示训练epoch数接近正无穷时的重采样比例,取经验值1:2:2:2:2;t表示当前的epoch计数;r表示衰减因子。
采用均方误差作为损失函数,Adam算法作为优化算法,训练获得单纯分期网络模型。
进一步,所述单纯分期网络模型的训练方法还包括:
对训练样本中的眼底彩照图像进行预处理,包括:裁剪黑边、尺寸缩放、旋转、平移、归一化。
进一步,所述病变程度包括正常、轻微病变、中度病变、重度非增殖病变和增殖期病变。
进一步,所述病灶分割网络模型的训练方法包括:
采用MaskRCNN网络模型作为训练模型;
采用糖网病灶分割数据训练所述MaskRCNN网络模型。
进一步,所述糖网病灶分割结果特征的获取方法包括:
计算微血管瘤、硬性渗出、棉绒斑和出血四类病灶的统计特征,所述统计特征包括:像素点面积、在眼底彩照图像上的连通域数量和各个连通域的轮廓周长总和;
分别取各统计特征的自然对数作为糖网病灶分割结果特征。
进一步,各分期最佳分类器和各最佳分类器的优先级判定方法包括:
采用训练所述单纯分期网络模型的训练集数据独立训练梯度提升树、K-近邻、随机梯度下降线性逻辑回归分类、支持向量机4个机器学习模型;
根据4个机器学习模型在验证集上的准确率筛选出默认模型;
根据各分期类别上4个机器学习模型的查准率高低顺序确定各分期最佳分类器;
根据各分期最佳分类器的查准率的高低顺序排出最佳分类器的优先级。
进一步,所述糖尿病视网膜病变分期类别的预测方法包括:
从最高优先级的最佳分类器开始,判断是否满足条件其中:是输入模型的特征,Mi是各分期最佳分类器,i是对应的分期类别;
如果满足则预测分期类别直接为i,否则,进入低一级优先级的最佳分类器的判断条件;
如果所有优先级下的判断条件都不满足,则选用默认模型的输出作为预测分期类别。
与现有技术相比,本发明具有的有益技术效果为:采用糖网分期结果特征与糖网病灶分割结果特征相组合,采用多种分类器对分割分期组合特征进行糖网分期类别的拟合,并充分利用不同分类器的优势,组合得到更加准确和鲁棒的分期结果。
附图说明
图1是本发明实施例的一种糖尿病视网膜病变分期预测方法的流程图。
具体实施方式
下面结合具体实施例对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
如图1所示,一种糖尿病视网膜病变分期预测方法,包括以下步骤:
采集糖尿病患者的眼底彩照图像;
将眼底彩照图像输入已训练好的单纯分期网络模型,获取糖网分期结果特征;
将眼底彩照图像输入已训练好的病灶分割网络模型,获取糖网病灶分割结果特征;
将糖网分期结果特征与糖网病灶分割结果特征进行组合,获得分割分期组合特征;
根据预判定的各分期最佳分类器和各最佳分类器的优先级,结合所述分割分期组合特征预测糖尿病视网膜病变分期类别。
进一步,所述单纯分期网络模型的训练方法包括:
采用ResNet-50网络模型作为训练模型,采集不同病变程度的眼底彩照图像作为训练样本;所述不同病变程度的眼底彩照图像数据来源于数据建模和分析平台(Kaggle)中的Diabetic Retinopathy Detection(糖尿病视网膜病变检测)比赛,根据病变程度将所述图像分为正常、轻微病变、中度病变、重度非增殖病变和增殖期病变共5个分期类别;作为本发明的进一步优选,对所述图像进行裁剪黑边、尺寸缩放、旋转、平移、归一化等预处理操作;
在训练开始时,将上述5个分期类别的眼底彩照图像按照样本占比的倒数进行重采样,保证各期的图像样本数一致;
随着训练的进行将重采样比例恢复到接近真实的数据集中的比例,重采样比例:wi=rt-1wo+(1-rt-1)wf,wo表示训练开始时的重采样比例,保证重采样后各类样本的数量相等;wf表示训练epoch数接近正无穷时的重采样比例,取经验值1:2:2:2:2;t表示当前的epoch计数;r表示衰减因子。
采用回归形式的损失函数,具体的,采用均方误差(MSE)作为损失函数,并采用Adam算法作为优化算法,训练获得单纯分期网络模型;
进一步,所述病灶分割网络模型的训练方法包括:采用MaskRCNN网络模型作为训练模型,采用眼底彩照图像的糖网病灶分割数据训练所述MaskRCNN网络模型,获取基于MaskRCNN网络模型的糖网病灶分割结果,根据糖网病灶分割结果计算各个病灶分割的统计特征;在训练病灶分割网络模型时,分割的病灶包括微血管瘤、硬性渗出、棉绒斑、出血;分别计算这4类病灶的像素点面积、病灶在图像上的连通域数量和各个连通域的轮廓周长的总和,将这些统计特征取自然对数作为糖网病灶分割结果特征。
作为本发明的进一步优选,对用于训练所述MaskRCNN网络模型的眼底彩照图像进行旋转、归一化等预处理操作。
进一步,各分期最佳分类器和各最佳分类器的优先级判定方法包括:将用于训练所述单纯分期网络模型的数据以8:2比例进行数据划分,得到训练集与验证集。采用所述数据集数据独立训练梯度提升树、K-近邻、随机梯度下降线性逻辑回归分类、支持向量机4个机器学习模型;根据验证集上4个模型在各分期类别上的查准率(Precision),判定各个分期的最佳分类器,以及各最佳分类器的优先级:设 是输入模型的特征,M表示对应的机器学习模型(即分类器),y表述预测的分期类别。首先根据4个模型在整体验证集上的准确率筛选出默认模型Mdefault,然后根据5个分期类别上4个模型的查准率高低顺序确定各个分期类别的最优分类器Mi,i是对应的分期类别;并根据5个分期类别下最优分类器的查准率值的高低顺序排出最优分类器的优先级。
进一步,模型决策时的判定条件是:从最高优先级的最佳分类器开始,判断是否满足条件如果满足则预测类别直接为i,否则就进入低一级优先级的最优判定模型的判断条件;如果所有优先级下的判断条件都不满足,则选用默认模型的输出作为预测类别。
最终得到的自动预测眼底彩照图像的糖网分期类别,是根据训练完成的4个机器学习模型进行图像的分期类别预测,并根据已确定的各分期的最佳分类器和各最佳分类器的判定优先级,确定最终的图像糖网分期的所属类别。
本发明的方法通过采用糖网分期结果特征与糖网病灶分割结果特征相组合,采用多种分类器对分割分期组合特征进行糖网分期类别的拟合,并充分利用不同分类器的优势,组合得到更加准确和鲁棒的分期结果。
以上已以较佳实施例公布了本发明,然其并非用以限制本发明,凡采取等同替换或等效变换的方案所获得的技术方案,均落在本发明的保护范围内。

Claims (8)

1.一种糖尿病视网膜病变分期预测方法,其特征在于,所述方法包括以下步骤:
采集糖尿病患者的眼底彩照图像;
将眼底彩照图像输入已训练好的单纯分期网络模型,获取糖网分期结果特征;
将眼底彩照图像输入已训练好的病灶分割网络模型,获取糖网病灶分割结果特征;
将糖网分期结果特征与糖网病灶分割结果特征进行组合,获得分割分期组合特征;
根据预判定的各分期最佳分类器和各最佳分类器的优先级,结合所述分割分期组合特征预测糖尿病视网膜病变分期类别。
2.根据权利要求1所述的糖尿病视网膜病变分期预测方法,其特征在于,所述单纯分期网络模型的训练方法包括:
采用ResNet-50网络模型作为训练模型,采集不同病变程度的眼底彩照图像作为训练样本;
将不同病变程度的眼底彩照图像按照样本占比的倒数进行重采样,保证各期的图像样本数一致;
随着训练的进行将重采样比例恢复到接近真实的数据集中的比例,重采样比例:wi=rt-1wo+(1-rt-1)wf,wo表示训练开始时的重采样比例,保证重采样后各类样本的数量相等;wf表示训练epoch数接近正无穷时的重采样比例,取经验值1:2:2:2:2;t表示当前的epoch计数;r表示衰减因子。
采用均方误差作为损失函数,Adam算法作为优化算法,训练获得单纯分期网络模型。
3.根据权利要求2所述的糖尿病视网膜病变分期预测方法,其特征在于,所述单纯分期网络模型的训练方法还包括:
对训练样本中的眼底彩照图像进行预处理,包括:裁剪黑边、尺寸缩放、旋转、平移、归一化。
4.根据权利要求2所述的糖尿病视网膜病变分期预测方法,其特征在于,所述病变程度包括正常、轻微病变、中度病变、重度非增殖病变和增殖期病变。
5.根据权利要求1所述的糖尿病视网膜病变分期预测方法,其特征在于,所述病灶分割网络模型的训练方法包括:
采用MaskRCNN网络模型作为训练模型;
采用糖网病灶分割数据训练所述MaskRCNN网络模型。
6.根据权利要求5所述的糖尿病视网膜病变分期预测方法,其特征在于,所述糖网病灶分割结果特征的获取方法包括:
计算微血管瘤、硬性渗出、棉绒斑和出血四类病灶的统计特征,所述统计特征包括:像素点面积、在眼底彩照图像上的连通域数量和各个连通域的轮廓周长总和;
分别取各统计特征的自然对数作为糖网病灶分割结果特征。
7.根据权利要求1所述的糖尿病视网膜病变分期预测方法,其特征在于,各分期最佳分类器和各最佳分类器的优先级判定方法包括:
采用训练所述单纯分期网络模型的训练集数据独立训练梯度提升树、K-近邻、随机梯度下降线性逻辑回归分类、支持向量机4个机器学习模型;
根据4个机器学习模型在验证集上的准确率筛选出默认模型;
根据各分期类别上4个机器学习模型的查准率高低顺序确定各分期最佳分类器;
根据各分期最佳分类器的查准率的高低顺序排出最佳分类器的优先级。
8.根据权利要求1所述的糖尿病视网膜病变分期预测方法,其特征在于,所述糖尿病视网膜病变分期类别的预测方法包括:
从最高优先级的最佳分类器开始,判断是否满足条件其中:是输入模型的特征,Mi是各分期最佳分类器,i是对应的分期类别;
如果满足则预测分期类别直接为i,否则,进入低一级优先级的最佳分类器的判断条件;
如果所有优先级下的判断条件都不满足,则选用默认模型的输出作为预测分期类别。
CN201811548010.3A 2018-12-18 2018-12-18 一种糖尿病视网膜病变分期预测方法 Active CN109829882B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811548010.3A CN109829882B (zh) 2018-12-18 2018-12-18 一种糖尿病视网膜病变分期预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811548010.3A CN109829882B (zh) 2018-12-18 2018-12-18 一种糖尿病视网膜病变分期预测方法

Publications (2)

Publication Number Publication Date
CN109829882A true CN109829882A (zh) 2019-05-31
CN109829882B CN109829882B (zh) 2020-10-27

Family

ID=66859775

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811548010.3A Active CN109829882B (zh) 2018-12-18 2018-12-18 一种糖尿病视网膜病变分期预测方法

Country Status (1)

Country Link
CN (1) CN109829882B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110309862A (zh) * 2019-06-11 2019-10-08 广东省人民医院(广东省医学科学院) 基于集成机器学习的dme预后信息预测系统及其应用方法
CN110729044A (zh) * 2019-10-08 2020-01-24 腾讯医疗健康(深圳)有限公司 糖网病变阶段识别模型的训练方法及糖网病变识别设备
CN111785363A (zh) * 2020-06-03 2020-10-16 中国科学院宁波工业技术研究院慈溪生物医学工程研究所 一种基于ai引导的慢性病辅助诊断系统
CN112053321A (zh) * 2020-07-30 2020-12-08 中山大学中山眼科中心 一种识别高度近视视网膜病变的人工智能系统
CN112200794A (zh) * 2020-10-23 2021-01-08 苏州慧维智能医疗科技有限公司 一种基于卷积神经网络的多模型糖网病变自动筛查方法
CN112869704A (zh) * 2021-02-02 2021-06-01 苏州大学 一种基于循环自适应多目标加权网络的糖尿病视网膜病变区域自动分割方法
CN113066066A (zh) * 2021-03-30 2021-07-02 北京鹰瞳科技发展股份有限公司 视网膜异常分析方法及设备
CN113273959A (zh) * 2021-07-19 2021-08-20 中山大学中山眼科中心 一种便携式糖尿病视网膜病变诊疗仪
CN115330714A (zh) * 2022-08-10 2022-11-11 中山大学中山眼科中心 一种荧光素眼底血管造影图像的分期和病变诊断系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3060821A1 (en) * 2008-12-19 2010-07-15 University Of Miami System and method for early detection of diabetic retinopathy using optical coherence tomography
CN106408562A (zh) * 2016-09-22 2017-02-15 华南理工大学 基于深度学习的眼底图像视网膜血管分割方法及系统
CN107330449A (zh) * 2017-06-13 2017-11-07 瑞达昇科技(大连)有限公司 一种糖尿病性视网膜病变体征检测方法及装置
CN108185984A (zh) * 2017-12-28 2018-06-22 中山大学 眼底彩照进行眼底病灶识别的方法
US20180334499A1 (en) * 2015-11-30 2018-11-22 Pieris Australia Pty Ltd. Novel anti-angiogenic fusion polypeptides
WO2018224838A1 (en) * 2017-06-09 2018-12-13 University Of Surrey Method and apparatus for processing retinal images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA3060821A1 (en) * 2008-12-19 2010-07-15 University Of Miami System and method for early detection of diabetic retinopathy using optical coherence tomography
US20180334499A1 (en) * 2015-11-30 2018-11-22 Pieris Australia Pty Ltd. Novel anti-angiogenic fusion polypeptides
CN106408562A (zh) * 2016-09-22 2017-02-15 华南理工大学 基于深度学习的眼底图像视网膜血管分割方法及系统
WO2018224838A1 (en) * 2017-06-09 2018-12-13 University Of Surrey Method and apparatus for processing retinal images
CN107330449A (zh) * 2017-06-13 2017-11-07 瑞达昇科技(大连)有限公司 一种糖尿病性视网膜病变体征检测方法及装置
CN108185984A (zh) * 2017-12-28 2018-06-22 中山大学 眼底彩照进行眼底病灶识别的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DEBIAO ZHANG 等: "Diabetic retinopathy classification using deeply supervised ResNet", 《SMARTWORLD/SCALCOM/UIC/ATC/CBDCOM/IOP/SCI》 *
庞浩 等: "用于糖尿病视网膜病变检测的深度学习模型", 《软件学报》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110309862A (zh) * 2019-06-11 2019-10-08 广东省人民医院(广东省医学科学院) 基于集成机器学习的dme预后信息预测系统及其应用方法
CN110729044A (zh) * 2019-10-08 2020-01-24 腾讯医疗健康(深圳)有限公司 糖网病变阶段识别模型的训练方法及糖网病变识别设备
CN110729044B (zh) * 2019-10-08 2023-09-12 腾讯医疗健康(深圳)有限公司 糖网病变阶段识别模型的训练方法及糖网病变识别设备
CN111785363A (zh) * 2020-06-03 2020-10-16 中国科学院宁波工业技术研究院慈溪生物医学工程研究所 一种基于ai引导的慢性病辅助诊断系统
CN112053321A (zh) * 2020-07-30 2020-12-08 中山大学中山眼科中心 一种识别高度近视视网膜病变的人工智能系统
CN112200794A (zh) * 2020-10-23 2021-01-08 苏州慧维智能医疗科技有限公司 一种基于卷积神经网络的多模型糖网病变自动筛查方法
CN112869704A (zh) * 2021-02-02 2021-06-01 苏州大学 一种基于循环自适应多目标加权网络的糖尿病视网膜病变区域自动分割方法
CN113066066A (zh) * 2021-03-30 2021-07-02 北京鹰瞳科技发展股份有限公司 视网膜异常分析方法及设备
CN113273959A (zh) * 2021-07-19 2021-08-20 中山大学中山眼科中心 一种便携式糖尿病视网膜病变诊疗仪
CN115330714A (zh) * 2022-08-10 2022-11-11 中山大学中山眼科中心 一种荧光素眼底血管造影图像的分期和病变诊断系统

Also Published As

Publication number Publication date
CN109829882B (zh) 2020-10-27

Similar Documents

Publication Publication Date Title
CN109829882A (zh) 一种糖尿病视网膜病变分期预测方法
CN106780475B (zh) 一种基于病理组织切片图像组织区域的图像处理装置
CN108717554A (zh) 一种甲状腺肿瘤病理组织切片图像分类方法及其装置
JP3586695B2 (ja) 生物標本群用のスライド及び標本の準備を連続的に監視及び予測する方法及び装置
CN108288271A (zh) 基于三维残差网络的图像检测系统及方法
CN109741346A (zh) 感兴趣区域提取方法、装置、设备及存储介质
CN109858540B (zh) 一种基于多模态融合的医学图像识别系统及方法
CN108288506A (zh) 一种基于人工智能技术的癌症病理辅助诊断方法
CN108898595A (zh) 一种胸部疾病检测模型的构建方法及应用
CN109697719A (zh) 一种图像质量评估方法、装置及计算机可读存储介质
CN107368671A (zh) 基于大数据深度学习的良性胃炎病理诊断支持系统和方法
CN110376198A (zh) 一种宫颈液基细胞切片质量检测系统
CN110276763A (zh) 一种基于可信度和深度学习的视网膜血管分割图生成方法
CN110097545A (zh) 基于深度学习的眼底图像生成方法
CN108629369A (zh) 一种基于Trimmed SSD的尿沉渣有形成分自动识别方法
CN112837805A (zh) 基于深度学习的眼睑拓扑形态特征的提取方法
CN114862760B (zh) 一种早产儿视网膜病变检测方法及装置
CN106706643B (zh) 一种肝癌对比切片检测方法
Kanth et al. Identification of different stages of Diabetic Retinopathy using artificial neural network
CN110473167A (zh) 一种基于深度学习的尿沉渣图像识别系统及方法
CN108596174A (zh) 一种皮肤病影像的病灶定位方法
CN113034528A (zh) 基于影像组学的靶区及危及器官勾画轮廓准确性检验方法
CN110838094B (zh) 病理切片染色风格转换方法和电子设备
Niya et al. Analysis of different automatic cataract detection and classification methods
WO2017145172A1 (en) System and method for extraction and analysis of samples under a microscope

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200522

Address after: 510000 No. 411, 412, 413, building F1, No. 39, Ruihe Road, Huangpu District, Guangzhou City, Guangdong Province

Applicant after: Guangzhou bigway Medical Technology Co., Ltd

Address before: High tech Zone Suzhou city Jiangsu province 215011 Chuk Yuen Road No. 209

Applicant before: SUZHOU BIGVISION MEDICAL TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant