CN111862187B - 基于神经网络的杯盘比确定方法、装置、设备及存储介质 - Google Patents

基于神经网络的杯盘比确定方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111862187B
CN111862187B CN202010992346.XA CN202010992346A CN111862187B CN 111862187 B CN111862187 B CN 111862187B CN 202010992346 A CN202010992346 A CN 202010992346A CN 111862187 B CN111862187 B CN 111862187B
Authority
CN
China
Prior art keywords
cup
ratio
disc
optic
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010992346.XA
Other languages
English (en)
Other versions
CN111862187A (zh
Inventor
李葛
成冠举
曾婵
高鹏
谢国彤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN202010992346.XA priority Critical patent/CN111862187B/zh
Priority to US17/612,566 priority patent/US20220309654A1/en
Priority to PCT/CN2020/125009 priority patent/WO2021189849A1/zh
Priority to JP2021568938A priority patent/JP7260674B2/ja
Publication of CN111862187A publication Critical patent/CN111862187A/zh
Application granted granted Critical
Publication of CN111862187B publication Critical patent/CN111862187B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016—Operational features thereof
    • A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/1005—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring distances inside the eye, e.g. thickness of the cornea
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30041—Eye; Retina; Ophthalmic

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Surgery (AREA)
  • Geometry (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本申请涉及人工智能领域，具体使用了神经网络，并公开了一种基于神经网络的杯盘比确定方法、装置、设备及存储介质，所述方法包括：获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像；基于所述视杯视盘的分割图像确定算数杯盘比；根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。提高确定出的杯盘比的准确度，减少疾病筛查过程中的多筛、漏筛情况。本申请适用于智慧医疗领域。

Description

基于神经网络的杯盘比确定方法、装置、设备及存储介质
技术领域
本申请涉及图像处理领域，尤其涉及一种基于神经网络的杯盘比确定方法、装置、设备及存储介质。
背景技术
青光眼是一种全球三大致盲的眼科疾病之一，其不可逆性导致它的早期诊断和治疗对于提高患者的生活质量有至关重要的作用。在对青光眼进行自动筛查时，通常使用杯盘比作为评估指标，采用分割方法对眼底图像中的视杯和视盘进行分割，然后计算杯盘比。但现有的视盘分割方法容易受到眼底图像的图像质量的影响，例如光照、遮挡等，导致分割精度降低，进而导致计算出的杯盘比的准确度较低，容易产生多筛或漏筛的情况。
因此，如何提高确定出的杯盘比的准确度，减少疾病筛查过程中的多筛、漏筛情况成为亟待解决的问题。
发明内容
本申请提供了一种基于神经网络的杯盘比确定方法、装置、设备及存储介质，以提高确定出的杯盘比的准确度，减少疾病筛查过程中的多筛、漏筛情况。
第一方面，本申请提供了一种基于神经网络的杯盘比确定方法，所述方法包括：
获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像；基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的；根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
第二方面，本申请还提供了一种基于神经网络的杯盘比确定装置，所述装置包括：
图像检测模块，用于获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；网络预测模块，用于将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像；算数确定模块，用于基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的；实际确定模块，用于根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
第三方面，本申请还提供了一种计算机设备，所述计算机设备包括存储器和处理器；所述存储器用于存储计算机程序；所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如上述的基于神经网络的杯盘比确定方法。
第四方面，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如上述的基于神经网络的杯盘比确定方法。
本申请公开了一种基于神经网络的杯盘比确定方法、装置、设备及存储介质，通过获取眼底图像，并对眼底图像进行视盘区域检测得到视盘区域，然后将视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像，再基于视杯视盘的分割图像确定算数杯盘比，算数杯盘比为根据杯盘比计算公式计算得到的，最终根据算数杯盘比和预测杯盘比确定实际杯盘比的值。采用同一神经网络分别输出预测杯盘比和视杯视盘的分割图像，并最终根据算数杯盘比和预测杯盘比进一步确定实际杯盘比，降低了在确定杯盘比时，对视杯视盘的分割图像的依赖，进而提高确定出的杯盘比的准确度。
附图说明
为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种基于神经网络的杯盘比确定方法的示意流程图；
图2是本申请实施例提供的对眼底图像进行视盘区域检测得到视盘区域的示意流程图；
图3是本申请实施例提供的眼底图像中视盘区域的示意图；
图4是本申请实施例提供的视盘区域的示意图；
图5是本申请实施例提供的预先训练的神经网络的结构示意图；
图6是本申请实施例提供的确定算数杯盘比的示意流程图；
图 7为本申请实施例提供的一种基于神经网络的杯盘比确定装置的示意性框图；
图 8为本申请一实施例提供的一种计算机设备的结构示意性框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/ 或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
本申请的实施例提供了一种基于神经网络的杯盘比确定方法、装置、计算机设备及存储介质。基于神经网络的杯盘比确定方法利用人工智能可用于筛查青光眼疾病，降低青光眼疾病的多筛、漏筛情况。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
请参阅图1，图1是本申请实施例提供的一种基于神经网络的杯盘比确定方法的示意流程图。该基于神经网络的杯盘比确定方法通过预先训练的神经网络分别输出预测杯盘比和视杯视盘的分割图像，以根据视杯视盘的分割图像计算算数杯盘比，并最终根据算数杯盘比和预测杯盘比进一步确定实际杯盘比，提高确定出的杯盘比的准确度。
如图1所示，该基于神经网络的杯盘比确定方法，具体包括：步骤S101至步骤S104。
S101、获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域。
通过采集眼底图像的器械获取眼底图像，并对获取到的眼底图像进行视盘区域的检测，从而得到视盘区域。
在一些实施例中，如图2所示，对眼底图像进行视盘区域检测得到视盘区域，包括步骤S1011和步骤S1012。
S1011、对所述眼底图像进行检测，得到视盘区域的边界坐标。
在对眼底图像进行检测时，可以采用多种目标检测技术，例如，可以是采用MaskRCNN模型对眼底图像进行检测，从而得到视盘区域的边界坐标。其中，边界坐标可以是指视盘区域的两个对角坐标，如图3所示，为眼底图像中视盘区域的示意图，矩形框内为对眼底图像进行检测得到的视盘区域，视盘区域的边界坐标可以是矩形框的左上角与右下角坐标。
S1012、基于所述边界坐标对所述眼底图像进行裁剪，得到视盘区域。
基于边界坐标对眼底图像进行裁剪，得到视盘区域的图像。在进行裁剪时，可根据矩形框的左上角与右下角坐标对眼底图像进行裁剪，从而得到如图4所示的视盘区域。
S102、将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像。
将得到的视盘区域输入预先训练的神经网络中，神经网络基于输入的视盘区域进行预测，输出预测杯盘比和视杯视盘的分割图像。
在一些实施例中，在所述将所述视盘区域输入预先训练的神经网络之前，所述方法包括：对所述视盘区域进行预处理，所述预处理包括伸缩处理。
伸缩处理是为了将视盘区域的图像处理为特定的尺寸，例如可以是256*256，便于所述预先训练的神经网络对视盘区域的图像进行特征提取。
在一些实施例中，所述预先训练的神经网络包括特征提取层、卷积层、连接层、图像分割层和回归预测层，如图5所示，为本申请实施例提供的预先训练的神经网络的网络结构示意图。
所述将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像，包括：通过所述特征提取层对所述视盘区域进行特征提取，以得到所述视盘区域对应的第一特征图像；通过所述卷积层对所述第一特征图像进行卷积操作，以得到代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像；通过所述连接层将所述第二特征图像和所述第三特征图像进行连接，得到连接后的第四特征图像；将所述第四特征图像输入所述回归预测层，以得到预测杯盘比；将所述第四特征图像输入所述图像分割层，以得到视杯视盘的分割图像。
将视盘区域输入预先训练的神经网络后，通过神经网络中的特征提取层对视盘区域进行特征提取，例如，特征提取层可以使用mobilenetv2网络对视盘区域进行特征提取，进而得到视盘区域对应的第一特征图像。
得到第一特征图像后，卷积层对第一特征图像进行卷积和膨胀卷积操作，例如，可以使用1*1卷积和dilation参数为6的膨胀卷积进行卷积操作，进而得到代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像。
在连接层将代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像进行连接，得到连接完成后的第四特征图像。
最终将第四特征图像输入回归预测层进行回归预测，得到预测杯盘比；以及将第四特征图像输入图像分割层进行图像分割，得到视杯视盘的分割图像。其中，回归预测层的损失函数为最小均方误差损失函数，图像分割层的损失函数为交叉熵损失函数。
S103、基于所述视杯视盘的分割图像确定算数杯盘比。
其中，算数杯盘比为根据杯盘比计算公式计算得到的。对于预先训练的神经网络输出的视杯视盘的分割图像，基于该视杯视盘的分割图像计算算数杯盘比。
在一些实施例中，请参阅图6，确定算数杯盘比包括步骤S1031和步骤S1032。
S1031、基于所述视杯视盘的分割图像确定视杯直径和视盘直径；S1032、根据所述视杯直径和视盘直径确定算数杯盘比。
基于视杯视盘的分割图像分别确定视杯直径和视盘直径，在得到视杯直径和视盘直径后，即可根据杯盘比的计算公式计算算数杯盘比。其中，杯盘比的计算公式为：CDR=VCD/VDD，其中，CDR为计算出的算数杯盘比，VCD为视杯直径，VDD为视盘直径。
在一些实施例中，所述基于所述视杯视盘的分割图像确定视杯直径和视盘直径，包括：基于所述视杯视盘的分割图像确定视杯外轮廓和视盘外轮廓；根据所述视杯外轮廓和视盘外轮廓分别确定视杯的最小外接矩形和视盘的最小外接矩形；基于所述视杯的最小外接矩形和视盘的最小外接矩形分别确定视杯直径和视盘直径。
可以采用寻找最大外轮廓的方法，从视杯视盘的分割图像中分别提取出视杯外轮廓和视盘外轮廓，然后再利用旋转卡尺算法分别对视杯外轮廓和视盘外轮廓求得最小外接矩形，得到视杯的最小外接矩形和视盘的最小外接矩形。视杯的最小外接矩形的垂直方向上的边长即是视杯直径（VCD），同样的，视盘的最小外接矩形的垂直方向上的边长即是视盘直径（VDD）。
S104、根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
将算数杯盘比和预测杯盘比进行比较判断，进而确定出实际杯盘比。
在一些实施例中，步骤S104具体包括：计算所述算数杯盘比和所述预测杯盘比之间的距离差；若所述算数杯盘比和所述预测杯盘比之间的距离差小于或等于第一阈值时，将所述算数杯盘比作为实际杯盘比；若所述算数杯盘比和所述预测杯盘比之间的距离差大于第二阈值时，将所述预测杯盘比作为实际杯盘比；若所述算数杯盘比和所述预测杯盘比之间的距离差大于第一阈值且小于或等于第二阈值时，计算所述算数杯盘比和所述预测杯盘比的平均值，并将所述平均值作为实际杯盘比。
计算算数杯盘比和预测杯盘比之间的距离差，其中，所述距离差也即算数杯盘比和预测杯盘比之间的数值差值，根据计算出的算数杯盘比和预测杯盘比之间的距离差采用采用不同的方式确定实际杯盘比。
当计算出算数杯盘比和预测杯盘比之间的距离差小于或等于第一阈值时，则可以认为利用视杯视盘的分割图像计算出的算数杯盘比更为准确，则将算数杯盘比作为实际杯盘比，其中，第一阈值例如可以是0.05。
当计算出算数杯盘比和预测杯盘比之间的距离差大于第二阈值时，则可以认为利用预先训练的神经网络得到的预测杯盘比更为准确，则将预测杯盘比作为实际杯盘比，其中，第二阈值例如可以是0.1。
当计算出算数杯盘比和预测杯盘比之间的距离差大于第一阈值且小于或等于第二阈值时，则认为需要对算数杯盘比和预测杯盘比进行融合，例如可以是取算数杯盘比和预测杯盘比的平均值，并将计算出的平均值作为实际杯盘比。
也即，确定实际杯盘比的公式例如可以如下所示：
Figure 702369DEST_PATH_IMAGE001
其中，
Figure 121849DEST_PATH_IMAGE002
表示实际杯盘比，
Figure 207616DEST_PATH_IMAGE003
表示算数杯盘比，
Figure 763363DEST_PATH_IMAGE004
表示预测杯盘比。
上述实施例提供的基于神经网络的杯盘比确定方法，通过获取眼底图像，并对眼底图像进行视盘区域检测得到视盘区域，然后将视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像，再基于视杯视盘的分割图像确定算数杯盘比，最终根据算数杯盘比和预测杯盘比确定实际杯盘比的值。采用同一神经网络分别输出预测杯盘比和视杯视盘的分割图像，并最终根据算数杯盘比和预测杯盘比进一步确定实际杯盘比，降低了在确定杯盘比时，对视杯视盘的分割图像的依赖，进而提高确定出的杯盘比的准确度。
请参阅图7，图7是本申请的实施例还提供一种基于神经网络的杯盘比确定装置的示意性框图，该基于神经网络的杯盘比确定装置用于执行前述的基于神经网络的杯盘比确定方法。其中，该基于神经网络的杯盘比确定装置可以配置于服务器或终端中。
其中，服务器可以为独立的服务器，也可以为服务器集群。该终端可以是手机、平板电脑、笔记本电脑、台式电脑、个人数字助理和穿戴式设备等电子设备。
如图7所示，基于神经网络的杯盘比确定装置200包括：图像检测模块201、网络预测模块202、算数确定模块203和实际确定模块204。
图像检测模块201，用于获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域。
其中，图像检测模块201包括边界确定子模块2011和图像裁剪子模块2012。
具体地，边界确定子模块2011，用于对所述眼底图像进行检测，得到视盘区域的边界坐标；图像裁剪子模块2012，用于基于所述边界坐标对所述眼底图像进行裁剪，得到视盘区域。
网络预测模块202，用于将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像。
算数确定模块203，用于基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的。
其中，算数确定模块203包括直径确定子模块2031和算数计算子模块2032。
具体地，直径确定子模块2031，用于基于所述视杯视盘的分割图像确定视杯直径和视盘直径；算数计算子模块2032，用于根据所述视杯直径和视盘直径确定算数杯盘比。
实际确定模块204，用于根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
需要说明的是，所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的基于神经网络的杯盘比确定装置和各模块的具体工作过程，可以参考前述基于神经网络的杯盘比确定方法实施例中的对应过程，在此不再赘述。
上述的基于神经网络的杯盘比确定装置可以实现为一种计算机程序的形式，该计算机程序可以在如图8所示的计算机设备上运行。
请参阅图8，图8是本申请实施例提供的一种计算机设备的结构示意性框图。该计算机设备可以是服务器或终端。
参阅图8，该计算机设备包括通过系统总线连接的处理器、存储器和网络接口，其中，存储器可以包括非易失性存储介质和内存储器。
非易失性存储介质可存储操作系统和计算机程序。该计算机程序包括程序指令，该程序指令被执行时，可使得处理器执行任意一种基于神经网络的杯盘比确定方法。
处理器用于提供计算和控制能力，支撑整个计算机设备的运行。
内存储器为非易失性存储介质中的计算机程序的运行提供环境，该计算机程序被处理器执行时，可使得处理器执行任意一种基于神经网络的杯盘比确定方法。
该网络接口用于进行网络通信，如发送分配的任务等。本领域技术人员可以理解，图8中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
应当理解的是，处理器可以是中央处理单元 (Central Processing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor，DSP)、专用集成电路 (Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
其中，在一个实施例中，所述处理器用于运行存储在存储器中的计算机程序，以实现如下步骤：获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像；基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的；根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
在一个实施例中，所述处理器在实现所述对所述眼底图像进行视盘区域检测，以得到视盘区域时，用于实现：对所述眼底图像进行检测，得到视盘区域的边界坐标；基于所述边界坐标对所述眼底图像进行裁剪，得到视盘区域。
在一个实施例中，所述处理器在实现所述将所述视盘区域输入预先训练的神经网络之前，用于实现：对所述视盘区域进行预处理，所述预处理包括伸缩处理。
在一个实施例中，所述预先训练的神经网络包括特征提取层、卷积层、连接层、图像分割层和回归预测层；所述处理器在实现所述将所述视盘区域输入预先训练的神经网络，得到预测杯盘比和视杯视盘的分割图像时，用于实现：通过所述特征提取层对所述视盘区域进行特征提取，以得到所述视盘区域对应的第一特征图像；通过所述卷积层对所述第一特征图像进行卷积操作，以得到代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像；通过所述连接层将所述第二特征图像和所述第三特征图像进行连接，得到连接后的第四特征图像；将所述第四特征图像输入所述回归预测层，以得到预测杯盘比；将所述第四特征图像输入所述图像分割层，以得到视杯视盘的分割图像。
在一个实施例中，所述处理器在实现所述基于所述视杯视盘的分割图像确定算数杯盘比时，用于实现：基于所述视杯视盘的分割图像确定视杯直径和视盘直径；根据所述视杯直径和视盘直径确定算数杯盘比。
在一个实施例中，所述处理器在实现所述基于所述视杯视盘的分割图像确定视杯直径和视盘直径时，用于实现：基于所述视杯视盘的分割图像确定视杯外轮廓和视盘外轮廓；根据所述视杯外轮廓和视盘外轮廓分别确定视杯的最小外接矩形和视盘的最小外接矩形；基于所述视杯的最小外接矩形和视盘的最小外接矩形分别确定视杯直径和视盘直径。
在一个实施例中，所述处理器在实现所述根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比时，用于实现：计算所述算数杯盘比和所述预测杯盘比之间的距离差；若所述算数杯盘比和所述预测杯盘比之间的距离差小于或等于第一阈值时，将所述算数杯盘比作为实际杯盘比；若所述算数杯盘比和所述预测杯盘比之间的距离差大于第二阈值时，将所述预测杯盘比作为实际杯盘比；若所述算数杯盘比和所述预测杯盘比之间的距离差大于第一阈值且小于或等于第二阈值时，计算所述算数杯盘比和所述预测杯盘比的平均值，并将所述平均值作为实际杯盘比。
本申请的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序中包括程序指令，所述处理器执行所述程序指令，实现本申请实施例提供的任一项基于神经网络的杯盘比确定方法。
其中，所述计算机可读存储介质可以是前述实施例所述的计算机设备的内部存储单元，例如所述计算机设备的硬盘或内存。所述计算机可读存储介质也可以是所述计算机设备的外部存储设备，例如所述计算机设备上配备的插接式硬盘，智能存储卡(SmartMedia Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (9)

1.一种基于神经网络的杯盘比确定方法，其特征在于，所述神经网络包括特征提取层、卷积层、连接层、图像分割层和回归预测层；所述方法包括：
获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；
通过所述特征提取层对所述视盘区域进行特征提取，以得到所述视盘区域对应的第一特征图像；
通过所述卷积层对所述第一特征图像进行卷积操作，以得到代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像；
通过所述连接层将所述第二特征图像和所述第三特征图像进行连接，得到连接后的第四特征图像；
将所述第四特征图像输入所述回归预测层，以得到预测杯盘比；
将所述第四特征图像输入所述图像分割层，以得到视杯视盘的分割图像；
基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的；
根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
2.根据权利要求1所述的基于神经网络的杯盘比确定方法，其特征在于，所述对所述眼底图像进行视盘区域检测，以得到视盘区域，包括：
对所述眼底图像进行检测，得到视盘区域的边界坐标；
基于所述边界坐标对所述眼底图像进行裁剪，得到视盘区域。
3.根据权利要求1所述的基于神经网络的杯盘比确定方法，其特征在于，在所述通过所述特征提取层对所述视盘区域进行特征提取之前，所述方法包括：
对所述视盘区域进行预处理，所述预处理包括伸缩处理。
4.根据权利要求1所述的基于神经网络的杯盘比确定方法，其特征在于，所述基于所述视杯视盘的分割图像确定算数杯盘比，包括：
基于所述视杯视盘的分割图像确定视杯直径和视盘直径；
根据所述视杯直径和视盘直径确定算数杯盘比。
5.根据权利要求4所述的基于神经网络的杯盘比确定方法，其特征在于，所述基于所述视杯视盘的分割图像确定视杯直径和视盘直径，包括：
基于所述视杯视盘的分割图像确定视杯外轮廓和视盘外轮廓；
根据所述视杯外轮廓和视盘外轮廓分别确定视杯的最小外接矩形和视盘的最小外接矩形；
基于所述视杯的最小外接矩形和视盘的最小外接矩形分别确定视杯直径和视盘直径。
6.根据权利要求1所述的基于神经网络的杯盘比确定方法，其特征在于，所述根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比，包括：
计算所述算数杯盘比和所述预测杯盘比之间的距离差；
若所述算数杯盘比和所述预测杯盘比之间的距离差小于或等于第一阈值时，将所述算数杯盘比作为实际杯盘比；
若所述算数杯盘比和所述预测杯盘比之间的距离差大于第二阈值时，将所述预测杯盘比作为实际杯盘比；
若所述算数杯盘比和所述预测杯盘比之间的距离差大于第一阈值且小于或等于第二阈值时，计算所述算数杯盘比和所述预测杯盘比的平均值，并将所述平均值作为实际杯盘比。
7.一种基于神经网络的杯盘比确定装置，其特征在于，所述神经网络包括特征提取层、卷积层、连接层、图像分割层和回归预测层；所述装置包括：
图像检测模块，用于获取眼底图像，并对所述眼底图像进行视盘区域检测，以得到视盘区域；
网络预测模块，用于通过所述特征提取层对所述视盘区域进行特征提取，以得到所述视盘区域对应的第一特征图像；通过所述卷积层对所述第一特征图像进行卷积操作，以得到代表预测杯盘比的第二特征图像和代表视杯视盘的分割图像的第三特征图像；通过所述连接层将所述第二特征图像和所述第三特征图像进行连接，得到连接后的第四特征图像；将所述第四特征图像输入所述回归预测层，以得到预测杯盘比；将所述第四特征图像输入所述图像分割层，以得到视杯视盘的分割图像；
算数确定模块，用于基于所述视杯视盘的分割图像确定算数杯盘比，所述算数杯盘比为根据杯盘比计算公式计算得到的；
实际确定模块，用于根据所述算数杯盘比和所述预测杯盘比确定实际杯盘比。
8.一种计算机设备，其特征在于，所述计算机设备包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如权利要求1至6中任一项所述的基于神经网络的杯盘比确定方法。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如权利要求1至6中任一项所述的基于神经网络的杯盘比确定方法。
CN202010992346.XA 2020-09-21 2020-09-21 基于神经网络的杯盘比确定方法、装置、设备及存储介质 Active CN111862187B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN202010992346.XA CN111862187B (zh) 2020-09-21 2020-09-21 基于神经网络的杯盘比确定方法、装置、设备及存储介质
US17/612,566 US20220309654A1 (en) 2020-09-21 2020-10-30 Method for confirming cup-disc ratio based on neural network, apparatus, device, and computer readable storage medium
PCT/CN2020/125009 WO2021189849A1 (zh) 2020-09-21 2020-10-30 基于神经网络的杯盘比确定方法、装置、设备及存储介质
JP2021568938A JP7260674B2 (ja) 2020-09-21 2020-10-30 ニューラルネットワークに基づくｃ／ｄ比決定方法、コンピュータ機器及び記憶媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010992346.XA CN111862187B (zh) 2020-09-21 2020-09-21 基于神经网络的杯盘比确定方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111862187A CN111862187A (zh) 2020-10-30
CN111862187B true CN111862187B (zh) 2021-01-01

Family

ID=72967804

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010992346.XA Active CN111862187B (zh) 2020-09-21 2020-09-21 基于神经网络的杯盘比确定方法、装置、设备及存储介质

Country Status (4)

Country Link
US (1) US20220309654A1 (zh)
JP (1) JP7260674B2 (zh)
CN (1) CN111862187B (zh)
WO (1) WO2021189849A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112651938B (zh) * 2020-12-24 2023-12-19 平安科技（深圳）有限公司 视盘图像分类模型的训练方法、装置、设备及存储介质
CN113450341A (zh) * 2021-07-16 2021-09-28 依未科技(北京)有限公司 图像处理方法及装置、计算机可读存储介质及电子设备
CN113658165B (zh) * 2021-08-25 2023-06-20 平安科技（深圳）有限公司 杯盘比确定方法、装置、设备及存储介质
CN113780477B (zh) * 2021-10-11 2022-07-22 深圳硅基智能科技有限公司 基于紧框标的深度学习的眼底图像的测量方法及测量装置
CN115272333B (zh) * 2022-09-29 2023-08-04 西藏腾狮软件有限公司 一种杯盘比数据的存储系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107704886A (zh) * 2017-10-20 2018-02-16 北京工业大学 一种基于深度卷积神经网络的医疗图像分级系统和方法
CN108520522A (zh) * 2017-12-31 2018-09-11 南京航空航天大学 基于深度全卷积神经网络的视网膜眼底图像分割方法
CN109829877A (zh) * 2018-09-20 2019-05-31 中南大学 一种视网膜眼底图像杯盘比自动评估方法
CN110992382A (zh) * 2019-12-30 2020-04-10 四川大学 用于辅助青光眼筛查的眼底图像视杯视盘分割方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007095250A2 (en) * 2006-02-13 2007-08-23 The Cleveland Clinic Foundation Compositions and methods for inhibiting optic nerve damage
CN102112044A (zh) 2008-05-14 2011-06-29 科学、技术与研究机构 自动杯盘比测量系统
US9107617B2 (en) * 2009-11-16 2015-08-18 Agency For Science, Technology And Research Obtaining data for automatic glaucoma screening, and screening and diagnostic techniques and systems using the data
WO2014116181A2 (en) 2013-01-22 2014-07-31 Agency For Science, Technology And Research Cost-sensitive linear reconstruction based optic cup localization
US9675244B1 (en) * 2015-12-02 2017-06-13 Novartis Ag Location indicator for optical coherence tomography in ophthalmic visualization
KR20210000021A (ko) * 2019-06-24 2021-01-04 삼성에스디에스 주식회사 녹내장 진단 장치
JP2023546642A (ja) * 2020-08-19 2023-11-07 フェルコム テクノロジーズ エス／エイ 携帯式かつ接続式かつインテリジェントな眼球イメージングのためのシステム、デバイス及び方法
TWI746287B (zh) * 2020-11-26 2021-11-11 宏碁股份有限公司 影像處理系統及影像處理方法
US20220198831A1 (en) * 2020-12-17 2022-06-23 Delphinium Clinic Ltd. System for determining one or more characteristics of a user based on an image of their eye using an ar/vr headset

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107704886A (zh) * 2017-10-20 2018-02-16 北京工业大学 一种基于深度卷积神经网络的医疗图像分级系统和方法
CN108520522A (zh) * 2017-12-31 2018-09-11 南京航空航天大学 基于深度全卷积神经网络的视网膜眼底图像分割方法
CN109829877A (zh) * 2018-09-20 2019-05-31 中南大学 一种视网膜眼底图像杯盘比自动评估方法
CN110992382A (zh) * 2019-12-30 2020-04-10 四川大学 用于辅助青光眼筛查的眼底图像视杯视盘分割方法及系统

Also Published As

Publication number Publication date
CN111862187A (zh) 2020-10-30
US20220309654A1 (en) 2022-09-29
JP2022533685A (ja) 2022-07-25
WO2021189849A1 (zh) 2021-09-30
JP7260674B2 (ja) 2023-04-18

Similar Documents

Publication Publication Date Title
CN111862187B (zh) 基于神经网络的杯盘比确定方法、装置、设备及存储介质
CN112132265B (zh) 模型训练方法、杯盘比确定方法、装置、设备及存储介质
WO2021057848A1 (zh) 网络的训练方法、图像处理方法、网络、终端设备及介质
WO2021184727A1 (zh) 数据异常检测方法、装置、电子设备及存储介质
CN108875519B (zh) 对象检测方法、装置和系统及存储介质
US20220245809A1 (en) Computer aided diagnosis system for detecting tissue lesion on microscopy images based on multi-resolution feature fusion
CN112580668B (zh) 一种背景欺诈检测方法、装置及电子设备
CN112508918A (zh) 图像处理方法及装置、电子设备和存储介质
CN111667459A (zh) 一种基于3d可变卷积和时序特征融合的医学征象检测方法、系统、终端及存储介质
CN111415373A (zh) 基于孪生卷积网络的目标跟踪与分割方法、系统及介质
US8977061B2 (en) Merging face clusters
CN112819797A (zh) 一种糖尿病性视网膜病变分析方法、装置、系统、以及存储介质
CN112734828A (zh) 一种眼底血管中心线确定的方法、装置、介质和设备
CN112465050B (zh) 一种图像模板选择方法、装置、设备及存储介质
WO2020253296A1 (zh) 图像分割模型的训练方法、图像分割方法、介质及终端
CN110796115B (zh) 图像检测方法、装置、电子设备及可读存储介质
CN109165648B (zh) 一种图像处理方法、图像处理装置及移动终端
CN111079560A (zh) 一种摔倒监测方法、装置及终端设备
CN115862112A (zh) 一种人脸图像痤疮疗效评估用目标检测模型
CN116109572A (zh) 工件边缘微弱缺陷的检测方法、装置及电子设备
CN115565103A (zh) 一种动态目标检测方法、装置、计算机设备及存储介质
CN115937051B (zh) 一种图像噪声处理方法、装置、设备及存储介质
WO2022205606A1 (zh) 模具处理方法、装置、电子设备、系统和存储介质
JP6891984B1 (ja) 物体検出装置、物体検出方法、プログラム及び記録媒体
CN112734784A (zh) 一种高精度眼底血管边界确定的方法、装置、介质和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant