CN106407917B - 基于动态尺度分配的视网膜血管提取方法及系统 - Google Patents
基于动态尺度分配的视网膜血管提取方法及系统 Download PDFInfo
- Publication number
- CN106407917B CN106407917B CN201610801441.0A CN201610801441A CN106407917B CN 106407917 B CN106407917 B CN 106407917B CN 201610801441 A CN201610801441 A CN 201610801441A CN 106407917 B CN106407917 B CN 106407917B
- Authority
- CN
- China
- Prior art keywords
- blood vessel
- subgraph
- retinal
- image
- vessel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 210000001210 retinal vessel Anatomy 0.000 title claims abstract description 48
- 210000004204 blood vessel Anatomy 0.000 claims abstract description 191
- 230000004256 retinal image Effects 0.000 claims abstract description 79
- 238000001914 filtration Methods 0.000 claims abstract description 66
- 230000002792 vascular Effects 0.000 claims abstract description 42
- 230000011218 segmentation Effects 0.000 claims abstract description 40
- 238000000605 extraction Methods 0.000 claims abstract description 34
- 230000002207 retinal effect Effects 0.000 claims abstract description 33
- 230000008569 process Effects 0.000 claims abstract description 32
- 239000008280 blood Substances 0.000 claims abstract description 30
- 210000004369 blood Anatomy 0.000 claims abstract description 28
- 239000000284 extract Substances 0.000 claims abstract description 17
- 230000002708 enhancing effect Effects 0.000 claims abstract description 9
- 238000012805 post-processing Methods 0.000 claims abstract description 9
- 230000004044 response Effects 0.000 claims description 22
- 239000011159 matrix material Substances 0.000 claims description 15
- 239000012528 membrane Substances 0.000 claims description 10
- 238000006243 chemical reaction Methods 0.000 claims description 9
- 210000001525 retina Anatomy 0.000 claims description 7
- 238000011221 initial treatment Methods 0.000 claims description 6
- 230000000052 comparative effect Effects 0.000 claims description 4
- 238000010276 construction Methods 0.000 claims description 3
- 239000004744 fabric Substances 0.000 claims description 2
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000012360 testing method Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 8
- 241000894007 species Species 0.000 description 8
- 238000002474 experimental method Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 210000003733 optic disk Anatomy 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 238000011282 treatment Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000006424 Flood reaction Methods 0.000 description 1
- 241001632422 Radiola linoides Species 0.000 description 1
- 208000017442 Retinal disease Diseases 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000002203 pretreatment Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/34—Smoothing or thinning of the pattern; Morphological operations; Skeletonisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/197—Matching; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/14—Vascular patterns
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- General Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了基于动态尺度分配的视网膜血管提取方法及系统;方法的步骤:视网膜图像预处理:对彩色视网膜图像的绿色通道分量进行对比度增强;图像分块:对预处理后的视网膜图像分割成设定个数的子图像;血管分类:将每个子图像中血管分为大中小三类;动态尺度分配:动态选择不同尺度的滤波器对不同宽度血管进行增强;多尺度匹配滤波;阈值处理:提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;后处理得到分割精度高的视网膜血管网络图像。本发明的有益效果:实现对视网膜图像的血管提取,并在剔除复杂非血管结构的同时,避免了对血管宽度的过分估计,实现了更简单、更准确的视网膜血管提取。
Description
技术领域
本发明涉及基于动态尺度分配的视网膜血管提取方法及系统。
背景技术
迄今为止,常用的视网膜血管自动提取算法有:
1、基于视网膜血管追踪方式的算法。这类方法可以较为完整的提取出视网膜血管的网络,但是算法复杂度较高,运算量较大。此外,对于一些对比度较低的视网膜血管图像,这类算法的提取准确度不够。其中比较典型的视网膜血管追踪算法是由Tolias在1998年提出的基于模糊C均值聚类算法,是在血管的起始处(视盘)挑选出合适的种子点,并由此对整个视网膜血管网络进行追踪。建立起视网膜血管横截面的一维模型,并通过建立起种子点与血管一维模型之间的模糊相似关系,对所有种子点进行分类,判断其是否属于血管,从而完成最终的血管网络分割提取。此类算法存在的最大弊病是种子点的选取会直接影响提取结果,而且在视盘中选取一个最合适的像素点作为种子点是一个比较繁重的工作。此外,此类算法对于血管的分支点的处理效果欠佳,并且会难以避免地丢失细小血管结构,使得分割结果不够准确。
2、基于分类器的提取算法。这类方法的主要思想是利用视网膜血管所提供的一些先验信息,构造出一个合适的分类模型,即通常意义上的分类器,并利用构造好的分类器将视网膜图像中的像素点进行映射分类。Boyce(1999)介绍了一种监督方式的视网膜血管提取算法。这种基于分类器的识别方式对噪声极为敏感,所以最终的分类效果不是很好。
3、基于匹配滤波器的提取算法,是最为经典也是使用最为广泛的一种方式。根据血管的灰度分布特征,大多数匹配滤波算法均选择高斯滤波器与视网膜图像进行匹配滤波,生成的响应具有较高的输出信噪比。其中,最早使用二维高斯匹配滤波器对视网膜血管结构进行提取的方法是Chaudhuri et al.在1989年提出的。此算法基于一个事实:视网膜血管横截面的灰度分布是服从高斯分布的。因此,若将建立好的高斯滤波器模板与视网膜血管图像进行不同方向的匹配滤波,当滤波器的尺度与血管的宽度在一定范围内相吻合时,相应宽度的血管就得以增强,产生很大的卷积响应。但是文献中仅采用了一种尺度的匹配滤波器,无法使所有宽度的血管均得以增强,并且不论是血管结构还是非血管结构均对高斯匹配滤波器有很强的响应,这样会导致错误分割像素点的出现。针对经典算法的弊端,多种多尺度匹配滤波方案相继被提出,这一改进旨在利用不同尺度的滤波器对不同宽度的血管进行增强,并在后续步骤中将其准确提取。Bob Zhang在2010年提出的基于高斯一阶导数滤波器的视网膜血管提取算法(MF-FDOG),是在Chaudhuri et al.所提出算法的基础上,结合高斯一阶导数型匹配滤波器与图像产生卷积响应的特点,使用了多尺度的匹配滤波器对所有视网膜图像像素点进行遍历分类。这种方法虽然在一定程度上克服了台阶边缘对分割结果造成的影响,但是分割结果中仍有噪声模式存在,一些被噪声淹没的细小血管也未被提取出来。此外,此方法对于血管分支点与连通性的处理也有待提高。Qin Li在2012年提出了基于多尺度滤波响应乘积(MPMF)的方法。此方法利用各尺度响应的乘积将各个宽度的血管信息在尺度域进行混合,不仅对血管进行了有效的增强且抑制了噪声,同时对分割的血管有较好的宽度估计。但本方法仍然存在一定的局限性:其使用了三个不同尺度的滤波器对视网膜血管进行提取,对于变化较大的血管宽度而言,仍存在某些不能被很好增强的血管宽度,因此难以准确地分割出所有血管;另外对于一些存在病变区域视网膜图像,还会有错误分割像素点的出现。
欲以现有方法得到更高的视网膜血管分割精度,目前难以解决的技术问题是:
1、如何利用多尺度方案使各宽度的血管尽量完整地被提取出来;
2、如何减少错误分割点以及抑制噪声;
3、如何准确地估计血管宽度。
发明内容
本发明的目的就是为了解决上述问题,提供基于动态尺度分配的视网膜血管提取方法及系统,通过对视网膜图像的预处理、图像分块、血管分类、动态尺度分配、多尺度匹配滤波、阈值分割和后处理,实现对视网膜图像的血管提取,并在剔除复杂非血管结构的同时,避免了对血管宽度的过分估计,实现了更简单、更准确的视网膜血管提取。
为了实现上述目的,本发明采用如下技术方案:
基于动态尺度分配的视网膜血管提取方法,包括如下步骤:
步骤(1):视网膜图像预处理:对彩色视网膜图像的绿色通道分量进行对比度增强;
步骤(2):图像分块:对预处理后的视网膜图像分割成设定个数的子图像;
步骤(3):血管分类:将每个子图像中血管分为大中小三类;
步骤(4):动态尺度分配:动态选择不同尺度的滤波器对不同宽度血管进行增强;
步骤(5):多尺度匹配滤波:采用多尺度方案并利用高斯匹配滤波模板和高斯一阶导数匹配滤波模板对视网膜血管图像进行滤波处理;
步骤(6):阈值处理:提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
步骤(7):后处理:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
进一步的,所述步骤(1)的步骤为:
步骤(1-1):提取彩色视网膜图像的绿色通道分量:彩色视网膜图像含有红色、绿色和蓝色三个通道,仅选择对比度高、噪声低的绿色通道作为初始处理对象;
步骤(1-2):多尺度顶帽变换:利用形状不变,尺寸等差增大的圆形结构元素,对初始处理对象进行顶帽变换处理,增强初始处理对象的对比度;
步骤(1-3):基于高斯曲线拟合的直方图线性拉伸:对经多尺度顶帽变换增强所得图像的灰度直方图进行基于高斯曲线拟合的直方图线性拉伸,得到预处理后的视网膜图像。
进一步的,所述步骤(2)的步骤为:
对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像。
进一步的,所述步骤(3)的步骤为:
根据血管宽度将血管分为大中小三类,依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断。
进一步的,步骤(3)对步骤(2)的子图像自上而下、自左向右进行编号;先根据子图像位置的不同将子图像分为三类:位于原图四个角的子图像、位于原图中央的子图像和位于原图四条边的子图像;然后针对每类子图像,根据不同宽度血管的灰度分布特征,将每个子图像的血管进行分类。
进一步的,针对每类子图像,根据不同宽度血管的灰度分布特征,将每个子图像的血管进行分类,步骤为:
(3-1)对于位于原图四个角的子图像,子图像中均仅含有中血管;
(3-2)对于位于原图中央的子图像,
判断是否存在大血管,对位于原图中央的子图像灰度直方图的第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第一设定阈值时,则代表该子图像中含有大血管,反之,不含大血管;
判断是否存在中小血管,对位于原图中央的子图像灰度直方图的第二设定灰度分布范围内的灰度分布进行高斯曲线拟合,得到高斯函数峰值和方差:
若高斯函数峰值大于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管。
(3-3)对于位于原图四条边的子图像,
判断是否存在大血管,对位于原图边缘的子图像灰度直方图的第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第四设定阈值时,则代表该子图像中含有大血管,反之,不含有大血管;
判断是否存在中小血管的标准,与(3-2)类似,但阈值设定不同,对位于原图边缘的子图像灰度直方图的第二设定灰度分布范围内的灰度分布进行高斯曲线拟合,得到高斯函数峰值和方差:
若高斯函数峰值大于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管。
所述步骤(4)的步骤为:
利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强。
进一步的,所述步骤(4)的步骤为:
步骤(4-1):提取大血管所采用的滤波器尺度参数为2;
步骤(4-2):提取中血管所采用的滤波器尺度参数为1和0.7,提取小血管所采用的滤波器尺度参数为0.5和0.2。
所述步骤(5)的步骤为:
采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器与视网膜图像的卷积响应及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应。
所述步骤(5)的高斯匹配滤波模板:
高斯型匹配滤波模板上坐标为(x,y)的一点,其权重表示如下:
其中,σ1表示高斯匹配滤波器的尺度,L代表与滤波器模板瞬时方向相平行的血管长度,m代表高斯滤波器模板中系数的均值,
式中Q表示构建的高斯滤波器模板中所包含的点数,N表示滤波器模板所在的邻域,表示高斯滤波器模板中的一个离散点。
在高斯型匹配滤波模板中减去m项,实现对视网膜图像背景的平滑处理。并且,由于视网膜血管在平面中的各个方向上均有分布,故而在匹配滤波过程中,滤波器模板需要不断的旋转以检测不同方向上的血管。
所述步骤(5)的高斯一阶导数匹配滤波模板:
高斯一阶导数匹配滤波模板上坐标为(x,y)的一点,其权重表示如下:
其中,σ2表示高斯一阶导数匹配滤波器的尺度,L代表与滤波器模板瞬时方向相平行的血管长度。
所述步骤(6)的步骤为:
利用高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应对每个像素点的分割阈值进行调整,得到整个图像的阈值矩阵;将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应进行逐点比较,提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
进一步的,所述步骤(6)的步骤为:
定义A为高斯匹配滤波器与视网膜图像的卷积响应,为高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应;
将所有子图像利用其灰度分布特征,按照血管与背景的灰度对比度的高低,以及是否含具有台阶边缘的非血管结构进行分类,对各子图像进行动态的阈值处理;
通过将整个图像的阈值矩阵和高斯匹配滤波器与视网膜图像的卷积响应逐点比较,每个像素点均与对应点的阈值进行比较,大于阈值的像素点被分类为血管,否则被分类为非血管;
最后,将各子图像的不同尺度分割结果利用逻辑“或”结合起来,将所有子图像的分割结果进行重新拼接,得到阈值处理后的视网膜血管网络二值图像。
所述将所有子图像利用其灰度分布特征,按照血管与背景的灰度对比度的高低,以及是否含具有台阶边缘的非血管结构进行分类的步骤为:
步骤(6-1):利用步骤(3)血管分类过程中得到的高斯曲线方差作为判断图像对比度高低的依据;
方差c小于设定值cth,表示子图像血管与背景的灰度对比度高,血管提取容易;
方差c大于设定值cth,表示子图像血管与背景的灰度对比度低,血管提取困难。
对低对比度子图像需进行如下处理:对第二设定灰度分布范围进行分段处理,以像素点出现频率最高的灰度值为界,分为高低两个灰度级范围。
步骤(6-2):
对图像灰度直方图第三设定灰度分布范围内像素点出现的频率和s进行统计,并设立第七设定阈值,频率大于第七设定阈值时,代表子图像中含具有台阶边缘的非血管结构。
若判断出含具有台阶边缘的非血管结构,那么接下来要对其进行定位。进一步对局部均值响应的各点进行遍历判断,当中坐标为(x,y)的某一任意点响应幅度大于bth时,认为(x,y)位置附近将会有具有台阶边缘的非血管结构像素点出现;小于bth时则认为(x,y)位置附近将会有血管像素点出现。提取步骤(3)中所判定的三种不同规格血管时,所设置的bth值也是不同的:
bth=1小血管
bth=1.1中血管
bth=1.2大血管
步骤(6-3):对各子图像的分割阈值由多阈值公式确定:
其中,Tk,j为子图像的阈值矩阵,hi,j为常系数,为高斯滤波响应A的局部均值响应,k为图像血管与背景的灰度对比度对阈值个数的影响,j为有无台阶边缘对阈值个数的影响,K(c,cth)与J(s,sth)的取值具体如下:
其中,c是高斯拟合曲线的方差,当c小于阈值cth时,表明对比度高,在整个灰度级范围内选择阈值,此时K的取值为1;反之,在对比度低的情况下,分为高低两个灰度级范围选择阈值,此时K的取值为2。s是第三设定灰度分布范围内像素点出现的频率和,如果s小于sth,则不存在台阶边缘,不需对阈值针对血管结构和非血管结构进行区分,此时J的取值为1;当s大于等于sth时,存在台阶边缘,血管结构和非血管结构要分别设置不同的阈值,此时J的取值为2。
综上所述,针对不同子图像,有以下四类阈值处理手段:
第一类:对于对比度低且存在台阶边缘的子图像,采用h11、h12、h21、h22四个阈值,其中h11针对高灰度级范围内的血管结构,h12针对高灰度级范围内的非血管结构,h21针对低灰度级范围内的血管结构,h22针对低灰度级范围内的非血管结构;
第二类:对于对比度低且不存在台阶边缘的子图像,采用h11、h21两个阈值,其中h11针对高灰度级范围内的血管结构,h21针对低灰度级范围内的血管结构;
第三类:对于对比度高且存在台阶边缘的子图像,采用h11、h12两个阈值,其中h11针对第二设定灰度分布范围内的血管结构,h12针对第二设定灰度分布范围内的非血管结构;
第四类:对比度高且不存在台阶边缘,采用h11一个阈值,h11针对整个灰度级范围内的血管结构。
整个图像的阈值矩阵为最终可以通过公式(7)得到分割后的血管网络:
其中,vess表示各像素点的最终取值。即将整幅图像的阈值矩阵与图像的高斯滤波响应A逐点比较,每个像素点均利用对应点的阈值判断一次,大于对应点阈值的像素点被分类为血管,否则被分类为非血管。
步骤(6-4):将各子图像的不同尺度分割结果利用逻辑“或”操作结合起来,再将所有子图像的分割结果进行重新拼接,得到阈值处理后的视网膜血管网络二值图像。
所述步骤(7)的步骤为:
首先,利用目标视网膜血管与噪点所在区域的几何特征差别,先删除视网膜血管网络二值图像中面积小于设定阈值P的连通域,再利用连通域外接矩形的长宽比,进一步的消除图像中残留的噪声;
其次,使用多尺度的高斯滤波器模版来对阈值分割后的血管边缘进行平滑处理;
接下来,利用DRIVE数据库中提供的掩膜图像,找到视网膜边界像素点的位置,进而消除图像中残留的视网膜边界;
最后,采用闭运算对视网膜血管网络二值图像中不连续的细小血管进行断点连接。
基于动态尺度分配的视网膜血管提取系统,包括:
视网膜图像预处理模块:对彩色视网膜图像的绿色通道分量进行对比度增强;
图像分块模块:对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像;
血管分类模块:根据血管宽度将血管分为大中小三类。并依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断。
动态尺度分配模块:利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强;
多尺度匹配滤波模块:采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器与视网膜图像的卷积响应及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应;
阈值处理模块:利用高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应对每个像素点的分割阈值进行调整,得到整个图像的阈值矩阵。将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应进行逐点比较,提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
后处理模块:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
本发明的有益效果:
1、如果只利用高斯滤波器与视网膜图像所得到的卷积响应进行阈值分割,某些非血管结构就会不可避免地被错误分割出来,致使最终的分割精度受到较大影响。因此,本发明使用两个匹配滤波模版同时作用,来减小非血管结构被错误分割的可能性。
2、匹配滤波部分是在对基于高斯一阶导数滤波器的视网膜血管提取算法(MF-FDOG)与基于多尺度滤波响应乘积的视网膜血管提取算法(MPMF)的基础上,将整个视网膜图像进行分割处理,并针对各子图像的灰度分布特征动态的为其分配不同的滤波器尺度。
3、在多尺度方面,为了避免对中小血管的种类产生错误的判断,本发明分别为提取中小血管分配了两个不同的尺度参数。本发明一共提供了五个尺度参数,分别用于对大、中、小血管进行增强,是目前多尺度方案中设置尺度数最多的算法。使用这种动态分配尺度的多尺度滤波算法,在抑制具有台阶边缘的非血管结构以及保证血管宽度的同时,使得更多被噪声淹没的细小血管得以增强,进而在后续处理中将其分割提取出来,提高了算法的性能。
4、在阈值处理方面,本发明针对各子图像对比度的不同以及是否包含台阶边缘这几种情况进行分类处理。这种根据子图像不同的灰度分布情况动态的进行阈值处理的方法,使得对比度较低区域中的一些细小血管也能被分割提取出来。
5、后处理方面,本发明在消除图像噪声以及错误分割点的基础上,较好的保留了图像的细节,使血管分割精度得到了进一步的提高。
6、本发明算法具有较低的复杂度且易于实现,对推进视网膜疾病的诊断具有重大意义。
附图说明
图1为本发明的流程图;
图2为本发明的系统架构图;
图3(a)为DRIVE数据库测试集中的第19号彩色视网膜血管图像;
图3(b)为提取出的绿色通道图像;
图3(c)为多尺度顶帽变换后的图像;
图3(d)为灰度拉伸后的图像。
图4(a)为DRIVE数据库测试集中的第07号彩色视网膜血管图像;
图4(b)和图4(c)为图像分割后的两个子图像;
图5为各子图像的编号情况;
图6(a)为位于原图四角的子图像之一;
图6(b)为位于原图四角的子图像之二;
图7(a1)为中央子图像a;
图7(a2)为中央子图像a的灰度分布直方图;
图7(b1)为中央子图像b;
图7(b2)为中央子图像b的灰度分布直方图;
图7(c1)为中央子图像c;
图7(c2)为中央子图像c的灰度分布直方图;
图7(d1)为中央子图像d;
图7(d2)为中央子图像d的灰度分布直方图;
图8为利用高斯拟合曲线的峰值a和方差c来对中小血管划分示意图;
图9(a)为DRIVE数据库测试集中的第19号彩色视网膜血管图像;
图9(b)为预处理后的图像;
图9(c)为本发明算法提取的血管网络;
图9(d)为ground truth血管网络图。
具体实施方式
下面结合附图与实施例对本发明作进一步说明。
如图1所示,基于动态尺度分配的视网膜血管提取方法,包括如下步骤:
步骤(1):图像预处理
进一步的,所述步骤(1)的步骤为:
步骤(1-1):提取彩色图像的绿色通道分量:原始彩色视网膜图像含有红色、绿色和蓝色三个通道,仅选择对比度高、噪声低的绿色通道作为初始处理对象;
步骤(1-2):多尺度顶帽变换:利用形状不变,尺寸等差增大的圆形结构元素,对初始处理对象进行多尺度顶帽变换处理,增强初始处理对象的对比度;
步骤(1-3):基于高斯曲线拟合的直方图线性拉伸:对经多尺度顶帽变换增强所得图像的灰度直方图进行基于高斯曲线拟合的直方图线性拉伸,得到预处理后的视网膜图像。
通过预处理步骤增强后的视网膜图像如图3(a)、图3(b)、图3(c)和图3(d)所示。
步骤(2):图像分块:对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像;
由于视网膜图像中血管和背景在局部范围内都比较均匀,所以将整个视网膜图像均等的分割成20个等尺寸的子图像。图4(a)、图4(b)和图4(c)为增强后的视网膜图像及其子图像。
步骤(3):根据血管宽度将血管分为大中小三类。并依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断。
将图像等分为20个无重叠的子图,并对分块自上而下、自左向右进行编号,如图5所示。根据位置的不同将20个子图像分为三类;针对血管宽度的不同,将血管分为大中小三类,并在每一个子图中分别判断其中的血管种类。
第一类:位于原图四角的子图像,编号1、4、17、20。少部分属于这一类的子图像图6(a)所示,其中含有对比度较高的血管,但属于血管的像素所占比重较小;多数子图像均如图6(b)所示,其中所包含的血管对比度极低,甚至没有血管像素,所以很难通过分析其直方图的灰度分布特征对所含血管的种类进行判断。针对数据库中所有图像进行分析,且为了权衡上述两种情况,本算法统一为其分配中等规格的尺度。
第二类:处于原图像中央的子图像,编号为6、7、10、11、14、15。
此类子图像处于原图像中央,因而其中不包含视网膜之外的黑色背景;且图中的大血管较暗,所以属于大血管的像素点应处于直方图的低灰度级范围内。
1)判断是否存在大血管。对直方图第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第一设定阈值时,则代表该子图像中含有大血管,反之,不含大血管;图7(a1)和图7(b1)分别代表了两种情况:图7(a1)低灰度级范围内存在大血管,图7(b1)低灰度级范围内不存在大血管。通过对其相应的灰度直方图图7(a2)、图7(b2)进行对比可以发现:含有大血管的子图像,在直方图第一设定灰度分布范围内像素点出现的频率明显高于不含有大血管的子图像。
2)判断是否存在中小血管。图7(c1)和图7(d1)分别代表了两种情况:图7(c1)高灰度级范围内同时存在中、小血管,图7(d1)高灰度级范围内仅存在小血管。通过对其相应的灰度直方图图7(c2)、图7(d2)进行对比可以发现:灰色背景以及中小血管的灰度分布范围基本集中在第二设定灰度分布范围之间,且其中小血管与灰色背景的灰度分布范围较为接近,甚至部分重叠。此时,对直方图高灰度级范围内的灰度分布进行高斯曲线拟合,得到的高斯函数峰值a和方差c可以作为区分中小血管的标准。若峰值大,则证明此时子图像的高灰度级范围内不仅存在灰色背景还存在小血管,使得在二者灰度分布重叠的范围内像素点出现的概率较大;若峰值小,则证明此时子图像的高灰度级范围内仅存在灰色背景;方差大时,证明在高灰度级范围内像素点在各灰度级上分布较为分散。因为中血管与小血管或灰色背景的灰度分布范围重叠较小,所以此时可以认为该子图像的高灰度级范围内存在中血管;方差小时,则认为该子图像的高灰度级范围内不存在中血管。图7(c2)和图7(d2)使上述区分标准得以验证。
根据以上方差与峰值大小不同的取值,对于子图像中是否含有中小血管的判断可以分为以下四类,如图8所示:
若高斯函数峰值大于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管。
第三类:处于原图像边缘的子图像,编号为2、3、5、8、9、12、13、16、18、19。
1)同样,判断是否存在大血管。对位于原图边缘的子图像灰度直方图的第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第四设定阈值时,则代表该子图像中含有大血管,反之,不含有大血管;但是由于这一类子图像分布在原图边缘,故而其中一定包含黑色背景,且这些黑色背景的像素点同样出现在直方图的第一设定灰度分布范围内。因此,这一类子图像用于判断大血管的阈值大于第二类子图像中用于判断大血管的阈值。
2)判断该子图像中是否包含小血管或中血管,与第二类子图像的判断标准相同。
若高斯函数峰值大于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管。
步骤(4):动态尺度分配:利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强;
所述步骤(4)的步骤为:
由于血管横截面的灰度分布呈高斯分布,故而将高斯曲线向横轴上投影,得到的投影长度就是血管的宽度,而正态曲线下[-3σ,+3σ]范围内的面积超过了99%,由此可以得出血管宽度与滤波器尺度之间的关系为:
σ=d/6
其中,d表示血管宽度,σ表示滤波器的尺度。
a、本发明的仿真实验中,提取大血管所采用的滤波器尺度参数为2。
b、由各子图像的灰度直方图可以看出,中等宽度的血管与小血管在灰度分布范围上的界限并不明显。所以在二者灰度分布重叠的范围内,很可能会对中小血管的种类产生错误的判断。如若因此为其分配不恰当的尺度参数,将导致部分宽度的血管不能被检测出来。为避免这一情况的发生,本算法分别为提取中小血管分配了两个不同的尺度参数。这样,在整个算法中一共使用了五种尺度参数。以此在减小上述影响的同时,也使得更多宽度的血管得到增强。本发明仿真实验中,为提取中血管所采用的滤波器尺度参数为1和0.7,提取小血管所采用的滤波器尺度参数为0.5和0.2。
步骤(5):多尺度匹配滤波;采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应;
本发明采用两个匹配滤波模板,高斯型匹配滤波模板上坐标为(x,y)的一点,其权重表示如下:
其中,σ1表示高斯匹配滤波器的尺度,L代表与滤波器模板瞬时方向相平行的血管长度,m代表高斯滤波器模板中系数的均值,
式中Q表示构建的高斯滤波器模板中所包含的点数,N表示滤波器模板所在的邻域,表示高斯滤波器模板中的一个离散点。
在高斯型匹配滤波模板中减去m项,可以实现对视网膜图像背景的平滑处理。并且,由于视网膜血管在平面中的各个方向上均有分布,故而在匹配滤波过程中,滤波器模板需要不断的旋转以检测不同方向上的血管。
高斯一阶导数匹配滤波模板上坐标为(x,y)的一点,其权重表示如下:
其中,σ2表示高斯一阶导数匹配滤波器的尺度,L代表与滤波器模板瞬时方向相平行的血管长度。
步骤(6):阈值处理:将所有子图像利用其灰度分布特征,按照血管与背景的灰度对比度的高低,以及是否含具有台阶边缘的非血管结构进行分类,对各子图像进行动态的阈值处理;通过将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应逐点比较,每个像素点均与对应点的阈值进行比较,大于阈值的像素点被分类为血管,否则被分类为非血管;最后,将所有子图像的分割结果进行重新拼接,得到阈值处理后的视网膜血管网络二值图像;
阈值处理部分利用图像的灰度分布直方图,对每个子图像进行动态的阈值处理。将所有子图像利用其灰度分布特征按照对比度的高低及是否含有台阶边缘进行分类。
6-1)区分高对比度图像与低对比度图像:利用步骤(3)血管分类过程中得到的高斯曲线方差作为判断图像对比度高低的依据;
方差c小于设定值cth,表示子图像血管与背景的灰度对比度高,血管提取容易;
方差c大于设定值cth,表示子图像血管与背景的灰度对比度低,血管提取困难。
对低对比度子图像需进行如下处理:对第二设定灰度分布范围进行分段处理,以像素点出现频率最高的灰度值为界,分为高低两个灰度级范围。
6-2)区分是否存在台阶边缘:
对图像灰度直方图第三设定灰度分布范围内像素点出现的频率和s进行统计,并设立第七设定阈值,频率大于第七设定阈值时,代表子图像中含具有台阶边缘的非血管结构。
若判断出含具有台阶边缘的非血管结构,那么接下来要对其进行定位。进一步对局部均值响应的各点进行遍历判断,当中坐标为(x,y)的某一任意点响应幅度大于bth时,认为(x,y)位置附近将会有具有台阶边缘的非血管结构像素点出现;小于bth时则认为(x,y)位置附近将会有血管像素点出现。提取步骤(3)中所判定的三种不同规格血管时,所设置的bth值也是不同的:
bth=1小血管
bth=1.1中血管
bth=1.2大血管
6-3)阈值选择
对各子图像的分割阈值由多阈值公式确定:
其中,Tk,j为子图像的阈值矩阵,hi,j为常系数,为高斯滤波响应A的局部均值响应,k为图像血管与背景的灰度对比度对阈值个数的影响,j为有无台阶边缘对阈值个数的影响,K(c,cth)与J(s,sth)的取值具体如下:
其中,c是高斯拟合曲线的方差,当c小于阈值cth时,表明对比度高,在整个灰度级范围内选择阈值,此时K的取值为1;反之,在对比度低的情况下,分为高低两个灰度级范围选择阈值,此时K的取值为2。s是第三设定灰度分布范围内像素点出现的频率和,如果s小于sth,则不存在台阶边缘,不需对阈值针对血管结构和非血管结构进行区分,此时J的取值为1;当s大于等于sth时,存在台阶边缘,血管结构和非血管结构要分别设置不同的阈值,此时J的取值为2。
针对以上分析,对各子图像的阈值处理主要分为下列四类情况:
第一类:对于对比度低且存在台阶边缘的子图像,采用h11、h12、h21、h22四个阈值,其中h11针对高灰度级范围内的血管结构,h12针对高灰度级范围内的非血管结构,h21针对低灰度级范围内的血管结构,h22针对低灰度级范围内的非血管结构;
第二类:对于对比度低且不存在台阶边缘的子图像,采用h11、h21两个阈值,其中h11针对高灰度级范围内的血管结构,h21针对低灰度级范围内的血管结构;
第三类:对于对比度高且存在台阶边缘的子图像,采用h11、h12两个阈值,其中h11针对第二设定灰度分布范围内的血管结构,h12针对第二设定灰度分布范围内的非血管结构;
第四类:对比度高且不存在台阶边缘,采用h11一个阈值,h11针对整个灰度级范围内的血管结构。
整个图像的阈值矩阵为最终可以通过下式得到分割后的血管网络:
其中,vess表示各像素点的最终取值。即将整幅图像的阈值矩阵与图像的高斯滤波响应A逐点比较,每个像素点均利用对应点的阈值判断一次,大于此点阈值的像素点被分类为血管,否则被分类为非血管。
最后,将各子图像的不同尺度分割结果利用逻辑“或”操作结合起来,再将20个子图像的分割结果进行重新拼接,得到阈值处理后的视网膜血管网络二值图像。
该动态阈值选择标准基于图像的灰度直方图,利用灰度直方图中体现的对比度和具有台阶边缘的非血管结构信息指导阈值的选择,与单阈值选择公式相比,既考虑了低对比度区域细小血管的提取,又考虑了对非血管结构的抑制,实验证明取得了更优的提取效果。
步骤(7):后处理:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对阈值分割后的血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
首先,利用目标视网膜血管与噪点所在区域的几何特征差别,先删除视网膜血管网络二值图像中面积小于设定阈值P的连通域,再利用连通域外接矩形的长宽比,进一步的消除图像中残留的噪声;
其次,使用多尺度的高斯滤波器模版来对血管边缘进行平滑处理;
接下来,利用DRIVE数据库中提供的掩膜图像,找到视网膜边界像素点的位置,进而消除图像中残留的视网膜边界;
最后,采用闭运算对视网膜血管网络二值图像中不连续的细小血管进行断点连接。
本发明利用公共数据库DRIVE对提出的视网膜血管分割算法进行测试。此数据库中共有40张视网膜图像,是通过眼底照相机拍摄获得的,其中每一张图像的空间分辨率均为565×584。该数据库的建立者将数据库中的40张视网膜图像均等的分成了训练集和测试集,同时在这两个集合中均提供了一位专家手动分割的结果。但是对于测试集来说,它还提供了第二位专家的手动分割结果,并且,多数的算法均是采用测试集中的图像来进行仿真实验的。
将该数据库提供的第一位专家的手动分割结果,作为衡量本发明算法性能的标准(ground truth)。为了对不同视网膜血管分割算法的性能进行比较,定义了(1)TPR,(2)FPR,(3)ACC三个指标来对算法进行定量描述。定义如下:
其中ACC为视网膜血管分割平均准确率,TN为实验结果中,被正确分割的血管像素个数;BN为实验结果中,被正确分割的视场(FOV:图像中视网膜边界内的部分)中的背景像素个数。TPR定义为正确分类血管像素点的比例,Nvp为视网膜图像视场中,目标血管像素个数。FPR定义为视场内属于非血管但被分类为血管的像素点的比例,Nuvp为视网膜图像视场中,背景像素的个数。本发明对数据库DRIVE测试集中的全部20张图像进行了分割,取各性能指标的平均值作为本算法的最终结果,并与其他算法进行了性能比较,结果如表1所示。
表1是使用本发明算法对DRIVE数据库测试集全部20张图像进行处理,所得平均性能指标与其他算法的比较结果。图9(a)-图9(d)是本发明算法的20个提取结果之一。图9(a)为DRIVE数据库测试集中的第19号彩色视网膜血管图像,图9(b)为预处理后的图像,图9(c)为本发明算法提取的血管网络,图9(d)为ground truth血管网络图。对比图9(c)和图9(d)可以看出本发明算法能够将一些细小血管提取出来,并有效地抑制了非血管结构,具有较好的血管分割性能。
表1.DRIVE数据库测试集血管提取结果(with FOV)
如图2所示,基于动态尺度分配的视网膜血管提取系统,包括:
视网膜图像预处理模块:对彩色视网膜图像的绿色通道分量进行对比度增强;
图像分块模块:对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像;
血管分类模块:根据血管宽度将血管分为大中小三类。并依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断;
动态尺度分配模块:利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强;
多尺度匹配滤波模块:采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器与视网膜图像的卷积响应及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像的局部均值响应;
阈值处理模块:利用高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应对每个像素点的分割阈值进行调整,得到整个图像的阈值矩阵。将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应进行逐点比较,提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
后处理模块:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
上述虽然结合附图对本发明的具体实施方式进行了描述,但并非对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。
Claims (7)
1.基于动态尺度分配的视网膜血管提取方法,其特征是,包括如下步骤:
步骤(1):视网膜图像预处理:对彩色视网膜图像的绿色通道分量进行对比度增强;
步骤(2):图像分块:对预处理后的视网膜图像分割成设定个数的子图像;
步骤(3):血管分类:将每个子图像中血管分为大中小三类;
步骤(4):动态尺度分配:利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强;
步骤(5):多尺度匹配滤波:采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器与视网膜图像的卷积响应及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应;
步骤(6):阈值处理:利用高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应对每个像素点的分割阈值进行调整,得到整个图像的阈值矩阵;将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应进行逐点比较,提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
步骤(7):后处理:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
2.如权利要求1所述的基于动态尺度分配的视网膜血管提取方法,其特征是,所述步骤(1)的步骤为:
步骤(1-1):提取彩色视网膜图像的绿色通道分量:彩色视网膜图像含有红色、绿色和蓝色三个通道,仅选择对比度高、噪声低的绿色通道作为初始处理对象;
步骤(1-2):多尺度顶帽变换:利用形状不变,尺寸等差增大的圆形结构元素,对初始处理对象进行顶帽变换处理,增强初始处理对象的对比度;
步骤(1-3):基于高斯曲线拟合的直方图线性拉伸:对经多尺度顶帽变换增强所得图像的灰度直方图进行基于高斯曲线拟合的直方图线性拉伸,得到预处理后的视网膜图像。
3.如权利要求1所述的基于动态尺度分配的视网膜血管提取方法,其特征是,所述步骤(2)的步骤为:
对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像。
4.如权利要求1所述的基于动态尺度分配的视网膜血管提取方法,其特征是,所述步骤(3)的步骤为:
根据血管宽度将血管分为大中小三类;并依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断;
进一步的,步骤(3)对步骤(2)的子图像自上而下、自左向右进行编号;先根据子图像位置的不同将子图像分为三类:位于原图四个角的子图像、位于原图中央的子图像和位于原图四条边的子图像;然后针对每类子图像,根据不同宽度血管的灰度分布特征,将每个子图像的血管进行分类。
5.如权利要求4所述的基于动态尺度分配的视网膜血管提取方法,其特征是,针对每类子图像,根据不同宽度血管的灰度分布特征,将每个子图像的血管进行分类,步骤为:
(3-1)对于位于原图四个角的子图像,子图像中均仅含有中血管;
(3-2)对于位于原图中央的子图像,
判断是否存在大血管,对位于原图中央的子图像灰度直方图的第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第一设定阈值时,则代表该子图像中含有大血管,反之,不含大血管;
判断是否存在中小血管,对位于原图中央的子图像灰度直方图的第二设定灰度分布范围内的灰度分布进行高斯曲线拟合,得到高斯函数峰值和方差:
若高斯函数峰值大于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第二设定阈值且方差小于第三设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第二设定阈值且方差大于第三设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管;
(3-3)对于位于原图四条边的子图像,
判断是否存在大血管,对位于原图边缘的子图像灰度直方图的第一设定灰度分布范围内像素点出现的频率进行统计,当统计值大于第四设定阈值时,则代表该子图像中含有大血管,反之,不含有大血管;
判断是否存在中小血管的标准,与(3-2)类似,但阈值设定不同,对位于原图边缘的子图像灰度直方图的第二设定灰度分布范围内的灰度分布进行高斯曲线拟合,得到高斯函数峰值和方差:
若高斯函数峰值大于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内有小血管但无中血管;
若高斯函数峰值小于第五设定阈值且方差小于第六设定阈值,则子图像第二设定灰度分布范围内既无小血管又无中血管;
若高斯函数峰值大于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内既有小血管又有中血管;
若高斯函数峰值小于第五设定阈值且方差大于第六设定阈值,则子图像第二设定灰度分布范围内无小血管但有中血管。
6.如权利要求1所述的基于动态尺度分配的视网膜血管提取方法,其特征是,所述步骤(7)的步骤为:
首先,利用目标视网膜血管与噪点所在区域的几何特征差别,先删除视网膜血管网络二值图像中面积小于设定阈值P的连通域,再利用连通域外接矩形的长宽比,进一步的消除图像中残留的噪声;
其次,使用多尺度的高斯滤波器模版来对阈值分割后的血管边缘进行平滑处理;
接下来,利用DRIVE数据库中提供的掩膜图像,找到视网膜边界像素点的位置,进而消除图像中残留的视网膜边界;
最后,采用闭运算对视网膜血管网络二值图像中不连续的细小血管进行断点连接。
7.基于动态尺度分配的视网膜血管提取系统,其特征是,包括:
视网膜图像预处理模块:对彩色视网膜图像的绿色通道分量进行对比度增强;
图像分块模块:对预处理后的视网膜图像按照尺寸进行均等分块,分割成设定个数的子图像;
血管分类模块:根据血管宽度将血管分为大中小三类;并依照不同宽度血管的灰度分布特征,对子图像包含的血管种类进行判断;
动态尺度分配模块:利用滤波器尺度与血管宽度之间的关系,动态选择不同尺度的滤波器对不同宽度血管进行增强;
多尺度匹配滤波模块:采用高斯匹配滤波模板和高斯一阶导数匹配滤波模板同时对增强后的视网膜图像进行匹配滤波,分别得到高斯匹配滤波器与视网膜图像的卷积响应及高斯一阶导数匹配滤波器与视网膜图像的卷积响应;并进一步计算得到高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应;
阈值处理模块:利用高斯一阶导数匹配滤波器与视网膜图像卷积响应的局部均值响应对每个像素点的分割阈值进行调整,得到整个图像的阈值矩阵;将整个图像的阈值矩阵与高斯匹配滤波器和视网膜图像的卷积响应进行逐点比较,提取出血管结构并剔除非血管结构,将所有子图像的提取结果进行重新拼接,得到视网膜血管网络二值图像;
后处理模块:对阈值处理后的视网膜血管网络二值图像进一步消除噪声,对血管边缘进行平滑处理,消除图像中残留的视网膜边界,对不连续的细小血管进行断点连接,从而保留图像细节,得到分割精度高的视网膜血管网络图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610801441.0A CN106407917B (zh) | 2016-09-05 | 2016-09-05 | 基于动态尺度分配的视网膜血管提取方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610801441.0A CN106407917B (zh) | 2016-09-05 | 2016-09-05 | 基于动态尺度分配的视网膜血管提取方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106407917A CN106407917A (zh) | 2017-02-15 |
CN106407917B true CN106407917B (zh) | 2017-07-25 |
Family
ID=57999704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610801441.0A Active CN106407917B (zh) | 2016-09-05 | 2016-09-05 | 基于动态尺度分配的视网膜血管提取方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106407917B (zh) |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107133932B (zh) * | 2017-05-04 | 2021-05-04 | 季鑫 | 视网膜图像预处理方法、装置和计算设备 |
CN110914835B (zh) * | 2017-07-28 | 2024-04-19 | 新加坡国立大学 | 修改用于深度学习模型的视网膜眼底图像的方法 |
BR112020014201A2 (pt) * | 2018-01-10 | 2020-12-01 | Institut de Recherche sur les Cancers de l'Appareil Digestif - IRCAD | sistema e método de segmentação automática de uma imagem médica 3d por uma ou várias redes neurais através de convolução estruturada de acordo com a geometria anatômica da imagem médica 3d |
CN108986124A (zh) * | 2018-06-20 | 2018-12-11 | 天津大学 | 结合多尺度特征卷积神经网络视网膜血管图像分割方法 |
CN109309853A (zh) * | 2018-08-13 | 2019-02-05 | 潘小亮 | 无线信号强度分析系统 |
CN109034110A (zh) * | 2018-08-17 | 2018-12-18 | 潘小亮 | 枪战片计算机分类方法 |
CN109325944A (zh) * | 2018-09-13 | 2019-02-12 | 福建农林大学 | 一种基于支持度变换和线检测算子的视网膜血管分割方法 |
CN109447964A (zh) * | 2018-10-23 | 2019-03-08 | 上海鹰瞳医疗科技有限公司 | 眼底图像处理方法及设备 |
CN109635862B (zh) * | 2018-12-05 | 2021-08-24 | 合肥奥比斯科技有限公司 | 早产儿视网膜病plus病变分类方法 |
CN110136140A (zh) * | 2019-04-16 | 2019-08-16 | 上海鹰瞳医疗科技有限公司 | 眼底图像血管影像分割方法及设备 |
CN110414423A (zh) * | 2019-07-25 | 2019-11-05 | 上海鹰瞳医疗科技有限公司 | 身份识别方法及设备 |
CN110599417A (zh) * | 2019-09-04 | 2019-12-20 | 中国人民解放军63677部队 | 一种基于Hessian矩阵的视网膜图像血管提取方法 |
CN110448267B (zh) * | 2019-09-06 | 2021-05-25 | 重庆贝奥新视野医疗设备有限公司 | 一种多模眼底动态成像分析系统及其方法 |
CN111127373B (zh) * | 2019-12-31 | 2023-08-08 | 佛山科学技术学院 | 一种基于局部截面分析的血管图像提取方法及装置 |
CN112016421A (zh) * | 2020-08-20 | 2020-12-01 | 上海志唐健康科技有限公司 | 一种基于三角匹配的快速视网膜身份识别方法 |
CN112075922A (zh) * | 2020-10-14 | 2020-12-15 | 中国人民解放军空军军医大学 | 2型糖尿病眼底图像指标的测量及与糖尿病肾病相关性的分析方法 |
CN112329677B (zh) * | 2020-11-12 | 2024-02-02 | 北京环境特性研究所 | 基于特征融合的遥感图像河道目标检测方法和装置 |
CN112734828B (zh) * | 2021-01-28 | 2023-02-24 | 依未科技(北京)有限公司 | 一种眼底血管中心线确定的方法、装置、介质和设备 |
CN113344842A (zh) * | 2021-03-24 | 2021-09-03 | 同济大学 | 一种超声图像的血管标注方法 |
CN115409765B (zh) * | 2021-05-28 | 2024-01-09 | 南京博视医疗科技有限公司 | 一种基于眼底视网膜图像的血管提取方法及装置 |
CN113269756B (zh) * | 2021-05-28 | 2024-02-27 | 长春大学 | 基于多尺度匹配滤波与粒子群优化视网膜血管分割方法、装置 |
CN113989246B (zh) * | 2021-10-29 | 2023-01-24 | 南开大学 | 一种基于血液流动特性的透明型血管图像分割方法 |
CN113989170B (zh) * | 2021-10-29 | 2023-01-24 | 南开大学 | 一种基于血液流动特性的透明型血管类型识别方法 |
CN114445445B (zh) * | 2022-04-08 | 2022-07-01 | 广东欧谱曼迪科技有限公司 | Ct图像的动脉分割方法、装置、电子设备及存储介质 |
CN116051566B (zh) * | 2023-04-03 | 2023-06-23 | 华南师范大学 | 一种用于ct增强图像的血管自动分割方法 |
CN116740062B (zh) * | 2023-08-14 | 2023-10-27 | 菲特(天津)检测技术有限公司 | 基于不规则胶圈的缺陷检测方法及系统 |
CN118135262A (zh) * | 2024-05-08 | 2024-06-04 | 中博瑞康(成都)生物科技有限公司 | 图像分析方法和电子设备 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104537669A (zh) * | 2014-12-31 | 2015-04-22 | 浙江大学 | 眼底图像的动静脉视网膜血管分割方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014125492A1 (en) * | 2013-02-13 | 2014-08-21 | Uzi Rahum | Device, system and method for blood vessel imaging and marking |
-
2016
- 2016-09-05 CN CN201610801441.0A patent/CN106407917B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104537669A (zh) * | 2014-12-31 | 2015-04-22 | 浙江大学 | 眼底图像的动静脉视网膜血管分割方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106407917A (zh) | 2017-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106407917B (zh) | 基于动态尺度分配的视网膜血管提取方法及系统 | |
CN104598908B (zh) | 一种农作物叶部病害识别方法 | |
CN107103298B (zh) | 基于图像处理的引体向上计数系统及计数方法 | |
CN104123543B (zh) | 一种基于人脸识别的眼球运动识别方法 | |
EP1229493B1 (en) | Multi-mode digital image processing method for detecting eyes | |
CN109785316A (zh) | 一种芯片表观缺陷检测方法 | |
CN104680524B (zh) | 一种叶类蔬菜病害诊断方法 | |
CN108121985A (zh) | 一种基于机器视觉的双指针仪表读数方法 | |
CN107220624A (zh) | 一种基于Adaboost算法的人脸检测方法 | |
CN107330892A (zh) | 一种基于随机森林法的向日葵病害识别方法 | |
US20110081081A1 (en) | Method for recognizing objects in images | |
CN104794721B (zh) | 一种基于多尺度斑点检测的快速视盘定位方法 | |
CN103942539B (zh) | 一种人头部椭圆精确高效提取及遮蔽人脸检测方法 | |
CN103035013A (zh) | 一种基于多特征融合的精确运动阴影检测方法 | |
CN104809433B (zh) | 一种基于最大稳定区域和随机采样的斑马线检测方法 | |
CN108185984A (zh) | 眼底彩照进行眼底病灶识别的方法 | |
CN106780465A (zh) | 基于梯度向量分析的视网膜图像微动脉瘤自动检测与识别方法 | |
CN104680545B (zh) | 光学图像中存在显著目标的检测方法 | |
CN105205804A (zh) | 血细胞图像中白细胞的核浆分离方法、分类方法及装置 | |
CN107644418A (zh) | 基于卷积神经网络的视盘检测方法及系统 | |
CN105205437B (zh) | 基于头部轮廓验证的侧脸检测方法及装置 | |
CN106203237A (zh) | 集装箱拖车编号的识别方法和装置 | |
CN104000593B (zh) | 一种测试皮肤的方法 | |
CN105095907B (zh) | 一种基于rbf神经网络的棉花异质纤维鉴别方法 | |
CN106446925A (zh) | 一种基于图像处理的海豚身份识别的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |