CN115439651A - 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法 - Google Patents

一种基于空间多尺度注意网络的dsa脑血管分割系统及方法 Download PDF

Info

Publication number
CN115439651A
CN115439651A CN202210991443.6A CN202210991443A CN115439651A CN 115439651 A CN115439651 A CN 115439651A CN 202210991443 A CN202210991443 A CN 202210991443A CN 115439651 A CN115439651 A CN 115439651A
Authority
CN
China
Prior art keywords
image
training
data
dsa
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210991443.6A
Other languages
English (en)
Inventor
高山
张广
崔颖
苏静静
朱佳
朱龙宇
田园
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Engineering University
Original Assignee
Harbin Engineering University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Engineering University filed Critical Harbin Engineering University
Priority to CN202210991443.6A priority Critical patent/CN115439651A/zh
Publication of CN115439651A publication Critical patent/CN115439651A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30101—Blood vessel; Artery; Vein; Vascular

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)

Abstract

本发明提出了一种基于空间多尺度注意网络的DSA脑血管分割系统及方法；获取原始的DSA图像数据；对每一帧图像标注类别，标注出血管结构和非血管结构，制作DSA脑血管数据集；对图像进行预处理，分为测试集、训练集和验证集；将训练集的数据送入空间多尺度注意力网络模型中进行训练，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；将测试集的图像分成局部图像块，通过筛选出的最好模型，测试测试集数据，并将预测结果重建，验证分割效果；本发明能够明显提高分割精度，改善分割效果。精确的血管分割结果可以辅助医生诊断血管疾病，并且多个角度下的二维血管结构可以实现血管的三维可视化建模，具有一定的实际意义。

Description

一种基于空间多尺度注意网络的DSA脑血管分割系统及方法
技术领域
本发明属于图像处理及图像分割技术领域，具体地，涉及一种基于空间多尺度注意网络的DSA脑血管分割系统及方法。
背景技术
数字减影血管造影(DSA)是临床上公认的诊断血管疾病的金标准，它可以精确显示血管异常如狭窄、阻塞或畸形等。分析脑血管的直径、弯曲度等可以得到脑血管疾病的临床病理特征。此外，多个角度下的二维血管结构可以实现血管的三维可视化建模，辅助医生在不进行解剖的情况下多角度、多形式观察和诊断病变。脑血管DSA中的自动血管分割在脑血管疾病的管理中具有重要的临床应用。最近，深度学习方法在血管分割中实现了高精度。然而，由于脑血管结构的复杂性和DSA中伪影等噪声的影响，自动分割仍然是一项具有挑战性的任务。
发明内容
本发明为了解决DSA脑血管图像中伪影的影响以及尺度变化较大的情况，并能够快速准确的分割出脑血管结构，提出了一种基于空间多尺度注意网络的DSA脑血管分割系统及方法，可以捕获多尺度特征，还增加了注意力机制和细节分支，提高血管分割的精度。
本发明通过以下技术方案实现：
一种基于空间多尺度注意网络的DSA脑血管分割方法，其特征在于：
所述方法具体包括以下步骤：
步骤一、获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
步骤二、对每一帧图像标注类别，标注出血管结构和非血管结构，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
步骤三、对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
步骤四、将训练集的数据送入空间多尺度注意力网络模型中进行训练；
步骤五、将验证集的数据送入步骤四训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
步骤六、将测试集的图像分成局部图像块，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
步骤七、通过步骤五筛选出的最好模型，测试步骤六处理的测试集数据，并将预测结果重建，验证分割效果。
进一步地，在步骤三中，由于血管与非血管结构的灰度值相似，对图像首先进行预处理；使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
进一步地，在步骤五中，Batchsize设置为16,每次训练50个epoch，设置损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
进一步地，在步骤七中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值指标的测定，并重建出完整的分割结果。
一种基于空间多尺度注意网络的DSA脑血管分割系统：
所述系统包括DSA图像获取模块、图像标注类别模块、图像预处理模块、模型训练及筛选模块、图像分割模块和最终测试模块；
所述DSA图像获取模块用于获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
所述图像标注类别模块用于对每一帧图像标注类别，标注出血管结构和非血管结构，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
所述图像预处理模块用于对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
所述模型训练及筛选模块通过空间多尺度注意力网络模型训练预处理后的训练集数据；并将验证集的数据送入训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
所述图像分割模块用于将测试集的图像分成局部图像块，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
所述最终测试模块通过筛选出的最好模型，测试处理后的测试集数据，并将预测结果重建，验证分割效果。
进一步地，在图像标注类别模块中，由于血管与非血管结构的灰度值相似，对图像首先进行预处理；所以使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
进一步地，在模型训练及筛选模块中，Batchsize设置为16,每次训练50个epoch，设置损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
进一步地，在最终测试模块中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值指标的测定，并重建出完整的分割结果。
一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
一种计算机可读存储介质，用于存储计算机指令，所述计算机指令被处理器执行时实现上述任一项所述方法的步骤。
本发明有益效果
本发明的模型在捕获多尺度血管特征的基础上，能够在大量噪声的影响下，实现了脑血管的准确分割。
为了进一步提高的提取多尺度血管的能力，本发明以分支的方式采用不同大小扩张率的深度可分离卷积，并加载空间注意块获得多尺度特征的权重信息，以此融合不同尺度的上下文信息。
除此之外，本发明在跳跃连接处增加了特征聚合模块，更好的融合编码器和解码器之间的特征。在训练时间没有显著增加的情况下，本发明的模型在图像伪影等影响下取得了令人振奋的分割效果。
本发明所述的基于空间多尺度注意网络分割模型是基于图像处理、深度学习等技术实现的，相比于其他技术，能够明显提高分割精度，改善分割效果。精确的血管分割结果可以辅助医生诊断血管疾病，并且多个角度下的二维血管结构可以实现血管的三维可视化建模，具有一定的实际意义。
除此之外，本发明模型的鲁棒性也能够得到保证，模型可以最大限度的抑制DSA伪影的影响，在时间成本可以接受的范围内即可稳定训练出一套效果可观的分割系统。
附图说明
图1为本发明基于多尺度空间注意力结构进行DSA脑血管分割的流程框图。
图2为本发明的分割模型结构示意图。
具体实施方式
下面将结合本发明实施例中的附图对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
结合图1至图2。
如图2，本发明构建了一种基于空间多尺度注意网络模型，以U-Net为基线，包括局部图像模块、编解码模块、特征聚合模块、多尺度空间注意模块、细节监督模块、联合损失和Softmax分类器；
具体而言，主干结构是一个五层的编解码结构，编解码模块中使用瓶颈块加剩余连接卷积块代替原来的两个3×3卷积，以减少计算负担和过拟合的风险；
多尺度空间注意模块以分支的方式采用不同大小扩张率的深度可分离卷积提取多尺度特征，并加载空间注意块获得多尺度特征的权重信息，以此融合不同尺度的上下文信息。
特征聚合模块采用平均池化和最大池化两个分支获得通道的全局信息，通过调整输入特征权重来增强原始特征，更好的融合编码器和解码器之间的特征。
细节监督模块是利用输入图像、主干结构中的浅层特征以及多尺度的深层特征重新引入的分支，其中的上采样注意门将深层特征重新加权后与浅层特征融合，然后通过双线性插值上采样到输入图像大小，获得输出。
最终将主干结构中的加权解码侧输出以及细节监督模块中的输出使用Softmax分类器进行分类，然后分别和真实标签通过交叉熵损失函数计算损失并相加，得到联合损失训练网络。输出为采样的局部图像块的预测概率图，最后将所有图像块重建成原图像得到分割结果。
输入的血管图像的局部块被送入网络进行预测，最终将局部块重新组合成原图像。
一种基于空间多尺度注意网络的DSA脑血管分割方法：所述方法具体包括以下步骤：
步骤一、获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
步骤二、对每一帧图像标注类别，标注出血管结构和非血管结构(背景)，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
步骤三、对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
步骤四、将训练集的数据送入空间多尺度注意力网络模型中进行训练；
步骤五、将验证集的数据送入步骤四训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
步骤六、为了使模型能够适应各种尺寸的输入图像，将测试集的图像分成局部图像块，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
步骤七、通过步骤五筛选出的最好模型，测试步骤六处理的测试集数据，并将预测结果重建，验证分割效果。
在步骤三中，由于血管与非血管结构(背景)的灰度值相似，为了更好的提取血管信息，对图像首先进行预处理；并且由于DSA图像尺寸较大，一般无法直接进行训练，所以使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
在步骤五中，为了验证所提出模型的优越性和有效性，将其与目前应用最广泛的U-Net模型，以及其他U-Net改进方法CS-Net，Attention U-Net，Ladder-Net等进行了对比实验，其中，Batchsize设置为16,每次训练50个epoch，设置了相应的早停策略防止过拟合，即损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
在步骤七中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值等指标的测定，并重建出完整的分割结果。
一种基于空间多尺度注意网络的DSA脑血管分割系统：
所述系统包括DSA图像获取模块、图像标注类别模块、图像预处理模块、模型训练及筛选模块、图像分割模块和最终测试模块；
所述DSA图像获取模块用于获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
所述图像标注类别模块用于对每一帧图像标注类别，标注出血管结构和非血管结构(背景)，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
所述图像预处理模块用于对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
所述模型训练及筛选模块通过空间多尺度注意力网络模型训练预处理后的训练集数据；并将验证集的数据送入训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
所述图像分割模块用于将测试集的图像分成局部图像块，使得模型能够适应各种尺寸的输入图像，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
所述最终测试模块通过筛选出的最好模型，测试处理后的测试集数据，并将预测结果重建，验证分割效果。
在图像标注类别模块中，由于血管与非血管结构(背景)的灰度值相似，为了更好的提取血管信息，对图像首先进行预处理；并且由于DSA图像尺寸较大，一般无法直接进行训练，所以使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
在模型训练及筛选模块中，为了验证所提出模型的优越性和有效性，将其与目前应用最广泛的U-Net模型，以及其他U-Net改进方法CS-Net，Attention U-Net，Ladder-Net等进行了对比实验，其中，Batchsize设置为16,每次训练50个epoch，设置了相应的早停策略防止过拟合，即损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
在最终测试模块中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值等指标的测定，并重建出完整的分割结果。
使用本发明的模型和其他先进模型如U-Net、LadderNet、Attention U-Net、CSNet等在公开的视网膜血管数据集CHASE以及本发明实验室制作的DSA脑血管数据集DSAC上进行对比试验。使用F1 score、accuracy、sensitivity、specificity和percision这些二元分割的量化指标衡量每种方法的分割性能，取测试集数据的平均值。
本发明首先在基准视网膜图像数据集CHASE上进行实验。本发明从训练集的20幅眼底图像中随机提取40000个大小为128×128的局部图像块。其中90％的样本作为训练集，10％的样本作为验证集。实验结果如表1：
Methods AUC PR F1 ACC SE SP Precision
U-Net 0.9858 0.8998 0.8131 0.9660 0.8163 0.9809 0.8099
Ladder-Net 0.9855 0.8970 0.8126 0.9652 0.8335 0.9783 0.7928
AttentionU-Net 0.9857 0.9000 0.8151 0.9658 0.8307 0.9793 0.8000
CS-Net 0.9858 0.8990 0.8135 0.9658 0.8221 0.9802 0.8050
DenseU-Net 0.9857 00.83.8996 0.8159 0.9658 0.8363 0.9787 0.7966
Proposed 0.9861 0.8998 0.8123 0.9665 0.8012 0.9829 0.8237
表1不同分割方法在CHASE数据集上的性能对比
由表1可以看出，本发明提出的模型在大多数指标上都达到了最优的性能，这表明本发明提出的模型对于视网膜血管分割也是有效的。
分割DSA图像时使用了新的局部图像块采样策略，一部分采用随机采取的图像块，一部分在采样时判断该图像块中是否包含血管，二者之间的最佳比例经过实验验证结果如表2：
Figure BDA0003804125460000071
Figure BDA0003804125460000081
表2不同采样策略下在DSAC数据集上的性能对比
由表2可以看出，4：6的采样策略分割性能更好。
在DSA图像的数据集中，有31幅DSA图像，其中16幅作为训练集，其余作为训练集。采用新的局部图像块采样策略，实验结果如表3：
Method AUC PR F1 ACC SE SP Precision
U-Net 0.9908 0.9267 0.8464 0.9796 0.8411 0.9895 0.8518
Ladder-Net 0.9911 0.9237 0.8307 0.9761 0.8795 0.9830 0.7870
AttentionU-Net 0.9913 0.9271 0.8470 0.9799 0.8316 0.9906 0.8631
U-Net++ 0.9887 0.9162 0.8292 0.9763 0.8629 0.9844 0.7981
CS-Net 0.9888 0.9251 0.8436 0.9788 0.8564 0.9876 0.8312
R2U-Net 0.9730 0.8004 0.7006 0.9592 0.7164 0.9765 0.6855
DenseU-Net 0.9891 0.9194 0.8381 0.9782 0.8457 0.9877 0.8307
Proposed 0.9936 0.9413 0.8632 0.9825 0.8289 0.9934 0.9004
表3实验结果
提出的模型分割后的血管边缘是平滑的，最大程度的抑制噪音干扰，同时交叉血管的边缘被增强，很好的还原了血管结构。
一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
一种计算机可读存储介质，用于存储计算机指令，所述计算机指令被处理器执行时实现上述任一项所述方法的步骤。
本申请实施例中的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(read only memory，ROM)、可编程只读存储器(programmable ROM，PROM)、可擦除可编程只读存储器(erasablePROM，EPROM)、电可擦除可编程只读存储器(electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(random access memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic RAM，DRAM)、同步动态随机存取存储器(synchronousDRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double datarate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(direct rambusRAM，DR RAM)。应注意，本发明描述的方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，高密度数字视频光盘(digital video disc，DVD))、或者半导体介质(例如，固态硬盘(solid state disc，SSD))等。
在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本申请实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。为避免重复，这里不再详细描述。
应注意，本申请实施例中的处理器可以是一种集成电路芯片，具有信号处理能力。在实现过程中，上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。
以上对本发明所提出的一种基于空间多尺度注意网络的DSA脑血管分割系统及方法，进行了详细介绍，对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于空间多尺度注意网络的DSA脑血管分割方法，其特征在于：
所述方法具体包括以下步骤：
步骤一、获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
步骤二、对每一帧图像标注类别，标注出血管结构和非血管结构，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
步骤三、对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
步骤四、将训练集的数据送入空间多尺度注意力网络模型中进行训练；
步骤五、将验证集的数据送入步骤四训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
步骤六、将测试集的图像分成局部图像块，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
步骤七、通过步骤五筛选出的最好模型，测试步骤六处理的测试集数据，并将预测结果重建，验证分割效果。
2.根据权利要求1所述方法，其特征在于：
在步骤三中，由于血管与非血管结构的灰度值相似，对图像首先进行预处理；使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
3.根据权利要求2所述方法，其特征在于：
在步骤五中，Batchsize设置为16,每次训练50个epoch，设置损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
4.根据权利要求3所述方法，其特征在于：
在步骤七中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值指标的测定，并重建出完整的分割结果。
5.一种基于空间多尺度注意网络的DSA脑血管分割系统，其特征在于：
所述系统包括DSA图像获取模块、图像标注类别模块、图像预处理模块、模型训练及筛选模块、图像分割模块和最终测试模块；
所述DSA图像获取模块用于获取原始的DSA图像数据；对采集的原始DSA图像进行处理，原始的DSA图像是图片序列，提取不同血管或者不同角度DSA图像的每一帧图像
所述图像标注类别模块用于对每一帧图像标注类别，标注出血管结构和非血管结构，制作DSA脑血管数据集；标注出的数据集即为分割模型进行类别信息提取的关键先验信息；
所述图像预处理模块用于对图像进行预处理，处理后的数据预留出测试集，其余数据作为训练图像，按照一定的比例划分为训练集和验证集；
所述模型训练及筛选模块通过空间多尺度注意力网络模型训练预处理后的训练集数据；并将验证集的数据送入训练好的模型中，调整模型训练过程的参数，通过验证集中的AUC值选择出最好的模型；
所述图像分割模块用于将测试集的图像分成局部图像块，以滑动窗口从图像的左上角开始，步距为16进行采样分割为96×96的局部图像块；
所述最终测试模块通过筛选出的最好模型，测试处理后的测试集数据，并将预测结果重建，验证分割效果。
6.根据权利要求5所述系统，其特征在于：
在图像标注类别模块中，由于血管与非血管结构的灰度值相似，对图像首先进行预处理；所以使用局部图像块的方法对数据进行扩充，将训练图像分割为128×128的局部图像块进行数据增强，其中90％训练样本，10％验证样本。
7.根据权利要求6所述系统，其特征在于：
在模型训练及筛选模块中，Batchsize设置为16,每次训练50个epoch，设置损失值10个批次不再下降，及时终止模型的训练，避免过拟合，设置学习率为0.0001，并在训练过程中使用余弦退火方法动态降低学习率。
8.根据权利要求7所述系统，其特征在于：
在最终测试模块中，使用训练好的模型在测试集上进行F1分数、准确度和AUC值指标的测定，并重建出完整的分割结果。
9.一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至4中任一项所述方法的步骤。
10.一种计算机可读存储介质，用于存储计算机指令，其特征在于，所述计算机指令被处理器执行时实现权利要求1至4中任一项所述方法的步骤。
CN202210991443.6A 2022-08-18 2022-08-18 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法 Pending CN115439651A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210991443.6A CN115439651A (zh) 2022-08-18 2022-08-18 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210991443.6A CN115439651A (zh) 2022-08-18 2022-08-18 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法

Publications (1)

Publication Number Publication Date
CN115439651A true CN115439651A (zh) 2022-12-06

Family

ID=84242736

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210991443.6A Pending CN115439651A (zh) 2022-08-18 2022-08-18 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法

Country Status (1)

Country Link
CN (1) CN115439651A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116402779A (zh) * 2023-03-31 2023-07-07 北京长木谷医疗科技有限公司 基于深度学习注意力机制的颈椎图像分割方法及装置
CN116703948A (zh) * 2023-08-03 2023-09-05 杭州脉流科技有限公司 基于深度神经网络的颅内血管树分割方法和分割装置
CN117893528A (zh) * 2024-03-13 2024-04-16 云南迪安医学检验所有限公司 一种心脑血管疾病分类模型的构建方法及装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116402779A (zh) * 2023-03-31 2023-07-07 北京长木谷医疗科技有限公司 基于深度学习注意力机制的颈椎图像分割方法及装置
CN116703948A (zh) * 2023-08-03 2023-09-05 杭州脉流科技有限公司 基于深度神经网络的颅内血管树分割方法和分割装置
CN116703948B (zh) * 2023-08-03 2023-11-14 杭州脉流科技有限公司 基于深度神经网络的颅内血管树分割方法和分割装置
CN117893528A (zh) * 2024-03-13 2024-04-16 云南迪安医学检验所有限公司 一种心脑血管疾病分类模型的构建方法及装置
CN117893528B (zh) * 2024-03-13 2024-05-17 云南迪安医学检验所有限公司 一种心脑血管疾病分类模型的构建方法及装置

Similar Documents

Publication Publication Date Title
CN109410219B (zh) 一种基于金字塔融合学习的图像分割方法、装置和计算机可读存储介质
CN115439651A (zh) 一种基于空间多尺度注意网络的dsa脑血管分割系统及方法
Pinaya et al. Unsupervised brain imaging 3D anomaly detection and segmentation with transformers
KR20200073267A (ko) 생성 적대 네트워크를 위한 트레이닝 방법, 이미지 처리 방법, 디바이스 및 저장 매체
CN114581662B (zh) 一种脑肿瘤图像的分割方法、系统、装置及存储介质
CN111429452A (zh) 基于UNet卷积神经网络的膀胱超声图像分割方法及装置
CN112862830B (zh) 一种多模态图像分割方法、系统、终端及可读存储介质
CN116097302A (zh) 用于病灶检测的利用联合训练的连接式机器学习模型
CN110738643B (zh) 脑出血的分析方法、计算机设备和存储介质
CN111784788A (zh) 一种基于深度学习的pet快速成像方法和系统
US20230386048A1 (en) Ultrasound image segmentation method and apparatus, terminal device, and storage medium
CN113539402B (zh) 多模态影像自动勾画模型迁移方法
US20220327692A1 (en) Method and apparatus for processing image
CN117422880A (zh) 改进的注意力机制与cv模型相结合的分割方法及其系统
CN114758137A (zh) 超声图像分割方法、装置及计算机可读存储介质
CN115018863A (zh) 基于深度学习的图像分割方法及装置
CN113724203B (zh) 应用于oct图像中目标特征分割的模型训练方法及装置
CN113706451A (zh) 颅内动脉瘤识别检测的方法、装置、系统和计算机可读存储介质
CN116740081A (zh) Ct图像中肺血管分割方法、装置、终端设备及介质
CN116778016A (zh) 一种mri图像重建方法、系统及介质
CN113379770B (zh) 鼻咽癌mr图像分割网络的构建方法、图像分割方法及装置
CN115359046A (zh) 一种脏器血管分割方法、装置、存储介质及电子设备
US20210272237A1 (en) Multimodal ct image super-resolution via transfer generative adversarial network
CN113177938B (zh) 基于圆形卷积核的脑胶质瘤的分割方法、装置及相关组件
CN115082405A (zh) 颅内病灶的检测模型的训练方法、检测方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination