CN116739890A - 对生成健康血管图像的生成模型进行训练的方法及设备 - Google Patents
对生成健康血管图像的生成模型进行训练的方法及设备 Download PDFInfo
- Publication number
- CN116739890A CN116739890A CN202310761576.9A CN202310761576A CN116739890A CN 116739890 A CN116739890 A CN 116739890A CN 202310761576 A CN202310761576 A CN 202310761576A CN 116739890 A CN116739890 A CN 116739890A
- Authority
- CN
- China
- Prior art keywords
- blood vessel
- vessel image
- healthy
- image
- noise
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 210000004204 blood vessel Anatomy 0.000 title claims abstract description 177
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000012549 training Methods 0.000 title claims abstract description 29
- 206010002329 Aneurysm Diseases 0.000 claims abstract description 105
- 238000009826 distribution Methods 0.000 claims abstract description 25
- 210000001367 artery Anatomy 0.000 claims abstract description 19
- 238000000605 extraction Methods 0.000 claims abstract description 16
- 230000008569 process Effects 0.000 claims abstract description 7
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000036541 health Effects 0.000 claims description 5
- 230000008859 change Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 6
- 238000002595 magnetic resonance imaging Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 238000003709 image segmentation Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 238000002372 labelling Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 230000002792 vascular Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000002583 angiography Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000002790 cross-validation Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Landscapes
- Magnetic Resonance Imaging Apparatus (AREA)
Abstract
本申请公开了一种对生成健康血管图像的生成模型进行训练的方法及设备。所述方法包括:获取动脉瘤血管图像和健康动脉血管图像,并分别对其进行标注获得对应的标签信息;在所述动脉瘤血管图像和所述健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据;以及将所述增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练。利用本申请的方案,可以辅助分析更准确的动脉瘤的成因以及变化过程。
Description
技术领域
本申请一般涉及人工智能技术领域。更具体地,本申请涉及一种对生成健康血管图像的生成模型进行训练的方法、设备和计算机存储介质。进一步地,本申请还涉及一种生成健康血管图像的方法、设备和计算机存储介质。
背景技术
动脉瘤的确诊通常需要进行血管造影检查,包括例如数字减影血管造影(DigitalSubtraction Angiography,“DSA”)检查、电子计算机断层扫描(Computed Tomography,“CT”)血管成像以及磁共振成像(Magnetic Resonance Imaging,“MRI”)血管成像等。然而,不管是早期筛查,还是患者已经出现症状后确诊动脉瘤,此时血管的整体形态已经发生了变化,从而难以获取患者在健康状态下的血管影像。
目前,通常是由医生采用图像处理软件对动脉瘤血管影像中的动脉瘤进行去除,再结合人为修复,获得去除动脉瘤的血管。这对医生的专业性要求高,需要对动脉瘤的瘤颈,正常血管形态有深刻的认识,不仅操作费时费力,主观性也较强。此外,也有通过相关的技术(例如图像分割)来从动脉瘤血管影像中分割出动脉瘤,再去除动脉瘤,并将留下的血管作为健康血管。这种方式获得的血管在动脉瘤的瘤颈部分往往不平滑,无法恢复健康血管的形态,从而难以准确的分析动脉瘤的成因以及变化过程。
有鉴于此,亟需提供一种对生成健康血管图像的生成模型进行训练的方案,以便基于训练完成的生成模型生成健康的血管图像,以辅助分析更准确的动脉瘤的成因以及变化过程。
发明内容
为了至少解决如上所提到的一个或多个技术问题,本申请在多个方面中提出了对生成健康血管图像的生成模型进行训练的方案。
在第一方面中,本申请提供一种对生成健康血管图像的生成模型进行训练的方法,包括:获取动脉瘤血管图像和健康动脉血管图像,并分别对其进行标注获得对应的标签信息;在所述动脉瘤血管图像和所述健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据;以及将所述增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练。
在一个实施例中,所述方法还包括:对所述动脉瘤血管图像和所述健康动脉血管图像进行格式转换、尺寸变换或者数据增强中的一种或者多种操作,以对所述动脉瘤血管图像和所述健康动脉血管图像进行预处理。
在另一个实施例中,其中在所述动脉瘤血管图像和所述健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据包括:在所述动脉瘤血管图像和所述健康动脉血管图像中增加任意一个噪声分布,以获得一个增加噪声后的图像数据;或者基于预定信噪比,在所述动脉瘤血管图像和所述健康动脉血管图像中增加多个噪声分布,以获得多个增加噪声后的图像数据。
在又一个实施例中,其中将所述增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练包括:将所述一个增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成所述目标血管图像,以对生成健康血管图像的生成模型进行训练;或者将所述多个增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成所述目标血管图像,以对生成健康血管图像的生成模型进行训练。
在又一个实施例中,其中所述动脉瘤血管图像和所述健康动脉血管图像包括DSA血管图像、CT血管图像或者MRI血管图像。
在又一个实施例中,其中所述生成模型包括Unet模型、FPN模型或者PSPNet模型。
在第二方面中,本申请提供一种对生成健康血管图像的生成模型进行训练的设备,包括:处理器;以及存储器,其存储有对生成健康血管图像的生成模型进行训练的程序指令,当所述程序执行由处理器执行时,使得实现前述第一方面中的多个实施例。
在第三方面中,本申请提供一种生成健康血管图像的方法,包括:获取用于待生成健康血管图像的动脉瘤血管图像;将所述动脉瘤血管图像输入至根据前述第一方面中的多个实施例训练完成的生成模型中进行图像生成操作,以生成健康血管图像。
在一个实施例中,其中生成健康血管图像包括:基于所述动脉瘤血管图像,使用训练完成的生成模型生成一个目标噪声图像;以及基于所述一个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像。
在另一个实施例中,其中生成健康血管图像还包括:基于所述动脉瘤血管图像和预定生成步数,使用训练完成的生成模型生成多个目标噪声图像;以及基于所述多个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像。
在又一个实施例中,其中基于所述多个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像包括:基于所述多个目标噪声图像,使用所述训练完成的生成模型按照连续步数进行图像生成操作,以生成所述健康血管图像;或者基于所述多个目标噪声图像,使用所述训练完成的生成模型按照预定间隔步数进行图像生成操作,以生成所述健康血管图像。
在又一个实施例中,所述方法还包括:对每个所述目标噪声图像在动脉瘤标签和健康标签下的样本设置比例系数,以生成所述健康血管图像。
在第四方面中,本申请提供一种生成健康血管图像的设备,包括:处理器;以及存储器,其存储有生成健康血管图像的程序指令,当所述程序执行由处理器执行时,使得实现前述第三方面中的多个实施例。
在第五方面中,本申请提供计算机可读存储介质,其上存储有对生成健康血管图像的生成模型进行训练的和生成健康血管图像的计算机可读指令,该计算机可读指令被一个或多个处理器执行时,实现前述第一方面中的多个实施例以及前述第三方面中的多个实施例。
通过如上所提供的对生成健康血管图像的生成模型进行训练的方案,本申请实施例通过以标注的健康血管图像和动脉瘤血管图像,并且对其增加噪声后的图像数据作为训练数据,通过深度学习从噪声中生成图像,以对生成模型进行训练。基于训练完成的生成模型,可以高效且准确地生成健康血管图像,以便后续基于生成的健康血管图像进行分析,获得更准确的动脉瘤的成因以及变化过程。
附图说明
通过参考附图阅读下文的详细描述,本申请示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本申请的若干实施方式,并且相同或对应的标号表示相同或对应的部分,其中:
图1是示出现有的去除动脉瘤的示例性示意图;
图2是示出根据本申请实施例的对生成健康血管图像的生成模型进行训练的方法的示例性流程框图;
图3是示出根据本申请实施例的增加噪声分布的示例性示意图;
图4是示出根据本申请实施例的生成健康血管图像的方法的示例性流程框图;
图5是示出根据本申请实施例的基于一个目标噪声图像生成健康血管图像的示例性示意图;
图6是示出根据本申请实施例的基于多个目标噪声图像生成健康血管图像的一个示例性示意图;
图7是示出根据本申请实施例的基于多个目标噪声图像生成健康血管图像的又一示例性示意图;以及
图8是示出根据本申请实施例的对生成健康血管图像的生成模型进行训练的以及生成健康血管图像的设备的示例性结构框图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清楚和完整地描述。应当理解的是本说明书所描述的实施例仅是本申请为了便于对方案的清晰理解和符合法律的要求而提供的部分实施例,而并非可以实现本申请的所有实施例。基于本说明书公开的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1是示出现有的去除动脉瘤的示例性示意图。如图1的(a)图所示为动脉瘤血管图像,其中(a)图中的箭头所指处为动脉瘤。图1的(b)图所示为去除动脉瘤的血管图像。如上述背景技术描述可知,现有的对动脉瘤的成因以及变化过程的分析往往是基于去除动脉瘤的血管。通常,由医生通过人工去除动脉瘤并且进行血管修复或者采用例如图像分割技术分割出动脉瘤并去除动脉瘤,以获得去除动脉瘤的血管。然而,通过人工去除动脉瘤的方式费时费力且主观性较强,通过图像分割技术的方式无法恢复健康血管的形态。
基于此,本申请提出一种对生成健康血管图像的生成模型进行训练以及生成健康血管图像的方案,能够高效且准确地生成健康血管图像,以辅助分析更准确的动脉瘤的成因以及变化过程。
下面将结合附图详细描述本申请的方案。
图2是示出根据本申请实施例的对生成健康血管图像的生成模型进行训练的方法200的示例性流程框图。如图2中所示,在步骤201处,获取动脉瘤血管图像和健康动脉血管图像,并分别对其进行标注获得对应的标签信息。在一个实施例中,前述动脉瘤血管图像和前述健康动脉血管图像可以包括但不仅限于是DSA血管图像、CT血管图像或者MRI血管图像,并且该动脉瘤血管图像和健康动脉血管图像无需是同一个患者(也即配对)的血管图像。基于获取的动脉瘤血管图像和健康动脉血管图像,分别对其进行标注,例如标注有动脉瘤或者无动脉瘤,以形成对应的标签信息。
在一个实施场景中,基于获取的动脉瘤血管图像和健康动脉血管图像,还可以对动脉瘤血管图像和健康动脉血管图像进行例如格式转换、尺寸变换或者数据增强中的一种或者多种操作,以对动脉瘤血管图像和健康动脉血管图像进行预处理,使得前述图像具有统一的格式,从而便于神经网络处理。
接着,在步骤202处,在动脉瘤血管图像和健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据。在一个实施例中,可以在动脉瘤血管图像和健康动脉血管图像中增加任意一个噪声分布,以获得一个增加噪声后的图像数据;或者可以基于预定信噪比,在动脉瘤血管图像和健康动脉血管图像中增加多个噪声分布,以获得多个增加噪声后的图像数据。在一个实现场景中,前述噪声可以例如是高斯(“Gaussian”)噪声,通过在动脉瘤血管图像和健康动脉血管图像中增加噪声分布后,后续在生成模型的训练中可以将图像由图像空间映射至高斯空间,再由高斯空间映射回图像空间,使得训练完成的生成模型能够生成健康血管图像。在本申请实施例中,可以只增加一个噪声分布,也可以根据预定信噪比设置多个噪声分布,也即本申请实施例可以将一个增加噪声后的图像数据映射至一个高斯空间或者可以将多个增加噪声后的图像数据映射至多个高斯空间。
对于根据预定信噪比设置多个噪声分布而言,在一个示例性场景中,假设图像空间的信噪比为1(即无噪声,其用S0表示),Gaussian空间的信噪比为0(即纯噪声,其用Sn表示),中间依次设计信噪比为s1,s2,...,sn-1所对应的高斯空间可以用S1,S2,...,Sn-1表示,其中1>s1>s2>...>sn-1>0。
进一步地,在步骤203处,将增加噪声后的图像数据和标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练。在一个实施例中,可以将一个增加噪声后的图像数据和标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练;或者可以将多个增加噪声后的图像数据和标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练。
具体地,将增加噪声后的图像数据和标签信息(例如有动脉瘤和无动脉瘤)作为生成模型的输入,目标血管图像作为生成模型的预期输出来训练生成模型,使得生成模型在前述标签信息的引导下,能够由一个高斯空间或者多个高斯空间(例如S0,S1,S2,...,Sn-1,Sn)中的特征映射回图像空间,以获得动脉瘤血管图像或者健康血管图像。在一个实施场景中,前述生成模型可以包括但不仅限于是Unet模型、FPN模型或者PSPNet模型。
结合上述描述可知,本申请实施例通过对健康血管图像和动脉瘤血管图像进行标注形成标签信息,并对其增加一个或者多个噪声分布,获得一个或者多个增加噪声的图像数据。接着,将增加噪声的图像数据和标签信息输入至生成模型进行训练,使得生成模型具有由高斯空间映射回图像空间的能力,以便后续用于生成健康血管图像。
图3是示出根据本申请实施例的增加噪声分布的示例性示意图。如图3的(a)图和(b)图中最左侧示所示的矩形框表示动脉瘤血管图像(或者健康血管图像)301,(a)图所示为在动脉瘤血管图像中增加一个噪声分布(例如Xn,图中所示的圆点或者圆圈表示噪声)的示意图,其对应获得一个增加噪声后的图像数据301-1。(b)图所示为在动脉瘤血管图像中增加多个噪声分布S0,S1,...,Sn-1,Sn的示意图,如前所述,前述多个噪声分布S0,S1,S2,...,Sn-1,Sn可以根据预定信噪比0,s1,s2,...,sn-1,1进行设置。在该场景下,通过增加多个噪声分布S0,S1,S2,...,Sn-1,Sn后对应获得多个增加噪声后的图像数据301-2。
基于一个或者多个增加噪声后的图像数据,通过对其进行特征提取生成目标血管图像,使得生成模型能够由高斯空间映射回图像空间(例如图3的(a)图和(b)图中的箭头A所示),以对生成健康血管图像的生成模型进行训练,以便后续基于训练完成的生成模型生成健康血管图像。
图4是示出根据本申请实施例的生成健康血管图像的方法400的示例性流程框图。如图4中所示,在步骤401处,获取用于待生成健康血管图像的动脉瘤血管图像。在一个实施例中,该动脉瘤血管图像可以包括但不仅限于是DSA血管图像、CT血管图像或者MRI血管图像。在获得动脉瘤血管图像后,在步骤402处,将动脉瘤血管图像输入至训练完成的生成模型中进行图像生成操作,以生成健康血管图像。在一个实施例中,该生成模型可以包括但不仅限于是Unet模型、FPN模型或者PSPNet模型。
在一个实施例中,可以基于动脉瘤血管图像,使用训练完成的生成模型生成一个目标噪声图像,以基于一个目标噪声图像,使用训练完成的生成模型进行图像生成操作,以生成健康血管图像。在另一个实施例中,还可以基于动脉瘤血管图像和预定生成步数,使用训练完成的生成模型生成多个目标噪声图像,进而基于多个目标噪声图像,使用训练完成的生成模型进行图像生成操作,以生成健康血管图像。其中,对于生成多个目标噪声图像而言,可以基于多个目标噪声图像,使用训练完成的生成模型按照连续步数进行图像生成操作,以生成健康血管图像;或者,基于多个目标噪声图像,使用训练完成的生成模型按照预定间隔步数进行图像生成操作,以生成健康血管图像。下面将结合附图5-图7详细描述前述生成健康血管的操作。
图5是示出根据本申请实施例的基于一个目标噪声图像生成健康血管图像的示例性示意图。如图5中左侧所示为待生成健康血管图像的动脉瘤血管图像501,通过将该待生成健康血管图像的动脉瘤血管图像501输入至训练完成的生成模型中进行特征提取,可以获得一个目标噪声图像502。接着,基于该目标噪声图像502,经由训练完成的生成模型将目标噪声图像502映射回图像空间,生成健康血管图像503。在该过程中,动脉瘤血管图像501可以包含标签信息(例如有动脉瘤),在将目标噪声图像502映射回图像空间时,前述标签信息被修改为无动脉瘤标签,从而生成健康血管图像503。
图6是示出根据本申请实施例的基于多个目标噪声图像生成健康血管图像的一个示例性示意图。如图6中左侧所示为待生成健康血管图像的动脉瘤血管图像601,通过将该待生成健康血管图像的动脉瘤血管图像601输入至训练完成的生成模型中进行特征提取,可以获得多个目标噪声图像602,其各自对应的噪声分布为S0,S1,S2,...,Sn-1,Sn。接着,基于多个目标噪声图像602,可以使用训练完成的生成模型按照连续步数(即一步步)进行图像生成操作,例如由Sn->Sn-1,Sn-1->Sn-2,...,S1->S0,以生成健康血管图像603。
图7是示出根据本申请实施例的基于多个目标噪声图像生成健康血管图像的又一示例性示意图。如图7中左侧所示为待生成健康血管图像的动脉瘤血管图像601,通过将该待生成健康血管图像的动脉瘤血管图像601输入至训练完成的生成模型中进行特征提取,可以获得多个目标噪声图像602,其各自对应的噪声分布为S0,S1,S2,...,Sn-1,Sn。接着,基于多个目标噪声图像602,可以使用训练完成的生成模型按照预定间隔步数(例如间隔两步、五步等)进行图像生成操作,例如由Sn->Sn-2,Sn-2->Sn-4,...,S2->S0,以生成健康血管图像603。
需要理解的是,在生成上述获得多个目标噪声图像602中,也可以按照连续步数(例如由S0->S1,S1->S2,...,Sn-1->Sn)生成多个目标噪声图像602;或者按照预定间隔步数(例如由S0->S2,S2->S4,...,Sn-2->Sn)生成多个目标噪声图像602。
在一个实施例中,本申请实施例还可以对每个目标噪声图像在动脉瘤标签和健康标签下的样本设置比例系数,以生成健康血管图像。例如,在由高斯空间映射回图像空间的过程中,即在由Sn->Sn-1,Sn-1->Sn-2,...,S1->S0的每一步中,可以通过计算标注有动脉瘤的情况下的样本量,将其记为xn-1_aneurysm,并计算标注无动脉瘤的情况下的样本量,将其记为xn-1_healthy。在该场景下,通过设定一个比例系数k,xn-1=xn-1_aneurysm+(xn-1_healthy-xn-1_aneurysm)*k。其中,k越小(例如0<k<1),表示生成的健康血管图像对动脉瘤的区域的修正程度越小,对非动脉瘤的区域的改变也越小,从而使得生成的健康血管图像能够保存更多与非动脉瘤相关的原图血管特征。k越大(例如k>1),表示生成的健康血管图像对动脉瘤的区域的修正程度越大,使得生成的健康血管图像更接近真实健康血管图像(即生成的健康血管图像质量更好)。
然而,当k越大时,生成的健康血管图像对非动脉瘤的区域的改变也越大,使得生成的健康血管图像可能会偏离原血管特征过大,从而导致生成的健康血管图像不真实。在该场景下,可以通过将生成的健康血管图像与非动脉瘤相关的原图血管图像进行图像融合,或者对生成的健康血管图像采用超分辨率的方式,以提升生成的健康血管图像的质量。在一些实施场景中,还可以通过例如交叉验证的方式来确定k的最优值,使得生成的健康血管图像更接近真实健康血管图像。
图8是示出根据本申请实施例的对生成健康血管图像的生成模型进行训练的以及生成健康血管图像的设备800的示例性结构框图。
如图8中所示,本申请的设备可以包括中央处理器或中央处理单元(“CPU”)811,其可以是通用CPU、专用CPU或者其他信息处理以及程序运行的执行单元。进一步,设备800还可以包括大容量存储器812和只读存储器(“ROM”)813,其中大容量存储器812可以配置用于存储各类数据,包括各种动脉瘤血管图像和健康动脉血管图像、增加噪声后的图像数据、算法数据、中间结果和运行设备800所需要的各种程序。ROM 813可以配置成存储对于设备800的加电自检、系统中各功能模块的初始化、系统的基本输入/输出的驱动程序及引导操作系统所需的数据和指令。
可选地,设备800还可以包括其他的硬件平台或组件,例如示出的张量处理单元(“TPU”)814、图形处理单元(“GPU”)815、现场可编程门阵列(“FPGA”)816和机器学习单元(“MLU”)817。可以理解的是,尽管在设备800中示出了多种硬件平台或组件,但这里仅仅是示例性的而非限制性的,本领域技术人员可以根据实际需要增加或移除相应的硬件。例如,设备800可以仅包括CPU、相关存储设备和接口设备来实现本申请的对生成健康血管图像的生成模型进行训练的方法以及生成健康血管图像的方法。
在一些实施例中,为了便于数据与外部网络的传递和交互,本申请的设备800还包括通信接口818,从而可以通过该通信接口818连接到局域网/无线局域网(“LAN/WLAN”)805,进而可以通过该LAN/WLAN连接到本地服务器806或连接到因特网(“Internet”)807。替代地或附加地,本申请的设备800还可以通过通信接口818基于无线通信技术直接连接到因特网或蜂窝网络,例如基于第3代(“3G”)、第4代(“4G”)或第5代(“5G”)的无线通信技术。在一些应用场景中,本申请的设备800还可以根据需要访问外部网络的服务器808和数据库809,以便获得各种已知的算法、数据和模块,并且可以远程地存储各种数据,例如用于呈现动脉瘤血管图像和健康动脉血管图像、增加噪声后的图像数据等的各类数据或指令。
设备800的外围设备可以包括显示装置802、输入装置803和数据传输接口804。在一个实施例中,显示装置802可以例如包括一个或多个扬声器和/或一个或多个视觉显示器,其配置用于对本申请的对生成健康血管图像的生成模型进行训练以及生成健康血管图像进行语音提示和/或图像视频显示。输入装置803可以包括例如键盘、鼠标、麦克风、姿势捕捉相机等其他输入按钮或控件,其配置用于接收音频数据的输入和/或用户指令。数据传输接口804可以包括例如串行接口、并行接口或通用串行总线接口(“USB”)、小型计算机系统接口(“SCSI”)、串行ATA、火线(“FireWire”)、PCI Express和高清多媒体接口(“HDMI”)等,其配置用于与其他设备或系统的数据传输和交互。根据本申请的方案,该数据传输接口804可以接收来自于医学影像采集设备采集的包含待进行补全的血管的影像,并且向设备800传送包括动脉瘤血管图像和健康动脉血管图像或各种其他类型的数据或结果。
本申请的设备800的上述CPU 811、大容量存储器812、ROM 813、TPU 814、GPU 815、FPGA 816、MLU 817和通信接口818可以通过总线819相互连接,并且通过该总线与外围设备实现数据交互。在一个实施例中,通过该总线819,CPU 811可以控制设备800中的其他硬件组件及其外围设备。
以上结合图8描述了可以用于执行本申请的对生成健康血管图像的生成模型进行训练的以及生成健康血管图像的设备。需要理解的是这里的设备结构或架构仅仅是示例性的,本申请的实现方式和实现实体并不受其限制,而是可以在不偏离本申请的精神下做出改变。
根据上述结合附图的描述,本领域技术人员也可以理解本申请的实施例还可以通过软件程序来实现。由此本申请还提供了一种计算机可读存储介质。该计算机可读存储介质可以用于实现本申请结合附图2、图4所描述的对生成健康血管图像的生成模型进行训练的方法以及生成健康血管图像的方法。
应当注意,尽管在附图中以特定顺序描述了本申请方法的操作,但是这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。相反,流程图中描绘的步骤可以改变执行顺序。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
应当理解,当本申请的权利要求、当说明书及附图中使用到术语“第一”、“第二”、“第三”和“第四”等时,其仅用于区别不同对象,而不是用于描述特定顺序。本申请的说明书和权利要求书中使用的术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的,而并不意在限定本申请。如在本申请说明书和权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。还应当进一步理解,在本申请说明书和权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
虽然本申请的实施方式如上,但所述内容只是为便于理解本申请而采用的实施例,并非用以限定本申请的范围和应用场景。任何本申请所述技术领域内的技术人员,在不脱离本申请所揭露的精神和范围的前提下,可以在实施的形式上及细节上作任何的修改与变化,但本申请的专利保护范围,仍须以所附的权利要求书所界定的范围为准。
Claims (14)
1.一种对生成健康血管图像的生成模型进行训练的方法,包括:
获取动脉瘤血管图像和健康动脉血管图像,并分别对其进行标注获得对应的标签信息;
在所述动脉瘤血管图像和所述健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据;以及
将所述增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练。
2.根据权利要求1所述的方法,还包括:
对所述动脉瘤血管图像和所述健康动脉血管图像进行格式转换、尺寸变换或者数据增强中的一种或者多种操作,以对所述动脉瘤血管图像和所述健康动脉血管图像进行预处理。
3.根据权利要求1所述的方法,其中在所述动脉瘤血管图像和所述健康动脉血管图像中增加噪声分布,以获得增加噪声后的图像数据包括:
在所述动脉瘤血管图像和所述健康动脉血管图像中增加任意一个噪声分布,以获得一个增加噪声后的图像数据;或者
基于预定信噪比,在所述动脉瘤血管图像和所述健康动脉血管图像中增加多个噪声分布,以获得多个增加噪声后的图像数据。
4.根据权利要求3所述的方法,其中将所述增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成目标血管图像,以对生成健康血管图像的生成模型进行训练包括:
将所述一个增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成所述目标血管图像,以对生成健康血管图像的生成模型进行训练;或者
将所述多个增加噪声后的图像数据和所述标签信息输入至待训练的生成模型中进行特征提取生成所述目标血管图像,以对生成健康血管图像的生成模型进行训练。
5.根据权利要求1-4任意一项所述的方法,其中所述动脉瘤血管图像和所述健康动脉血管图像包括DSA血管图像、CT血管图像或者MRI血管图像。
6.根据权利要求1-4任意一项所述的方法,其中所述生成模型包括Unet模型、FPN模型或者PSPNet模型。
7.一种对生成健康血管图像的生成模型进行训练的设备,包括:
处理器;以及
存储器,其存储有对生成健康血管图像的生成模型进行训练的程序指令,当所述程序执行由处理器执行时,使得实现根据权利要求1-6任意一项所述的方法。
8.一种生成健康血管图像的方法,包括:
获取用于待生成健康血管图像的动脉瘤血管图像;
将所述动脉瘤血管图像输入至根据权利要求1-6任意一项所述的方法训练完成的生成模型中进行图像生成操作,以生成健康血管图像。
9.根据权利要求8所述的方法,其中生成健康血管图像包括:
基于所述动脉瘤血管图像,使用训练完成的生成模型生成一个目标噪声图像;以及
基于所述一个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像。
10.根据权利要求8所述的方法,其中生成健康血管图像还包括:
基于所述动脉瘤血管图像和预定生成步数,使用训练完成的生成模型生成多个目标噪声图像;以及
基于所述多个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像。
11.根据权利要求10所述的方法,其中基于所述多个目标噪声图像,使用所述训练完成的生成模型进行图像生成操作,以生成所述健康血管图像包括:
基于所述多个目标噪声图像,使用所述训练完成的生成模型按照连续步数进行图像生成操作,以生成所述健康血管图像;或者
基于所述多个目标噪声图像,使用所述训练完成的生成模型按照预定间隔步数进行图像生成操作,以生成所述健康血管图像。
12.根据权利要求10所述的方法,还包括:
对每个所述目标噪声图像在动脉瘤标签和健康标签下的样本设置比例系数,以生成所述健康血管图像。
13.一种生成健康血管图像的设备,包括:
处理器;以及
存储器,其存储有生成健康血管图像的程序指令,当所述程序执行由处理器执行时,使得实现根据权利要求8-12任意一项所述的方法。
14.一种计算机可读存储介质,其上存储有对生成健康血管图像的生成模型进行训练的和生成健康血管图像的计算机可读指令,该计算机可读指令被一个或多个处理器执行时,实现如权利要求1-6任意一项所述的方法以及根据权利要求8-12任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310761576.9A CN116739890B (zh) | 2023-06-26 | 2023-06-26 | 对生成健康血管图像的生成模型进行训练的方法及设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310761576.9A CN116739890B (zh) | 2023-06-26 | 2023-06-26 | 对生成健康血管图像的生成模型进行训练的方法及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116739890A true CN116739890A (zh) | 2023-09-12 |
CN116739890B CN116739890B (zh) | 2024-06-14 |
Family
ID=87913129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310761576.9A Active CN116739890B (zh) | 2023-06-26 | 2023-06-26 | 对生成健康血管图像的生成模型进行训练的方法及设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116739890B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109637634A (zh) * | 2018-12-11 | 2019-04-16 | 厦门大学 | 一种基于生成对抗网络的医学图像合成方法 |
CN110084813A (zh) * | 2019-05-13 | 2019-08-02 | 山东大学 | 一种基于三维深度学习网络的肺结节良恶性预测方法 |
CN110473154A (zh) * | 2019-07-31 | 2019-11-19 | 西安理工大学 | 一种基于生成对抗网络的图像去噪方法 |
CN111507937A (zh) * | 2020-03-03 | 2020-08-07 | 平安科技(深圳)有限公司 | 一种图像数据的生成方法及装置 |
CN113505768A (zh) * | 2021-09-10 | 2021-10-15 | 北京的卢深视科技有限公司 | 模型训练、人脸识别方法、电子设备及存储介质 |
EP3982324A1 (en) * | 2020-10-09 | 2022-04-13 | Koninklijke Philips N.V. | Generating a sythetic image for a blood vessel lesion classifier |
CN114864052A (zh) * | 2022-03-29 | 2022-08-05 | 青岛市妇女儿童医院 | 一种基于深度学习的ct图像处理系统及其处理方法 |
CN114897914A (zh) * | 2022-03-16 | 2022-08-12 | 华东师范大学 | 基于对抗训练的半监督ct图像分割方法 |
CN114930407A (zh) * | 2019-11-08 | 2022-08-19 | 徕卡仪器(新加坡)有限公司 | 用于训练或使用机器学习模型的系统、显微镜系统、方法和计算机程序 |
CN115115620A (zh) * | 2022-08-23 | 2022-09-27 | 安徽中医药大学 | 一种基于深度学习的肺炎病变模拟方法及系统 |
CN115424088A (zh) * | 2022-08-23 | 2022-12-02 | 阿里巴巴(中国)有限公司 | 图像处理模型训练方法以及装置 |
-
2023
- 2023-06-26 CN CN202310761576.9A patent/CN116739890B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109637634A (zh) * | 2018-12-11 | 2019-04-16 | 厦门大学 | 一种基于生成对抗网络的医学图像合成方法 |
CN110084813A (zh) * | 2019-05-13 | 2019-08-02 | 山东大学 | 一种基于三维深度学习网络的肺结节良恶性预测方法 |
CN110473154A (zh) * | 2019-07-31 | 2019-11-19 | 西安理工大学 | 一种基于生成对抗网络的图像去噪方法 |
CN114930407A (zh) * | 2019-11-08 | 2022-08-19 | 徕卡仪器(新加坡)有限公司 | 用于训练或使用机器学习模型的系统、显微镜系统、方法和计算机程序 |
CN111507937A (zh) * | 2020-03-03 | 2020-08-07 | 平安科技(深圳)有限公司 | 一种图像数据的生成方法及装置 |
EP3982324A1 (en) * | 2020-10-09 | 2022-04-13 | Koninklijke Philips N.V. | Generating a sythetic image for a blood vessel lesion classifier |
CN113505768A (zh) * | 2021-09-10 | 2021-10-15 | 北京的卢深视科技有限公司 | 模型训练、人脸识别方法、电子设备及存储介质 |
CN114897914A (zh) * | 2022-03-16 | 2022-08-12 | 华东师范大学 | 基于对抗训练的半监督ct图像分割方法 |
CN114864052A (zh) * | 2022-03-29 | 2022-08-05 | 青岛市妇女儿童医院 | 一种基于深度学习的ct图像处理系统及其处理方法 |
CN115115620A (zh) * | 2022-08-23 | 2022-09-27 | 安徽中医药大学 | 一种基于深度学习的肺炎病变模拟方法及系统 |
CN115424088A (zh) * | 2022-08-23 | 2022-12-02 | 阿里巴巴(中国)有限公司 | 图像处理模型训练方法以及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN116739890B (zh) | 2024-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6947759B2 (ja) | 解剖学的対象物を自動的に検出、位置特定、及びセマンティックセグメンテーションするシステム及び方法 | |
CN110232383B (zh) | 一种基于深度学习模型的病灶图像识别方法及病灶图像识别系统 | |
Saad et al. | Image segmentation for lung region in chest X-ray images using edge detection and morphology | |
Guo et al. | Dual attention enhancement feature fusion network for segmentation and quantitative analysis of paediatric echocardiography | |
CN111667478B (zh) | Cta到mra跨模态预测的颈动脉斑块识别方法及系统 | |
US11468570B2 (en) | Method and system for acquiring status of strain and stress of a vessel wall | |
CN109934829B (zh) | 一种基于三维图割算法的肝脏分割方法 | |
CN111584066B (zh) | 基于卷积神经网络与对称信息的脑部医学影像诊断方法 | |
de Albuquerque et al. | Fast fully automatic heart fat segmentation in computed tomography datasets | |
Wang et al. | Left atrial appendage segmentation based on ranking 2-D segmentation proposals | |
Meijs et al. | Cerebral artery and vein segmentation in four-dimensional CT angiography using convolutional neural networks | |
CN117036253B (zh) | 用于对分割脑血管的分割模型进行训练的方法和相关产品 | |
CN116739890B (zh) | 对生成健康血管图像的生成模型进行训练的方法及设备 | |
CN111209946A (zh) | 三维图像处理方法、图像处理模型训练方法及介质 | |
CN115965589A (zh) | 导管图像识别方法、装置、计算机设备及存储介质 | |
CN117058464B (zh) | 对生成健康血管表面的生成模型进行训练的方法及设备 | |
Luong et al. | A computer-aided detection to intracranial hemorrhage by using deep learning: a case study | |
CN115294023A (zh) | 肝脏肿瘤自动分割方法及装置 | |
CN115375706A (zh) | 图像分割模型训练方法、装置、设备及存储介质 | |
KR102556646B1 (ko) | 의료 영상 생성 방법 및 장치 | |
CN110009604B (zh) | 造影图像序列的呼吸信号提取方法及装置 | |
CN114708283A (zh) | 图像目标的分割方法、装置、电子设备及存储介质 | |
Van Houtte et al. | A deep learning approach to horse bone segmentation from digitally reconstructed radiographs | |
CN112634255A (zh) | 脑部病灶检测模型的建立方法、装置以及计算机设备 | |
JP7462925B2 (ja) | 血流場推定装置、学習装置、血流場推定方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Country or region after: China Address after: Room 2301, 23rd Floor, Building 3, No. 2 Ronghua South Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing, 100176 Applicant after: UNION STRONG (BEIJING) TECHNOLOGY Co.,Ltd. Address before: 100176 901, building 3, yard 2, Ronghua South Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing Applicant before: UNION STRONG (BEIJING) TECHNOLOGY Co.,Ltd. Country or region before: China |
|
GR01 | Patent grant | ||
GR01 | Patent grant |