CN108806793A - 病变监测方法、装置、计算机设备和存储介质 - Google Patents
病变监测方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN108806793A CN108806793A CN201810345253.0A CN201810345253A CN108806793A CN 108806793 A CN108806793 A CN 108806793A CN 201810345253 A CN201810345253 A CN 201810345253A CN 108806793 A CN108806793 A CN 108806793A
- Authority
- CN
- China
- Prior art keywords
- images
- original
- layer
- neural networks
- feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003902 lesion Effects 0.000 title claims abstract description 68
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000012544 monitoring process Methods 0.000 title claims abstract description 26
- 238000003860 storage Methods 0.000 title claims abstract description 11
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 123
- 210000004185 liver Anatomy 0.000 claims abstract description 99
- 238000012549 training Methods 0.000 claims abstract description 81
- 230000011218 segmentation Effects 0.000 claims abstract description 57
- 230000000007 visual effect Effects 0.000 claims abstract description 42
- 238000013528 artificial neural network Methods 0.000 claims abstract description 16
- 230000001537 neural effect Effects 0.000 claims abstract description 11
- 238000005070 sampling Methods 0.000 claims description 59
- 238000005457 optimization Methods 0.000 claims description 27
- 238000000605 extraction Methods 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 13
- 239000000284 extract Substances 0.000 claims description 9
- 238000012806 monitoring device Methods 0.000 claims description 9
- 230000004927 fusion Effects 0.000 claims description 4
- 238000004458 analytical method Methods 0.000 abstract description 8
- 230000004913 activation Effects 0.000 description 29
- 230000008569 process Effects 0.000 description 23
- 238000003325 tomography Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 11
- 238000003745 diagnosis Methods 0.000 description 10
- 201000007270 liver cancer Diseases 0.000 description 10
- 208000014018 liver neoplasm Diseases 0.000 description 10
- 230000009467 reduction Effects 0.000 description 10
- 230000001575 pathological effect Effects 0.000 description 9
- 230000002708 enhancing effect Effects 0.000 description 8
- 208000019423 liver disease Diseases 0.000 description 8
- 241001269238 Data Species 0.000 description 7
- ORILYTVJVMAKLC-UHFFFAOYSA-N Adamantane Natural products C1C(C2)CC3CC1CC2C3 ORILYTVJVMAKLC-UHFFFAOYSA-N 0.000 description 6
- 235000005911 diet Nutrition 0.000 description 6
- 230000008034 disappearance Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 210000000056 organ Anatomy 0.000 description 5
- 206010028980 Neoplasm Diseases 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000007812 deficiency Effects 0.000 description 4
- 230000037213 diet Effects 0.000 description 4
- 201000010099 disease Diseases 0.000 description 4
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000003449 preventive effect Effects 0.000 description 4
- 230000001737 promoting effect Effects 0.000 description 4
- 230000001225 therapeutic effect Effects 0.000 description 4
- 239000000155 melt Substances 0.000 description 3
- 208000007433 Lymphatic Metastasis Diseases 0.000 description 2
- 206010027476 Metastases Diseases 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 201000011510 cancer Diseases 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000013170 computed tomography imaging Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000000378 dietary effect Effects 0.000 description 2
- 230000004069 differentiation Effects 0.000 description 2
- 229940079593 drug Drugs 0.000 description 2
- 239000003814 drug Substances 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 230000036961 partial effect Effects 0.000 description 2
- 238000010827 pathological analysis Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000004617 sleep duration Effects 0.000 description 2
- 230000003860 sleep quality Effects 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 210000001835 viscera Anatomy 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003475 lamination Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 210000004218 nerve net Anatomy 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Primary Health Care (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Epidemiology (AREA)
- Computational Linguistics (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本申请揭示了病变监测方法、装置、计算机设备和存储介质,其中,病变监测方法,包括:将原始CT影像的样本数据输入到预设的分割模型中进行分割计算,并输出分割后的肝脏影像数据;将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行计算,并输出识别结果,其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。本申请借助神经网络对原始CT影像中的肝脏特征及病变特征的学习,通过两个级联的全卷积神经网络建立CT切片与标签间的关系,分任务训练模型,以便尽快找到最优网络参数,提高了看病效率以及病症分析的准确度。
Description
技术领域
本申请涉及到卷积神经网络应用领域,特别是涉及到病变监测方法、装置、计算机设备和存储介质。
背景技术
肝脏癌变诊断的目标是对CT断层图像获得的人体横断面图像的肝脏部位进行是否病变的判断。传统方法是借助医生的经验,对多张CT图读片定位病变,故医生的经验非常重要,但由于CT断层图像为灰度图像并同时显示多个脏器,与肝脏相关的CT切片又相当多,数据量非常大,导致看图会极大地消耗医生脑力和时间,从而导致医生没有更过的时间接待更多病人或分析病情、设计治病方案等。
发明内容
本申请的主要目的为提供一种病变监测方法,旨在解决现有肝脏癌变诊断主要依靠医生医疗经验而导致的诊断耗时长、效率低的技术问题。
本申请提出一种病变监测方法,包括:
将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;
将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
优选地,将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤,包括:
将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据;
将所述特征数据输入所述第一卷积神经网络的上采样部分,以还原所述原始CT影像的尺寸并输出分割后的肝脏影像数据。
优选地,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;所述将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据的步骤,包括:
依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据。
所述依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤,包括:
将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练所述原始CT影像的局部特征的一阶特征;
将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练所述原始CT影像的局部特征的二阶特征;
将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取所述原始CT影像的局部特征的优化特征;
将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、所述第二卷积层以及所述最大池化层进行迭代,直到迭代次数达到第一指定次数。
优选地,所述第一卷积神经网络的卷积部分还包括丢弃层;所述依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤之后,包括:
将所述原始CT影像的特征数据,输入到所述卷积部分的丢弃层,迭代丢弃第二指定次数,以输出所述原始CT影像的优化特征数据。
优选地,所述将所述特征数据输入第一卷积神经网络的上采样部分,以还原所述原始CT影像的尺寸并输出分割后的肝脏影像数据的步骤,包括:
将所述原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原所述原始CT影像的尺寸;
将所述上采样层的输出数据与所述第一卷积层的一阶特征或所述第二卷积层的二阶特征通过拼接层拼接;
将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
优选地,所述将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤之前,包括:
在所述原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像;
将所述旋转图像经过指定的弹性变换计算,得到所述原始CT影像的形变图;
将所述原始CT影像以及所述原始CT影像的形变图,规划为所述原始CT影像的样本数据。
本申请还提供了一种病变监测装置,包括:
第一输入输出模块,用于将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;
第二输入输出模块,用于将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
本申请还提供了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法的步骤。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法的步骤。
本申请有益技术效果:本申请借助神经网络对原始CT影像中的肝脏特征及病变特征的学习,通过两个级联的全卷积神经网络建立CT切片与标签间的关系,分任务训练模型,以便尽快找到最优网络参数,完成模型训练,提高了医生的看病效率,提高病症分析的准确度;本申请的网络模型的上采样部分包括了拼接,拼接的目的是把最早的那些特征拉过来,采用跨层连接的方式,将前面数层的卷积输出拼接到后层输入里去,弥补当前层因为处于网络较深位置导致数据信息不足的问题,而且模型训练过程在每一步上采样中,叠加了在卷积步骤中相同维度的特征,防止卷积云深层网络中会出现梯度消失、信息丢失,通过较少的训练数据就得到精准的训练模型;通过训练模型对病症数据进行有效分类,形成分类数据库,提高肝癌的预防效果、诊断效率以及治疗效率,具有实用价值。
附图说明
图1本申请一实施例的病变监测方法流程示意图;
图2本申请一实施例的病变监测装置结构示意图;
图3本申请一实施例的第一输入输出模块的结构示意图;
图4本申请一实施例的第一输入单元的结构示意图;
图5本申请一实施例的输出子模块的结构示意图;
图6本申请另一实施例的第一输入单元的结构示意图;
图7本申请一实施例的第二输入单元的结构示意图;
图8本申请一实施例的病变监测的优化装置结构示意图;
图9本申请另一实施例的病变监测装置结构示意图;
图10本申请一实施例的计算机设备内部结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
参照图1,本申请一实施例的病变监测方法,包括:
S1:将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据。
本步骤中分割后的肝脏影像数据即对原始CT影像中肝脏部位的识别数据,包括原始CT影像中肝脏部位的所有边缘特征数据。本实施例的分割模型通过识别原始CT影像中肝脏部位的边缘特征数据,确定肝脏部位的包围框,实现对原始CT影像中肝脏部位的有效分割。
S2:将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
本实施例的病变监测方法中,通过第一卷积神经网络和第二卷积神经网络两个级联的卷积神经网络结构,建立CT切片与标签间的关系(CT断层即Computed Tomography,即电子计算机断层扫描,利用精确准直的X线束、γ射线、超声波等形成的人体某一部位的立体的CT断层数据,CT断层具有一定厚度,CT断层有多个横断面的CT切片顺序排列组成,为进行有效区别,每个CT断层有对应的标签,每个CT切片也有相应的标签,以分别表示CT断层、CT切片在整个数据中的排列顺序,以分别精准地对应到实体器官的对应位置,本申请中的原始CT影像包括原始CT切片)。肝脏的CT由几个CT断层依次排列组成,每个CT断层再由多个CT切片依次排列组成,为了保证各CT断层和各CT切片的依次排列顺序与脏器的真实结构相对应,分别为各CT断层和各CT切片引入了标签,以便进行排列顺序、对应肝脏部位的关联。输入第一卷积神经网络的原始CT影像为各带有标签的CT切片,通过对各带有标签的CT切片进行特征提取,与图片尺寸还原达到分割肝脏的目的;将带有标签的第一神经网络的输出信息输入到第二卷积神经网络,以便第一卷积神经网络的CT切片的数据与第二卷积神经网络中的CT切片根据标签进行对应,以便精准确定第一卷积神经网络输出的肝脏的病变位置,本实施例的标签为包括排序序号等内容的信息。第一卷积神经网络的最后输出结果就是第二卷积神经网络的输入,两个任务不同,故两个卷积神经网络每层的识别目标也不同;通过两个级联的网络结构分任务训练模型,以便尽快找到最优网络参数,完成训练模型。本实施例在模型训练过程与模型实际应用的特征分析提取原理相同,模型训练中通过较多样本实现模型训练,确定模型参数,实际应用中模型参数已定,仅对需要分析的样本进行特征提取。本实施例的第一卷积神经网络与第二卷积神经网络的结构相同,只是因为输入的数据不同,实现了第一卷积神经网络结构通过识别肝脏包围框完成肝脏部位的分割任务,第二卷积神经网络通过识别病变部位完成肝脏病变类型的识别任务,避免了只用一个卷积神经网络同时进行肝脏部位识别与肝脏病变识别时,容易对其他脏器部位发生误识,避免识别结果混入其他脏器部位。
进一步地,本实施例的步骤S1,包括:
S10:将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据。
本实施例的第一卷积神经网络与第二卷积神经网络的结构相同,均包括两个部分,卷积部分和上采样部分。卷积部分是为了识别图像的特征,譬如图像边缘是一阶特征、边缘的渐变是二阶特征、局部相邻边缘特征组成三阶纹理等等,越往深处越能辨别物体。
S11:将所述特征数据输入第一卷积神经网络的上采样部分,以还原原始CT影像的尺寸并输出分割后的肝脏影像数据。
本实施例的上采样部分,是用来还原图像到原始尺寸,且使输出结果与输入结果大小尺寸相同,以便精准地完成分割任务以及病变识别任务。即本实施例通过第一卷积神经网络的上采样部分还原图像尺寸并输出分割结果;通过第二卷积神经网络的上采样部分还原图像尺寸并输出病变识别结果。
进一步地,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;本实施例的步骤S10,包括:
S100:依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出原始CT影像的特征数据。
本实施例在特征提取的卷积过程中,每次依次经过所述第一卷积层、第二卷积层后,记为一个卷积过程Conv,例如:第一次依次经过第一卷积层、第二卷积层后记为Conv1,第二次依次经过第一卷积层、第二卷积层后记为Conv2,依次递推进行,并在每一个卷积过程之后分别经过最大池化层输出,以逐渐提取局部特征的优化特征。本实施例通过卷积和池化的第一指定次数的迭代,不断提取原始CT影像的精细特征,并展成越来越深的特征空间,以输出精准的原始CT影像的特征数据。
进一步地,本实施例的步骤S100,包括:
S1000:将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练原始CT影像的局部特征的一阶特征。
本实施例的卷积部分包括卷积层、最大池化层,卷积层是为了获取原始CT影像的局部特征,比如,本实施例的第一卷积层训练图像边缘等一阶特征。
S1001:将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练原始CT影像的局部特征的二阶特征。
比如,本实施例的第二卷积层训练图像边缘变化等二阶特征。
S1002:将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取所述原始CT影像的局部特征的优化特征。
本步骤通过最大池化层在保留主要特征的同时减少参数,比如降维;减少计算量,并通过非线性化防止过拟合,提高训练模型的泛化能力。
S1003:将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、所述第二卷积层以及所述最大池化层进行迭代,直到迭代次数达到第一指定次数;以进一步优化训练模型的权重,提高使用效果。
进一步,所述第一卷积神经网络的卷积部分还包括丢弃层;本申请另一实施例中步骤S100之后,包括:
S101:将所述原始CT影像的特征数据,输入到卷积部分的丢弃层,迭代丢弃第二指定次数,以输出原始CT影像的优化特征数据。
本实施例的卷积部分除了卷积层、最大池化层,还包括丢弃层,以便降低数据的冗余,提高训练模型的鲁棒性,输出更优化的特征数据。
进一步地,本实施例的步骤S11,包括:
S111:将所述原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原原始CT影像的尺寸。
本实施例的上采样层是为了将卷积部分多次迭代卷积和池化后展成的深层特征空间依次还原出目标标签,将经过卷积的原始CT影像还原到原始尺寸,使输出结果与输入结果大小尺寸相同,以实现精准分割原始CT影像的肝脏部位。
S112:将所述上采样层的输出数据与所述第一卷积层的一阶特征或第二卷积层的二阶特征通过拼接层拼接。
本实施例中在每一次上采样步骤中,通过拼接层叠加了在卷积过程中相同维度的特征,以防止在深层的卷积神经网络中出现梯度消失的情况,避免信息丢失,提高训练模型的精准度。
S113:将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
本实施例在每次通过拼接层叠加了特征后,特征空间扩大两倍,需要通过压缩空间的卷积操作把特征空间压缩回叠加前的空间,所以本实施例每个拼接层后会紧跟一个压缩空间的第三卷积层,进行拼接之后的特征融合并压缩特征空间。
进一步地,步骤S1之前,包括:
S3:在原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像。
本实施例的每个病例的每张断层图依次进行了数据预处理,以保证在原始图像尺寸下,对原始CT影像增强,以尽可能去除非相关组织,凸显肝脏。本实施例首先根据肝脏组织在原始CT影像上的灰度范围的表现,过滤出-100到400灰度范围的像素,以突出肝脏在图像中的对比度,同时保证原始图像尺寸。由于在[-100,400]范围内的原始CT影像显示的脏器对比度不明显,本实施例通过直方图均衡化的方法进行对比度增强,扩大像素个数多的灰度级,扩展图像元素取值的动态范围。而且本实施例采用仅有的20张开源的肝脏病变图作为原始CT影像,由于训练数据样例非常少,为了提高模型鲁棒性,在图像上增加高斯噪声,随机旋转[-30,+30]的角度,以进行数据增强,提高数据多样性。
S4:将所述旋转图像经过指定的弹性变换计算,得到原始CT影像的形变图。
本实施例的弹性变换计算过程,包括:
(1)对原始CT影像的每一个切片上的每个像素,产生两个[-1,1]范围内的随机数图像A和B。
(2)生成以0为均值,以4为标准差的105*105个像素的高斯核,将高斯核与图像A和B分别卷积,得到卷积结果A2和B2。
(3)对卷积结果A2和B2,把原始CT影像(Xi,Yi)的像素值赋值给新图像(Xi+A2i,Yi+B2i)位置,得到原始CT影像的形变图。
S5:将所述原始CT影像以及其对应的形变图,规划为原始CT影像的样本数据。
本实施例以0/1标签的CT断层的判别过程,具体说明本实施例的原始CT影像的肝脏癌症病变监测的具体流程:
首先对20个开源CT断层样本数据进行增强操作(20个开源CT断层样本数据来源于https://www.ircad.fr/research/3d-ircadb-01/),每个样本有多个CT切片。比如判别0/1标签的CT断层,训练模型输入为512*512*1的灰度CT切片,输出为512*512*1的标签。
输入的每个样本是512*512*n的预处理后图像,其中n为该样本CT切片数量。进行以下模型训练:
卷积,采用3*3卷积核,输出64个特征图,采用Relu激活函数,输出512*512大小;
卷积,采用3*3卷积核,输出64个特征图,采用Relu激活函数,输出512*512大小,记为conv1(conv表示卷积层);
最大值池化,采用2*2核,输出256*256大小;
卷积,采用3*3卷积核,输出128个特征图,采用Relu激活函数,输出256*256大小;
卷积,采用3*3卷积核,输出64个特征图,采用Relu激活函数,输出256*256大小,记为conv2;
最大值池化,采用2*2核,输出128*128大小;
卷积,采用3*3卷积核,输出256个特征图,采用Relu激活函数,输出128*128大小;
卷积,采用3*3卷积核,输出256个特征图,采用Relu激活函数,输出128*128大小,记为conv3;
最大值池化,采用2*2核,输出64*64大小;
卷积,采用3*3卷积核,输出512个特征图,采用Relu激活函数,输出64*64大小;
卷积,采用3*3卷积核,输出512个特征图,采用Relu激活函数,输出64*64大小,记为conv4;
丢弃,随机选conv4的一半输出设为0,输出记为drop4(drop表示丢弃层);
最大值池化,采用2*2核,输出32*32大小;
卷积,采用3*3卷积核,输出1024个特征图,采用Relu激活函数,输出32*32大小;
卷积,采用3*3卷积核,输出1024个特征图,采用Relu激活函数,输出32*32大小,记为conv5;
丢弃,随机选conv5的一半输出设为0,输出记为drop5;
最大值池化,采用2*2核,输出16*16大小;
卷积,采用3*3卷积核,输出2048个特征图,采用Relu激活函数,输出16*16大小;
卷积,采用3*3卷积核,输出2048个特征图,采用Relu激活函数,输出16*16大小,记为conv6;
丢弃,随机选conv6的一半输出设为0,输出记为drop6;
上述部分为卷积部分,完成后进入上采样部分。
上采样,采用2*2上采样,输出32*32;
卷积,采用2*2卷积核,输出1024个特征图,采用Relu激活函数,输出32*32大小,记为up7(up表示上采样层);
拼接,拼接drop5和up7,输出2048个特征图,32*32大小;
卷积,采用3*3卷积核,输出1024个特征图,采用Relu激活函数,输出32*32大小;
卷积,采用3*3卷积核,输出1024个特征图,采用Relu激活函数,输出32*32大小;
上采样,采用2*2上采样,输出64*64;
卷积,采用2*2卷积核,输出512个特征图,采用Relu激活函数,输出64*64大小,记为up8;
拼接,拼接drop4和up8,输出1024个特征图,64*64大小;
卷积,采用3*3卷积核,输出512个特征图,采用Relu激活函数,输出64*64大小;
卷积,采用3*3卷积核,输出512个特征图,采用Relu激活函数,输出64*64大小;
上采样,采用2*2上采样,输出128*128大小;
卷积,采用2*2卷积核,输出256个特征图,采用Relu激活函数,输出128*128大小,记为up9;
拼接,拼接conv3和up9,输出512个特征图,128*128大小;
卷积,采用3*3卷积核,输出256个特征图,采用Relu激活函数,输出128*128大小;
卷积,采用3*3卷积核,输出256个特征图,采用Relu激活函数,输出128*128大小;
上采样,采用2*2上采样,输出256*256;
卷积,采用2*2卷积核,输出128个特征图,采用Relu激活函数,输出256*256大小,记为up10;
拼接,拼接conv2和up10,输出256个特征图,256*256大小;
卷积,采用3*3卷积核,输出128个特征图,采用Relu激活函数,输出256*256大小;
卷积,采用3*3卷积核,输出128个特征图,采用Relu激活函数,输出256*256大小;
上采样,采用2*2上采样,输出512*512;
卷积,采用2*2卷积核,输出64个特征图,采用Relu激活函数,输出512*512大小,记为up11;
拼接,拼接conv1和up11,输出128个特征图,512*512大小;
卷积,采用3*3卷积核,输出64个特征图,采用Relu激活函数,输出512*512大小;
卷积,采用3*3卷积核,输出64个特征图,采用Relu激活函数,输出512*512大小;
卷积,采用3*3卷积核,输出2个特征图,采用Relu激活函数,输出512*512大小;
卷积,采用1*1卷积核,输出1个特征图,采用sigmoid激活函数,输出512*512大小。
上述为第一卷积神经网络或第二卷积神经网络的模型结构,可具体表示为下表:
本实施例首先由预测的肝脏包围框提取原始CT影像对应位置,作为待分割的训练图片,以同样的方式,由预测包围框获取病变对应位置,提取512*512*1的标签图,训练全卷积分割网络。在第一卷积神经网络中,先把最初的CT切片数据进行第一卷积神经网络数据准备,把处理完的数据输入第一卷积神经网络进行模型训练,训练设置迭代五十次,每次迭代都会遍历完所有输入数据,训练中采用交叉熵(Crossentropy)作为目标函数。本实施例的交叉熵函数表示为:其中y为期望的输出,a为神经元实际输出,n表示样本数,a=σ(z),z=∑Wj*Xj+b。在第二卷积神经网络中,利用第一卷积神经网络的预测输出和增强后原始CT影像进行训练,第二卷积神经网络以第一卷积神经网络的输入和第一卷积神经网络的预测输出作为输入,其他参数不变,第二卷积神经网络与第一卷积神经网络输入的数据不同,识别的对象不同完成的任务也不同,第一卷积神经网络通过识别肝脏包围框实现对肝脏的分割,第二卷积神经网络通过识别病变位置包围框,实现病变识别。
本实施例采用Adam策略(Adam是一种可以替代传统随机梯度下降过程的一阶优化算法,它能基于训练数据迭代地更新神经网络权重,Adam来源于适应性矩估计AdaptiveMoment Estimation)进行参数更新,初始学习率为1e-5,训练中当验证集上的损失少于1e-7时,学习率减半,损失减少表示训练仍在优化,当优化到一定程度,需要降低学习率,避免因学习率过大而震荡最终导致无法继续优化。第一卷积神经网络训练时对肝脏的分割结果可能会有不够准确的地方,为了避免由此产生的肝脏边界包围框不够准确,在第二卷积神经网络的输入中拼接了增强后的原始CT影像数据,使得第二卷积神经网络的输入含有比较齐全的用于病变分割的信息,故不会产生数据丢失或者数据不全面造成整个模型识别效果不高。第二卷积神经网络最后输出512*512*1的图像,即为0/1标签的CT断层判别结果。
进一步地,本申请另一实施例中,步骤S2之后,还包括:
S20:通过比较所述第二卷积神经网络的输出结果与所述第一卷积神经网络的输出结果,获取病变位置的病变信息。
本实施例通过识别病变部位完成肝脏病变类型的识别任务后,通过比较整个肝脏区域以及病变区域,以获取病变信息。本实施例的病变信息包括但不限于病变区域的数量、尺寸、分布占比以及边缘特性信息等分析数据,以进一步提高肝癌的诊断准确度。病变区域的数量、尺寸、分布占比以及边缘特性信息等分析数据直接显示了肝癌进展程度。举例地,肝S7/8表面局部隆突,内见一巨大不规则低密度影,大小约为73×68mm,境界不清,部分密度高于同层肝,边缘欠示欠清,可推测诊断为T3aN0M0IIIA期(病理分析结果,T1b表示多发肿瘤直径>5cm;N0M0表示无区域淋巴转移、无远处转移),结合有无淋巴转移,有无远处转移,可确诊是否T3aN0M0IIIA期。
进一步地,本实施例的步骤S20之后,包括:
S21:通过外部获取所述病变信息对应的病者身份信息,以与所述病变信息组建第一数据库。
本步骤的身份信息包括但不限于年龄、性别、职业、饮食喜好等。本实施例通过组建第一数据库,以提高人类区分年龄、性别、职业、饮食喜好等,有效在高发群体中进行有效监控,提高癌症防范的有效性。
进一步地,本申请另一实施例的步骤S20之后,还包括:
S22:通过获取所述病变位置跟随时间的变化数据以及相应病者的生活信息,以寻找病变的利好因素。
本步骤中的变化数据包括但不限于病变区域变大或减少、病变区域的个数减少或增多等信息。本步骤的生活信息包括但不限于饮食种类、数量及频次,用药种类、数量及频次,睡眠质量、时长及频次等。本步骤的利好因素表示有利于控制病症、减缓病症发展以及促进病症好转的因素。可将上述变化数据、生活信息以及利好因素组建成第二数据库,以便于综合快速地推进肝癌的优化治疗。
本实施例借助神经网络对原始CT影像中的肝脏特征及病变特征的学习,通过两个级联的全卷积神经网络建立CT切片与标签间的关系,分任务训练模型,以便尽快找到最优网络参数,完成模型训练,提高了医生的看病效率,提高病症分析的准确度;本实施例的网络模型的上采样部分包括了拼接,拼接的目的是把最早的那些特征拉过来,采用跨层连接的方式,将前面数层的卷积输出拼接到后层输入里去,弥补当前层因为处于网络较深位置导致数据信息不足的问题,而且模型训练过程在每一步上采样中,叠加了在卷积步骤中相同维度的特征,防止卷积云深层网络中会出现梯度消失、信息丢失,通过较少的训练数据就得到精准的训练模型;通过训练模型对病症数据进行有效分类,形成分类数据库,提高肝癌的预防效果、诊断效率以及治疗效率,具有实用价值。
参照图2,本申请一实施例的病变监测装置,包括:
第一输入输出模块1,用于将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据。
本实施例中分割后的肝脏影像数据即对原始CT影像中肝脏部位的识别数据,包括原始CT影像中肝脏部位的所有边缘特征数据。本实施例的分割模型通过识别原始CT影像中肝脏部位的边缘特征数据,确定肝脏部位的包围框,实现对原始CT影像中肝脏部位的有效分割。
第二输入输出模块2,用于将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
本实施例的病变监测方法中,通过第一卷积神经网络和第二卷积神经网络两个级联的卷积神经网络结构,建立CT切片与标签间的关系,第一卷积神经网络的最后输出结果就是第二卷积神经网络的输入,两个任务不同,故两个卷积神经网络每层的识别目标也不同;通过两个级联的网络结构分任务训练模型,以便尽快找到最优网络参数,完成训练模型。本实施例的第一卷积神经网络与第二卷积神经网络的结构相同,只是因为输入的数据不同,实现了第一卷积神经网络结构通过识别肝脏包围框完成肝脏部位的分割任务,第二卷积神经网络通过识别病变部位完成肝脏病变类型的识别任务,避免了只用一个卷积神经网络同时进行肝脏部位识别与肝脏病变识别时,容易对其他脏器部位发生误识,避免识别结果混入其他脏器部位。
参照图3,第一输入输出模块1,包括:
第一输入单元10,用于将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据。
本实施例的第一卷积神经网络与第二卷积神经网络的结构相同,均包括两个部分,卷积部分和上采样部分。卷积部分是为了识别图像的特征,譬如图像边缘是一阶特征、边缘的渐变是二阶特征、局部相邻边缘特征组成三阶纹理等等,越往深处越能辨别物体。
第二输入单元11,用于将所述特征数据输入第一卷积神经网络的上采样部分,以还原原始CT影像的尺寸并输出分割后的肝脏影像数据。
本实施例的上采样部分,是用来还原图像到原始尺寸,且使输出结果与输入结果大小尺寸相同,以便精准地完成分割任务以及病变识别任务。即本实施例通过第一卷积神经网络的上采样部分还原图像尺寸并输出分割结果;通过第二卷积神经网络的上采样部分还原图像尺寸并输出病变识别结果。
参照图4,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;第一输入单元10,包括:
输出子模块100,依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出原始CT影像的特征数据。
本实施例在特征提取的卷积过程中,每次依次经过所述第一卷积层、第二卷积层后,记为一个卷积过程Conv,例如:第一次依次经过第一卷积层、第二卷积层后记为Conv1,第二次依次经过第一卷积层、第二卷积层后记为Conv2,依次递推进行,并在每一个卷积过程之后分别经过最大池化层输出,以逐渐提取局部特征的优化特征。本实施例通过卷积和池化的多次迭代,不断提取原始CT影像的精细特征,并展成越来越深的特征空间,以输出精准的原始CT影像的特征数据。
参照图5,本实施例的输出子模块100,包括:
第一输入子单元1000,用于将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练原始CT影像的局部特征的一阶特征。
本实施例的卷积部分包括卷积层、最大池化层,卷积层是为了获取原始CT影像的局部特征,比如,本实施例的第一卷积层训练图像边缘等一阶特征。
第二输入子单元1001,用于将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练原始CT影像的局部特征的二阶特征。
比如,本实施例的第二卷积层训练图像边缘变化等二阶特征。
第三输入子单元1002,用于将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取原始CT影像的局部特征的优化特征。
本实施例通过最大池化层在保留主要特征的同时减少参数,比如降维;减少计算量,并通过非线性化防止过拟合,提高训练模型的泛化能力。
迭代子单元1003,用于将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、第二卷积层以及最大池化层进行迭代,直到迭代次数达到第一指定次数第一指定次数。
参照图6,所述第一卷积神经网络的卷积部分还包括丢弃层;本申请另一实施例的第一输入单元10,还包括:
迭代子模块101,用于将所述原始CT影像的特征数据,输入到卷积部分的丢弃层,迭代丢弃第二指定次数,以输出原始CT影像的优化特征数据。
本实施例的卷积部分除了卷积层、最大池化层,还包括丢弃层,以便降低数据的冗余,提高训练模型的鲁棒性,以输出更优化的特征数据。
参照图7,所述第二输入单元11,包括:
第一输入子模块111,用于将原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原原始CT影像的尺寸。
本实施例的上采样层是为了将卷积部分多次迭代卷积和池化后展成的深层特征空间依次还原出目标标签,将经过卷积的原始CT影像还原到原始尺寸,使输出结果与输入结果大小尺寸相同,以实现精准分割原始CT影像的肝脏部位。
拼接子模块112,用于将所述上采样层的输出数据与所述第一卷积层的一阶特征或第二卷积层的二阶特征通过拼接层拼接。
本实施例中在每一次上采样中,通过拼接层叠加了在卷积过程中相同维度的特征,以防止在深层的卷积神经网络中出现梯度消失的情况,避免信息丢失,提高训练模型的精准度。
第二输入子模块113,用于将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
本实施例在每次通过拼接层叠加了特征后,特征空间扩大两倍,需要通过压缩空间的卷积操作把特征空间压缩回叠加前的空间,所以本实施例每个拼接层后会紧跟一个压缩空间的第三卷积层,进行拼接之后的特征融合并压缩特征空间。
参照图8,本申请实施例的病变监测装置,还包括:
旋转模块3,用于在原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像。
本实施例的每个病例的每张断层图依次进行了数据预处理,以保证在原始图像尺寸下,对原始CT影像增强,以尽可能去除非相关组织,凸显肝脏。本实施例首先根据肝脏组织在原始CT影像上的灰度范围的表现,过滤出-100到400灰度范围的像素,以突出肝脏在图像中的对比度,同时保证原始图像尺寸。由于在[-100,400]范围内的原始CT影像显示的脏器对比度不明显,本实施例通过直方图均衡化的方法进行对比度增强,扩大像素个数多的灰度级,扩展图像元素取值的动态范围。而且本实施例采用仅有的20张开源的肝脏病变图作为原始CT影像,由于训练数据样例非常少,为了提高模型鲁棒性,在图像上增加高斯噪声,随机旋转[-30,+30]的角度,以进行数据增强,提高数据多样性。
计算模块4,用于将所述旋转图像经过指定的弹性变换计算,得到原始CT影像的形变图。
本实施例的弹性变换计算过程,包括:
(1)对原始CT影像的每一个切片上的每个像素,产生两个[-1,1]范围内的随机数图像A和B。
(2)生成以0为均值,以4为标准差的105*105个像素的高斯核,将高斯核与图像A和B分别卷积,得到卷积结果A2和B2。
(3)对卷积结果A2和B2,把原始CT影像(Xi,Yi)的像素值赋值给新图像(Xi+A2i,Yi+B2i)位置,得到原始CT影像的形变图。
规划模块5,用于将所述原始CT影像以及其对应的形变图,规划为原始CT影像的样本数据。
本实施例以0/1标签的CT断层的判别过程,具体说明本实施例的原始CT影像的肝脏癌症病变监测的具体流程:
首先对20个开源CT断层样本数据进行增强操作(20个开源CT断层样本数据来源于https://www.ircad.fr/research/3d-ircadb-01/),每个样本有多个CT切片。比如判别0/1标签的CT断层,训练模型输入为512*512*1的灰度CT切片,输出为512*512*1的标签。
输入的每个样本是512*512*n的预处理后图像,其中n为该样本CT切片数量。模型训练过程见方法部分,不赘述。本实施例首先由预测的肝脏包围框提取原始CT影像对应位置,作为待分割的训练图片,以同样的方式,由预测包围框获取病变对应位置,提取512*512*1的标签图,训练全卷积分割网络。在第一卷积神经网络中,先把最初的CT切片数据进行第一卷积神经网络数据准备,把处理完的数据输入第一卷积神经网络进行模型训练,训练设置迭代五十次,每次迭代都会遍历完所有输入数据,训练中采用交叉熵(crossentropy)作为目标函数。本实施例的交叉熵函数表示为:其中y为期望的输出,a为神经元实际输出,n表示样本数,a=σ(z),z=∑Wj*Xj+b。在第二卷积神经网络中,利用第一卷积神经网络的预测输出和增强后原始CT影像进行训练,第二卷积神经网络以第一卷积神经网络的输入和第一卷积神经网络的预测输出作为输入,其他参数不变,第二卷积神经网络与第一卷积神经网络输入的数据不同,识别的对象不同完成的任务也不同,第一卷积神经网络通过识别肝脏包围框实现对肝脏的分割,第二卷积神经网络通过识别病变位置包围框,实现病变识别。
本实施例采用Adam策略(Adam是一种可以替代传统随机梯度下降过程的一阶优化算法,它能基于训练数据迭代地更新神经网络权重,Adam来源于适应性矩估计AdaptiveMoment Estimation)进行参数更新,初始学习率为1e-5,训练中当验证集上的损失少于1e-7时,学习率减半,损失减少表示训练仍在优化,当优化到一定程度,需要降低学习率,避免因学习率过大而震荡最终导致无法继续优化。第一卷积神经网络训练时对肝脏的分割结果可能会有不够准确的地方,为了避免由此产生的肝脏边界包围框不够准确,在第二卷积神经网络的输入中拼接了增强后的原始CT影像数据,使得第二卷积神经网络的输入含有比较齐全的用于病变分割的信息,故不会产生数据丢失或者数据不全面造成整个模型识别效果不高。第二卷积神经网络最后输出512*512*1的图像,即为0/1标签的CT断层判别结果。
参照图9,本申请另一实施例的病变监测装置,包括:
第一获取模块20,用于通过比较所述第二卷积神经网络的输出结果与所述第一卷积神经网络的输出结果,获取病变位置的病变信息。
本实施例通过识别病变部位完成肝脏病变类型的识别任务后,通过比较整个肝脏区域以及病变区域,以获取病变信息。本实施例的病变信息包括但不限于病变区域的数量、尺寸、分布占比以及边缘特性信息等分析数据,以进一步提高肝癌的诊断准确度。病变区域的数量、尺寸、分布占比以及边缘特性信息等分析数据直接显示了肝癌进展程度。举例地,肝S7/8表面局部隆突,内见一巨大不规则低密度影,大小约为73×68mm,境界不清,部分密度高于同层肝,边缘欠示欠清,可推测诊断为T3aN0M0IIIA期(病理分析结果,T1b表示多发肿瘤直径>5cm;N0M0表示无区域淋巴转移、无远处转移),结合有无淋巴转移,有无远处转移,可确诊是否T3aN0M0IIIA期。
进一步地,本实施例的病变监测装置,包括:
组建模块21,用于通过外部获取所述病变信息对应的病者身份信息,以与所述病变信息组建第一数据库。
本实施例的身份信息包括但不限于年龄、性别、职业、饮食喜好等。本实施例通过组建第一数据库,以提高人类区分年龄、性别、职业、饮食喜好等,有效在高发群体中进行有效监控,提高癌症防范的有效性。
进一步地,本实施例的病变监测装置,包括:
第二获取模块22,用于通过获取所述病变位置跟随时间的变化数据以及相应病者的生活信息,以寻找病变的利好因素。
本实施例的变化数据包括但不限于病变区域变大或减少、病变区域的个数减少或增多等信息。本实施例的生活信息包括但不限于饮食种类、数量及频次,用药种类、数量及频次,睡眠质量、时长及频次等。本实施例的利好因素表示有利于控制病症、减缓病症发展以及促进病症好转的因素。可将上述变化数据、生活信息以及利好因素组建成第二数据库,以便于综合快速地推进肝癌的优化治疗。
参照图10,本申请实施例中还提供一种计算机设备,该计算机设备可以是服务器,其内部结构可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设计的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储模型训练过程中需要的所有数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现病变监测方法。
上述处理器执行上述病变监测方法的步骤:将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
上述计算机设备,借助神经网络对原始CT影像中的肝脏特征及病变特征的学习,通过两个级联的全卷积神经网络建立CT切片与标签间的关系,分任务训练模型,以便尽快找到最优网络参数,完成模型训练,提高了医生的看病效率,提高病症分析的准确度;本申请的网络模型的上采样部分包括了拼接,拼接的目的是把最早的那些特征拉过来,采用跨层连接的方式,将前面数层的卷积输出拼接到后层输入里去,弥补当前层因为处于网络较深位置导致数据信息不足的问题,而且模型训练过程在每一步上采样中,叠加了在卷积步骤中相同维度的特征,防止卷积云深层网络中会出现梯度消失、信息丢失,通过较少的训练数据就得到精准的训练模型;通过训练模型对病症数据进行有效分类,形成分类数据库,提高肝癌的预防效果、诊断效率以及治疗效率,具有实用价值。
在一个实施例中,上述处理器将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤,包括:将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据;将所述特征数据输入所述第一卷积神经网络的上采样部分,以还原所述原始CT影像的尺寸并输出分割后的肝脏影像数据。
在一个实施例中,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;上述处理器将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据的步骤,包括:依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据。
在一个实施例中,依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤,包括:将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练原始CT影像的局部特征的一阶特征;将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练原始CT影像的局部特征的二阶特征;将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取所述原始CT影像的局部特征的优化特征;将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、所述第二卷积层以及所述最大池化层进行迭代,直到迭代次数达到第一指定次数。
在一个实施例中,所述第一卷积神经网络的卷积部分还包括丢弃层;依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤之后,包括:将所述原始CT影像的特征数据,输入到所述卷积部分的丢弃层,迭代丢弃第二指定次数,以输出所述原始CT影像的优化特征数据。
在一个实施例中,处理器将所述特征数据输入第一卷积神经网络的上采样部分,以还原原始CT影像的尺寸并输出分割后的肝脏影像数据的步骤,包括:将所述原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原所述原始CT影像的尺寸;将所述上采样层的输出数据与所述第一卷积层的一阶特征或所述第二卷积层的二阶特征通过拼接层拼接;将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
在一个实施例中,处理器将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤之前,包括:在所述原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像;将所述旋转图像经过指定的弹性变换计算,得到所述原始CT影像的形变图;将所述原始CT影像以及所述原始CT影像的形变图,规划为所述原始CT影像的样本数据。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定。
本申请一实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现病变监测方法,具体为:将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
上述计算机可读存储介质,借助神经网络对原始CT影像中的肝脏特征及病变特征的学习,通过两个级联的全卷积神经网络建立CT切片与标签间的关系,分任务训练模型,以便尽快找到最优网络参数,完成模型训练,提高了医生的看病效率,提高病症分析的准确度;本申请的网络模型的上采样部分包括了拼接,拼接的目的是把最早的那些特征拉过来,采用跨层连接的方式,将前面数层的卷积输出拼接到后层输入里去,弥补当前层因为处于网络较深位置导致数据信息不足的问题,而且模型训练过程在每一步上采样中,叠加了在卷积步骤中相同维度的特征,防止卷积云深层网络中会出现梯度消失、信息丢失,通过较少的训练数据就得到精准的训练模型;通过训练模型对病症数据进行有效分类,形成分类数据库,提高肝癌的预防效果、诊断效率以及治疗效率,具有实用价值。
在一个实施例中,上述处理器将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤,包括:将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据;将所述特征数据输入所述第一卷积神经网络的上采样部分,以还原所述原始CT影像的尺寸并输出分割后的肝脏影像数据。
在一个实施例中,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;上述处理器将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据的步骤,包括:依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据。
在一个实施例中,依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤,包括:将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练CT影像的局部特征的一阶特征;将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练CT影像的局部特征的二阶特征;将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取所述原始CT影像的局部特征的优化特征;将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、所述第二卷积层以及所述最大池化层进行迭代,直到迭代次数达到第一指定次数。。
在一个实施例中,所述第一卷积神经网络的卷积部分还包括丢弃层;依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤之后,包括:将所述原始CT影像的特征数据,输入到所述卷积部分的丢弃层,迭代丢弃第二指定次数,以输出所述原始CT影像的优化特征数据。
在一个实施例中,处理器将所述特征数据输入第一卷积神经网络的上采样部分,以还原原始CT影像的尺寸并输出分割后的肝脏影像数据的步骤,包括:将所述原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原所述原始CT影像的尺寸;将所述上采样层的输出数据与所述第一卷积层的一阶特征或所述第二卷积层的二阶特征通过拼接层拼接;将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
在一个实施例中,处理器将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤之前,包括:在原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像;将所述旋转图像经过指定的弹性变换计算,得到所述原始CT影像的形变图;将所述原始CT影像以及所述原始CT影像的形变图,规划为所述原始CT影像的样本数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,上述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的和实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双速据率SDRAM(SSRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(SYNCHLINK)、DRAM(SLDRAM)、存储器总线(RAMBUS)、直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
以上所述仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种病变监测方法,其特征在于,包括:
将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;
将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
2.根据权利要求1所述的病变监测方法,其特征在于,将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤,包括:
将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据;
将所述特征数据输入所述第一卷积神经网络的上采样部分,以还原所述原始CT影像的尺寸并输出分割后的肝脏影像数据。
3.根据权利要求2所述的病变监测方法,其特征在于,所述第一卷积神经网络的卷积部分包括第一卷积层、第二卷积层和最大池化层;
所述将原始CT影像的样本数据输入所述第一卷积神经网络的卷积部分,通过所述分割模型中预设的特征提取方式,提取原始CT影像中特征数据的步骤,包括:
依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据。
4.根据权利要求3所述的病变监测方法,其特征在于,所述依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤,包括:
将原始CT影像的样本数据输入卷积部分的第一卷积层,以训练所述原始CT影像的局部特征的一阶特征;
将所述原始CT影像的局部特征的一阶特征,输入到卷积部分的第二卷积层,以训练所述原始CT影像的局部特征的二阶特征;
将所述原始CT影像的局部特征的二阶特征,输入到卷积部分的最大池化层,以提取所述原始CT影像的局部特征的优化特征;
将所述原始CT影像的局部特征的优化特征作为所述原始CT影像的样本数据,依次经过所述第一卷积层、所述第二卷积层以及所述最大池化层进行迭代,直到迭代次数达到第一指定次数。
5.根据权利要求3或4所述的病变监测方法,其特征在于,所述第一卷积神经网络的卷积部分还包括丢弃层;
所述依次经过所述第一卷积层、第二卷积层以及最大池化层迭代第一指定次数,以输出所述原始CT影像的特征数据的步骤之后,包括:
将所述原始CT影像的特征数据,输入到所述卷积部分的丢弃层,迭代丢弃第二指定次数,以输出所述原始CT影像的优化特征数据。
6.根据权利要求4所述的病变监测方法,其特征在于,所述将所述特征数据输入第一卷积神经网络的上采样部分,以还原原始CT影像的尺寸并输出分割后的肝脏影像数据的步骤,包括:
将所述原始CT影像的特征数据,输入到上采样部分的上采样层,以逐步还原所述原始CT影像的尺寸;
将所述上采样层的输出数据与所述第一卷积层的一阶特征或所述第二卷积层的二阶特征通过拼接层拼接;
将所述拼接层和所述上采样层的输出数据输入第三卷积层,进行全CT影像信息融合,并输出分割后的肝脏影像数据。
7.根据权利要求1所述的病变监测方法,其特征在于,所述将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据的步骤之前,包括:
在所述原始CT影像上增加高斯噪音,并旋转指定角度范围,生成旋转图像;
将所述旋转图像经过指定的弹性变换计算,得到所述原始CT影像的形变图;
将所述原始CT影像以及所述原始CT影像的形变图,规划为所述原始CT影像的样本数据。
8.一种病变监测装置,其特征在于,包括:
第一输入输出模块,用于将原始CT影像的样本数据输入到预设的分割模型中进行分割运算,并输出分割后的肝脏影像数据;
第二输入输出模块,用于将原始CT影像的样本数据和分割后的所述肝脏影像数据输入到预设的识别模型中进行运算,并输出识别结果;
其中,所述分割模型和识别模型分别通过第一卷积神经网络和第二卷积神经网络训练得到,第一卷积神经网络和第二卷积神经网络级联设置。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810345253.0A CN108806793A (zh) | 2018-04-17 | 2018-04-17 | 病变监测方法、装置、计算机设备和存储介质 |
PCT/CN2018/095503 WO2019200753A1 (zh) | 2018-04-17 | 2018-07-12 | 病变监测方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810345253.0A CN108806793A (zh) | 2018-04-17 | 2018-04-17 | 病变监测方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108806793A true CN108806793A (zh) | 2018-11-13 |
Family
ID=64094369
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810345253.0A Pending CN108806793A (zh) | 2018-04-17 | 2018-04-17 | 病变监测方法、装置、计算机设备和存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN108806793A (zh) |
WO (1) | WO2019200753A1 (zh) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109346159A (zh) * | 2018-11-13 | 2019-02-15 | 平安科技(深圳)有限公司 | 病例图像分类方法、装置、计算机设备及存储介质 |
CN109685803A (zh) * | 2018-12-14 | 2019-04-26 | 深圳先进技术研究院 | 一种左心室图像分割方法、装置、设备及存储介质 |
CN109685810A (zh) * | 2018-12-18 | 2019-04-26 | 清华大学 | 一种基于深度学习的肝包虫病灶识别方法及系统 |
CN109685809A (zh) * | 2018-12-18 | 2019-04-26 | 清华大学 | 一种基于神经网络的肝包虫病灶分割方法及系统 |
CN109754403A (zh) * | 2018-11-29 | 2019-05-14 | 中国科学院深圳先进技术研究院 | 一种ct图像内的肿瘤自动分割方法及系统 |
CN110146678A (zh) * | 2019-05-30 | 2019-08-20 | 广东工业大学 | 一种结构损伤检测系统、方法、装置及可读存储介质 |
CN110265141A (zh) * | 2019-05-13 | 2019-09-20 | 上海大学 | 一种肝脏肿瘤ct影像计算机辅助诊断方法 |
CN111696084A (zh) * | 2020-05-20 | 2020-09-22 | 平安科技(深圳)有限公司 | 细胞图像分割方法、装置、电子设备及可读存储介质 |
CN111916206A (zh) * | 2020-08-04 | 2020-11-10 | 重庆大学 | 一种基于级联的ct影像辅助诊断系统 |
CN112465819A (zh) * | 2020-12-18 | 2021-03-09 | 平安科技(深圳)有限公司 | 图像异常区域检测方法、装置、电子设备及存储介质 |
CN112861876A (zh) * | 2021-01-25 | 2021-05-28 | 北京小白世纪网络科技有限公司 | 一种基于卷积神经网络的肝癌超声图自动识别方法和装置 |
CN113298752A (zh) * | 2020-02-06 | 2021-08-24 | 西门子医疗有限公司 | 用于自动表征患者的肝脏组织的方法、系统、程序和介质 |
CN113939844A (zh) * | 2019-10-31 | 2022-01-14 | 腾讯美国有限责任公司 | 基于多分辨率特征融合的用于在显微镜图像上检测组织病变的计算机辅助诊断系统 |
CN114093505A (zh) * | 2021-11-17 | 2022-02-25 | 山东省计算中心(国家超级计算济南中心) | 一种基于云边端架构的病理检测系统及方法 |
WO2022262109A1 (zh) * | 2021-06-18 | 2022-12-22 | 浙江大学 | 基于图卷积神经网络和迭代阈值收缩算法的心脏跨膜电位重建方法 |
CN116309582A (zh) * | 2023-05-19 | 2023-06-23 | 之江实验室 | 一种便携式超声扫描图像的识别方法、装置及电子设备 |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112365504A (zh) * | 2019-10-29 | 2021-02-12 | 杭州脉流科技有限公司 | Ct左心室分割方法、装置、设备和存储介质 |
CN110991254B (zh) * | 2019-11-08 | 2023-07-04 | 深圳大学 | 超声图像视频分类预测方法及系统 |
CN111080593B (zh) * | 2019-12-07 | 2023-06-16 | 上海联影智能医疗科技有限公司 | 一种图像处理装置、方法及存储介质 |
CN111126222A (zh) * | 2019-12-16 | 2020-05-08 | 山东工商学院 | 一种基于神经网络的穴盘苗空穴识别方法以及穴盘苗补苗系统 |
CN111145149B (zh) * | 2019-12-18 | 2023-04-28 | 佛山科学技术学院 | 一种基于深度学习的图像识别方法、装置及存储介质 |
CN113034425B (zh) * | 2019-12-25 | 2024-05-28 | 阿里巴巴集团控股有限公司 | 数据处理方法、设备及存储介质 |
CN111105412B (zh) * | 2019-12-30 | 2023-10-20 | 郑州大学 | 一种用于肠道息肉检测识别的智能辅助系统 |
CN111429452A (zh) * | 2020-04-15 | 2020-07-17 | 深圳市嘉骏实业有限公司 | 基于UNet卷积神经网络的膀胱超声图像分割方法及装置 |
CN111340805A (zh) * | 2020-04-16 | 2020-06-26 | 张东 | B超图像处理装置、脂肪肝b超图像处理装置及b超系统 |
CN111598870B (zh) * | 2020-05-15 | 2023-09-15 | 北京小白世纪网络科技有限公司 | 基于卷积神经网络端对端推理计算冠状动脉钙化比的方法 |
CN111627033B (zh) * | 2020-05-30 | 2023-10-20 | 郑州大学 | 一种难样本实例分割方法、设备及计算机可读存储介质 |
CN111724397B (zh) * | 2020-06-18 | 2024-04-16 | 上海应用技术大学 | 一种颅脑ct图像出血区域自动分割方法 |
CN111739004B (zh) * | 2020-06-22 | 2024-01-23 | 联想(北京)有限公司 | 图像处理方法、设备及存储介质 |
CN112200763B (zh) * | 2020-08-24 | 2024-08-06 | 江苏科技大学 | 一种基于肝脏ct影像的肝功能分级方法 |
CN112241948A (zh) * | 2020-09-23 | 2021-01-19 | 深圳视见医疗科技有限公司 | 一种自适应层厚的肺结节检测分析方法及系统 |
CN112785605B (zh) * | 2021-01-26 | 2023-07-28 | 西安电子科技大学 | 基于语义迁移的多时相ct图像肝肿瘤分割方法 |
CN113205141B (zh) * | 2021-05-08 | 2023-08-29 | 脉得智能科技(无锡)有限公司 | 一种基于图像融合技术的甲状旁腺识别方法 |
CN113487628B (zh) * | 2021-07-07 | 2024-02-23 | 广州市大道医疗科技有限公司 | 模型训练的方法及冠状血管识别方法、装置、设备和介质 |
CN113536575B (zh) * | 2021-07-20 | 2024-09-27 | 深圳市联影高端医疗装备创新研究院 | 器官轮廓勾画方法、医学影像系统以及存储介质 |
CN114088817B (zh) * | 2021-10-28 | 2023-10-24 | 扬州大学 | 基于深层特征的深度学习的平板陶瓷膜超声缺陷检测方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150213302A1 (en) * | 2014-01-30 | 2015-07-30 | Case Western Reserve University | Automatic Detection Of Mitosis Using Handcrafted And Convolutional Neural Network Features |
CN104992430A (zh) * | 2015-04-14 | 2015-10-21 | 杭州奥视图像技术有限公司 | 基于卷积神经网络的全自动的三维肝脏分割方法 |
CN106372390A (zh) * | 2016-08-25 | 2017-02-01 | 姹ゅ钩 | 一种基于深度卷积神经网络的预防肺癌自助健康云服务系统 |
CN106780460A (zh) * | 2016-12-13 | 2017-05-31 | 杭州健培科技有限公司 | 一种用于胸部ct影像的肺结节自动检测系统 |
CN107169955A (zh) * | 2017-04-26 | 2017-09-15 | 中国人民解放军总医院 | 一种智能化的医学图像处理装置与方法 |
CN107203989A (zh) * | 2017-04-01 | 2017-09-26 | 南京邮电大学 | 基于全卷积神经网络的端对端胸部ct图像分割方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017210690A1 (en) * | 2016-06-03 | 2017-12-07 | Lu Le | Spatial aggregation of holistically-nested convolutional neural networks for automated organ localization and segmentation in 3d medical scans |
CN107169974A (zh) * | 2017-05-26 | 2017-09-15 | 中国科学技术大学 | 一种基于多监督全卷积神经网络的图像分割方法 |
CN107492095A (zh) * | 2017-08-02 | 2017-12-19 | 西安电子科技大学 | 基于深度学习的医学图像肺结节检测方法 |
-
2018
- 2018-04-17 CN CN201810345253.0A patent/CN108806793A/zh active Pending
- 2018-07-12 WO PCT/CN2018/095503 patent/WO2019200753A1/zh active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150213302A1 (en) * | 2014-01-30 | 2015-07-30 | Case Western Reserve University | Automatic Detection Of Mitosis Using Handcrafted And Convolutional Neural Network Features |
CN104992430A (zh) * | 2015-04-14 | 2015-10-21 | 杭州奥视图像技术有限公司 | 基于卷积神经网络的全自动的三维肝脏分割方法 |
CN106372390A (zh) * | 2016-08-25 | 2017-02-01 | 姹ゅ钩 | 一种基于深度卷积神经网络的预防肺癌自助健康云服务系统 |
CN106780460A (zh) * | 2016-12-13 | 2017-05-31 | 杭州健培科技有限公司 | 一种用于胸部ct影像的肺结节自动检测系统 |
CN107203989A (zh) * | 2017-04-01 | 2017-09-26 | 南京邮电大学 | 基于全卷积神经网络的端对端胸部ct图像分割方法 |
CN107169955A (zh) * | 2017-04-26 | 2017-09-15 | 中国人民解放军总医院 | 一种智能化的医学图像处理装置与方法 |
Non-Patent Citations (1)
Title |
---|
苗光 等: ""二维和三维卷积神经网络相结合的CT图像肺结节检测方法"" * |
Cited By (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109346159A (zh) * | 2018-11-13 | 2019-02-15 | 平安科技(深圳)有限公司 | 病例图像分类方法、装置、计算机设备及存储介质 |
CN109346159B (zh) * | 2018-11-13 | 2024-02-13 | 平安科技(深圳)有限公司 | 病例图像分类方法、装置、计算机设备及存储介质 |
CN109754403A (zh) * | 2018-11-29 | 2019-05-14 | 中国科学院深圳先进技术研究院 | 一种ct图像内的肿瘤自动分割方法及系统 |
CN109685803A (zh) * | 2018-12-14 | 2019-04-26 | 深圳先进技术研究院 | 一种左心室图像分割方法、装置、设备及存储介质 |
CN109685810A (zh) * | 2018-12-18 | 2019-04-26 | 清华大学 | 一种基于深度学习的肝包虫病灶识别方法及系统 |
CN109685809A (zh) * | 2018-12-18 | 2019-04-26 | 清华大学 | 一种基于神经网络的肝包虫病灶分割方法及系统 |
CN109685809B (zh) * | 2018-12-18 | 2020-11-17 | 清华大学 | 一种基于神经网络的肝包虫病灶分割方法及系统 |
CN110265141A (zh) * | 2019-05-13 | 2019-09-20 | 上海大学 | 一种肝脏肿瘤ct影像计算机辅助诊断方法 |
CN110265141B (zh) * | 2019-05-13 | 2023-04-18 | 上海大学 | 一种肝脏肿瘤ct影像计算机辅助诊断方法 |
CN110146678A (zh) * | 2019-05-30 | 2019-08-20 | 广东工业大学 | 一种结构损伤检测系统、方法、装置及可读存储介质 |
CN113939844B (zh) * | 2019-10-31 | 2024-07-19 | 腾讯美国有限责任公司 | 检测组织病变的方法、装置和介质 |
CN113939844A (zh) * | 2019-10-31 | 2022-01-14 | 腾讯美国有限责任公司 | 基于多分辨率特征融合的用于在显微镜图像上检测组织病变的计算机辅助诊断系统 |
CN113298752A (zh) * | 2020-02-06 | 2021-08-24 | 西门子医疗有限公司 | 用于自动表征患者的肝脏组织的方法、系统、程序和介质 |
US11861827B2 (en) | 2020-02-06 | 2024-01-02 | Siemens Healthcare Gmbh | Techniques for automatically characterizing liver tissue of a patient |
CN111696084B (zh) * | 2020-05-20 | 2024-05-31 | 平安科技(深圳)有限公司 | 细胞图像分割方法、装置、电子设备及可读存储介质 |
CN111696084A (zh) * | 2020-05-20 | 2020-09-22 | 平安科技(深圳)有限公司 | 细胞图像分割方法、装置、电子设备及可读存储介质 |
CN111916206B (zh) * | 2020-08-04 | 2023-12-08 | 重庆大学 | 一种基于级联的ct影像辅助诊断系统 |
CN111916206A (zh) * | 2020-08-04 | 2020-11-10 | 重庆大学 | 一种基于级联的ct影像辅助诊断系统 |
CN112465819A (zh) * | 2020-12-18 | 2021-03-09 | 平安科技(深圳)有限公司 | 图像异常区域检测方法、装置、电子设备及存储介质 |
CN112465819B (zh) * | 2020-12-18 | 2024-06-18 | 平安科技(深圳)有限公司 | 图像异常区域检测方法、装置、电子设备及存储介质 |
CN112861876A (zh) * | 2021-01-25 | 2021-05-28 | 北京小白世纪网络科技有限公司 | 一种基于卷积神经网络的肝癌超声图自动识别方法和装置 |
WO2022262109A1 (zh) * | 2021-06-18 | 2022-12-22 | 浙江大学 | 基于图卷积神经网络和迭代阈值收缩算法的心脏跨膜电位重建方法 |
CN114093505A (zh) * | 2021-11-17 | 2022-02-25 | 山东省计算中心(国家超级计算济南中心) | 一种基于云边端架构的病理检测系统及方法 |
CN116309582A (zh) * | 2023-05-19 | 2023-06-23 | 之江实验室 | 一种便携式超声扫描图像的识别方法、装置及电子设备 |
CN116309582B (zh) * | 2023-05-19 | 2023-08-11 | 之江实验室 | 一种便携式超声扫描图像的识别方法、装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2019200753A1 (zh) | 2019-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108806793A (zh) | 病变监测方法、装置、计算机设备和存储介质 | |
US11491350B2 (en) | Decision support system for individualizing radiotherapy dose | |
US20230368888A1 (en) | Decision support system for medical therapy planning | |
CN113313234B (zh) | 用于图像分割的神经网络系统和方法 | |
Pitchai et al. | RETRACTED ARTICLE: Brain Tumor Segmentation Using Deep Learning and Fuzzy K-Means Clustering for Magnetic Resonance Images | |
US10347010B2 (en) | Anomaly detection in volumetric images using sequential convolutional and recurrent neural networks | |
CN112270660B (zh) | 基于深度神经网络的鼻咽癌放疗靶区自动分割方法 | |
CN108764241A (zh) | 分割股骨近端的方法、装置、计算机设备和存储介质 | |
WO2019238804A1 (en) | Localization and classification of abnormalities in medical images | |
Ypsilantis et al. | Recurrent convolutional networks for pulmonary nodule detection in CT imaging | |
Fashandi et al. | An investigation of the effect of fat suppression and dimensionality on the accuracy of breast MRI segmentation using U‐nets | |
KR102280047B1 (ko) | 딥 러닝 기반 종양 치료 반응 예측 방법 | |
Tummala et al. | Liver tumor segmentation from computed tomography images using multiscale residual dilated encoder‐decoder network | |
Barrowclough et al. | Binary segmentation of medical images using implicit spline representations and deep learning | |
Sahu et al. | Structure correction for robust volume segmentation in presence of tumors | |
EP4266251A1 (en) | Representation learning for organs at risk and gross tumor volumes for treatment response predicition | |
CN113035334A (zh) | 鼻腔nkt细胞淋巴瘤放疗靶区自动勾画方法和装置 | |
Korez et al. | Segmentation of pathological spines in CT images using a two-way CNN and a collision-based model | |
Guttulsrud | Generating Synthetic Medical Images with 3D GANs | |
Francis et al. | SABOS‐Net: Self‐supervised attention based network for automatic organ segmentation of head and neck CT images | |
CN116129184A (zh) | 多期相病灶分类方法、装置、设备及可读存储介质 | |
Chen et al. | Hybrid‐attention densely connected U‐Net with GAP for extracting livers from CT volumes | |
Tyagi et al. | Predicting lung cancer treatment response from CT images using deep learning | |
Rahman et al. | ADBNet: An Attention-Guided Deep Broad Convolutional Neural Network for the Classification of Breast Cancer Histopathology Images | |
Seo et al. | Spatial Feature Conservation Networks (SFCNs) for Dilated Convolutions to Improve Breast Cancer Segmentation from DCE-MRI |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181113 |
|
RJ01 | Rejection of invention patent application after publication |