CN103345576B - 基于四模态医学影像的病例库诊断系统 - Google Patents
基于四模态医学影像的病例库诊断系统 Download PDFInfo
- Publication number
- CN103345576B CN103345576B CN201310256816.6A CN201310256816A CN103345576B CN 103345576 B CN103345576 B CN 103345576B CN 201310256816 A CN201310256816 A CN 201310256816A CN 103345576 B CN103345576 B CN 103345576B
- Authority
- CN
- China
- Prior art keywords
- case
- image
- storehouse
- module
- follow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003745 diagnosis Methods 0.000 claims abstract description 62
- 201000010099 disease Diseases 0.000 claims abstract description 36
- 238000002603 single-photon emission computed tomography Methods 0.000 claims abstract description 30
- 238000004891 communication Methods 0.000 claims abstract description 14
- 239000000284 extract Substances 0.000 claims description 12
- 230000000875 corresponding Effects 0.000 claims description 10
- 230000001575 pathological Effects 0.000 claims description 9
- 230000011218 segmentation Effects 0.000 claims description 6
- 230000002596 correlated Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 claims description 5
- 231100000915 pathological change Toxicity 0.000 claims description 5
- 230000036285 pathological change Effects 0.000 claims description 5
- 230000003044 adaptive Effects 0.000 claims description 3
- 230000001808 coupling Effects 0.000 claims description 3
- 238000010168 coupling process Methods 0.000 claims description 3
- 238000005859 coupling reaction Methods 0.000 claims description 3
- 230000001419 dependent Effects 0.000 claims description 3
- 238000001514 detection method Methods 0.000 abstract description 3
- 208000008128 Pulmonary Tuberculosis Diseases 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 210000004369 Blood Anatomy 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000002452 interceptive Effects 0.000 description 1
Abstract
本发明提供一种基于四模态医学影像的病例库诊断系统，包括：CT图像设备、PET图像设备、SPET图像设备、FMI图像设备、图像采集模块、网络通信模块和终端处理器，图像采集模块输入端分别与CT图像设备、PET图像设备、SPET图像设备、FMI图像设备连接，输出端连接网络通信模块，图像采集模块采集四模态医学影像，并将四路图像信号封装成一个视频流发送至网络通信模块，网络通信模块分别与图像采集模块和终端处理器连接，用以将接收到的视频流发送至终端处理器，终端处理器通过对医学图像与特征库的相似度检测来诊断疾病并建立病例库。本发明具有准确度高，误诊、漏诊率小的优点，能建立完善的病例库系统，具有广阔的应用前景。
Description
技术领域
本发明涉及医学图像诊断技术领域，具体地，涉及一种基于四模态医学影像的病例库诊断系统。
背景技术
CT、PET图像是对病人的疾病进行诊断的重要依据，由于CT、PET检查通常是对患者的全身进行检查，因此获得的图像数据量很大。目前，对于拍摄完成的CT、PET图像，都是由医生直接通过肉眼观察进行疾病诊断，医生在进行诊断时，由于图像数据量大，加上人眼对图像的识别能力有限，不可避免的会出现误诊、漏诊等各种情况，对患者治疗的准确性留下了很大的隐患。另外，现有病理特征库仅包括由医学专家对相关特征明显的病例进行手工标注注明的患病情况和病理图像特征以辅助医生诊断，病例库形式单一、信息不全面且无法及时更新，更新周期长，导致病例库辅助诊断效率低。
发明内容
针对现有技术中的缺陷，本发明的目的是提供一种基于四模态医学影像的病例库诊断系统。
根据本发明的一个方面，提供一种基于四模态医学影像的病例库诊断系统，包括：CT图像设备、PET图像设备、SPET图像设备、FMI图像设备、图像采集模块、网络通信模块和终端处理器，图像采集模块输入端分别与CT图像设备、PET图像设备、SPET图像设备、FMI图像设备连接，输出端连接网络通信模块，图像采集模块采集CT、PET、SPET、FMI四模态医学影像，并将四路图像信号封装成一个视频流发送至网络通信模块，网络通信模块分别与图像采集模块和终端处理器连接，用以将接收到的视频流发送至终端处理器，终端处理器进一步包括：
自动诊断模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别，并与疾病特征库中存储的病例特征进行相似度计算，以对疾病作出诊断，若待诊病例的特征与疾病特征库中存储的病例特征相似度达到预先设定的阈值，则将待诊病例存储至确诊病例库，若待诊病例的特征与疾病特征库中存储的病例特征相似度没有达到预先设定的阈值，则将待诊病例存储至不能确诊病例库；
人工诊断模块：用以对自动诊断模块不能诊断的疾病为医生作出参考，检索疾病的图像、病征，并检测病变部位的长度、面积指标，协助医生诊断，若能够确诊则将待诊病例存储至确诊病例库，若不能确诊则将待诊病例存储至疑难病例库；
疾病特征库：存储由医学专家对相关特征明显的病例进行手工标注并且注明的患病情况，并自动提取相关特征明显的患病区域的病理图像特征，按照病理图像特征建立待匹配的特征向量列表并且计算出相关阈值条件并存储；
待诊病例库：用以存储待诊断的病例图像信息；
确诊病例库：用以存储确诊的病例信息；
不能确诊病例库：用以存储自动诊断模块不能确诊的病例图像信息；以及，
疑难病例库：用以存储人工诊断模块不能确诊的病例信息。
优选地，自动诊断模块进一步包括特征提取模块和对比模块，其中，
特征提取模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别；
对比模块：用以给出疾病特征库中与病例特征最相似的若干病例，并量化相似度，进行相似度计算，若相似度达到预定的阈值，则待诊病例诊断为与疾病特征库最相似病例一样的疾病，将待诊病例存储至确诊病例库，并提取病变大小、位置、灰度、长宽比等图像特征，将这些特征与该图像一起更新疾病特征库；若似度没有达到预定阈值的，则将待诊病例存储至不能确诊病例库。
优选地，特征识别为：通过对PET、SPET、FMT三种图像的高亮区域进行提取，标记为异常病理区域，按照该区域所在的层数，提取相应的CT图像进行分析，对该CT图像进行自适应的阈值分割，求取分割后的二值图像，并且计算该二值图像的连通区域，按照特征库模版中的向量特征，分别计算面积、长度、长宽比、圆率以及灰度均值指标，作为待评价的特征向量。
优选地，相似度计算为：相似度计算为使用待诊病例相应的特征向量与特征库模版中的向量组进行匹配，计算向量间的MSD值(平均平方误差)，相似度定义为1-MSD，用百分比表示出来。
优选地，该基于四模态医学影像的病例库诊断系统还包括：特征库更新模块，特征库更新模块与对比模块和疾病特征库连接，用以将病例图像和对比模块提取的图像特征更新至疾病特征库。
优选地，预定的相似度阈值为86％。
优选地，该基于CT、PET、SPET、FMI四模态医学影像的病例库诊断系统还包括：
解码模块：用以对视频流图像信号进行解码处理，解包分离出CT、PET、SPET、FMI四模态医学影像信号并将图像信号转换为相应的图像格式发送至图像显示模块和待诊病例库；
图像显示模块：与解码模块连接，用以显示接收到的图像。
优选地，解码模块将CT、PET、SPET、FMI四模态医学影像信号转换为dicom格式。
与现有技术相比，本发明具有如下的有益效果：本发明依据CT图像、PET图像、SPET图像和FMI图像建立基于四模态医学影像自动诊断疾病的诊断系统，通过布置在图像获取设备上的网络系统采集病人的医学影像，通过对医学图像与特征库的相似度检测来诊断疾病并建立病例库系统，病例库系统信息全面、实时更新，辅助诊断效率高，充分利用计算机弥补了人工诊断的诸多缺陷。与现有技术相比，本发明具备准确度高，误诊、漏诊率小的优点，并能建立完善的病例库系统，具有广阔的应用前景。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1为本发明基于四模态医学影像的病例库诊断系统的结构原理图；
图2为本发明采用自动诊断模块对肺结核病做出的诊断示意图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进。这些都属于本发明的保护范围。
请参阅图1，一种基于四模态医学影像的病例库诊断系统，包括：CT图像设备、PET图像设备、SPET图像设备、FMI图像设备、图像采集模块、网络通信模块和终端处理器，图像采集模块输入端分别与CT图像设备、PET图像设备、SPET图像设备、FMI图像设备连接，输出端连接网络通信模块，图像采集模块采集CT、PET、SPET、FMI四模态医学影像，并将四路图像信号封装成一个视频流发送至网络通信模块，网络通信模块分别与图像采集模块和终端处理器连接，用以将接收到的视频流发送至终端处理器，终端处理器进一步包括：
自动诊断模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别，并与疾病特征库中存储的病例特征进行相似度计算，以对疾病作出诊断，若相似度达到预先设定的阈值，则将将该病例特征存储至确诊病例库，若相似度没有达到预先设定的阈值，则将该病例特征存储至不能确诊病例库。
具体地，特征识别为：通过对PET、SPET、FMT三种图像的高亮区域进行提取，标记为异常病理区域，按照该区域所在的层数，提取相应的CT图像进行分析。对该CT图像进行自适应的阈值分割，求取分割后的二值图像，并且计算该二值图像的连通区域。按照特征库模版中的向量特征，分别计算面积、长度、长宽比、圆率、灰度均值等指标，作为待评价的特征向量进行后续的匹配操作。
具体地，相似度计算为：相似度计算使用待诊病例相应的特征向量与特征库模版中的向量组进行匹配，计算向量间的MSD值(平均平方误差)，相似度定义为1-MSD，用百分比表示出来。
人工诊断模块：用以对自动诊断模块不能诊断的疾病为医生作出参考，检索疾病的图像、病征，并检测病变部位的长度、面积指标，协助医生诊断，若能够确诊则将该病例存储至确诊病例库，若不能确诊则将该病例存储至疑难病例库。
疾病特征库：存储由医学专家对相关特征明显的病例进行手工标注并且注明的患病情况，并自动提取该患病区域的病理图像特征，按照该特征建立待匹配的特征向量列表并且计算出相关阈值条件并存储。
待诊病例库：用以存储待诊断的病例图像信息。确诊病例库：用以存储确诊的病例信息。不能确诊病例库：用以存储自动诊断模块不能确诊的病例图像信息。疑难病例库：用以存储人工诊断模块不能确诊的病例信息。
进一步地，自动诊断模块进一步包括特征提取模块和对比模块，其中，特征提取模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别。对比模块：用以给出疾病特征库中与病例特征最相似的若干病例，并量化相似度，进行相似度计算，若相似度达到预定的阈值，则该病例诊断为与疾病特征库最相似病例一样的疾病，将该病例存储至确诊病例库，并提取病变大小、位置、灰度、长宽比等图像特征，将这些特征与该图像一起更新疾病特征库；若相似度没有达到预定阈值的，则将该病例存储至不能确诊病例库。
进一步地，预定的相似度阈值为86％。
进一步地，本发明还包括：特征库更新模块、解码模块和图像显示模块。特征库更新模块与对比模块和疾病特征库连接，用以将病例图像对比模块提取的图像特征更新至疾病特征库。解码模块用以对视频流图像信号进行解码处理，解包分离出CT、PET、SPET、FMI四模态医学影像信号并将图像信号转换为相应的图像格式发送至图像显示模块和待诊病例库。图像显示模块与解码模块连接，用以显示接收到的图像。
具体地，解码模块将CT、PET、SPET、FMI四模态医学影像信号转换为dicom格式，待诊病例库存储的医学图像全部为dicom格式。
综上，图像采集模块负责采集图像并将图像分类汇总到待诊病例库中，以待后面的模块使用；自动诊断模块可以对四个模态的图像进行特征识别，并与特征库中汇总的特征进行相似度计算，进而对疾病作出诊断；自动诊断模块的对比模块可以方便医生查看特征的匹配、病变图像与特征库中的典型图像的对比情况，同时可以给出诊断为确诊疾病的依据；人工诊断模块可以为医生对系统不能自动诊断的疾病作出参考，该模块具备检索疾病的图像、病征，及提供检测病变部位的长度、面积等指标检测的功能，协助医生诊断。
具体地，本发明的工作过程为：先由图像采集模块通过网络系统和图像设备采集病人的四模态医学图像，并汇总和整理到待诊病例库中。医生通过自动诊断模块调用疾病特征库对待诊病例进行诊断；在自动诊断过程中，系统的对比模块会给出疾病特征库中与病例最相似的若干病例，并量化相似度。如果相似度达到预定的阈值，则该病例诊断为与疾病特征库最相似病例一样的疾病，并将该病例归入确诊病例库，之后提取病变大小、位置、灰度、长宽比等图像特征，将这些特征与该图像一起归入疾病特征库；相似度没有达到预定阈值的，系统将其归入不能确诊病例库，留待医生使用人工诊断模块进行诊断，确诊之后亦归入确诊病例库，并提取特征录入疾病特征库。如果还不能确诊，则将病例归入疑难病例库，留待该医学影像专家诊断。本发明诊断准确率高，且能够建立完善的病例库系统，在医学图像的诊断方面有重要参考价值。
如图2所示，其为本发明采用自动诊断模块对肺结核病做出的诊断示意图。如图所示，自动诊断模块实现对肺结核的无人工干涉的快速诊断，从特征提取到查找最后的确诊病例，实现了自动化的操作，图中黑色线圈代表患病区域。
本发明依据CT图像、PET图像、SPET图像和FMI图像建立基于四模态医学影像自动诊断疾病的诊断系统，通过布置在图像获取设备上的网络系统采集病人的医学影像，通过对医学图像与特征库的相似度检测来诊断疾病并建立病例库系统，病例库系统信息全面、实时更新，辅助诊断效率高，充分利用计算机弥补了人工诊断的诸多缺陷。与现有技术相比，本发明具备准确度高，误诊、漏诊率小的优点，并能建立完善的病例库系统，具有广阔的应用前景。
以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变形或修改，这并不影响本发明的实质内容。
Claims (6)
1.一种基于四模态医学影像的病例库诊断系统，其特征在于，包括：CT图像设备、PET图像设备、SPET图像设备、FMI图像设备、图像采集模块、网络通信模块和终端处理器，所述图像采集模块输入端分别与所述CT图像设备、PET图像设备、SPET图像设备、FMI图像设备连接，输出端连接所述网络通信模块，所述图像采集模块采集CT、PET、SPET、FMI四模态医学影像，并将CT、PET、SPET、FMI四模态医学影像对应的四路图像信号封装成一个视频流发送至所述网络通信模块，所述网络通信模块分别与所述图像采集模块和终端处理器连接，用以将接收到的视频流发送至所述终端处理器，所述终端处理器进一步包括：
自动诊断模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别，并与疾病特征库中存储的病例特征进行相似度计算，以对疾病作出诊断，若待诊病例的特征与疾病特征库中存储的病例特征相似度达到预先设定的阈值，则将待诊病例存储至确诊病例库，若待诊病例的特征与疾病特征库中存储的病例特征相似度没有达到预先设定的阈值，则将待诊病例存储至不能确诊病例库；
人工诊断模块：用以对自动诊断模块不能诊断的疾病为医生作出参考，检索疾病的图像、病征，并检测病变部位的长度、面积指标，协助医生诊断，若能够确诊则将待诊病例存储至确诊病例库，若不能确诊则将待诊病例存储至疑难病例库；
疾病特征库：存储由医学专家对相关特征明显的病例进行手工标注并且注明的患病情况，并自动提取相关特征明显的患病区域的病理图像特征，按照病理图像特征建立待匹配的特征向量列表并且计算出相关阈值条件并存储；
待诊病例库：用以存储待诊断的病例图像信息；
确诊病例库：用以存储确诊的病例信息；
不能确诊病例库：用以存储自动诊断模块不能确诊的病例图像信息；以及，
疑难病例库：用以存储人工诊断模块不能确诊的病例信息；
所述自动诊断模块进一步包括特征提取模块和对比模块，其中，
特征提取模块：用以对CT、PET、SPET、FMI四模态医学影像进行特征识别；
对比模块：用以给出疾病特征库中与病例特征最相似的若干病例，并量化相似度，进行相似度计算，若相似度达到预定的阈值，则待诊病例诊断为与疾病特征库最相似病例一样的疾病，将待诊病例存储至确诊病例库，并提取病变大小、位置、灰度、长宽比图像特征，将这些特征与该图像一起更新疾病特征库；若相似度没有达到预定阈值的，则将待诊病例存储至不能确诊病例库；
所述相似度计算为：相似度计算使用待诊病例相应的特征向量与特征库模版中的向量组进行匹配，计算向量间的MSD值，相似度定义为1-MSD，以百分比表示。
2.根据权利要求1所述的基于四模态医学影像的病例库诊断系统，其特征在于，所述特征识别为：通过对PET、SPET、FMT三种图像的高亮区域进行提取，标记为异常病理区域，按照该区域所在的层数，提取相应的CT图像进行分析，对该CT图像进行自适应的阈值分割，求取分割后的二值图像，并且计算该二值图像的连通区域，按照疾病特征库中的向量特征，分别计算面积、长度、长宽比、圆率以及灰度均值指标，作为待评价的特征向量。
3.根据权利要求1所述的基于四模态医学影像的病例库诊断系统，其特征在于，还包括：特征库更新模块，所述特征库更新模块与所述对比模块和疾病特征库连接，用以将病例图像和所述对比模块提取的图像特征更新至所述疾病特征库。
4.根据权利要求1所述的基于四模态医学影像的病例库诊断系统，其特征在于，所述预定的相似度阈值为86％。
5.根据权利要求1所述的基于四模态医学影像的病例库诊断系统，其特征在于，还包括：
解码模块：用以对视频流图像信号进行解码处理，解包分离出CT、PET、SPET、FMI四模态医学影像信号并将图像信号转换为相应的图像格式发送至图像显示模块和所述待诊病例库；
图像显示模块：与所述解码模块连接，用以显示接收到的图像。
6.根据权利要求5所述的基于四模态医学影像的病例库诊断系统，其特征在于，所述解码模块将CT、PET、SPET、FMI四模态医学影像信号转换为dicom格式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310256816.6A CN103345576B (zh) | 2013-06-25 | 基于四模态医学影像的病例库诊断系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310256816.6A CN103345576B (zh) | 2013-06-25 | 基于四模态医学影像的病例库诊断系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103345576A CN103345576A (zh) | 2013-10-09 |
| CN103345576B true CN103345576B (zh) | 2016-11-30 |
Family
ID=
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101903888A (zh) * | 2007-12-21 | 2010-12-01 | 皇家飞利浦电子股份有限公司 | 用于基于跨模态病例的计算机辅助诊断的方法和系统 |
| CN102164273A (zh) * | 2011-04-20 | 2011-08-24 | 上海交通大学 | 手术室医学信息重构与交互系统 |
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101903888A (zh) * | 2007-12-21 | 2010-12-01 | 皇家飞利浦电子股份有限公司 | 用于基于跨模态病例的计算机辅助诊断的方法和系统 |
| CN102164273A (zh) * | 2011-04-20 | 2011-08-24 | 上海交通大学 | 手术室医学信息重构与交互系统 |
Non-Patent Citations (4)
| Title |
|---|
| "DICOM医学图像扩展模型的研究";王勇等;《中国生物医学工程学报》;20050228;第24卷(第1期);第89-92页 * |
| "基于内容的医学图像检索技术";王辅之;《淮阴工学院学报》;20071031;第16卷(第5期);第43-47页 * |
| "基于案例推理的脑血管病辅助诊断智能系统的设计";李锋刚等;《中医药学刊》;20060228;第24卷(第2期);第260-262页 * |
| "多模态影像脑部疾病检索研究";黎维娟;《中国优秀硕士学位论文全文数据库 信息科技辑》;20110415;第2011年卷(第4期);第I138-1144页 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020207377A1 (zh) | 一种图像识别模型训练及图像识别方法、装置及系统 | |
| WO2021093448A1 (zh) | 图像处理方法、装置、服务器、医疗图像处理设备及存储介质 | |
| US20210174505A1 (en) | Method and system for imaging and analysis of anatomical features | |
| CN111310851A (zh) | 一种人工智能超声辅助系统及其应用 | |
| US20170061608A1 (en) | Cloud-based pathological analysis system and method | |
| CN109009102B (zh) | 一种基于脑电图深度学习的辅助诊断方法及系统 | |
| CN109615633A (zh) | 一种基于深度学习的肠镜下克罗恩病辅助诊断系统及方法 | |
| US20050075537A1 (en) | Method and system for real-time automatic abnormality detection for in vivo images | |
| CN103324852A (zh) | 基于特征匹配的四模态医学影像诊断系统 | |
| US20210090248A1 (en) | Cervical cancer diagnosis method and apparatus using artificial intelligence-based medical image analysis and software program therefor | |
| CN108806776A (zh) | 一种基于深度学习的多模态医学影像的方法 | |
| KR102531400B1 (ko) | 인공 지능 기반 대장 내시경 영상 진단 보조 시스템 및 방법 | |
| WO2019098415A1 (ko) | 자궁경부암에 대한 피검체의 발병 여부를 판정하는 방법 및 이를 이용한 장치 | |
| CN103975364A (zh) | 针对宫颈的光学检查的图像选择 | |
| CN112802000A (zh) | 多模态医学影像智能辅助诊疗系统 | |
| CN111079901A (zh) | 基于小样本学习的急性脑卒中病变分割方法 | |
| CN109460717A (zh) | 消化道共聚焦激光显微内镜病变图像识别方法及装置 | |
| CN115019049A (zh) | 基于深度神经网络的骨显像骨病灶分割方法、系统及设备 | |
| CN115082448A (zh) | 肠道清洁度评分方法、装置和计算机设备 | |
| CN107977958A (zh) | 一种图像诊断方法和装置 | |
| Ghosh et al. | Block based histogram feature extraction method for bleeding detection in wireless capsule endoscopy | |
| Al Mamun et al. | Discretion way for bleeding detection in wireless capsule endoscopy images | |
| CN108960305A (zh) | 一种内镜影像判定系统及方法 | |
| CN105512473A (zh) | 一种阴道镜图像的智能识别方法及装置 | |
| CN109493340A (zh) | 一种胃镜下食管胃底静脉曲张辅助诊断系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant |