CN111000589A - 一种三维超声辅助birads辅助诊断系统 - Google Patents
一种三维超声辅助birads辅助诊断系统 Download PDFInfo
- Publication number
- CN111000589A CN111000589A CN201811166446.6A CN201811166446A CN111000589A CN 111000589 A CN111000589 A CN 111000589A CN 201811166446 A CN201811166446 A CN 201811166446A CN 111000589 A CN111000589 A CN 111000589A
- Authority
- CN
- China
- Prior art keywords
- birads
- tumors
- images
- grading
- tumor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 21
- 238000002604 ultrasonography Methods 0.000 title claims abstract description 17
- 206010028980 Neoplasm Diseases 0.000 claims abstract description 51
- 210000000481 breast Anatomy 0.000 claims abstract description 21
- 238000000034 method Methods 0.000 claims abstract description 14
- 238000001514 detection method Methods 0.000 claims abstract description 10
- 238000012549 training Methods 0.000 claims description 15
- 230000003902 lesion Effects 0.000 claims description 9
- 238000013526 transfer learning Methods 0.000 claims description 8
- 230000003211 malignant effect Effects 0.000 claims description 7
- 231100000915 pathological change Toxicity 0.000 claims description 6
- 230000036285 pathological change Effects 0.000 claims description 6
- 239000013598 vector Substances 0.000 claims description 6
- 230000004927 fusion Effects 0.000 claims description 4
- 201000010099 disease Diseases 0.000 claims description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 3
- 230000006870 function Effects 0.000 claims description 3
- 238000013508 migration Methods 0.000 claims description 3
- 230000005012 migration Effects 0.000 claims description 3
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000001574 biopsy Methods 0.000 description 3
- 206010006187 Breast cancer Diseases 0.000 description 2
- 208000026310 Breast neoplasm Diseases 0.000 description 2
- 238000013399 early diagnosis Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000036210 malignancy Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004083 survival effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5292—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves using additional data, e.g. patient information, image labeling, acquisition parameters
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Medical Informatics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明公开了一种三维超声辅助BIRADS辅助诊断系统，其具体工作流程如下：自动检测，利用已经存在的计算机自动检测系统来获得同一个乳房不同位置图像的所有可能的肿瘤；诊断，读片工作站展示同一个乳房的不同位置图像，使用者在读片过程中，发现了可疑肿瘤，点击该肿瘤，使用计算机分级系统给出该肿瘤BIRADS分级；自动配对；图像数据搜索。本发明的辅助系统在使用时，当医生点击某一个三维图像的肿瘤时候，该系统能反馈给医生这个肿瘤的BIRADS分级，同时该系统会自动显示同一乳房上的其他位置的对应的同一个肿瘤的BIRADS分级；且该系统会自动从数据库中搜寻类似病例，帮助医生给出最终的BIRADS级别。
Description
技术领域
本发明涉及一种诊断系统，具体是一种三维超声辅助BIRADS辅助诊断系统。
背景技术
目前女性乳腺癌发病率死亡率急剧上升，及时早期诊断可以提高存活率，因此女性的乳腺癌早期诊断和定期体检的意识都在提升。超声图像不受致密性乳房影响，可以很好地在致密组织中找到肿瘤。医生在确定一个肿瘤的位置后，需要根据图像信息，给出BIRADS分级(0-5)。分级将决定这个肿瘤是否被活检。目前BIRADS4a以上的肿瘤需要活检，但是活检结果往往良性肿瘤占百分之75。不必要的活检对女性增加了心理负担。而漏诊的癌症具有生命危险。
现有的辅助诊断只有良恶性判断系统，是基于人工计算的图像特征(形状，后端阴影，边界等等)通过一个分类器来给出一个肿瘤的恶性程度。而且，现有的技术方案是在二维超声图像上使用迁移学习的方法进行图像的分类，但在三维乳腺超声图像上还缺乏相关的研究，也没有进行多切片信息融合的分类方法。因此，本领域技术人员提供了一种三维超声辅助BIRADS辅助诊断系统，以解决上述背景技术中提出的问题。
发明内容
本发明的目的在于提供一种三维超声辅助BIRADS辅助诊断系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：
一种三维超声辅助BIRADS辅助诊断系统，其具体工作流程如下：
步骤1：调用自动检测系统
调用已经存在的计算机自动检测系统来自动找出同一个乳房不同位置图像的所有可能的肿瘤；
步骤2：诊断
读片工作站展示同一个乳房的不同位置图像，使用者在读片过程中，发现了可疑肿瘤，点击该肿瘤，使用计算机分级系统给出该肿瘤BIRADS分级；
步骤3：自动配对
3.1、运用计算机分级系统计算出之前检测系统所找出所有可能肿瘤的特征向量(Vimage)以及BIRADS分级；
3.2、计算用户选择肿瘤和同一乳房不同位置的肿瘤的相似度，相似度定位为两对特征向量的模的求反；
3.3、如果相似度大于一个阈值，则认为其他位置图像上的肿瘤是和用户指定位置的肿瘤为同一个肿瘤，显示配对的肿瘤，且利用计算机分级系统给出配对成功的肿瘤的BIRADS分级；
步骤4：图像数据搜索
用户可以主动或者被动使用搜寻类似病例功能，其为利用之前计算机分级系统计算出的图像特征Vimage，来比对数据库里已经存在的大量数据，找到最相似的n个病例，并将图像和对应的良恶性的信息一同在工作站站上显示给用户，用户可以结合自己的判断给出最终的诊断。
作为本发明再进一步的方案：所述计算机分级系统具体实现方式如下：
(1)对含有乳腺病变的三维乳腺超声图像进行预处理，截取出每个病变在横截面和冠状面方向上不同位置的的多张二维图像，并将图像缩放到统一尺寸；
(2)建立迁移学习模型，引入在ImageNet数据集上训练好的InceptionV3模型，去掉其全连接层，加入新的全连接层，用于良恶性的二分类问题；
(3)将步骤(1)中处理后的横截面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于横截面图像分类的模型；
(4)将步骤(1)中处理后的冠状面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于冠状面图像分类的模型；
(5)将病变的多张横截面切片输入步骤(3)中训练好的模型中，将多张冠状面切片输入步骤(4)中训练好的模型中，将得到的所有切片的预测概率进行平均融合，输出该病变的分类结果。
作为本发明再进一步的方案：所述步骤(1)中在病变的不同位置的横截面上取三张ROI，冠状面上取三张ROI，图像统一缩放到140×140像素。
作为本发明再进一步的方案：所述步骤(2)中新增两层全连接层，第一层的节点数为256，第二层的节点数为2。
作为本发明再进一步的方案：所述步骤(3)和(4)中的训练方法是开放所有层的参数进行调整。
与现有技术相比，本发明的有益效果是：
本发明的辅助系统在使用时，当医生点击某一个三维图像的肿瘤时候，该系统能反馈给医生这个肿瘤的BIRADS分级，同时该系统会自动显示同一乳房上的其他位置的对应的同一个肿瘤的BIRADS分级；且该系统会自动从数据库中搜寻类似病例，帮助医生给出最终的BIRADS级别。
附图说明
图1为一种三维超声辅助BIRADS辅助诊断系统中计算机自动分级系统的流程图。
图2为一种三维超声辅助BIRADS辅助诊断系统中计算机自动分级系统的迁移学习过程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例中，一种三维超声辅助BIRADS辅助诊断系统，其具体工作流程如下：
步骤1：自动检测
利用已经存在的计算机自动检测系统来自动找出同一个乳房不同位置图像的所有可能的肿瘤；
步骤2：诊断
读片工作站展示同一个乳房的不同位置图像，使用者在读片过程中，发现了可疑肿瘤，点击该肿瘤，使用计算机分级系统给出该肿瘤BIRADS分级；
步骤3：自动配对
3.1、运用计算机分级系统计算出之前检测系统所找出所有可能肿瘤的特征向量(Vimage)；
3.2、计算用户选择肿瘤和同一乳房不同位置的肿瘤的相似度，相似度定位为两对特征向量的模的求反；
3.3、如果相似度大于一个阈值，则认为其他位置图像上的肿瘤是和用户指定位置的肿瘤为同一个肿瘤，显示配对的肿瘤，且利用计算机分级系统给出配对成功的肿瘤的BIRADS分级；
步骤4：图像数据搜索
用户可以主动或者被动使用搜寻类似病例功能，其为利用之前计算机分级系统计算出的图像特征Vimage，来比对数据库里已经存在的大量数据，找到最相似的n个病例，并将图像和对应的良恶性的信息一同在工作站站上显示给用户，用户可以结合自己的判断给出最终的诊断。
参阅图1～2，所述计算机分级系统具体实现方式如下：
(1)对含有乳腺病变的三维乳腺超声图像进行预处理，截取出每个病变在横截面和冠状面方向上不同位置的的多张二维图像，并将图像缩放到统一尺寸；
(2)建立迁移学习模型，引入在ImageNet数据集上训练好的InceptionV3模型，去掉其全连接层，加入新的全连接层，用于良恶性的二分类问题；
(3)将步骤(1)中处理后的横截面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于横截面图像分类的模型；
(4)将步骤(1)中处理后的冠状面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于冠状面图像分类的模型；
(5)将病变的多张横截面切片输入步骤(3)中训练好的模型中，将多张冠状面切片输入步骤(4)中训练好的模型中，将得到的所有切片的预测概率进行平均融合，输出该病变的分类结果。
所述步骤(1)中在病变的不同位置的横截面上取三张ROI，冠状面上取三张ROI，图像统一缩放到140×140像素。
所述步骤(2)中新增两层全连接层，第一层的节点数为256，第二层的节点数为2。
所述步骤(3)和(4)中的训练方法是开放所有层的参数进行调整。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
Claims (5)
1.一种三维超声辅助BIRADS辅助诊断系统，其特征在于，其具体工作流程如下：
步骤1：调用自动检测系统
调用已经存在的计算机自动检测系统来自动找出同一个乳房不同位置图像的所有可能的肿瘤；
步骤2：诊断
读片工作站展示同一个乳房的不同位置图像，使用者在读片过程中，发现了可疑肿瘤，点击该肿瘤，使用计算机分级系统给出该肿瘤BIRADS分级；
步骤3：自动配对
3.1、运用计算机分级系统计算出之前调用别的系统所找出所有可能肿瘤的特征向量(Vimage)；
3.2、计算用户选择肿瘤和同一乳房不同位置的肿瘤的相似度，相似度定位为两对特征向量的模的求反；
3.3、如果相似度大于一个阈值，则认为其他位置图像上的肿瘤是和用户指定位置的肿瘤为同一个肿瘤，显示配对的肿瘤，且利用计算机分级系统给出配对成功的肿瘤的BIRADS分级；
步骤4：图像数据搜索
用户可以主动或者被动使用搜寻类似病例功能，其为利用之前计算机分级系统计算出的图像特征Vimage，来比对数据库里已经存在的大量数据，找到最相似的n个病例，并将图像和对应的良恶性的信息一同在工作站站上显示给用户，用户可以结合自己的判断给出最终的诊断。
2.根据权利要求1所述的一种三维超声辅助BIRADS辅助诊断系统，其特征在于，所述计算机分级系统具体实现方式如下：
(1)对含有乳腺病变的三维乳腺超声图像进行预处理，截取出每个病变在横截面和冠状面方向上不同位置的的多张二维图像，并将图像缩放到统一尺寸；
(2)建立迁移学习模型，引入在ImageNet数据集上训练好的InceptionV3模型，去掉其全连接层，加入新的全连接层，用于良恶性的二分类问题；
(3)将步骤(1)中处理后的横截面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于横截面图像分类的模型；
(4)将步骤(1)中处理后的冠状面方向上的图像及其标签作为训练集，输入步骤(2)中搭建的InceptionV3迁移学习模型中进行训练，得到用于冠状面图像分类的模型；
(5)将病变的多张横截面切片输入步骤(3)中训练好的模型中，将多张冠状面切片输入步骤(4)中训练好的模型中，将得到的所有切片的预测概率进行平均融合，输出该病变的分类结果。
3.根据权利要求2所述的一种三维超声辅助BIRADS辅助诊断系统，其特征在于，所述步骤(1)中在病变的不同位置的横截面上取三张ROI，冠状面上取三张ROI，图像统一缩放到140×140像素。
4.根据权利要求2所述的一种三维超声辅助BIRADS辅助诊断系统，其特征在于，所述步骤(2)中新增两层全连接层，第一层的节点数为256，第二层的节点数为2。
5.根据权利要求2所述的一种三维超声辅助BIRADS辅助诊断系统，其特征在于，所述步骤(3)和(4)中的训练方法是开放所有层的参数进行调整。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811166446.6A CN111000589B (zh) | 2018-10-08 | 2018-10-08 | 一种三维超声辅助birads辅助诊断系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811166446.6A CN111000589B (zh) | 2018-10-08 | 2018-10-08 | 一种三维超声辅助birads辅助诊断系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111000589A true CN111000589A (zh) | 2020-04-14 |
| CN111000589B CN111000589B (zh) | 2024-03-15 |
Family
ID=70110569
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811166446.6A Active CN111000589B (zh) | 2018-10-08 | 2018-10-08 | 一种三维超声辅助birads辅助诊断系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111000589B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111603199A (zh) * | 2020-04-24 | 2020-09-01 | 李俊来 | 一种基于体表定位测量仪的三维重建超声诊断方法 |
| CN112508942A (zh) * | 2020-12-25 | 2021-03-16 | 上海深博医疗器械有限公司 | 一种获取bi-rads等级的方法和系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010029481A (ja) * | 2008-07-29 | 2010-02-12 | Univ Of Tsukuba | 腫瘍の経過観察レポート自動作成診断支援システム |
| CN102521517A (zh) * | 2011-12-20 | 2012-06-27 | 深圳市人民医院 | 乳腺肿瘤判别分析系统及方法 |
| US20130310690A1 (en) * | 2012-05-18 | 2013-11-21 | National Taiwan University | Breast ultrasound scanning and diagnosis aid system |
| CN108573490A (zh) * | 2018-04-25 | 2018-09-25 | 王成彦 | 一种针对肿瘤影像数据的智能读片系统 |
-
2018
- 2018-10-08 CN CN201811166446.6A patent/CN111000589B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010029481A (ja) * | 2008-07-29 | 2010-02-12 | Univ Of Tsukuba | 腫瘍の経過観察レポート自動作成診断支援システム |
| CN102521517A (zh) * | 2011-12-20 | 2012-06-27 | 深圳市人民医院 | 乳腺肿瘤判别分析系统及方法 |
| US20130310690A1 (en) * | 2012-05-18 | 2013-11-21 | National Taiwan University | Breast ultrasound scanning and diagnosis aid system |
| CN108573490A (zh) * | 2018-04-25 | 2018-09-25 | 王成彦 | 一种针对肿瘤影像数据的智能读片系统 |
Non-Patent Citations (1)
| Title |
|---|
| 孔小函 等: "基于卷积神经网络和多信息融合的三维乳腺超声分类方法", 《中国生物医学工程学报》, vol. 37, no. 4, pages 414 - 422 * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111603199A (zh) * | 2020-04-24 | 2020-09-01 | 李俊来 | 一种基于体表定位测量仪的三维重建超声诊断方法 |
| CN111603199B (zh) * | 2020-04-24 | 2023-03-14 | 中国人民解放军总医院第二医学中心 | 一种基于体表定位测量仪的三维重建超声诊断系统 |
| CN112508942A (zh) * | 2020-12-25 | 2021-03-16 | 上海深博医疗器械有限公司 | 一种获取bi-rads等级的方法和系统 |
| CN112508942B (zh) * | 2020-12-25 | 2023-04-28 | 上海深博医疗器械有限公司 | 一种获取bi-rads等级的方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111000589B (zh) | 2024-03-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Shen et al. | An interpretable classifier for high-resolution breast cancer screening images utilizing weakly supervised localization | |
| Drukker et al. | Computerized lesion detection on breast ultrasound | |
| Maitra et al. | Identification of abnormal masses in digital mammography images | |
| CN112132917A (zh) | 一种直肠癌淋巴结转移的智能诊断方法 | |
| CN109493325A (zh) | 基于ct影像的肿瘤异质性分析系统 | |
| CN101103924A (zh) | 基于乳腺x线摄片的乳腺癌计算机辅助诊断方法及其系统 | |
| KR20200080626A (ko) | 병변 진단에 대한 정보 제공 방법 및 이를 이용한 병변 진단에 대한 정보 제공용 디바이스 | |
| CN101373479A (zh) | 一种乳腺x线摄片计算机图像检索方法及系统 | |
| Fan et al. | Mass detection and segmentation in digital breast tomosynthesis using 3D-mask region-based convolutional neural network: a comparative analysis | |
| CN110728239B (zh) | 一种利用深度学习的胃癌增强ct图像自动识别系统 | |
| CN114782307A (zh) | 基于深度学习的增强ct影像直肠癌分期辅助诊断系统 | |
| CN111553892A (zh) | 基于深度学习的肺结节分割计算方法、装置及系统 | |
| Mei et al. | YOLO-lung: A practical detector based on imporved YOLOv4 for Pulmonary Nodule Detection | |
| CN113850328A (zh) | 基于多视角深度学习的非小细胞肺癌亚型分类系统 | |
| CN115619797A (zh) | 一种基于注意力机制的并行U-Net网络的肺部图像分割方法 | |
| Tang et al. | Multi-level global context cross consistency model for semi-supervised ultrasound image segmentation with diffusion model | |
| CN111000589B (zh) | 一种三维超声辅助birads辅助诊断系统 | |
| Caroline et al. | Computer aided detection of masses in digital breast tomosynthesis: A review | |
| CN114913120A (zh) | 一种基于迁移学习的多任务乳腺癌超声检测方法 | |
| Anshad et al. | Recent methods for the detection of tumor using computer aided diagnosis—A review | |
| You et al. | A cGAN-based tumor segmentation method for breast ultrasound images | |
| Zeng et al. | Clinical application of a novel computer-aided detection system based on three-dimensional CT images on pulmonary nodule | |
| CN116612313A (zh) | 基于改进EfficientNet-B0模型的肺结节良恶性分类方法 | |
| Liu et al. | Anatomy-guided Weakly Supervised Breast Lesion Segmentation Fusing Contour and Semantic Information | |
| Sasikala et al. | Improved breast cancer detection using fusion of bimodal sonographic features through binary firefly algorithm |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |