JP6866497B2 - 医療画像処理装置、及び、内視鏡装置 - Google Patents
医療画像処理装置、及び、内視鏡装置 Download PDFInfo
- Publication number
- JP6866497B2 JP6866497B2 JP2019550326A JP2019550326A JP6866497B2 JP 6866497 B2 JP6866497 B2 JP 6866497B2 JP 2019550326 A JP2019550326 A JP 2019550326A JP 2019550326 A JP2019550326 A JP 2019550326A JP 6866497 B2 JP6866497 B2 JP 6866497B2
- Authority
- JP
- Japan
- Prior art keywords
- abnormal
- medical image
- region
- processing unit
- abnormality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000002159 abnormal effect Effects 0.000 claims description 236
- 230000005856 abnormality Effects 0.000 claims description 196
- 238000003384 imaging method Methods 0.000 claims description 22
- 238000005286 illumination Methods 0.000 claims description 12
- 238000001228 spectrum Methods 0.000 claims description 7
- 230000003902 lesion Effects 0.000 description 67
- 102000001554 Hemoglobins Human genes 0.000 description 8
- 108010054147 Hemoglobins Proteins 0.000 description 8
- 238000010191 image analysis Methods 0.000 description 8
- 238000007689 inspection Methods 0.000 description 8
- 238000000034 method Methods 0.000 description 8
- 238000003745 diagnosis Methods 0.000 description 7
- 230000001678 irradiating effect Effects 0.000 description 6
- 208000037062 Polyps Diseases 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000003860 storage Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000001727 in vivo Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 210000001519 tissue Anatomy 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 3
- 201000011510 cancer Diseases 0.000 description 3
- 239000003814 drug Substances 0.000 description 3
- 229940079593 drug Drugs 0.000 description 3
- 210000004877 mucosa Anatomy 0.000 description 3
- 238000012323 Endoscopic submucosal dissection Methods 0.000 description 2
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000008033 biological extinction Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000002775 capsule Substances 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000012326 endoscopic mucosal resection Methods 0.000 description 2
- 208000017819 hyperplastic polyp Diseases 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 208000003200 Adenoma Diseases 0.000 description 1
- 206010001233 Adenoma benign Diseases 0.000 description 1
- 206010003694 Atrophy Diseases 0.000 description 1
- 206010048832 Colon adenoma Diseases 0.000 description 1
- 206010013554 Diverticulum Diseases 0.000 description 1
- 206010015150 Erythema Diseases 0.000 description 1
- 230000002547 anomalous effect Effects 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 230000037444 atrophy Effects 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 231100000241 scar Toxicity 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biophysics (AREA)
- Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
Description
図1に示すように、医療画像処理装置10は、医療画像取得部11、医療画像解析処理部12、表示部13、表示制御部15、入力受信部16、統括制御部17、及び、保存部18を備える。
上記第1実施形態においては、異常候補領域判別処理部51は、異常候補領域であるか否かを判別し、異常領域判別処理部52においても、最終的に異常領域であるか否かを判別しているが、医療画像処理装置10は、異常候補領域または異常領域について、さらに、異常の種類または進行度を判別できる。
第1実施形態及び第2実施形態においては、異常領域判別処理部52は、異常候補領域判別処理部51が判別結果に含めて出力する判別の確度を利用していないが、異常領域判別処理部52は、異常候補領域判別処理部51が出力する判別結果についての確度を用いて、異常領域を判別することができる。例えば、図13に示すように、ある小領域についての異常候補領域の判別結果が、第1内視鏡画像111及び第3内視鏡画像113においては正常領域(「正常」)であり、かつ、第2内視鏡画像112においては異常候補領域(「異常」)であるとする。また、例えば、第1内視鏡画像111についての異常候補領域の判別の確度が「15」であり、第2内視鏡画像112についての異常候補領域の判別の確度が「80」であり、第3内視鏡画像113についての異常候補領域の判別の確度が「20」であって、かつ、確度は数値が大きいほど「確からしい」ことを表すとする。この場合、第1実施形態のように、判別対象の小領域が異常領域であるか否かを、異常候補領域であるか否かの判別結果の多数決によって判別すれば、過半数が「正常」であるため、最終判別結果は「正常」となる。
異常領域判別処理部52は、異常候補領域の判別結果の組み合わせと、異常領域の判別結果と、を予め対応付ける判別条件(例えば表などの形式である)を用いて異常領域の判別をすることができる。例えば、医療画像取得部11が、異常候補領域及び異常領域の判別のために、青色光を用いて撮影した第1内視鏡画像111、緑色光を用いて撮影した第2内視鏡画像112、及び、赤色光を用いて撮影した第3内視鏡画像113の他に、紫色光を用いて撮影した第4内視鏡画像(図示しない)を取得する場合、偶数個の内視鏡画像を使用することになるので、確度を用いる場合を除けば、異常候補領域の判別結果を用いても最終的な異常領域の判別できない。このような場合には、異常領域判別処理部52は、異常候補領域の判別結果の組み合わせと、異常領域の判別結果と、の判別条件を用いれば、異常領域の判別が容易である。
11 医療画像取得部
12 医療画像解析処理部
13 表示部
15 表示制御部
16 入力受信部
17 統括制御部
18 保存部
21 内視鏡装置
22 PACS
31 内視鏡
32 光源装置
33 プロセッサ装置
34 モニタ
41 イメージセンサ
42 光源部
43 V−LED
44 B−LED
45 G−LED
46 R−LED
47 光源制御部
48 内視鏡画像生成部
51 異常候補領域判別処理部
52 異常領域判別処理部
53 第1処理部
54 第2処理部
55 第3処理部
56 第M処理部
101 表示用の内視鏡画像
111 第1内視鏡画像
112 第2内視鏡画像
113 第3内視鏡画像
121、122、123 異常候補領域
131 異常領域
201 種類等表示領域
520 医療画像処理装置を構成する各部
610 診断支援装置
621 第1検査装置
622 第2検査装置
623 第N検査装置
626 ネットワーク
630 医療業務支援装置
V1,V2,V3,V4,V5 病変
D(B) 第1内視鏡画像を用いた異常候補領域の判別結果
D(G) 第2内視鏡画像を用いた異常候補領域の判別結果
D(R) 第3内視鏡画像を用いた異常候補領域の判別結果
D(V) 第4内視鏡画像を用いた異常候補領域の判別結果
Claims (14)
- 被写体像を含む医療画像を取得する医療画像取得部と、
撮影条件が異なる少なくとも3種類以上の前記医療画像について、異常候補領域をそれぞれ判別する異常候補領域判別処理部と、
各種類の前記医療画像に係るそれぞれの前記異常候補領域の判別結果の組み合わせにしたがって異常領域を判別する異常領域判別処理部と、
を備える医療画像処理装置。 - 前記医療画像が前記異常候補領域を含む場合、前記異常候補領域判別処理部は、前記異常候補領域における異常の種類を判別する請求項1に記載の医療画像処理装置。
- 前記医療画像が前記異常候補領域を含む場合、前記異常候補領域判別処理部は、前記異常候補領域における異常の進行度を判別する請求項1または2に記載の医療画像処理装置。
- 前記異常領域判別処理部は、それぞれの前記異常候補領域の判別結果の多数決により、前記異常領域を判別する請求項1〜3のいずれか1項に記載の医療画像処理装置。
- 前記異常領域判別処理部は、それぞれの前記異常候補領域の判別結果に重み付けをして前記異常領域を判別する請求項1〜4のいずれか1項に記載の医療画像処理装置。
- 前記異常領域判別処理部は、それぞれの前記異常候補領域の判別結果に係る確度を用いて前記異常領域を判別する請求項4または5に記載の医療画像処理装置。
- 前記異常候補領域判別処理部は、前記医療画像を小領域に分けて、前記小領域ごとに異常候補領域判別処理を行い、かつ、前記異常領域判別処理部は、前記小領域ごとに異常領域を判別する請求項1〜6のいずれか1項に記載の医療画像処理装置。
- 前記医療画像取得部は、前記異常候補領域判別処理部において用いる前記医療画像の他に、表示用の前記医療画像を取得する請求項1〜7のいずれか1項に記載の医療画像処理装置。
- 表示用の前記医療画像は、前記異常候補領域判別処理部において用いる前記医療画像と、撮影条件が異なる請求項8に記載の医療画像処理装置。
- 前記異常候補領域判別処理部において用いる前記医療画像を、表示用の前記医療画像として用いる請求項1〜7のいずれか1項に記載の医療画像処理装置。
- 前記医療画像を表示する表示部を備え、
前記表示部は、表示用の前記医療画像を表示する請求項8〜10のいずれか1項に記載の医療画像処理装置。 - 前記表示部に表示用の前記医療画像を表示する際に、表示用の前記医療画像において前記異常領域に対応する領域を強調する表示制御部を備える請求項11に記載の医療画像処理装置。
- 前記異常領域の判別結果を音または光を用いて報知する異常領域判別結果報知部を備える請求項11または12に記載の医療画像処理装置。
- スペクトルが異なる複数種類の照明光を用いて被写体を撮影することにより、撮影条件が異なる少なくとも3種類以上の内視鏡画像を生成する内視鏡画像取得部と、
各種類の前記内視鏡画像について、異常候補領域をそれぞれ判別する異常候補領域判別処理部と、
各種類の前記内視鏡画像に係るそれぞれの前記異常候補領域の判別結果の組み合わせにしたがって、異常領域を判別する異常領域判別処理部と、
を備える内視鏡装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017207131 | 2017-10-26 | ||
JP2017207131 | 2017-10-26 | ||
PCT/JP2018/039915 WO2019083020A1 (ja) | 2017-10-26 | 2018-10-26 | 医療画像処理装置、及び、内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019083020A1 JPWO2019083020A1 (ja) | 2020-10-22 |
JP6866497B2 true JP6866497B2 (ja) | 2021-04-28 |
Family
ID=66246953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019550326A Active JP6866497B2 (ja) | 2017-10-26 | 2018-10-26 | 医療画像処理装置、及び、内視鏡装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6866497B2 (ja) |
WO (1) | WO2019083020A1 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5502812B2 (ja) * | 2011-07-14 | 2014-05-28 | 富士フイルム株式会社 | 生体情報取得システムおよび生体情報取得システムの作動方法 |
WO2015077474A1 (en) * | 2013-11-20 | 2015-05-28 | The George Washington University | Systems and methods for hyperspectral analysis of cardiac tissue |
US10750947B2 (en) * | 2014-01-08 | 2020-08-25 | Board Of Regents Of The University Of Texas System | System and method for intraoperative fluorescence imaging in ambient light |
JP6392570B2 (ja) * | 2014-07-11 | 2018-09-19 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、画像処理プログラム、及び内視鏡システム |
WO2016185733A1 (ja) * | 2015-05-21 | 2016-11-24 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
-
2018
- 2018-10-26 JP JP2019550326A patent/JP6866497B2/ja active Active
- 2018-10-26 WO PCT/JP2018/039915 patent/WO2019083020A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JPWO2019083020A1 (ja) | 2020-10-22 |
WO2019083020A1 (ja) | 2019-05-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7296498B2 (ja) | 医療画像処理装置、及び、内視鏡装置 | |
JP6827557B2 (ja) | 医療画像処理装置 | |
JP6920931B2 (ja) | 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置 | |
US11449988B2 (en) | Medical image processing apparatus | |
JP7411772B2 (ja) | 内視鏡システム | |
JPWO2020036121A1 (ja) | 内視鏡システム | |
JP7146925B2 (ja) | 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法 | |
CN112512398B (zh) | 医疗图像处理装置 | |
JP6785990B2 (ja) | 医療画像処理装置、及び、内視鏡装置 | |
JP6834019B2 (ja) | 医療画像処理装置、及び、内視鏡装置 | |
JP6866497B2 (ja) | 医療画像処理装置、及び、内視鏡装置 | |
WO2022014235A1 (ja) | 画像解析処理装置、内視鏡システム、画像解析処理装置の作動方法、及び画像解析処理装置用プログラム | |
US20210224989A1 (en) | Medical image processing system and learning method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200326 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201027 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210323 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210407 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6866497 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |