JPWO2018221033A1 - 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 - Google Patents
医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 Download PDFInfo
- Publication number
- JPWO2018221033A1 JPWO2018221033A1 JP2019522008A JP2019522008A JPWO2018221033A1 JP WO2018221033 A1 JPWO2018221033 A1 JP WO2018221033A1 JP 2019522008 A JP2019522008 A JP 2019522008A JP 2019522008 A JP2019522008 A JP 2019522008A JP WO2018221033 A1 JPWO2018221033 A1 JP WO2018221033A1
- Authority
- JP
- Japan
- Prior art keywords
- medical image
- display
- notification information
- area
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 10
- 238000001514 detection method Methods 0.000 claims description 52
- 238000005286 illumination Methods 0.000 claims description 29
- 230000003902 lesion Effects 0.000 claims description 21
- 230000001678 irradiating effect Effects 0.000 claims description 13
- 230000002123 temporal effect Effects 0.000 claims description 11
- 238000010191 image analysis Methods 0.000 claims description 7
- 238000001727 in vivo Methods 0.000 claims description 6
- 238000011109 contamination Methods 0.000 claims description 3
- 108010054147 Hemoglobins Proteins 0.000 claims description 2
- 102000001554 Hemoglobins Human genes 0.000 claims description 2
- 108010064719 Oxyhemoglobins Proteins 0.000 claims description 2
- 238000010521 absorption reaction Methods 0.000 claims description 2
- 230000005284 excitation Effects 0.000 claims description 2
- 239000000126 substance Substances 0.000 claims description 2
- 238000000034 method Methods 0.000 description 32
- 238000010586 diagram Methods 0.000 description 12
- 238000003860 storage Methods 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 7
- 238000001574 biopsy Methods 0.000 description 5
- 230000000295 complement effect Effects 0.000 description 5
- 238000003780 insertion Methods 0.000 description 5
- 230000037431 insertion Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 206010061218 Inflammation Diseases 0.000 description 4
- 238000005452 bending Methods 0.000 description 4
- 230000004054 inflammatory process Effects 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 206010003694 Atrophy Diseases 0.000 description 2
- 230000037444 atrophy Effects 0.000 description 2
- 230000000740 bleeding effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000005253 cladding Methods 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 210000004400 mucous membrane Anatomy 0.000 description 1
- 239000011241 protective layer Substances 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 230000002087 whitening effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/542—Event management; Broadcasting; Multicasting; Notifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00055—Operational features of endoscopes provided with output arrangements for alerting the user
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00186—Optical arrangements with imaging filters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00188—Optical arrangements with focusing or zooming features
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/07—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
図1に示すように、内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、モニタ18と、コンソール19と、を備える。内視鏡12は、観察対象である被写体に照明光を照射し、照明光で照射された被写体を撮像する。光源装置14は、被写体に照射するための照明光を発生する。プロセッサ装置16は、内視鏡システム10のシステム制御及び画像処理等を行う。モニタ18は、プロセッサ装置16から出力された画像を表示する表示部である。コンソール19は、キーボードなどのように、プロセッサ装置16等への設定入力等を行う入力デバイスである。
第2実施形態では、報知情報として、被写体像又は医療画像に関するエラーをモニタ18に表示する。したがって、図10に示すように、第2実施形態の画像処理部61では、注目領域検出部70に加えて、エラーを検出するエラー検出部として、医療画像からエラーを検出するエラー検出用画像解析部80が設けられている。なお、エラー検出部としては、エラー検出用のセンサを用いて、エラーを検出するようにしてもよい。エラー検出用のセンサは、内視鏡12の先端部12dに設ける他、鉗子チャンネルに挿通する処置具に設けるようにしてもよい。また、第2の実施形態では、エラーを検出できれば、注目領域の検出を行わなくてもよいため、画像処理部61では注目領域検出部70を設けなくてもよい。
第3実施形態では、報知情報として、被写体の観察状態をモニタ18に表示する。内視鏡システム10を用いる被写体の観察状態は、種々挙げられる。例えば、内視鏡システム10においては、波長などが異なる複数種類の照明光を被写体に照射することが可能である。したがって、照明光の種類が異なる複数の照明モードによって、被写体の観察状態は変化し得る。
第4実施形態では、報知情報として、病変の有無、病変の種類又は処置具の検出状況をモニタ18に表示する。病変の有無及び病変の種類については、図14に示すように、注目領域に含まれる特徴量を元に、鑑別処理部82にて鑑別する。鑑別処理部82では、Convolutional Neural Networkなどの鑑別処理を用いて、注目領域について病変の有無、病変の種類を算出する。また、処置具の検出については、注目領域に含まれる特徴量を元に、処置具検出部86にて行う。処置具検出部86についても、Convolutional Neural Networkなどの処置具検出処理を用いて、注目領域に処置具が含まれるか否かの検出を行う。
12 内視鏡
12a 挿入部
12b 操作部
12c 湾曲部
12d 先端部
12e アングルノブ
12f 鉗子入口
13 ズーム操作部
14 光源装置
16 プロセッサ装置
18 モニタ
19 コンソール
20 光源部
22 光源制御部
30a 照明光学系
30b 撮像光学系
41 ライトガイド
45 照明レンズ
46 対物レンズ
47 ズームレンズ
48 イメージセンサ
52 制御部
54 画像取得部
56 DSP(Digital Signal Processor)
58 ノイズ低減部
59 変換部
61 画像処理部
66 表示制御部
68 記録制御部
69 保存用メモリ
70 注目領域検出部
72 報知情報生成部
74 バウンディングボックス
76 アイコン
80 エラー検出用画像解析部
81 観察状態取得部
82 鑑別処理部
86 処置具検出部
88 鑑別スコア値
90 シークバー
Claims (43)
- 被写体を含む医療画像を取得する画像取得部と、
前記医療画像を第1の表示領域に表示する表示部と、
ユーザーに報知するための報知情報を前記表示部において表示する制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
を有し、
前記表示制御部は、前記第1の表示領域と異なる第2の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行う医療画像処理装置。 - 前記表示制御部は、第1の条件を満たした場合に、前記第1の表示領域において前記報知情報を表示する制御を行い、
前記第1の条件と異なる第2の条件を満たした場合に、前記第1の表示領域において表示中の前記報知情報を非表示にし、前記第2の表示領域において、前記報知情報を表示する制御を行う請求項1記載の医療画像処理装置。 - 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記第1の条件は、前記注目領域の面積が面積用閾値以下の場合であり、
前記第2の条件は、前記注目領域の面積が前記面積用閾値を超える場合である請求項2記載の医療画像処理装置。 - 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記第1の条件は、前記注目領域の位置が前記第1の表示領域の中心範囲から外れている場合であり、
前記第2の条件は、前記注目領域の位置が前記第1の表示領域の中心範囲に入っている場合である請求項2記載の医療画像処理装置。 - 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記第1の条件は、前記注目領域の時間的変化量が変化量用閾値を超える場合であり、
前記第2の条件は、前記注目領域の時間的変化量が前記変化量用閾値以下の場合である請求項2記載の医療画像処理装置。 - 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記第1の条件は、前記注目領域の輝度値が輝度値用閾値以下の場合であり、
前記第2の条件は、前記注目領域の輝度値が前記輝度値用閾値を超える場合である請求項2記載の医療画像処理装置。 - 前記第1の条件は、前記第1の表示領域に前記報知情報を表示する第1の表示時間が表示制限時間以下の場合であり、
前記第2の条件は、前記第1の表示時間が前記表示制限時間を超えた場合である請求項2記載の医療画像処理装置。 - 前記第1の条件は、ユーザー入力により、前記報知情報を表示する領域が前記第1の表示領域に指定された場合であり、
前記第2の条件は、ユーザー入力により、前記報知情報を表示する領域が前記第2の表示領域に指定された場合である請求項2記載の医療画像処理装置。 - 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記第1の条件は、前記注目領域の面積、前記注目領域の位置、前記注目領域の時間的変化量、前記注目領域の輝度値、及び、前記第1の表示領域に前記報知情報を表示する第1の表示時間の少なくとも2つを組み合わせた組み合わせ情報が、組合せ用条件を満たす場合であり、
前記第2の条件は、前記組み合わせ情報が、前記組合せ用条件を満たさない場合である請求項2記載の医療画像処理装置。 - 前記第1の条件は、前記注目領域の面積と前記注目領域の輝度値を組み合わせた面積輝度組合せ情報が、面積輝度用組合せ条件を満たす場合であり、
前記第2の条件は、前記面積輝度組合せ情報が、前記面積輝度用組合せ条件を満たさない場合である請求項9記載の医療画像処理装置。 - 前記表示制御部は、前記第1の条件及び前記第2の条件と異なる第3の条件を満たした場合に、前記第2の表示領域において、表示中の前記報知情報を非表示にする制御を行う請求項2記載の医療画像処理装置。
- 前記表示制御部は、
特定の条件を満たした場合に、前記第1の表示領域、前記第2の表示領域、又は前記第1の表示領域及び前記第2の表示領域の両方のいずれかにおいて、前記報知情報を表示する制御、又は前記報知情報を非表示にする制御を行い、
前記特定の条件を満たさない場合に、前記特定の条件を満たす場合と異なる表示領域において、前記報知情報を表示する制御、又は前記報知情報を非表示にする制御を行う請求項1記載の医療画像処理装置。 - 前記表示制御部は、前記第1の表示領域において、前記報知情報を前記医療画像に重畳させて表示する制御を行う請求項1ないし12いずれか1項記載の医療画像処理装置。
- 前記医療画像から注目領域を検出する注目領域検出部を有し、
前記報知情報は、前記注目領域に関する情報を報知するための報知情報である請求項1記載の医療画像処理装置。 - 前記被写体又は前記医療画像に関するエラーを検出するエラー検出部を有し、
前記報知情報は前記エラーである請求項1記載の医療画像処理装置。 - 前記エラー検出部は、前記医療画像を解析して前記エラーを検出するエラー検出用画像解析部である請求項15記載の医療画像処理装置。
- 前記エラーは前記医療画像上に表れるブレである請求項16記載の医療画像処理装置。
- 前記エラーは前記被写体の汚れ度合いである請求項16記載の医療画像処理装置。
- 前記エラー検出部はエラー検出用のセンサである請求項15記載の医療画像処理装置。
- 前記報知情報は被写体の観察状態である請求項1記載の医療画像処理装置。
- 前記観察状態は、前記被写体に対して照射する照明光に関する照明モード、前記医療画像に対して施す画像処理に関する画像処理モード、前記被写体を拡大する拡大観察、又は前記被写体を拡大しない非拡大観察のうち少なくともいずれかで表される請求項20記載の医療画像処理装置。
- 前記報知情報は、病変の有無、病変の種類、又は処置具の検出状況である請求項1記載の医療画像処理装置。
- 前記報知情報は、前記医療画像に重畳して保存される請求項1ないし22いずれか1項記載の医療画像処理装置。
- 前記報知情報は、前記医療画像とひとつのデータ形式にまとめて保存される請求項1ないし22いずれか1項記載の医療画像処理装置。
- 前記報知情報と前記医療画像は、少なくとも2つの別データとして保存される請求項1ないし22いずれか1項記載の医療画像処理装置。
- 前記医療画像は、白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像である請求項1ないし25いずれか1項記載の医療画像処理装置。
- 前記医療画像は、特定の波長帯域の光を照射して得た特殊光画像であり、
前記特定の波長帯域の光は白色帯域よりも狭い帯域である請求項1ないし25いずれか1項記載の医療画像処理装置。 - 前記特定の波長帯域は可視域の青色もしくは緑色帯域に含まれる請求項27記載の医療画像処理装置。
- 前記特定の波長帯域はピークが390nm〜450nm、または530nm〜550nmにある請求項28記載の医療画像処理装置。
- 前記特定の波長帯域は可視域の赤色帯域に含まれる請求項27記載の医療画像処理装置。
- 前記特定の波長帯域は、ピークが585nm〜615nm、または610nm〜730nmにある請求項30記載の医療画像処理装置。
- 前記特定の波長帯域は、ピークが、酸化ヘモグロビンと還元ヘモグロビンとで吸収係数の異なる帯域にある請求項27記載の医療画像処理装置。
- 前記特定の波長帯域は、ピークが400±10nm、440±10nm、470±10nm、又は600nm〜750nmにある請求項32記載の医療画像処理装置。
- 前記医療画像は生体内を写した生体内画像であり、
前記生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する請求項27記載の医療画像処理装置。 - 前記蛍光は、ピークが390〜470nmである励起光を前記生体内に照射して得られる請求項34記載の医療画像処理装置。
- 前記医療画像は生体内を写した生体内画像であり、
前記特定の波長帯域は赤外光の波長帯域である請求項27記載の医療画像処理装置。 - 前記特定の波長帯域は、ピークが790nm〜820nm、又は905nm〜970nmにある請求項36記載の医療画像処理装置。
- 前記画像取得部は、
白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有し、
前記医療画像は前記特殊光画像である請求項1ないし25いずれか1項記載の医療画像処理装置。 - 前記特定の波長帯域の信号は、前記通常光画像に含まれるRGBあるいはCMYの色情報に基づく演算により得られる請求項38記載の医療画像処理装置。
- 白色帯域の光、又は前記白色帯域の光として複数の波長帯域の光を照射して得られた通常光画像と、特定の波長帯域の光を照射して得られる特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を有し、
前記医療画像は前記特徴量画像である請求項1ないし25いずれか1項記載の医療画像処理装置。 - 被写体を含む医療画像を取得する画像取得部と、
前記医療画像を第1の表示領域に表示する表示部と、
ユーザーに報知するための報知情報を前記表示部において表示する制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
を有し、
前記表示制御部は、前記第1の表示領域と異なる第2の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行う内視鏡システム。 - 被写体を含む医療画像を取得する画像取得部と、
前記医療画像を第1の表示領域に表示する表示部と、
ユーザーに報知するための報知情報を前記表示部において表示する制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
を有し、
前記表示制御部は、前記第1の表示領域と異なる第2の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行う診断支援装置。 - 被写体を含む医療画像を取得する画像取得部と、
前記医療画像を第1の表示領域に表示する表示部と、
ユーザーに報知するための報知情報を前記表示部において表示する制御、又は前記報知情報を前記表示部において非表示にする制御を行う表示制御部と、
を有し、
前記表示制御部は、前記第1の表示領域と異なる第2の表示領域において、前記報知情報を表示する制御、又は表示中の前記報知情報を非表示にする制御を行う医療業務支援装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017109923 | 2017-06-02 | ||
JP2017109923 | 2017-06-02 | ||
PCT/JP2018/015361 WO2018221033A1 (ja) | 2017-06-02 | 2018-04-12 | 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018221033A1 true JPWO2018221033A1 (ja) | 2020-04-02 |
JP6840846B2 JP6840846B2 (ja) | 2021-03-10 |
Family
ID=64454494
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019522008A Active JP6840846B2 (ja) | 2017-06-02 | 2018-04-12 | 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10799098B2 (ja) |
EP (1) | EP3633987A1 (ja) |
JP (1) | JP6840846B2 (ja) |
CN (2) | CN114145693A (ja) |
WO (1) | WO2018221033A1 (ja) |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11100633B2 (en) | 2018-06-13 | 2021-08-24 | Cosmo Artificial Intelligence—Al Limited | Systems and methods for processing real-time video from a medical image device and detecting objects in the video |
US10810460B2 (en) | 2018-06-13 | 2020-10-20 | Cosmo Artificial Intelligence—AI Limited | Systems and methods for training generative adversarial networks and use of trained generative adversarial networks |
JP6978604B2 (ja) * | 2018-07-10 | 2021-12-08 | オリンパス株式会社 | 内視鏡装置、内視鏡装置の作動方法及びプログラム |
JP7549532B2 (ja) * | 2018-08-17 | 2024-09-11 | 富士フイルム株式会社 | 内視鏡システム |
WO2020036224A1 (ja) * | 2018-08-17 | 2020-02-20 | 富士フイルム株式会社 | 内視鏡システム |
JP7148625B2 (ja) * | 2018-09-18 | 2022-10-05 | 富士フイルム株式会社 | 医用画像処理装置、プロセッサ装置、医用画像処理装置の作動方法、及びプログラム |
JP6856594B2 (ja) * | 2018-09-25 | 2021-04-07 | 株式会社メディカロイド | 手術システムおよび表示方法 |
JPWO2020162275A1 (ja) | 2019-02-08 | 2021-12-02 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 |
WO2020170809A1 (ja) * | 2019-02-19 | 2020-08-27 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 |
CN113498323B (zh) * | 2019-02-26 | 2024-08-13 | 富士胶片株式会社 | 医用图像处理装置、处理器装置、内窥镜系统、医用图像处理方法、及记录介质 |
CN113543694B (zh) | 2019-03-08 | 2024-02-13 | 富士胶片株式会社 | 医用图像处理装置、处理器装置、内窥镜系统、医用图像处理方法、及记录介质 |
JP7128135B2 (ja) * | 2019-03-08 | 2022-08-30 | 富士フイルム株式会社 | 内視鏡画像学習装置、方法及びプログラム、内視鏡画像認識装置 |
JPWO2021029293A1 (ja) * | 2019-08-13 | 2021-02-18 | ||
US20220296082A1 (en) * | 2019-10-17 | 2022-09-22 | Sony Group Corporation | Surgical information processing apparatus, surgical information processing method, and surgical information processing program |
WO2021140644A1 (ja) | 2020-01-10 | 2021-07-15 | 日本電気株式会社 | 内視鏡検査支援装置、内視鏡検査支援方法、及びコンピュータ読み取り可能な記録媒体 |
EP4094673A4 (en) * | 2020-01-20 | 2023-07-12 | FUJIFILM Corporation | MEDICAL IMAGE PROCESSING DEVICE, MEDICAL IMAGE PROCESSING DEVICE OPERATION METHOD, AND ENDOSCOPIC SYSTEM |
EP4094672A4 (en) * | 2020-01-21 | 2023-01-11 | NEC Corporation | OPERATING ASSIST DEVICE, OPERATING ASSISTING METHOD AND COMPUTER READABLE RECORDING MEDIA |
WO2021153471A1 (ja) * | 2020-01-27 | 2021-08-05 | 富士フイルム株式会社 | 医療画像処理装置、医療画像処理方法、及びプログラム |
EP4133991A4 (en) | 2020-04-08 | 2023-09-27 | FUJIFILM Corporation | MEDICAL IMAGE PROCESSING SYSTEM, DETECTION DATA PROCESSOR PROCESSOR, AND OPERATING METHODS FOR THE MEDICAL IMAGE PROCESSING SYSTEM |
WO2021220822A1 (ja) * | 2020-04-27 | 2021-11-04 | 公益財団法人がん研究会 | 画像診断装置、画像診断方法、画像診断プログラムおよび学習済みモデル |
JP7307709B2 (ja) * | 2020-09-11 | 2023-07-12 | 富士フイルム株式会社 | 処置具管理システム、内視鏡システム及びその作動方法 |
CN116847788A (zh) * | 2021-02-25 | 2023-10-03 | 富士胶片株式会社 | 医疗图像处理装置、方法及程序 |
JPWO2022239530A1 (ja) | 2021-05-10 | 2022-11-17 | ||
JPWO2023281607A1 (ja) * | 2021-07-05 | 2023-01-12 | ||
KR20240089660A (ko) * | 2021-10-15 | 2024-06-20 | 버브 서지컬 인크. | 수술 중 시각화를 위한 장치, 시스템 및 방법 |
US20230181002A1 (en) * | 2021-12-14 | 2023-06-15 | Karl Storz Imaging, Inc. | Frame processing of imaging scope data for user interface presentation |
WO2024171356A1 (ja) * | 2023-02-15 | 2024-08-22 | オリンパスメディカルシステムズ株式会社 | 内視鏡用画像処理装置および内視鏡用画像処理装置の作動方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006043196A (ja) * | 2004-08-05 | 2006-02-16 | Pentax Corp | 電子内視鏡システム及び電子内視鏡用プロセッサ |
JP2011027911A (ja) * | 2009-07-23 | 2011-02-10 | Olympus Corp | 内視鏡装置、計測方法、およびプログラム |
WO2013146014A1 (ja) * | 2012-03-29 | 2013-10-03 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP2015177961A (ja) * | 2014-02-27 | 2015-10-08 | 富士フイルム株式会社 | 内視鏡システム、内視鏡システム用プロセッサ装置、内視鏡システムの作動方法、及び内視鏡システム用プロセッサ装置の作動方法 |
WO2017073337A1 (ja) * | 2015-10-27 | 2017-05-04 | オリンパス株式会社 | 内視鏡装置 |
WO2017081976A1 (ja) * | 2015-11-10 | 2017-05-18 | オリンパス株式会社 | 内視鏡装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2983413B2 (ja) | 1993-07-08 | 1999-11-29 | 新日本製鐵株式会社 | 2槽式アーク炉設備 |
JP2007243275A (ja) | 2006-03-06 | 2007-09-20 | Sony Ericsson Mobilecommunications Japan Inc | 携帯端末装置ならびに画面表示方法および画面表示プログラム |
JP5523718B2 (ja) * | 2008-04-02 | 2014-06-18 | 株式会社東芝 | 医用撮像装置 |
FI4070729T3 (fi) * | 2009-08-31 | 2024-06-04 | Abbott Diabetes Care Inc | Lääkinnällisen laitteen näyttöjä |
JP2011096084A (ja) | 2009-10-30 | 2011-05-12 | Toshiba Corp | 表示装置 |
JP5220780B2 (ja) * | 2010-02-05 | 2013-06-26 | オリンパス株式会社 | 画像処理装置、内視鏡システム、プログラム及び画像処理装置の作動方法 |
JP5597021B2 (ja) * | 2010-04-15 | 2014-10-01 | オリンパス株式会社 | 画像処理装置及びプログラム |
US9717471B2 (en) * | 2010-11-23 | 2017-08-01 | Mayo Foundtion For Medical Education And Research | Method and apparatus for multiple-wave doppler velocity meter |
US8579800B2 (en) * | 2011-03-22 | 2013-11-12 | Fabian Emura | Systematic chromoendoscopy and chromocolonoscopy as a novel systematic method to examine organs with endoscopic techniques |
WO2015049962A1 (ja) * | 2013-10-02 | 2015-04-09 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
CN108135457B (zh) * | 2015-10-26 | 2020-02-21 | 奥林巴斯株式会社 | 内窥镜图像处理装置 |
-
2018
- 2018-04-12 JP JP2019522008A patent/JP6840846B2/ja active Active
- 2018-04-12 WO PCT/JP2018/015361 patent/WO2018221033A1/ja active Application Filing
- 2018-04-12 EP EP18810485.5A patent/EP3633987A1/en not_active Ceased
- 2018-04-12 CN CN202111634802.4A patent/CN114145693A/zh active Pending
- 2018-04-12 CN CN201880033364.6A patent/CN110663251B/zh active Active
-
2019
- 2019-11-07 US US16/677,594 patent/US10799098B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006043196A (ja) * | 2004-08-05 | 2006-02-16 | Pentax Corp | 電子内視鏡システム及び電子内視鏡用プロセッサ |
JP2011027911A (ja) * | 2009-07-23 | 2011-02-10 | Olympus Corp | 内視鏡装置、計測方法、およびプログラム |
WO2013146014A1 (ja) * | 2012-03-29 | 2013-10-03 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
JP2015177961A (ja) * | 2014-02-27 | 2015-10-08 | 富士フイルム株式会社 | 内視鏡システム、内視鏡システム用プロセッサ装置、内視鏡システムの作動方法、及び内視鏡システム用プロセッサ装置の作動方法 |
WO2017073337A1 (ja) * | 2015-10-27 | 2017-05-04 | オリンパス株式会社 | 内視鏡装置 |
WO2017081976A1 (ja) * | 2015-11-10 | 2017-05-18 | オリンパス株式会社 | 内視鏡装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6840846B2 (ja) | 2021-03-10 |
CN110663251B (zh) | 2021-12-31 |
CN114145693A (zh) | 2022-03-08 |
CN110663251A (zh) | 2020-01-07 |
US20200069160A1 (en) | 2020-03-05 |
WO2018221033A1 (ja) | 2018-12-06 |
EP3633987A4 (en) | 2020-04-08 |
EP3633987A1 (en) | 2020-04-08 |
US10799098B2 (en) | 2020-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6840846B2 (ja) | 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 | |
CN110325100B (zh) | 内窥镜系统及其操作方法 | |
US9872610B2 (en) | Image processing device, imaging device, computer-readable storage medium, and image processing method | |
WO2018159461A1 (ja) | 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法 | |
CN110461209B (zh) | 内窥镜系统及处理器装置 | |
WO2017057574A1 (ja) | 画像処理装置、内視鏡システム、及び画像処理方法 | |
EP2979618B1 (en) | Image processing device for operating endoscope system | |
JP5669416B2 (ja) | 蛍光観察装置 | |
JP4394356B2 (ja) | 電子内視鏡装置 | |
US20120241620A1 (en) | Optical control device, control device, and optical scope | |
EP2979617B1 (en) | Image processing device, and method for operating endoscope system | |
JP2010172673A (ja) | 内視鏡システム、内視鏡用プロセッサ装置、並びに内視鏡検査支援方法 | |
WO2018159083A1 (ja) | 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法 | |
JP7337073B2 (ja) | 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法 | |
JP2011177419A (ja) | 蛍光観察装置 | |
JP6632961B2 (ja) | 内視鏡システム及び内視鏡システムの駆動方法 | |
JPWO2018155560A1 (ja) | 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法 | |
JP6054806B2 (ja) | 画像処理装置及び内視鏡システムの作動方法 | |
JP2011005002A (ja) | 内視鏡装置 | |
US20180092519A1 (en) | Infrared fluorescence observation device | |
JP6243311B2 (ja) | 内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法、内視鏡用の制御プログラム | |
JP6731065B2 (ja) | 内視鏡システム及びその作動方法 | |
JP2022090759A (ja) | 医用画像処理システム、医用画像処理システムの作動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191209 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210209 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6840846 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |