JP2020069300A - 医療診断支援装置、内視鏡システム、及び医療診断支援方法 - Google Patents
医療診断支援装置、内視鏡システム、及び医療診断支援方法 Download PDFInfo
- Publication number
- JP2020069300A JP2020069300A JP2018207122A JP2018207122A JP2020069300A JP 2020069300 A JP2020069300 A JP 2020069300A JP 2018207122 A JP2018207122 A JP 2018207122A JP 2018207122 A JP2018207122 A JP 2018207122A JP 2020069300 A JP2020069300 A JP 2020069300A
- Authority
- JP
- Japan
- Prior art keywords
- discrimination
- detection
- result
- unit
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000096—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope using artificial intelligence
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
Abstract
Description
図1は、第1の実施形態に係る内視鏡システム10(医用画像処理装置、医療画像処理装置、医療診断支援装置、内視鏡システム)を示す外観図であり、図2は内視鏡システム10の要部構成を示すブロック図である。図1,2に示すように、内視鏡システム10は、内視鏡スコープ100(内視鏡スコープ、内視鏡本体)、プロセッサ200(プロセッサ、画像処理装置、医療画像処理装置、医療診断支援装置)、光源装置300(光源装置)、及びモニタ400(表示装置)から構成される。
内視鏡スコープ100は、手元操作部102(手元操作部)と、この手元操作部102に連設される挿入部104(挿入部)とを備える。術者(ユーザ)は手元操作部102を把持して操作し、挿入部104を被検体(生体)の体内に挿入して観察する。また、手元操作部102には送気送水ボタン141、吸引ボタン142、及び各種の機能を割り付けられる機能ボタン143、及び撮影開始及び終了の指示操作(静止画像、動画像)を受け付ける撮影ボタン144が設けられている。機能ボタン143に認識内容(後述する検出と鑑別等)の切り替え、表示対象の設定あるいは切り替え、照明光の切り替え等の機能を割り付けてもよい。挿入部104は、手元操作部102側から順に、軟性部112(軟性部)、湾曲部114(湾曲部)、先端硬質部116(先端硬質部)で構成されている。即ち、先端硬質部116の基端側に湾曲部114が接続され、湾曲部114の基端側に軟性部112が接続される。挿入部104の基端側に手元操作部102が接続される。ユーザは、手元操作部102を操作することにより湾曲部114を湾曲させて先端硬質部116の向きを上下左右に変えることができる。先端硬質部116には、撮影光学系130(撮像部)、照明部123、鉗子口126等が設けられる(図1〜図3参照)。
図2に示すように、光源装置300は、照明用の光源310、絞り330、集光レンズ340、及び光源制御部350等から構成されており、照明光(観察光)をライトガイド170に入射させる。光源310は、それぞれ赤色、緑色、青色、紫色の狭帯域光を照射する赤色光源310R、緑色光源310G、青色光源310B、紫色光源310Vを備えており、赤色、緑色、青色、及び紫色の狭帯域光を照射することができる。光源310による照明光の照度は光源制御部350により制御され、必要に応じて照明光の照度を下げること、及び照明を停止することができる。
光源310は白色帯域の光、または白色帯域の光として複数の波長帯域の光を発生する光源でもよいし、白色の波長帯域よりも狭い特定の波長帯域の光を発生する光源でもよい。特定の波長帯域は、可視域の青色帯域もしくは緑色帯域、あるいは可視域の赤色帯域であってもよい。特定の波長帯域が可視域の青色帯域もしくは緑色帯域である場合、390nm以上450nm以下、または530nm以上550nm以下の波長帯域を含み、かつ、390nm以上450nm以下または530nm以上550nm以下の波長帯域内にピーク波長を有していてもよい。また、特定の波長帯域が可視域の赤色帯域である場合、585nm以上615nm以下、または610nm以上730nm以下、の波長帯域を含み、かつ、特定の波長帯域の光は、585nm以上615nm以下または610nm以上730nm以下の波長帯域内にピーク波長を有していてもよい。
図2に基づきプロセッサ200の構成を説明する。プロセッサ200は、内視鏡スコープ100から出力される画像信号を画像入力コントローラ202を介して入力し、画像処理部204(医療診断支援装置、コンピュータ)で必要な画像処理を行ってビデオ出力部206を介して出力する。これによりモニタ400(表示装置)に観察画像(医療画像、撮影画像)及びその認識結果等が表示される。これらの処理はCPU210(CPU:Central Processing Unit)の制御下で行われる。即ち、CPU210は画像処理部としての機能を有する。通信制御部205は、図示せぬ病院内システム(HIS:Hospital Information System)、病院内LAN(Local Area Network)等との通信制御を行う。記録部207には、被写体の画像(医療画像、撮影画像)、注目領域の検出結果、画像の鑑別結果等が記録される。音声処理部209は、CPU210及び画像処理部204の制御により、注目領域の検出及び/または分類の結果に応じたメッセージ(音声)等をスピーカ209Aから出力する。また、音声処理部209(医療診断支援装置、受付部)は、ユーザの音声をマイク209Bにより集音し、どのような操作(認識の切り替え、表示対象の切り替え等)がなされたかを認識することができる。即ち、音声処理部209及びマイク209Bはユーザの操作を受け付ける受付部として機能する。
図4は画像処理部204の機能構成を示す図である。画像処理部204は画像取得部204A(画像取得部)、検出部204B(検出部)、鑑別部204C(鑑別部)、表示制御部204D(表示制御部)、設定部204E(設定部)、推定部204F(推定部)、記憶制御部204G(記憶制御部)、判断部204H(判断部)、受付部204I(受付部)、及び作動制御部204J(作動制御部)を有する。画像処理部204は医療画像解析処理部としても動作する。画像処理部204は、終了条件(ユーザによる終了指示操作等)を満たすまで医療画像の処理(検出、鑑別、表示)を継続させる繰り返し制御部を備えていてもよい。
図5は画像処理部204のうち主として検出部204B及び鑑別部204Cに関する構成を示す図である。検出部204Bは検出用CNN214(第1の階層型ネットワーク)を有し、鑑別部204Cは鑑別用CNN215(第2の階層型ネットワーク)を有する。検出用CNN214及び鑑別用CNN215は畳み込みニューラルネットワークであり、階層状のネットワーク構造を有する。検出用CNN214は学習により構成された認識器であって、医療画像から注目領域を検出する。また、鑑別用CNN215は学習により構成された認識器であり、医療画像の鑑別を行う。作動制御部204J(作動制御部)は、検出部204B(検出用CNN214)と鑑別部204C(鑑別用CNN215)のいずれかを作動させる。作動制御部204Jは、いずれを動作させるかを操作部208等を介したユーザ操作に応じて決定してもよいし、ユーザ操作によらずに決定してもよい。なお、図5は作動制御部204Jが検出部204Bを作動させ、画像取得部204Aが取得した内視鏡画像(医療画像)が検出用CNN214に入力される状態を示しているが、作動制御部204Jは鑑別部204Cを作動させ内視鏡画像を鑑別用CNN215に入力することもできる。この場合の処理の流れを図5中に点線で図示する。検出部204B、鑑別部204Cで処理された画像、検出結果及び鑑別結果は表示制御部204Dの制御によりモニタ400(表示装置)に表示される。
上述したCNN(検出用CNN214、鑑別用CNN215)の層構成について説明する。なお、検出用CNN214と鑑別用CNN215とで共通の構成については検出用CNN214について説明するが、鑑別用CNN215についても同様の構成を採用することができる。図6の(a)部分に示す例では、検出用CNN214は入力層214Aと、中間層214Bと、出力層214Cとを含む。入力層214Aは内視鏡画像(例えば、通常光画像)を入力して特徴量を出力する。中間層214Bは畳み込み層216及びプーリング層217を含み、入力層214Aが出力する特徴量を入力して他の特徴量を算出する。これらの層は複数の「ノード」が「エッジ」で結ばれた構造となっており、複数の重みパラメータを保持している。重みパラメータの値は、学習が進むにつれて変化していく。検出用CNN214の層構成は畳み込み層216とプーリング層217とが1つずつ繰り返される場合に限らず、いずれかの層(例えば、畳み込み層216)が複数連続して含まれていてもよい。
中間層214Bは、畳み込み演算及びプーリング処理によって特徴量を算出する。畳み込み層216で行われる畳み込み演算はフィルタを使用した畳み込み演算により特徴マップを取得する処理であり、画像からのエッジ抽出等の特徴抽出の役割を担う。このフィルタを用いた畳み込み演算により、1つのフィルタに対して1チャンネル(1枚)の「特徴マップ」が生成される。「特徴マップ」のサイズは、畳み込みによりダウンスケーリングされ、各層で畳み込みが行われるにつれて小さくなって行く。プーリング層217で行われるプーリング処理は畳み込み演算により出力された特徴マップを縮小(または拡大)して新たな特徴マップとする処理であり、抽出された特徴が、平行移動などによる影響を受けないようにロバスト性を与える役割を担う。中間層214Bは、これらの処理を行う1または複数の層により構成することができる。
検出用CNN214では、出力層214Cは、中間層214Bから出力された特徴量に基づき、入力された医療画像に含まれる注目領域の位置検出を行ってその結果を出力する層である。検出用CNN214はセグメンテーションを行うので、出力層214Cは、中間層214Bから得られる「特徴マップ」により、画像に写っている注目領域の位置を画素レベルで把握する。即ち、内視鏡画像の画素ごとに注目領域に属するか否かを検出し、その検出結果を出力することができる。なお、物体検出を行う場合は画素レベルでの判断は必要なく、出力層214Cが対象物の位置情報を出力する。
上述した画像処理部204の機能は、各種のプロセッサ(processor)を用いて実現できる。各種のプロセッサには、例えばソフトウェア(プログラム)を実行して各種の機能を実現する汎用的なプロセッサであるCPU(Central Processing Unit)が含まれる。また、上述した各種のプロセッサには、画像処理に特化したプロセッサであるGPU(Graphics Processing Unit)、FPGA(Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)も含まれる。さらに、ASIC(Application Specific Integrated Circuit)などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
プロセッサ200は操作部208(受付部)を備えている。操作部208は図示せぬ照明光設定スイッチ、フットスイッチ等を備えており、使用する照明光(通常光(白色光)か狭帯域光等の特殊光か、狭帯域光の場合いずれの波長の狭帯域光を用いるか)を設定することができる。また、操作部208は図示せぬキーボード及びマウスを含み、ユーザはこれらデバイスを介して撮影条件及び表示条件の設定操作、待機時間の設定操作、認識(検出または鑑別)の設定及び切替操作、照明光の設定及び切替操作、動画像または静止画像の撮影指示(取得指示)等を行うことができる(動画像、静止画像の撮影指示は撮影ボタン144により行ってもよい)。これらの設定操作は上述したフットスイッチ等を介して行っても良いし、音声(マイク209B及び音声処理部209により処理できる)、視線、ジェスチャ等により行ってもよい。即ち、操作部208はユーザの操作を受け付ける受付部として機能する。
記録部207(記録装置)は各種の光磁気記録媒体、半導体メモリ等の非一時的記録媒体及びこれら記録媒体の制御部を含んで構成され、内視鏡画像(医療画像、医用画像)、注目領域の検出結果、医療画像の鑑別結果等を互いに関連付けて記録することができる。これらの画像及び情報は、操作部208を介した操作、CPU210及び/または画像処理部204の制御によりモニタ400に表示される。
モニタ400(表示装置)は、操作部208を介した操作、CPU210及び/または画像処理部204の制御により内視鏡画像、注目領域の検出結果、医療画像の鑑別結果等を表示する。また、モニタ400は撮影条件設定操作及び/または表示条件設定操作を行うための図示せぬタッチパネルを有する。
上述した構成の内視鏡システム10を用いた医療診断支援方法について説明する。図7は第1の実施形態に係る医療診断支援方法の手順を示すフローチャートである。なお、図7は表示の対象が初期状態では鑑別結果で、その後検出結果に切り替えられた場合の処理を示している。
設定部204E(設定部)は、認識結果表示の待機時間を設定する(ステップS100:待機時間設定ステップ)。設定部204Eは、操作部208(受付部)が受け付けたユーザの操作に基づいて待機時間を設定することができる。例えば、図8に示すように、ユーザは表示の対象が鑑別の結果から検出の結果に切り替えられた場合の待機時間(第1の待機時間)をモニタ400に表示された待機時間設定画面の領域501に入力し、表示の対象が検出の結果から鑑別の結果に切り替えられた場合の待機時間(第2の待機時間)を領域502に入力することができる。なお、設定部204Eは第1の待機時間と第2の待機時間とを異なる値に設定してもよい(以下に示す例でも同様である)。
ステップS102では、操作部208等を介した設定(照明光の設定及び切り替え)に基づいて光源装置300が照明光を照射し、撮影光学系130により被検体の画像(内視鏡画像、医療画像)を撮影して、撮影した画像を画像取得部204Aが取得する(画像取得ステップ)。画像取得部204Aは、決められたフレームレートにより時系列順に複数の医療画像を取得することができる。なお、医療画像の鑑別を行う場合、例えば青色狭帯域光等の特殊光(第2の聡明光の一例)を照明光とすることができるが、他の照明光を用いてもよい。
作動制御部204Jは取得した医療画像を鑑別部204C(鑑別用CNN215)に入力し、鑑別部204Cは鑑別用CNN215により医療画像を鑑別(分類)する(ステップS104:鑑別ステップ)。鑑別は医療画像の全体もしくは一部について行うことができ、その結果に基づいてユーザ(医師等)が対象とする領域の良悪性等を判断する。注目領域が検出されている場合、その注目領域について鑑別を行ってもよい。鑑別部204Cは、どのような範囲を対象として鑑別を行うかを操作部208を介したユーザの操作に基づいて決定してもよいし、ユーザの操作によらずに決定してもよい。鑑別の例としては、病変の病種(過形成ポリープ、腺腫、粘膜内癌、浸潤癌など)、病変の範囲、病変のサイズ、病変の肉眼形、癌のステージ診断、管腔内の現在位置(上部であれば咽頭、食道、胃、十二指腸等、下部であれば盲腸、上行結腸、横行結腸、下行結腸、S状結腸、直腸等)等を挙げることができる。
作動制御部204Jは、作動の対象が鑑別から検出に切り替えられるまで(ステップS108でNOの間)鑑別部204Cを作動させ、表示制御部204Dはその結果を表示させる。作動の対象が鑑別から検出に切り替えられたら(ステップS108でYES)、作動制御部204Jは検出部204Bを作動させて検出用CNN214に医療画像を入力する(ステップS110:画像取得ステップ)。光源装置300は、作動対象の切り替えに連動して照明光を切り替えてもよいし(例えば、鑑別での青色狭帯域光から検出での白色光に切り替える)、ユーザによる切り替え操作があるまで照明光を維持(作動対象の切り替えとは独立して照明光を切り替える)してもよい。
検出部204Bは、検出用CNN214(第1の階層型ネットワーク)が上述したセグメンテーションを行うことにより医療画像に含まれる注目領域を検出する(ステップS112:検出ステップ)。ステップS112で検出する注目領域(関心領域)の例としては、ポリープ、癌、大腸憩室、炎症、治療痕(EMR瘢痕(EMR:Endoscopic Mucosal Resection)、ESD瘢痕(ESD:Endoscopic Submucosal Dissection)、クリップ箇所等)、出血点、穿孔、血管異型性などを挙げることができる。なお、検出部204BはCNN以外の手法により注目領域を検出してもよい。例えば、取得した医療画像の画素の特徴量に基づいて注目領域を検出することができる。この場合、検出部204Bは検出対象画像を例えば複数の矩形領域に分割し、分割した各矩形領域を局所領域として設定し、検出対象画像の局所領域ごとに局所領域内の画素の特徴量(例えば色相)を算出し、各局所領域の中から特定の色相を有する局所領域を注目領域として決定する。同様に、鑑別部204Cも特徴量に基づいて鑑別を行ってもよい。
表示制御部204Dは、作動の対象が検出部と鑑別部との間で切り替えられた場合は、表示の対象が検出の結果と鑑別の結果との間で切り替えられたと判断して作動により得られた検出の結果を表示させるが、以下で説明するように結果の表示は検出が行われてから待機時間(第1の待機時間)が経過した後であり、また既に検出された注目領域である場合は結果を表示しない。認識結果を表示するまでの時間は、図12に示すように、表示制御部204Dは取得した医療画像806を認識結果なしでモニタ400に表示させる。表示制御部204Dは、待機時間が経過するまでの間、医療画像に加えて検出の結果を表示させていないことを示す情報をモニタ400(表示装置)に表示させてもよい(図14の例では、領域830に「結果表示を待機中」というメッセージを表示させている)。ユーザは、結果が表示されていないと装置が正しく動作しているかどうか不安になる可能性があるが、このように情報を表示させることでそのような不安を解消することができる。なお、情報を表示するかどうかを、操作部208を介したユーザの操作に応じて決めてもよい。
図15のフローチャートを参照しつつ、表示の対象が検出の結果から鑑別の結果に切り替えられた場合の表示について説明する。この場合、上述したステップS100と同様に待機時間等の条件を設定し(ステップS200:設定ステップ)、ステップS110〜S114、S122と同様にステップS202〜S206(画像取得ステップ、検出ステップ、記憶制御ステップ、表示制御ステップ)で画像取得、注目領域の検出、記憶制御、検出結果の表示を行う。図7のフローチャートの場合と同様に、光源装置300は作動対象の切り替えに連動して照明光を切り替えてもよいし(例えば、検出での白色光から鑑別での青色狭帯域光に切り替える)、ユーザによる切り替え操作があるまで照明光を維持してもよい。表示の対象が検出の結果から鑑別の結果に切り替えられるまで(ステップS208でNOの間)これらの処理を繰り返し、切り替えがされたらステップS210に進む。ステップS210,S212(画像取得ステップ、鑑別ステップ)ではステップS102,S104と同様に医療画像の取得及び鑑別を行い、鑑別が行われたら経過時間のカウントを開始する(ステップS214:表示制御ステップ)。第2の待機時間が経過するまで(ステップS216でNOの間)ステップS210〜S214の処理を繰り返し、第2の待機時間が経過したら、表示制御部204Dは図11のように鑑別結果をモニタ400に表示させる(ステップS218:表示制御ステップ)。上述したように、第2の待機時間は第1の待機時間と同じでもよいし、異なっていてもよい(ゼロでもよい)。作動及び表示の対象が検出に切り替えられるまで(ステップS220でNOの間)ステップS210〜S214の処理を繰り返し、切り替え後は図7のステップS110以降と同様に処理を進める。
本発明に係る医療診断支援装置及び医療診断支援方法では、検出部による検出と鑑別部による鑑別とを並行して行い、表示の対象の切り替えにより検出の結果または鑑別の結果を表示してもよい。図16は、このような検出及び鑑別に関する構成の変形例における画像処理部204の機能ブロック図であり、図4に示す構成から作動制御部204Jが除かれている。また、図17は検出部204B及び鑑別部204Cに関する構成を示す図であり、画像取得部204Aが取得した医療画像が検出部204B及び鑑別部204Cの双方に入力される状態を示している。内視鏡システム10のその他の構成は図1〜3等について上述したものと同様である。なお、「並行して行う」には、時系列順に取得した医療画像を構成するフレームに対し検出と鑑別の両方を行うことが含まれる。
上述した実施形態では、医用画像の撮影と認識及び表示とを並行して(リアルタイムで)行う態様について説明したが、内視鏡システム10では、あらかじめ撮影及び記録された画像を事後的に処理(認識、表示等)することもできる。例えば、内視鏡システム10は、記録部207に記録されている内視鏡画像(時系列順に取得した医療画像)の各フレームについて認識及び表示を行うことができ、このような事後処理においても医療画像の認識結果の視認性を高めることができる。認識及び表示の事後処理は、撮像部分(内視鏡、光源装置、撮像部等)を備えていないプロセッサ等の装置(内視鏡システム10とは独立した装置)やコンピュータで行ってもよい。
上述した第1の実施形態及び変形例に加えて、以下に記載の構成も本発明の範囲に含まれる。
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出し、
医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。
医療画像解析結果取得部は、
医療画像の解析結果を記録する記録装置から取得し、
解析結果は、医療画像に含まれる注目すべき領域である注目領域と、注目すべき対象の有無のいずれか、もしくは両方である医療画像処理装置。
医療画像は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得た通常光画像である医療画像処理装置。
医療画像は、特定の波長帯域の光を照射して得た画像であり、
特定の波長帯域は、白色の波長帯域よりも狭い帯域である医療画像処理装置。
特定の波長帯域は、可視域の青色もしくは、緑色帯域である医療画像処理装置。
特定の波長帯域は、390nm以上450nm以下または530nm以上550nm以下の波長帯域を含み、かつ、特定の波長帯域の光は、390nm以上450nm以下または530nm以上550nm以下の波長帯域内にピーク波長を有する医療画像処理装置。
特定の波長帯域は、可視域の赤色帯域である医療画像処理装置。
特定の波長帯域は、585nm以上615nm以下または610nm以上730nm以下の波長帯域を含み、かつ、特定の波長帯域の光は、585nm以上615nm以下または610nm以上730nm以下の波長帯域内にピーク波長を有する医療画像処理装置。
特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する医療画像処理装置。
特定の波長帯域は、400±10nm、440±10nm、470±10nm、または、600nm以上750nm以下の波長帯域を含み、かつ、特定の波長帯域の光は、400±10nm、440±10nm、470±10nm、または、600nm以上750nm以下の波長帯域にピーク波長を有する医療画像処理装置。
医療画像は生体内を写した生体内画像であり、
生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する医療画像処理装置。
蛍光は、ピークが390以上470nm以下である励起光を生体内に照射して得る医療画像処理装置。
医療画像は生体内を写した生体内画像であり、
特定の波長帯域は、赤外光の波長帯域である医療画像処理装置。
特定の波長帯域は、790nm以上820nm以下または905nm以上970nm以下の波長帯域を含み、かつ、特定の波長帯域の光は、790nm以上820nm以下または905nm以上970nm以下の波長帯域にピーク波長を有する医療画像処理装置。
医療画像取得部は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備え、
医療画像は特殊光画像である医療画像処理装置。
特定の波長帯域の信号は、通常光画像に含まれるRGBあるいはCMYの色情報に基づく演算により得る医療画像処理装置。
白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、
医療画像は特徴量画像である医療画像処理装置。
付記1から18のいずれか1つに記載の医療画像処理装置と、
白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、
を備える内視鏡装置。
付記1から18のいずれか1つに記載の医療画像処理装置を備える診断支援装置。
付記1から18のいずれか1つに記載の医療画像処理装置を備える医療業務支援装置。
100 内視鏡スコープ
102 手元操作部
104 挿入部
106 ユニバーサルケーブル
108 ライトガイドコネクタ
112 軟性部
114 湾曲部
116 先端硬質部
116A 先端側端面
123 照明部
123A 照明用レンズ
123B 照明用レンズ
126 鉗子口
130 撮影光学系
132 撮影レンズ
134 撮像素子
136 駆動回路
138 AFE
141 送気送水ボタン
142 吸引ボタン
143 機能ボタン
144 撮影ボタン
170 ライトガイド
200 プロセッサ
202 画像入力コントローラ
204 画像処理部
204A 画像取得部
204B 検出部
204C 鑑別部
204D 表示制御部
204E 設定部
204F 推定部
204G 記憶制御部
204H 判断部
204I 受付部
204J 作動制御部
205 通信制御部
206 ビデオ出力部
207 記録部
208 操作部
209 音声処理部
209A スピーカ
209B マイク
210 CPU
211 ROM
212 RAM
214 検出用CNN
215 鑑別用CNN
214A 入力層
214B 中間層
214C 出力層
215B 中間層
216 畳み込み層
217 プーリング層
218 全結合層
300 光源装置
310 光源
310B 青色光源
310G 緑色光源
310R 赤色光源
310V 紫色光源
330 絞り
340 集光レンズ
350 光源制御部
400 モニタ
501 領域
502 領域
511 チェックボックス
512 チェックボックス
520 領域
801 注目領域
806 医療画像
806A 枠
806B マーカ
806C マーカ
830 領域
842 領域
S100〜S322 医療診断支援方法の各ステップ
Claims (16)
- 医療画像を時系列順に取得する画像取得部と、
前記医療画像に含まれる注目領域を検出する検出部と、
前記医療画像の鑑別を行う鑑別部と、
前記検出の結果と前記鑑別の結果とのうちいずれかを表示装置に表示させる表示制御部と、
前記検出または前記鑑別が行われてから前記表示がされるまでの待機時間を設定する設定部と、を備え、
前記表示制御部は、前記表示の対象が前記検出の結果と前記鑑別の結果との間で切り替えられた場合は、前記検出または前記鑑別が行われてから前記待機時間が経過した後に前記検出または前記鑑別の結果を表示させる医療診断支援装置。 - 前記医療画像を構成するフレーム間の動き量を推定する推定部を備え、
前記設定部は前記推定した動き量に応じて前記待機時間を設定する請求項1に記載の医療診断支援装置。 - 前記設定部は、前記動き量がしきい値よりも大きい場合は前記しきい値に対応する待機時間よりも短い待機時間を前記待機時間として設定し、前記動き量が前記しきい値以下の場合は前記しきい値に対応する前記待機時間よりも長い待機時間を前記待機時間として設定する請求項2に記載の医療診断支援装置。
- 前記医療画像から検出された注目領域の情報を記憶装置に記憶させる記憶制御部と、
前記検出部が検出した注目領域が既に検出された注目領域であるか否かを、前記記憶された情報に基づいて判断する判断部と、
をさらに備え、
前記表示制御部は、前記検出部が検出した注目領域が既に検出された注目領域であると判断された場合は、前記待機時間が経過しても前記表示を行わない請求項1から3のいずれか1項に記載の医療診断支援装置。 - ユーザの操作を受け付ける受付部をさらに備え、
前記設定部は前記受け付けた前記操作に基づいて前記待機時間を設定する請求項1から4のいずれか1項に記載の医療診断支援装置。 - 前記設定部は、あらかじめ決められた複数の待機時間から前記ユーザの前記操作により選択された待機時間を前記待機時間として設定する請求項5に記載の医療診断支援装置。
- 前記表示制御部は、前記待機時間が経過するまでの間、前記検出の結果または前記鑑別の結果を表示させていないことを示す情報を前記表示装置に表示させる請求項1から6のいずれか1項に記載の医療診断支援装置。
- 前記設定部は、前記表示の対象が前記鑑別の結果から前記検出の結果に切り替えられた場合の待機時間である第1の待機時間を前記待機時間として設定し、
前記表示制御部は、前記表示の対象が前記鑑別の結果から前記検出の結果に切り替えられた場合は前記検出が行われてから前記第1の待機時間が経過した後に前記検出の結果を表示させる請求項1から7のいずれか1項に記載の医療診断支援装置。 - 前記設定部は、前記表示の対象が前記検出の結果から前記鑑別の結果に切り替えられた場合の待機時間である第2の待機時間を前記待機時間として設定し、
前記表示制御部は、前記表示の対象が前記検出の結果から前記鑑別の結果に切り替えられた場合は前記鑑別が行われてから前記第2の待機時間が経過した後に前記鑑別の結果を表示させる請求項1から8のいずれか1項に記載の医療診断支援装置。 - 前記検出部と前記鑑別部のいずれかを作動させる作動制御部を備え、
前記表示制御部は、前記作動の対象が前記検出部と前記鑑別部との間で切り替えられた場合は、前記表示の対象が前記検出の結果と前記鑑別の結果との間で切り替えられたと判断して前記作動により得られた前記検出の結果または前記鑑別の結果を表示させる請求項1から9のいずれか1項に記載の医療診断支援装置。 - 前記検出部による前記検出と前記鑑別部による前記鑑別とを並行して行う請求項1から9のいずれか1項に記載の医療診断支援装置。
- 前記検出部は第1の階層型ネットワークを用いて前記検出を行い、前記鑑別部は第2の階層型ネットワークを用いて前記鑑別を行う請求項1から11のいずれか1項に記載の医療診断支援装置。
- 請求項1から12のいずれか1項に記載の医療診断支援装置と、
前記表示装置と、
被検体に挿入される内視鏡スコープと、
第1の照明光と、前記第1の照明光とは異なる第2の照明光とのうち一方を前記被検体に照射する光源装置と、
を備える内視鏡システム。 - 前記光源装置は、前記検出と前記鑑別との切り替えに連動して前記第1の照明光と前記第2の照明光とを切り替える請求項13に記載の内視鏡システム。
- 前記光源装置は、前記検出と前記鑑別との切り替えとは独立して前記第1の照明光と前記第2の照明光とを切り替える請求項13に記載の内視鏡システム。
- 医療画像を時系列順に取得する画像取得ステップと、
前記医療画像に含まれる注目領域を検出する検出ステップと、
前記医療画像の鑑別を行う鑑別ステップと、
前記検出の結果と前記鑑別の結果とのうちいずれかを表示装置に表示させる表示制御ステップと、
前記検出または前記鑑別が行われてから前記表示がされるまでの待機時間を設定する設定ステップと、を有し、
前記表示制御ステップでは、前記表示の対象が前記検出の結果と前記鑑別の結果との間で切り替えられた場合は、前記検出または前記鑑別が行われてから前記待機時間が経過した後に前記検出または前記鑑別の結果を表示させる医療診断支援方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018207122A JP7038641B2 (ja) | 2018-11-02 | 2018-11-02 | 医療診断支援装置、内視鏡システム、及び作動方法 |
US16/591,585 US11464394B2 (en) | 2018-11-02 | 2019-10-02 | Medical diagnosis support device, endoscope system, and medical diagnosis support method |
US17/944,201 US11925311B2 (en) | 2018-11-02 | 2022-09-14 | Medical diagnosis support device, endoscope system, and medical diagnosis support method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018207122A JP7038641B2 (ja) | 2018-11-02 | 2018-11-02 | 医療診断支援装置、内視鏡システム、及び作動方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020069300A true JP2020069300A (ja) | 2020-05-07 |
JP7038641B2 JP7038641B2 (ja) | 2022-03-18 |
Family
ID=70459937
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018207122A Active JP7038641B2 (ja) | 2018-11-02 | 2018-11-02 | 医療診断支援装置、内視鏡システム、及び作動方法 |
Country Status (2)
Country | Link |
---|---|
US (2) | US11464394B2 (ja) |
JP (1) | JP7038641B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102185886B1 (ko) * | 2020-05-22 | 2020-12-02 | 주식회사 웨이센 | 인공지능을 이용한 대장 내시경 영상 분석 방법 및 장치 |
WO2022186111A1 (ja) * | 2021-03-04 | 2022-09-09 | 富士フイルム株式会社 | 医用画像処理装置、医用画像処理方法、及びプログラム |
WO2022186109A1 (ja) | 2021-03-01 | 2022-09-09 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム |
WO2022202401A1 (ja) | 2021-03-22 | 2022-09-29 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20210307597A1 (en) * | 2018-07-23 | 2021-10-07 | The Regents Of The University Of California | Oral and oropharyngeal cancer screening system and methods of use |
JP6994582B2 (ja) * | 2018-09-13 | 2022-01-14 | オリンパス株式会社 | 内視鏡画像処理装置、内視鏡画像処理方法及びプログラム |
JP7148625B2 (ja) * | 2018-09-18 | 2022-10-05 | 富士フイルム株式会社 | 医用画像処理装置、プロセッサ装置、医用画像処理装置の作動方法、及びプログラム |
DE102020116473A1 (de) | 2020-06-23 | 2021-12-23 | Olympus Winter & Ibe Gmbh | Verfahren zur endoskopischen Bildgebung, endoskopisches Bildgebungssystem und Softwareprogrammprodukt |
KR102641492B1 (ko) * | 2022-01-05 | 2024-02-27 | 주식회사 아이넥스코퍼레이션 | 내시경 영상을 이용한 용종 검출 방법, 장치 및 프로그램 |
KR102641489B1 (ko) * | 2022-01-05 | 2024-02-27 | 주식회사 아이넥스코퍼레이션 | 내시경 영상을 이용한 용종 검출 방법, 장치 및 프로그램 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011160848A (ja) * | 2010-02-05 | 2011-08-25 | Olympus Corp | 画像処理装置、内視鏡システム、プログラム及び画像処理方法 |
WO2017081976A1 (ja) * | 2015-11-10 | 2017-05-18 | オリンパス株式会社 | 内視鏡装置 |
JP2017153763A (ja) * | 2016-03-03 | 2017-09-07 | 富士フイルム株式会社 | 画像処理装置とその作動方法および作動プログラム |
WO2017203560A1 (ja) * | 2016-05-23 | 2017-11-30 | オリンパス株式会社 | 内視鏡画像処理装置 |
WO2018105062A1 (ja) * | 2016-12-07 | 2018-06-14 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
US20180253839A1 (en) * | 2015-09-10 | 2018-09-06 | Magentiq Eye Ltd. | A system and method for detection of suspicious tissue regions in an endoscopic procedure |
WO2018179991A1 (ja) * | 2017-03-30 | 2018-10-04 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4575124B2 (ja) * | 2004-11-29 | 2010-11-04 | オリンパス株式会社 | 画像表示装置 |
JP4912787B2 (ja) * | 2006-08-08 | 2012-04-11 | オリンパスメディカルシステムズ株式会社 | 医療用画像処理装置及び医療用画像処理装置の作動方法 |
US8090177B2 (en) * | 2008-08-01 | 2012-01-03 | Sti Medical Systems, Llc | Methods for detection and characterization of atypical vessels in cervical imagery |
US20120316421A1 (en) * | 2009-07-07 | 2012-12-13 | The Johns Hopkins University | System and method for automated disease assessment in capsule endoscopy |
JP5597021B2 (ja) * | 2010-04-15 | 2014-10-01 | オリンパス株式会社 | 画像処理装置及びプログラム |
JP5675187B2 (ja) * | 2010-06-30 | 2015-02-25 | オリンパス株式会社 | 蛍光観察装置 |
US20120035507A1 (en) * | 2010-07-22 | 2012-02-09 | Ivan George | Device and method for measuring anatomic geometries |
JP5611892B2 (ja) * | 2011-05-24 | 2014-10-22 | 富士フイルム株式会社 | 内視鏡システム及び内視鏡システムの作動方法 |
JP6188721B2 (ja) * | 2012-12-13 | 2017-08-30 | オリンパス株式会社 | 蛍光観察装置 |
JP6479678B2 (ja) * | 2012-12-21 | 2019-03-06 | ボルケーノ コーポレイション | マルチセンサ医療デバイスのための表示制御 |
JP6392570B2 (ja) * | 2014-07-11 | 2018-09-19 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、画像処理プログラム、及び内視鏡システム |
JP6294255B2 (ja) * | 2015-03-25 | 2018-03-14 | 富士フイルム株式会社 | 内視鏡診断装置、画像処理方法、プログラムおよび記録媒体 |
TWI569764B (zh) * | 2015-05-20 | 2017-02-11 | 國立交通大學 | 用於微創手術的多器械影像辨識方法及系統 |
WO2017073338A1 (ja) * | 2015-10-26 | 2017-05-04 | オリンパス株式会社 | 内視鏡画像処理装置 |
WO2018078724A1 (ja) * | 2016-10-25 | 2018-05-03 | オリンパス株式会社 | 内視鏡画像処理装置及び内視鏡画像処理方法 |
WO2018079116A1 (ja) * | 2016-10-27 | 2018-05-03 | 富士フイルム株式会社 | 内視鏡システム |
WO2018083879A1 (ja) * | 2016-11-01 | 2018-05-11 | オリンパス株式会社 | 生体観察システム |
EP3590406A4 (en) * | 2017-02-28 | 2020-04-01 | Sony Corporation | MEDICAL OBSERVATION SYSTEM, CONTROL DEVICE AND CONTROL METHOD |
JP7149692B2 (ja) * | 2017-08-09 | 2022-10-07 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JPWO2019054265A1 (ja) * | 2017-09-15 | 2020-10-01 | 富士フイルム株式会社 | 医療画像処理装置 |
JPWO2019078237A1 (ja) * | 2017-10-18 | 2020-10-22 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、診断支援装置、並びに医療業務支援装置 |
WO2019167623A1 (ja) * | 2018-03-02 | 2019-09-06 | 富士フイルム株式会社 | 画像処理装置、内視鏡システム、及び画像処理方法 |
WO2019187049A1 (ja) * | 2018-03-30 | 2019-10-03 | オリンパス株式会社 | 診断支援装置、診断支援方法及び診断支援プログラム |
CN112040830A (zh) * | 2018-06-19 | 2020-12-04 | 奥林巴斯株式会社 | 内窥镜图像处理装置和内窥镜图像处理方法 |
WO2019244247A1 (ja) * | 2018-06-19 | 2019-12-26 | オリンパス株式会社 | 内視鏡装置、内視鏡装置の作動方法及びプログラム |
JP2021191314A (ja) * | 2018-06-19 | 2021-12-16 | オリンパス株式会社 | 内視鏡システム及び内視鏡システムの作動方法 |
EP3831272B1 (en) * | 2018-07-27 | 2024-03-27 | FUJIFILM Corporation | Medical image processing device |
WO2020039685A1 (ja) * | 2018-08-20 | 2020-02-27 | 富士フイルム株式会社 | 医療画像処理装置 |
JP7116176B2 (ja) * | 2018-08-20 | 2022-08-09 | 富士フイルム株式会社 | 医療画像処理システム |
US11069078B2 (en) * | 2018-08-23 | 2021-07-20 | Shenzhen Keya Medical Technology Corporation | Method, device and system for generating a centerline for an object in an image |
JP7286948B2 (ja) * | 2018-11-07 | 2023-06-06 | ソニーグループ株式会社 | 医療用観察システム、信号処理装置及び医療用観察方法 |
CN113395929A (zh) * | 2019-02-08 | 2021-09-14 | 富士胶片株式会社 | 医疗图像处理装置、内窥镜系统、以及医疗图像处理方法 |
CN112566540B (zh) * | 2019-03-27 | 2023-12-19 | Hoya株式会社 | 内窥镜用处理器、信息处理装置、内窥镜系统、程序以及信息处理方法 |
-
2018
- 2018-11-02 JP JP2018207122A patent/JP7038641B2/ja active Active
-
2019
- 2019-10-02 US US16/591,585 patent/US11464394B2/en active Active
-
2022
- 2022-09-14 US US17/944,201 patent/US11925311B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011160848A (ja) * | 2010-02-05 | 2011-08-25 | Olympus Corp | 画像処理装置、内視鏡システム、プログラム及び画像処理方法 |
US20180253839A1 (en) * | 2015-09-10 | 2018-09-06 | Magentiq Eye Ltd. | A system and method for detection of suspicious tissue regions in an endoscopic procedure |
WO2017081976A1 (ja) * | 2015-11-10 | 2017-05-18 | オリンパス株式会社 | 内視鏡装置 |
JP2017153763A (ja) * | 2016-03-03 | 2017-09-07 | 富士フイルム株式会社 | 画像処理装置とその作動方法および作動プログラム |
WO2017203560A1 (ja) * | 2016-05-23 | 2017-11-30 | オリンパス株式会社 | 内視鏡画像処理装置 |
WO2018105062A1 (ja) * | 2016-12-07 | 2018-06-14 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
WO2018179991A1 (ja) * | 2017-03-30 | 2018-10-04 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102185886B1 (ko) * | 2020-05-22 | 2020-12-02 | 주식회사 웨이센 | 인공지능을 이용한 대장 내시경 영상 분석 방법 및 장치 |
WO2022186109A1 (ja) | 2021-03-01 | 2022-09-09 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム |
WO2022186111A1 (ja) * | 2021-03-04 | 2022-09-09 | 富士フイルム株式会社 | 医用画像処理装置、医用画像処理方法、及びプログラム |
WO2022202401A1 (ja) | 2021-03-22 | 2022-09-29 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7038641B2 (ja) | 2022-03-18 |
US11925311B2 (en) | 2024-03-12 |
US11464394B2 (en) | 2022-10-11 |
US20230016855A1 (en) | 2023-01-19 |
US20200138265A1 (en) | 2020-05-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7038641B2 (ja) | 医療診断支援装置、内視鏡システム、及び作動方法 | |
JP7430287B2 (ja) | 医用画像処理装置及び内視鏡システム | |
JP7170032B2 (ja) | 画像処理装置、内視鏡システム、及び画像処理方法 | |
JP7048732B2 (ja) | 画像処理装置、内視鏡システム、及び画像処理方法 | |
WO2020162275A1 (ja) | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 | |
JP6941233B2 (ja) | 画像処理装置、内視鏡システム、及び画像処理方法 | |
US20220151462A1 (en) | Image diagnosis assistance apparatus, endoscope system, image diagnosis assistance method , and image diagnosis assistance program | |
JP7374280B2 (ja) | 内視鏡装置、内視鏡プロセッサ、及び内視鏡装置の作動方法 | |
WO2020170809A1 (ja) | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 | |
US11911007B2 (en) | Image processing device, endoscope system, and image processing method | |
US20230157768A1 (en) | Medical image processing apparatus, medical image processing method, endoscope system, and medical image processing program | |
US20220151461A1 (en) | Medical image processing apparatus, endoscope system, and medical image processing method | |
US20230410303A1 (en) | Medical image processing apparatus, endoscope system, medical image processing method, and medical image processing program | |
US20230389774A1 (en) | Medical image processing apparatus, endoscope system, medical image processing method, and medical image processing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210108 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220214 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220308 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7038641 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |