WO2022186109A1 - 医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム - Google Patents

Abstract

本発明は、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラムを提供することを目的とする。本発明の一の態様に係る医療画像処理装置は、プロセッサを備える医療画像処理装置であって、プロセッサは、時系列の医療画像を取得する画像取得処理と、取得した医療画像から注目領域を検出する注目領域検出処理と、医療画像を表示装置に表示させる表示制御処理と、注目領域検出処理で注目領域が検出された場合に、表示装置に医療画像と検出された注目領域に関する情報を重畳表示させる第１の報知処理と、注目領域検出処理で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知処理と、を実行し、第２の報知処理を第１の報知処理よりも後に実行する。

Description

医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラム

　本発明は医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラムに関し、特に注目領域の検出結果を報知する技術に関する。

　医師等のユーザが医療画像の観察や診断を行う際の支援として、医療画像処理装置による注目領域の検出結果を報知することが知られている。例えば、特許文献１には、複数の注目領域検出部の内から選択した注目領域検出部によって注目領域を検出してその結果を報知（表示）することが記載されている。また、特許文献２には、検出結果や鑑別結果を音声で報知することが記載されている。

ＷＯ１７／０８１９７６号公報 特開２０２０－６９３００号公報

　内視鏡画像や超音波画像のような医療画像から病変をはじめとした注目領域をＡＩ（Artificial Intelligence：人工知能）等により検出してユーザに報知する場合、病変の見落としを防ぐために、検出対象を即座に報知することが求められる。しかしながら、ＡＩによる自動検出では偽陽性が発生する可能性があり、その場合誤った報知をしてしまいユーザが煩わしさを感じる、という問題がある。特に、音声による報知が頻繁に誤って出力されてしまうと、ユーザは表示による報知の場合よりもより煩わしさを感じる傾向がある。しかしながら、上述した特許文献１，２のような従来の技術では、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することが困難であった。

　本発明はこのような事情に鑑みてなされたもので、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラムを提供することを目的とする。

　上述した目的を達成するため、本発明の第１の態様に係る医療画像処理装置は、プロセッサを備える医療画像処理装置であって、プロセッサは、時系列の医療画像を取得する画像取得処理と、取得した医療画像から注目領域を検出する注目領域検出処理と、医療画像を表示装置に表示させる表示制御処理と、注目領域検出処理で注目領域が検出された場合に、表示装置に医療画像と検出された注目領域に関する情報を重畳表示させる第１の報知処理と、注目領域検出処理で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知処理と、を実行し、第２の報知処理を第１の報知処理よりも後に実行する。

　第１の態様に係る医療画像処理装置では、プロセッサは、注目領域が検出された場合に第１の報知処理（表示装置への表示）を行う。これにより、注目領域の見逃し防止の効果が得られる。なお、見落とし防止の観点からは、プロセッサは注目領域を検出した場合に即座に（できるだけ短い遅延で）第１の報知処理を行うことが好ましいが、装置での処理に伴う必然的な遅延や、医療画像の取得が間欠的であることによる遅延は許容される。

　注目領域の検出において、偽陽性は瞬時的に発生することが多く継続的に発生することは少ない傾向にある。そのため、注目領域が瞬時的に検出された場合の音声出力を抑制すれば、偽陽性に起因する音声出力によりユーザが煩わしさを感じる度合いを低減することができる。第１の実施形態では、このような観点から、プロセッサは音声を出力する第２の報知処理を第１の報知処理よりも後に実行する。すなわち、プロセッサは、第１の報知処理（画面表示）の直後の期間においては注目領域が検出されていても音声出力しないので、この期間における瞬時的な偽陽性による音声出力が抑制される。

　プロセッサ（医療画像処理装置）は、「第２の報知をどの程度遅らせるか（遅延時間あるいは待機時間）」をユーザの指定に応じて設定してもよいし、ユーザの指定によらずに設定してもよい。ユーザは、偽陽性による音声出力の抑制度合いと音声による報知力のバランスを考慮して、遅延時間を指定することができる。

　第１の態様に係る医療画像処理装置によれば、このような第１，第２の報知処理により、注目領域の見落としの可能性を低減しつつ、不要な音声出力（瞬時的な偽陽性による音声出力）を抑制することができる。

　なお、第１の態様及び以下の各態様において、「時系列の医療画像の取得」は決められたフレームレートで撮影された複数の医療画像を順次取得することを含む。取得はリアルタイムでもよいし、リアルタイムでなくてもよい。

　第１の態様に係る医療画像処理装置は、例えば医療画像処理システムのプロセッサ部分として実現することができるが、このような態様に限定されるものではない。なお、「医療画像」とは診断、治療、計測等を目的として人体等の生体を撮影、計測等した結果として得られた画像をいい、例えば内視鏡画像、超音波画像、ＣＴ画像（ＣＴ：Computed Tomography）、ＭＲＩ画像（ＭＲＩ：Magnetic Resonance Imaging）を挙げることができる。医療画像は医用画像ともいう。また、第１の態様及び以下の各態様において、「注目領域（ＲＯＩ：Region of Interest）」は医療画像における病変領域または病変候補領域、臓器や脈管、処置が施された領域、処置具等が写った領域であってよい。「注目領域」は「関心領域」と呼ばれることがある。

　第２の態様に係る医療画像処理装置は第１の態様において、プロセッサは、注目領域検出処理において注目領域が検出されてから第１期間が経過した後にも注目領域を検出した場合は第２の報知処理を実行し、第１期間が経過した後に注目領域を検出しなかった場合は第２の報知処理を実行しない。注目領域が検出されてから第１期間が経過した後にも注目領域が検出された場合は、継続的な検出であり瞬時的な偽陽性の可能性は低いと考えられるので、第２の報知処理（音声出力）を行うことができる。なお、第２の態様において、プロセッサは観察の目的や対象、あるいはユーザの指定に応じて「第１期間」の値を設定することができる。

　第３の態様に係る医療画像処理装置は第１または第２の態様において、プロセッサは、第１の報知処理において、医療画像における注目領域の位置に対応して情報を重畳表示する。第３の態様は、第１の報知処理の態様を具体的に規定するものである。プロセッサは、情報を医療画像における注目領域内に表示してもよいし、注目領域の周辺に表示してもよい。また、プロセッサは、表示装置の表示画面における医療画像表示領域外に情報を表示してもよい。

　第４の態様に係る医療画像処理装置は第１から第３の態様のいずれか１つにおいて、プロセッサは、注目領域検出処理で検出された注目領域に対して連続検出回数を算出する検出回数算出処理を実行し、連続検出回数があらかじめ決められた回数を超えた場合に第２の報知処理を実行する。連続検出回数があらかじめ決められた回数を超えた場合、「継続的な検出であり瞬時的な偽陽性の可能性は低い」と考えられるため、第４の態様のように第２の報知処理を実行することができる。プロセッサは「あらかじめ決められた回数」をユーザの指定に応じて設定してもよいし、ユーザの指定によらずに設定してもよい。

　第５の態様に係る医療画像処理装置は第４の態様において、プロセッサは、検出された注目領域の特徴量を保持する特徴量保持処理と、第１の時刻において撮像された医療画像から検出された第１の注目領域の特徴量と、保持されている第１の時刻より前の時刻である第２の時刻において撮像された第２の医療画像から検出された第２の注目領域の特徴量と、を比較することにより第１の注目領域と第２の注目領域との同一性を判定する同一性判定処理と、をさらに実行し、検出回数算出処理では、同一性判定処理での判定結果に応じて第１の注目領域に対する連続検出回数を算出する。第５の態様のように、注目領域の同一性を考慮して連続検出回数を算出することにより、第２の報知処理をより適切に行うことができる。なお、「保持」は一時的記録（記憶）でもよいし、非一時的記録でもよい。また、第１，第２の注目領域について、「特徴量」は例えば種類、位置、形状、大きさ、色彩であるが、これらの例には限定されない。

　第６の態様に係る医療画像処理装置は第５の態様において、プロセッサは、同一性判定処理において第１の注目領域と第２の注目領域が同一であると判断された場合、検出回数算出処理において、第２の注目領域に対して記録されていた連続検出回数を増加させた上で第１の注目領域の連続検出回数として算出する。第６の態様は、連続検出回数算出の具体的態様を規定するものである。

　第７の態様に係る医療画像処理装置は第５または第６の態様において、プロセッサは、同一性判定処理において、特徴量保持処理で保持された特徴量のうちで第１の時刻より決められた期間前までの時刻についての特徴量を第１の注目領域の特徴量と比較することにより同一性の判定を行う。第７の態様において、「第１の時刻より決められた期間前までの時刻」は第５の態様における「第２の時刻」に対応するものである。この「決められた期間」は、計算コストの増大や同一性判定の精度低下の問題を考慮して設定することができる。

　第８の態様に係る医療画像処理装置は第１から第７の態様のいずれか１つにおいて、プロセッサは、第２の報知処理において、音声出力装置に音声を出力させた後、決められた期間は音声を出力させない。第８の態様は、音声が頻繁に出力されたり長時間出力が継続したりするとユーザが煩わしさを感じる場合があることを考慮して、音声出力の停止期間を設けたものである。プロセッサは、「決められた期間」をユーザの指定に応じて設定してもよいし、ユーザの指定によらずに設定してもよい。

　第９の態様に係る医療画像処理装置は第１から第８の態様のいずれか１つにおいて、プロセッサは、第１の報知処理において、第２の報知処理における音声出力状態に応じて第１の報知処理の態様を変更する。第９の態様において、プロセッサは、例えば、第２の報知処理がなされる場合（すなわち、注目領域が継続的に検出され瞬時的な偽陽性の可能性が低い場合）に、第１の報知処理で重畳表示される情報の識別力を増加させることができ、このような第１の報知処理の態様変更により、継続的検出であることを報知できる。また、プロセッサは、第１の報知処理の態様を第２の報知処理（音声出力）と同時に変更してもよいし、タイミングを前後させて変更してもよい。

　第１０の態様に係る医療画像処理装置は第１から第９の態様のいずれか１つにおいて、プロセッサは、第１の報知処理において、文字、図形、記号のうち少なくとも１つを情報（検出された注目領域に関する情報）として重畳表示を行う。第１０の態様は、医療画像に重畳する情報の具体的態様を規定するものである。プロセッサは、注目領域の特徴量に応じた情報を重畳表示してよい。

　上述した目的を達成するため、本発明の第１１の態様に係る内視鏡システムは、第１から第１０の態様のいずれか１つに記載の医療画像処理装置と、被検体に挿入される内視鏡スコープであって、医療画像を撮像する撮像部を有する内視鏡スコープと、表示装置と、音声出力装置と、を備える。第１１の態様に係る内視鏡システムは、第１から第１０の態様のいずれか１つに係る医療画像処理装置を備えるので、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる。なお、第１１の態様に係る内視鏡システムは光源装置を備えていてもよい。その光源装置は、通常光（白色光）、特殊光（狭帯域光等）、及びそれらの組み合わせを観察光とすることができる。光源装置は、臓器や部位、観察目的や観察対象の種類等に応じて波長帯域の異なる観察光を照射することが好ましい。

　上述した目的を達成するため、本発明の第１２の態様に係る医療画像処理方法はプロセッサを備える医療画像処理装置により実行される医療画像処理方法であって、プロセッサは、時系列の医療画像を取得する画像取得工程と、取得した医療画像から注目領域を検出する注目領域検出工程と、医療画像を表示装置に表示させる表示制御工程と、注目領域検出工程で注目領域が検出された場合に、表示装置に医療画像と検出された注目領域に関する情報を重畳表示させる第１の報知工程と、注目領域検出工程で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知工程と、を実行し、第２の報知工程を第１の報知工程よりも後に行う。第１２の態様によれば、第１の態様と同様に、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる。第１２の態様に係る医療画像処理方法は、第２から第１０の態様と同様の構成をさらに含んでいてもよい。

　上述した目的を達成するため、本発明の第１３の態様に係る医療画像処理プログラムはプロセッサを備える医療画像処理装置に医療画像処理方法を実行させる医療画像処理プログラムであって、医療画像処理方法は、時系列の医療画像を取得する画像取得工程と、取得した医療画像から注目領域を検出する注目領域検出工程と、医療画像を表示装置に表示させる表示制御工程と、注目領域検出工程で注目領域が検出された場合に、表示装置に、医療画像と検出された注目領域に関する情報を重畳表示させる第１の報知工程と、注目領域検出工程で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知工程と、を含み、第２の報知工程は第１の報知工程よりも後に行われる。第１３の態様によれば、第１の態様、第１２の態様と同様に、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる。また、第１３の態様に係る医療画像処理プログラムは、第２から第１０の態様と同様の処理をさらに実行させるプログラムでもよい。なお、これら態様のプログラムのコンピュータ読み取り可能なコードを記録した非一時的記録媒体も本発明の態様として挙げることができる。

　以上説明したように、本発明に係る医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラムによれば、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる。

図１は、第１の実施形態に係る内視鏡システムの外観図である。 図２は、内視鏡システムの要部構成を示す図である。 図３は、プロセッサの機能構成を示すブロック図である。 図４は、注目領域検出部の構成を示す図である。 図５は、検出器の層構成の例を示す図である。 図６は、フィルタによる畳み込み処理の様子を示す図である。 図７は、第１の実施形態に係る医療画像処理方法の手順を示すフローチャートである。 図８は、処理条件の設定画面の例を示す図である。 図９は、重畳表示（第１の報知処理）の例を示す図である。 図１０は、音声による報知（第２の報知処理）の詳細を示すフローチャートである。 図１１は、音声出力の具体例（その１）を示す図である。 図１２は、音声出力の具体例（その２）を示す図である。 図１３は、音声出力の具体例（その３）を示す図である。 図１４は、音声出力の具体例（その４）を示す図である。 図１５は、音声出力の具体例（その５）を示す図である。 図１６は、音声出力の具体例（その６）を示す図である。

　以下、添付図面を参照しつつ、本発明に係る医療画像処理装置、内視鏡システム、医療画像処理方法、及び医療画像処理プログラムの実施形態について詳細に説明する。

　＜第１の実施形態＞
　＜内視鏡システムの構成＞
　図１は、第１の実施形態に係る内視鏡システム１０（医療画像処理装置、内視鏡システム）の外観図であり、図２は内視鏡システム１０の要部構成を示すブロック図である。図１，２に示すように、内視鏡システム１０は、内視鏡スコープ１００（内視鏡スコープ、撮像装置）、医療画像処理部２００（医療画像処理装置、プロセッサ）、光源装置３００（光源装置）、及びモニタ４００（表示装置）から構成される。電磁波や超音波、あるいは磁気を利用して内視鏡スコープ１００の状態を判定する外部デバイス（判定装置）を内視鏡システム１０に接続してもよい。

　＜内視鏡スコープの構成＞
　内視鏡スコープ１００は、手元操作部１０２と、この手元操作部１０２に連設される挿入部１０４とを備える。術者（ユーザ）は手元操作部１０２を把持して操作し、挿入部１０４を被検体の体内に挿入して観察する。また、手元操作部１０２には送気送水ボタン１４１、吸引ボタン１４２、及び各種の機能を割り付けられる機能ボタン１４３、及び撮影指示操作（静止画像、動画像）を受け付ける撮影ボタン１４４が設けられている。挿入部１０４は、手元操作部１０２側から順に、軟性部１１２、湾曲部１１４、先端硬質部１１６で構成されている。すなわち、先端硬質部１１６の基端側に湾曲部１１４が接続され、湾曲部１１４の基端側に軟性部１１２が接続される。挿入部１０４の基端側に手元操作部１０２が接続される。ユーザは、手元操作部１０２を操作することにより湾曲部１１４を湾曲させて先端硬質部１１６の向きを上下左右に変えることができる。先端硬質部１１６には、撮影光学系１３０、照明部１２３、鉗子口１２６等が設けられる（図１，２参照）。

　観察、処置の際には、操作部２０８（図２参照）の操作により、照明部１２３の照明用レンズ１２３Ａ，１２３Ｂから白色光（通常光）及び／または狭帯域光（特殊光：例えば赤色狭帯域光、緑色狭帯域光、青色狭帯域光、及び紫色狭帯域光のうち１つ以上）を照射することができる。また、送気送水ボタン１４１の操作により図示せぬ送水ノズルから洗浄水が放出されて、撮影光学系１３０の撮影レンズ１３２（撮影レンズ、撮影部）、及び照明用レンズ１２３Ａ，１２３Ｂを洗浄することができる。先端硬質部１１６で開口する鉗子口１２６には不図示の管路が連通しており、この管路に腫瘍摘出等のための図示せぬ処置具が挿通されて、適宜進退して被検体に必要な処置を施せるようになっている。

　図１，２に示すように、先端硬質部１１６の先端側端面１１６Ａには撮影レンズ１３２（撮像部）が配設されている。撮影レンズ１３２の奥にはＣＭＯＳ（Complementary Metal-Oxide Semiconductor）型の撮像素子１３４（撮像素子、撮像部）、駆動回路１３６、
ＡＦＥ１３８（ＡＦＥ：Analog Front End、撮影部）が配設されて、これらの要素により画像信号を出力する。撮像素子１３４はカラー撮像素子であり、特定のパターン配列（ベイヤー配列、Ｘ－Ｔｒａｎｓ（登録商標）配列、ハニカム配列等）でマトリクス状に配置（２次元配列）された複数の受光素子により構成される複数の画素を備える。撮像素子１３４の各画素はマイクロレンズ、赤（Ｒ）、緑（Ｇ）、または青（Ｂ）のカラーフィルタ及び光電変換部（フォトダイオード等）を含んでいる。撮影光学系１３０は、赤，緑，青の３色の画素信号からカラー画像を生成することもできるし、赤，緑，青のうち任意の１色または２色の画素信号から画像を生成することもできる。なお、第１の実施形態では撮像素子１３４がＣＭＯＳ型の撮像素子である場合について説明するが、撮像素子１３４はＣＣＤ（Charge Coupled Device）型でもよい。なお、撮像素子１３４の各画素は紫色光源３１０Ｖに対応した紫色カラーフィルタ、及び／または赤外光源に対応した赤外用フィルタをさらに備えていてもよい。

　被検体の光学像は撮影レンズ１３２により撮像素子１３４の受光面（撮像面）に結像されて電気信号に変換され、不図示の信号ケーブルを介して医療画像処理部２００に出力されて映像信号に変換される。これにより、医療画像処理部２００に接続されたモニタ４００に内視鏡画像が表示される。

　また、先端硬質部１１６の先端側端面１１６Ａには、撮影レンズ１３２に隣接して照明部１２３の照明用レンズ１２３Ａ、１２３Ｂが設けられている。照明用レンズ１２３Ａ，１２３Ｂの奥には、後述するライトガイド１７０の射出端が配設され、このライトガイド１７０が挿入部１０４、手元操作部１０２、及びユニバーサルケーブル１０６に挿通され、ライトガイド１７０の入射端がライトガイドコネクタ１０８内に配置される。

　手元操作部１０２は、内視鏡スコープ１００の個体情報（個体情報、スコープ情報）を記録する不図示のスコープ情報記録部を備えていてもよい。個体情報は、例えば内視鏡スコープ１００のタイプ（直視か側視か、等）、機種、個体識別番号、光学系の特性（視野角、歪み等）等である。プロセッサ２１０（スコープ情報取得部、個体情報取得部）は、この個体情報を取得して医療画像処理に用いることができる。なお、スコープ情報記録部はライトガイドコネクタ１０８に設けられていてもよい。

　内視鏡システム１０では、上述した構成の内視鏡スコープ１００を用いて決められたフレームレートで被検体を順次撮像する（撮像部及び画像取得部２２０（図３参照）の制御により行うことができる）ことにより、時系列の医療画像を順次取得することができる。ユーザは、内視鏡スコープ１００（挿入部１０４）を被検体である生体内に挿入または抜去しながら観察を行う。

　＜光源装置の構成＞
　図２に示すように、光源装置３００は、照明用の光源３１０、絞り３３０、集光レンズ３４０、及び光源制御部３５０等から構成されており、観察光をライトガイド１７０に入射させる。光源３１０は、それぞれ赤色、緑色、青色、紫色の狭帯域光を照射する赤色光源３１０Ｒ、緑色光源３１０Ｇ、青色光源３１０Ｂ、及び紫色光源３１０Ｖを備えており、赤色、緑色、青色、及び紫色の狭帯域光を照射することができる。光源３１０による観察光の照度は光源制御部３５０により制御され、必要に応じて観察光の照度を変更する（上げる、または下げる）こと、及び照明を停止することができる。

　光源３１０は赤色、緑色、青色、及び紫色の狭帯域光を任意の組合せで発光させることができる。例えば、赤色、緑色、青色、及び紫色の狭帯域光を同時に発光させて白色光（通常光）を観察光として照射することもできるし、いずれか１つもしくは２つを発光させることで狭帯域光（特殊光）を照射することもできる。光源３１０は、赤外光（狭帯域光の一例）を照射する赤外光源をさらに備えていてもよい。また、白色光を照射する光源と、白色光及び各狭帯域光を透過させるフィルタとにより、白色光または狭帯域光を観察光として照射してもよい。

　＜光源の波長帯域＞
　光源３１０は白色帯域の光、または白色帯域の光として複数の波長帯域の光を発生する光源でもよいし、白色の波長帯域よりも狭い特定の波長帯域の光を発生する光源でもよい。特定の波長帯域は、可視域の青色帯域もしくは緑色帯域、あるいは可視域の赤色帯域であってもよい。特定の波長帯域が可視域の青色帯域もしくは緑色帯域である場合、３９０ｎｍ以上４５０ｎｍ以下、または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有していてもよい。また、特定の波長帯域が可視域の赤色帯域である場合、５８５ｎｍ以上６１５ｎｍ以下、または６１０ｎｍ以上７３０ｎｍ以下、の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有していてもよい。

　上述した特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有していてもよい。この場合、特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有していてもよい。

　また、光源３１０が発生する光は７９０ｎｍ以上８２０ｎｍ以下、または９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有していてもよい。

　また、光源３１０は、ピークが３９０ｎｍ以上４７０ｎｍ以下である励起光を照射する光源を備えていてもよい。この場合、被検体（生体）内の蛍光物質が発する蛍光の情報を有する医療画像（医用画像、生体内画像）を取得することができる。蛍光画像を取得する場合は、蛍光法用色素剤（フルオレスチン、アクリジンオレンジ等）を使用してもよい。

　光源３１０の光源種類（レーザ光源、キセノン光源、ＬＥＤ光源（ＬＥＤ：Light-Emitting Diode）等）、波長、フィルタの有無等は被写体の種類、部位、臓器、観察の目的等に応じて構成することが好ましく、また観察の際は被写体の種類、部位、臓器、観察の目的等に応じて観察光の波長を組合せ及び／または切り替えることが好ましい。波長を切り替える場合、例えば光源の前方に配置され特定波長の光を透過または遮光するフィルタが設けられた円板状のフィルタ（ロータリカラーフィルタ）を回転させることにより、照射する光の波長を切り替えてもよい。

　また、本発明を実施する際に用いる撮像素子は撮像素子１３４のように各画素に対しカラーフィルタが配設されたカラー撮像素子に限定されるものではなく、モノクロ撮像素子でもよい。モノクロ撮像素子を用いる場合、観察光の波長を順次切り替えて面順次（色順次）で撮像することができる。例えば出射する観察光の波長を（紫色、青色、緑色、赤色）の間で順次切り替えてもよいし、広帯域光（白色光）を照射してロータリカラーフィルタ（赤色、緑色、青色、紫色等）により出射する観察光の波長を切り替えてもよい。また、１または複数の狭帯域光（緑色、青色、紫色等）を照射してロータリカラーフィルタ（緑色、青色、紫色等）により出射する観察光の波長を切り替えてもよい。狭帯域光は波長の異なる２波長以上の赤外光でもよい。

　ライトガイドコネクタ１０８（図１，２参照）を光源装置３００に連結することにより、光源装置３００から照射された観察光がライトガイド１７０を介して照明用レンズ１２３Ａ、１２３Ｂに伝送され、照明用レンズ１２３Ａ、１２３Ｂから観察範囲に照射される。

　＜医療画像処理部の構成＞
　図２に基づき医療画像処理部２００の構成を説明する。医療画像処理部２００は、内視鏡スコープ１００から出力される画像信号を画像入力コントローラ２０２を介して入力し、プロセッサ２１０（画像取得部２２０：プロセッサ、コンピュータ、医療画像処理装置）で必要な画像処理を行ってビデオ出力部２０６を介して出力する。これによりモニタ４００（表示装置）に観察画像（医療画像、医用画像）が表示される。通信制御部２０５は、図示せぬ病院内システム（ＨＩＳ：Hospital Information System）や病院内ＬＡＮ（Local Area Network）、及び／または外部のシステムやネットワークとの間で通信制御を行う。記録部２０７（記録装置）には、被検体の画像（内視鏡画像、医療画像、医用画像）、部位情報、検出結果を示す情報等が記録される。音声処理部２０９は、プロセッサ２１０の制御により、検出結果や報知処理（第２の報知処理）に関するメッセージ（音声）をスピーカー２０９Ａ（音声出力装置）から出力することができる。

　また、ＲＯＭ２１１（ＲＯＭ：Read Only Memory）は不揮発性の記憶素子（非一時的記録媒体）であり、各種の画像処理方法をプロセッサ２１０に実行させるプログラムのコンピュータ読み取り可能なコードが記憶されている。ＲＡＭ２１２（ＲＡＭ：Random Access Memory）は各種処理の際の一時記憶用の記憶素子であり、また画像取得時のバッファとしても使用することができる。

　なお、ユーザは操作部２０８を介して医療画像処理の実行指示や実行に必要な条件の指定を行うことができ、表示制御部２３２（図３参照）はこれら指示の際の画面（例えば、図8参照）や注目領域の検出結果等をモニタ４００に表示させることができる。

　＜プロセッサの機能＞
　図３はプロセッサ２１０の機能構成を示すブロック図である。プロセッサ２１０は、画像取得部２２０（画像取得部）と、注目領域検出部２２２（注目領域検出部）と、検出回数算出部２２６（検出回数算出部）と、特徴量算出部２２８（特徴量算出部）と、同一性判定部２３０（同一性判定部）と、表示制御部２３２（表示制御部）と、第１の報知部２３４（第１の報知部）と、第２の報知部２３６（第２の報知部）と、記録制御部２３８（記録制御部）と、通信制御部２４０と、を備える。また、図４に示すように、注目領域検出部２２２は検出器２２３と切替制御部２２４とを備える。検出器２２３は観察部位や臓器、検出アルゴリズム等が異なる複数の検出器により構成することができ、図４に示す態様では咽頭用検出器２２３Ａ、食道用検出器２２３Ｂ、胃用検出器２２３Ｃ、及び十二指腸用検出器２２３Ｄを備える。切替制御部２２４は、モニタ４００（表示装置）に検出結果を表示させる検出器を内視鏡画像の解析結果（部位や臓器、視線方向等）に基づいて切り替えてもよいし、上述した外部デバイス（判定装置）により取得した撮像情報（撮像装置の位置及び／または方向を示す情報）に基づいて切り替えてもよい。なお、プロセッサ２１０は、複数の検出器を動作させておいて一部の検出器による検出結果を表示させてもよいし、検出結果を表示させる検出器のみ動作させてもよい。

　プロセッサ２１０は、上述した機能により、医療画像の特徴量の算出、特定の周波数帯域の成分を強調または低減する処理、特定の対象（注目領域、所望の深さの血管等）を強調または目立たなくする処理を行うことができる。プロセッサ２１０は、白色帯域の光、または白色帯域の光としての複数の波長帯域の光を照射して得る通常光画像に基づいて特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備えていてもよい。この場合、特定の波長帯域の信号は、通常光画像に含まれるＲＧＢ（Ｒ：赤、Ｇ：緑、Ｂ：青）あるいはＣＭＹ（Ｃ：シアン、Ｍ：マゼンタ、Ｙ：イエロー）の色情報に基づく演算により得ることができる。また、プロセッサ２１０は、白色帯域の光、または白色帯域の光としての複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって特徴量画像を生成する特徴量画像生成部を備え、医療画像（医用画像）としての特徴量画像を取得及び表示してもよい。

　また、画像取得部２２０（プロセッサ）は、部位情報が示す部位に応じた波長帯域の観察光で撮影された内視鏡画像（医療画像）を医療画像として取得し、表示制御部２３２はその波長帯域の観察光で撮影された医療画像に対する認識の結果をモニタ４００（表示装置）に表示させてもよい。例えば、胃の場合は白色光（通常光）で撮影された画像を、食道の場合はＢＬＩ（Blue Laser Imaging：登録商標）等の特殊光（青色狭帯域光）で撮影された画像を検出（認識）に供することができる。画像取得部２２０は、部位に応じ、ＬＣＩ（Linked Color Imaging：登録商標）等の特殊光で撮影され画像処理（ＬＣＩの場合、粘膜色に近い色の彩度差や色相差を拡張する）が施された画像を取得してもよい。

　上述した機能を用いた医療画像処理については、詳細を後述する。

　＜学習済みモデルを用いた検出器＞
　上述した検出器は、ＣＮＮ（Convolutional Neural Network）、ＳＶＭ（Support Vector Machine）等の、機械学習により構成された学習済みモデル（生体を撮影した画像から構成される画像セットを用いて学習したモデル）を用いて構成することができる。以下、ＣＮＮにより検出器２２３（咽頭用検出器２２３Ａ～十二指腸用検出器２２３Ｄ）を構成する場合の層構成について説明する。

　＜ＣＮＮの層構成の例＞
　図５は検出器２２３の層構成の例を示す図である。図５の（ａ）部分に示す例では、検出器２２３は入力層２５０と、中間層２５２と、出力層２５４とを含む。入力層２５０は画像取得部２２０が取得した内視鏡画像（医療画像）を入力して特徴量を出力する。中間層２５２は畳み込み層２５６及びプーリング層２５８を含み、入力層２５０が出力する特徴量を入力して他の特徴量を算出する。これらの層は複数の「ノード」が「エッジ」で結ばれた構造となっており、複数の重みパラメータを保持している。重みパラメータの値は、学習が進むにつれて変化していく。検出器２２３は、図５の（ｂ）部分に示す例のように全結合層２６０を含んでいてもよい。検出器２２３の層構成は畳み込み層２５６とプーリング層２５８とが１つずつ繰り返される場合に限らず、いずれかの層（例えば、畳み込み層２５６）が複数連続して含まれていてもよい。また、全結合層２６０が複数連続して含まれていてもよい。

　＜中間層における処理＞
　中間層２５２は、畳み込み演算及びプーリング処理によって特徴量を算出する。畳み込み層２５６で行われる畳み込み演算はフィルタを使用した畳み込み演算により特徴マップを取得する処理であり、画像からのエッジ抽出等の特徴抽出の役割を担う。このフィルタを用いた畳み込み演算により、１つのフィルタに対して１チャンネル（１枚）の「特徴マップ」が生成される。「特徴マップ」のサイズは、畳み込みによりダウンスケーリングされ、各層で畳み込みが行われるにつれて小さくなって行く。プーリング層２５８で行われるプーリング処理は畳み込み演算により出力された特徴マップを縮小（または拡大）して新たな特徴マップとする処理であり、抽出された特徴が、平行移動などによる影響を受けないようにロバスト性を与える役割を担う。中間層２５２は、これらの処理を行う１または複数の層により構成することができる。

　図６は、フィルタによる畳み込み処理の様子を示す図である。中間層２５２の最初（１番目）の畳み込み層では、複数の医療画像により構成される画像セット（学習時は学習用画像セット、検出等の認識時は認識用画像セット）とフィルタＦ_１との畳み込み演算が行われる。画像セットは、縦がＨ、横がＷの画像サイズを有するＮ枚（Ｎチャンネル）の画像により構成される。通常光画像を入力する場合、画像セットを構成する画像はＲ（赤色），Ｇ（緑色），Ｂ（青色）の３チャンネルの画像である。この画像セットと畳み込み演算されるフィルタＦ_１は、画像セットがＮチャンネル（Ｎ枚）であるため、例えばサイズ５（５×５）のフィルタの場合、フィルタサイズは５×５×Ｎのフィルタになる。このフィルタＦ_１を用いた畳み込み演算により、１つのフィルタＦ_１に対して１チャンネル(１枚)の「特徴マップ」が生成される。２番目の畳み込み層で使用されるフィルタＦ_２は、例えばサイズ３（３×３）のフィルタの場合、フィルタサイズは３×３×Ｍになる。

　１番目の畳み込み層と同様に、２番目からｎ番目の畳み込み層ではフィルタＦ_２～Ｆ_ｎを用いた畳み込み演算が行われる。ｎ番目の畳み込み層における「特徴マップ」のサイズが、２番目の畳み込み層における「特徴マップ」のサイズよりも小さくなっているのは、前段までの畳み込み層またはプーリング層によりダウンスケーリングされているからである。

　中間層２５２の層のうち、入力側に近い畳み込み層では低次の特徴抽出（エッジの抽出等）が行われ、出力側に近づくにつれて高次の特徴抽出（対象物の形状、構造等に関する特徴の抽出）が行われる。なお、計測等を目的としてセグメンテーションを行う場合は後半部分の畳み込み層でアップスケーリングされ、最後の畳み込み層では、入力した画像セットと同じサイズの「特徴マップ」が得られる。一方、物体検出を行う場合は、位置情報を出力すればよいのでアップスケーリングは必須ではない。

　なお、中間層２５２は畳み込み層２５６及びプーリング層２５８の他にバッチノーマライゼーションを行う層を含んでいてもよい。バッチノーマライゼーション処理は学習を行う際のミニバッチを単位としてデータの分布を正規化する処理であり、学習を速く進行させる、初期値への依存性を下げる、過学習を抑制する等の役割を担う。

　＜出力層における処理＞
　出力層２５４は、中間層２５２から出力された特徴量に基づき、入力された医療画像（通常光画像、特殊光画像）に映っている注目領域の位置検出を行ってその結果を出力する層である。セグメンテーションを行う場合、出力層２５４は、中間層２５２から得られる「特徴マップ」により、画像に写っている注目領域の位置を画素レベルで把握する。すなわち、内視鏡画像の画素ごとに注目領域に属するか否かを検出し、その検出結果を出力することができる。一方、物体検出を行う場合は画素レベルでの判断は必要なく、出力層２５４が対象物の位置情報を出力する。

　出力層２５４は病変に関する鑑別（分類）を実行して鑑別結果を出力するものでもよい。例えば、出力層２５４は内視鏡画像を「腫瘍性」、「非腫瘍性」、「その他」の３つのカテゴリに分類し、鑑別結果として「腫瘍性」、「非腫瘍性」及び「その他」に対応する３つのスコア（３つのスコアの合計は１００％）として出力してもよいし、３つのスコアから明確に分類できる場合には分類結果を出力してもよい。なお鑑別結果を出力する場合、中間層２５２あるいは出力層２５４が最後の１層または複数の層として全結合層を含んでいてもよいし（図５の（ｂ）部分を参照）、含んでいなくてもよい。

　出力層２５４は注目領域の計測結果を出力するものでもよい。ＣＮＮによって計測を行う場合は、対象となる注目領域を例えば上述のようにセグメンテーションしてからその結果を基にプロセッサ２１０等で計測することができる。また、対象となる注目領域の計測値を検出器２２３から直接出力することもできる。計測値を直接出力させる場合、画像に対し計測値そのものを学習させるので、計測値の回帰問題となる。

　上述した構成のＣＮＮを用いる場合、学習の過程において、出力層２５４が出力する結果と画像セットに対する認識の正解とを比較して損失（誤差）を計算し、損失が小さくなるように中間層２５２における重みパラメータを出力側の層から入力側の層に向けて更新していく処理（誤差逆伝播）を行うことが好ましい。

　＜ＣＮＮ以外の手法による認識＞
　検出器２２３は、ＣＮＮ以外の手法により検出を行ってもよい。例えば、取得した医療画像の画素の特徴量に基づいて注目領域を検出することができる。この場合、検出器２２３は検出対象画像を例えば複数の矩形領域に分割し、分割した各矩形領域を局所領域として設定し、検出対象画像の局所領域ごとに局所領域内の画素の特徴量（例えば色相）を算出し、各局所領域の中から特定の色相を有する局所領域を注目領域として決定する。同様に、検出器２２３は特徴量に基づく分類や計測を行ってもよい。

　＜検出器の構成の変形例＞
　検出器２２３を構成する各検出器（咽頭用検出器２２３Ａ～十二指腸用検出器２２３Ｄ）は、異なる波長帯域の観察光に対応した複数の検出器（例えば、通常光用検出器と特殊光用検出器）から構成されていてもよい。この場合、通常光用検出器及び特殊光用検出器は、それぞれ通常光画像、特殊光画像を用いた機械学習により構成された学習済みモデルであることが好ましい。

　図５，６では主として検出器の構成について説明したが、本発明において、検出器に代えて、またはこれに加えて分類器や計測器を設けてもよい。また、検出器や分類器、あるいは計測器が通常光用と特殊光用に別れていてもよい。

　＜各種のプロセッサによる機能の実現＞
　上述したプロセッサ２１０の機能は、各種のプロセッサ（processor）及び記録媒体を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）が含まれる。また、上述した各種のプロセッサには、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。本発明のように画像の処理を行う場合は、ＧＰＵを用いた構成が効果的である。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）等の、特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども、上述した「各種のプロセッサ」に含まれる。

　各部の機能は１つのプロセッサにより実現されてもよいし、同種または異種の複数のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ、またはＣＰＵとＧＰＵの組み合わせ）で実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、コンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。これらの電気回路は、論理和、論理積、論理否定、排他的論理和、及びこれらを組み合わせた論理演算を用いて上述した機能を実現する電気回路であってもよい。

　上述したプロセッサあるいは電気回路がソフトウェア（プログラム）を実行する際は、実行するソフトウェアのコンピュータ（例えば、プロセッサ２１０を構成する各種のプロセッサや電気回路、及び／またはそれらの組み合わせ）で読み取り可能なコードをＲＯＭ２１１（ＲＯＭ：Read Only Memory）等の非一時的記録媒体に記憶しておき、コンピュータがそのソフトウェアを参照する。非一時的記録媒体に記憶しておくソフトウェアは、本発明に係る医療画像処理方法を実行するための医療画像処理プログラム及び実行に際して用いられるデータ（表示態様や報知態様の設定に用いられるデータ、検出器２２３で用いられる重みパラメータ等）を含む。ＲＯＭ２１１ではなく各種の光磁気記録装置、半導体メモリ等の非一時的記録媒体にコードを記録してもよい。ソフトウェアを用いた処理の際には例えばＲＡＭ２１２（ＲＡＭ：Random Access Memory、メモリ）が一時的記憶領域として用いられ、また例えば不図示のＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）に記憶されたデータを参照することもできる。「非一時的記録媒体」として記録部２０７を用いてもよい。

　＜記録部に記録される情報＞
　記録部２０７には、内視鏡画像（医療画像）、画像処理を施した処理後内視鏡画像（医療画像）、撮像情報（内視鏡画像の撮像位置及び／または撮像方向を示す情報）、検出結果、及び処理条件（検出や報知を行う際の条件）等が記録される。他の情報を併せて記録してもよい。記録制御部２３８は、これらの情報を関連付けて記録する。

　＜医療画像処理＞
　上述した構成の内視鏡システム１０における医療画像処理（本発明に係る医療画像処理方法及び医療画像処理プログラムの実行）について説明する。図７は第１の実施形態に係る医療画像処理方法の手順を示すフローチャートである。以下、検出器２２３により注目領域を検出する場合について説明するが、分類や計測を行う場合も同様に処理を行うことができる。なお、以下説明する手順は、必要に応じ順序を入れ替えて実行してもよい。

　＜初期設定＞
　プロセッサ２１０は、操作部２０８を介したユーザの操作、及び／またはあらかじめ設定された処理条件（例えば、デフォルトの処理条件）に基づいて、医療画像処理方法／プログラムの実行に必要な条件を設定する（ステップＳ１００：初期設定工程）。例えば、動作させる検出器の指定、検出器の切り替えあるいは選択の条件、検出結果の表示や報知の態様（表示または非表示の設定、表示する文字、図形、記号やその色彩、音声出力の条件等）を設定する。プロセッサ２１０は、検出器２２３を構成する複数の検出器を全て動作させてもよいし（この場合、検出結果の表示は一部の検出器について行ってもよい）、一部の検出器を動作させモニタ４００（表示装置）に検出結果を表示させない検出器（検出処理）を停止させてもよい。ユーザは、例えば図８のような画面を介して処理条件の設定を行うことができる。図８の例では、ユーザは操作部２０８を介したラジオボタンのオン／オフ操作や数値入力欄への数値入力操作により、処理条件を設定することができる。なお、プロセッサ２１０は、処理開始時だけでなく以下のステップの実行中に処理条件の設定を行うこともできる。

　＜内視鏡画像の取得＞
　画像取得部２２０（プロセッサ、画像取得部）は、被検体の生体内で撮影された内視鏡画像（医療画像）を取得する（ステップＳ１１０：画像取得処理、画像取得工程）。画像取得部２２０は、内視鏡スコープ１００の撮影部（撮影レンズ１３２、撮像素子１３４、ＡＦＥ１３８等）により、被検体である生体の内部をあらかじめ決められたフレームレートで順次撮影して時系列の内視鏡画像（医療画像）をリアルタイムに取得することができる。また、画像取得部２２０は、既に撮影され記録された内視鏡画像を非リアルタイムで取得してもよい。例えば、記録部２０７に記録された内視鏡画像や処理後内視鏡画像を取得してもよいし、通信制御部２０５を介して外部の装置やシステムから画像を取得してもよい。表示制御部２３２（プロセッサ、表示制御部）は、取得した内視鏡画像をモニタ４００（表示装置）に表示させる（ステップＳ１２０：表示制御処理、表示制御工程）。

　＜注目領域の検出＞
　検出器２２３（プロセッサ）は、検出器２２３を用いて内視鏡画像（医療画像）から注目領域を検出する（ステップＳ１３０：注目領域検出処理、注目領域検出工程）。検出器２２３は、検出器２２３を構成する検出器のうち複数の検出器を用いることにより、複数の検出処理を行うことができる。注目領域の検出において、検出器２２３は、上述した「特徴マップ」により画像に映っている注目領域の位置を画素レベルで把握（すなわち、内視鏡画像の画素ごとに注目領域に属するか否かを検出）し、その検出結果を出力することができる。なお、内視鏡システム１０で検出する注目領域（関心領域）の例として、ポリープ、癌、大腸憩室、炎症、治療痕（ＥＭＲ瘢痕（ＥＭＲ：Endoscopic Mucosal Resection）、ＥＳＤ瘢痕（ＥＳＤ：Endoscopic Submucosal Dissection）、クリップ箇所等）、出血点、穿孔、血管異型性、あるいは各種の処置具を挙げることができる。超音波内視鏡等の超音波装置の場合、注目領域として臓器や脈管を検出してもよい。

　なお、プロセッサ２１０は、取得する内視鏡画像の全フレームについて注目領域の検出や報知を行ってもよいし、間欠的に（決められたフレーム間隔で）行ってもよい。

　また、切替制御部２２４（プロセッサ）は、検出結果をモニタ４００（表示装置）に表示させる検出器を、観察対象の臓器や部位、あるいは撮像情報等に応じて切り替えることが好ましい（切替処理、切替工程）。切替制御部２２４は、切り替え先の検出器が動作を停止している状態である場合は、その検出器による検出処理を開始させる。また、切替制御部２２４は、モニタ４００（表示装置）に検出結果を表示させない検出器の動作（検出処理）を停止させてもよい。このように検出器（認識器）を切り替えることにより、適切な診断支援機能（検出器による検出結果）をユーザに提供することができる。

　＜注目領域を検出した場合の報知＞
　検出器２２３が注目領域を検出した場合（ステップＳ１４０でＹＥＳ）、第１の報知部２３４（プロセッサ）は、モニタ４００（表示装置）に、検出された注目領域に関する情報と内視鏡画像（医療画像）とを重畳表示させる（ステップＳ１５０：第１の報知処理、第１の報知工程）。また、第２の報知部２３６（プロセッサ）は、重畳表示（第１の報知処理）より後に、スピーカー２０９Ａ（音声出力装置）から音声を出力させる（ステップＳ１６０：第２の報知処理、第２の報知工程）。報知の詳細及び具体的態様は後述する。プロセッサ２１０は、内視鏡画像の取得終了やユーザの操作により「処理を終了する」と判断する（ステップＳ１７０でＹＥＳ）までステップＳ１１０～Ｓ１６０の処理を繰り返す。

　＜重畳表示の具体的態様＞
　図９は重畳表示（第１の報知処理）の例を示す図である。同図では、モニタ４００の画面５００において、内視鏡画像５０２が表示されている。内視鏡画像５０２から注目領域５０４が検出された場合、第１の報知部２３４（プロセッサ）は、「注目領域に関する情報」として文字、図形、記号のうち少なくとも１つを内視鏡画像５０２に重畳表示させる。第１の報知部２３４は、例えば、図９の（ａ）部分に示すように、内視鏡画像５０２の領域外にアイコン５０６（旗状の図形あるいは記号）を重畳表示することができる。また、第１の報知部２３４は、図９の（ｂ）部分に示すように注目領域５０４の位置（内視鏡画像５０２の領域内）で重畳表示（同部分ではバウンディングボックス５０８（図形））を行ってもよいし、同図の（ｃ）部分に示すように注目領域５０４と離れた位置で重畳表示（同部分では矢印５１０（図形、記号））を行ってもよい。

　第１の報知部２３４は、注目領域５０４の位置に依存しない位置で重畳表示を行ってもよいし、注目領域５０４の位置に対応した位置で重畳表示を行ってもよい。例えば図９の（ｄ）部分に示す例では、第１の報知部２３４は、注目領域５０４が内視鏡画像５０２の右下部分に写っていることに対応して、画面５００の右下部分の領域５１２を着色している。第１の報知部２３４は、注目領域５０４の位置に対応した位置で重畳表示を行う場合、内視鏡画像における注目領域の位置等が変化したら、情報を重畳表示する位置をそれに合わせて移動させることが好ましい。なお、第１の報知部２３４は、重畳表示を行う際に色彩や明度の変更を組み合わせてもよい。

　＜音声による報知の詳細＞
　注目領域等、何らかの対象物が連続して検出されていたとしても、同一の対象物が継続して検出されていなければ偽陽性の可能性が高いため、音声出力をすべきではないと考えられる。そこで、第１の態様では、以下に説明するように注目領域の同一性を判定し、判定結果に基づいて音声出力を行う。

　図１０は、ステップＳ１６０における音声による報知（第２の報知処理、第２の報知工程）の詳細を示すフローチャートである。ステップＳ１５０で第１の報知処理がなされると、特徴量算出部２２８（プロセッサ）は、注目領域の特徴量を算出及び保持する（ステップＳ２００：特徴量算出処理／特徴量算出工程、特徴量保持処理／特徴量保持工程）。「特徴量」とは例えば種類、位置、大きさ、形状、色彩等である。特徴量算出部２２８は、内視鏡画像の解析や、検出器２２３の出力に基づいて特徴量を算出することができる。また、特徴量算出部２２８は、算出した特徴量をＲＡＭ２１２等の一時的記録媒体に保持してもよいし、記録部２０７等の非一時的記録媒体に保持（記録）してもよい。ここで「一時的な保持」には、例えば処理が終了したら順次消去する、電源をオフする際に消去する、等の態様が含まれる。

　同一性判定部２３０（プロセッサ）は、算出した特徴量を保持している特徴量と比較して、注目領域の同一性を判定する（ステップＳ２１０：同一性判定処理、同一性判定工程）。同一性の判定は、注目領域に対する連続検出回数に基づいて行うことができる。具体的には、同一性判定部２３０は、第１の時刻において撮像された内視鏡画像（医療画像）から検出された注目領域（第１の注目領域）の特徴量と、第２の時刻（第１の時刻より前の時刻）において撮像された内視鏡画像（第２の医療画像）から検出された注目領域（第２の注目領域）の特徴量（特徴量算出部２２８が保持している特徴量）とを比較することにより、第１の注目領域と第２の注目領域との同一性を判定する。第２の時刻は第１の時刻より決められた期間前とすることができ、ユーザは図８のような処理条件の設定画面を介して、この「決められた期間」の値を指定することができる。

　第２の報知部２３６は、同一性判定処理での判定結果に応じて、第１の注目領域に対する連続検出回数を算出する。具体的には、第２の報知部２３６は、第１の注目領域と第２の注目領域とが同一である場合（ステップＳ２２０でＹＥＳ）は、第２の注目領域に対する連続検出回数を増加させた上で第１の注目領域の連続検出回数として算出する（ステップＳ２３０：検出回数算出処理、検出回数算出工程）。一方、第１の注目領域と第２の注目領域とが同一でない場合（ステップＳ２２０でＮＯ）、第２の報知部２３６は、第１の注目領域を新たな注目領域として連続回数を算出する（ステップＳ２４０：検出回数算出処理、検出回数算出工程）。第２の報知部２３６は、上述した特徴量の場合と同様に、算出した連続検出回数をＲＡＭ２１２等の一時的記録媒体に保持してもよいし、記録部２０７等の非一時的記録媒体に保持（記録）してもよい。ここで「一時的な保持」には、例えば処理が終了したら順次消去する、電源をオフする際に消去する、等の態様が含まれる。

　なお、同一性判定部２３０は、検出器２２３によるトラッキングや注目領域の位置の重なり、あるいは内視鏡画像から算出したoptical flowに基づいて注目領域の同一性を判断してもよい。“optical flow”とは、画像間の対応点等を手がかりにして、画像に写っている部分や被写体全体の動きを推定してベクトル化したものである。

　また、同一性判定部２３０及び第２の報知部２３６（プロセッサ）は、同一性の判定及び連続検出回数の算出を内視鏡画像の全フレームに対して行ってもよいし、間欠的に行ってもよい。例えば、内視鏡画像のフレームレートが３０ｆｐｓ（frames per second）の場合、同一性の判定は３０ｆｐｓでもよいし、３０ｆｐｓ未満（例えば、１０ｆｐｓ）でもよい。同一性の判定は、検出器２２３のフレームレートに合わせることができる。

　第２の報知部２３６は、このようにして算出した連続検出回数がしきい値を超えたら（ステップＳ２５０でＹＥＳ）、スピーカー２０９Ａ（音声出力装置）から音声を出力させる（ステップＳ２６０：第２の報知処理、第２の報知工程）。

　＜音声出力の具体例（その１）：連続検出回数がしきい値を超えた場合＞
　図１１は音声出力の具体例（その１）を示す図である。同図の例では、時刻ｔ１では注目領域が検出されておらず、時刻ｔ１で注目領域５０４が検出されてバウンディングボックス５０８の重畳表示（第１の報知処理）が開始されている。また、時刻ｔ２，ｔ３，ｔ４でも同一の注目領域５０４が検出されて重畳表示がなされている。このような状況で、連続検出回数のしきい値が３回であるとすると、時刻ｔ４では連続検出回数が４回となってしきい値を超える（すなわち、時刻ｔ１において注目領域５０４が検出されてから第１期間（＝ｔ２－ｔ１）が経過した後にも同一の注目領域５０４が検出されている）ので、第２の報知部２３６がスピーカー２０９Ａから音声を出力させる。なお図１１では、スピーカーのアイコン５２０により、音声が出力されることを示している（アイコン自体は画面５００に表示しなくてもよい；以下の例でも同じ）。このように、第２の報知部２３６（プロセッサ）は、音声出力を重畳表示よりも後に実行する。

　＜音声出力の具体例（その２）：連続検出回数がしきい値を超えない場合＞
　図１２は音声出力の具体例（その２）を示す図である。図１２に示す例では、時刻ｔ１～ｔ３までは同一の注目領域５０４が検出されてバウンディングボックス５０８が重畳表示されているが（第１の報知処理）、時刻ｔ４では注目領域５０４が検出されていない（すなわち、時刻ｔ１において注目領域５０４が検出されてから第１期間が経過した後に同一の注目領域５０４が検出されていない）ので、連続検出回数（３回）がしきい値（３回）を超えておらず（ステップＳ２５０でＮＯ）、第２の報知部２３６は音声出力を行わない。図１２では、バツ印が付されたアイコン５２２により、音声が出力されないことを示している。

　上述のように、偽陽性（検出器２２３が注目領域でないものを注目領域と判断すること）は瞬時的に発生することが多く、継続的に発生することは少ない傾向にある。そのため、図１２の例のように瞬時的（時刻ｔ１～ｔ３）に注目領域が検出された場合には音声出力をしないようにすれば、偽陽性に起因する音声出力によりユーザが煩わしさを感じる可能性を低減することができる。その一方で、画面表示（第１の報知処理）では注目領域を強調しているため、ユーザに対する注意喚起につながり、病変などの見逃し防止の効果が期待できる。

　＜音声出力の具体例（その３）：注目領域の同一性を判断する場合＞
　図１３は注目領域の同一性を判断する場合の音声出力の具体例（その３）を示す図である。図１３の例では、時刻ｔ１～ｔ４において注目領域（注目領域５０４，５０７）が検出されており、バウンディングボックス５０８，５０９が重畳表示されているが（第１の報知処理）、注目領域５０４の検出回数は３回（時刻ｔ１～ｔ３）であり注目領域５０７の検出回数は２回（時刻ｔ３，ｔ４）なので、第２の報知部２３６は時刻ｔ４では音声出力を行わない。これにより、瞬時的な偽陽性に起因する不要な音声出力を抑制することができる。

　＜音声出力の具体例（その４）：同一性の判断期間に関する例＞
　検出器２２３等のＡＩを用いた注目領域の検出では、偽陽性同様に偽陰性（内視鏡画像に注目領域が存在するにも関わらず、ＡＩが「注目領域は存在しない」と判断すること）も避け難い問題となる。例えば、図１４に示す例のように、「時刻ｔ１，ｔ２，ｔ４において内視鏡画像から注目領域（注目領域５０４Ａ，５０４Ｂ）が検出されても、時刻ｔ３では検出器２２３の判断ミスにより注目領域（注目領域５０４Ａ）が検出されない」という状況が発生しうる。この場合、「連続検出回数が適切に算出できず、音声を出力すべきなのに出力されない」という問題が生じうる。そこで、検出回数算出部２２６、同一性判定部２３０、及び第２の報知部２３６（プロセッサ）は、注目領域の同一性の判断対象を、直前のフレームのみでなくより前のフレームでの注目領域まで含める。

　図１４の例では、同一性判定部２３０が時刻ｔ４で検出された注目領域５０４Ｂと時刻ｔ２で検出された注目領域５０４Ａとで検出結果（注目領域の有無、特徴量）を比較して「同一」と判定できた場合を想定しており、この場合、検出回数算出部２２６は注目領域５０４Ａの連続検出回数を増加させる。すると時刻ｔ４での連続検出回数は４回となり、しきい値（３回）を超えるので、第２の報知部２３６は時刻ｔ４でスピーカー２０９Ａから音声を出力させる（図１４では、時刻ｔ４におけるアイコン５２０で示す）。このような同一性の判定により、偽陰性により連続検出回数が適切に算出できない問題を回避することができる。なお、比較対象となる過去のフレームは、あまりにも遡って算出しても計算コストの増大や同一性判定の精度低下が問題になり得るため、現フレーム（図１４の例では時刻ｔ４（第１の時刻））の近傍時間（決められた期間前まで；時刻ｔ２（第２の時刻））に限定することが好ましい。

　なお、図１４の例において、検出回数算出部２２６及び同一性判定部２３０は、連続検出回数を「４回」と数えるのではなく、「連続検出回数は３回のまま維持するが、同一の注目領域が継続して検出されているとの判断は継続する」として制御してもよい。このように連続検出回数を増加させずに維持する場合、時刻ｔ４の次のフレームで同一の注目領域５０４Ａが検出されたら連続検出回数が４回となって音声出力による報知が行われる。

　＜音声出力の具体例（その５）：音声出力を制限する例＞
　内視鏡システム１０では、音声出力による報知（第２の報知処理）において、連続検出回数が決められた回数を超えてからは音声出力が発生しないように制御してもよい。例えば、図１５の例では時刻ｔ４で連続検出回数が４回となって音声が出力されるが、連続検出回数が５回となる時刻ｔ５以降の決められた期間（時刻ｔ７までの３フレーム）は、第２の報知部２３６（プロセッサ）は音声を出力させない。これにより音声出力が頻繁に発生してユーザが煩わしさを感じる問題を回避することができる。なお、図１５の例では決められた期間が経過した時刻ｔ８において音声の非出力は解除されるが、解除した後も同一の対象（注目領域）が検出されている場合は再度音声出力をしないように制御してもよい（この場合、時刻ｔ８以降も音声出力をしない）。そうすることで、同一の対象を観察している間に何度も音声出力が頻繁に発生してユーザが煩わしさを感じる問題を回避することができる。

　＜音声出力の具体例（その６）：重畳表示の態様を音声出力状態に連動させる例＞
　内視鏡システム１０では、第２の報知処理における音声出力状態に応じて画面表示（重畳表示：第１の報知処理）の態様を変更してもよい。例えば、図１６の例では、連続検出回数が４回となってしきい値を超える時刻ｔ４以降に音声が出力されるが、第１の報知部２３４（プロセッサ）は、注目領域５０４に重畳表示するバウンディングボックス５１１の枠線を、時刻ｔ１～ｔ３までのバウンディングボックス５０８よりも太くしている。音声出力状態に応じた画面表示の態様の変更としては、このように重畳表示する図形等の色や大きさ、あるいは形状を変更してもよいし、図９の例のような他の図形等の重畳表示を組み合わせてもよい。このような画面表示の態様変更により、内視鏡システム１０がより確信を持って検出対象を報知していることをユーザに直感的に伝えることができる。なお、第１の報知部２３４は、画面表示の態様変更を音声出力状態の変化（音声出力開始／停止等）と同時（図９の例では時刻ｔ４）に行ってもよいし、前後の近傍時間に行ってもよい。

　以上説明したように、第１の実施形態によれば、注目領域の見逃しの可能性を低減しつつ不要な音声出力を抑制することができる。

　＜他の医療画像への適用＞
　上述した第１の実施形態では医療画像（医用画像）の一態様である内視鏡画像（光学的内視鏡の画像）を用いて認識を行う場合について説明したが、本発明に係る医療画像処理装置、医療画像処理方法、及び医療画像処理プログラムは、超音波内視鏡装置（超音波内視鏡システム）、超音波画像診断装置等の、内視鏡画像以外の医療画像を用いる場合にも適用することができる。

　（付記）
　上述した実施形態及び変形例に加えて、以下に記載の構成も本発明の範囲に含まれる。

　（付記１）
　医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき領域である注目領域を検出し、
　医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。

　（付記２）
　医療画像解析処理部は、医療画像の画素の特徴量に基づいて、注目すべき対象の有無を検出し、
　医療画像解析結果取得部は、医療画像解析処理部の解析結果を取得する医療画像処理装置。

　（付記３）
　医療画像解析結果取得部は、
　医療画像の解析結果を記録する記録装置から取得し、
　解析結果は、医療画像に含まれる注目すべき領域である注目領域と、注目すべき対象の有無のいずれか、もしくは両方である医療画像処理装置。

　（付記４）
　医療画像は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得た通常光画像である医療画像処理装置。

　（付記５）
　医療画像は、特定の波長帯域の光を照射して得た画像であり、
　特定の波長帯域は、白色の波長帯域よりも狭い帯域である医療画像処理装置。

　（付記６）
　特定の波長帯域は、可視域の青色もしくは、緑色帯域である医療画像処理装置。

　（付記７）
　特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する医療画像処理装置。

　（付記８）
　特定の波長帯域は、可視域の赤色帯域である医療画像処理装置。

　（付記９）
　特定の波長帯域は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有する医療画像処理装置。

　（付記１０）
　特定の波長帯域は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する医療画像処理装置。

　（付記１１）
　特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。

　（付記１２）
　医療画像は生体内を写した生体内画像であり、
　生体内画像は、生体内の蛍光物質が発する蛍光の情報を有する医療画像処理装置。

　（付記１３）
　蛍光は、ピークが３９０以上４７０ｎｍ以下である励起光を生体内に照射して得る医療画像処理装置。

　（付記１４）
　医療画像は生体内を写した生体内画像であり、
　特定の波長帯域は、赤外光の波長帯域である医療画像処理装置。

　（付記１５）
　特定の波長帯域は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有する医療画像処理装置。

　（付記１６）
　医療画像取得部は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の情報を有する特殊光画像を取得する特殊光画像取得部を備え、
　医療画像は特殊光画像である医療画像処理装置。

　（付記１７）
　特定の波長帯域の信号は、通常光画像に含まれるＲＧＢあるいはＣＭＹの色情報に基づく演算により得る医療画像処理装置。

　（付記１８）
　白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備え、
　医療画像は特徴量画像である医療画像処理装置。

　（付記１９）
　付記１から１８のいずれか１つに記載の医療画像処理装置と、
　白色の波長帯域の光、または、特定の波長帯域の光の少なくともいずれかを照射して画像を取得する内視鏡と、
　を備える内視鏡装置。

　（付記２０）
　付記１から１８のいずれか１つに記載の医療画像処理装置を備える診断支援装置。

　（付記２１）
　付記１から１８のいずれか１つに記載の医療画像処理装置を備える医療業務支援装置。

　以上で本発明の実施形態及び他の例に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。

１０　　　内視鏡システム
１００　　内視鏡スコープ
１０２　　手元操作部
１０４　　挿入部
１０６　　ユニバーサルケーブル
１０８　　ライトガイドコネクタ
１１２　　軟性部
１１４　　湾曲部
１１６　　先端硬質部
１１６Ａ　先端側端面
１２３　　照明部
１２３Ａ　照明用レンズ
１２３Ｂ　照明用レンズ
１２６　　鉗子口
１３０　　撮影光学系
１３２　　撮影レンズ
１３４　　撮像素子
１３６　　駆動回路
１４１　　送気送水ボタン
１４２　　吸引ボタン
１４３　　機能ボタン
１４４　　撮影ボタン
１７０　　ライトガイド
２００　　医療画像処理部
２０２　　画像入力コントローラ
２０５　　通信制御部
２０６　　ビデオ出力部
２０７　　記録部
２０８　　操作部
２０９　　音声処理部
２０９Ａ　スピーカー
２１０　　プロセッサ
２１１　　ＲＯＭ
２１２　　ＲＡＭ
２２０　　画像取得部
２２２　　注目領域検出部
２２３　　検出器
２２３Ａ　咽頭用検出器
２２３Ｂ　食道用検出器
２２３Ｃ　胃用検出器
２２３Ｄ　十二指腸用検出器
２２４　　切替制御部
２２６　　検出回数算出部
２２８　　特徴量算出部
２３０　　同一性判定部
２３２　　表示制御部
２３４　　第１の報知部
２３６　　第２の報知部
２３８　　記録制御部
２４０　　通信制御部
２５０　　入力層
２５２　　中間層
２５４　　出力層
２５６　　畳み込み層
２５８　　プーリング層
２６０　　全結合層
３００　　光源装置
３１０　　光源
３１０Ｂ　青色光源
３１０Ｇ　緑色光源
３１０Ｒ　赤色光源
３１０Ｖ　紫色光源
３３０　　絞り
３４０　　集光レンズ
３５０　　光源制御部
４００　　モニタ
５００　　画面
５０２　　内視鏡画像
５０４　　注目領域
５０４Ａ　注目領域
５０４Ｂ　注目領域
５０６　　アイコン
５０７　　注目領域
５０８　　バウンディングボックス
５０９　　バウンディングボックス
５１０　　矢印
５１１　　バウンディングボックス
５１２　　領域
５２０　　アイコン
５２２　　アイコン
Ｆ１　　　フィルタ
Ｆ２　　　フィルタ
Ｓ１００～Ｓ２６０　医療画像処理方法の各ステップ

Claims (14)

1. 　プロセッサを備える医療画像処理装置であって、
   　前記プロセッサは、
   　時系列の医療画像を取得する画像取得処理と、
   　前記取得した医療画像から注目領域を検出する注目領域検出処理と、
   　前記医療画像を表示装置に表示させる表示制御処理と、
   　前記注目領域検出処理で注目領域が検出された場合に、前記表示装置に前記医療画像と前記検出された注目領域に関する情報を重畳表示させる第１の報知処理と、
   　前記注目領域検出処理で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知処理と、
   　を実行し、
   　前記第２の報知処理を前記第１の報知処理よりも後に実行する医療画像処理装置。
2. 　前記プロセッサは、前記注目領域検出処理において注目領域が検出されてから第１期間が経過した後にも前記注目領域を検出した場合は前記第２の報知処理を実行し、前記第１期間が経過した後に前記注目領域を検出しなかった場合は前記第２の報知処理を実行しない請求項１に記載の医療画像処理装置。
3. 　前記プロセッサは、前記第１の報知処理において、前記医療画像における前記注目領域の位置に対応して前記情報を重畳表示する請求項１または２に記載の医療画像処理装置。
4. 　前記プロセッサは、
   　前記注目領域検出処理で検出された前記注目領域に対して連続検出回数を算出する検出回数算出処理を実行し、
   　前記連続検出回数があらかじめ決められた回数を超えた場合に前記第２の報知処理を実行する請求項１から３のいずれか１項に記載の医療画像処理装置。
5. 　前記プロセッサは、
   　前記検出された注目領域の特徴量を保持する特徴量保持処理と、
   　第１の時刻において撮像された医療画像から検出された第１の注目領域の特徴量と、前記保持されている前記第１の時刻より前の時刻である第２の時刻において撮像された第２の医療画像から検出された第２の注目領域の特徴量と、を比較することにより前記第１の注目領域と前記第２の注目領域との同一性を判定する同一性判定処理と、
   　をさらに実行し、
   　前記検出回数算出処理では、前記同一性判定処理での判定結果に応じて前記第１の注目領域に対する前記連続検出回数を算出する請求項４に記載の医療画像処理装置。
6. 　前記プロセッサは、
   　前記同一性判定処理において前記第１の注目領域と前記第２の注目領域が同一であると判断された場合、前記検出回数算出処理において、前記第２の注目領域に対して記録されていた連続検出回数を増加させた上で前記第１の注目領域の連続検出回数として算出する請求項５に記載の医療画像処理装置。
7. 　前記プロセッサは、
   　前記同一性判定処理において、前記特徴量保持処理で保持された前記特徴量のうちで前記第１の時刻より決められた期間前までの時刻についての特徴量を前記第１の注目領域の特徴量と比較することにより前記同一性の判定を行う請求項５または６に記載の医療画像処理装置。
8. 　前記プロセッサは、
   　前記第２の報知処理において、前記音声出力装置に音声を出力させた後、決められた期間は音声を出力させない請求項１から７のいずれか１項に記載の医療画像処理装置。
9. 　前記プロセッサは、
   　前記第１の報知処理において、前記第２の報知処理における音声出力状態に応じて前記第１の報知処理の態様を変更する請求項１から８のいずれか１項に記載の医療画像処理装置。
10. 　前記プロセッサは、前記第１の報知処理において、文字、図形、記号のうち少なくとも１つを前記情報として前記重畳表示を行う請求項１から９のいずれか１項に記載の医療画像処理装置。
11. 　請求項１から１０のいずれか１項に記載の医療画像処理装置と、
    　被検体に挿入される内視鏡スコープであって、前記医療画像を撮像する撮像部を有する内視鏡スコープと、
    　前記表示装置と、
    　前記音声出力装置と、
    　を備える内視鏡システム。
12. 　プロセッサを備える医療画像処理装置により実行される医療画像処理方法であって、
    　前記プロセッサは、
    　時系列の医療画像を取得する画像取得工程と、
    　前記取得した医療画像から注目領域を検出する注目領域検出工程と、
    　前記医療画像を表示装置に表示させる表示制御工程と、
    　前記注目領域検出工程で注目領域が検出された場合に、前記表示装置に、前記医療画像と前記検出された注目領域に関する情報を重畳表示させる第１の報知工程と、
    　前記注目領域検出工程で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知工程と、
    　を実行し、
    　前記第２の報知工程を前記第１の報知工程よりも後に行う医療画像処理方法。
13. 　プロセッサを備える医療画像処理装置に医療画像処理方法を実行させる医療画像処理プログラムであって、
    　前記医療画像処理方法は、
    　時系列の医療画像を取得する画像取得工程と、
    　前記取得した医療画像から注目領域を検出する注目領域検出工程と、
    　前記医療画像を表示装置に表示させる表示制御工程と、
    　前記注目領域検出工程で注目領域が検出された場合に、前記表示装置に、前記医療画像と前記検出された注目領域に関する情報を重畳表示させる第１の報知工程と、
    　前記注目領域検出工程で注目領域が検出された場合に音声出力装置から音声を出力する第２の報知工程と、
    　を含み、
    　前記第２の報知工程は前記第１の報知工程よりも後に行われる医療画像処理プログラム。
14. 　非一時的かつコンピュータ読取可能な記録媒体であって、請求項１３に記載のプログラムが記録された記録媒体。

Images