JP2022103441A - 医療画像処理システム、内視鏡システム - Google Patents

Abstract

【課題】内視鏡で得られた医療画像に基づいて注目領域の検出を行う場合において、注目領域の検出結果を検出精度に対応させて報知し、且つ、注目領域の検出位置によって注目領域の検出結果の見落しを防ぐことができる医療画像処理システム、内視鏡システムを提供する。【解決手段】観察対象を撮像して得られる医療画像を取得する。医療画像から注目対象を含む注目領域を検出する。注目領域の検出結果を、少なくとも注目領域の検出位置によって異なる表示態様で、モニタ３４に表示する。【選択図】図５

Description

本発明は、内視鏡で得られた医療画像の解析結果を用いる医療画像処理システム、内視鏡システムに関する。

現在の医療分野においては、光源装置、内視鏡、及びプロセッサ装置を備える内視鏡システムなどのように、医療画像を用いる医療画像処理システムが普及している。また、近年においては、医療画像から病変部の可能性のある注目領域を抽出し、抽出した注目領域に対して画像解析を行うことによって、病態に関する診断情報を取得することが行われている。

例えば、特許文献１では、医療画像についての特定の特徴量に基づいて、医療画像における注目領域を検出している。そして、注目領域の検出に基づいて、画面外に特徴領域が検出されたことを報知する報知画像を表示し、また、画面内に特徴領域に対してマーカ画像を付加している。

国際公開第２０１７／０７３３３８号

特許文献１のように、注目領域の検出を行う場合においては、注目領域の検出位置によっては、検出精度が低いことがある。例えば、医療画像のうち内視鏡画像については、内視鏡画像の周辺領域（端部など）においては、レンズ（一般的には画角の広いレンズが使用されている）による画像の特性や照明光の照射ムラなどがある。そのため、内視鏡画像の周辺領域における注目領域の検出精度は、中央領域など他の領域と比較して低くなる場合がある。このように、中心領域と周辺領域では注目領域の検出精度が異なる場合に、中央領域における検出結果と周辺領域における検出結果を同じように表示すると、医師が正確に診断することができないおそれがある。

また、注目領域の検出位置によっては、ユーザーの注意が向けられにくい場合がある。例えば、内視鏡を挿入する際、進行方向（後退方向）に対応する中心領域には注意が向けられる一方、中心領域の外側にある周辺領域には注意が向けられない場合がある。

本発明は、医療画像に基づいて注目領域の検出を行う場合において、注目領域の検出結果を検出精度に対応させて報知し、且つ、注目領域の検出位置によって注目領域の検出結果の見落しを防ぐことができる医療画像処理システム、内視鏡システムを提供することを目的とする。

本発明の医療画像処理システムは、内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、医療画像から注目領域を検出する注目領域検出部と、注目領域の検出結果を、少なくとも注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、予め定められた特定位置と注目領域の検出位置との間の距離を示す特定距離が特定範囲に入っている場合における注目領域の検出結果の表示態様と、特定距離が特定範囲から外れている場合における注目領域の検出結果の表示態様とが異なる。

特定位置は医療画像の中心領域に含まれることが好ましい。

注目領域の検出結果を特定の図形で表す場合において、特定の図形の線の太さ、特定の図形の大きさ、特定の図形の表示時間、特定の図形の透過度がのうち少なくとも１つが、注目領域の検出位置によって異なることが好ましい。

注目領域の検出結果を特定の色領域で表す場合において、特定の色領域の色、特定の色領域の表示時間、のうち少なくとも１つが、注目領域の検出位置によって異なることが好ましい。

また、本発明の医療画像処理システムは、内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、医療画像から注目領域を検出する注目領域検出部と、注目領域の検出結果を、少なくとも注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、注目領域の検出結果を特定の図形で表す場合において、特定の図形の表示時間、特定の図形の線の太さ、特定の図形の大きさ、のうち少なくとも１つが、注目領域の検出位置によって異なる。

特定の図形の透過度が、注目領域の検出位置によって異なることが好ましい。

また、本発明の医療画像処理システムは、内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、医療画像から注目領域を検出する注目領域検出部と、注目領域の検出結果を、少なくとも注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、注目領域の検出結果を特定の色領域で表す場合において、特定の色領域の色、特定の色領域の表示時間、のうち少なくとも１つが、注目領域の検出位置によって異なる。

予め定められた特定位置と注目領域の検出位置との間の距離を示す特定距離が特定範囲に入っている場合における注目領域の検出結果の表示態様と、特定距離が特定範囲から外れている場合における注目領域の検出結果の表示態様とが異なることが好ましい。

特定位置は医療画像の中心領域に含まれることが好ましい。

また、本発明の内視鏡システムは、上述した医療画像処理システムと、内視鏡と、表示部と、を備える。

なお、注目領域としては、例えば、病変部、処理の跡、手術の跡、出血箇所、良性腫瘍部、炎症部、マーキング部、または、生検実施部など、ユーザーが注目領域として所望する対象であることが好ましい。

本発明によれば、医療画像に基づいて注目領域の検出を行う場合において、注目領域の検出結果を検出精度に対応させて報知し、且つ、注目領域の検出位置によって注目領域の検出結果の見落しを防ぐことができる。

画像処理システムと内視鏡システムなどを示すブロック図である。 内視鏡システムを示すブロック図である。 医療画像解析処理部の機能を示すブロック図である。 医療画像における中心領域と周辺領域を示す画像図である。 注目領域の検出位置によってバウンディングボックスの太さが異なることを示す医療画像の画像図である。 図５と異なる医療画像の画像図であって注目領域の検出位置によってバウンディングボックスの太さが異なることを示す医療画像の画像図である。 注目領域の検出位置によってバウンディングボックスの大きさが異なることを示す医療画像の画像図である。 図７と異なる医療画像の画像図であって注目領域の検出位置によってバウンディングボックスの大きさが異なることを示す医療画像の画像図である。 注目領域の検出位置によってバウンディングボックスの表示時間が異なることを示す説明図である。 図９と異なる説明図であって注目領域の検出位置によってバウンディングボックスの表示時間が異なることを示す説明図である。 注目領域の検出位置によってバウンディングボックスの透過度が異なることを示す医療画像の画像図である。 図１１と異なる医療画像の画像図であって注目領域の検出位置によってバウンディングボックスの透過度が異なることを示す医療画像の画像図である。 注目領域の検出位置によって特定の色領域の色が異なることを示す医療画像の画像図である。 注目領域の検出位置によって特定の色領域の表示時間が異なることを示す説明図である。 図１４と異なる説明図であって注目領域の検出位置によって特定の色領域の表示時間が異なることを示す説明図である。 特定位置ＳＰ、注目領域の検出位置ＤＰ、及び特定距離Ｌを示す医療画像の画像図である。 画像処理システムを含む診断支援装置である。 画像処理システムを含む医療業務支援装置である。

図１に示すように、画像処理システム１０は、医療画像取得部１１、医療画像解析処理部１２、表示部１３、表示制御部１５、入力受信部１６、統括制御部１７、及び、保存部１８を備える。

医療画像取得部１１は、医療装置である内視鏡システム２１等から直接に、または、ＰＡＣＳ（Picture Archiving and Communication System）２２等の管理システムもしくはその他情報システムを介して、被写体像を含む医療画像を取得する。医療画像は静止画像または動画（いわゆる検査動画）である。医療画像が動画である場合、医療画像取得部１１は、検査後に動画を構成するフレーム画像を静止画像として取得することができる。また、医療画像が動画である場合、医療画像の表示には、動画を構成する１つの代表フレームの静止画像を表示することのほか、動画を１または複数回、再生することを含む。また、医療画像取得部１１が取得する医療画像には、内視鏡システム２１等の医療装置を用いて医師が撮影した画像の他、内視鏡システム２１等の医療装置が医師の撮影指示に依らず自動的に撮影した画像を含む。なお、本実施形態では、画像処理システム１０及び内視鏡システム２１ともに医療画像を用いて画像処理を行うことから、画像処理システム１０及び内視鏡システム２１はいずれも医療画像処理システムに相当する。

医療画像取得部１１は、複数の医療画像を取得し得る場合、これらの医療画像のうち１または複数の医療画像を選択的に取得できる。また、医療画像取得部１１は、複数の互いに異なる検査において取得した複数の医療画像を取得できる。例えば、過去に行った検査で取得した医療画像と、最新の検査で取得した医療画像と、の一方または両方を取得できる。すなわち、医療画像取得部１１は、任意に医療画像を取得できる。

本実施形態においては、被写体像を含む医療画像を複数取得する。より具体的には、１回の特定の検査において撮影した医療画像を取得し、かつ、１回の特定の検査において撮影した医療画像が複数ある場合には、一連の医療画像のうち複数の医療画像を取得する。また、本実施形態においては、画像処理システム１０は、内視鏡システム２１と接続し、内視鏡システム２１から医療画像を取得する。すなわち、本実施形態において医療画像は、内視鏡画像である。

表示部１３は、医療画像取得部１１が取得した医療画像、及び、医療画像解析処理部１２の解析結果を表示するディスプレイである。画像処理システム１０が接続するデバイス等が含むモニタまたはディスプレイを共用し、画像処理システム１０の表示部１３として使用できる。表示制御部１５は、表示部１３における医療画像及び解析結果の表示態様を制御する。

入力受信部１６は、画像処理システム１０に接続するマウス、キーボード、その他操作デバイスからの入力を受け付ける。画像処理システム１０の各部の動作はこれらの操作デバイスを用いて制御できる。

統括制御部１７は、画像処理システム１０の各部の動作を統括的に制御する。入力受信部１６が操作デバイスを用いた操作入力を受信した場合には、統括制御部１７は、その操作入力にしたがって画像処理システム１０の各部を制御する。

保存部１８は、画像処理システム１０が含むメモリ等の記憶デバイス（図示しない）、または、内視鏡システム２１等の医療装置もしくはＰＡＣＳ２２が含む記憶デバイス（図示しない）に、医療画像の静止画等を保存する。

図２に示すように、本実施形態において画像処理システム１０が接続する内視鏡システム２１は、白色の波長帯域の光もしくは特定の波長帯域の光の少なくともいずれかを照射して被写体を撮影することにより画像を取得する内視鏡３１、内視鏡３１を介して被写体内に照明光を照射する光源装置３２、プロセッサ装置３３、及び、内視鏡３１を用いて撮影した内視鏡画像等を表示するモニタ３４を有する。内視鏡３１が照明光に使用する特定の波長帯域の光は、例えば、緑色波長帯域よりも短波長帯域の光、特に可視域の青色帯域または紫色帯域の光である。

プロセッサ装置３３は、医療画像取得部３５、医療画像解析処理部３６、表示制御部３７を備えている。医療画像取得部３５は、内視鏡３１から出力される医療画像を取得する。医療画像解析処理部３６は、医療画像取得部３５で取得した医療画像に対して、解析処理を行う。医療画像解析処理部３６での処理内容は、画像処理システム１０の医療画像解析処理部１２での処理内容と同様である。表示制御部３７は、医療画像解析処理部３６で得られた医療画像をモニタ３４に表示する。プロセッサ装置３３は画像処理システム１０と接続される。なお、医療画像取得部３５は医療画像取得部１１と同様であり、医療画像解析処理部３６は医療画像解析処理部１２と同様であり、表示制御部３７は表示制御部１５と同様である。

医療画像解析処理部３６は、医療画像取得部１１が取得した医療画像を用いて解析処理をする。図３に示すように、医療画像解析処理部１２は、注目領域検出部４１と、表示態様決定部４２と、を含む。注目領域検出部４１では、医療画像から注目領域を検出する注目領域検出処理を行う。注目領域検出処理としては、例えば、ＮＮ（Neural Network）、ＣＮＮ（Convolutional Neural Network）、Adaboost、ランダムフォレストなどを用いてもよい。また、注目領域検出処理として、医療画像の色情報、画素値の勾配等で得られる特徴量を元に、注目領域の検出を行ってもよい。なお、画素値の勾配等は、例えば、被写体の形状（粘膜の大局的な起伏または局所的な陥凹もしくは隆起等）、色（炎症、出血、発赤、または萎縮に起因した白化等の色）、組織の特徴（血管の太さ、深さ、密度、もしくはこれらの組み合わせ等）、または、構造の特徴（ピットパターン等）等によって、変化が表れる。

なお、注目領域検出部４１で検出される注目領域は、例えば、がんに代表される病変部、処理の跡、手術の跡、出血箇所、良性腫瘍部、炎症部（いわゆる炎症の他、出血または萎縮等の変化がある部分を含む）、加熱による焼灼跡もしくは着色剤、蛍光薬剤等による着色によってマーキングしたマーキング部、または、生体検査（いわゆる生検）を実施した生検実施部を含む領域である。すなわち、病変を含む領域、病変の可能性がある領域、生検等の何らかの処置をした領域、クリップやかん子などの処置具、または、暗部領域（ヒダ（襞）の裏、管腔奥のため観察光が届きにくい領域）など病変の可能性にかかわらず詳細な観察が必要である領域等が注目領域になり得る。内視鏡システム２１においては、注目領域検出部４１は、病変部、処理の跡、手術の跡、出血箇所、良性腫瘍部、炎症部、マーキング部、または、生検実施部のうち少なくともいずれかを含む領域を注目領域として検出する。

表示態様決定部４２は、注目領域の検出位置に基づいて、注目領域の検出結果の表示態様を決定する。表示制御部３７は、注目領域の検出結果の表示態様に従って、医療画像上において注目領域の検出結果をモニタ３４に表示する。ここで、内視鏡３１で使用しているレンズ（一般的には画角の広いレンズが使用されている）による画像の特性や照明光の照射ムラなどにより、医療画像から注目領域を検出した検出位置によって、検出精度に違いがあるため、注目領域の検出結果の表示態様を変えることが好ましい。また、ユーザーが注目領域を見落としやすい領域と見落としにくい領域があることを考慮し、注目領域の検出位置によって注目領域の検出結果の表示態様を変えることが好ましい。

例えば、図４に示すように、注目領域の検出位置が医療画像の中心領域４３（第１領域）の含まれている場合における注目領域の検出結果の表示態様と、注目領域の検出位置が医療画像の周辺領域４４（第２領域）に含まれている場合における注目領域の検出結果の表示態様を変えることが好ましい。例えば、注目領域の検出結果を特定の図形で表す場合において、中心領域４３で検出された注目領域の報知に用いる特定の図形の線の太さと、周辺領域４４で検出された注目領域の報知に用いる特定の図形の線の太さとを異ならせる。なお、中心領域４３で検出された注目領域の報知に用いる特定の図形の形（例えば、星形）と、周辺領域４４で検出された注目領域の報知に用いる特定の図形の形（例えば、円）とを変えるようにしてもよい。

特定の形としてバウンディングボックスを用い、注目領域の検出精度をバウンディングボックスの太さで表す場合には、図５に示すように、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス４６の枠の太さを、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス４７の枠の太さよりも太くすることが好ましい。これにより、ユーザーは、バウンディングボックス４６、４７の太さによって、検出精度を把握することができる。即ち、ユーザーは、中心領域４３で検出された注目領域は検出精度が高い一方、周辺領域４４で検出された注目領域は検出精度が低いことを把握することができる。

一方、特定の形としてバウンディングボックスを用い、注目領域の見落し易さをバウンディングボックスの太さで表す場合には、図６に示すように、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス４８の枠の太さを、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス４９の枠の太さよりも細くすることが好ましい。これにより、周辺領域４４で検出された注目領域に関しては、バウンディングボックス４９の視認性が高いため、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、バウンディングボックス４８の視認性が低いため、煩わしさを軽減することができる。

また、注目領域の検出結果を特定の図形で表す場合において、中心領域で検出された注目領域の報知に用いる特定の図形の大きさと、周辺領域で検出された注目領域の報知に用いる特定の図形の大きさを異ならせる。この場合、図７に示すように、特定の形としてバウンディングボックスを用い、注目領域の検出精度をバウンディングボックスの大きさで表す場合には、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス５０の大きさを、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス５１の大きさよりも大きくが好ましい。これにより、ユーザーは、バウンディングボックス５０、５１の大きさによって、検出精度を把握することができる。即ち、ユーザーは、中心領域４３で検出された注目領域は検出精度が高い一方、周辺領域４４で検出された注目領域は検出精度が低いことを把握することができる。

一方、特定の形としてバウンディングボックスを用い、注目領域の見落し易さをバウンディングボックスの大きさで表す場合には、図８に示すように、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス５２の大きさを、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス５３の大きさよりも小さくことが好ましい。これにより、周辺領域４４で検出された注目領域に関しては、バウンディングボックス５３が大きく表示されることにより、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、バウンディングボックス５０が小さく表示されることにより、煩わしさを軽減することができる。

また、注目領域の検出結果を特定の図形で表す場合において、中心領域４３で検出された注目領域の報知に用いる特定の図形をモニタ３４で表示し続ける時間（表示時間）と、周辺領域４４で検出された注目領域の報知に用いる特定の図形の表示時間を異ならせる。この場合、図９に示すように、特定の形としてバウンディングボックスを用い、注目領域の検出精度をバウンディングボックスの表示時間で表す場合であって、中心領域４３と周辺領域４４の両方で注目領域が検出された場合には、例えば、まず、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス５４と、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス５５が表示される。

そして、注目領域の検出から第１の表示時間が経過した時点で、バウンディングボックス５４の表示は継続する（実線で表示）一方で、バウンディングボックス５５は非表示（点線で表示）とする。更に、第１の表示時間経過後、第２の表示時間が経過した時点で、両方のバウンディングボックス５４、５５を非表示にする。これにより、ユーザーは、バウンディングボックス５４、５６の表示時間によって、検出精度を把握することができる。即ち、ユーザーは、中心領域４３で検出された注目領域は検出精度が高い一方、周辺領域４４で検出された注目領域は検出精度が低いことを把握することができる。

一方、図１０に示すように、特定の形としてバウンディングボックスを用い、注目領域の見落し易さをバウンディングボックスの表示時間で表す場合には、例えば、まず、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス５６と、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス５７が表示される。そして、注目領域の検出から第１の表示時間が経過した時点で、バウンディングボックス５７の表示は継続する（実線で表示）一方、バウンディングボックス５６は非表示（点線）とする。これにより、周辺領域４４で検出された注目領域に関しては、バウンディングボックス５７が長い間、表示されることにより、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、バウンディングボックス５６が短い間しか表示されないためにより、煩わしさを軽減することができる。

また、注目領域の検出結果を特定の図形で表す場合において、中心領域４３で検出された注目領域の報知に用いる特定の図形の透過度と、周辺領域４４で検出された注目領域の報知に用いる特定の図形の透過度を異ならせる。ここで、透過度とは、医療画像において、特定の図形の背景にある被写体像が視認できる度合いのことをいう。透過度が高ければ、特定の図形の背景にある被写体像が透けて見えるようになり、透過度が低ければ、特定の図形の背景にある被写体像が特定の図形で見えにくくなっている。

そして、図１１に示すように、特定の形としてバウンディングボックスを用い、注目領域の検出精度をバウンディングボックスの透過度で表す場合には、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス５８の透過度を、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス５９の透過度よりも低くすることが好ましい。これにより、ユーザーは、バウンディングボックスの透過度によって、検出精度を把握することができる。なお、図１１では、透過度をハッチングの尺度で表しており、尺度が大きくなるほど、透過度が低く、尺度が小さくなるほど、透過度が高くなっている。

一方、特定の形としてバウンディングボックスを用い、注目領域の見落し易さをバウンディングボックスの透過度で表す場合には、図１２に示すように、中心領域４３で検出された注目領域の報知に用いるバウンディングボックス６０の透過度を、周辺領域４４で検出された注目領域の報知に用いるバウンディングボックス６１の透過度よりも高くすることが好ましい。これにより、周辺領域４４で検出された注目領域に関しては、バウンディングボックス６１の透過度が低いことにより、バウンディングボックス６１を視認し易くなっているため、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、バウンディングボックス６０の透過度が高いことにより、バウンディングボックス６０の視認性が低くなっているため、煩わしさを軽減することができる。

また、注目領域の検出結果を特定の色領域で表す場合には、中心領域で検出した注目領域の報知に用いる特定の色領域の色と、周辺領域で検出した注目領域の報知に用いる特定の色領域の色とを異ならせる。特定の色領域は、注目領域を含むことが好ましい。また、特定の色領域は、赤色など生体内の色と全く異なる疑似カラーを用いることが好ましいが、注目領域の色と区別できるような色とすることが好ましい。

この場合、特定の色領域の色で注目領域の検出精度を表す場合には、図１３に示すように、中心領域４３で検出された注目領域の報知に用いる特定の色領域６２を、視認性の高い色（例えば、明度、彩度が高い色）で表示する一方で、周辺領域４４で検出された注目領域の報知に用いる特定の色領域６３を、視認性の低い色（例えば、明度、彩度が低い色）で表示する。これにより、ユーザーは、特定の色領域の色によって検出精度を把握することができる。即ち、ユーザーは、中心領域４３で検出された注目領域は検出精度が高い一方、周辺領域４４で検出された注目領域は検出精度が低いことを把握することができる。

一方、特定の色で注目領域の見落し易さを表す場合には、図示は省略するものの、中心領域４３で検出された注目領域の報知に用いる特定の色領域を、視認性の低い色（例えば、明度、彩度が低い色）で表示する一方で、周辺領域４４で検出された注目領域の報知に用いる特定の色領域を、視認性の高い色（例えば、明度、彩度が高い色）で表示する。これにより、周辺領域４４で検出された注目領域に関しては、特定の色領域の視認性が高いため、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、特定の色領域の視認性が低いため、煩わしさを軽減することができる。

また、注目領域の検出結果を、生体内の色と全く異なる疑似カラーなどの特定の色領域で表す場合において、中心領域４３で検出された注目領域の報知に用いる特定の色領域をモニタ３４で表示し続ける時間（表示時間）と、周辺領域４４で検出された注目領域の報知に用いる特定の色領域の表示時間を異ならせる。この場合、注目領域の検出精度を特定の色領域の表示時間で表す場合であって、中心領域４３と周辺領域４４の両方で注目領域が検出された場合には、図１４に示すように、まず、中心領域４３で検出された注目領域の報知に用いる特定の色領域６４と、周辺領域４４で検出された注目領域の報知に用いる特定の色領域６５が表示される。

そして、注目領域の検出から第１の表示時間が経過した時点で、特定の色領域６４の表示は継続する（実線で表示）一方で、特定の色領域６５は非表示（点線で表示）とする。ここで、非表示とは、特定の色領域の色と他の領域の色との違いが無くなることをいう。更に、第１の表示時間経過後、第２の表示時間が経過した時点で、両方の特定の色領域６４、６４を非表示にする。これにより、ユーザーは、特定の色領域の表示時間の長短によって、検出精度を把握することができる。即ち、ユーザーは、中心領域４３で検出された注目領域は検出精度が高い一方、周辺領域４４で検出された注目領域は検出精度が低いことを把握することができる。

一方、注目領域の見落し易さを特定の色領域の表示時間で表す場合であって、中心領域４３と周辺領域４４の両方で注目領域が検出された場合には、図１５に示すように、まず、中心領域４３で検出された注目領域の報知に用いる特定の色領域６６と、周辺領域４４で検出された注目領域の報知に用いる特定の色領域６７が表示される。そして、注目領域の検出から第１の表示時間が経過した時点で、特定の色領域の表示は継続する（実線で表示）一方、特定の色領域は非表示（点線）とする。これにより、周辺領域４４で検出された注目領域に関しては、特定の色領域６７が長い間、表示されることにより、見落としを防ぐことができる。一方、中心領域４３で検出された注目領域に関しては、特定の色領域６６が短い間しか表示されないためにより、煩わしさを軽減することができる。

なお、注目領域の検出位置が医療画像の中心領域又は周辺領域のいずれに含まれているか否かによって、注目領域の検出結果の表示態様を変えているが、図１６に示すように、予め定めた特定位置ＳＰと注目領域の検出位置ＤＰとの間の距離を示す特定距離Ｌに基づいて、注目領域の検出結果の表示態様とを変えてもよい。特定位置ＳＰについては医療画像の中心領域４３に含まれていることが好ましい。例えば、特定距離Ｌが特定範囲に入っている場合における注目領域の検出結果の表示態様（特定範囲内表示態様）と、特定距離が特定範囲から外れている場合における注目領域の検出結果の表示態様（特定範囲外表示態様）とを異ならせる。具体的には、特定範囲内表示態様としての特定の図形の線の太さ、大きさ、表示時間、透過度、又は特定の色、特定の色の表示時間と、特定範囲外表示態様としての特定の図形の線の太さ、大きさ、表示時間、透過度、又は特定の色、特定の色の表示時間とを異ならせる。この異ならせるための具体的な例については、上記と同様である。

また、医療画像を中心領域又は周辺領域の２つの領域分けて、いずれかの領域で注目領域の検出結果の表示態様を変える他、医療画像を３以上の領域に分けて、各領域で注目領域の検出結果の表示態様を変えるようにしてもよい。また、中心領域と周辺領域のように、医療画像を同心円状に分割しているが、分割する形状については、矩形形状などその他の形状であってもよい。また、医療画像を分割する場合には、同心円、矩形形状など複数種類を組み合わせて、分割してもよい。

また、特定の図形として、バウンディングボックスを挙げているが、その他の図形であってもよい。例えば、バウンディングボックスに色を付けたものや、注目領域に含まれる観察対象をアイコン（指のマークやマウスカーソル）などで指し示したりしてもよい。

なお、図１７に示すように、内視鏡システム２１その他モダリティやＰＡＣＳ２２とを組み合わせて使用する診断支援装置６１０は、上記実施形態及びその他変形例の画像処理システム１０を含むことができる。また、図１８に示すように、例えば内視鏡システム２１を含む、第１検査装置６２１、第２検査装置６２２、…、第Ｎ検査装置６３３等の各種検査装置と任意のネットワーク６２６を介して接続する医療業務支援装置６３０は、上記実施形態及びその他変形例の画像処理システム１０を含むことができる。

この他、画像処理システム１０、内視鏡システム２１、及び、画像処理システム１０を含む各種装置またはシステムは、以下の種々の変更等をして使用できる。

医療画像としては、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像を用いることができる。

医療画像としては、特定の波長帯域の光を照射して得た画像を使用する場合、特定の波長帯域は、白色の波長帯域よりも狭い帯域を用いることができる。

特定の波長帯域は、例えば、可視域の青色帯域または緑色帯域である。

特定の波長帯域が可視域の青色帯域または緑色帯域である場合、特定の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、３９０ｎｍ以上４５０ｎｍ以下または５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。

特定の波長帯域は、例えば、可視域の赤色帯域である。

特定の波長帯域が可視域の赤色帯域である場合、特定の波長帯域は、５８５ｎｍ以上６１５ｎｍまたは６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、５８５ｎｍ以上６１５ｎｍ以下または６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有することが好ましい。

特定の波長帯域は、例えば、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有することができる。

特定の波長帯域が、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、かつ、特定の波長帯域の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する場合、特定の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、または、６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有することが好ましい。

医療画像が生体内を写した生体内画像である場合、この生体内画像は、生体内の蛍光物質が発する蛍光の情報を有することができる。

また、蛍光は、ピーク波長が３９０ｎｍ以上４７０ｎｍ以下である励起光を生体内に照射して得る蛍光を利用できる。

医療画像が生体内を写した生体内画像である場合、前述の特定の波長帯域は、赤外光の波長帯域を利用することができる。

医療画像が生体内を写した生体内画像であり、前述の特定の波長帯域として、赤外光の波長帯域を利用する場合、特定の波長帯域は、７９０ｎｍ以上８２０ｎｍまたは９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、かつ、特定の波長帯域の光は、７９０ｎｍ以上８２０ｎｍ以下または９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有することが好ましい。

医療画像取得部１１は、白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像に基づいて、特定の波長帯域の信号を有する特殊光画像を取得する特殊光画像取得部を有することができる。この場合、医療画像として特殊光画像を利用できる。

特定の波長帯域の信号は、通常光画像に含むＲＧＢまたはＣＭＹの色情報に基づく演算により得ることができる。

白色帯域の光、または白色帯域の光として複数の波長帯域の光を照射して得る通常光画像と、特定の波長帯域の光を照射して得る特殊光画像との少なくとも一方に基づく演算によって、特徴量画像を生成する特徴量画像生成部を備えることができる。この場合、医療画像として特徴量画像を利用できる。

内視鏡システム２１については、内視鏡３１としてカプセル内視鏡を使用できる。この場合、光源装置３２と、プロセッサ装置３３の一部と、はカプセル内視鏡に搭載できる。

上記実施形態及び変形例において、医療画像取得部１１、医療画像解析処理部１２、及び医療画像解析処理部１２を構成する各部、表示制御部１５、入力受信部１６、統括制御部１７、並びに、医療画像取得部３５、医療画像解析処理部３６、表示制御部３７、注目領域検出部４１、表示態様決定部４２といった各種の処理を実行する処理部（processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウエア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit)、ＦＰＧＡ (Field Programmable Gate Array)などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device:ＰＬＤ）、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路、画像処理などの処理を大量に並列に行うＧＰＵ (Graphical Processing Unit)などが含まれる。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されてもよいし、同種または異種の２つ以上のプロセッサの組み合せ（例えば、複数のＦＰＧＡ、ＣＰＵとＦＰＧＡの組み合わせ、又はＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウエアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip:ＳｏＣ）などに代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路（circuitry）である。また、記憶部のハードウェア的な構造はＨＤＤ（hard disc drive）やＳＳＤ（solid state drive）等の記憶装置である。

また、本発明の別の形態は以下の通りである。
本発明の医療画像処理システムは、
プロセッサ装置が、
医療画像取得部によって、観察対象を撮像して得られる医療画像を取得し、
注目領域検出部によって、前記医療画像から注目領域を検出し、
表示制御部によって、前記注目領域の検出結果を、少なくとも前記注目領域の検出位置によって異なる表示態様で、表示部に表示する。

１０ 画像処理システム
１１ 医療画像取得部
１２ 医療画像解析処理部
１３ 表示部
１５ 表示制御部
１６ 入力受信部
１７ 統括制御部
１８ 保存部
２１ 内視鏡システム
２２ ＰＡＣＳ
３１ 内視鏡
３２ 光源装置
３３ プロセッサ装置
３４ モニタ
３５ 医療画像取得部
３６ 医療画像解析処理部
３７ 表示制御部
４１ 注目領域検出部
４２ 表示態様決定部
４３ 中心領域
４４ 周辺領域
４６ バウンディングボックス
４６～６１ バウンディングボックス
６２～６７ 特定の色領域
６１０ 診断支援装置
６２１ 第１検査装置
６２２ 第２検査装置
６２３ 第３検査装置
６２６ ネットワーク
６３０ 医療業務支援装置
ＳＰ 特定位置
ＤＰ 検出位置
Ｌ 特定距離

Claims (10)

1. 内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、
   前記医療画像から注目領域を検出する注目領域検出部と、
   前記注目領域の検出結果を、少なくとも前記注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、
   予め定められた特定位置と前記注目領域の検出位置との間の距離を示す特定距離が特定範囲に入っている場合における前記注目領域の検出結果の表示態様と、前記特定距離が前記特定範囲から外れている場合における前記注目領域の検出結果の表示態様とが異なる医療画像処理システム。
2. 前記特定位置は前記医療画像の中心領域に含まれる請求項１記載の医療画像処理システム。
3. 前記注目領域の検出結果を特定の図形で表す場合において、前記特定の図形の線の太さ、前記特定の図形の大きさ、前記特定の図形の表示時間、前記特定の図形の透過度がのうち少なくとも１つが、前記注目領域の検出位置によって異なる請求項１または２記載の医療画像処理システム。
4. 前記注目領域の検出結果を特定の色領域で表す場合において、前記特定の色領域の色、前記特定の色領域の表示時間、のうち少なくとも１つが、前記注目領域の検出位置によって異なる請求項１ないし３いずれか１項記載の医療画像処理システム。
5. 内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、
   前記医療画像から注目領域を検出する注目領域検出部と、
   前記注目領域の検出結果を、少なくとも前記注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、
   前記注目領域の検出結果を特定の図形で表す場合において、前記特定の図形の表示時間、前記特定の図形の線の太さ、前記特定の図形の大きさ、のうち少なくとも１つが、前記注目領域の検出位置によって異なる医療画像処理システム。
6. 前記特定の図形の透過度が、前記注目領域の検出位置によって異なる請求項５記載の医療画像処理システム。
7. 内視鏡で観察対象を撮像して得られる医療画像を取得する医療画像取得部と、
   前記医療画像から注目領域を検出する注目領域検出部と、
   前記注目領域の検出結果を、少なくとも前記注目領域の検出位置によって異なる表示態様で、表示部に表示する表示制御部とを備え、
   前記注目領域の検出結果を特定の色領域で表す場合において、前記特定の色領域の色、前記特定の色領域の表示時間、のうち少なくとも１つが、前記注目領域の検出位置によって異なる医療画像処理システム。
8. 予め定められた特定位置と前記注目領域の検出位置との間の距離を示す特定距離が特定範囲に入っている場合における前記注目領域の検出結果の表示態様と、前記特定距離が前記特定範囲から外れている場合における前記注目領域の検出結果の表示態様とが異なる請求項５ないし７いずれか１項記載の医療画像処理システム。
9. 前記特定位置は前記医療画像の中心領域に含まれる請求項８記載の医療画像処理システム。
10. 請求項１ないし９いずれか１項記載の医療画像処理システムと、
    内視鏡と、
    表示部と、
    を備える、内視鏡システム。

Images