JP2015025965A - 内視鏡画像処理装置及び内視鏡装置 - Google Patents

Abstract

【課題】内視鏡撮像部により撮像して得られた検査画像と比較対象画像との比較において、検査対象あるいは検査部位の状態判定がし易い内視鏡画像処理装置及び内視鏡装置を提供する。
【解決手段】内視鏡装置１の本体部３は、CCD１１により検査対象を撮影して得られた検査画像を記録するメモリカード２３を有すると共に、メモリカード２３に記録された検査画像から、透過率が０でない比較対象画像CIを生成し、所定の指示に応じて、CCD１１により撮影して得られたライブ画像LI上に、比較対象画像CIを重畳して表示部２２に表示する。
【選択図】図２

Description

本発明は、内視鏡画像処理装置及び内視鏡装置に関する。

従来より、内視鏡装置が、工業分野及び医療分野で広く使用されている。内視鏡装置は、種々の検査対象の検査のために使用され、例えば工業分野では、配管、ブレード等の検査のために使用されている。

内視鏡検査において、検査対象あるいは検査部位のCADオブジェクト画像、あるいは、以前の検査時の画像を、比較対象画像として、表示器の画面上に表示して、検査者がライブ画像と比較対象画像とを見比べることにより、検査対象あるいは検査部位の状態判定あるいは確認を行う技術が提案されている。

例えば、特開２０１２−１５４６７２号公報には、ジェットエンジンのブレードの内視鏡検査において、検査対象のライブ画像に、CADオブジェクトを重畳表示する技術が開示されている。また、特開２００３−９０５７号公報には、検査対象のライブ画像と、同じ部位の以前の再生画像とを並べて表示することができるコンペア機能を有する内視鏡装置が提案されている。

特開２０１２−１５４６７２号公報 特開２００３−９０５７号公報

しかし、特開２０１２−１５４６７２号公報に開示の技術の場合、例えば、錆等によりその外観が変化している検査対象に対しては、検査対象のライブ画像と、CADオブジェクトとを比較しても、検査対象あるいは検査部位の状態判定がし難いという問題がある。また、CADオブジェクトとの比較ができる位置に、挿入部の先端部を容易に位置させることができない場合もある。さらに、検査対象に以前から存在する欠け等の変化量は、ライブ画像とCADオブジェクトとを比較しても判定することはできないという問題がある。

特開２００３−９０５７号公報に開示の技術の場合、画面上を２つに分けて２つの画像を並べて表示するため、画像が小さくなるだけでなく、検査者にとっては左右に並んだ画像を詳細に見比べる作業となるため、検査対象あるいは検査部位の状態判定がし難いという問題がある。

そこで、本発明は、内視鏡撮像部により撮像して得られた検査画像と、比較対象画像との比較において、検査対象あるいは検査部位の状態判定がし易い内視鏡画像処理装置及び内視鏡装置を提供することを目的とする。

本発明の一態様の内視鏡画像処理装置は、内視鏡撮像部により検査対象を撮影して得られた第１の検査画像を記録する記録部と、前記記録部に記録された前記第１の検査画像から、透過率が０でない参照画像を生成する参照画像生成部と、所定の指示に応じて、前記内視鏡撮像部により撮影して得られた第２の検査画像あるいは前記記録部に記録された第３の検査画像上に、前記参照画像生成部において生成された前記参照画像を重畳して表示装置に表示する参照画像重畳部と、を有する。

本発明の一態様の内視鏡装置は、前記内視鏡撮像部を有する挿入部と、本発明の内視鏡画像処理装置と、を有する。

本発明によれば、内視鏡撮像部により撮像して得られた検査画像と、比較対象画像との比較において、検査対象あるいは検査部位の状態判定がし易い内視鏡画像処理装置及び内視鏡装置を提供することができる。

本発明の第１の実施の形態に係わる内視鏡装置の構成を示す構成図である。 本発明の第１の実施の形態に係わる、重畳表示機能の実行が指定されたときにおける本体部３の処理の流れの例を示すフローチャートである。 本発明の第１の実施の形態に係わる、透過率変更処理における透過率変更のための透過率変更指示部の例を示す図である。 本発明の第１の実施の形態に係わる、ライブ画像上への比較対象画像の重畳表示を説明するための図である。 本発明の第１の実施の形態に係わる、ライブ画像と、そのライブ画像上に重畳された比較対象画像の表示状態を説明するための図である。 本発明の第１の実施の形態に係わる、ライブ画像LI上に比較対象画像CIが重畳された様子を示す図である。 本発明の第２の実施の形態に係わる、検査画像の記録時の処理の流れの例を示すフローチャートである。 本発明の第２の実施の形態に係わる、重畳表示機能の実行が指定されたときにおける本体部３の処理の流れの例を示すフローチャートである。

以下、図面を参照して本発明の実施の形態を説明する。
図１は、本実施の形態に係わる内視鏡装置の構成を示す構成図である。図１に示すように、内視鏡装置１は、細長の挿入部２と、挿入部２の基端部に接続された本体部３とを有して構成されている。挿入部２は、先端部に撮像素子であるCCD１１が設けられており、CCD１１は、図示しない光学系を通して受光した検査対象の像を光電変換して、撮像信号を生成して出力する内視鏡撮像部である。

内視鏡画像処理装置としての本体部３は、制御部２１、表示部２２、メモリカード２３、ドライバ２４、A/D変換器２５、FPGA２６、ROM２７、RAM２８、カード装着部２９、及び操作部３０を含んで構成される。なお、ここでは、挿入部２の先端部に設けられている湾曲機構、検査対象を照明するための発光ダイオード等の照明装置等については、説明を省略する。

制御部２１は、中央処理装置（CPU）を含み、内視鏡装置１全体の制御を行うと共に、検査者であるユーザにより指定された各種機能のための各種処理を実行する。各種処理のためのソフトウエアプログラムは、ROM２７に記憶されており、FPGA２６を介して制御部２１により読み出されて、RAM２８に展開され実行される。

表示部２２は、液晶表示器（LCD）であり、ユーザの指示に応じて、制御部２１の制御の下、撮像素子であるCCD１１により撮像して得られた検査対象のライブ画像、フリーズされたときのフリーズ画像、メモリカード２３に記録された検査画像、操作のためのメニュー画面、等々を表示する。

メモリカード２３は、本体部３に設けられたカード装着部２９に装着される。検査画像の記録部としてのメモリカード２３には、CCD１１により撮像して得られた検査画像の静止画及び動画が記録される。すなわち、メモリカード２３は、内視鏡撮像部であるCCD１１により検査対象を撮影して得られた検査画像を記録する記録部を構成する記憶装置である。

なお、ここでは、撮像して得られた検査画像の静止画あるいは動画は、カード装着部２９に装着されたメモリカード２３に記録されるが、ハードディスクドライブのような記憶装置に記録するようにしてもよい。

ドライバ２４は、FPGA２６からの駆動制御信号に基づいて、CCD１１を駆動するための駆動信号をCCD１１へ出力する駆動回路である。
A/D変換器２５は、CCD１１が出力するアナログ信号である撮像信号をデジタル信号に変換し、FPGA２６へ出力する回路である。

FPGA２６は、制御部２１からの制御信号に応じて、ドライバ２４を制御すると共に、CCD１１からの撮像信号を、A/D変換器２５を介して入力し、入力されたデジタル信号の画像信号に対して、所定の画像処理を行って制御部２１へ出力する処理を行う処理回路である。

ROM２７は、各種プログラム及び各種データを記録する記憶装置である。RAM２８は、一時記憶用の記憶装置である。
制御部２１は、FPGA２６を介して、ROM２７から各種プログラム及び各種データを読み出すことができる。制御部２１は、FPGA２６から取得した画像信号に対して、画質調整処理等を含む所定の画像処理を行う。さらに、制御部２１は、後述する重畳表示のための重畳表示プログラムを、ROM２７から読み出して、RAM２８に展開して実行する。

また、制御部２１は、取得された内視鏡画像であるライブ画像である検査画像を、表示部２２に表示する。さらに、検査者の指示に基づいて、制御部２１は、取得された検査画像をメモリカード２３に記録すると共に、メモリカード２３に記録された検査画像を読み出すこともできる。

操作部３０は、各種操作ボタン、ジョイスティック、等々の操作部材を含み、ユーザがこれらの操作部材を操作すると、操作信号を、制御部２１へ出力する。各種操作ボタンの中には、後述する重畳表示機能をオンあるいはオフにする操作ボタンが含まれる。

なお、操作部３０は、本体部３に設けられるのではなく、本体部３にケーブルを介して接続されるように構成されていてもよい。
さらになお、操作部３０は、表示部２２に取り付けられたタッチパネルと、表示部２２に表示されたボタン表示などとから構成されたグラフィカルユーザインターフェース（GUI）でもよい。

以上の構成の内視鏡装置１は、ユーザが操作部３０を操作することにより、所望の機能を指示すると、指示された機能に対応するプログラムを制御部２１のCPUが実行することにより、CCD１１により撮像して得られた内視鏡画像である検査画像を、表示部２２に表示させたり、メモリカード２３に記録させたりすることができる。

内視鏡画像処理装置である本体部３は、種々の機能を有し、以下、本体部３の有する機能の一つである重畳表示機能の実行が指定されたときの動作について説明する。
（作用）
ここでは、ユーザの指示の下、メモリカード２３に記録された静止画の検査画像を読み出した後に、重畳表示機能の実行が指示された場合における、本体部３の動作について説明する。図２は、重畳表示機能の実行が指定されたときにおける本体部３の処理の流れの例を示すフローチャートである。

内視鏡装置１のユーザは、操作部３０に対して所定の操作を行うことにより、メモリカード２３に記録されている検査画像の再生機能の実行指示を内視鏡装置１に対して行い、メモリカード２３に記録されている検査画像を読み出して表示部２２の画面上に表示させることができる。

制御部２１は、その再生機能の実行指示の入力を受けると、メモリカード２３に記録されている検査画像の再生処理を実行する（S1）。S1の再生処理では、例えば、メモリカード２３に記録されている複数の検査画像のファイル名リストあるいは各サムネイルを表示部２２に表示し、その表示されたファイル名リストなどの中から再生して表示させたいファイルを選択することにより、ユーザは再生対象の検査画像を指定することができる。

制御部２１は、重畳表示機能がオンされたか否かを判定し（S2）、重畳表示機能がオンされなければ（S2:NO）、処理は、S1に戻る。重畳表示機能がオンされると（S2:YES）、処理は、S3に移行する。

S2では、制御部２１は、透過率の変更の指示があるか否かを判定し（S3）、透過率の変更の指示がなければ（S3:NO）、制御部２１は、指定された検査画像に対して、設定されている透過率を有する画像に変更する画像処理を施すことによって、参照画像である静止画の比較対象画像を生成する（S4）。すなわち、S4の処理は、記録部であるメモリカード２３に記録された検査画像から、透過率が０でない参照画像を生成する参照画像生成部を構成する。

透過率は、初期値が予め設定されており、その初期値、例えば５０％、を有する比較対象画像が生成される。比較対象画像は、例えば、アルファブレンディング処理により、ライブ画像に対して半透明な画像として生成される。

制御部２１は、CCD１１により取得されたライブ画像上に、生成した静止画の比較対象画像を重畳表示する（S5）。すなわち、S5の処理は、所定の指示に応じて、内視鏡装置の撮像部であるCCD１１により撮影して得られた検査画像上に、参照画像生成部であるS4の処理において生成された参照画像である比較対象画像を重畳して表示装置である表示部２２に表示する参照画像重畳部を構成する。

また、透過率の変更の指示があると（S3:YES）、制御部２１は、透過率変更処理を実行する（S6）。透過率変更処理（S6）では、ユーザが、画面２２ａ上に表示される比較対象画像CIの透過率を、所望の値に、指定あるいは変更することができる。すなわち、S6の処理は、参照画像である比較対象画像の透過率を設定あるいは変更するための透過率設定変更部を構成する。

ここでは、検査対象の色の濃さ、彩度等により、比較対象画像CIをライブ画像LI上に重畳したときに、比較対象画像CIとライブ画像LIの差異が解り難い場合があるので、S6の処理を設け、ユーザが比較対象画像CIの透過率を調整することができるようにしている。

図３は、透過率変更処理における透過率変更のための透過率変更指示部の例を示す図である。透過率の変更の指示があると（S3:YES）、制御部２１は、図３に示すような透過率変更指示部４１を表示部２２の画面２２ａ上に表示する。透過率変更指示部４１は、操作レバーを示すアイコン４２を含む。

ユーザは、カーソルを用いて操作レバーを示すアイコン４２を選択し、矢印A1で示す方向に移動すると、透過率を、上昇させることができ、操作レバーを示すアイコン４２を、矢印A2で示す方向に移動すると、透過率を、低下させることができる。比較対象画像CIの透過率が１００％であれば、比較対象画像CIは、消えて表示されず、比較対象画像CIの透過率が０％であれば、比較対象画像CIの下にあり、比較対象画像CIにより覆われたライブ画像の部分は、表示されない。すなわち、比較対象画像CIの透過率が０％でなければ、比較対象画像CIを通して、ライブ画像が透けて見える。

ユーザは、画面２２ａ上のカーソルを利用して、操作レバーを示すアイコン４２を、透過率指定範囲（０〜１００％）の間で所望の位置に移動させることにより、比較対象画像CIの透過率を、所望の透過率に指定あるいは変更することができる。

検査対象の色、彩度などによっては、ライブ画像LIと比較対象画像CIの不一致部分が見難い場合がある。そのような場合は、比較対象画像CIの透過率を変更することにより、ライブ画像LIと比較対象画像CIの不一致部分が認識し易いように比較対象画像CIの見え方を調整することができる。

例えば、検査対象の画像が全体に薄い色であるときは、比較対象画像CIの透過率を上げることによって、ライブ画像LIと比較対象画像CIの不一致部分が認識し易いようになる。すなわち、検査対象の色、その色の濃さ、影部分の存在、等々によって、比較対象画像CIの透過率を調整して、ライブ画像LIと比較対象画像CIの不一致部分を認識し易いようにすることができる。

さらに、本実施の形態では、検査対象の実際の検査画像を用いているので、検査対象の良好な状態のときの画像に基づいて比較対象画像CIを生成すれば、ユーザは、現在の検査対象が、良好な状態のときと比べて、どこの部分が、どのように変化したかを迅速かつ明確に判定することができる。また、検査対象の前回の検査時の画像に基づいて比較対象画像CIを生成すれば、ユーザは、現在の検査対象が、前回の検査時と比べて、どこの部分が、どのように変化したかを迅速かつ明確に判定することができる。

図４は、ライブ画像上への比較対象画像の重畳表示を説明するための図である。なお、ここでは、説明を解り易くするために、内視鏡により得られた画像を文字群（ここでは複数の文字「Ｆ」）に置き換えて示している。

図４に示すように、表示部２２の画面２２ａ上には、ライブ画像LIが表示され、そのライブ画像LI上に、設定された透過率を持つ比較対象画像CIが重畳される。よって、S5の処理により、ライブ画像LI上に比較対象画像CIが重畳された画像が、表示部２２の画面２２ａ上に表示される。

次に、制御部２１は、パン・チルト処理を実行する（S7）。このパン・チルト処理は、ユーザによってその機能の実行が指示されると実行される。すなわち、ユーザは、ユーザが操作部３０に対して所定の操作を行うことによって、パン・チルト処理の指示を行うことができる。
パン・チルト処理について説明する。図５は、ライブ画像と、そのライブ画像上に重畳された比較対象画像の表示状態を説明するための図である。

図５は、ライブ画像LI上に比較対象画像CIが重畳されたときに、ライブ画像LIと比較対象画像CIが互いにずれて重畳される場合を示している。図５では、比較対象画像CIの画像（文字F）は、黒色ではなく薄いグレー色で示されている。このようなずれは、比較対象画像CIの元となる検査画像を撮像したときのCCD１１の視線方向と、ライブ画像を撮像しているCCD１１の現在の視線方向とが、不一致である場合に生じる。
このようなライブ画像LIと比較対象画像CIの重畳時における位置ずれを修正するために、ユーザは、パン・チルト処理の実行を指示する。

パン・チルト処理は、画面２２ａ上における比較対象画像CIの位置（すなわちXY方向の位置）を移動させる処理である。なお、ここでは、パンとは、画像を左右方向に移動させることをいい、チルトは、画像を上下方向に移動させることをいう。

図５に示すように、例えばライブ画像LIに対して、比較対象画像CIがずれ表示されているとき、ユーザは、比較対象画像CIを、画面２２ａ上で移動させて、ライブ画像LIに対して比較対象画像CIが位置ずれの無い位置へ移動させることができる。

例えば、パン・チルト処理の実行が指示されると、表示部２２の画面２２ａ上に、比較対象画像CIの移動方向（XY方向）を指示するための、矢印のアイコン（図示せず）が表示される。ユーザは、比較対象画像CIを移動させたい方向に対応するアイコンを選択することにより、比較対象画像CIを、所望の位置へ移動させることができる。そして、最終的に、ユーザは、ライブ画像LIに対して比較対象画像CIを位置ずれの無い位置へ移動させることができる。ユーザは、パン動作を指示すると、図５において矢印B1方向に沿って比較対象画像CIを移動させ、チルト動作を指示すると、矢印B2方向に沿って比較対象画像CIを移動させることができる。

なお、挿入部２の先端部にある湾曲部（図示せず）の湾曲操作ではなく、パン・チルト処理において、ライブ画像LIを、画面２２ａ上で移動させて、比較対象画像CIに対してライブ画像LIを位置ずれの無い位置へ移動させるようにしてもよい。以上のように、S7の処理は、比較対象画像CI又はライブ画像LIのいずれか一方を、表示装置である表示部２２の表示画面上で移動させる移動部を構成する。

S5において比較対象画像CIが、設定された透過度でライブ画像LI上に重畳されると、ユーザは、不一致部分を認識し易い。また、ライブ画像LIに対して、比較対象画像CIがずれ表示されているときに、上述したパン・チルト処理により、ライブ画像LIに対する比較対象画像CIの位置ずれを無くすことができるので、比較対象画像CIとライブ画像LIの不一致部分を認識し易くすることができる。

また、検査対象の前回の検査時の検査画像に基づいて比較対象画像CIを生成するようにすれば、ユーザは、現在の検査対象が、前回の検査時のときと比べて、どこの部分が、どのように変化したか、あるいは前回に比べて、変形（例えば欠けなど）がどの程度進んだかを迅速かつ明確に判定することができる。

図６は、ライブ画像LI上に比較対象画像CIが重畳された様子を示す図である。図６に示すように、検査対象の部材M、例えばエンジンブレード、の一部に欠け部CPがあるとき、比較対象画像CIの欠け部CPの形状CP1と、ライブ画像LIの欠け部CPの形状CP2とが異なっていると、斜線で示す欠け部CPの形状の異なる領域の部分TPが、見易くなるため、ユーザは、欠け部CPの欠けがどの程度進んだかを迅速かつ明確に判定することができる。

S7の処理の後、制御部２１は、記録指示がされたか否かを判定する（S8）。記録指示は、ユーザが操作部３０の所定の操作ボタン、例えば記録ボタン、を押すことにより、行われる。

記録指示がされると（S8:YES）、制御部２１は、記録処理を実行する（S9）。記録処理では、制御部２１は、ライブ画像LIの静止画の画像データを、メモリカード２３に書き込む。また、S9では、ライブ画像LIの画像データ中に、あるいはライブ画像LIの画像データに関連付けて、比較対象画像CIの透過率の情報も、制御部２１は、記録する。ライブ画像LIの画像データ中に比較対象画像CIの透過率の情報を含ませる方法としては、例えば、Exif仕様のヘッダ情報部に、透過率の情報を書き込む方法がある。

すなわち、S9の処理は、記録部であるメモリカード２３に検査画像を記録するときに、S5の参照画像重畳部により検査画像であるライブ画像LI上に、参照画像としての比較対象画像CIを重畳したときの比較対象画像CIの透過率の情報を、検査画像に含ませて、あるいは検査画像に関連付けて、メモリカード２３に記録する透過率情報記録処理部を構成する。

なお、S9の記録処理では、ライブ画像LIの画像データに代えて、比較対象画像CIが重畳したライブ画像LIを記録するように、あるいはライブ画像LIの画像データと共に、比較対象画像CIが重畳したライブ画像LIも記録するようにしてもよい。すなわち、その場合、S9の処理は、記録部であるメモリカード２３に検査画像を記録するときに、ライブ画像である検査画像上に参照画像である比較対象画像CIが重畳された画像を、メモリカード２３に記録する重畳画像記録部を構成する。

記録指示がされないとき（S8:NO）及び記録処理（S9）の後、制御部２１は、重畳表示処理の実行の終了の指示があるか否かを判定する（S10）。重畳表示処理の実行の終了の指示があると（S10:YES）、重畳表示処理の実行を終了し、重畳表示機能の実行の終了の指示がなければ（S10:NO）、処理は、S3に戻る。

以上のように、本実施の形態の内視鏡装置によれば、内視鏡撮像部により撮像して得られた検査画像と、比較対象画像との比較において、検査対象あるいは検査部位の状態判定がし易い内視鏡画像処理装置及び内視鏡装置を提供することができる。

特に、比較対象画像は、過去に実際に撮像して得られた検査対象の検査画像から生成され、透過率も変更できるので、検査対象の観察状況に応じてライブ画像と比較対象画像との差異を判別し易くすることができる。

従って、結果として、検査者は、検査結果に対する判断をより迅速かつ明確に行うことができる。
（第２の実施の形態）
第１の実施の形態では、記録処理において、ライブ画像LIの画像データと共に、比較対象画像CIの透過率の情報がメモリカード２３に記録されるが、第２の実施の形態では、検査画像の記録処理において、ライブ画像LIの画像データと共に、透過率の情報だけでなく、検査画像を記録したときの画像記録時情報も併せてメモリカード２３に記録されるようにして、その後、その撮影状況情報を用いて検査対象のライブ画像を生成するようにしている。

本実施の形態の内視鏡装置の構成は、第１の実施の形態の内視鏡装置１の構成と略同じであるので、以下、第１の実施の形態の内視鏡装置１と同じ構成要素については、同じ符号を用いて説明は省略し、構成の異なる点を説明する。

図７は、検査画像の記録時の処理の流れの例を示すフローチャートである。
制御部２１は、内視鏡検査中に、ユーザにより、操作部３０において記録指示がされると、図７の処理が実行される。

制御部２１は、記録指示の信号を受信すると（S11:YES）、画像データと共に、画像記録時情報を、検査画像の画像データ中に、あるいは検査画像の画像データと関連付けて別のファイルに記録する（S12）。

画像記録時情報は、検査画像の記録時における、照明装置の出力レベル、ズーム倍率、シャッタースピード、等の撮影条件情報、及び明るさ調整値、コントラスト調整値、等の画質調整情報である。記録指示の信号を受信しなければ（S11:NO）、処理は、何もしない。

なお、ここでは、画像記録時情報は、撮影条件情報と画質調整情報の両方を含むが、撮影条件情報と画質調整情報の少なくとも一方でもよい。すなわち、S12の処理は、記録部であるメモリカード２３に検査画像を記録するときに、その検査画像についての撮影条件情報、及び画質調整情報の少なくとも１つを画像記録時情報として、検査画像に含ませて、あるいは検査画像に関連付けて、メモリカード２３に記録する透過率情報記録処理部を構成する。

図８は、重畳表示機能の実行が指定されたときにおける内視鏡装置１の処理の流れの例を示すフローチャートである。図８において、図２と同じ処理については、同じステップ番号を付して説明は省略する。

ここでは、図７において記録された検査画像が、比較対象画像として再生される。図８のS1において、その記録された検査画像が再生されて、重畳表示機能がオンされて、比較対象画像が生成される（S4）。

そして、検査対象を撮影するときの照明装置の出力レベルすなわち明るさ、ズーム倍率、CCD１１についての各種調整値、画質に関する設定調整値などを、比較対象画像に関連付けて記録されている画像記録時情報に基づいて、制御部２１は、CCD１１や照明装置などを駆動し、さらに、取得した撮像信号に対する画質調整を行い、ライブ画像を取得する（S21）。S21の処理は、内視鏡撮像部であるCCD１１により撮影して得られた検査画像を、S12で記録された画像記録時情報に基づいて取得する検査画像取得部を構成する。

すなわち、図７のS12で比較対象画像CIの元となった検査画像を記録したときの、明るさなどの撮影条件、ゲイン値などのCCD１１の各種調整値、見易い画像にするためのコントラスト調整値などの画質調整値、等々の画像記録時情報に基づいて、制御部２１は、ライブ画像を生成する。

これは、比較対象画像CIの元となった検査画像を取得して記録したときと同じ条件で、検査対象を撮影し、かつ同じ画質調整を行うことによって、ライブ画像LIと比較対象画像CIとが比較し易くなり、ライブ画像LI上に比較対象画像CIを重畳したときの変化部分を見出しやすくするためである。逆に言えば、比較対象画像CIの元となる検査画像と、ライブ画像LIとが、輝度、コントラストなどが大きく異なっていると、ライブ画像LI上に比較対象画像CIを重畳したときの変化部分が見出し難くなる場合があるので、そのような場合の発生を防止するためである。

よって、図８のS21において、ライブ画像LIが、比較対象画像CIの元となる検査画像が記録されたときの撮影条件、画質調整内容等と同じ条件、同じ内容等で生成されるので、S5において、ライブ画像LI上に比較対象画像CIが重畳されたときに、互いに異なる部分がより認識し易くなる。

さらに、図８では、記録指示がされると（S8:YES）、制御部２１は、記録処理を実行するが（S22）、その記録処理では、制御部２１は、ライブ画像LIの画像データ中に、あるいはライブ画像LIの画像データに関連付けて、比較対象画像CIの透過率の情報だけでなく、ライブ画像を撮影時の照明装置の出力レベル値、CCD１１の調整値等の撮影条件情報、及び、コントラスト調整値などの画質調整情報も、メモリカード２３に書き込む。

すなわち、S22において、検査画像が記録されたときにも、その検査画像が記録されたときの画像記録時情報も、ライブ画像LIの画像データ中に、あるいはライブ画像LIの画像データに関連付けて、メモリカード２３に記録される。

よって、重畳表示機能がオンされたときにおいて検査画像が記録されるときにも、画像記録時情報が、画像データ中に、あるいはライブ画像LIの画像データに関連付けて、メモリカード２３に記録される。

なお、上記の例では、S21において、画像記録時情報がライブ画像の取得のために、制御部２１によるCCD１１の駆動処理などと、画質調整処理に利用されているが、検査者が、比較対象画像CIの画像記録時情報をメモリカード２３から読み出して参照して、手動でライブ画像取得のための各種調整、照明装置の出力レベルの調整、コントラストの調整等、を行うようにしてもよい。

従って、本実施の形態の内視鏡装置によっても、第１の実施の形態の内視鏡装置と同様の効果を得ることができると共に、検査対象又は検査部位を、比較対象画像CIの元となった検査画像を取得したときと同じ撮影条件で撮影でき、さらに、比較対象画像CIの元となった検査画像に対して同じ画質で、ライブ画像を表示させることができるので、検査結果の確実性の向上にも繋がる。

以上のように、上述した各実施の形態によれば、内視鏡撮像部により撮像して得られた検査画像と比較対象画像との比較において、検査対象あるいは検査部位の状態判定がし易い内視鏡画像処理装置及び内視鏡装置を提供することができる。

上述した各実施の形態では、従来のような、CADオブジェクトを比較対象画像としておらず、実際の検査画像を用いているので、検査者はライブ画像との比較が容易であり、また、従来のような２つの画面に分けて左右で見比べるものではなく、大きな画面で透過度を有する画像との比較なので、検査者は容易に比較し易い。
なお、上述した２つの実施の形態では、比較対象画像CIは、静止画であるが、動画でもよい。

さらになお、上述した２つの実施の形態では、メモリカード２３に記録された検査画像を読み出した後、重畳表示機能の実行が指示されたときに、ライブ画像上に、比較対象画像としての過去の検査画像を重畳表示する場合であるが、ライブ画像を表示部２２に表示させているときに、重畳表示機能の実行が指示されるようにしてもよい。すなわち、ライブ画像を表示しているときに、記録されている検査画像を選択する操作を行うと、S3以降の処理が実行されるようにしてもよい。

また、上述した２つの実施の形態では、内視鏡装置１に記録された検査画像であるライブ画像上に、比較対象画像を重畳しているが、内視鏡装置により取得されて得られた複数の検査画像が、パーソナルコンピュータ（以下、PCという）の記憶装置に記憶されている場合に、そのPC上で、２つの検査画像の一方を比較対象画像とし、他方の検査画像上に重畳表示をするようにしてもよい。この場合、PCが、内視鏡画像処理装置ということができる。

すなわち、図２及び図８のS5において、所定の指示に応じて、PCの記憶装置に記録された検査画像上に、S4において生成された参照画像である比較対象画像CIを重畳して、PCの表示装置に表示するようにしてもよい。

本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。

１ 内視鏡装置、２ 挿入部、３ 本体部、１１ CCD、２１ 制御部、２２ 表示部、２２ａ 画面、２３ メモリカード、２４ ドライバ、２５ A/D変換器、２６ FPGA、２７ ROM、２８ RAM、２９ カード装着部、３０ 操作部、４１ 透過率変更指示部、４２ アイコン。

Claims (8)

1. 内視鏡撮像部により検査対象を撮影して得られた第１の検査画像を記録する記録部と、
   前記記録部に記録された前記第１の検査画像から、透過率が０でない参照画像を生成する参照画像生成部と、
   所定の指示に応じて、前記内視鏡撮像部により撮影して得られた第２の検査画像あるいは前記記録部に記録された第３の検査画像上に、前記参照画像生成部において生成された前記参照画像を重畳して表示装置に表示する参照画像重畳部と、
   を有することを特徴とする内視鏡画像処理装置。
2. 前記参照画像の前記透過率を設定あるいは変更するための透過率設定変更部を有することを特徴とする請求項１に記載の内視鏡画像処理装置。
3. 前記記録部に前記第１の検査画像を記録するときに、前記参照画像重畳部により前記第２あるいは前記第３の検査画像上に前記参照画像を重畳したときの前記透過率の情報を、前記第１の検査画像に含ませて、あるいは前記第１の検査画像に関連付けて、前記記録部に記録する透過率情報記録処理部を有することを特徴とする請求項１又は２に記載の内視鏡画像処理装置。
4. 前記記録部に前記第１の検査画像を記録するときに、前記第１の検査画像上に前記参照画像が重畳された画像を、前記記録部に記録する重畳画像記録部を有することを特徴とする請求項１から３のいずれか１つに記載の内視鏡画像処理装置。
5. 前記記録部に前記検査画像を記録するときに、前記第１の検査画像についての撮影条件情報、及び画質調整情報の少なくとも１つを画像記録時情報として、前記第１の検査画像に含ませて、あるいは前記第１の検査画像に関連付けて、前記記録部に記録する透過率情報記録処理部を有することを特徴とする請求項１から３のいずれか１つに記載の内視鏡画像処理装置。
6. 前記内視鏡撮像部により撮影して得られた前記第２の検査画像を、前記画像記録時情報に基づいて取得する検査画像取得部をさらに有することを特徴とする請求項５に記載の内視鏡画像処理装置。
7. 前記参照画像又は前記第２の検査画像のいずれか一方を、前記表示装置の表示画面上で移動させる移動部を有することを特徴とする請求項１から６のいずれか１つに記載の内視鏡画像処理装置。
8. 前記内視鏡撮像部を有する挿入部と、
   請求項１から７のいずれか１つに記載の内視鏡画像処理装置と、
   を有する内視鏡装置。

Images