JP2010051602A - 電子内視鏡装置および方法並びにプログラム - Google Patents

電子内視鏡装置および方法並びにプログラム Download PDF

Info

Publication number
JP2010051602A
JP2010051602A JP2008220591A JP2008220591A JP2010051602A JP 2010051602 A JP2010051602 A JP 2010051602A JP 2008220591 A JP2008220591 A JP 2008220591A JP 2008220591 A JP2008220591 A JP 2008220591A JP 2010051602 A JP2010051602 A JP 2010051602A
Authority
JP
Japan
Prior art keywords
display
image
divided
switching instruction
divided area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Abandoned
Application number
JP2008220591A
Other languages
English (en)
Inventor
Masahiro Kubo
雅裕 久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2008220591A priority Critical patent/JP2010051602A/ja
Publication of JP2010051602A publication Critical patent/JP2010051602A/ja
Abandoned legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)
  • Endoscopes (AREA)
  • Image Processing (AREA)

Abstract

【課題】通常画像と所望の診断用画像とを同時表示を行なうに際し、より読影者の視線を必要以上に動かすことなく、かつ読影者の目を疲労させないようにすることができる。
【解決手段】生体粘膜を分割した一の分割領域と、他の分割領域とを設定するマイコン35と、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とをモニタ34に同時に表示するよう制御する表示制御回路27とを備えた内視鏡装置。
【選択図】図1

Description

本発明は電子内視鏡装置および方法並びにプログラムに関し、詳しくは、生体粘膜の狭帯域分光画像を作成してこの生体粘膜を診断する電子内視鏡装置に関するものである。
従来より、固体撮像素子を用いた電子内視鏡装置として、主に可視光の波長領域を撮像して可視光領域画像を表す通常画像と、狭い波長帯域のみに光を透過させる複数種類の狭帯域バンドパスフィルタを通して消化器官(例えば胃等)の生体粘膜を撮像し上記生体粘膜の複数種類の狭帯域分光画像を得、これらの狭帯域分光画像を合成してなる診断用画像を生成する方式(Narrow Band Imaging-NBl)が知られている。
このような装置では、互いに異なる波長域の光を透過させる3種類の狭帯域バンドパスフィルタを組み合わせた回転フィルタを備え面順次方式で撮像を行なって複数種類の狭帯域分光画像を取得するものや、上記と同様の3種類の各狭帯域バンドパスフィルタを通して分光された各照明光を順次生体粘膜に照射しつつ上記生体粘膜を撮像してこの生体粘膜を示す複数種類の狭帯域分光画像を取得するもの等が検討されている。
このようにして取得された複数種類の狭帯域分光画像を合成して得られた上記生体粘膜の診断用画像は、従来では得られなかった生体粘膜の微細構造を表現することができる。
このような方式(Narrow Band Imaging-NBl)において、上記通常画像と上記診断用画像とを並列に表示するものが提案されている(特許文献1および特許文献2参照)。
一方、固体撮像素子上に複数種類の広帯域バンドパスフィルタからなるRGBモザイクフィルタを配置して面同時方式で通常のカラー画像(通常画像ともいう)の撮像を行なう電子内視鏡装置に関しても、この生体粘膜の撮像で得られた通常画像に基づく演算処理により上記狭帯域バンドパスフィルタを用いて得られた狭帯域分光画像と同等の画像を取得して上記のような診断用画像を作成する方式が提案されている。
この方式は、可視波長域における生体粘膜の分光反射強度分布に関する多数の測定データを用いて上記生体粘膜の分光反射強度分布を推定するための主成分分析を行い、その結果、第1主成分から第3主成分の3つの主成分により上記生体粘膜の可視波長全域に亘る分光反射強度分布を略復元できることを見出して提案されたものである。この復元手法によれば、上記生体粘膜の分光反射強度分布に関する多数の測定データを用いて予め求めた分光反射推定マトリクスデータと、上記3つの主成分に対応する通常のRGBモザイクフィルタを通した撮像で得られた通常画像との分光画像推定演算によって求められた複数の波長域での狭帯域分光画像を合成して、上記狭帯域バンドパスフィルタを通して得られた狭帯域分光画像の合成によって得られる診断用画像と同等の画像を疑似的に得ることができる(特許文献3参照)。
特開2002−10968号公報 特開2003−33324号公報 特開2003−93336号公報
しかしながら、電子内視鏡装置に備えられたモニタに、通常画像と、診断用画像とを同時に表示して、読影者が、通常画像と診断用画像夫々に対応する生体粘膜の所定の部位を比較観察するに際し、読影者の視線を動かすことを要するため、読影者の目が疲労するという問題が考えられる。
そこで、本発明は、上記事情に鑑みてなされたものであり、通常画像と所望の診断用画像とを同時表示を行なうに際し、より読影者の視線を必要以上に動かすことなく、かつ読影者の目を疲労させないようにすることができる電子内視鏡装置および方法並びにプログラムを提供することを目的とするものである。
本発明の電子内視鏡装置は、生体粘膜を表す通常画像と、生体粘膜を表す狭帯域分光画像である診断用画像とを表示可能な表示手段を備えた電子内視鏡装置であって、生体粘膜を分割した一の分割領域と、他の分割領域とを設定する設定手段と、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とを表示手段に同時に表示するよう制御する表示制御手段とを備えたものである。
「通常画像」とは、可視光の波長領域を撮像して可視光領域画像を表すカラー画像をいう。
また、「診断用画像」とは、診断用に用いられる狭帯域分光画像から成る画像をいう。例えば、複数種類の波長セットのうちから選択された波長セットに基づいた分光画像推定演算により得られた画像であってもよいし、複数種類の狭帯域分光画像を得、これらの狭帯域分光画像を合成してなるNarrow Band Imaging-NBl方式を用いて生成された画像であってもよい。
ここで、「一の分割領域」とは、生体粘膜を表す画像を分割した一方の領域をいう。
なお、上記分割は、複数分割するものであってもよく、その場合には、上記「一の分割領域」は、複数分割された画像のいずれか一つの領域をいう。
また、「他の分割領域」とは、上記一の分割領域以外の領域であり、生体粘膜を表す画像を分割した他方の領域をいう。
本発明の電子内視鏡装置は、表示制御手段に表示切替指示を与えることが可能な表示切替指示手段を更に備え、表示制御手段が、表示切替指示手段の表示切替指示に応答して、一の分割領域に対応する診断用画像と、他の分割領域に対応する通常画像とを表示手段に同時に表示するように切替制御するものであってもよい。
本発明の電子内視鏡装置は、表示制御手段に表示切替指示を与えることが可能とする表示切替指示手段を更に備え、表示制御手段が、表示切替指示手段の表示切替指示に応答して、一の分割領域および他の分割領域夫々に対応する通常画像を表示手段に表示するように切替制御するものであってもよい。
本発明の電子内視鏡装置は、表示制御手段に表示切替指示を与えることが可能とする表示切替指示手段を更に備え、表示制御手段が、表示切替指示手段の表示切替指示に応答して、一の分割領域および他の分割領域夫々に対応する診断用画像を表示手段に同時に表示するように切替制御するものであってもよい。
本発明の電子内視鏡装置は、分割領域の範囲を変更する指示を受け付ける領域変更受付手段を更に備え、設定手段が、領域変更受付手段が受け付けた変更する指示に応答して、一の分割領域の範囲を設定するものであってもよい。
本発明の電子内視鏡表示方法は、生体粘膜を表す通常画像と、生体粘膜を表す狭帯域分光画像である診断用画像とを表示手段に表示する電子内視鏡表示方法であって、生体粘膜を分割した一の分割領域と、他の分割領域とを設定し、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とを同時に表示手段に表示するよう制御する。
本発明の電子内視鏡表示プログラムは、生体粘膜を表す通常画像と、生体粘膜の狭帯域分光画像を表す診断用画像とを表示するよう表示手段を制御するための電子内視鏡表示プログラムであって、生体粘膜を分割した一の分割領域と、他の分割領域とを設定する機能と、一の分割領域に対応する前記通常画像と、他の分割領域に対応する診断用画像とを同時に表示手段に表示するよう制御する機能とをコンピュータに実現させるためのものである。
本発明の電子内視鏡装置および方法並びにプログラムによれば、生体粘膜を分割した一の分割領域と、他の分割領域とを設定し、一の分割領域に対応する通常画像と、他の分割
領域に対応する診断用画像とを同時に表示することにより、読影者が、通常画像と所望の診断用画像とを同時に確認することができるとともに、読影者の視線を必要以上に動かすことなく、かつ読影者の目を疲労させないようにすることができる。
また、本発明の電子内視鏡装置および方法並びにプログラムによれば、表示制御手段に表示切替指示を与えることが可能な表示切替指示手段を更に備えることにより、一の分割領域と他の分割領域の隣接付近の領域において、切替を行った領域の変化を容易に把握することができる。
以下、図面を参照して本発明の実施形態を詳細に説明する。図1は、本発明の一実施形態による電子内視鏡装置の基本構成を示すものである。
本発明の電子内視鏡装置は、モニタ34へ生体粘膜を表す通常画像を表示する通常画像表示モード、またはモニタ34へ生体粘膜を表す通常画像および生体粘膜の狭帯域分光画像を表す診断用画像を並列して表示する診断用画像表示モード、モニタ34へ生体粘膜の一の分割領域を表す通常画像と生体粘膜の他の分割領域を表す診断用画像とを、例えば図6(B)に示すように表示する分割画像表示モードのいずれかの表示モードを選択することにより表示制御するものである。
なお、分割画像表示モードにおける、上記一の分割領域とは、生体粘膜を表す画像を、マイコン35(設定手段)により予め設定された分割領域の範囲により分割した一方の領域をいう。上記分割は、複数分割するものであってもよく、その場合には、上記一の分割領域は、複数分割された画像のいずれか一つの領域をいう。
また、分割画像表示モードにおける、他の分割領域とは、上記一の分割領域以外であり、生体粘膜を表す画像を分割した他方の領域をいう。
図示の通りこの電子内視鏡装置は、被験者の体腔内に挿入されるスコープ10と、スコープ10に接続されるプロセッサ装置12とから構成されている。プロセッサ装置12内には白色光を発する光源装置14が配置されている。スコープ10の先端には照明窓22が設けられ、この照明窓22には、一端が上記光源装置14に接続されたライトガイド23の他端が対面している。
光源装置14は、白色光を発するランプ14aと、このランプ14aを点灯させる点灯駆動回路14bと、ランプ14aの前側に配置された絞り14cと、この絞り14cを開閉する絞り駆動部14dとから構成されている。なお、ランプ14aとライトガイド23との間には、該ランプ14aから発せられた白色光をライトガイド23に入射させるための光学系が設けられるが、それらについては図示を省いてある。また、この種の光源装置は、プロセッサ装置12とは別体の部分に配置されてもよい。
上記スコープ10の先端部には、固体撮像素子であるCCD15が設けられている。このCCD15としては、例えば撮像面にRGBの色フィルタを有する原色型の色フィルタが取り付けられている。
CCD15には、同期信号に基づいて駆動パルスを形成するCCD駆動回路16が接続されると共に、このCCD15が出力した画像(映像)信号をサンプリングして増幅するCDS/AGC(相関二重サンプリング/自動利得制御)回路17が接続されている。またCDS/AGC回路17には、そのアナログ出力をデジタル化するA/D変換器18が接続されている。さらにスコープ10内には、そこに設けられた各種回路を制御するとともに、プロセッサ装置12との間の通信制御を行うマイコン20が配置されている。
また、スコープ10の根元近傍には、マイコン20に接続され、表示モードの切換を行う押圧型のスイッチ21(表示切替手段)が設けられている。
一方、プロセッサ装置12には、デジタル化された画像信号に対して各種の画像処理を施すDSP(デジタル信号プロセッサ)24が設けられている。このDSP24は、上記CCD15から出力されるR、G、Bの3色画像信号から輝度(Y)信号と色差[C(R−Y,B−Y)]信号で構成されるY/C信号を生成し、それを出力するものであり、DSP24には、I/P変換およびノイズ除去などを行う信号処理回路(A)25が接続されている。信号処理回路(A)25には、表示用の通常画像信号を形成する信号処理回路(B)26と、後述する分光画像信号を生成するための第1色変換回路28とが接続されている。
なお、上記DSP24はスコープ10側に配置してもよい。
信号処理回路(B)26は、鏡像処理,マスク発生、キャラクタ発生、色調整、色彩強調、構造強調などの各種信号処理を行い、表示用の通常画像信号を生成し、この通常画像信号を表示制御回路27へ出力する。表示制御回路27には、例えば、液晶表示装置やCRT等からなるモニタ34および、画像記録装置45が接続されている。
表示制御回路27では、通常画像表示モードが選択されている場合には、信号処理回路(B)26から出力される通常画像信号をモニタ34および画像記録装置45へ出力し、診断用画像表示モードが選択されている場合には、信号処理回路(B)26から出力される通常画像信号と、上記通常画像信号に、信号処理回路(C)33から出力される診断用画像とを生成し、モニタ34および画像記録装置45へ出力する。
また、分割画像表示モードが選択されている場合には、図6(B)に示すように、信号処理回路(B)26から出力される生体粘膜の一の分割領域に対応する通常画像信号と、信号処理回路(C)33から出力される生体粘膜の他の分割領域に対応する診断用画像とを隣接するように表示し、モニタ34および画像記録装置45へ出力する。
表示制御回路27において、上記一の分割領域と、上記他の分割領域との領域範囲の設定は、マイコン35(設定手段)により予め定められている。
通常画像モードから分割画像表示モードに切替る場合、表示制御回路27に表示切替指示を与えることが可能なスイッチ21(表示切替指示手段)を押圧することにより、表示制御回路27が、スイッチ21(表示切替指示手段)の表示切替指示に応答して、例えば、図6(A)から図6(B)になるように、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とを、モニタ34に同時に表示するように切替制御することができる。
分割画像表示モードに切替た後、スコープ部10を横にシフトさせた場合には、図7(A)から図7(B)になるように、モニタ34に表示される。
また、分割画像表示モードを設定している場合において、表示制御回路27に表示切替指示を与えることが可能なスイッチ21(表示切替指示手段)を押圧することにより、表示制御回路27が、スイッチ21(表示切替指示手段)の表示切替指示に応答して、例えば、図8(A)から図8(B)になるように、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とをモニタ34に、同時に表示するように切替制御することができる。
また、表示制御回路27に表示切替指示を与えることが可能なスイッチ21(表示切替指示手段)を押圧することにより、表示制御回路27が、スイッチ21(表示切替指示手段)の表示切替指示に応答して、一の分割領域および他の分割領域夫々に対応する通常画像を、例えば、図9(A)から図9(B)になるように、モニタ34に同時に表示するように切替制御することができる。
逆に、一の分割領域および他の分割領域夫々に対応する通常画像ではなく、一の分割領域および他の分割領域夫々に対応する診断用画像を表示してもよい。
また、表示制御回路27に表示切替指示を与えることが可能なスイッチ21(表示切替指示手段)を押圧することにより、表示制御回路27が、スイッチ21(表示切替指示手段)の表示切替指示に応答して、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とを、例えば、図9(B)から図9(C)になるように、モニタ34に同時に表示するように切替制御することができる。
なお、上記スイッチ21(表示切替指示手段)は、スコープスイッチとしての構成のみならず、フットスイッチであってもよい。
また、表示切替指示手段は、マウスやキーボード型の入力部41や、モニタ34に備えられたタッチパネル機能により表示切替指示を与えるものであってもよく、どのような表示切替制御をするかを入力できる。
例えば、キーボードの場合、図8(A)のように表示する際は、表示制御回路27が、数字の1を、図8(B)のように表示する際は、数字の2を押す等の規則を記憶しておく。読影者が、表示切替指示手段から該当する数字のデータを入力することにより切替指示を入力する。
また、マウスやタッチパネル機能を利用する場合、表示制御回路27が、モニタ34上にどのような表示切替をするかを示すアイコンやタイトル等の指示画像を表示するようにする。読影者が、表示切替指示手段からその指示画像を指定することにより切替指示を入力してもよい。
なお、表示制御回路27は、予めどのような順番で表示するかを規則化し、表示切替指示手段からの指示を受けるごとに、その順番に表示切替制御をおこなってもよい。
入力部41(領域変更受付手段)は、読影者から分割領域の範囲を変更する指示を受け付ける。
表示制御回路27に備えられたマイコン35が、入力部41により受け付けた分割領域の範囲を変更する指示に応答して、一の分割領域の範囲を設定する。マイコン35(設定手段)により記録された予め定められている分割領域の位置に対して、読影者が、上述の入力部41(領域変更受付手段)に変更する分割領域の範囲の位置情報をマウスやキーボードにより入力する。
例えば、図10(A)に示す丸C1の範囲内を一の分割領域として設定することができる。
表示制御回路27に表示切替指示を与えることが可能なスイッチ21(表示切替指示手段)を押圧することにより、表示制御回路27が、スイッチ21(表示切替指示手段)の表示切替指示に応答して、例えば、図10(B)に示す丸C1以外を一の分割領域と設定して、上記一の分割領域に対応する通常画像と、図10(B)に示す丸C1を他の分割領域と設定して、他の分割領域に対応する診断用画像とを、例えば、図10(B)に示すように、モニタ34に同時に表示するように切替制御することができる。
なお、上記スイッチ21(領域変更受付手段)は、マウスやキーボード型によるものに限らず、モニタ34に備えられたタッチパネル機能により変更する指示を受けるものであってもよい。
以下、通常画像と診断用画像の生成について、主に説明する。
第1色変換回路28は、上記信号処理回路(A)25から出力されたY/C信号をR、G、Bの3色画像信号に変換する。上記第1色変換回路28の後段側には、予め記憶されている推定分光画像信号生成用のマトリクス(分光)データの中から読み出された、選択された波長域λ1,λ2,λ3に対応するパラメータを用いて、この3色画像信号R、G、Bに対してマトリクス演算を行って、選択された波長λ1,λ2,λ3に対する推定分光画像信号λ1s,λ2s,λ3sを出力する第1色空間変換処理回路29と、この推定分光画像信号λ1s,λ2s,λ3sを、使用者が入力した各画像信号毎のゲイン値を用いて増幅して、擬似色分光画像信号λ1t,λ2t,λ3tを出力する第2色空間変換処理回路30と、この擬似色分光画像信号λ1t,λ2t,λ3tの全ての信号の平均輝度が、DSP24から出力されたY/C信号、すなわち通常画像信号の全ての信号の平均輝度と略等しくなるように、擬似色分光画像信号λ1t,λ2t,λ3tの輝度を調整して、輝度調整が行われた擬似色分光画像信号λ1t’,λ2t’,λ3t’を出力する輝度調整回路31と、この擬似色分光画像信号λ1t’,λ2t’,λ3t’を、RGB信号に対応させた処理をするためにそれぞれR,G,Bチャンネルへ入力し、この入力信号をY/C信号に変換する第2色変換回路32、鏡像処理,マスク発生、キャラクタ発生、色調整、色彩強調、構造強調などの各種信号処理を行う信号処理回路(C)33、および表示制御回路27が逐次この順に接続されている。
またプロセッサ装置12内には、スコープ10との間の通信を行うと共に、該装置12内の各回路を制御し、また推定分光画像信号を形成するためのマトリクス(分光)データを上記色空間変換処理回路29に入力する等の機能を有するマイコン35が設けられている。上記メモリ36には、診断用画像を形成するための波長セット、ゲインセットおよびRGB信号に基づいて推定分光画像信号を形成するためのマトリクスデータが記憶されている。
λ1,λ2,λ3の波長セットとしては、例えば図2に示すような、400,500,600(nm、以下同様)の波長域標準セットa、血管を描出するための470,500,670の血管B1セットb、同じく血管を描出するための475,510,685の血管B2セットc、特定組織を描出するための440,480,520の組織E1セットd、同じく特定組織を描出するための480,510,580の組織E2セットb、オキシヘモグロビンとデオキシヘモグロビンとの差を描出するための400,430,475のヘモグロビンセットf、血液とカロテンとの差を描出するための415,450,500の血液‐カロテンセットg、血液と細胞質の差を描出するための420,550,600の血液‐細胞質セットhの8つの波長セットが記憶されている。また、e1、e2、e3のゲインセットとして、1,1,1のゲイン標準セットが記憶されている。
マトリクスデータはテーブルとして記憶されている。本実施形態において、このメモリ36に格納されているマトリクスデータの一例は次の表1のようになる。
この表1のマトリクスデータは、例えば400nmから700nmの波長域を5nm間隔で分けた61の波長域パラメータ(係数セット)p1〜p61および、通常画像形成のためのパラメータP1〜P3からなる。パラメータp1〜p61は各々、マトリクス演算のための係数kpr,kpg,kpb(p=1〜61)から構成されている。
そして第1色空間変換処理回路29において、上記係数kpr,kpg,kpbと第1色変換回路28から出力されたRGB信号とにより次式で示すマトリクス演算が行われて、推定分光画像信号λ1s,λ2s,λ3sが形成される。
すなわち、分光画像を構成する波長域λ1,λ2,λ3としてそれぞれ例えば500nm,620nm,650nmが選択される場合は、係数(kpr,kpg,kpb)として、表1の61のパラメータのうち、中心波長500nmに対応するパラメータp21の係数(-0.00119,0.002346,0.0016)、中心波長620nmに対応するパラメータp45の係数(0.004022,0.000068,‐0.00097)、および中心波長650nmに対応するパラメータp51の係数(0.005152,-0.00192,0.000088)を用いて上記マトリクス演算がなされる。
マイコン35には上記メモリ36に加えて、モニタ34、キーボード型の入力部41、画像記録コントローラ42、およびスコープ10のマイコン20が接続されている。
図3は、診断用画像表示モードまたは分割画像表示モードが選択された際のモニタ34に表示される画面47の一例を示す図である。モニタ34の画面47には、通常画像48および診断用画像49と、診断用画像を形成する波長域を表示、選択または設定するための波長域表示小画面51と、各波長域のゲインを表示、選択または設定するためのゲイン表示小画面52とが表示される。
波長域表示小画面51には、例えば、a〜hの波長セットを選択するためのセット選択スイッチ53と、波長域λ1,λ2,λ3を表示し、また手動入力により設定するための波長表示スイッチ54a〜54cが表示される。また、ゲイン表示小画面52には、標準のゲインセット(1,1,1)を選択するためのセット選択スイッチ55と、ゲインe1、e2、e3を表示し、また手動入力により設定するためのゲイン表示スイッチ56a〜56cが表示される。これらの小画面に表示されているスイッチは、キーボード型の入力部41により操作される。
以下、上記構成を有する本実施形態の電子内視鏡装置の作用について説明する。まず、通常画像表示モードの際の動作について説明する。通常画像表示モードでは、通常カラー画像が形成される。これらの画像を形成する際には、図1に示す光源装置14が駆動され、そこから発せられた白色光が絞り14cを経てライトガイド23に入射し、スコープ10内に配されたライトガイド23の先端から出射した白色光が被観察体に照射される。そして、CCD駆動回路16によって駆動されたCCD15がこの被観察体を撮像し、撮像信号を出力する。この撮像信号はCDS/AGC回路17で相関二重サンプリングと自動利得制御による増幅を受けた後、A/D変換器18でA/D変換されて、RGB画像信号としてプロセッサ装置12のDSP24に入力される。DSP24では、スコープ10からの出力された3色画像信号であるRGB画像信号に対し色変換処理が行われ、前述の通りのY/C信号、すなわち通常画像信号が形成される。このDSP24が出力するY/C信号(通常画像信号)は信号処理回路(A)25においてI/P変換およびノイズ除去などが行われ、信号処理回路(B)26に入力され、鏡像処理,マスク発生、キャラクタ発生、色調整、色彩強調、構造強調などの各種信号処理が施され、表示制御回路27へ出力される。表示制御回路27では、信号処理回路(B)26から出力された通常画像信号をモニタ34および画像記録装置45へ出力する。
次に、診断用画像表示モードの際の動作について説明する。本装置が通常画像表示モードで動作している時に、使用者がスコープ10に設けられているスイッチ21を押圧すると、動作モードが通常画像表示モードから通常画像と診断用画像の両画像を表示する診断用画像表示モードへ切り替わる。
診断用画像表示モードでは、上述した通常カラー画像形成動作と平行して、分光カラー画像形成動作が行われる。以下、分光カラー画像形成について説明する。上述したように、DSP24が出力するY/C信号(通常画像信号)は、信号処理回路(A)25を介して、信号処理回路(B)26に入力され、通常カラー画像が形成されている。同時にDSP24が出力するY/C信号は、信号処理回路(A)25を介して、第1色変換回路28に入力され、そこでRGB信号に変換される。このRGB信号は第1色空間変換処理回路29へ供給され、第1色空間変換処理回路29ではRGB信号とマトリクスデータとにより、推定分光画像形成のためのマトリクス演算がなされる。
以下、この演算について説明する。第1色空間変換処理回路29は前述のメモリ36に記憶されているマトリクスデータを用いて、RGB信号に対して、診断用画像形成のための前記数1式のマトリクス演算を行う。入力部41の操作によってλ1,λ2,λ3の3つの波長域が設定され、マイコン35はメモリ36に記憶されているマトリクスデータの中からそれらの3つの選択波長域に対応するパラメータをメモリ36から読み出し、それらを第1色空間変換処理回路29に入力する。
例えば、3つの波長域λ1,λ2,λ3として波長500nm,620nm,650nmが選択された場合は、それぞれの波長に対応する表1のパラメータp21,p45,p51の係数が用いられて、RGB信号から次の数2式のマトリクス演算にて推定分光画像信号λ1s,λ2s,λ3sが形成される。
その後、上記推定分光画像信号λ1s,λ2s,λ3sは、第2色空間変換処理回路30へ供給される。この第2色空間変換処理回路30では推定分光画像信号λ1s,λ2s,λ3sと、推定分光画像信号(λ1s、λ2s、λ3s)の各信号のゲイン値を示すマトリクスとにより、擬似色分光画像形成のためのマトリクス演算がなされる。
以下、この演算について説明する。入力部43の操作によって各推定分光画像信号(λ1s、λ2s、λ3s)に対するゲイン値が設定されている。マイコン35はそれらの3つのゲイン値に対応する1×3のマトリクスを生成し、第2色空間変換処理回路30に出力する。
例えば、3つの波長域λ1,λ2,λ3に対するゲイン値としてe1、e2およびe3が選択された場合は、推定分光画像信号(λ1s、λ2s、λ3s)号から次式のマトリクス演算にて擬似色分光画像信号λ1t,λ2t,λ3tが形成される。
その後、上記擬似色分光画像信号λ1t,λ2t,λ3tは、輝度調整回路31へ供給される。輝度調整回路31では、この擬似色分光画像信号λ1t,λ2t,λ3tの全ての信号の平均輝度が、DSP24から出力されたY/C信号、すなわち通常画像信号の全ての信号の平均輝度と略等しくなるように、擬似色分光画像信号λ1t,λ2t,λ3tの輝度を調整する輝度調整がおこなわれる。
以下、この輝度調整について説明する。マイコン35は、まずDSP24から出力された1フィールドに関するY/C信号、すなわち1フィールド分の通常画像信号のY(輝度)信号の平均値(通常Yav)を算出する。また、1フィールド分の擬似色分光画像信号λ1t,λ2t,λ3tが生成された時点で、1フィールド分の擬似色分光画像信号の全てに対して、Y/C信号へ変換した場合のY(輝度)信号値を次式により算出する。
マイコン35は1フィールド分の似色分光画像信号の全てのY(輝度)信号値の平均値(分光Yav)を算出し、通常Yavとの比率を求める。通常Yav=α・分光Yavであった場合には、次式の演算により、輝度調整が行われた擬似色分光画像信号λ1t’,λ2t’,λ3t’を算出する。
その後、擬似色分光画像信号λ1t’,λ2t’,λ3t’が各々Rs,Gs,Bsの3色画像信号として第2色変換回路32に入力され、この第2色変換回路32では、Rs,Gs,Bsの3色画像信号がY/C信号(Y,Rs−Y,Bs−Y)に変換され、このY/C信号、すなわち分光画像信号が信号処理回路(C)33により信号処理が施され、表示制御回路27へ入力される。表示制御回路27では、信号処理回路(B)26から出力された通常画像信号と、信号処理部33から出力された分光画像信号を合成して、一枚のカラー画像を生成し、モニタ34および画像記録装置45へ出力する。
上記分光画像信号に基づいてモニタ34に表示される診断用画像は、図4および図5で示すような波長域の色成分で構成されるものとなる。すなわち図4は、原色型CCD15の色フィルタの分光感度特性R,G,Bに、診断用画像を形成する3つの波長域λ1,λ2,λ3を重ねた概念図であり、また図5は、生体の反射スペクトルに3つの波長域λ1,λ2,λ3を重ねた概念図である。先に例示したパラメータp21,p45,p51による分光画像信号λ1s,λ2s,λ3sは、図5に示されるように各々500nm、620nm、650nmを中心波長とする±10nm程度の範囲の波長域の色信号であり、これら3つの波長域の色の組合せから構成される診断用画像(動画あるいは静止画)が表示されることになる。
次に、上記波長域λ1,λ2,λ3およびゲインe1、e2、e3の表示、選択および設定について説明する。電子内視鏡装置の工場出荷後、最初に電源を入れて装置を立ち上げると、上記波長域標準セットa(400,500,600)およびゲイン標準セット(1,1,1)がマイコン35によって選択される。そして、診断用画像表示モードが選択された場合には、この選択された波長域(400,500,600)が波長表示スイッチ54a〜54cにより表示され、またゲイン標準セット(1,1,1)がゲイン表示スイッチ56a〜56cに表示される。第1色空間変換処理回路29は、波長域(400,500,600)について、前述のマトリクス演算を行い、増幅回路推定分光画像信号λ1s,λ2s,λ3sを形成する。また、第2色空間変換処理回路30は、ゲイン(1,1,1)を用いて前述の演算を行い、擬似色分光画像信号λ1t,λ2t,λ3tを形成する。
また、臨床医師等の読影者は、キーボード型の入力部41を用いて、セット選択スイッチ53をクリックすることにより、その他の波長セットb〜hを順番のかつ任意に選択することができる。また、キーボード型の入力部41の操作により、波長表示スイッチ54a〜54cの位置を左右へ移動させることにより、波長域を任意の値に設定することができる。また、同様にゲイン表示スイッチ56a〜56cの位置を左右へ移動させることにより、ゲインを任意の値に設定することができる。選択された波長セットの波長域λ1,λ2,λ3に対応する各パラメータがマイコン35によってメモリ36から読み出され、それらのパラメータが第1色空間変換処理回路29に入力される。第1色空間変換処理回路29は、入力されたパラメータを用いて前述のマトリクス演算を行い、推定分光画像信号λ1s,λ2s,λ3sを形成する。また、選択されたゲインセットは、第2色空間変換処理回路30に入力される。第2色空間変換処理回路30は、入力されたパラメータを用いて前述の演算を行い、擬似色分光画像信号λ1t,λ2t,λ3tを形成する。輝度調整部31は、この擬似色分光画像信号λ1t,λ2t,λ3tに対して、前述の演算を行い、輝度調整が行われた擬似色分光画像信号λ1t’,λ2t’,λ3t’を算出する。
なお、波長セットとして、前述したような波長セットの他に、装置操作者の要望等に応じて別のセットを用意し、それらをメモリ36に記憶しておいて適宜選択使用できるようにしてもよい。
なお、本実施形態においては、表示制御回路27の出力がモニタ34の他に画像記録装置45にも入力されるようになっており、マイコン35によって制御される画像記録コントローラ42が画像記録装置45に画像記録の指示を与えた場合は、その指示で指定されたシーンの通常画像あるいは診断用画像のハードコピーがこの画像記録装置45から出力される。
以上の説明で明らかなように、本実施形態においては、生体粘膜を分割した一の分割領域
と、他の分割領域とを設定し、一の分割領域に対応する通常画像と、他の分割領域に対応する診断用画像とを同時にモニタ34に表示することにより、読影者が、通常画像と所望の診断用画像とを同時に確認することができるとともに、読影者の視線を必要以上に動かすことなく、かつ読影者の目を疲労させないようにすることができる。
また、本実施形態においては、表示制御回路27に表示切替指示を与えることが可能な表示切替指示手段を更に備えることにより、一の分割領域と他の分割領域の隣接付近の領域において、切替た領域の変化を容易に把握することができる。
更に、本実施形態においては、読影者が診断用画像の色のバランスを自由に設定することができ、かつ診断用画像の明るさを自動的に通常画像の明るさと揃えることができるため、通常画像と診断用画像とをモニタ34へ同時に表示した場合であっても、読影者の違和感が少なくなる。
特に、分割画像表示モードを選択した際には、隣接する通常画像と診断用画像とを、読影者の違和感を少なくして、モニタ34へ表示することができる。
なお、上記実施形態においては、1フィールドに関する通常カラー画像あるいは診断用画像のY信号の平均値を用いて輝度調整を行っているが、このような平均値に限らず、Y信号の最大値や、さらには1フィールド内の特定の部分領域に関するY信号の平均値や最大値等に基づいて輝度調整を行うようにしてもよい。
また、本実施形態においては、400nmから700nmの波長域を61の波長域に分割して選択できるようにしてあるが、波長域λ1,λ2,λ3として、赤外域を含めた波長域、あるいは赤外域のみの波長セットを選択することにより、可視光域のカットフィルタを用いることなく、従来において赤外線を照射して得られる画像に近似した診断用画像を得ることができる。また従来の内視鏡では、励起光照射により癌組織等から発せられる蛍光を撮影することが行われるが、上記λ1,λ2,λ3の波長セットとして、蛍光波長に合わせたものを選択することにより、蛍光を発する部分の診断用画像を形成することができ、この場合は、励起光のカットフィルタが不要となる利点がある。
さらに、従来の内視鏡では、被観察体にインディゴやピオクタニン等の色素散布を行い、色素散布によって着色した組織を撮像することが行われているが、上記λ1,λ2,λ3の波長セットとして、色素散布によって着色する組織が描出できる波長域を選択することにより、色素散布をすることなく、色素散布時の画像と同等の診断用画像を得ることもできる。
なお、本実施形態においては、擬似色分光画像信号λ1t’,λ2t’,λ3t’を各々Rs,Gs,Bsの3色画像信号として第2色変換回路32に入力する際には、擬似色分光画像信号λ1t’,λ2t’,λ3t’を、その順番のままRs,Gs,Bs3色画像信号へ割り当てるが、使用者が特殊な色表示を望む場合等には、順番を変更して割り当ててもよい。このような場合には、例えば血管の部分が黄色や青色に表示されるような診断用画像が表示される。
なお、本実施形態においては、血液中のヘモグロビンに吸収されやすい狭帯域化された二つの波長(例えば、390〜450nm/530〜550nm)の光を照射することにより、粘膜表層の毛細血管、粘膜微細模様を強調する手法(例えば、Narrow Band Imaging-NBl)に得られる診断用画像を適用するものであってもよい。
本発明の一実施形態に係る電子内視鏡装置の構成を示すブロック図 分光画像の波長域の例を示す図 モニタに表示される画像の模式図 分光画像の波長域の一例を、原色型CCDの分光感度特性と共に示すグラフ 分光画像の波長域の一例を、生体の反射スペクトルと共に示すグラフ (A)は分割画像表示モードを設定する前のモニタに表示される画像、(B)は分割画像表示モードを設定された後のモニタに表示される画像 (A)はスコープを移動する前のモニタに表示される画像、(B)はスコープを移動した後のモニタに表示される画像 (A)は分割画像表示モードを切替る前のモニタに表示される画像、(B)は分割画像表示モードを切替た後のモニタに表示される画像 (A)は分割画像表示モードから、モニタに通常画像のみを表示する前の画像、(B)は分割画像表示モードを切替て、モニタに表示される通常画像、(C)は通常画像から、分割画像表示モードに切替た後のモニタに表示される画像 (A)は分割領域の設定を変更する範囲を表す画像、(B)は分割領域の設定を変更し、かつ分割画像表示モードを設定された後のモニタに表示される画像
符号の説明
10 スコープ部
12 プロセッサ部
14 光源装置
14a ランプ
14b 点灯駆動回路
14c 絞り
14d 絞り駆動部
15 CCD
17 CDS/AGC回路
20,35 マイコン
21 スイッチ
22 照明窓
23 ライトガイド
24 DSP
25 信号処理回路(A)
26 信号処理回路(B)
27 表示制御回路
28 第1色変換回路
29 第1色空間変換処理回路
30 第2色空間変換処理回路
31 輝度調整回路
32 第2色変換回路
33 信号処理回路(C)
34 モニタ
41 入力部
47 画面
51 波長域表示小画面
52 ゲイン表示小画面

Claims (7)

  1. 生体粘膜を表す通常画像と、前記生体粘膜を表す狭帯域分光画像である診断用画像とを表示可能な表示手段を備えた電子内視鏡装置であって、
    前記生体粘膜を分割した一の分割領域と、他の分割領域とを設定する設定手段と、
    前記一の分割領域に対応する前記通常画像と、前記他の分割領域に対応する前記診断用画像とを前記表示手段に同時に表示するよう制御する表示制御手段とを備えたことを特徴とする電子内視鏡装置。
  2. 前記表示制御手段に表示切替指示を与えることが可能な表示切替指示手段を更に備え、
    前記表示制御手段が、前記表示切替指示手段の表示切替指示に応答して、前記一の分割領域に対応する診断用画像と、前記他の分割領域に対応する通常画像とを前記表示手段に同時に表示するように切替制御するものであることを特徴とする請求項1記載の電子内視鏡装置。
  3. 前記表示制御手段に表示切替指示を与えることが可能な表示切替指示手段を更に備え、
    前記表示制御手段が、前記表示切替指示手段の表示切替指示に応答して、前記一の分割領域および前記他の分割領域夫々に対応する通常画像を前記表示手段に表示するように切替制御するものであることを特徴とする請求項1記載の電子内視鏡装置。
  4. 前記表示制御手段に表示切替指示を与えることが可能な表示切替指示手段を更に備え、
    前記表示制御手段が、前記表示切替指示手段の表示切替指示に応答して、前記一の分割領域および前記他の分割領域夫々に対応する診断用画像を前記表示手段に同時に表示するように切替制御するものであることを特徴とする請求項1記載の電子内視鏡装置。
  5. 前記分割領域の範囲を変更する指示を受け付ける領域変更受付手段を更に備え、
    前記設定手段が、前記領域変更受付手段が受け付けた前記変更する指示に応答して、前記一の分割領域の範囲を設定するものであることを特徴とする請求項1から4いずれか1項記載の電子内視鏡装置。
  6. 生体粘膜を表す通常画像と、前記生体粘膜を表す狭帯域分光画像である診断用画像とを表示手段に表示する電子内視鏡表示方法であって、
    前記生体粘膜を分割した一の分割領域と、他の分割領域とを設定し、
    前記一の分割領域に対応する前記通常画像と、前記他の分割領域に対応する前記診断用画像とを同時に表示手段に表示するよう制御することを特徴とする電子内視鏡表示方法。
  7. 生体粘膜を表す通常画像と、前記生体粘膜を表す狭帯域分光画像である診断用画像とを表示するよう表示手段を制御するための電子内視鏡表示プログラムであって、
    前記生体粘膜を分割した一の分割領域と、他の分割領域とを設定する機能と、
    前記一の分割領域に対応する前記通常画像と、前記他の分割領域に対応する前記診断用画像とを同時に表示手段に表示するよう制御する機能とをコンピュータに実現させるための電子内視鏡表示プログラム。
JP2008220591A 2008-08-29 2008-08-29 電子内視鏡装置および方法並びにプログラム Abandoned JP2010051602A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008220591A JP2010051602A (ja) 2008-08-29 2008-08-29 電子内視鏡装置および方法並びにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008220591A JP2010051602A (ja) 2008-08-29 2008-08-29 電子内視鏡装置および方法並びにプログラム

Publications (1)

Publication Number Publication Date
JP2010051602A true JP2010051602A (ja) 2010-03-11

Family

ID=42068146

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008220591A Abandoned JP2010051602A (ja) 2008-08-29 2008-08-29 電子内視鏡装置および方法並びにプログラム

Country Status (1)

Country Link
JP (1) JP2010051602A (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10308896A (ja) * 1997-05-07 1998-11-17 Olympus Optical Co Ltd 画像合成表示装置
JP2003093336A (ja) * 2001-09-26 2003-04-02 Toshiba Corp 電子内視鏡装置
WO2007108270A1 (ja) * 2006-03-16 2007-09-27 Olympus Medical Systems Corp. 生体観測装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10308896A (ja) * 1997-05-07 1998-11-17 Olympus Optical Co Ltd 画像合成表示装置
JP2003093336A (ja) * 2001-09-26 2003-04-02 Toshiba Corp 電子内視鏡装置
WO2007108270A1 (ja) * 2006-03-16 2007-09-27 Olympus Medical Systems Corp. 生体観測装置

Similar Documents

Publication Publication Date Title
JP4773217B2 (ja) 電子内視鏡装置
JP4931199B2 (ja) 電子内視鏡装置
JP4579721B2 (ja) 内視鏡装置
EP1698272B1 (en) Endoscope and image processing device
KR101022585B1 (ko) 생체 관측 장치
EP2505140B1 (en) Blood information measuring apparatus
RU2381737C2 (ru) Устройство для наблюдения биологических объектов
JP4637620B2 (ja) 内視鏡システム装置
JP4767649B2 (ja) 内視鏡装置
JP4500207B2 (ja) 生体観測装置
JP5191329B2 (ja) 画像取得装置
WO2007010709A1 (ja) 内視鏡及び内視鏡装置
JP4917822B2 (ja) 内視鏡装置
JP2006341077A (ja) 生体観測装置
JP5039621B2 (ja) 電子内視鏡装置
JP2010075368A (ja) 電子内視鏡装置および方法並びにプログラム
WO2019163540A1 (ja) 内視鏡システム
JP2010082141A (ja) 電子内視鏡装置
JP6839773B2 (ja) 内視鏡システム、内視鏡システムの作動方法及びプロセッサ
JP2007195829A (ja) 内視鏡システム装置
JP2006341075A (ja) 生体観測装置用信号処理装置
JP4813145B2 (ja) 内視鏡装置
EP2105086B1 (en) Electronic endoscope apparatus
JP5068205B2 (ja) 電子内視鏡装置
WO2019171615A1 (ja) 内視鏡システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121106

A762 Written abandonment of application

Free format text: JAPANESE INTERMEDIATE CODE: A762

Effective date: 20121214