JP2010094152A - Electron endoscopic system - Google Patents
Electron endoscopic system Download PDFInfo
- Publication number
- JP2010094152A JP2010094152A JP2008264950A JP2008264950A JP2010094152A JP 2010094152 A JP2010094152 A JP 2010094152A JP 2008264950 A JP2008264950 A JP 2008264950A JP 2008264950 A JP2008264950 A JP 2008264950A JP 2010094152 A JP2010094152 A JP 2010094152A
- Authority
- JP
- Japan
- Prior art keywords
- light
- image
- image data
- transmission region
- special
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Abandoned
Links
Images
Landscapes
- Endoscopes (AREA)
Abstract
Description
本発明は、被写体の内部を撮像して観察画像を得る電子内視鏡システムに関し、さらに詳しくは、被写体に照射する照明光の波長を切り替えながら複数種類の観察画像を得る電子内視鏡システムに関する。 The present invention relates to an electronic endoscope system that captures an inside of a subject and obtains an observation image, and more particularly relates to an electronic endoscope system that obtains a plurality of types of observation images while switching the wavelength of illumination light applied to the subject. .
従来、医療分野において、電子内視鏡システムが広く普及している。電子内視鏡システムによれば、微小な撮像装置が設けられた電子内視鏡の細長い挿入部を被検者の体内に挿入し、被検者の体内をリアルタイムに撮像しながら診断や治療を行うことができる。 Conventionally, electronic endoscope systems have been widely used in the medical field. According to the electronic endoscope system, an elongated insertion portion of an electronic endoscope provided with a minute imaging device is inserted into a subject's body, and diagnosis and treatment are performed while imaging the subject's body in real time. It can be carried out.
電子内視鏡システムでフルカラーの観察画像を得る方式としては、線順次方式と面順次方式の2種の撮像方式が知られている。線順次方式は、RGB各色を配列したカラーフィルタを撮像素子上に配置し、RGB各色の信号を取得する撮像方式である。面順次方式は、RGB各色の照明光を被写体に順に照射しながら撮像し、得られた各色の画像を合成して、白色の照明光を照射したときに得られるもとの同様の1つの観察画像を得る撮像方式である。 As a method for obtaining a full-color observation image with an electronic endoscope system, two types of imaging methods, a line sequential method and a frame sequential method, are known. The line-sequential method is an image pickup method in which a color filter in which RGB colors are arranged is arranged on an image pickup element and signals of RGB colors are acquired. The frame sequential method captures images while sequentially irradiating RGB illumination lights on the subject, combines the obtained images of the respective colors, and obtains the same single observation obtained when the illumination light is irradiated with white. This is an imaging method for obtaining an image.
このように撮像方式にかかわらず、従来の電子内視鏡システムでは、白色の照明光(以下、通常光)を照射して撮像したときに得られる観察画像が取得される。 As described above, regardless of the imaging method, in the conventional electronic endoscope system, an observation image obtained when imaging is performed by irradiating white illumination light (hereinafter, normal light).
しかし、表面からの深さや構造のサイズ等の特徴によっては、観察部位を通常光では明瞭に観察できないことがある。通常光では明瞭に観察することが難しいものとしては、例えば、表層血管,ピットパターン(腺口構造),陥凹や隆起といった中規模の凹凸構造、微細血管や発赤,肥厚,深層血管等がある。こうした構造は、特定の波長の光を照明光として用いることで明瞭に観察することができることが知られている。 However, depending on characteristics such as the depth from the surface and the size of the structure, the observation site may not be clearly observed with normal light. Things that are difficult to observe clearly with normal light include, for example, superficial blood vessels, pit patterns (gland opening structures), medium-scale uneven structures such as depressions and ridges, fine blood vessels, redness, thickening, and deep blood vessels . It is known that such a structure can be clearly observed by using light of a specific wavelength as illumination light.
例えば、表層の血管やピットパターン等の観察部位表面の微細構造は、波長450nm近傍の照明光で観察することができ、観察部位の陥凹や隆起等のマクロな凹凸構造は、波長500nm近傍の照明光で観察することができる。また、波長550nm近傍の照明光は、ヘモグロビンによる吸収率が高く、微細血管や発赤の観察に適し、波長600nm近傍の照明光は肥厚の観察に適していることが知られている。さらに、深層血管の観察には、インドシアニングリーン(ICG)等の蛍光物質を静脈注射し、波長780nm近傍の光を照明光として用いることで明瞭に観察することができる。 For example, the fine structure of the surface of the observation site such as a blood vessel or pit pattern in the surface layer can be observed with illumination light having a wavelength of around 450 nm, and a macro uneven structure such as a depression or a bulge in the observation site has a wavelength of around 500 nm. It can be observed with illumination light. Further, it is known that illumination light in the vicinity of a wavelength of 550 nm has a high absorption rate by hemoglobin, and is suitable for observation of fine blood vessels and redness, and illumination light in the vicinity of a wavelength of 600 nm is suitable for observation of thickening. Furthermore, the deep blood vessels can be observed clearly by injecting a fluorescent substance such as indocyanine green (ICG) intravenously and using light in the vicinity of a wavelength of 780 nm as illumination light.
こうしたことから、近年では、通常光では観察し難い構造をも観察し易くするために、上述のような狭い波長帯の照明光(以下、特殊光という)を、観察する構造に応じて切り替えながら用いることができるようにした電子内視鏡システムが知られている(特許文献1,2)。
特許文献1,2に記載の発明には、通常光や種々の特殊光を適宜切り替えながら用いるために、複数の光学フィルタを予め設けておき、これらを交換して照明光を切り替えることが記載されている。しかしながら、特許文献1,2のように光学フィルタを交換することによって特徴の異なる画像を撮像するには、撮像したい被写体の特徴の種類に応じて、特殊光の種類や特殊光の組み合わせが異なる光学フィルタを予め多数用意しておく必要があり、照明光を作り出す光源装置の構成が煩雑になるとともに、高価になってしまうという問題がある。 In the inventions described in Patent Documents 1 and 2, in order to use normal light and various special lights while appropriately switching, a plurality of optical filters are provided in advance and the illumination light is switched by exchanging them. ing. However, in order to capture images with different characteristics by exchanging optical filters as in Patent Documents 1 and 2, depending on the type of characteristics of the subject to be imaged, the type of special light and the combination of special light are different. It is necessary to prepare a large number of filters in advance, and there is a problem that the configuration of the light source device that generates illumination light becomes complicated and expensive.
また、光学フィルタを交換して照明光を切り替えるようにした場合、光学フィルタの切り替えにある程度の時間を要するため、通常光による観察画像(以下、通常光画像という)と、特殊光による観察画像(以下、特殊光画像)を同時に得ることができない。このため、被検者の体内のように常に動いている被写体を観察する場合、光学フィルタを切り替える間に、被写体の向きや形状が変化してしまうので、同じ状態で通常光画像と特殊光画像を比較観察することができないという問題がある。 In addition, when switching the illumination light by exchanging the optical filter, it takes a certain amount of time to switch the optical filter, so that an observation image with normal light (hereinafter referred to as a normal light image) and an observation image with special light ( Hereinafter, a special light image) cannot be obtained simultaneously. For this reason, when observing a subject that is constantly moving, such as inside the body of the subject, the orientation and shape of the subject change while switching the optical filter, so the normal light image and the special light image in the same state. There is a problem that comparative observation cannot be performed.
本発明は上述の問題点に鑑みてなされたものであり、通常光画像と特殊光画像のように、相互に特徴の異なる複数の観察画像を同じ状態の被写体に対して複数同時に取得することができる電子内視鏡システムを提供することを目的とする。 The present invention has been made in view of the above-described problems, and it is possible to simultaneously acquire a plurality of observation images having different characteristics from each other, such as a normal light image and a special light image, with respect to a subject in the same state. An object of the present invention is to provide an electronic endoscope system that can be used.
本発明の電子内視鏡システムは、被写体からの光を光電変換することにより、前記被写体を撮像する撮像手段と、前記被写体に照射する照明光を発生する光源と、前記光源の前方に回転自在に配置され、前記撮像手段による複数回の撮像に同期して回転し、前記撮像手段による1回の撮像に対応する所定中心角の扇形区画のうち少なくとも一つの前記扇形区画内に、ある波長を中心として前記撮像素子の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域を有し、前記扇形区画の全てに白色光の波長帯成分を透過する白色光透過領域を有するロータリーフィルタと、前記ロータリーフィルタが回転する間に撮像された画像データから、相互に特徴の異なる複数の観察画像を生成する観察画像生成手段と、を備えることを特徴とする。 An electronic endoscope system according to the present invention includes an imaging unit that images a subject by photoelectrically converting light from the subject, a light source that generates illumination light that irradiates the subject, and a front light source that is rotatable. The wavelength is set in at least one of the sector-shaped sections among the sector-shaped sections having a predetermined central angle corresponding to one-time imaging by the imaging means. A white light transmission that has a selective transmission region that selectively transmits a wavelength band component narrower than a wavelength band to which the pixel of the image sensor is sensitive at the center, and transmits the wavelength band component of white light in all of the sector-shaped sections. A rotary filter having a region, and observation image generation means for generating a plurality of observation images having different characteristics from image data captured while the rotary filter rotates And wherein the door.
前記白色光は、500nmよりも長く750nmよりも短い波長帯の光を含み、450nmより短い波長帯の光は500nmの波長の光の光量の1/10以下、780nmより長い波長帯の光は750nmの波長の光の光量の1/10以下であることを特徴とする。 The white light includes light having a wavelength band longer than 500 nm and shorter than 750 nm, light having a wavelength band shorter than 450 nm is 1/10 or less of the amount of light having a wavelength of 500 nm, and light having a wavelength band longer than 780 nm is 750 nm. It is 1/10 or less of the light quantity of the light of the wavelength.
前記選択的透過領域を透過する光は、450、500、550、600、または780nm近傍のいずれかに中心波長を有するものであることを特徴とする。 The light transmitted through the selective transmission region has a center wavelength in the vicinity of 450, 500, 550, 600, or 780 nm.
前記ロータリーフィルタは、前記扇形区画毎に、前記撮像手段の電荷読出期間に対応して前記照明光を遮光する遮光領域を有することを特徴とする。 The rotary filter has a light-shielding region that shields the illumination light corresponding to a charge reading period of the imaging means for each of the fan-shaped sections.
前記観察画像生成手段は、複数の前記画像データから色の成分を各々抜き出して、前記選択的透過領域を透過した照明光を照射して撮像したときに得られる中間画像データを算出することを特徴とする。 The observation image generation means extracts color components from each of the plurality of image data, and calculates intermediate image data obtained when imaging is performed by irradiating illumination light transmitted through the selective transmission region. And
前記観察画像生成手段は、前記中間画像データから、前記被写体の所定部位を強調した強調画像を生成することを特徴とする。 The observation image generation unit generates an emphasized image in which a predetermined portion of the subject is emphasized from the intermediate image data.
本発明によれば、通常光画像と特殊光画像を同時に取得することができ、通常光画像と特殊光画像を容易に比較することができる。また、交換用の光学フィルタを多数用意する必要がなく、電子内視鏡システムを安価に、簡素に構成することができる。 According to the present invention, the normal light image and the special light image can be acquired simultaneously, and the normal light image and the special light image can be easily compared. In addition, it is not necessary to prepare a large number of replacement optical filters, and the electronic endoscope system can be simply configured at low cost.
図1に示すように、電子内視鏡システム11は、電子内視鏡12、プロセッサ装置13、光源装置14等から構成される。電子内視鏡12は、挿入部16、手元操作部17、ユニバーサルコード18等から構成される。
As shown in FIG. 1, the
挿入部16は、被検者の体内(以下、被写体という)に挿入され、被写体の形状に応じて自在に湾曲する。また、挿入部16の先端部分16aには、撮像素子31(図2参照)を内蔵した撮像装置が設けられている。
The insertion unit 16 is inserted into the body of the subject (hereinafter referred to as a subject) and is freely curved according to the shape of the subject. In addition, an imaging device incorporating an imaging element 31 (see FIG. 2) is provided at the
先端部分16aの端面には、前方に照明光を照射する照明窓16bや、被写体からの光を撮像素子31に導く観察窓16c(ともに図2参照)、各種処置具が露出される鉗子出口、洗浄水や空気等が噴射される送気送水ノズル等が設けられている。
On the end face of the
先端部分16aの後方には、湾曲部19が設けられている。この湾曲部19は、複数の湾曲駒が連結されたものであり、挿入部16に挿通されたワイヤが手元操作部17に設けられたアングルノブ21と連結されている。湾曲部19は、アングルノブ21の回転操作に応じてワイヤが押し引きされることにより、上下左右に自在に湾曲する。これにより、先端部分16aの位置や向きが所望の方向に自在に調節される。
A
手元操作部17は、前述のように湾曲部19を操作するアングルノブ21のほかに、鉗子口22や、送気送水ボタン等の各種操作ボタン23が設けられている。鉗子口22には、注射針や高周波メスといった各種処置具が挿入される。鉗子口22から挿入された各種処置具は、前述のように鉗子出口から被写体に向けて露出される。また、送気送水ボタンは、図示しない送気送水装置から供給される空気や洗浄水の送気,送水を制御する。
The hand operation unit 17 is provided with
ユニバーサルコード18は、基端部分に設けられたコネクタ24によって、電子内視鏡12と光源装置14を光学的に接続する。また、ユニバーサルコード18は、コネクタ24の他端で、電子内視鏡12をプロセッサ装置13に電気的に接続する。
The
プロセッサ装置13は、電子内視鏡12、光源装置14、モニタ26等に接続されており、電子内視鏡システム11の動作を統括的に制御する。光源装置14は、ユニバーサルコード18や挿入部16に挿通されたライトガイドを通じて、被写体の観察部位に向けて照明光を照射する。
The
図2に示すように、電子内視鏡12は、撮像素子31、AFE32、CPU33、ライトガイド34等から構成される。
As shown in FIG. 2, the
撮像素子31は、CCD型のイメージセンサであり、前方には対物レンズ36が配置されている。撮像素子31は、RGBいずれかのカラーフィルタが画素毎に配置されており、対物レンズ36によって撮像面に結像される被写体からの光を、RGB3色の基本色毎に光電変換して露光量に応じた信号電荷を蓄積する。撮像素子31は、各画素で蓄積した信号電荷を撮像信号として出力する。撮像素子31からの撮像信号は、AFE32を介してプロセッサ装置13に入力される。なお、ここでは撮像素子31としてCCD型のイメージセンサを用いるが、撮像素子31としてCMOS型のイメージセンサを用いても良い。
The
AFE32は、相関二重サンプリング回路(CDS)、自動ゲイン制御回路(AGC)、アナログデジタル変換回路(A/D)から構成される。CDSは、撮像素子31から出力される撮像信号に対して相関二重サンプリング処理を施し、撮像素子31の駆動により生じたノイズを除去する。AGCは、CDSによりノイズが除去された撮像信号を増幅する。A/Dは、AGCで増幅された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置13に入力する。
The
CPU33は、プロセッサ装置13のCPU41と通信し、電子内視鏡12の各部の動作を統括的に制御する。例えば、CPU33は、プロセッサ装置13のCPU41からの制御信号に基づいて、タイミングジェネレータ(TG)37に所定のタイミングイ信号を生じさせることにより、撮像素子31の動作を制御し、撮像素子31に撮像信号を出力させる。
The
ライトガイド34は、ユニバーサルコード18や挿入部16の内部に挿通されており、一端が照明窓16bにレンズ38を介して接続され、他端はコネクタ24で光源装置14に接続される。光源装置14からの照明光は、ライトガイド34を通じて、照明窓16bから被写体の観察部位へと照射される。
The
プロセッサ装置13は、CPU41、DSP43、DIP42(観察画像生成手段)、表示制御回路44等から構成される。
The
CPU41は、ROM(図示しない)に格納された制御プログラムを実行することにより、システムバス47を介して接続されたプロセッサ装置13の各部の動作を制御する。また、CPU41は、電子内視鏡12のCPU33や光源装置14のCPU63と通信し、電子内視鏡12や光源装置14の動作を制御することにより、電子内視鏡システム11を統括的に制御する。
The
DSP43は、AFE32から入力されるデジタルの撮像信号に対して、色補間、ホワイトバランス調節、ガンマ補正等の各種画像処理を施し、通常光画像や特殊光画像をモニタ26への表示に適した画像データにする。
The
DIP42は、DSP43から出力された画像データから、モニタ26上に表示する観察画像を生成する。また、DIP42は、被写体を撮像するごとに入力される撮像信号を画像データとしてフレームメモリに複数蓄積する。DIP42がフレームメモリに蓄積する画像データは、後述するロータリーフィルタ62が1回転するうちに撮像された撮像回数分(ここでは2回分)の画像データである。
The
DIP42は、通常光画像生成部51と特殊光画像生成部52を備えている。通常光画像生成部51は、フレームメモリに蓄積された2つの画像データから、RGBの基本色毎の成分を抜き出して、比較、演算することにより、通常光で照明しながら撮像したときに得られる各画素の露光量を算出する。(以下では、各画素の露光量を単に画素値と称する。)通常光画像生成部51は、こうして算出された画素値を各画素の画素値とした通常光画像を生成する。通常光画像生成部51によって生成された通常光画像は、再びフレームメモリに格納される。
The
特殊光画像生成部52は、フレームメモリに蓄積された2つの画像データから、RGBの基本色毎の成分を抜き出して、比較、演算することにより、特殊光で照明しながら撮像したときに得られる画素値を画素毎に算出する。特殊光画像生成部52は、特殊光による画素値を、通常光画像生成部51で生成された通常光画像に重畳することにより、被写体の特定の構造が強調された特殊光画像を生成する。また、特殊光画像生成部52は、被写体の種類等に応じた電子内視鏡システム11の設定に基づいて、強調する部位等が異なる複数の特殊光画像を生成する。特殊光画像生成部52によって生成された特殊光画像は、再びフレームメモリに格納される。また、DIP42は、CPU41からの制御にしたがって、通常光画像や特殊光画像に対して、電子変倍やエッジ強調処理等のさらなる付加的な画像処理を施す。
The special light
表示制御回路44は、DIP42で各種画像処理が施された通常光画像や特殊光画像に、無効画素部分を隠す表示用マスクデータを重畳したり、検査日時や患者や術者の情報といった文字情報や、操作用のGUIを重畳する。また、表示制御回路44は、通常光画像や特殊光画像を表示形式に応じたビデオ信号に変換してモニタ26上に表示させる。
The display control circuit 44 superimposes display mask data that hides the invalid pixel portion on the normal light image or special light image that has been subjected to various image processing by the
光源装置14は、光源61、ロータリーフィルタ62、CPU63、位置センサ64等から構成される。
The
光源61は、紫外線から可視光、赤外光にわたる広い波長帯の光を高輝度に発するキセノンランプ等の白色高輝度光源であり、被写体に照射する照明光を発生する。光源61の発する照明光には、赤外光も含まれている。
The
ロータリーフィルタ62は、光源61の前方に、照明光の光路に対して面が垂直に設けられている。ロータリーフィルタ62は、所定の方向に回転自在に設けられている。ロータリーフィルタ62の中心軸は、照明光の光路からそれた位置にあり、照明光はロータリーフィルタ62の一部の面に入射する。ロータリーフィルタ62の面には、透過する波長帯や透過率等が異なる扇形の光学領域が各々所定の角度範囲で複数配置されている(図3参照)。これにより、ロータリーフィルタ62は、照明光を透過するときに波長や透過光量を変調したり、遮光したりする。ロータリーフィルタ62は、撮像素子31の動作に連動してモータ69により回転されるようになっており、ロータリーフィルタ62は撮像素子31による2回の撮像で1回転される。ロータリーフィルタ62を透過した照明光は、絞り67やレンズ68等を介してライトガイド34に入射される。
The
CPU63は、光源装置14の各部の動作を制御する。また、CPU63は、プロセッサ装置13のCPU41と通信することにより、光源装置14内の各部の動作を、プロセッサ装置13や電子内視鏡12の各部の動作に同期するように制御する。例えば、CPU63は、光源61のオンオフや、ロータリーフィルタ62の回転、絞り67の開口径等を制御する。
The
位置センサ64は、ロータリーフィルタ62の回転角度を検知して、CPU63に通知する。CPU63は位置センサ64からの信号に基づいて、撮像素子31の動作と同期するように、モータ69の動作を制御する。
The
図3に示すように、ロータリーフィルタ62には、白色光の波長帯成分が透過する白色光透過領域として、第1白色光透過領域71、第2白色光透過領域72が設けられている。また、ロータリーフィルタ62には、ある波長を中心として撮像素子31の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域として、青色光透過領域73、緑色光透過領域74、赤外光透過領域76が設けられている。青色光透過領域73、緑色光透過領域74、赤外光透過領域76は、撮像素子31のRGB各画素の感応する波長帯よりも狭い半値幅で、青色光、緑色光、赤外光を各々透過する。さらに、ロータリーフィルタ62には、撮像素子の電荷読出期間に対応して照明光を遮光する遮光領域として、第1遮光フィルタ77、第2遮光フィルタ78が設けられている。これらのロータリーフィルタ62に設けられた各領域は、各々に所定の中心角を有する扇形である。
As shown in FIG. 3, the
また、ロータリーフィルタ62は、撮像素子31による2回の撮像に対して1回転される。したがって、ロータリーフィルタ62は、撮像素子31による1回の撮像に対して180度(所定中心角)だけ回転する。このため、1回の撮像の間に、ロータリーフィルタ62の半分(図3では上半分または下半分)に設けられた白色光透過領域や選択的透過領域等が光源61の前面を順に横切る。これにより、1回の撮像の間に波長や透過光量等が変調された照明光が被写体に照射される。
Further, the
ロータリーフィルタ62の上半分の区画(扇形区画)81(以下、第1区画という)には、ロータリーフィルタ62の回転方向82に沿って、第1遮光フィルタ77、青色光透過領域73、第1白色光透過領域71が順に設けられている。このため、第1区画81によって照明光が変調されるときには、第1白色光透過領域71、青色光透過領域73、第1遮光フィルタ77の順に、光源61の前方を横切る。
In the upper half section (fan section) 81 (hereinafter referred to as the first section) of the
第1白色光透過領域71は、第1区画81のうち中心角θ1の範囲に設けられており、光源61からの照明光のうちの480nm以上750nm以下の波長帯の光を透過する。この第1白色光透過領域71が透過する波長帯の光は、撮像素子31のRGB各画素が何れも感応する波長帯を含んでおり(図7参照)、略白色の光(以下、通常光という)となっている。このため、第1白色光透過領域71が光源61の前方を横切っている間は、通常光が照明光として被写体に照射される。通常光(白色光)は、500nmよりも長く750nmよりも短い波長帯の光を含み、450nmより短い波長帯の光は500nmの波長の光の光量の1/10以下、780nmより長い波長帯の光は750nmの波長の光の光量の1/10以下であることが好ましい。
The first white light transmission region 71 is provided in the range of the central angle θ <b> 1 in the
青色光透過領域73は、第1白色光透過領域71に隣接して、第1区画81の中心角αの範囲に設けられており、撮像素子31のB画素が感応する波長帯よりも狭い450nm近傍の波長帯の光(以下、青色特殊光という)を選択的に透過する。このため、青色光透過領域73が光源61の前方を横切っている間は、青色特殊光だけが照明光として被写体に照射される。青色特殊光は被写体の表層付近で強く反射されるため、青色特殊光が照明光として照射されている間は、表層血管やピットパターンが撮像される。
The blue
第1遮光フィルタ77は、青色光透過領域73に隣接して、第1区画81の中心角ωの範囲に設けられており、光源61からの全波長帯の照明光を遮光する。これにより、第1遮光フィルタ77が光源61の前方を横切っている間は、被写体には照明光が照射されない。また、第1遮光フィルタ77が光源61の前方を横切るタイミングは、第1白色光透過領域71及び青色光透過領域73が通過する間に各画素で蓄積した信号電荷を、撮像素子31が撮像信号として転送するタイミングに対応する。なお、撮像素子31が撮像信号を転送する期間は、第1遮光フィルタ77が光源61の前方を横切っている期間と同じか又は短い期間である。
The first light blocking filter 77 is provided in the range of the central angle ω of the
一方、ロータリーフィルタ62の下半分の区画(扇形区画)83(以下、第2区画という)には、ロータリーフィルタ62の回転方向82に沿って、第2遮光フィルタ78、赤外光透過領域76、緑色光透過領域74、第2白色光透過領域72が順に設けられている。このため、第2区画83によって照明光が変調されるときには、第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76、第2遮光フィルタ78の順に、光源61の前方を横切る。
On the other hand, in the lower half section (fan section) 83 (hereinafter referred to as the second section) of the
第2白色光透過領域72は、第1遮光フィルタ77に隣接して、中心角θ2の範囲に設けられている。第2白色光透過領域72は、第1白色光透過領域71と同様の構成及び作用を有する。
The second white
緑色光透過領域74は、第2白色光透過領域72に隣接して、中心角βの範囲に設けられており、撮像素子31のG画素が感応する波長帯(図7参照)のうち、550nm近傍の狭い波長帯の光(以下、緑色特殊光という)を選択的に透過する。このため、緑色光透過領域74が光源61の前方を横切っている間は、緑色特殊光だけが照明光として被写体に照射される。緑色特殊光は、ヘモグロビンに強く吸収されるため、緑色特殊光が照明光として照射されている間は、発赤や微細血管等が撮像される。
The green
赤外光透過領域76は、緑色光透過領域74に隣接して、中心角γの範囲に設けられており、780nm近傍の狭い波長帯の赤外(以下、赤外特殊光という)を透過する。この赤外特殊光は、撮像素子31のR画素が感応しない波長帯の赤外光となっている(図7参照)。このため、赤外光透過領域76が光源61の前方を横切っているときには、撮像素子31が感応しない赤外特殊光だけが照明光として照射されるが、被写体に反射された赤外特殊光によってはなにも撮像されない。
The infrared
しかし、赤外特殊光はある種の蛍光物質に効率良く吸収され、赤外特殊光を吸収した蛍光物質は、所定波長の蛍光を生じる。このため、例えば蛍光物質としてICGを静脈注射した場合には、赤外特殊光が照明光として照射されることで、深層血管等、被写体の一部から波長が830nm近傍の蛍光が生じる。また、撮像素子31のR画素は、前述のように赤外特殊光には感応しないが、ICGから発せられる蛍光には感応する。このため、赤外光透過領域76が光源61の前方を横切っているときには、蛍光物質からの蛍光によって、深層血管等が撮像される。
However, the infrared special light is efficiently absorbed by a certain type of fluorescent material, and the fluorescent material that has absorbed the infrared special light generates fluorescence of a predetermined wavelength. For this reason, for example, when ICG is intravenously injected as a fluorescent substance, infrared special light is irradiated as illumination light, and fluorescence having a wavelength of around 830 nm is generated from a part of a subject such as a deep blood vessel. In addition, the R pixel of the
第2遮光フィルタ78は、赤外光透過領域76に隣接して第1遮光フィルタ77と同様に中心角ωの範囲に設けられており、光源61からの全波長帯の照明光を遮光する。第2遮光フィルタ78の構成及び作用は第1遮光フィルタ77と同じである。また、撮像素子31が撮像信号を転送する期間も、第2遮光フィルタ78が光源61の前方を横切っている期間と同じか又は短い期間である。
The second
以下、上述のように構成される電子内視鏡システム11の作用を説明する。まず、挿入部16を被写体に挿入して観察を開始すると、図4に示すように、CPU63によってロータリーフィルタ62は撮像素子31の撮像動作に同期して回転制御される。
Hereinafter, the operation of the
図4(A)に示すように、撮像素子31は、プロセッサ装置13からの指示に基づいて、信号電荷の蓄積と蓄積した信号電荷の読み出しを1回の撮像とすると、2回の撮像を1セットとして、複数セットの撮像を所定のタイミングで繰り返す。このとき、ロータリーフィルタ62は、図4(B)に示すように、各回の撮像で第1区画81または第2区画83のいずれかによって変調した照明光を被写体に照射する。
As shown in FIG. 4A, the
撮像素子31の1セットの撮像のうち、前半の撮像期間91(以下、第1撮像期間という)では、第1区画81が光源61の前方を横切るようにロータリーフィルタ62が回転される。したがって、第1撮像期間91における信号電荷の蓄積期間92(以下、第1蓄積期間という)では、第1白色光透過領域71と青色光透過領域73によって順に照明光が変調される。このため、第1蓄積期間92では、通常光による信号電荷と、青色特殊光による信号電荷とをあわせた量の信号電荷が撮像素子31の各画素に蓄積される。
The
第1蓄積期間92の間に、R画素には、第1白色光透過領域71を透過した通常光の赤色成分の光量に応じた量の信号電荷が蓄積される。同様に、第1蓄積期間92の間に、G画素には、第1白色光透過領域71を透過した通常光の緑色成分の光量に応じた量の信号電荷が蓄積される。 During the first accumulation period 92, the R pixel accumulates an amount of signal charge corresponding to the amount of the red component of the normal light transmitted through the first white light transmission region 71. Similarly, during the first accumulation period 92, the G pixel accumulates an amount of signal charge corresponding to the amount of the green component of the normal light transmitted through the first white light transmission region 71.
また、第1蓄積期間92の間に、B画素に蓄積される信号電荷の総量は、第1白色光透過領域71を透過した通常光の青色成分の光量に比例した信号電荷と、青色光透過領域73を透過した青色特殊光の光量に比例した量の信号電荷との合計となる。
Further, the total amount of signal charges accumulated in the B pixel during the first accumulation period 92 is such that the signal charge proportional to the amount of the blue component of the normal light transmitted through the first white light transmission region 71 and the blue light transmission. The total amount of signal charges is proportional to the amount of blue special light transmitted through the
こうして第1蓄積期間92で各画素に蓄積された信号電荷は、第1撮像期間91内の読出期間93(以下、第1読出期間という)で、AFE32を介してDIP42に撮像信号として出力される。また、この第1読出期間93の間は、光源61からの照明光は第1遮光フィルタ77で遮られている。
The signal charges accumulated in each pixel in the first accumulation period 92 are output as an image signal to the
このように、第1撮像期間91では第1区画81によって照明光が変調されるが、撮像素子31の1セットの撮像のうち、後半の撮像期間96(以下、第2撮像期間という)では、図4(B)に示すように、第2区画83が光源61の前方を横切るようにロータリーフィルタ62が回転される。したがって、第2撮像期間96における信号電荷の蓄積期間97(以下、第2蓄積期間という)では、第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76によって順に照明光が変調される。このため、第2蓄積期間97では、通常光による信号電荷と、緑色特殊光による信号電荷と、赤外特殊光によって生じた蛍光による信号電荷とを合わせた量の信号電荷が、撮像素子31の各画素に蓄積される。
As described above, the illumination light is modulated by the
このため、B画素には、第2蓄積期間97の間に、第2白色光透過領域72を透過した通常光の青色成分の光量に比例した量の信号電荷が蓄積される。
For this reason, in the B pixel, during the second accumulation period 97, an amount of signal charge proportional to the amount of the blue component of the normal light transmitted through the second white
一方、第2蓄積期間97の間に、R画素に蓄積される信号電荷の総量は、第2白色光透過領域72を透過した通常光の赤色成分の光量に比例した量の信号電荷と、赤外特殊光によって生じた蛍光の光量に比例した量の信号電荷との合計となる。また、第2蓄積期間97の間に、G画素に蓄積される信号電荷の総量は、第2白色光透過領域72を透過した通常光の緑色成分の光量に比例した量の信号電荷と、緑色特殊光の光量に比例した量の信号電荷との合計となる。
On the other hand, the total amount of signal charges accumulated in the R pixel during the second accumulation period 97 is equal to the amount of signal charge proportional to the amount of red component of normal light transmitted through the second white
こうして第2蓄積期間97で各画素に蓄積された信号電荷は、第2撮像期間96内の読出期間98(以下、第2読出期間という)で、AFE32を介してDIP42に撮像信号として出力される。この第2読出期間98の間は、光源61からの照明光は第2遮光フィルタ78で遮られている。
The signal charges accumulated in each pixel in the second accumulation period 97 are output as an image signal to the
なお、第1白色光透過領域71による通常光の透過光量及びこれによる各画素の画素値は、第1白色光透過領域71の通常光の透過率と中心角θ1によって定まる。同じく、第2白色光透過領域72による画素値は、第2白色光透過領域72の通常光の透過率と中心角θ2によって定まる。また、第1白色光透過領域71と第2白色光透過領域72の通常光の透過光量の比により、第1白色光透過領域71と第2白色光透過領域72の各画素の画素値の比が定まる。
Note that the amount of normal light transmitted through the first white light transmission region 71 and the pixel value of each pixel thereby are determined by the normal light transmittance of the first white light transmission region 71 and the central angle θ1. Similarly, the pixel value of the second white
また、青色光透過領域73による青色特殊光の透過光量及びこれによる画素値は、青色光透過領域73の青色特殊光の透過率と中心角αとの積に比例する。同様に、緑色光透過領域74による緑色特殊光の透過光量及びこれによる画素値は、緑色光透過領域74の緑色特殊光の透過率と中心角βとの積に比例する。一方、赤外光透過領域76による赤外特殊光の透過光量は、赤外光透過領域76の赤外特殊光の透過率と中心角γの積に比例し、これによる赤色画素の画素値は、さらに蛍光物質によって赤外特殊光が蛍光へ変換される効率に比例する。
Further, the amount of transmitted blue special light through the blue
上述のように、ロータリーフィルタ62と撮像素子31を同期して駆動しながら被写体を撮像すると、図5(A)に示すように、第1撮像期間91で出力された撮像信号から第1画像データ101が取得される。同時に、図5(B)に示すように、第2撮像期間96で出力された撮像信号から第2画像データ102が取得される。このため、第1画像データ101が取得されてから、第2画像データ102が取得されるまでには1フレーム分の撮像期間(例えば、1/30秒)しか経過しない。このように、第1画像データ101と第2画像データ102は略同時に取得されるので、第1画像データ101と第2画像データ102は、被写体の動きの影響を受けずに、全く同じ被写体を撮像した画像データとして扱うことができる。
As described above, when the subject is imaged while the
また、第1撮像期間91で出力される撮像信号は、前述のように、通常光と青色特殊光による露光が重畳しているので、図5(A)に示すように、第1画像データ101には、通常光で撮像される被写体像(実線で示す)に、青色特殊光による被写体像(模式的に破線で示す)が重畳されており、露光量の少ない青色特殊光による像はあまり目立たない。
Further, as described above, since the image signal output in the first image capturing period 91 is superimposed with the exposure of the normal light and the blue special light, as shown in FIG. 5A, the
また、第2撮像期間96で出力される撮像信号もまた、前述のように、通常光、緑色特殊光、赤外特殊光による露光が重畳しているので、図5(B)に示すように、第2画像データ102には、通常光で撮像される被写体像に、緑色特殊光や赤外特殊光による被写体像(模式的に破線で示す)が重畳されている。第2画像データ102では、緑色特殊光や赤外特殊光による被写体像は、露光量が少ないためにあまり目立たない。
Further, as described above, the imaging signal output in the second imaging period 96 is also superimposed with the exposure by the normal light, the green special light, and the infrared special light, as shown in FIG. In the
DIP42は、こうして取得された第1画像データ101と第2画像データ102に基づき、図6に示す手順にしたがって、通常光画像生成部51によって通常光で照明したときに得られる通常光画像を生成するとともに、特殊光画像生成部52によって被写体の特定部位が適切に強調された特殊光画像を生成する。
Based on the
DIP42が通常光画像と特殊光画像を生成する手順は、大きく分けて4つの手順(ステップS10,S20,S30,S40)が略同時進行で行われる。まず、DIP42は、第1画像データ101と第2画像データ102から、青色の成分を抜き出して、各B画素の画素値を比較,演算することにより、各B画素の通常光による画素値と、青色特殊光による画素値とをそれぞれ算出する(ステップS10)。
The procedure in which the
同様に、DIP42は、第1画像データ101と第2画像データ102から、緑色の成分を抜き出して、各G画素の画素値を比較,演算することにより、各G画素の通常光による画素値と、緑色特殊光による画素値とをそれぞれ算出する(ステップS20)。
Similarly, the
さらに、DIP42は、第1画像データ101と第2画像データ102から、赤色の成分を抜き出して、各R画素の画素値を比較,演算することにより、各R画素の通常光による画素値と、赤外特殊光による画素値とをそれぞれ算出する(ステップS30)。
Further, the
そして、DIP42は、上述のように算出した各画素値から、RGB各画素の画素値が通常光で照明したときに得られる画素値となるようにした通常光画像を生成するとともに、被写体の特定部位が強調された特殊光画像を生成する(ステップS40)。
Then, the
図6(A)に示すように、通常光画像生成部51は、白色光透過領域71,72を透過した通常光による画素値をRGB各色の画素毎に算出し(ステップS11,S21,S31)、通常光画像を生成する(ステップS41)。一方、図6(B)に示すように、特殊光画像生成部52は、青色光透過領域73,緑色光透過領域74,赤外光透過領域76を透過した各種特殊光による画素値をRGB各色の画素毎に算出し(ステップS12,S22,S32)、特殊光画像を生成する(ステップS42)。また、通常光画像生成部51と特殊光画像生成部52は、中間的に算出されたデータを共用するように、相互に連動して動作する。
As shown in FIG. 6A, the normal light
より詳しくは、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、青色の成分を抜き出して、各B画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるB画素の画素値を算出する(ステップS11)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるB画素の画素値を利用して、第1画像データ101又は第2画像データ102の青色成分から、青色特殊光によるB画素の画素値を算出する(ステップS12)。
More specifically, the normal light
同様に、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、緑色の成分を抜き出して、各G画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるG画素の画素値を算出する(ステップS21)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるG画素の画素値を利用して、第1画像データ101又は第2画像データ102の緑色成分から、緑色特殊光によるG画素の画素値を算出する(ステップS22)。
Similarly, the normal light
さらに、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、赤色の成分を抜き出して、各R画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるR画素の画素値を算出する(ステップS31)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるR画素の画素値を利用して、第1画像データ101又は第2画像データ102の赤色成分から、赤色特殊光で生じさせた蛍光によるR画素の画素値を算出する(ステップS32)。
Further, the normal light
その後、通常光画像生成部51は、算出した通常光による各画素の画素値を用いて通常光画像を生成する(ステップS41)。特殊光画像生成部52は、算出した各種特殊光による画素値を、通常光画像に適切な割合で重畳して特殊光画像を生成する(ステップS42)。なお、特殊光画像生成部52は、設定に応じて、強調する部位が異なるなどの複数の特徴の異なる特殊光画像を生成する。
Thereafter, the normal light
以下では、DIP42が、通常光画像生成部51と特殊光画像生成部52によって、通常光画像と特殊光画像を生成するより具体的な様態を説明する。
Hereinafter, a more specific mode in which the
撮像素子31のRGB各画素の感度の一例を、図7に示す。B画素の感度106は、波長450nm付近の光に最も強く感応し、380nmから520nm程度の波長帯107(以下、青色波長帯という)に感度がある。G画素の感度108は、波長550nm付近の光に最も強く感応し、470nmから650nm程度の波長帯109(以下、緑色波長帯という)に感度がある。R画素の感度110は、波長630nm付近の光に最も強く感応し、780nm近傍を除いた580nmから870nm程度の波長帯111(以下、赤色波長帯という)に感度がある。また、R画素は、830nm近傍の赤外光に対して、周辺の波長の赤外光よりもやや強く感応する。
An example of the sensitivity of each RGB pixel of the
第1撮像期間91に被写体に照射される照明光量(積分値)と波長のグラフを、図8(A)に示す。青色特殊光の照射光量121と、第1白色光透過領域71による通常光の照射光量122を合計した分布になる。このため、第1画像データ101の各画素の画素値は、図8(A)に示す各色波長帯107,109,111に応じた値が含まれる。つまり、図8(A)に示した照明光が体腔内の観察部位に照射されることにより、照射された部位からの反射光を撮像素子31が受光して、各画素の画素値となっている。この画素値内には、観察部位にある青色特殊光での観察に適した表層血管やピットパターン等に応じた青色成分と白色成分が含まれている。
FIG. 8A shows a graph of the amount of illumination (integrated value) and wavelength with which the subject is irradiated during the first imaging period 91. The distribution is a total of the
同様に、第2撮像期間96に被写体に照射される照明光量(積分値)と波長のグラフを、図8(B)に示すが、緑色特殊光の照射光量123、赤外特殊光の照射光量124、第2白色光透過領域72による通常光の照射光量125を合計した分布になる。このため、第2画像データ102の各画素の画素値は、図8(B)に示す各色波長帯107,109,111の部分に応じた値が含まれる。つまり、図8(B)に示した照明光が体腔内の観察部位に照射されることにより、照射された部分からの反射光を撮像素子31が受光して、各画素の画素値となっている。この画素値内には、観察部位にある緑色特殊光の観察に適した発赤や微細血管等に応じた緑色成分と、赤外特殊光により蛍光が生じる深層血管等と、白色成分が含まれている。なお、前述のように、撮像素子31は赤外特殊光に感度がなく、赤外特殊光によって励起される蛍光に感度があるので、第2画像データ102のR画素の画素値は、通常光の照射光量125の一部に比例した画素値と、蛍光の光量126に比例する画素値との合計になる。蛍光の光量126は、例えば、第2白色光透過領域72を透過した通常光の光量よりも小さい。
Similarly, a graph of the illumination light amount (integrated value) and wavelength irradiated on the subject in the second imaging period 96 is shown in FIG. 8B, and the green special light
DIP42は、撮像素子31の映像信号から各色の成分を抜き出し、これを比較,演算することにより通常光画像と特殊光画像を生成する。
The
照明光量と同様にして図9(A)に示すように、第1画像データ101のあるB画素の画素値131は、青色特殊光による画素値132と第1白色光透過領域71を透過した通常光による画素値133との合計値となっている。また、これに対応する第2画像データ102のB画素の画素値134は、図9(B)に示すように、第2白色光透過領域72を透過した通常光による画素値134となっている。
As in the case of the illumination light quantity, as shown in FIG. 9A, the
第1白色光透過領域による通常光の照明光量と第2白色光透過領域72による通常光の光量の比がわかっているため、図9(C)に示すように、第2画像データ102のB画素の画素値134を比に応じて演算すれば、第1白色光透過領域71を透過した通常光による画素値133と同じになる。例えば、第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比が1:2の場合は、画素値133を2倍にすれば良い。図9(D)に示すように、画素値134を演算した画素値135を、第1画像データ101のB画素の画素値131から差し引くことにより、青色特殊光による画素値132が算出される。後述する通常光画像のB画素の画素値には、画素値133を使うよりも色バランスがよくなるため、画素値131をそのまま使う。
Since the ratio of the amount of normal illumination light from the first white light transmission region and the amount of normal light from the second white
同様にして、図10(A)に示すように、第1画像データ101のあるG画素の画素値141は、第1白色光透過領域71を透過した通常光による画素値である。また、図10(B)に示すように、これに対応する第2画像データ102のあるG画素の画素値142は、第2白色光透過領域72を透過した通常光による画素値143と、緑色特殊光による画素値144との合計値となっている。
Similarly, as shown in FIG. 10A, the
このため、図10(C)に示すように、第1画像データ101のG画素の画素値141を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算することで画素値145を算出する。図10(D)に示すように、算出した画素値145を、第2画像データ102のG画素の画素値142から差し引くことにより、緑色特殊光による画素値144が算出される。後述する通常光画像のG画素の画素値には画素値141をそのまま使う。
For this reason, as shown in FIG. 10C, the
さらに、同様にして、図11(A)に示すように、第1画像データ101のあるR画素の画素値151は、第1白色光透過領域71を透過した通常光による画素値である。また、図11(B)に示すように、これに対応する第2画像データ102のあるR画素の画素値152は、第2白色光透過領域72を透過した通常光による画素値153と、赤外特殊光で励起された蛍光による画素値154との合計となっている。
Further, similarly, as shown in FIG. 11A, a
このため、図11(C)に示すように、第1画像データ101のR画素の画素値151を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算することで画素値155を算出する。図11(D)に示すように、算出した画素値155を、第2画像データ102のR画素の画素値152から差し引くことで、赤外特殊光で励起された蛍光による画素値154が算出される。
For this reason, as shown in FIG. 11C, the
これらの処理を視覚的に表すと、図12〜図16に示すようになる。図12に示すように、DIP42は、まず、第1画像データ101のB画素だけを抜き出して、第1画像データ101の青色の画像成分である第1青色画像データ161を中間的に生成する。同時に、DIP42は、第2画像データ102のB画素だけを抜き出して、第2画像データ102の青色の画像成分である第2青色画像データ162を中間的に生成する。
These processes are represented visually as shown in FIGS. As shown in FIG. 12, the
そして、通常光画像生成部51は、こうして生成された第1青色画像データ161を、通常光に含まれる青色光だけによって撮像された場合と同様の画像データ(以下、通常青色画像データという)として出力する(ステップS11)。また、特殊光画像生成部52は、第1青色画像データ161から、第2青色画像データ162を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、青色特殊光だけで撮像された場合と同様の画像データ164(以下、特殊青色画像データという)を生成する(ステップS12)。
Then, the normal light
同様に、図13に示すように、DIP42は、第1画像データ101のG画素だけを抜き出して、第1画像データ101の緑色の画像成分である第1緑色画像データ171を中間的に生成する。同時に、DIP42は、第2画像データ102のG画素だけを抜き出して、第2画像データ102の緑色の画像成分である第2緑色画像データ172を中間的に生成する。
Similarly, as shown in FIG. 13, the
通常光画像生成部51は、こうして生成された第1緑色画像データ171を、通常光に含まれる緑色光だけにより撮像された場合と同様の画像データ(以下、通常緑色画像データという)として出力する(ステップS21)。また、特殊光画像生成部52は、第2緑色画像データ172から、第1緑色画像データ171を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、緑色特殊光だけで撮像された場合と同様の画像データ174(以下、特殊緑色画像データという)を生成する(ステップS22)。
The normal light
さらに、図14に示すように、DIP42は、第1画像データ101のR画素だけを抜き出して、第1画像データ101の赤色の画像成分である第1赤色画像データ181を中間的に生成する。同時に、DIP42は、第2画像データ102のR画素だけを抜き出して、第2画像データ102の赤色の画像成分である第2赤色画像データ182を中間的に生成する。
Further, as shown in FIG. 14, the
通常光画像生成部51は、こうして生成された第1赤色画像データ181を、通常光に含まれる赤色光だけによって撮像された場合と同じ画像データ(以下、通常赤色画像データという)として出力する(ステップS31)。また、特殊光画像生成部52は、第2赤色画像データ182から、第1赤色画像データ181を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、赤外特殊光で励起された蛍光だけで撮像された場合と同様の画像データ184(以下、特殊赤色画像データ)を生成する(ステップS32)。
The normal light
こうして通常光画像及び特殊光画像の生成に必要な各種画像データ161,164,171,174,181,184を生成すると、図15に示すように、通常光画像生成部51は通常青色画像データ161、通常緑色画像データ171、通常赤色画像データ181を合成することにより、フルカラーの通常光画像191を生成する(ステップS41)。
When the
さらに、図16(A)〜(C)に示すように、特殊光画像生成部52は、特殊青色画像データ164,特殊緑色画像データ174,特殊赤色画像データ184を、各々設定に応じた適切な割合で通常光画像191に重畳することにより、特殊光画像192a〜192cを生成する(ステップS42)。特殊光画像192aは、通常光画像191に特殊青色画像データ164を重畳したものであり、表層血管やピットパターンが強調される。特殊光画像192bは通常光画像191に特殊緑色画像データ174を重畳したものであり、微細血管や発赤等が強調される。特殊光画像192cは通常光画像191に特殊赤色画像データ184を重畳したものであり、深層血管等が強調される。
Further, as shown in FIGS. 16A to 16C, the special light
上述のようにして、DIP42によって生成された通常光画像191や特殊光画像192a〜192cのうちいくつかの(あるいは全ての)観察画像は、図17に示すように、モニタ26上に並べて表示される。術者は、これらの観察画像を比較観察しながら、診断や治療を行う。もちろん、通常光画像191のみ、特殊光画像192a〜192cのうち1つのみ、通常光画像191と特殊光画像192a〜192cのうち一つを並べて表示しても良い。
As described above, some (or all) of the
以上のように、電子内視鏡システム11は、ロータリーフィルタ62によって照明光を変調しながら第1画像データ101と第2画像データ102を略同時に取得し、これらの画像データ101,102から通常光画像191や特殊光画像192a〜192cといった相互に特徴の異なる観察画像を生成する。このため、電子内視鏡システム11は、被写体の動きに影響されず、全く同じ状態の被写体に対して、通常光画像191と特殊光画像192a〜192cを同時に取得することができる。また、電子内視鏡システム11は通常光画像191と特殊光画像192a〜192cを同時に取得できるので、これらの観察画像を相互に比較観察することができる。このため、電子内視鏡システム11では、短時間に検査や診察を行うことができるとともに、被検者や術者の負担を軽減することができる。さらに、診断の正確性も高まる。
As described above, the
なお、第1白色光透過領域71と第2白色光透過領域72の透過光量は任意に定めることができる。但し、撮像素子31の各画素に蓄積することのできる信号電荷量には限度があるので、各画素の信号電荷の飽和を防止するために、上述の実施形態のように、通常光と特殊光を重ねて照射する撮像期間では、通常光の照射光量が小さくなっていることが好ましい。
Note that the amount of light transmitted through the first white light transmission region 71 and the second white
なお、上述の実施形態では、ロータリーフィルタ62の第1区画81には、第1白色光透過領域71、青色光透過領域73、第1遮光フィルタ77が設けられ、第2区画83に第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76、第2遮光フィルタ78が設けられているが、ロータリーフィルタ62に設ける白色光透過領域や選択的透過領域の配置や種類はこれ限らない。
In the above-described embodiment, the
例えば、図18に示すロータリーフィルタ201のように、第1区画81に、第1遮光フィルタ77と第1白色光透過領域202(中心角θ3)を回転方向82に沿って設け、第2区画83に、第2遮光フィルタ78、赤外光透過領域76、緑色光透過領域74、青色光透過領域73、第2白色光透過領域203(中心角θ4)を、回転方向82に沿って順に設けても良い。また、遮光フィルタ77,78が撮像素子31の読み出しのタイミングに同期して、光源61からの照明光を遮光する配置となっていれば、第1区画81や第2区画83内での各選択的透過領域や白色光透過領域の配置は互いに入れ替えても良い。また、同じ区画内で、白色光透過領域,青色光透過領域,白色光透過領域の順にするなど、白色光透過領域や選択的透過領域を2つに分割するなどしても良い。
For example, like the
なお、上述の実施形態では、2回の撮像に対してロータリーフィルタ62が1回転する例を説明したが、これに限らず、3回以上の撮像に対してロータリーフィルタ62が1回転するようにしても良い。この場合、ロータリーフィルタ62の1回転のうちに取得される複数の画像データの全てを用いて、通常光画像191や特殊光画像192a〜192cを生成しても良いし、ロータリーフィルタ62が1回転するうちに取得される複数の画像データのうち、一部を用いて通常光画像191や特殊光画像192a〜192cを生成するようにしても良い。但し、データの同時性が失われない程度が好ましい。
In the above-described embodiment, the example in which the
また、上述の実施形態では、第1白色光透過領域71及び第2白色光透過領域72を透過する光の波長帯は、480nm以上750nm以下となっているが、これに限らず、白色光透過領域は、より短波長の光を透過したり、より長波長の光を透過したり、各種特殊光の波長帯を含むようにさらに広範囲の波長帯を透過するようにしても良い。
In the above-described embodiment, the wavelength band of light transmitted through the first white light transmission region 71 and the second white
なお、上述の実施形態では、ロータリーフィルタ62に設けられた白色光透過領域,選択的透過領域,遮光フィルタは、中心角度と透過率の積によって実際の透過光量を調節しているが、これに限らず、白色光透過領域71,72や青色光透過領域73、緑色光透過領域74、赤外光透過領域76をいずれも同じ中心角範囲に設け、透過率だけを調節することで、各種照明光の実効的な照射光量を調節するようにしても良い。逆に、透過率を統一して、扇形区画の面積だけを違えても良い。
In the above-described embodiment, the white light transmission region, the selective transmission region, and the light shielding filter provided in the
なお、上述の実施形態では、青色光透過領域73、緑色光透過領域74、赤外光透過領域76の各々の透過率や透過光量は、撮像に十分な光量が得られる範囲内で各々任意に定めることができる。
In the above-described embodiment, the transmittance and the amount of transmitted light of each of the blue
なお、上述の実施形態では、遮光フィルタ77,78が、読出期間93,98に合致する中心角ωとなるように設けられているが、これに限らず、通常光や各種特殊光で十分な露光量が得られれば、上述の実施形態よりも大きな中心角範囲の遮光フィルタを設けても良い。また、メカニカルシャッタや、撮像素子31の電子シャッタによって十分な遮光性を得られるときには、ロータリーフィルタ62に遮光フィルタ77,78を設けなくても良い。
In the above-described embodiment, the light shielding filters 77 and 78 are provided so as to have a central angle ω that matches the
なお、上述の実施形態では、各種特殊光を選択的に透過する選択的透過領域として、ロータリーフィルタ62には青色光透過領域73、緑色光透過領域74、赤外光透過領域76を設ける例を説明したが、これに限らず、他の特殊光を選択的に透過させる選択的透過領域をロータリーフィルタ62に備えても良い。例えば、コラーゲン等の自家蛍光を利用して肥厚等を観察するために、波長600nm近傍の特殊光を選択的に透過する選択的透過領域をロータリーフィルタ62に設けても良い。
In the above-described embodiment, an example in which the
なお、上述の実施形態では、光源61としてキセノンランプ等の白色の高輝度光源を単独で用いるが、撮像に必要な波長帯の照明光を発することができれば、複数の光源を複合的に用いたり、切り替え自在に用いるようにしても良い。また、ガスランプに限らず、LEDやレーザーダイオード等の周知の光源を用いても良い。また、光源61は、白色の照明光を発するが、赤‐緑錐体の視感度の重なりを利用して擬似的に白色を実現する光源を用いても良い。
In the above-described embodiment, a white high-intensity light source such as a xenon lamp is used alone as the
なお、上述の実施形態では、青色特殊光によって陥凹や隆起を撮像する例を説明したが、これに限らず、これらの構造は、波長500nm近傍の光で観察することもできるので、画素値134を取り出すことによってこれらを観察するようにしても良い。 In the above-described embodiment, an example in which a depression or a ridge is imaged with blue special light has been described. However, the present invention is not limited thereto, and these structures can also be observed with light in the vicinity of a wavelength of 500 nm. You may make it observe these by taking out 134. FIG.
なお、上述の実施形態では、特殊光画像192a〜192cを生成するときに、通常光画像191に各種特殊光による画像データ164,174,184を重畳するが、これに限らず、各種特殊光による画像データ164,174,184だけを適切な比率で互いに重畳することで特殊光画像192a〜192cを生成するようにしても良い。
In the above-described embodiment, when the special light images 192a to 192c are generated, the
なお、上述の実施形態では、特殊光画像192a〜192cを生成するときに、通常光画像191に各種特殊光による画像データ164,174,184をそのまま重畳するが、これに限らず、各種特殊光による画像データ164,174,184を重畳するときに、これらの各種特殊光による成分を他の色に変換してから通常光画像191に重畳して、上述の実施形態とは配色の異なる特殊光画像192a〜192cを生成するようにしても良い。
In the above-described embodiment, when the special light images 192a to 192c are generated, the
なお、上述の実施形態では、通常光画像191に各種特殊光による画像データ164,174,184を各々重畳して特殊光画像192a〜192cを生成するが、これに限らず、各種特殊光による画像データ164,174,184のうちいくつかを適当な比率で通常光画像191に重畳することにより、各種特殊光で観察される複数の観察部位が同時に強調された特殊光画像を生成するようにしても良い。
In the above-described embodiment, the special light images 192a to 192c are generated by superimposing the
なお、上述の実施形態では、いわゆる線順次方式でフルカラーの画像を取得する例を説明したが、本発明を面順次式でフルカラーの画像を取得する電子内視鏡システムに適用しても良い。 In the above-described embodiment, an example in which a full-color image is acquired by a so-called line-sequential method has been described. However, the present invention may be applied to an electronic endoscope system that acquires a full-color image by a frame-sequential method.
なお、上述の実施形態では、通常光による画素値を算出し、これを利用して特殊光による画素値を算出する例を説明したが、第1画像データ101や第2画像データ102から通常光による画素値や特殊光による画素値を算出する計算の手順は、上述の実施形態の例に限らない。例えば、先に特殊光による画素値を算出し、これを用いて通常光による画素値を算出するようにしても良い。
In the above-described embodiment, the pixel value based on the normal light is calculated and the pixel value based on the special light is calculated using the normal light. However, the normal light is calculated from the
なお、上述の実施形態では、生体内を観察する電子内視鏡システム11を例に説明したが、観察する対象はこれに限らず、配管やトンネル構造等を損傷せずに内部から観察する観察装置等にも本発明を好適に用いることができる。
In the above-described embodiment, the
なお、上述の実施形態では、第1白色光透過領域71は、扇形の領域内が全て白色光を透過する領域となっているが、これに限らず、白色光を透過する領域は、第1白色光透過領域71に各々割り当てられた扇形の領域の一部分であっても良い。例えば、第1白色光透過領域71に割り当てられた扇形の領域のうち、ロータリーフィルタ62の外周に沿った帯状の部分だけが白色光を透過するようにしても良い。このことは、第2白色光透過領域72についても同様である。また、青色光透過領域73、緑色光透過領域74、赤外光透過領域76についても、各色の特殊光を透過する領域は各色光透過領域73,74,76に割り当てられた扇形の領域の一部分であっても良い。さらに、第1遮光フィルタ77、第2遮光フィルタ78についても、照明光を遮光する領域は、これらに割り当てられた扇形の領域の一部分であっても良い。
In the above-described embodiment, the first white light transmission region 71 is a region that transmits all white light in the fan-shaped region. However, the first white light transmission region 71 is not limited to this, and the region that transmits white light is the first region. It may be a part of the fan-shaped area respectively assigned to the white light transmission area 71. For example, only the band-shaped portion along the outer periphery of the
なお、上述の実施形態では、撮像素子31にはRGB3色のカラーフィルタが画素毎に配置され、DIP42が観察画像を生成するときには、RGBの基本色毎の成分を抜き出す例を説明したが、撮像素子31にはイエロー、シアン、マゼンタの3色(あるいは、これにグリーンを加えた4色)の補色系カラーフィルタを画素毎に配置し、DIP42が観察画像を生成するときには、イエロー、シアン、マゼンタ(、グリーン)の各色成分を抜き出して比較、演算するようにしても良い。
In the above-described embodiment, an example in which RGB color filters are arranged for each pixel in the
11 電子内視鏡システム
12 電子内視鏡
13 プロセッサ装置
14 光源装置
31 撮像素子
33,41,63 CPU
42 DIP
43 DSP
51 通常光画像生成部
52 特殊光画像生成部
61 光源
62,201 ロータリーフィルタ
71,202 第1白色光透過領域
72,203 第2白色光透過領域
73 青色光透過領域
74 緑色光透過領域
76 赤外光透過領域
77 第1遮光フィルタ
78 第2遮光フィルタ
101 第1画像データ
102 第2画像データ
161 第1青色画像データ
162 第2青色画像データ
163 通常青色画像データ
164 特殊青色画像データ
171 第1緑色画像データ
172 第2緑色画像データ
173 通常緑色画像データ
174 特殊緑色画像データ
181 第1赤色画像データ
182 第2赤色画像データ
183 通常赤色画像データ
184 特殊赤色画像データ
191 通常光画像
192 特殊光画像
DESCRIPTION OF
42 DIP
43 DSP
DESCRIPTION OF
Claims (6)
前記被写体に照射する照明光を発生する光源と、
前記光源の前方に回転自在に配置され、前記撮像手段による複数回の撮像に同期して回転し、前記撮像手段による1回の撮像に対応する所定中心角の扇形区画のうち少なくとも一つの前記扇形区画内に、ある波長を中心として前記撮像素子の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域を有し、前記扇形区画の全てに白色光の波長帯成分を透過する白色光透過領域を有するロータリーフィルタと、
前記ロータリーフィルタが回転する間に撮像された画像データから、相互に特徴の異なる複数の観察画像を生成する観察画像生成手段と、
を備えることを特徴とする電子内視鏡システム。 Imaging means for imaging the subject by photoelectrically converting light from the subject;
A light source that generates illumination light to irradiate the subject;
At least one of the fan-shaped sections of a fan-shaped section having a predetermined central angle, which is rotatably arranged in front of the light source, rotates in synchronization with a plurality of times of imaging by the imaging means, and corresponds to one imaging by the imaging means. The section has a selective transmission region that selectively transmits a wavelength band component narrower than the wavelength band to which the pixel of the image sensor is sensitive, centered on a certain wavelength, and all the fan-shaped sections have a wavelength band of white light. A rotary filter having a white light transmission region that transmits the component;
Observation image generation means for generating a plurality of observation images having different characteristics from image data captured while the rotary filter rotates,
An electronic endoscope system comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008264950A JP2010094152A (en) | 2008-10-14 | 2008-10-14 | Electron endoscopic system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008264950A JP2010094152A (en) | 2008-10-14 | 2008-10-14 | Electron endoscopic system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010094152A true JP2010094152A (en) | 2010-04-30 |
Family
ID=42256278
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008264950A Abandoned JP2010094152A (en) | 2008-10-14 | 2008-10-14 | Electron endoscopic system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010094152A (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011254936A (en) * | 2010-06-08 | 2011-12-22 | Fujifilm Corp | Electronic endoscope system, processor device for electronic endoscope, and tracing method |
WO2013111623A1 (en) * | 2012-01-25 | 2013-08-01 | 富士フイルム株式会社 | Endoscope system, processor device for endoscope system, and image processing method |
CN109060679A (en) * | 2018-09-07 | 2018-12-21 | 中国计量科学研究院 | Ultraspectral transmittance etalon and visibility measurement device |
CN110226911A (en) * | 2014-07-10 | 2019-09-13 | 柯惠Lp公司 | Endoscopic system |
EP2481343B1 (en) * | 2011-01-27 | 2020-05-06 | Fujifilm Corporation | Processing unit for endoscope system and image processing method |
KR20200090632A (en) * | 2019-01-18 | 2020-07-29 | 아이알트로닉스 인코퍼레이티드 | acoustic device comprising semiconductor light source |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02206423A (en) * | 1989-02-07 | 1990-08-16 | Toshiba Corp | Endoscopic apparatus |
JP2686089B2 (en) * | 1988-02-26 | 1997-12-08 | オリンパス光学工業株式会社 | Light source device for endoscope |
JP2002095635A (en) * | 2000-07-21 | 2002-04-02 | Olympus Optical Co Ltd | Endoscope system |
JP3586157B2 (en) * | 1999-12-20 | 2004-11-10 | オリンパス株式会社 | Subject observation device |
JP2008237394A (en) * | 2007-03-26 | 2008-10-09 | Olympus Medical Systems Corp | Endoscope system |
-
2008
- 2008-10-14 JP JP2008264950A patent/JP2010094152A/en not_active Abandoned
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2686089B2 (en) * | 1988-02-26 | 1997-12-08 | オリンパス光学工業株式会社 | Light source device for endoscope |
JPH02206423A (en) * | 1989-02-07 | 1990-08-16 | Toshiba Corp | Endoscopic apparatus |
JP3586157B2 (en) * | 1999-12-20 | 2004-11-10 | オリンパス株式会社 | Subject observation device |
JP2002095635A (en) * | 2000-07-21 | 2002-04-02 | Olympus Optical Co Ltd | Endoscope system |
JP2008237394A (en) * | 2007-03-26 | 2008-10-09 | Olympus Medical Systems Corp | Endoscope system |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011254936A (en) * | 2010-06-08 | 2011-12-22 | Fujifilm Corp | Electronic endoscope system, processor device for electronic endoscope, and tracing method |
US8585586B2 (en) | 2010-06-08 | 2013-11-19 | Fujifilm Corporation | Electronic endoscope system, processor for electronic endoscope, and target tracing method |
EP2481343B1 (en) * | 2011-01-27 | 2020-05-06 | Fujifilm Corporation | Processing unit for endoscope system and image processing method |
WO2013111623A1 (en) * | 2012-01-25 | 2013-08-01 | 富士フイルム株式会社 | Endoscope system, processor device for endoscope system, and image processing method |
JP2013150713A (en) * | 2012-01-25 | 2013-08-08 | Fujifilm Corp | Endoscope system, processor device for endoscope system, and image processing method |
CN104023618A (en) * | 2012-01-25 | 2014-09-03 | 富士胶片株式会社 | Endoscope System, Processor Device For Endoscope System, And Image Processing Method |
CN110226911A (en) * | 2014-07-10 | 2019-09-13 | 柯惠Lp公司 | Endoscopic system |
CN109060679A (en) * | 2018-09-07 | 2018-12-21 | 中国计量科学研究院 | Ultraspectral transmittance etalon and visibility measurement device |
KR20200090632A (en) * | 2019-01-18 | 2020-07-29 | 아이알트로닉스 인코퍼레이티드 | acoustic device comprising semiconductor light source |
KR102340308B1 (en) * | 2019-01-18 | 2021-12-17 | 아이알트로닉스 인코퍼레이티드 | acoustic device comprising semiconductor light source |
US11882392B2 (en) | 2019-01-18 | 2024-01-23 | Irtronix, Inc. | Sound output device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3713347B2 (en) | Fluorescence endoscope device | |
JP4855728B2 (en) | Illumination device and observation device | |
JP5496852B2 (en) | Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system | |
JP5501210B2 (en) | Image processing device | |
JP5419931B2 (en) | Endoscope system, light source device, and operation method of endoscope system | |
JP5637834B2 (en) | Endoscope device | |
JP5431252B2 (en) | Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system | |
JP6581984B2 (en) | Endoscope system | |
WO2012043771A1 (en) | Imaging device | |
JP5757891B2 (en) | Electronic endoscope system, image processing apparatus, operation method of image processing apparatus, and image processing program | |
WO2006132191A1 (en) | Endoscope and image processing device | |
JP2005131130A (en) | Image processing device | |
JP2010094153A (en) | Electron endoscopic system and observation image forming method | |
JP2012065898A (en) | Electronic endoscope system | |
JP2010213993A (en) | Endoscope system, endoscope processor, and method for driving endoscope | |
JP5539840B2 (en) | Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system | |
JP4297887B2 (en) | Fluorescence endoscope device | |
JP2010094152A (en) | Electron endoscopic system | |
JP5579672B2 (en) | Endoscope system and light source device | |
JP6085648B2 (en) | Endoscope light source device and endoscope system | |
JP5334952B2 (en) | Image processing device | |
WO2006004038A1 (en) | Light source device and fluorescence observation system | |
WO2019176253A1 (en) | Medical observation system | |
JP6214503B2 (en) | Endoscope light source device and endoscope system | |
JP2006271869A (en) | Electronic endoscope apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110628 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130227 |
|
A762 | Written abandonment of application |
Free format text: JAPANESE INTERMEDIATE CODE: A762 Effective date: 20130307 |