JP2010094152A - Electron endoscopic system - Google Patents

Electron endoscopic system Download PDF

Info

Publication number
JP2010094152A
JP2010094152A JP2008264950A JP2008264950A JP2010094152A JP 2010094152 A JP2010094152 A JP 2010094152A JP 2008264950 A JP2008264950 A JP 2008264950A JP 2008264950 A JP2008264950 A JP 2008264950A JP 2010094152 A JP2010094152 A JP 2010094152A
Authority
JP
Japan
Prior art keywords
light
image
image data
transmission region
special
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Abandoned
Application number
JP2008264950A
Other languages
Japanese (ja)
Inventor
Hiroyuki Hasegawa
博之 長谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2008264950A priority Critical patent/JP2010094152A/en
Publication of JP2010094152A publication Critical patent/JP2010094152A/en
Abandoned legal-status Critical Current

Links

Images

Landscapes

  • Endoscopes (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an electron endoscopic system for acquiring a usual light image and a special light image at the same time. <P>SOLUTION: The electron endoscopic system 11 includes an imaging element 31, a light source 61, a rotary filter 62 and a DIP 42. The imaging element 31 photoelectrically converts the light from a subject to image the subject, and the light source 61 emits the illumination light thrown on the subject. The rotary filter 62 is arranged in front of the light source 61 in a freely rotatable manner to rotate in synchronous relation to a plurality of times of the imaging steps by the imaging element 31, has a selective region selectively pervious to a narrow wavelength band component within at least one predetermined center angle of a fan-shaped section of which the predetermined center angle corresponds to one imaging by the imaging element 31 and also has a white light pervious region in the whole of the fan-shaped section. The DIP 42 forms a plurality of observation images, which are different in feature from each other, from the image data imaged during the rotation of the rotary filter 62. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、被写体の内部を撮像して観察画像を得る電子内視鏡システムに関し、さらに詳しくは、被写体に照射する照明光の波長を切り替えながら複数種類の観察画像を得る電子内視鏡システムに関する。   The present invention relates to an electronic endoscope system that captures an inside of a subject and obtains an observation image, and more particularly relates to an electronic endoscope system that obtains a plurality of types of observation images while switching the wavelength of illumination light applied to the subject. .

従来、医療分野において、電子内視鏡システムが広く普及している。電子内視鏡システムによれば、微小な撮像装置が設けられた電子内視鏡の細長い挿入部を被検者の体内に挿入し、被検者の体内をリアルタイムに撮像しながら診断や治療を行うことができる。   Conventionally, electronic endoscope systems have been widely used in the medical field. According to the electronic endoscope system, an elongated insertion portion of an electronic endoscope provided with a minute imaging device is inserted into a subject's body, and diagnosis and treatment are performed while imaging the subject's body in real time. It can be carried out.

電子内視鏡システムでフルカラーの観察画像を得る方式としては、線順次方式と面順次方式の2種の撮像方式が知られている。線順次方式は、RGB各色を配列したカラーフィルタを撮像素子上に配置し、RGB各色の信号を取得する撮像方式である。面順次方式は、RGB各色の照明光を被写体に順に照射しながら撮像し、得られた各色の画像を合成して、白色の照明光を照射したときに得られるもとの同様の1つの観察画像を得る撮像方式である。   As a method for obtaining a full-color observation image with an electronic endoscope system, two types of imaging methods, a line sequential method and a frame sequential method, are known. The line-sequential method is an image pickup method in which a color filter in which RGB colors are arranged is arranged on an image pickup element and signals of RGB colors are acquired. The frame sequential method captures images while sequentially irradiating RGB illumination lights on the subject, combines the obtained images of the respective colors, and obtains the same single observation obtained when the illumination light is irradiated with white. This is an imaging method for obtaining an image.

このように撮像方式にかかわらず、従来の電子内視鏡システムでは、白色の照明光(以下、通常光)を照射して撮像したときに得られる観察画像が取得される。   As described above, regardless of the imaging method, in the conventional electronic endoscope system, an observation image obtained when imaging is performed by irradiating white illumination light (hereinafter, normal light).

しかし、表面からの深さや構造のサイズ等の特徴によっては、観察部位を通常光では明瞭に観察できないことがある。通常光では明瞭に観察することが難しいものとしては、例えば、表層血管,ピットパターン(腺口構造),陥凹や隆起といった中規模の凹凸構造、微細血管や発赤,肥厚,深層血管等がある。こうした構造は、特定の波長の光を照明光として用いることで明瞭に観察することができることが知られている。   However, depending on characteristics such as the depth from the surface and the size of the structure, the observation site may not be clearly observed with normal light. Things that are difficult to observe clearly with normal light include, for example, superficial blood vessels, pit patterns (gland opening structures), medium-scale uneven structures such as depressions and ridges, fine blood vessels, redness, thickening, and deep blood vessels . It is known that such a structure can be clearly observed by using light of a specific wavelength as illumination light.

例えば、表層の血管やピットパターン等の観察部位表面の微細構造は、波長450nm近傍の照明光で観察することができ、観察部位の陥凹や隆起等のマクロな凹凸構造は、波長500nm近傍の照明光で観察することができる。また、波長550nm近傍の照明光は、ヘモグロビンによる吸収率が高く、微細血管や発赤の観察に適し、波長600nm近傍の照明光は肥厚の観察に適していることが知られている。さらに、深層血管の観察には、インドシアニングリーン(ICG)等の蛍光物質を静脈注射し、波長780nm近傍の光を照明光として用いることで明瞭に観察することができる。   For example, the fine structure of the surface of the observation site such as a blood vessel or pit pattern in the surface layer can be observed with illumination light having a wavelength of around 450 nm, and a macro uneven structure such as a depression or a bulge in the observation site has a wavelength of around 500 nm. It can be observed with illumination light. Further, it is known that illumination light in the vicinity of a wavelength of 550 nm has a high absorption rate by hemoglobin, and is suitable for observation of fine blood vessels and redness, and illumination light in the vicinity of a wavelength of 600 nm is suitable for observation of thickening. Furthermore, the deep blood vessels can be observed clearly by injecting a fluorescent substance such as indocyanine green (ICG) intravenously and using light in the vicinity of a wavelength of 780 nm as illumination light.

こうしたことから、近年では、通常光では観察し難い構造をも観察し易くするために、上述のような狭い波長帯の照明光(以下、特殊光という)を、観察する構造に応じて切り替えながら用いることができるようにした電子内視鏡システムが知られている(特許文献1,2)。
特許3586157号 特許2686089号
Therefore, in recent years, in order to facilitate observation of structures that are difficult to observe with normal light, the illumination light having a narrow wavelength band as described above (hereinafter referred to as special light) is switched according to the structure to be observed. An electronic endoscope system that can be used is known (Patent Documents 1 and 2).
Japanese Patent No. 3586157 Japanese Patent No. 2686089

特許文献1,2に記載の発明には、通常光や種々の特殊光を適宜切り替えながら用いるために、複数の光学フィルタを予め設けておき、これらを交換して照明光を切り替えることが記載されている。しかしながら、特許文献1,2のように光学フィルタを交換することによって特徴の異なる画像を撮像するには、撮像したい被写体の特徴の種類に応じて、特殊光の種類や特殊光の組み合わせが異なる光学フィルタを予め多数用意しておく必要があり、照明光を作り出す光源装置の構成が煩雑になるとともに、高価になってしまうという問題がある。   In the inventions described in Patent Documents 1 and 2, in order to use normal light and various special lights while appropriately switching, a plurality of optical filters are provided in advance and the illumination light is switched by exchanging them. ing. However, in order to capture images with different characteristics by exchanging optical filters as in Patent Documents 1 and 2, depending on the type of characteristics of the subject to be imaged, the type of special light and the combination of special light are different. It is necessary to prepare a large number of filters in advance, and there is a problem that the configuration of the light source device that generates illumination light becomes complicated and expensive.

また、光学フィルタを交換して照明光を切り替えるようにした場合、光学フィルタの切り替えにある程度の時間を要するため、通常光による観察画像(以下、通常光画像という)と、特殊光による観察画像(以下、特殊光画像)を同時に得ることができない。このため、被検者の体内のように常に動いている被写体を観察する場合、光学フィルタを切り替える間に、被写体の向きや形状が変化してしまうので、同じ状態で通常光画像と特殊光画像を比較観察することができないという問題がある。   In addition, when switching the illumination light by exchanging the optical filter, it takes a certain amount of time to switch the optical filter, so that an observation image with normal light (hereinafter referred to as a normal light image) and an observation image with special light ( Hereinafter, a special light image) cannot be obtained simultaneously. For this reason, when observing a subject that is constantly moving, such as inside the body of the subject, the orientation and shape of the subject change while switching the optical filter, so the normal light image and the special light image in the same state. There is a problem that comparative observation cannot be performed.

本発明は上述の問題点に鑑みてなされたものであり、通常光画像と特殊光画像のように、相互に特徴の異なる複数の観察画像を同じ状態の被写体に対して複数同時に取得することができる電子内視鏡システムを提供することを目的とする。   The present invention has been made in view of the above-described problems, and it is possible to simultaneously acquire a plurality of observation images having different characteristics from each other, such as a normal light image and a special light image, with respect to a subject in the same state. An object of the present invention is to provide an electronic endoscope system that can be used.

本発明の電子内視鏡システムは、被写体からの光を光電変換することにより、前記被写体を撮像する撮像手段と、前記被写体に照射する照明光を発生する光源と、前記光源の前方に回転自在に配置され、前記撮像手段による複数回の撮像に同期して回転し、前記撮像手段による1回の撮像に対応する所定中心角の扇形区画のうち少なくとも一つの前記扇形区画内に、ある波長を中心として前記撮像素子の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域を有し、前記扇形区画の全てに白色光の波長帯成分を透過する白色光透過領域を有するロータリーフィルタと、前記ロータリーフィルタが回転する間に撮像された画像データから、相互に特徴の異なる複数の観察画像を生成する観察画像生成手段と、を備えることを特徴とする。   An electronic endoscope system according to the present invention includes an imaging unit that images a subject by photoelectrically converting light from the subject, a light source that generates illumination light that irradiates the subject, and a front light source that is rotatable. The wavelength is set in at least one of the sector-shaped sections among the sector-shaped sections having a predetermined central angle corresponding to one-time imaging by the imaging means. A white light transmission that has a selective transmission region that selectively transmits a wavelength band component narrower than a wavelength band to which the pixel of the image sensor is sensitive at the center, and transmits the wavelength band component of white light in all of the sector-shaped sections. A rotary filter having a region, and observation image generation means for generating a plurality of observation images having different characteristics from image data captured while the rotary filter rotates And wherein the door.

前記白色光は、500nmよりも長く750nmよりも短い波長帯の光を含み、450nmより短い波長帯の光は500nmの波長の光の光量の1/10以下、780nmより長い波長帯の光は750nmの波長の光の光量の1/10以下であることを特徴とする。   The white light includes light having a wavelength band longer than 500 nm and shorter than 750 nm, light having a wavelength band shorter than 450 nm is 1/10 or less of the amount of light having a wavelength of 500 nm, and light having a wavelength band longer than 780 nm is 750 nm. It is 1/10 or less of the light quantity of the light of the wavelength.

前記選択的透過領域を透過する光は、450、500、550、600、または780nm近傍のいずれかに中心波長を有するものであることを特徴とする。   The light transmitted through the selective transmission region has a center wavelength in the vicinity of 450, 500, 550, 600, or 780 nm.

前記ロータリーフィルタは、前記扇形区画毎に、前記撮像手段の電荷読出期間に対応して前記照明光を遮光する遮光領域を有することを特徴とする。   The rotary filter has a light-shielding region that shields the illumination light corresponding to a charge reading period of the imaging means for each of the fan-shaped sections.

前記観察画像生成手段は、複数の前記画像データから色の成分を各々抜き出して、前記選択的透過領域を透過した照明光を照射して撮像したときに得られる中間画像データを算出することを特徴とする。   The observation image generation means extracts color components from each of the plurality of image data, and calculates intermediate image data obtained when imaging is performed by irradiating illumination light transmitted through the selective transmission region. And

前記観察画像生成手段は、前記中間画像データから、前記被写体の所定部位を強調した強調画像を生成することを特徴とする。   The observation image generation unit generates an emphasized image in which a predetermined portion of the subject is emphasized from the intermediate image data.

本発明によれば、通常光画像と特殊光画像を同時に取得することができ、通常光画像と特殊光画像を容易に比較することができる。また、交換用の光学フィルタを多数用意する必要がなく、電子内視鏡システムを安価に、簡素に構成することができる。   According to the present invention, the normal light image and the special light image can be acquired simultaneously, and the normal light image and the special light image can be easily compared. In addition, it is not necessary to prepare a large number of replacement optical filters, and the electronic endoscope system can be simply configured at low cost.

図1に示すように、電子内視鏡システム11は、電子内視鏡12、プロセッサ装置13、光源装置14等から構成される。電子内視鏡12は、挿入部16、手元操作部17、ユニバーサルコード18等から構成される。   As shown in FIG. 1, the electronic endoscope system 11 includes an electronic endoscope 12, a processor device 13, a light source device 14, and the like. The electronic endoscope 12 includes an insertion unit 16, a hand operation unit 17, a universal cord 18, and the like.

挿入部16は、被検者の体内(以下、被写体という)に挿入され、被写体の形状に応じて自在に湾曲する。また、挿入部16の先端部分16aには、撮像素子31(図2参照)を内蔵した撮像装置が設けられている。   The insertion unit 16 is inserted into the body of the subject (hereinafter referred to as a subject) and is freely curved according to the shape of the subject. In addition, an imaging device incorporating an imaging element 31 (see FIG. 2) is provided at the distal end portion 16a of the insertion portion 16.

先端部分16aの端面には、前方に照明光を照射する照明窓16bや、被写体からの光を撮像素子31に導く観察窓16c(ともに図2参照)、各種処置具が露出される鉗子出口、洗浄水や空気等が噴射される送気送水ノズル等が設けられている。   On the end face of the distal end portion 16a, there are an illumination window 16b that irradiates illumination light forward, an observation window 16c that guides light from the subject to the image sensor 31 (see FIG. 2), a forceps outlet from which various treatment tools are exposed, An air supply / water supply nozzle or the like for injecting cleaning water or air is provided.

先端部分16aの後方には、湾曲部19が設けられている。この湾曲部19は、複数の湾曲駒が連結されたものであり、挿入部16に挿通されたワイヤが手元操作部17に設けられたアングルノブ21と連結されている。湾曲部19は、アングルノブ21の回転操作に応じてワイヤが押し引きされることにより、上下左右に自在に湾曲する。これにより、先端部分16aの位置や向きが所望の方向に自在に調節される。   A bending portion 19 is provided behind the distal end portion 16a. The bending portion 19 is formed by connecting a plurality of bending pieces, and a wire inserted through the insertion portion 16 is connected to an angle knob 21 provided in the hand operation portion 17. The bending portion 19 is freely bent up and down and left and right as the wire is pushed and pulled according to the rotation operation of the angle knob 21. Thereby, the position and orientation of the tip portion 16a are freely adjusted in a desired direction.

手元操作部17は、前述のように湾曲部19を操作するアングルノブ21のほかに、鉗子口22や、送気送水ボタン等の各種操作ボタン23が設けられている。鉗子口22には、注射針や高周波メスといった各種処置具が挿入される。鉗子口22から挿入された各種処置具は、前述のように鉗子出口から被写体に向けて露出される。また、送気送水ボタンは、図示しない送気送水装置から供給される空気や洗浄水の送気,送水を制御する。   The hand operation unit 17 is provided with various operation buttons 23 such as a forceps port 22 and an air / water supply button in addition to the angle knob 21 for operating the bending portion 19 as described above. Various treatment tools such as an injection needle and a high-frequency knife are inserted into the forceps port 22. Various treatment tools inserted from the forceps port 22 are exposed from the forceps outlet toward the subject as described above. The air / water supply button controls the air and water supplied from an air / water supply device (not shown).

ユニバーサルコード18は、基端部分に設けられたコネクタ24によって、電子内視鏡12と光源装置14を光学的に接続する。また、ユニバーサルコード18は、コネクタ24の他端で、電子内視鏡12をプロセッサ装置13に電気的に接続する。   The universal cord 18 optically connects the electronic endoscope 12 and the light source device 14 by a connector 24 provided at a proximal end portion. The universal cord 18 electrically connects the electronic endoscope 12 to the processor device 13 at the other end of the connector 24.

プロセッサ装置13は、電子内視鏡12、光源装置14、モニタ26等に接続されており、電子内視鏡システム11の動作を統括的に制御する。光源装置14は、ユニバーサルコード18や挿入部16に挿通されたライトガイドを通じて、被写体の観察部位に向けて照明光を照射する。   The processor device 13 is connected to the electronic endoscope 12, the light source device 14, the monitor 26, and the like, and comprehensively controls the operation of the electronic endoscope system 11. The light source device 14 irradiates illumination light toward the observation site of the subject through a light guide inserted through the universal cord 18 and the insertion portion 16.

図2に示すように、電子内視鏡12は、撮像素子31、AFE32、CPU33、ライトガイド34等から構成される。   As shown in FIG. 2, the electronic endoscope 12 includes an image sensor 31, an AFE 32, a CPU 33, a light guide 34, and the like.

撮像素子31は、CCD型のイメージセンサであり、前方には対物レンズ36が配置されている。撮像素子31は、RGBいずれかのカラーフィルタが画素毎に配置されており、対物レンズ36によって撮像面に結像される被写体からの光を、RGB3色の基本色毎に光電変換して露光量に応じた信号電荷を蓄積する。撮像素子31は、各画素で蓄積した信号電荷を撮像信号として出力する。撮像素子31からの撮像信号は、AFE32を介してプロセッサ装置13に入力される。なお、ここでは撮像素子31としてCCD型のイメージセンサを用いるが、撮像素子31としてCMOS型のイメージセンサを用いても良い。   The image sensor 31 is a CCD type image sensor, and an objective lens 36 is disposed in front thereof. The image pickup device 31 has any of RGB color filters arranged for each pixel, and photoelectrically converts light from the subject imaged on the image pickup surface by the objective lens 36 for each of the three basic colors of RGB, and the exposure amount. The signal charge corresponding to is accumulated. The image sensor 31 outputs the signal charge accumulated in each pixel as an image signal. An imaging signal from the imaging element 31 is input to the processor device 13 via the AFE 32. Here, a CCD image sensor is used as the image sensor 31, but a CMOS image sensor may be used as the image sensor 31.

AFE32は、相関二重サンプリング回路(CDS)、自動ゲイン制御回路(AGC)、アナログデジタル変換回路(A/D)から構成される。CDSは、撮像素子31から出力される撮像信号に対して相関二重サンプリング処理を施し、撮像素子31の駆動により生じたノイズを除去する。AGCは、CDSによりノイズが除去された撮像信号を増幅する。A/Dは、AGCで増幅された撮像信号を、所定のビット数のデジタルな撮像信号に変換してプロセッサ装置13に入力する。   The AFE 32 includes a correlated double sampling circuit (CDS), an automatic gain control circuit (AGC), and an analog / digital conversion circuit (A / D). The CDS performs correlated double sampling processing on the image signal output from the image sensor 31 to remove noise generated by driving the image sensor 31. The AGC amplifies the imaging signal from which noise has been removed by CDS. The A / D converts the image signal amplified by the AGC into a digital image signal having a predetermined number of bits and inputs it to the processor device 13.

CPU33は、プロセッサ装置13のCPU41と通信し、電子内視鏡12の各部の動作を統括的に制御する。例えば、CPU33は、プロセッサ装置13のCPU41からの制御信号に基づいて、タイミングジェネレータ(TG)37に所定のタイミングイ信号を生じさせることにより、撮像素子31の動作を制御し、撮像素子31に撮像信号を出力させる。   The CPU 33 communicates with the CPU 41 of the processor device 13 and comprehensively controls the operation of each unit of the electronic endoscope 12. For example, the CPU 33 controls the operation of the image sensor 31 by causing the timing generator (TG) 37 to generate a predetermined timing signal based on a control signal from the CPU 41 of the processor device 13, and images the image sensor 31. Output a signal.

ライトガイド34は、ユニバーサルコード18や挿入部16の内部に挿通されており、一端が照明窓16bにレンズ38を介して接続され、他端はコネクタ24で光源装置14に接続される。光源装置14からの照明光は、ライトガイド34を通じて、照明窓16bから被写体の観察部位へと照射される。   The light guide 34 is inserted into the universal cord 18 and the insertion portion 16, one end is connected to the illumination window 16 b via the lens 38, and the other end is connected to the light source device 14 via the connector 24. Illumination light from the light source device 14 is irradiated through the light guide 34 from the illumination window 16b to the observation site of the subject.

プロセッサ装置13は、CPU41、DSP43、DIP42(観察画像生成手段)、表示制御回路44等から構成される。   The processor device 13 includes a CPU 41, a DSP 43, a DIP 42 (observation image generating means), a display control circuit 44, and the like.

CPU41は、ROM(図示しない)に格納された制御プログラムを実行することにより、システムバス47を介して接続されたプロセッサ装置13の各部の動作を制御する。また、CPU41は、電子内視鏡12のCPU33や光源装置14のCPU63と通信し、電子内視鏡12や光源装置14の動作を制御することにより、電子内視鏡システム11を統括的に制御する。   The CPU 41 controls the operation of each unit of the processor device 13 connected via the system bus 47 by executing a control program stored in a ROM (not shown). Further, the CPU 41 communicates with the CPU 33 of the electronic endoscope 12 and the CPU 63 of the light source device 14 to control the operation of the electronic endoscope 12 and the light source device 14, thereby comprehensively controlling the electronic endoscope system 11. To do.

DSP43は、AFE32から入力されるデジタルの撮像信号に対して、色補間、ホワイトバランス調節、ガンマ補正等の各種画像処理を施し、通常光画像や特殊光画像をモニタ26への表示に適した画像データにする。   The DSP 43 performs various image processing such as color interpolation, white balance adjustment, and gamma correction on the digital imaging signal input from the AFE 32, and is an image suitable for displaying the normal light image and the special light image on the monitor 26. Make data.

DIP42は、DSP43から出力された画像データから、モニタ26上に表示する観察画像を生成する。また、DIP42は、被写体を撮像するごとに入力される撮像信号を画像データとしてフレームメモリに複数蓄積する。DIP42がフレームメモリに蓄積する画像データは、後述するロータリーフィルタ62が1回転するうちに撮像された撮像回数分(ここでは2回分)の画像データである。   The DIP 42 generates an observation image to be displayed on the monitor 26 from the image data output from the DSP 43. Further, the DIP 42 accumulates a plurality of image pickup signals input every time the subject is imaged in the frame memory as image data. The image data stored in the frame memory by the DIP 42 is image data for the number of times of imaging (in this case, twice) taken while the rotary filter 62 (described later) rotates once.

DIP42は、通常光画像生成部51と特殊光画像生成部52を備えている。通常光画像生成部51は、フレームメモリに蓄積された2つの画像データから、RGBの基本色毎の成分を抜き出して、比較、演算することにより、通常光で照明しながら撮像したときに得られる各画素の露光量を算出する。(以下では、各画素の露光量を単に画素値と称する。)通常光画像生成部51は、こうして算出された画素値を各画素の画素値とした通常光画像を生成する。通常光画像生成部51によって生成された通常光画像は、再びフレームメモリに格納される。   The DIP 42 includes a normal light image generation unit 51 and a special light image generation unit 52. The normal light image generation unit 51 extracts the components for each of the RGB basic colors from the two image data stored in the frame memory, compares and calculates them, and obtains the image while illuminating with normal light. The amount of exposure for each pixel is calculated. (Hereinafter, the exposure amount of each pixel is simply referred to as a pixel value.) The normal light image generation unit 51 generates a normal light image using the pixel value thus calculated as the pixel value of each pixel. The normal light image generated by the normal light image generation unit 51 is stored again in the frame memory.

特殊光画像生成部52は、フレームメモリに蓄積された2つの画像データから、RGBの基本色毎の成分を抜き出して、比較、演算することにより、特殊光で照明しながら撮像したときに得られる画素値を画素毎に算出する。特殊光画像生成部52は、特殊光による画素値を、通常光画像生成部51で生成された通常光画像に重畳することにより、被写体の特定の構造が強調された特殊光画像を生成する。また、特殊光画像生成部52は、被写体の種類等に応じた電子内視鏡システム11の設定に基づいて、強調する部位等が異なる複数の特殊光画像を生成する。特殊光画像生成部52によって生成された特殊光画像は、再びフレームメモリに格納される。また、DIP42は、CPU41からの制御にしたがって、通常光画像や特殊光画像に対して、電子変倍やエッジ強調処理等のさらなる付加的な画像処理を施す。   The special light image generation unit 52 extracts the components for each of the RGB basic colors from the two image data stored in the frame memory, compares and calculates them, and obtains the image while illuminating with special light. A pixel value is calculated for each pixel. The special light image generation unit 52 generates a special light image in which a specific structure of the subject is emphasized by superimposing the pixel value of the special light on the normal light image generated by the normal light image generation unit 51. Further, the special light image generation unit 52 generates a plurality of special light images having different parts to be emphasized based on the setting of the electronic endoscope system 11 according to the type of the subject. The special light image generated by the special light image generation unit 52 is stored again in the frame memory. Further, the DIP 42 performs further additional image processing such as electronic scaling and edge enhancement processing on the normal light image and the special light image according to the control from the CPU 41.

表示制御回路44は、DIP42で各種画像処理が施された通常光画像や特殊光画像に、無効画素部分を隠す表示用マスクデータを重畳したり、検査日時や患者や術者の情報といった文字情報や、操作用のGUIを重畳する。また、表示制御回路44は、通常光画像や特殊光画像を表示形式に応じたビデオ信号に変換してモニタ26上に表示させる。   The display control circuit 44 superimposes display mask data that hides the invalid pixel portion on the normal light image or special light image that has been subjected to various image processing by the DIP 42, and character information such as the examination date and time and information of the patient and the operator. Or, an operation GUI is superimposed. In addition, the display control circuit 44 converts the normal light image or the special light image into a video signal corresponding to the display format and displays it on the monitor 26.

光源装置14は、光源61、ロータリーフィルタ62、CPU63、位置センサ64等から構成される。   The light source device 14 includes a light source 61, a rotary filter 62, a CPU 63, a position sensor 64, and the like.

光源61は、紫外線から可視光、赤外光にわたる広い波長帯の光を高輝度に発するキセノンランプ等の白色高輝度光源であり、被写体に照射する照明光を発生する。光源61の発する照明光には、赤外光も含まれている。   The light source 61 is a white high-intensity light source such as a xenon lamp that emits light in a wide wavelength band ranging from ultraviolet rays to visible light and infrared light with high luminance, and generates illumination light to irradiate the subject. The illumination light emitted from the light source 61 includes infrared light.

ロータリーフィルタ62は、光源61の前方に、照明光の光路に対して面が垂直に設けられている。ロータリーフィルタ62は、所定の方向に回転自在に設けられている。ロータリーフィルタ62の中心軸は、照明光の光路からそれた位置にあり、照明光はロータリーフィルタ62の一部の面に入射する。ロータリーフィルタ62の面には、透過する波長帯や透過率等が異なる扇形の光学領域が各々所定の角度範囲で複数配置されている(図3参照)。これにより、ロータリーフィルタ62は、照明光を透過するときに波長や透過光量を変調したり、遮光したりする。ロータリーフィルタ62は、撮像素子31の動作に連動してモータ69により回転されるようになっており、ロータリーフィルタ62は撮像素子31による2回の撮像で1回転される。ロータリーフィルタ62を透過した照明光は、絞り67やレンズ68等を介してライトガイド34に入射される。   The rotary filter 62 is provided in front of the light source 61 with a surface perpendicular to the optical path of the illumination light. The rotary filter 62 is rotatably provided in a predetermined direction. The central axis of the rotary filter 62 is located away from the optical path of the illumination light, and the illumination light is incident on a part of the surface of the rotary filter 62. On the surface of the rotary filter 62, a plurality of fan-shaped optical regions having different transmission wavelength bands and transmittances are arranged within a predetermined angle range (see FIG. 3). Thereby, the rotary filter 62 modulates the wavelength or the amount of transmitted light or transmits light when transmitting the illumination light. The rotary filter 62 is rotated by a motor 69 in conjunction with the operation of the image sensor 31, and the rotary filter 62 is rotated once by two imaging operations by the image sensor 31. The illumination light that has passed through the rotary filter 62 is incident on the light guide 34 through the diaphragm 67, the lens 68, and the like.

CPU63は、光源装置14の各部の動作を制御する。また、CPU63は、プロセッサ装置13のCPU41と通信することにより、光源装置14内の各部の動作を、プロセッサ装置13や電子内視鏡12の各部の動作に同期するように制御する。例えば、CPU63は、光源61のオンオフや、ロータリーフィルタ62の回転、絞り67の開口径等を制御する。   The CPU 63 controls the operation of each unit of the light source device 14. Further, the CPU 63 communicates with the CPU 41 of the processor device 13 to control the operation of each unit in the light source device 14 so as to be synchronized with the operation of each unit of the processor device 13 and the electronic endoscope 12. For example, the CPU 63 controls on / off of the light source 61, rotation of the rotary filter 62, opening diameter of the diaphragm 67, and the like.

位置センサ64は、ロータリーフィルタ62の回転角度を検知して、CPU63に通知する。CPU63は位置センサ64からの信号に基づいて、撮像素子31の動作と同期するように、モータ69の動作を制御する。   The position sensor 64 detects the rotation angle of the rotary filter 62 and notifies the CPU 63 of it. Based on the signal from the position sensor 64, the CPU 63 controls the operation of the motor 69 so as to synchronize with the operation of the image sensor 31.

図3に示すように、ロータリーフィルタ62には、白色光の波長帯成分が透過する白色光透過領域として、第1白色光透過領域71、第2白色光透過領域72が設けられている。また、ロータリーフィルタ62には、ある波長を中心として撮像素子31の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域として、青色光透過領域73、緑色光透過領域74、赤外光透過領域76が設けられている。青色光透過領域73、緑色光透過領域74、赤外光透過領域76は、撮像素子31のRGB各画素の感応する波長帯よりも狭い半値幅で、青色光、緑色光、赤外光を各々透過する。さらに、ロータリーフィルタ62には、撮像素子の電荷読出期間に対応して照明光を遮光する遮光領域として、第1遮光フィルタ77、第2遮光フィルタ78が設けられている。これらのロータリーフィルタ62に設けられた各領域は、各々に所定の中心角を有する扇形である。   As shown in FIG. 3, the rotary filter 62 is provided with a first white light transmission region 71 and a second white light transmission region 72 as white light transmission regions through which the wavelength band component of white light is transmitted. The rotary filter 62 includes a blue light transmission region 73 and a green light transmission region as selective transmission regions that selectively transmit a wavelength band component narrower than the wavelength band to which the pixels of the image sensor 31 are sensitive, centered on a certain wavelength. A region 74 and an infrared light transmission region 76 are provided. The blue light transmissive region 73, the green light transmissive region 74, and the infrared light transmissive region 76 have a half-value width narrower than the sensitive wavelength band of each of the RGB pixels of the image sensor 31, and each of blue light, green light, and infrared light. To Penetrate. Further, the rotary filter 62 is provided with a first light-shielding filter 77 and a second light-shielding filter 78 as a light-shielding region that shields illumination light corresponding to the charge readout period of the image sensor. Each area provided in these rotary filters 62 has a sector shape having a predetermined central angle.

また、ロータリーフィルタ62は、撮像素子31による2回の撮像に対して1回転される。したがって、ロータリーフィルタ62は、撮像素子31による1回の撮像に対して180度(所定中心角)だけ回転する。このため、1回の撮像の間に、ロータリーフィルタ62の半分(図3では上半分または下半分)に設けられた白色光透過領域や選択的透過領域等が光源61の前面を順に横切る。これにより、1回の撮像の間に波長や透過光量等が変調された照明光が被写体に照射される。   Further, the rotary filter 62 is rotated once for two times of image pickup by the image pickup device 31. Therefore, the rotary filter 62 rotates by 180 degrees (predetermined center angle) for one image pickup by the image pickup device 31. For this reason, during one imaging operation, a white light transmission region, a selective transmission region, or the like provided in a half of the rotary filter 62 (upper half or lower half in FIG. 3) crosses the front surface of the light source 61 in order. As a result, the illumination light whose wavelength, amount of transmitted light, etc. are modulated during one imaging is irradiated onto the subject.

ロータリーフィルタ62の上半分の区画(扇形区画)81(以下、第1区画という)には、ロータリーフィルタ62の回転方向82に沿って、第1遮光フィルタ77、青色光透過領域73、第1白色光透過領域71が順に設けられている。このため、第1区画81によって照明光が変調されるときには、第1白色光透過領域71、青色光透過領域73、第1遮光フィルタ77の順に、光源61の前方を横切る。   In the upper half section (fan section) 81 (hereinafter referred to as the first section) of the rotary filter 62, a first light shielding filter 77, a blue light transmission region 73, and a first white color along the rotation direction 82 of the rotary filter 62. A light transmission region 71 is provided in order. For this reason, when the illumination light is modulated by the first section 81, the light passes through the front of the light source 61 in the order of the first white light transmission region 71, the blue light transmission region 73, and the first light shielding filter 77.

第1白色光透過領域71は、第1区画81のうち中心角θ1の範囲に設けられており、光源61からの照明光のうちの480nm以上750nm以下の波長帯の光を透過する。この第1白色光透過領域71が透過する波長帯の光は、撮像素子31のRGB各画素が何れも感応する波長帯を含んでおり(図7参照)、略白色の光(以下、通常光という)となっている。このため、第1白色光透過領域71が光源61の前方を横切っている間は、通常光が照明光として被写体に照射される。通常光(白色光)は、500nmよりも長く750nmよりも短い波長帯の光を含み、450nmより短い波長帯の光は500nmの波長の光の光量の1/10以下、780nmより長い波長帯の光は750nmの波長の光の光量の1/10以下であることが好ましい。   The first white light transmission region 71 is provided in the range of the central angle θ <b> 1 in the first section 81, and transmits light in the wavelength band of 480 nm or more and 750 nm or less of the illumination light from the light source 61. The wavelength band light transmitted through the first white light transmission region 71 includes a wavelength band to which each of the RGB pixels of the image sensor 31 is sensitive (see FIG. 7), and is substantially white light (hereinafter referred to as normal light). It is said). For this reason, while the 1st white light transmissive area | region 71 crosses the front of the light source 61, normal light is irradiated to a to-be-photographed object as illumination light. Normal light (white light) includes light having a wavelength band longer than 500 nm and shorter than 750 nm, and light having a wavelength band shorter than 450 nm has a wavelength band shorter than 1/10 of the amount of light having a wavelength of 500 nm and longer than 780 nm. The light is preferably 1/10 or less of the amount of light having a wavelength of 750 nm.

青色光透過領域73は、第1白色光透過領域71に隣接して、第1区画81の中心角αの範囲に設けられており、撮像素子31のB画素が感応する波長帯よりも狭い450nm近傍の波長帯の光(以下、青色特殊光という)を選択的に透過する。このため、青色光透過領域73が光源61の前方を横切っている間は、青色特殊光だけが照明光として被写体に照射される。青色特殊光は被写体の表層付近で強く反射されるため、青色特殊光が照明光として照射されている間は、表層血管やピットパターンが撮像される。   The blue light transmission region 73 is provided adjacent to the first white light transmission region 71 in the range of the central angle α of the first section 81 and is 450 nm narrower than the wavelength band to which the B pixel of the image sensor 31 is sensitive. Light in a nearby wavelength band (hereinafter referred to as blue special light) is selectively transmitted. For this reason, while the blue light transmission region 73 crosses the front of the light source 61, only the blue special light is irradiated to the subject as illumination light. Since the blue special light is strongly reflected near the surface of the subject, the surface blood vessels and pit patterns are imaged while the blue special light is irradiated as illumination light.

第1遮光フィルタ77は、青色光透過領域73に隣接して、第1区画81の中心角ωの範囲に設けられており、光源61からの全波長帯の照明光を遮光する。これにより、第1遮光フィルタ77が光源61の前方を横切っている間は、被写体には照明光が照射されない。また、第1遮光フィルタ77が光源61の前方を横切るタイミングは、第1白色光透過領域71及び青色光透過領域73が通過する間に各画素で蓄積した信号電荷を、撮像素子31が撮像信号として転送するタイミングに対応する。なお、撮像素子31が撮像信号を転送する期間は、第1遮光フィルタ77が光源61の前方を横切っている期間と同じか又は短い期間である。   The first light blocking filter 77 is provided in the range of the central angle ω of the first section 81 adjacent to the blue light transmission region 73 and blocks the illumination light of the entire wavelength band from the light source 61. Accordingly, the illumination light is not irradiated on the subject while the first light blocking filter 77 crosses the front of the light source 61. Further, the timing at which the first light blocking filter 77 crosses the front of the light source 61 is the signal charge accumulated in each pixel while the first white light transmission region 71 and the blue light transmission region 73 pass, and the image pickup device 31 takes the image signal. Corresponds to the transfer timing. Note that the period during which the imaging element 31 transfers the imaging signal is the same as or shorter than the period during which the first light blocking filter 77 crosses the front of the light source 61.

一方、ロータリーフィルタ62の下半分の区画(扇形区画)83(以下、第2区画という)には、ロータリーフィルタ62の回転方向82に沿って、第2遮光フィルタ78、赤外光透過領域76、緑色光透過領域74、第2白色光透過領域72が順に設けられている。このため、第2区画83によって照明光が変調されるときには、第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76、第2遮光フィルタ78の順に、光源61の前方を横切る。   On the other hand, in the lower half section (fan section) 83 (hereinafter referred to as the second section) of the rotary filter 62, along the rotation direction 82 of the rotary filter 62, a second light blocking filter 78, an infrared light transmission region 76, A green light transmission region 74 and a second white light transmission region 72 are provided in this order. For this reason, when the illumination light is modulated by the second section 83, the front of the light source 61 is placed in the order of the second white light transmission region 72, the green light transmission region 74, the infrared light transmission region 76, and the second light shielding filter 78. Cross.

第2白色光透過領域72は、第1遮光フィルタ77に隣接して、中心角θ2の範囲に設けられている。第2白色光透過領域72は、第1白色光透過領域71と同様の構成及び作用を有する。   The second white light transmission region 72 is provided in the range of the central angle θ 2 adjacent to the first light shielding filter 77. The second white light transmission region 72 has the same configuration and function as the first white light transmission region 71.

緑色光透過領域74は、第2白色光透過領域72に隣接して、中心角βの範囲に設けられており、撮像素子31のG画素が感応する波長帯(図7参照)のうち、550nm近傍の狭い波長帯の光(以下、緑色特殊光という)を選択的に透過する。このため、緑色光透過領域74が光源61の前方を横切っている間は、緑色特殊光だけが照明光として被写体に照射される。緑色特殊光は、ヘモグロビンに強く吸収されるため、緑色特殊光が照明光として照射されている間は、発赤や微細血管等が撮像される。   The green light transmission region 74 is provided in the range of the central angle β adjacent to the second white light transmission region 72, and is 550 nm in the wavelength band (see FIG. 7) to which the G pixel of the image sensor 31 is sensitive. Light in a narrow wavelength band in the vicinity (hereinafter referred to as green special light) is selectively transmitted. For this reason, while the green light transmission region 74 crosses the front of the light source 61, only the green special light is irradiated to the subject as illumination light. Since the green special light is strongly absorbed by hemoglobin, redness, fine blood vessels, and the like are imaged while the green special light is irradiated as illumination light.

赤外光透過領域76は、緑色光透過領域74に隣接して、中心角γの範囲に設けられており、780nm近傍の狭い波長帯の赤外(以下、赤外特殊光という)を透過する。この赤外特殊光は、撮像素子31のR画素が感応しない波長帯の赤外光となっている(図7参照)。このため、赤外光透過領域76が光源61の前方を横切っているときには、撮像素子31が感応しない赤外特殊光だけが照明光として照射されるが、被写体に反射された赤外特殊光によってはなにも撮像されない。   The infrared light transmission region 76 is provided in the range of the central angle γ adjacent to the green light transmission region 74 and transmits infrared in a narrow wavelength band near 780 nm (hereinafter referred to as infrared special light). . The infrared special light is infrared light in a wavelength band in which the R pixel of the image sensor 31 is not sensitive (see FIG. 7). For this reason, when the infrared light transmission region 76 crosses the front of the light source 61, only the infrared special light that the imaging device 31 is insensitive is irradiated as illumination light, but the infrared special light reflected on the subject causes No image is taken.

しかし、赤外特殊光はある種の蛍光物質に効率良く吸収され、赤外特殊光を吸収した蛍光物質は、所定波長の蛍光を生じる。このため、例えば蛍光物質としてICGを静脈注射した場合には、赤外特殊光が照明光として照射されることで、深層血管等、被写体の一部から波長が830nm近傍の蛍光が生じる。また、撮像素子31のR画素は、前述のように赤外特殊光には感応しないが、ICGから発せられる蛍光には感応する。このため、赤外光透過領域76が光源61の前方を横切っているときには、蛍光物質からの蛍光によって、深層血管等が撮像される。   However, the infrared special light is efficiently absorbed by a certain type of fluorescent material, and the fluorescent material that has absorbed the infrared special light generates fluorescence of a predetermined wavelength. For this reason, for example, when ICG is intravenously injected as a fluorescent substance, infrared special light is irradiated as illumination light, and fluorescence having a wavelength of around 830 nm is generated from a part of a subject such as a deep blood vessel. In addition, the R pixel of the image sensor 31 is not sensitive to infrared special light as described above, but is sensitive to fluorescence emitted from the ICG. For this reason, when the infrared light transmission region 76 crosses the front of the light source 61, a deep blood vessel or the like is imaged by the fluorescence from the fluorescent material.

第2遮光フィルタ78は、赤外光透過領域76に隣接して第1遮光フィルタ77と同様に中心角ωの範囲に設けられており、光源61からの全波長帯の照明光を遮光する。第2遮光フィルタ78の構成及び作用は第1遮光フィルタ77と同じである。また、撮像素子31が撮像信号を転送する期間も、第2遮光フィルタ78が光源61の前方を横切っている期間と同じか又は短い期間である。   The second light shielding filter 78 is provided in the range of the central angle ω adjacent to the infrared light transmission region 76 in the same manner as the first light shielding filter 77, and shields the illumination light in the entire wavelength band from the light source 61. The configuration and operation of the second light shielding filter 78 are the same as those of the first light shielding filter 77. In addition, the period during which the image pickup element 31 transfers the image pickup signal is also the same as or shorter than the period during which the second light shielding filter 78 crosses the front of the light source 61.

以下、上述のように構成される電子内視鏡システム11の作用を説明する。まず、挿入部16を被写体に挿入して観察を開始すると、図4に示すように、CPU63によってロータリーフィルタ62は撮像素子31の撮像動作に同期して回転制御される。   Hereinafter, the operation of the electronic endoscope system 11 configured as described above will be described. First, when the insertion unit 16 is inserted into a subject and observation is started, the rotary filter 62 is rotationally controlled by the CPU 63 in synchronization with the imaging operation of the imaging device 31 as shown in FIG.

図4(A)に示すように、撮像素子31は、プロセッサ装置13からの指示に基づいて、信号電荷の蓄積と蓄積した信号電荷の読み出しを1回の撮像とすると、2回の撮像を1セットとして、複数セットの撮像を所定のタイミングで繰り返す。このとき、ロータリーフィルタ62は、図4(B)に示すように、各回の撮像で第1区画81または第2区画83のいずれかによって変調した照明光を被写体に照射する。   As shown in FIG. 4A, the image sensor 31 is configured to perform two imaging operations based on an instruction from the processor device 13 when the signal charge accumulation and the readout of the accumulated signal charge are one imaging operation. As a set, a plurality of sets of imaging are repeated at a predetermined timing. At this time, as shown in FIG. 4B, the rotary filter 62 irradiates the subject with illumination light modulated by either the first section 81 or the second section 83 in each imaging.

撮像素子31の1セットの撮像のうち、前半の撮像期間91(以下、第1撮像期間という)では、第1区画81が光源61の前方を横切るようにロータリーフィルタ62が回転される。したがって、第1撮像期間91における信号電荷の蓄積期間92(以下、第1蓄積期間という)では、第1白色光透過領域71と青色光透過領域73によって順に照明光が変調される。このため、第1蓄積期間92では、通常光による信号電荷と、青色特殊光による信号電荷とをあわせた量の信号電荷が撮像素子31の各画素に蓄積される。   The rotary filter 62 is rotated so that the first section 81 crosses the front of the light source 61 in the first half imaging period 91 (hereinafter referred to as a first imaging period) of one set of imaging of the imaging element 31. Therefore, in the signal charge accumulation period 92 (hereinafter referred to as the first accumulation period) in the first imaging period 91, the illumination light is modulated in order by the first white light transmission region 71 and the blue light transmission region 73. For this reason, in the first accumulation period 92, a signal charge of an amount obtained by combining the signal charge due to the normal light and the signal charge due to the blue special light is accumulated in each pixel of the image sensor 31.

第1蓄積期間92の間に、R画素には、第1白色光透過領域71を透過した通常光の赤色成分の光量に応じた量の信号電荷が蓄積される。同様に、第1蓄積期間92の間に、G画素には、第1白色光透過領域71を透過した通常光の緑色成分の光量に応じた量の信号電荷が蓄積される。   During the first accumulation period 92, the R pixel accumulates an amount of signal charge corresponding to the amount of the red component of the normal light transmitted through the first white light transmission region 71. Similarly, during the first accumulation period 92, the G pixel accumulates an amount of signal charge corresponding to the amount of the green component of the normal light transmitted through the first white light transmission region 71.

また、第1蓄積期間92の間に、B画素に蓄積される信号電荷の総量は、第1白色光透過領域71を透過した通常光の青色成分の光量に比例した信号電荷と、青色光透過領域73を透過した青色特殊光の光量に比例した量の信号電荷との合計となる。   Further, the total amount of signal charges accumulated in the B pixel during the first accumulation period 92 is such that the signal charge proportional to the amount of the blue component of the normal light transmitted through the first white light transmission region 71 and the blue light transmission. The total amount of signal charges is proportional to the amount of blue special light transmitted through the region 73.

こうして第1蓄積期間92で各画素に蓄積された信号電荷は、第1撮像期間91内の読出期間93(以下、第1読出期間という)で、AFE32を介してDIP42に撮像信号として出力される。また、この第1読出期間93の間は、光源61からの照明光は第1遮光フィルタ77で遮られている。   The signal charges accumulated in each pixel in the first accumulation period 92 are output as an image signal to the DIP 42 via the AFE 32 in the readout period 93 (hereinafter referred to as the first readout period) in the first imaging period 91. . Further, during the first readout period 93, illumination light from the light source 61 is blocked by the first light blocking filter 77.

このように、第1撮像期間91では第1区画81によって照明光が変調されるが、撮像素子31の1セットの撮像のうち、後半の撮像期間96(以下、第2撮像期間という)では、図4(B)に示すように、第2区画83が光源61の前方を横切るようにロータリーフィルタ62が回転される。したがって、第2撮像期間96における信号電荷の蓄積期間97(以下、第2蓄積期間という)では、第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76によって順に照明光が変調される。このため、第2蓄積期間97では、通常光による信号電荷と、緑色特殊光による信号電荷と、赤外特殊光によって生じた蛍光による信号電荷とを合わせた量の信号電荷が、撮像素子31の各画素に蓄積される。   As described above, the illumination light is modulated by the first section 81 in the first imaging period 91, but in the second imaging period 96 (hereinafter referred to as the second imaging period) in one set of imaging of the imaging element 31, As shown in FIG. 4B, the rotary filter 62 is rotated so that the second section 83 crosses the front of the light source 61. Therefore, in the signal charge accumulation period 97 (hereinafter referred to as the second accumulation period) in the second imaging period 96, the illumination light is sequentially emitted by the second white light transmission region 72, the green light transmission region 74, and the infrared light transmission region 76. Modulated. For this reason, in the second accumulation period 97, the signal charge of the image sensor 31 has an amount of the signal charge due to the normal light, the signal charge due to the green special light, and the signal charge due to the fluorescence caused by the infrared special light. Accumulated in each pixel.

このため、B画素には、第2蓄積期間97の間に、第2白色光透過領域72を透過した通常光の青色成分の光量に比例した量の信号電荷が蓄積される。   For this reason, in the B pixel, during the second accumulation period 97, an amount of signal charge proportional to the amount of the blue component of the normal light transmitted through the second white light transmission region 72 is accumulated.

一方、第2蓄積期間97の間に、R画素に蓄積される信号電荷の総量は、第2白色光透過領域72を透過した通常光の赤色成分の光量に比例した量の信号電荷と、赤外特殊光によって生じた蛍光の光量に比例した量の信号電荷との合計となる。また、第2蓄積期間97の間に、G画素に蓄積される信号電荷の総量は、第2白色光透過領域72を透過した通常光の緑色成分の光量に比例した量の信号電荷と、緑色特殊光の光量に比例した量の信号電荷との合計となる。   On the other hand, the total amount of signal charges accumulated in the R pixel during the second accumulation period 97 is equal to the amount of signal charge proportional to the amount of red component of normal light transmitted through the second white light transmission region 72, and red The total amount of signal charges is proportional to the amount of fluorescent light generated by the external special light. Further, the total amount of signal charges accumulated in the G pixel during the second accumulation period 97 is equal to the amount of signal charges proportional to the amount of green component of normal light transmitted through the second white light transmission region 72, and green. It is the sum of the signal charges in an amount proportional to the amount of special light.

こうして第2蓄積期間97で各画素に蓄積された信号電荷は、第2撮像期間96内の読出期間98(以下、第2読出期間という)で、AFE32を介してDIP42に撮像信号として出力される。この第2読出期間98の間は、光源61からの照明光は第2遮光フィルタ78で遮られている。   The signal charges accumulated in each pixel in the second accumulation period 97 are output as an image signal to the DIP 42 via the AFE 32 in a readout period 98 (hereinafter referred to as a second readout period) in the second imaging period 96. . During the second readout period 98, the illumination light from the light source 61 is blocked by the second light blocking filter 78.

なお、第1白色光透過領域71による通常光の透過光量及びこれによる各画素の画素値は、第1白色光透過領域71の通常光の透過率と中心角θ1によって定まる。同じく、第2白色光透過領域72による画素値は、第2白色光透過領域72の通常光の透過率と中心角θ2によって定まる。また、第1白色光透過領域71と第2白色光透過領域72の通常光の透過光量の比により、第1白色光透過領域71と第2白色光透過領域72の各画素の画素値の比が定まる。   Note that the amount of normal light transmitted through the first white light transmission region 71 and the pixel value of each pixel thereby are determined by the normal light transmittance of the first white light transmission region 71 and the central angle θ1. Similarly, the pixel value of the second white light transmission region 72 is determined by the normal light transmittance of the second white light transmission region 72 and the central angle θ2. Further, the ratio of the pixel values of the pixels of the first white light transmission region 71 and the second white light transmission region 72 according to the ratio of the amount of transmitted normal light of the first white light transmission region 71 and the second white light transmission region 72. Is determined.

また、青色光透過領域73による青色特殊光の透過光量及びこれによる画素値は、青色光透過領域73の青色特殊光の透過率と中心角αとの積に比例する。同様に、緑色光透過領域74による緑色特殊光の透過光量及びこれによる画素値は、緑色光透過領域74の緑色特殊光の透過率と中心角βとの積に比例する。一方、赤外光透過領域76による赤外特殊光の透過光量は、赤外光透過領域76の赤外特殊光の透過率と中心角γの積に比例し、これによる赤色画素の画素値は、さらに蛍光物質によって赤外特殊光が蛍光へ変換される効率に比例する。   Further, the amount of transmitted blue special light through the blue light transmission region 73 and the pixel value thereby are proportional to the product of the transmittance of the blue special light in the blue light transmission region 73 and the central angle α. Similarly, the amount of green special light transmitted through the green light transmission region 74 and the resulting pixel value are proportional to the product of the green special light transmittance of the green light transmission region 74 and the central angle β. On the other hand, the amount of infrared special light transmitted by the infrared light transmission region 76 is proportional to the product of the transmittance of the infrared special light of the infrared light transmission region 76 and the central angle γ. Furthermore, it is proportional to the efficiency with which infrared special light is converted into fluorescence by the fluorescent substance.

上述のように、ロータリーフィルタ62と撮像素子31を同期して駆動しながら被写体を撮像すると、図5(A)に示すように、第1撮像期間91で出力された撮像信号から第1画像データ101が取得される。同時に、図5(B)に示すように、第2撮像期間96で出力された撮像信号から第2画像データ102が取得される。このため、第1画像データ101が取得されてから、第2画像データ102が取得されるまでには1フレーム分の撮像期間(例えば、1/30秒)しか経過しない。このように、第1画像データ101と第2画像データ102は略同時に取得されるので、第1画像データ101と第2画像データ102は、被写体の動きの影響を受けずに、全く同じ被写体を撮像した画像データとして扱うことができる。   As described above, when the subject is imaged while the rotary filter 62 and the image sensor 31 are driven in synchronization, as shown in FIG. 5A, the first image data is obtained from the image signal output in the first imaging period 91. 101 is acquired. At the same time, as shown in FIG. 5B, the second image data 102 is acquired from the imaging signal output in the second imaging period 96. For this reason, after the first image data 101 is acquired, only an imaging period (for example, 1/30 seconds) for one frame elapses until the second image data 102 is acquired. As described above, since the first image data 101 and the second image data 102 are acquired substantially simultaneously, the first image data 101 and the second image data 102 are not affected by the movement of the subject, and the same subject is used. It can be handled as captured image data.

また、第1撮像期間91で出力される撮像信号は、前述のように、通常光と青色特殊光による露光が重畳しているので、図5(A)に示すように、第1画像データ101には、通常光で撮像される被写体像(実線で示す)に、青色特殊光による被写体像(模式的に破線で示す)が重畳されており、露光量の少ない青色特殊光による像はあまり目立たない。   Further, as described above, since the image signal output in the first image capturing period 91 is superimposed with the exposure of the normal light and the blue special light, as shown in FIG. 5A, the first image data 101 is displayed. The subject image (shown by a solid line) captured with normal light is overlaid with the subject image (shown schematically by a broken line) with blue special light, and the image with blue special light with a small amount of exposure is not very conspicuous Absent.

また、第2撮像期間96で出力される撮像信号もまた、前述のように、通常光、緑色特殊光、赤外特殊光による露光が重畳しているので、図5(B)に示すように、第2画像データ102には、通常光で撮像される被写体像に、緑色特殊光や赤外特殊光による被写体像(模式的に破線で示す)が重畳されている。第2画像データ102では、緑色特殊光や赤外特殊光による被写体像は、露光量が少ないためにあまり目立たない。   Further, as described above, the imaging signal output in the second imaging period 96 is also superimposed with the exposure by the normal light, the green special light, and the infrared special light, as shown in FIG. In the second image data 102, a subject image (schematically indicated by a broken line) of green special light or infrared special light is superimposed on a subject image captured with normal light. In the second image data 102, the subject image by the green special light or the infrared special light is not so conspicuous because the exposure amount is small.

DIP42は、こうして取得された第1画像データ101と第2画像データ102に基づき、図6に示す手順にしたがって、通常光画像生成部51によって通常光で照明したときに得られる通常光画像を生成するとともに、特殊光画像生成部52によって被写体の特定部位が適切に強調された特殊光画像を生成する。   Based on the first image data 101 and the second image data 102 thus acquired, the DIP 42 generates a normal light image obtained when the normal light image generation unit 51 illuminates with normal light according to the procedure shown in FIG. At the same time, the special light image generation unit 52 generates a special light image in which a specific part of the subject is appropriately emphasized.

DIP42が通常光画像と特殊光画像を生成する手順は、大きく分けて4つの手順(ステップS10,S20,S30,S40)が略同時進行で行われる。まず、DIP42は、第1画像データ101と第2画像データ102から、青色の成分を抜き出して、各B画素の画素値を比較,演算することにより、各B画素の通常光による画素値と、青色特殊光による画素値とをそれぞれ算出する(ステップS10)。   The procedure in which the DIP 42 generates the normal light image and the special light image is roughly divided into four steps (steps S10, S20, S30, and S40) performed substantially simultaneously. First, the DIP 42 extracts the blue component from the first image data 101 and the second image data 102, compares the pixel value of each B pixel, and calculates the pixel value of the normal light of each B pixel, A pixel value based on blue special light is calculated (step S10).

同様に、DIP42は、第1画像データ101と第2画像データ102から、緑色の成分を抜き出して、各G画素の画素値を比較,演算することにより、各G画素の通常光による画素値と、緑色特殊光による画素値とをそれぞれ算出する(ステップS20)。   Similarly, the DIP 42 extracts the green component from the first image data 101 and the second image data 102, compares the pixel value of each G pixel, and calculates the pixel value of each G pixel by the normal light. And a pixel value by the green special light are respectively calculated (step S20).

さらに、DIP42は、第1画像データ101と第2画像データ102から、赤色の成分を抜き出して、各R画素の画素値を比較,演算することにより、各R画素の通常光による画素値と、赤外特殊光による画素値とをそれぞれ算出する(ステップS30)。   Further, the DIP 42 extracts the red component from the first image data 101 and the second image data 102, compares the pixel value of each R pixel, and calculates the pixel value of each R pixel by the normal light, The pixel value by the infrared special light is calculated (step S30).

そして、DIP42は、上述のように算出した各画素値から、RGB各画素の画素値が通常光で照明したときに得られる画素値となるようにした通常光画像を生成するとともに、被写体の特定部位が強調された特殊光画像を生成する(ステップS40)。   Then, the DIP 42 generates a normal light image in which the pixel value of each RGB pixel becomes a pixel value obtained when illuminated with normal light from each pixel value calculated as described above, and specifies the subject. A special light image in which the region is emphasized is generated (step S40).

図6(A)に示すように、通常光画像生成部51は、白色光透過領域71,72を透過した通常光による画素値をRGB各色の画素毎に算出し(ステップS11,S21,S31)、通常光画像を生成する(ステップS41)。一方、図6(B)に示すように、特殊光画像生成部52は、青色光透過領域73,緑色光透過領域74,赤外光透過領域76を透過した各種特殊光による画素値をRGB各色の画素毎に算出し(ステップS12,S22,S32)、特殊光画像を生成する(ステップS42)。また、通常光画像生成部51と特殊光画像生成部52は、中間的に算出されたデータを共用するように、相互に連動して動作する。   As shown in FIG. 6A, the normal light image generation unit 51 calculates the pixel value of the normal light transmitted through the white light transmission regions 71 and 72 for each pixel of each RGB color (steps S11, S21, and S31). A normal light image is generated (step S41). On the other hand, as shown in FIG. 6B, the special light image generation unit 52 converts the pixel values of various special lights transmitted through the blue light transmission region 73, the green light transmission region 74, and the infrared light transmission region 76 into RGB colors. For each pixel (steps S12, S22, S32), and a special light image is generated (step S42). Further, the normal light image generation unit 51 and the special light image generation unit 52 operate in conjunction with each other so as to share the intermediately calculated data.

より詳しくは、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、青色の成分を抜き出して、各B画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるB画素の画素値を算出する(ステップS11)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるB画素の画素値を利用して、第1画像データ101又は第2画像データ102の青色成分から、青色特殊光によるB画素の画素値を算出する(ステップS12)。   More specifically, the normal light image generation unit 51 extracts a blue component from at least one of the first image data 101 or the second image data 102, compares and calculates the pixel value of each B pixel, and outputs the first white color. The pixel value of the B pixel by the normal light transmitted through the light transmission region 71 (or the second white light transmission region 72) is calculated (step S11). The special light image generation unit 52 uses the pixel value of the B pixel by the normal light calculated by the normal light image generation unit 51 to generate the blue light from the blue component of the first image data 101 or the second image data 102. A pixel value of the B pixel is calculated (step S12).

同様に、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、緑色の成分を抜き出して、各G画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるG画素の画素値を算出する(ステップS21)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるG画素の画素値を利用して、第1画像データ101又は第2画像データ102の緑色成分から、緑色特殊光によるG画素の画素値を算出する(ステップS22)。   Similarly, the normal light image generation unit 51 extracts the green component from at least one of the first image data 101 or the second image data 102, compares the pixel values of the G pixels, and calculates the first white light. The pixel value of the G pixel by the normal light transmitted through the transmission region 71 (or the second white light transmission region 72) is calculated (step S21). The special light image generation unit 52 uses the pixel value of the G pixel by the normal light calculated by the normal light image generation unit 51, and uses the green special light from the green component of the first image data 101 or the second image data 102. A pixel value of the G pixel is calculated (step S22).

さらに、通常光画像生成部51が、第1画像データ101又は第2画像データ102の少なくとも一方から、赤色の成分を抜き出して、各R画素の画素値を比較,演算し、第1白色光透過領域71(または第2白色光透過領域72)を透過した通常光によるR画素の画素値を算出する(ステップS31)。特殊光画像生成部52は、通常光画像生成部51が算出した通常光によるR画素の画素値を利用して、第1画像データ101又は第2画像データ102の赤色成分から、赤色特殊光で生じさせた蛍光によるR画素の画素値を算出する(ステップS32)。   Further, the normal light image generation unit 51 extracts a red component from at least one of the first image data 101 or the second image data 102, compares and calculates the pixel value of each R pixel, and transmits the first white light. The pixel value of the R pixel by the normal light transmitted through the region 71 (or the second white light transmission region 72) is calculated (step S31). The special light image generation unit 52 uses the red light component of the first image data 101 or the second image data 102 as the red special light by using the pixel value of the R pixel by the normal light calculated by the normal light image generation unit 51. The pixel value of the R pixel due to the generated fluorescence is calculated (step S32).

その後、通常光画像生成部51は、算出した通常光による各画素の画素値を用いて通常光画像を生成する(ステップS41)。特殊光画像生成部52は、算出した各種特殊光による画素値を、通常光画像に適切な割合で重畳して特殊光画像を生成する(ステップS42)。なお、特殊光画像生成部52は、設定に応じて、強調する部位が異なるなどの複数の特徴の異なる特殊光画像を生成する。   Thereafter, the normal light image generation unit 51 generates a normal light image using the calculated pixel value of each pixel based on the normal light (step S41). The special light image generation unit 52 generates a special light image by superimposing the calculated pixel values of various special lights on the normal light image at an appropriate ratio (step S42). Note that the special light image generation unit 52 generates special light images having different features such as different parts to be emphasized, according to the setting.

以下では、DIP42が、通常光画像生成部51と特殊光画像生成部52によって、通常光画像と特殊光画像を生成するより具体的な様態を説明する。   Hereinafter, a more specific mode in which the DIP 42 generates the normal light image and the special light image by the normal light image generation unit 51 and the special light image generation unit 52 will be described.

撮像素子31のRGB各画素の感度の一例を、図7に示す。B画素の感度106は、波長450nm付近の光に最も強く感応し、380nmから520nm程度の波長帯107(以下、青色波長帯という)に感度がある。G画素の感度108は、波長550nm付近の光に最も強く感応し、470nmから650nm程度の波長帯109(以下、緑色波長帯という)に感度がある。R画素の感度110は、波長630nm付近の光に最も強く感応し、780nm近傍を除いた580nmから870nm程度の波長帯111(以下、赤色波長帯という)に感度がある。また、R画素は、830nm近傍の赤外光に対して、周辺の波長の赤外光よりもやや強く感応する。   An example of the sensitivity of each RGB pixel of the image sensor 31 is shown in FIG. The sensitivity 106 of the B pixel is most sensitive to light in the vicinity of a wavelength of 450 nm and has sensitivity in a wavelength band 107 (hereinafter referred to as a blue wavelength band) of about 380 nm to 520 nm. The sensitivity 108 of the G pixel is most sensitive to light in the vicinity of a wavelength of 550 nm, and has sensitivity in a wavelength band 109 (hereinafter referred to as a green wavelength band) of about 470 nm to 650 nm. The sensitivity 110 of the R pixel is most sensitive to light in the vicinity of a wavelength of 630 nm, and has sensitivity in a wavelength band 111 (hereinafter referred to as a red wavelength band) of about 580 to 870 nm excluding the vicinity of 780 nm. Further, the R pixel is slightly more sensitive to infrared light near 830 nm than infrared light having a peripheral wavelength.

第1撮像期間91に被写体に照射される照明光量(積分値)と波長のグラフを、図8(A)に示す。青色特殊光の照射光量121と、第1白色光透過領域71による通常光の照射光量122を合計した分布になる。このため、第1画像データ101の各画素の画素値は、図8(A)に示す各色波長帯107,109,111に応じた値が含まれる。つまり、図8(A)に示した照明光が体腔内の観察部位に照射されることにより、照射された部位からの反射光を撮像素子31が受光して、各画素の画素値となっている。この画素値内には、観察部位にある青色特殊光での観察に適した表層血管やピットパターン等に応じた青色成分と白色成分が含まれている。   FIG. 8A shows a graph of the amount of illumination (integrated value) and wavelength with which the subject is irradiated during the first imaging period 91. The distribution is a total of the irradiation amount 121 of blue special light and the irradiation amount 122 of normal light from the first white light transmission region 71. For this reason, the pixel value of each pixel of the first image data 101 includes values corresponding to the color wavelength bands 107, 109, and 111 shown in FIG. That is, when the illumination light shown in FIG. 8A is irradiated onto the observation site in the body cavity, the imaging element 31 receives the reflected light from the irradiated site and becomes the pixel value of each pixel. Yes. This pixel value includes a blue component and a white component corresponding to a surface blood vessel, a pit pattern, and the like suitable for observation with blue special light at the observation site.

同様に、第2撮像期間96に被写体に照射される照明光量(積分値)と波長のグラフを、図8(B)に示すが、緑色特殊光の照射光量123、赤外特殊光の照射光量124、第2白色光透過領域72による通常光の照射光量125を合計した分布になる。このため、第2画像データ102の各画素の画素値は、図8(B)に示す各色波長帯107,109,111の部分に応じた値が含まれる。つまり、図8(B)に示した照明光が体腔内の観察部位に照射されることにより、照射された部分からの反射光を撮像素子31が受光して、各画素の画素値となっている。この画素値内には、観察部位にある緑色特殊光の観察に適した発赤や微細血管等に応じた緑色成分と、赤外特殊光により蛍光が生じる深層血管等と、白色成分が含まれている。なお、前述のように、撮像素子31は赤外特殊光に感度がなく、赤外特殊光によって励起される蛍光に感度があるので、第2画像データ102のR画素の画素値は、通常光の照射光量125の一部に比例した画素値と、蛍光の光量126に比例する画素値との合計になる。蛍光の光量126は、例えば、第2白色光透過領域72を透過した通常光の光量よりも小さい。   Similarly, a graph of the illumination light amount (integrated value) and wavelength irradiated on the subject in the second imaging period 96 is shown in FIG. 8B, and the green special light irradiation light amount 123 and the infrared special light irradiation light amount are shown. 124, the distribution amount of the normal light irradiation amount 125 by the second white light transmission region 72 is totaled. For this reason, the pixel values of the respective pixels of the second image data 102 include values corresponding to the portions of the respective color wavelength bands 107, 109, and 111 shown in FIG. That is, when the illumination light shown in FIG. 8B is irradiated onto the observation site in the body cavity, the imaging element 31 receives the reflected light from the irradiated portion and becomes the pixel value of each pixel. Yes. This pixel value includes a green component corresponding to redness and microvessels suitable for observing green special light at the observation site, a deep blood vessel that generates fluorescence by infrared special light, and a white component. Yes. As described above, since the imaging device 31 is not sensitive to infrared special light and sensitive to fluorescence excited by infrared special light, the pixel value of the R pixel of the second image data 102 is normal light. The total of the pixel value proportional to a part of the irradiation light amount 125 and the pixel value proportional to the fluorescence light amount 126. The amount of fluorescence 126 is, for example, smaller than the amount of normal light transmitted through the second white light transmission region 72.

DIP42は、撮像素子31の映像信号から各色の成分を抜き出し、これを比較,演算することにより通常光画像と特殊光画像を生成する。   The DIP 42 extracts the components of each color from the video signal of the image sensor 31 and compares and calculates them to generate a normal light image and a special light image.

照明光量と同様にして図9(A)に示すように、第1画像データ101のあるB画素の画素値131は、青色特殊光による画素値132と第1白色光透過領域71を透過した通常光による画素値133との合計値となっている。また、これに対応する第2画像データ102のB画素の画素値134は、図9(B)に示すように、第2白色光透過領域72を透過した通常光による画素値134となっている。   As in the case of the illumination light quantity, as shown in FIG. 9A, the pixel value 131 of the B pixel in the first image data 101 is the normal pixel value 132 transmitted by the blue special light and the first white light transmission region 71. This is a total value with the pixel value 133 by light. In addition, the pixel value 134 of the B pixel of the second image data 102 corresponding to this is a pixel value 134 of normal light transmitted through the second white light transmission region 72 as shown in FIG. 9B. .

第1白色光透過領域による通常光の照明光量と第2白色光透過領域72による通常光の光量の比がわかっているため、図9(C)に示すように、第2画像データ102のB画素の画素値134を比に応じて演算すれば、第1白色光透過領域71を透過した通常光による画素値133と同じになる。例えば、第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比が1:2の場合は、画素値133を2倍にすれば良い。図9(D)に示すように、画素値134を演算した画素値135を、第1画像データ101のB画素の画素値131から差し引くことにより、青色特殊光による画素値132が算出される。後述する通常光画像のB画素の画素値には、画素値133を使うよりも色バランスがよくなるため、画素値131をそのまま使う。   Since the ratio of the amount of normal illumination light from the first white light transmission region and the amount of normal light from the second white light transmission region 72 is known, as shown in FIG. If the pixel value 134 of the pixel is calculated according to the ratio, it becomes the same as the pixel value 133 by the normal light transmitted through the first white light transmission region 71. For example, when the ratio of the illumination light amount of the normal light from the first white light transmission region 71 and the normal light from the second white light transmission region 72 is 1: 2, the pixel value 133 may be doubled. As shown in FIG. 9D, a pixel value 132 by blue special light is calculated by subtracting the pixel value 135 obtained by calculating the pixel value 134 from the pixel value 131 of the B pixel of the first image data 101. As the pixel value of the B pixel of the normal light image, which will be described later, the color balance is better than when the pixel value 133 is used, the pixel value 131 is used as it is.

同様にして、図10(A)に示すように、第1画像データ101のあるG画素の画素値141は、第1白色光透過領域71を透過した通常光による画素値である。また、図10(B)に示すように、これに対応する第2画像データ102のあるG画素の画素値142は、第2白色光透過領域72を透過した通常光による画素値143と、緑色特殊光による画素値144との合計値となっている。   Similarly, as shown in FIG. 10A, the pixel value 141 of a G pixel in the first image data 101 is a pixel value based on normal light transmitted through the first white light transmission region 71. Further, as shown in FIG. 10B, the pixel value 142 of the G pixel in the second image data 102 corresponding to this corresponds to the pixel value 143 of normal light transmitted through the second white light transmission region 72 and green. This is the total value with the pixel value 144 by the special light.

このため、図10(C)に示すように、第1画像データ101のG画素の画素値141を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算することで画素値145を算出する。図10(D)に示すように、算出した画素値145を、第2画像データ102のG画素の画素値142から差し引くことにより、緑色特殊光による画素値144が算出される。後述する通常光画像のG画素の画素値には画素値141をそのまま使う。   For this reason, as shown in FIG. 10C, the pixel value 141 of the G pixel of the first image data 101 is converted into the illumination light amount of normal light from the first white light transmission region 71 and normal light from the second white light transmission region 72. The pixel value 145 is calculated by calculating according to the ratio. As shown in FIG. 10D, the pixel value 144 by the green special light is calculated by subtracting the calculated pixel value 145 from the pixel value 142 of the G pixel of the second image data 102. The pixel value 141 is used as it is for the pixel value of the G pixel of the normal light image described later.

さらに、同様にして、図11(A)に示すように、第1画像データ101のあるR画素の画素値151は、第1白色光透過領域71を透過した通常光による画素値である。また、図11(B)に示すように、これに対応する第2画像データ102のあるR画素の画素値152は、第2白色光透過領域72を透過した通常光による画素値153と、赤外特殊光で励起された蛍光による画素値154との合計となっている。   Further, similarly, as shown in FIG. 11A, a pixel value 151 of an R pixel in the first image data 101 is a pixel value by normal light transmitted through the first white light transmission region 71. Further, as shown in FIG. 11B, the pixel value 152 of the R pixel in the second image data 102 corresponding to this corresponds to the pixel value 153 by the normal light transmitted through the second white light transmission region 72 and the red value. This is the sum of pixel values 154 due to fluorescence excited by external special light.

このため、図11(C)に示すように、第1画像データ101のR画素の画素値151を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算することで画素値155を算出する。図11(D)に示すように、算出した画素値155を、第2画像データ102のR画素の画素値152から差し引くことで、赤外特殊光で励起された蛍光による画素値154が算出される。   For this reason, as shown in FIG. 11C, the pixel value 151 of the R pixel of the first image data 101 is changed to the normal light from the first white light transmission region 71 and the normal light from the second white light transmission region 72. The pixel value 155 is calculated by calculating according to the ratio. As shown in FIG. 11D, a pixel value 154 due to fluorescence excited by infrared special light is calculated by subtracting the calculated pixel value 155 from the pixel value 152 of the R pixel of the second image data 102. The

これらの処理を視覚的に表すと、図12〜図16に示すようになる。図12に示すように、DIP42は、まず、第1画像データ101のB画素だけを抜き出して、第1画像データ101の青色の画像成分である第1青色画像データ161を中間的に生成する。同時に、DIP42は、第2画像データ102のB画素だけを抜き出して、第2画像データ102の青色の画像成分である第2青色画像データ162を中間的に生成する。   These processes are represented visually as shown in FIGS. As shown in FIG. 12, the DIP 42 first extracts only the B pixel of the first image data 101 and generates first blue image data 161 that is a blue image component of the first image data 101 in the middle. At the same time, the DIP 42 extracts only the B pixel of the second image data 102 and generates second blue image data 162 that is a blue image component of the second image data 102 in the middle.

そして、通常光画像生成部51は、こうして生成された第1青色画像データ161を、通常光に含まれる青色光だけによって撮像された場合と同様の画像データ(以下、通常青色画像データという)として出力する(ステップS11)。また、特殊光画像生成部52は、第1青色画像データ161から、第2青色画像データ162を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、青色特殊光だけで撮像された場合と同様の画像データ164(以下、特殊青色画像データという)を生成する(ステップS12)。   Then, the normal light image generation unit 51 uses the first blue image data 161 generated in this way as image data similar to the case where the first blue image data 161 is captured only by the blue light included in the normal light (hereinafter referred to as normal blue image data). Output (step S11). Further, the special light image generation unit 52 converts the second blue image data 162 from the first blue image data 161 to the amount of illumination light of normal light from the first white light transmission region 71 and normal light from the second white light transmission region 72. By subtracting the one calculated in accordance with the ratio, the same image data 164 (hereinafter referred to as special blue image data) as when captured with only blue special light is generated (step S12).

同様に、図13に示すように、DIP42は、第1画像データ101のG画素だけを抜き出して、第1画像データ101の緑色の画像成分である第1緑色画像データ171を中間的に生成する。同時に、DIP42は、第2画像データ102のG画素だけを抜き出して、第2画像データ102の緑色の画像成分である第2緑色画像データ172を中間的に生成する。   Similarly, as shown in FIG. 13, the DIP 42 extracts only the G pixel of the first image data 101 and generates first green image data 171 that is a green image component of the first image data 101 in the middle. . At the same time, the DIP 42 extracts only the G pixel of the second image data 102 and generates second green image data 172 that is a green image component of the second image data 102 in the middle.

通常光画像生成部51は、こうして生成された第1緑色画像データ171を、通常光に含まれる緑色光だけにより撮像された場合と同様の画像データ(以下、通常緑色画像データという)として出力する(ステップS21)。また、特殊光画像生成部52は、第2緑色画像データ172から、第1緑色画像データ171を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、緑色特殊光だけで撮像された場合と同様の画像データ174(以下、特殊緑色画像データという)を生成する(ステップS22)。   The normal light image generation unit 51 outputs the first green image data 171 generated in this way as image data similar to the case where the first green image data 171 is captured only with the green light included in the normal light (hereinafter referred to as normal green image data). (Step S21). Further, the special light image generation unit 52 uses the second green image data 172 to calculate the first green image data 171 for the illumination light amount of normal light from the first white light transmission region 71 and normal light from the second white light transmission region 72. By subtracting the one calculated in accordance with the ratio, the same image data 174 (hereinafter referred to as special green image data) as when captured with only the green special light is generated (step S22).

さらに、図14に示すように、DIP42は、第1画像データ101のR画素だけを抜き出して、第1画像データ101の赤色の画像成分である第1赤色画像データ181を中間的に生成する。同時に、DIP42は、第2画像データ102のR画素だけを抜き出して、第2画像データ102の赤色の画像成分である第2赤色画像データ182を中間的に生成する。   Further, as shown in FIG. 14, the DIP 42 extracts only the R pixel of the first image data 101 and generates first red image data 181 that is a red image component of the first image data 101 in the middle. At the same time, the DIP 42 extracts only the R pixel of the second image data 102 and generates second red image data 182 that is a red image component of the second image data 102 in the middle.

通常光画像生成部51は、こうして生成された第1赤色画像データ181を、通常光に含まれる赤色光だけによって撮像された場合と同じ画像データ(以下、通常赤色画像データという)として出力する(ステップS31)。また、特殊光画像生成部52は、第2赤色画像データ182から、第1赤色画像データ181を第1白色光透過領域71による通常光と第2白色光透過領域72による通常光の照明光量の比に応じて演算したものを差し引くことにより、赤外特殊光で励起された蛍光だけで撮像された場合と同様の画像データ184(以下、特殊赤色画像データ)を生成する(ステップS32)。   The normal light image generation unit 51 outputs the first red image data 181 generated in this way as the same image data (hereinafter referred to as normal red image data) as when captured by only red light included in normal light ( Step S31). Further, the special light image generation unit 52 converts the first red image data 181 from the second red image data 182 to the amount of illumination light of normal light from the first white light transmission region 71 and normal light from the second white light transmission region 72. By subtracting the one calculated according to the ratio, the same image data 184 (hereinafter referred to as special red image data) as when captured with only fluorescence excited by infrared special light is generated (step S32).

こうして通常光画像及び特殊光画像の生成に必要な各種画像データ161,164,171,174,181,184を生成すると、図15に示すように、通常光画像生成部51は通常青色画像データ161、通常緑色画像データ171、通常赤色画像データ181を合成することにより、フルカラーの通常光画像191を生成する(ステップS41)。   When the various image data 161, 164, 171, 174, 181, 184 necessary for generating the normal light image and the special light image are generated in this way, the normal light image generating unit 51, as shown in FIG. The normal green image data 171 and the normal red image data 181 are combined to generate a full-color normal light image 191 (step S41).

さらに、図16(A)〜(C)に示すように、特殊光画像生成部52は、特殊青色画像データ164,特殊緑色画像データ174,特殊赤色画像データ184を、各々設定に応じた適切な割合で通常光画像191に重畳することにより、特殊光画像192a〜192cを生成する(ステップS42)。特殊光画像192aは、通常光画像191に特殊青色画像データ164を重畳したものであり、表層血管やピットパターンが強調される。特殊光画像192bは通常光画像191に特殊緑色画像データ174を重畳したものであり、微細血管や発赤等が強調される。特殊光画像192cは通常光画像191に特殊赤色画像データ184を重畳したものであり、深層血管等が強調される。   Further, as shown in FIGS. 16A to 16C, the special light image generation unit 52 sets the special blue image data 164, the special green image data 174, and the special red image data 184 as appropriate according to the settings. The special light images 192a to 192c are generated by superimposing on the normal light image 191 at a ratio (step S42). The special light image 192a is obtained by superimposing the special blue image data 164 on the normal light image 191, and the surface blood vessels and pit patterns are emphasized. The special light image 192b is obtained by superimposing the special green image data 174 on the normal light image 191, and emphasizes fine blood vessels, redness, and the like. The special light image 192c is obtained by superimposing the special red image data 184 on the normal light image 191 and emphasizes deep blood vessels and the like.

上述のようにして、DIP42によって生成された通常光画像191や特殊光画像192a〜192cのうちいくつかの(あるいは全ての)観察画像は、図17に示すように、モニタ26上に並べて表示される。術者は、これらの観察画像を比較観察しながら、診断や治療を行う。もちろん、通常光画像191のみ、特殊光画像192a〜192cのうち1つのみ、通常光画像191と特殊光画像192a〜192cのうち一つを並べて表示しても良い。   As described above, some (or all) of the normal light images 191 and special light images 192a to 192c generated by the DIP 42 are displayed side by side on the monitor 26 as shown in FIG. The The surgeon performs diagnosis and treatment while comparatively observing these observation images. Of course, only the normal light image 191, only one of the special light images 192 a to 192 c, or one of the normal light image 191 and the special light images 192 a to 192 c may be displayed side by side.

以上のように、電子内視鏡システム11は、ロータリーフィルタ62によって照明光を変調しながら第1画像データ101と第2画像データ102を略同時に取得し、これらの画像データ101,102から通常光画像191や特殊光画像192a〜192cといった相互に特徴の異なる観察画像を生成する。このため、電子内視鏡システム11は、被写体の動きに影響されず、全く同じ状態の被写体に対して、通常光画像191と特殊光画像192a〜192cを同時に取得することができる。また、電子内視鏡システム11は通常光画像191と特殊光画像192a〜192cを同時に取得できるので、これらの観察画像を相互に比較観察することができる。このため、電子内視鏡システム11では、短時間に検査や診察を行うことができるとともに、被検者や術者の負担を軽減することができる。さらに、診断の正確性も高まる。   As described above, the electronic endoscope system 11 acquires the first image data 101 and the second image data 102 substantially simultaneously while modulating the illumination light by the rotary filter 62, and normal light is obtained from these image data 101 and 102. Observation images having different characteristics such as the image 191 and the special light images 192a to 192c are generated. For this reason, the electronic endoscope system 11 can acquire the normal light image 191 and the special light images 192a to 192c at the same time for a subject in the same state without being affected by the movement of the subject. Moreover, since the electronic endoscope system 11 can simultaneously acquire the normal light image 191 and the special light images 192a to 192c, these observation images can be compared and observed with each other. For this reason, in the electronic endoscope system 11, while being able to perform a test | inspection and a medical examination in a short time, the burden of a subject and an operator can be reduced. In addition, the accuracy of diagnosis is increased.

なお、第1白色光透過領域71と第2白色光透過領域72の透過光量は任意に定めることができる。但し、撮像素子31の各画素に蓄積することのできる信号電荷量には限度があるので、各画素の信号電荷の飽和を防止するために、上述の実施形態のように、通常光と特殊光を重ねて照射する撮像期間では、通常光の照射光量が小さくなっていることが好ましい。   Note that the amount of light transmitted through the first white light transmission region 71 and the second white light transmission region 72 can be arbitrarily determined. However, since there is a limit to the amount of signal charge that can be accumulated in each pixel of the image sensor 31, in order to prevent saturation of the signal charge of each pixel, normal light and special light are used as in the above-described embodiment. It is preferable that the amount of normal light irradiation be small in the imaging period in which the light is superimposed.

なお、上述の実施形態では、ロータリーフィルタ62の第1区画81には、第1白色光透過領域71、青色光透過領域73、第1遮光フィルタ77が設けられ、第2区画83に第2白色光透過領域72、緑色光透過領域74、赤外光透過領域76、第2遮光フィルタ78が設けられているが、ロータリーフィルタ62に設ける白色光透過領域や選択的透過領域の配置や種類はこれ限らない。   In the above-described embodiment, the first section 81 of the rotary filter 62 is provided with the first white light transmission area 71, the blue light transmission area 73, and the first light shielding filter 77, and the second white section 83 is provided with the second white light. The light transmission region 72, the green light transmission region 74, the infrared light transmission region 76, and the second light shielding filter 78 are provided. The arrangement and types of the white light transmission region and the selective transmission region provided in the rotary filter 62 are as follows. Not exclusively.

例えば、図18に示すロータリーフィルタ201のように、第1区画81に、第1遮光フィルタ77と第1白色光透過領域202(中心角θ3)を回転方向82に沿って設け、第2区画83に、第2遮光フィルタ78、赤外光透過領域76、緑色光透過領域74、青色光透過領域73、第2白色光透過領域203(中心角θ4)を、回転方向82に沿って順に設けても良い。また、遮光フィルタ77,78が撮像素子31の読み出しのタイミングに同期して、光源61からの照明光を遮光する配置となっていれば、第1区画81や第2区画83内での各選択的透過領域や白色光透過領域の配置は互いに入れ替えても良い。また、同じ区画内で、白色光透過領域,青色光透過領域,白色光透過領域の順にするなど、白色光透過領域や選択的透過領域を2つに分割するなどしても良い。   For example, like the rotary filter 201 shown in FIG. 18, the first partition 81 is provided with the first light blocking filter 77 and the first white light transmission region 202 (center angle θ3) along the rotation direction 82, and the second partition 83. In addition, a second light shielding filter 78, an infrared light transmission region 76, a green light transmission region 74, a blue light transmission region 73, and a second white light transmission region 203 (center angle θ4) are sequentially provided along the rotation direction 82. Also good. If the light shielding filters 77 and 78 are arranged to shield the illumination light from the light source 61 in synchronization with the readout timing of the image sensor 31, each selection in the first section 81 and the second section 83 is performed. The arrangement of the target transmission region and the white light transmission region may be interchanged. Further, in the same section, the white light transmission region, the blue light transmission region, and the white light transmission region may be arranged in this order, and the white light transmission region and the selective transmission region may be divided into two.

なお、上述の実施形態では、2回の撮像に対してロータリーフィルタ62が1回転する例を説明したが、これに限らず、3回以上の撮像に対してロータリーフィルタ62が1回転するようにしても良い。この場合、ロータリーフィルタ62の1回転のうちに取得される複数の画像データの全てを用いて、通常光画像191や特殊光画像192a〜192cを生成しても良いし、ロータリーフィルタ62が1回転するうちに取得される複数の画像データのうち、一部を用いて通常光画像191や特殊光画像192a〜192cを生成するようにしても良い。但し、データの同時性が失われない程度が好ましい。   In the above-described embodiment, the example in which the rotary filter 62 makes one rotation for two times of imaging has been described. However, the present invention is not limited thereto, and the rotary filter 62 makes one rotation for three or more times of imaging. May be. In this case, the normal light image 191 and the special light images 192a to 192c may be generated using all of the plurality of image data acquired during one rotation of the rotary filter 62, or the rotary filter 62 may be rotated once. The normal light image 191 and the special light images 192a to 192c may be generated using a part of the plurality of image data acquired in the meantime. However, it is preferable that the simultaneity of data is not lost.

また、上述の実施形態では、第1白色光透過領域71及び第2白色光透過領域72を透過する光の波長帯は、480nm以上750nm以下となっているが、これに限らず、白色光透過領域は、より短波長の光を透過したり、より長波長の光を透過したり、各種特殊光の波長帯を含むようにさらに広範囲の波長帯を透過するようにしても良い。   In the above-described embodiment, the wavelength band of light transmitted through the first white light transmission region 71 and the second white light transmission region 72 is 480 nm or more and 750 nm or less. The region may transmit light having a shorter wavelength, transmit light having a longer wavelength, or transmit a wider range of wavelength bands to include wavelength bands of various special lights.

なお、上述の実施形態では、ロータリーフィルタ62に設けられた白色光透過領域,選択的透過領域,遮光フィルタは、中心角度と透過率の積によって実際の透過光量を調節しているが、これに限らず、白色光透過領域71,72や青色光透過領域73、緑色光透過領域74、赤外光透過領域76をいずれも同じ中心角範囲に設け、透過率だけを調節することで、各種照明光の実効的な照射光量を調節するようにしても良い。逆に、透過率を統一して、扇形区画の面積だけを違えても良い。   In the above-described embodiment, the white light transmission region, the selective transmission region, and the light shielding filter provided in the rotary filter 62 adjust the actual transmitted light amount by the product of the center angle and the transmittance. Not limited to this, the white light transmission regions 71 and 72, the blue light transmission region 73, the green light transmission region 74, and the infrared light transmission region 76 are all provided in the same central angle range, and only various transmittances are adjusted. You may make it adjust the effective irradiation light quantity of light. Conversely, the transmittance may be unified and only the area of the sector section may be changed.

なお、上述の実施形態では、青色光透過領域73、緑色光透過領域74、赤外光透過領域76の各々の透過率や透過光量は、撮像に十分な光量が得られる範囲内で各々任意に定めることができる。   In the above-described embodiment, the transmittance and the amount of transmitted light of each of the blue light transmitting region 73, the green light transmitting region 74, and the infrared light transmitting region 76 are arbitrarily set within a range where a sufficient amount of light can be obtained for imaging. Can be determined.

なお、上述の実施形態では、遮光フィルタ77,78が、読出期間93,98に合致する中心角ωとなるように設けられているが、これに限らず、通常光や各種特殊光で十分な露光量が得られれば、上述の実施形態よりも大きな中心角範囲の遮光フィルタを設けても良い。また、メカニカルシャッタや、撮像素子31の電子シャッタによって十分な遮光性を得られるときには、ロータリーフィルタ62に遮光フィルタ77,78を設けなくても良い。   In the above-described embodiment, the light shielding filters 77 and 78 are provided so as to have a central angle ω that matches the readout periods 93 and 98. However, the present invention is not limited to this, and normal light and various special lights are sufficient. If the exposure amount can be obtained, a light shielding filter having a larger central angle range than the above-described embodiment may be provided. Further, when sufficient light shielding properties can be obtained by the mechanical shutter or the electronic shutter of the image sensor 31, the light shielding filters 77 and 78 may not be provided in the rotary filter 62.

なお、上述の実施形態では、各種特殊光を選択的に透過する選択的透過領域として、ロータリーフィルタ62には青色光透過領域73、緑色光透過領域74、赤外光透過領域76を設ける例を説明したが、これに限らず、他の特殊光を選択的に透過させる選択的透過領域をロータリーフィルタ62に備えても良い。例えば、コラーゲン等の自家蛍光を利用して肥厚等を観察するために、波長600nm近傍の特殊光を選択的に透過する選択的透過領域をロータリーフィルタ62に設けても良い。   In the above-described embodiment, an example in which the rotary filter 62 is provided with the blue light transmission region 73, the green light transmission region 74, and the infrared light transmission region 76 as the selective transmission region that selectively transmits various special lights. Although described, the present invention is not limited to this, and the rotary filter 62 may be provided with a selective transmission region that selectively transmits other special light. For example, in order to observe thickening using autofluorescence such as collagen, a selective transmission region that selectively transmits special light in the vicinity of a wavelength of 600 nm may be provided in the rotary filter 62.

なお、上述の実施形態では、光源61としてキセノンランプ等の白色の高輝度光源を単独で用いるが、撮像に必要な波長帯の照明光を発することができれば、複数の光源を複合的に用いたり、切り替え自在に用いるようにしても良い。また、ガスランプに限らず、LEDやレーザーダイオード等の周知の光源を用いても良い。また、光源61は、白色の照明光を発するが、赤‐緑錐体の視感度の重なりを利用して擬似的に白色を実現する光源を用いても良い。   In the above-described embodiment, a white high-intensity light source such as a xenon lamp is used alone as the light source 61, but a plurality of light sources may be used in combination as long as illumination light having a wavelength band necessary for imaging can be emitted. Alternatively, it may be used in a switchable manner. In addition to a gas lamp, a known light source such as an LED or a laser diode may be used. In addition, the light source 61 emits white illumination light, but a light source that realizes pseudo white using an overlap of the red-green cone visual sensitivity may be used.

なお、上述の実施形態では、青色特殊光によって陥凹や隆起を撮像する例を説明したが、これに限らず、これらの構造は、波長500nm近傍の光で観察することもできるので、画素値134を取り出すことによってこれらを観察するようにしても良い。   In the above-described embodiment, an example in which a depression or a ridge is imaged with blue special light has been described. However, the present invention is not limited thereto, and these structures can also be observed with light in the vicinity of a wavelength of 500 nm. You may make it observe these by taking out 134. FIG.

なお、上述の実施形態では、特殊光画像192a〜192cを生成するときに、通常光画像191に各種特殊光による画像データ164,174,184を重畳するが、これに限らず、各種特殊光による画像データ164,174,184だけを適切な比率で互いに重畳することで特殊光画像192a〜192cを生成するようにしても良い。   In the above-described embodiment, when the special light images 192a to 192c are generated, the image data 164, 174, and 184 by various special lights are superimposed on the normal light image 191. However, the present invention is not limited to this, and various special lights are used. The special light images 192a to 192c may be generated by superimposing only the image data 164, 174, and 184 at an appropriate ratio.

なお、上述の実施形態では、特殊光画像192a〜192cを生成するときに、通常光画像191に各種特殊光による画像データ164,174,184をそのまま重畳するが、これに限らず、各種特殊光による画像データ164,174,184を重畳するときに、これらの各種特殊光による成分を他の色に変換してから通常光画像191に重畳して、上述の実施形態とは配色の異なる特殊光画像192a〜192cを生成するようにしても良い。   In the above-described embodiment, when the special light images 192a to 192c are generated, the image data 164, 174, and 184 based on various special lights are directly superimposed on the normal light image 191. However, the present invention is not limited to this. When superimposing the image data 164, 174, and 184, the components of these various special lights are converted into other colors and then superimposed on the normal light image 191, and the special light having a different color scheme from the above-described embodiment Images 192a to 192c may be generated.

なお、上述の実施形態では、通常光画像191に各種特殊光による画像データ164,174,184を各々重畳して特殊光画像192a〜192cを生成するが、これに限らず、各種特殊光による画像データ164,174,184のうちいくつかを適当な比率で通常光画像191に重畳することにより、各種特殊光で観察される複数の観察部位が同時に強調された特殊光画像を生成するようにしても良い。   In the above-described embodiment, the special light images 192a to 192c are generated by superimposing the image data 164, 174, and 184 using various special lights on the normal light image 191, but the present invention is not limited to this, and the images using various special lights are used. By superimposing some of the data 164, 174, and 184 on the normal light image 191 at an appropriate ratio, a special light image in which a plurality of observation sites observed with various special lights are enhanced at the same time is generated. Also good.

なお、上述の実施形態では、いわゆる線順次方式でフルカラーの画像を取得する例を説明したが、本発明を面順次式でフルカラーの画像を取得する電子内視鏡システムに適用しても良い。   In the above-described embodiment, an example in which a full-color image is acquired by a so-called line-sequential method has been described. However, the present invention may be applied to an electronic endoscope system that acquires a full-color image by a frame-sequential method.

なお、上述の実施形態では、通常光による画素値を算出し、これを利用して特殊光による画素値を算出する例を説明したが、第1画像データ101や第2画像データ102から通常光による画素値や特殊光による画素値を算出する計算の手順は、上述の実施形態の例に限らない。例えば、先に特殊光による画素値を算出し、これを用いて通常光による画素値を算出するようにしても良い。   In the above-described embodiment, the pixel value based on the normal light is calculated and the pixel value based on the special light is calculated using the normal light. However, the normal light is calculated from the first image data 101 and the second image data 102. The calculation procedure for calculating the pixel value based on the above and the pixel value based on the special light is not limited to the above-described embodiment. For example, the pixel value by special light may be calculated first, and the pixel value by normal light may be calculated using this.

なお、上述の実施形態では、生体内を観察する電子内視鏡システム11を例に説明したが、観察する対象はこれに限らず、配管やトンネル構造等を損傷せずに内部から観察する観察装置等にも本発明を好適に用いることができる。   In the above-described embodiment, the electronic endoscope system 11 for observing the inside of the living body has been described as an example. However, the object to be observed is not limited to this, and the observation is performed from the inside without damaging the piping or the tunnel structure. The present invention can be suitably used for an apparatus or the like.

なお、上述の実施形態では、第1白色光透過領域71は、扇形の領域内が全て白色光を透過する領域となっているが、これに限らず、白色光を透過する領域は、第1白色光透過領域71に各々割り当てられた扇形の領域の一部分であっても良い。例えば、第1白色光透過領域71に割り当てられた扇形の領域のうち、ロータリーフィルタ62の外周に沿った帯状の部分だけが白色光を透過するようにしても良い。このことは、第2白色光透過領域72についても同様である。また、青色光透過領域73、緑色光透過領域74、赤外光透過領域76についても、各色の特殊光を透過する領域は各色光透過領域73,74,76に割り当てられた扇形の領域の一部分であっても良い。さらに、第1遮光フィルタ77、第2遮光フィルタ78についても、照明光を遮光する領域は、これらに割り当てられた扇形の領域の一部分であっても良い。   In the above-described embodiment, the first white light transmission region 71 is a region that transmits all white light in the fan-shaped region. However, the first white light transmission region 71 is not limited to this, and the region that transmits white light is the first region. It may be a part of the fan-shaped area respectively assigned to the white light transmission area 71. For example, only the band-shaped portion along the outer periphery of the rotary filter 62 among the fan-shaped regions assigned to the first white light transmitting region 71 may transmit white light. The same applies to the second white light transmission region 72. As for the blue light transmission region 73, the green light transmission region 74, and the infrared light transmission region 76, the region that transmits the special light of each color is a part of the fan-shaped region assigned to each color light transmission region 73, 74, 76. It may be. Further, also for the first light shielding filter 77 and the second light shielding filter 78, the region where the illumination light is shielded may be a part of the sector-shaped region allocated thereto.

なお、上述の実施形態では、撮像素子31にはRGB3色のカラーフィルタが画素毎に配置され、DIP42が観察画像を生成するときには、RGBの基本色毎の成分を抜き出す例を説明したが、撮像素子31にはイエロー、シアン、マゼンタの3色(あるいは、これにグリーンを加えた4色)の補色系カラーフィルタを画素毎に配置し、DIP42が観察画像を生成するときには、イエロー、シアン、マゼンタ(、グリーン)の各色成分を抜き出して比較、演算するようにしても良い。   In the above-described embodiment, an example in which RGB color filters are arranged for each pixel in the image sensor 31 and the components for each RGB basic color are extracted when the DIP 42 generates an observation image has been described. In the element 31, complementary color filters of three colors of yellow, cyan, and magenta (or four colors obtained by adding green) are arranged for each pixel. When the DIP 42 generates an observation image, yellow, cyan, and magenta Each color component of (, green) may be extracted and compared and calculated.

電子内視鏡システムの構成を示す外観図である。It is an external view which shows the structure of an electronic endoscope system. 電子内視鏡システムの電気的、光学的構成を示すブロック図である。It is a block diagram which shows the electrical and optical structure of an electronic endoscope system. ロータリーフィルタの構成を示す説明図である。It is explanatory drawing which shows the structure of a rotary filter. 撮像素子とロータリーフィルタの駆動タイミングを示す説明図である。It is explanatory drawing which shows the drive timing of an image pick-up element and a rotary filter. 電子内視鏡システムで取得される画像データを示す説明図である。It is explanatory drawing which shows the image data acquired with an electronic endoscope system. 取得した画像データから観察画像を生成する手順を示すフローチャートである。It is a flowchart which shows the procedure which produces | generates an observation image from the acquired image data. 波長に対する撮像素子の感度を示すグラフである。It is a graph which shows the sensitivity of the image sensor with respect to a wavelength. 各撮像期間における照明光の光量を示す説明図である。It is explanatory drawing which shows the light quantity of the illumination light in each imaging period. 第1画像データと第2画像データのB画素の画素値から、通常光による画素値と青色特殊光による画素値を各々算出する様子を示す説明図である。It is explanatory drawing which shows a mode that the pixel value by normal light and the pixel value by blue special light are each calculated from the pixel value of B pixel of 1st image data and 2nd image data. 第1画像データと第2画像データのG画素の画素値から、通常光による画素値と緑色特殊光による画素値を各々算出する様子を示す説明図である。It is explanatory drawing which shows a mode that the pixel value by normal light and the pixel value by green special light are each calculated from the pixel value of G pixel of 1st image data and 2nd image data. 第1画像データと第2画像データのR画素の画素値から、通常光による画素値と、赤外特殊光により励起された蛍光による画素値を各々算出する様子を示す説明図である。It is explanatory drawing which shows a mode that the pixel value by normal light and the pixel value by fluorescence excited by infrared special light are each calculated from the pixel value of R pixel of 1st image data and 2nd image data. DIPが通常青色画像データと特殊青色画像データを中間的に生成する様子を示す説明図である。It is explanatory drawing which shows a mode that DIP produces | generates normal blue image data and special blue image data in the middle. DIPが通常緑色画像データと特殊緑色画像データを中間的に生成する様子を示す説明図である。It is explanatory drawing which shows a mode that DIP produces | generates normal green image data and special green image data in the middle. DIPが通常赤色画像データと特殊赤色画像データを中間的に生成する様子を示す説明図である。It is explanatory drawing which shows a mode that DIP produces | generates normal red image data and special red image data in the middle. 通常光画像生成部がフルカラーの通常光画像を生成する様子を示す説明図である。It is explanatory drawing which shows a mode that a normal light image generation part produces | generates a full color normal light image. 特殊光画像生成部が特殊光画像を生成する様子を示す説明図である。It is explanatory drawing which shows a mode that a special light image generation part produces | generates a special light image. 通常光画像と特殊光画像が同時にモニタ表示される様子を示す説明図である。It is explanatory drawing which shows a mode that a normal light image and a special light image are simultaneously displayed on a monitor. ロータリーフィルタの変形例を示す説明図である。It is explanatory drawing which shows the modification of a rotary filter.

符号の説明Explanation of symbols

11 電子内視鏡システム
12 電子内視鏡
13 プロセッサ装置
14 光源装置
31 撮像素子
33,41,63 CPU
42 DIP
43 DSP
51 通常光画像生成部
52 特殊光画像生成部
61 光源
62,201 ロータリーフィルタ
71,202 第1白色光透過領域
72,203 第2白色光透過領域
73 青色光透過領域
74 緑色光透過領域
76 赤外光透過領域
77 第1遮光フィルタ
78 第2遮光フィルタ
101 第1画像データ
102 第2画像データ
161 第1青色画像データ
162 第2青色画像データ
163 通常青色画像データ
164 特殊青色画像データ
171 第1緑色画像データ
172 第2緑色画像データ
173 通常緑色画像データ
174 特殊緑色画像データ
181 第1赤色画像データ
182 第2赤色画像データ
183 通常赤色画像データ
184 特殊赤色画像データ
191 通常光画像
192 特殊光画像
DESCRIPTION OF SYMBOLS 11 Electronic endoscope system 12 Electronic endoscope 13 Processor apparatus 14 Light source apparatus 31 Imaging element 33, 41, 63 CPU
42 DIP
43 DSP
DESCRIPTION OF SYMBOLS 51 Normal light image generation part 52 Special light image generation part 61 Light source 62, 201 Rotary filter 71,202 1st white light transmission area 72,203 2nd white light transmission area 73 Blue light transmission area 74 Green light transmission area 76 Infrared Light transmission region 77 First light shielding filter 78 Second light shielding filter 101 First image data 102 Second image data 161 First blue image data 162 Second blue image data 163 Normal blue image data 164 Special blue image data 171 First green image Data 172 Second green image data 173 Normal green image data 174 Special green image data 181 First red image data 182 Second red image data 183 Normal red image data 184 Special red image data 191 Normal light image 192 Special light image

Claims (6)

被写体からの光を光電変換することにより、前記被写体を撮像する撮像手段と、
前記被写体に照射する照明光を発生する光源と、
前記光源の前方に回転自在に配置され、前記撮像手段による複数回の撮像に同期して回転し、前記撮像手段による1回の撮像に対応する所定中心角の扇形区画のうち少なくとも一つの前記扇形区画内に、ある波長を中心として前記撮像素子の画素が感応する波長帯よりも狭い波長帯成分を選択的に透過する選択的透過領域を有し、前記扇形区画の全てに白色光の波長帯成分を透過する白色光透過領域を有するロータリーフィルタと、
前記ロータリーフィルタが回転する間に撮像された画像データから、相互に特徴の異なる複数の観察画像を生成する観察画像生成手段と、
を備えることを特徴とする電子内視鏡システム。
Imaging means for imaging the subject by photoelectrically converting light from the subject;
A light source that generates illumination light to irradiate the subject;
At least one of the fan-shaped sections of a fan-shaped section having a predetermined central angle, which is rotatably arranged in front of the light source, rotates in synchronization with a plurality of times of imaging by the imaging means, and corresponds to one imaging by the imaging means. The section has a selective transmission region that selectively transmits a wavelength band component narrower than the wavelength band to which the pixel of the image sensor is sensitive, centered on a certain wavelength, and all the fan-shaped sections have a wavelength band of white light. A rotary filter having a white light transmission region that transmits the component;
Observation image generation means for generating a plurality of observation images having different characteristics from image data captured while the rotary filter rotates,
An electronic endoscope system comprising:
前記白色光は、500nmよりも長く750nmよりも短い波長帯の光を含み、450nmより短い波長帯の光は500nmの波長の光の光量の1/10以下、780nmより長い波長帯の光は750nmの波長の光の光量の1/10以下であることを特徴とする請求項1記載の電子内視鏡システム。   The white light includes light having a wavelength band longer than 500 nm and shorter than 750 nm, light having a wavelength band shorter than 450 nm is 1/10 or less of the amount of light having a wavelength of 500 nm, and light having a wavelength band longer than 780 nm is 750 nm. The electronic endoscope system according to claim 1, wherein the electronic endoscope system is 1/10 or less of an amount of light having a wavelength of 1. 前記選択的透過領域を透過する光は、450、500、550、600、または780nm近傍のいずれかに中心波長を有するものであることを特徴とする請求項1または2記載の電子内視鏡システム。   3. The electronic endoscope system according to claim 1, wherein the light transmitted through the selective transmission region has a central wavelength in the vicinity of 450, 500, 550, 600, or 780 nm. . 前記ロータリーフィルタは、前記扇形区画毎に、前記撮像手段の電荷読出期間に対応して前記照明光を遮光する遮光領域を有することを特徴とする請求項1ないし3いずれかに記載の電子内視鏡システム。   The electronic endoscope according to any one of claims 1 to 3, wherein the rotary filter has a light-shielding region that shields the illumination light corresponding to a charge reading period of the imaging unit for each of the fan-shaped sections. Mirror system. 前記観察画像生成手段は、複数の前記画像データから色の成分を各々抜き出して、前記選択的透過領域を透過した照明光を照射して撮像したときに得られる中間画像データを算出することを特徴とする請求項1ないし4いずれかに記載の電子内視鏡システム。   The observation image generation means extracts color components from each of the plurality of image data, and calculates intermediate image data obtained when imaging is performed by irradiating illumination light transmitted through the selective transmission region. The electronic endoscope system according to any one of claims 1 to 4. 前記観察画像生成手段は、前記中間画像データから、前記被写体の所定部位を強調した強調画像を生成することを特徴とする請求項5記載の電子内視鏡システム。   6. The electronic endoscope system according to claim 5, wherein the observation image generating unit generates an enhanced image in which a predetermined part of the subject is enhanced from the intermediate image data.
JP2008264950A 2008-10-14 2008-10-14 Electron endoscopic system Abandoned JP2010094152A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008264950A JP2010094152A (en) 2008-10-14 2008-10-14 Electron endoscopic system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008264950A JP2010094152A (en) 2008-10-14 2008-10-14 Electron endoscopic system

Publications (1)

Publication Number Publication Date
JP2010094152A true JP2010094152A (en) 2010-04-30

Family

ID=42256278

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008264950A Abandoned JP2010094152A (en) 2008-10-14 2008-10-14 Electron endoscopic system

Country Status (1)

Country Link
JP (1) JP2010094152A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011254936A (en) * 2010-06-08 2011-12-22 Fujifilm Corp Electronic endoscope system, processor device for electronic endoscope, and tracing method
WO2013111623A1 (en) * 2012-01-25 2013-08-01 富士フイルム株式会社 Endoscope system, processor device for endoscope system, and image processing method
CN109060679A (en) * 2018-09-07 2018-12-21 中国计量科学研究院 Ultraspectral transmittance etalon and visibility measurement device
CN110226911A (en) * 2014-07-10 2019-09-13 柯惠Lp公司 Endoscopic system
EP2481343B1 (en) * 2011-01-27 2020-05-06 Fujifilm Corporation Processing unit for endoscope system and image processing method
KR20200090632A (en) * 2019-01-18 2020-07-29 아이알트로닉스 인코퍼레이티드 acoustic device comprising semiconductor light source

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02206423A (en) * 1989-02-07 1990-08-16 Toshiba Corp Endoscopic apparatus
JP2686089B2 (en) * 1988-02-26 1997-12-08 オリンパス光学工業株式会社 Light source device for endoscope
JP2002095635A (en) * 2000-07-21 2002-04-02 Olympus Optical Co Ltd Endoscope system
JP3586157B2 (en) * 1999-12-20 2004-11-10 オリンパス株式会社 Subject observation device
JP2008237394A (en) * 2007-03-26 2008-10-09 Olympus Medical Systems Corp Endoscope system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2686089B2 (en) * 1988-02-26 1997-12-08 オリンパス光学工業株式会社 Light source device for endoscope
JPH02206423A (en) * 1989-02-07 1990-08-16 Toshiba Corp Endoscopic apparatus
JP3586157B2 (en) * 1999-12-20 2004-11-10 オリンパス株式会社 Subject observation device
JP2002095635A (en) * 2000-07-21 2002-04-02 Olympus Optical Co Ltd Endoscope system
JP2008237394A (en) * 2007-03-26 2008-10-09 Olympus Medical Systems Corp Endoscope system

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011254936A (en) * 2010-06-08 2011-12-22 Fujifilm Corp Electronic endoscope system, processor device for electronic endoscope, and tracing method
US8585586B2 (en) 2010-06-08 2013-11-19 Fujifilm Corporation Electronic endoscope system, processor for electronic endoscope, and target tracing method
EP2481343B1 (en) * 2011-01-27 2020-05-06 Fujifilm Corporation Processing unit for endoscope system and image processing method
WO2013111623A1 (en) * 2012-01-25 2013-08-01 富士フイルム株式会社 Endoscope system, processor device for endoscope system, and image processing method
JP2013150713A (en) * 2012-01-25 2013-08-08 Fujifilm Corp Endoscope system, processor device for endoscope system, and image processing method
CN104023618A (en) * 2012-01-25 2014-09-03 富士胶片株式会社 Endoscope System, Processor Device For Endoscope System, And Image Processing Method
CN110226911A (en) * 2014-07-10 2019-09-13 柯惠Lp公司 Endoscopic system
CN109060679A (en) * 2018-09-07 2018-12-21 中国计量科学研究院 Ultraspectral transmittance etalon and visibility measurement device
KR20200090632A (en) * 2019-01-18 2020-07-29 아이알트로닉스 인코퍼레이티드 acoustic device comprising semiconductor light source
KR102340308B1 (en) * 2019-01-18 2021-12-17 아이알트로닉스 인코퍼레이티드 acoustic device comprising semiconductor light source
US11882392B2 (en) 2019-01-18 2024-01-23 Irtronix, Inc. Sound output device

Similar Documents

Publication Publication Date Title
JP3713347B2 (en) Fluorescence endoscope device
JP4855728B2 (en) Illumination device and observation device
JP5496852B2 (en) Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system
JP5501210B2 (en) Image processing device
JP5419931B2 (en) Endoscope system, light source device, and operation method of endoscope system
JP5637834B2 (en) Endoscope device
JP5431252B2 (en) Electronic endoscope system, processor device for electronic endoscope, and method for operating electronic endoscope system
JP6581984B2 (en) Endoscope system
WO2012043771A1 (en) Imaging device
JP5757891B2 (en) Electronic endoscope system, image processing apparatus, operation method of image processing apparatus, and image processing program
WO2006132191A1 (en) Endoscope and image processing device
JP2005131130A (en) Image processing device
JP2010094153A (en) Electron endoscopic system and observation image forming method
JP2012065898A (en) Electronic endoscope system
JP2010213993A (en) Endoscope system, endoscope processor, and method for driving endoscope
JP5539840B2 (en) Electronic endoscope system, processor device for electronic endoscope system, and method for operating electronic endoscope system
JP4297887B2 (en) Fluorescence endoscope device
JP2010094152A (en) Electron endoscopic system
JP5579672B2 (en) Endoscope system and light source device
JP6085648B2 (en) Endoscope light source device and endoscope system
JP5334952B2 (en) Image processing device
WO2006004038A1 (en) Light source device and fluorescence observation system
WO2019176253A1 (en) Medical observation system
JP6214503B2 (en) Endoscope light source device and endoscope system
JP2006271869A (en) Electronic endoscope apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110628

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130227

A762 Written abandonment of application

Free format text: JAPANESE INTERMEDIATE CODE: A762

Effective date: 20130307