JP6602939B2 - Endoscope system and method for operating endoscope system - Google Patents
Endoscope system and method for operating endoscope system Download PDFInfo
- Publication number
- JP6602939B2 JP6602939B2 JP2018216972A JP2018216972A JP6602939B2 JP 6602939 B2 JP6602939 B2 JP 6602939B2 JP 2018216972 A JP2018216972 A JP 2018216972A JP 2018216972 A JP2018216972 A JP 2018216972A JP 6602939 B2 JP6602939 B2 JP 6602939B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- color
- amount
- ratio
- spectrum
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 24
- 238000001228 spectrum Methods 0.000 claims description 382
- 229910052724 xenon Inorganic materials 0.000 claims description 74
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 claims description 74
- 238000003384 imaging method Methods 0.000 claims description 56
- 238000001514 detection method Methods 0.000 claims description 54
- 238000012795 verification Methods 0.000 claims description 47
- 239000003086 colorant Substances 0.000 claims description 43
- 230000035945 sensitivity Effects 0.000 claims description 26
- 229910052736 halogen Inorganic materials 0.000 claims description 7
- 150000002367 halogens Chemical class 0.000 claims description 7
- 230000010354 integration Effects 0.000 claims description 5
- 238000005286 illumination Methods 0.000 description 37
- 230000000295 complement effect Effects 0.000 description 36
- 238000012545 processing Methods 0.000 description 33
- 230000003595 spectral effect Effects 0.000 description 31
- 210000003238 esophagus Anatomy 0.000 description 25
- 239000004065 semiconductor Substances 0.000 description 24
- 230000006866 deterioration Effects 0.000 description 17
- 230000003287 optical effect Effects 0.000 description 13
- 230000008569 process Effects 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 10
- 239000002775 capsule Substances 0.000 description 9
- 210000002784 stomach Anatomy 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000002123 temporal effect Effects 0.000 description 8
- 210000004204 blood vessel Anatomy 0.000 description 7
- 210000002429 large intestine Anatomy 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 6
- 238000012937 correction Methods 0.000 description 6
- 230000008878 coupling Effects 0.000 description 6
- 238000010168 coupling process Methods 0.000 description 6
- 238000005859 coupling reaction Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 210000004400 mucous membrane Anatomy 0.000 description 5
- 239000000047 product Substances 0.000 description 5
- 238000005452 bending Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- 230000000875 corresponding effect Effects 0.000 description 4
- 230000005284 excitation Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000003780 insertion Methods 0.000 description 4
- 230000037431 insertion Effects 0.000 description 4
- 230000001678 irradiating effect Effects 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 2
- 230000032683 aging Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 239000010410 layer Substances 0.000 description 2
- 239000002344 surface layer Substances 0.000 description 2
- 241000579895 Chlorostilbon Species 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 229910052876 emerald Inorganic materials 0.000 description 1
- 239000010976 emerald Substances 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000002496 gastric effect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004877 mucosa Anatomy 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 239000012466 permeate Substances 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 239000011241 protective layer Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
Description
本発明は、観察対象に照射する照明光を複数の光源を用いて形成する内視鏡システム及び内視鏡システムの作動方法に関する。 The present invention relates to an endoscope system that forms illumination light for irradiating an observation target by using a plurality of light sources, and a method for operating the endoscope system.
医療分野においては、内視鏡光源装置、内視鏡、及びプロセッサ装置を備える内視鏡システムを用いた診断が広く行われている。内視鏡光源装置は、体腔の粘膜等の観察対象に照射する光(以下、照明光という)を発生する装置である。内視鏡光源装置には、従来、キセノンランプ等の広帯域な連続スペクトルを有する光(以下、連続スペクトル光という)を発する光源が用いられてきたが、近年では、キセノンランプ等の広帯域光源の代わりに、LED(Light Emitting Diode)等の半導体光源が用いられつつある。光源に半導体光源を用いる場合には、例えば、青色LED、緑色LED、及び赤色LEDなどの互いに異なる色の光を発光する複数の半導体光源を組み合わせて用いることにより、これらの光を重ね合わせた分光スペクトルを有する光(以下、多色スペクトル光という)が照明光になる。 In the medical field, diagnosis using an endoscope system including an endoscope light source device, an endoscope, and a processor device is widely performed. An endoscope light source device is a device that generates light (hereinafter referred to as illumination light) that irradiates an observation target such as a mucous membrane of a body cavity. Conventionally, a light source that emits light having a broadband continuous spectrum (hereinafter referred to as continuous spectrum light) such as a xenon lamp has been used as an endoscope light source device. In addition, semiconductor light sources such as LEDs (Light Emitting Diodes) are being used. When a semiconductor light source is used as the light source, for example, a combination of a plurality of semiconductor light sources that emit light of different colors such as a blue LED, a green LED, and a red LED is used to superimpose these lights. Light having a spectrum (hereinafter referred to as multicolor spectrum light) becomes illumination light.
例えば、特許文献1の内視鏡システムは、内視鏡光源装置に4個の独立制御可能な半導体光源を搭載し、各々の発光量を制御することで照明光の分光スペクトル(波長毎の光量分布)を調整することで、取得したい画像特性に応じた最適な特性を有する照明光を観察対象に照射できるようにしている。具体的には、明るさに対するダイナミックレンジの大きな画像、色温度が低い画像、色温度が高い画像、及び特殊な狭帯域波長を狭いエリアに照射した場合の画像を得るために、それぞれ照明光の分光スペクトル等を調節している。
For example, the endoscope system of
また、特許文献2の内視鏡システムは、複数の独立制御可能な半導体光源を搭載しており、内視鏡の機種を識別し、内視鏡の機種に応じて各半導体光源の駆動条件を設定している。具体的には、機種によって照明光を伝搬するためのライトガイドの光透過特性が異なるので、内視鏡の機種を識別して、ライトガイドの光透過特性に応じた各半導体光源の光量比を設定している。 In addition, the endoscope system of Patent Document 2 includes a plurality of independently controllable semiconductor light sources, identifies the endoscope model, and sets the driving conditions of each semiconductor light source according to the endoscope model. It is set. Specifically, since the light transmission characteristics of the light guide for propagating illumination light differ depending on the model, the endoscope model is identified, and the light intensity ratio of each semiconductor light source corresponding to the light transmission characteristics of the light guide is determined. It is set.
上記のように、内視鏡システムで用いる照明光は、従来のキセノンランプ等による連続スペクトル光から、複数の半導体光源による多色スペクトル光になりつつあるが、連続スペクトル光と多色スペクトル光とでは、それぞれ分光スペクトルが異なっているので、連続スペクトル光を照射して撮像した観察対象の画像と、多色スペクトル光を照射して撮像した観察対象の画像とでは、同じ観察対象であっても見え方が異なる場合がある。連続スペクトル光を照明光に用いる場合と、多色スペクトル光を照明光に用いる場合とでの観察対象の見え方の違いは一概にどちらが優れているとは言えないが、複数の半導体光源が独立制御可能であり、観察対象等に応じて分光スペクトルを調節できる分、多色スペクトル光を照明光に用いる場合の方が柔軟に観察できる利点がある。 As described above, the illumination light used in the endoscope system is becoming multicolor spectrum light by a plurality of semiconductor light sources from continuous spectrum light by a conventional xenon lamp or the like. Then, since the spectral spectra are different from each other, the observation target image captured by irradiating with continuous spectrum light and the observation target image captured by irradiating with multi-color spectrum light are the same observation target. It may look different. The difference in the appearance of the observation object between the case where continuous spectrum light is used as illumination light and the case where multicolor spectrum light is used as illumination light is generally not superior, but multiple semiconductor light sources are independent. Since it is controllable and the spectral spectrum can be adjusted according to the object to be observed, there is an advantage that the multi-color spectrum light can be observed more flexibly when used as illumination light.
一方、内視鏡システムでは、キセノンランプ等による連続スペクトル光を照明光として用いてきた期間が長いので、多くの医師はキセノンランプ等による連続スペクトル光を照射した場合の観察対象の見え方に慣れている。このため、複数の半導体光源による多色スペクトル光を照明光に用いる場合でも従前のキセノンランプ等による連続スペクトル光を照明光に用いた場合と同様に観察できるようにしておくことが望まれている。また、過去の症例として蓄積されている内視鏡画像の多くも、キセノンランプ等による連続スペクトル光によって撮影されているので、複数の半導体光源による多色スペクトル光を照明光に用いる場合でも、過去の症例と単純に比較しやすくするために、連続スペクトル光を照明光に用いた場合と同様の内視鏡画像を得られるようにしておくことが望まれている。 On the other hand, in an endoscope system, since a continuous spectrum light from a xenon lamp or the like has been used as illumination light, many doctors are accustomed to the appearance of an observation target when irradiated with a continuous spectrum light from a xenon lamp or the like. ing. For this reason, it is desired that even when multi-color spectrum light from a plurality of semiconductor light sources is used as illumination light, observation can be performed in the same manner as when continuous spectrum light from a conventional xenon lamp or the like is used as illumination light. . In addition, since many of the endoscopic images accumulated as past cases are taken with continuous spectrum light from a xenon lamp or the like, even when multicolor spectrum light from a plurality of semiconductor light sources is used as illumination light, In order to make it easy to easily compare with the above case, it is desired to obtain an endoscopic image similar to that obtained when continuous spectrum light is used as illumination light.
上記の要望に応えるためには、複数の半導体光源で連続スペクトル光の分光スペクトルを再現できれば良いが、実際には、複数の半導体光源で連続スペクトル光の分光スペクトルを完全に再現することはできない。例えば、中心波長から離れた波長ほど光量が小さくなる青色LED及び緑色LEDを光源として用いる場合、これらの中間色(青色と緑色の中間付近の波長)の光量は、青色LEDと緑色LEDの光量を調節しただけでは変化し難く、青色LED及び緑色LEDの各中心波長を連続スペクトル光の光量に近づけると、青色と緑色の中間色の光量は連続スペクトル光の光量を大幅に下回る。逆に、青色と緑色の中間色の光量を連続スペクトル光に近づけるために青色LEDと緑色LEDの光量を増大させると、青色LEDの中心波長付近の色や緑色LEDの中心波長の色では連続スペクトル光の光量を大幅に超過してしまう。 In order to meet the above demand, it is only necessary to reproduce the spectrum of continuous spectrum light with a plurality of semiconductor light sources, but in reality, the spectrum of continuous spectrum light cannot be completely reproduced with a plurality of semiconductor light sources. For example, when using a blue LED or green LED whose light quantity decreases as the wavelength is farther from the center wavelength, the light quantity of these intermediate colors (wavelengths near the middle of blue and green) adjusts the light quantity of the blue LED and green LED. If the center wavelengths of the blue LED and the green LED are brought close to the light amount of the continuous spectrum light, the light amount of the intermediate color between blue and green is significantly lower than the light amount of the continuous spectrum light. Conversely, if the light quantity of the blue LED and the green LED is increased in order to bring the light quantity of the intermediate color of blue and green closer to the continuous spectrum light, the continuous spectrum light is used for the color near the center wavelength of the blue LED and the color of the center wavelength of the green LED. The amount of light will be greatly exceeded.
本発明は、互いに異なる色の光を独立して発光する複数の光源を用いて、これらの光を重ね合わせた多色スペクトル光を照明光として用いる場合でも、連続スペクトル光を照明光に用いた場合とほぼ同様に観察対象を観察可能にする内視鏡システム及び内視鏡システムの作動方法を提供することを目的とする。 The present invention uses continuous spectrum light as illumination light even when using a plurality of light sources that independently emit light of different colors and using multicolor spectrum light obtained by superimposing these lights as illumination light. It is an object of the present invention to provide an endoscope system and an operation method of the endoscope system that make it possible to observe an observation object almost as in the case.
本発明の内視鏡システムは、第1波長帯域の紫色光であるV光を発する紫色光源、第2波長帯域の青色光であるB光を発する青色光源、緑色光であるG光を発する緑色光源、及び、赤色光であるR光を発する赤色光源を有する複数の光源を有し、複数の光源が発光する光を重ね合わせた第1多色スペクトルを有する第1多色スペクトル光を発する光源部と、異なる色に感度を有する複数色の画素を有する撮像センサであって、第1色に感度を有する第1色画素と、第2色に感度を有する第2色画素と、第3色に感度を有する第3色画素とを有する撮像センサと、複数の光源を制御し、第1多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、キセノンランプ、ハロゲンランプ、または白色LEDが発光する白色光である連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させる光源制御部とを備え、光源制御部は、第1多色スペクトル光の第1波長帯域の光量積分値と連続スペクトル光の第1波長帯域の光量積分値とが一致し、且つ、第1多色スペクトル光の第2波長帯域の光量積分値と連続スペクトル光の第2波長帯域の光量積分値とが一致するように、V光とB光の光量比Kv:Kbを決定し、光量比Kv:KbでV光とB光を合成した光をB2光とした場合であって、B2光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれB2b、B2g、及びB2rとし、第1多色スペクトル光のG光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれGb、Gg、及びGrとし、第1多色スペクトル光のR光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれRb、Rg、及びRrとし、連続スペクトル光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれXb、Xg、及びXrとした場合において、下記数3を満たすように、B2光、G光、及びR光の光量比Pb2:Pg:Prを算出する内視鏡システム。
The endoscope system of the present invention includes a violet light source that emits V light that is violet light in a first wavelength band, a blue light source that emits B light that is blue light in a second wavelength band, and a green light that emits G light that is green light. A light source that has a plurality of light sources having a light source and a red light source that emits red light as R light, and that emits first multicolor spectrum light having a first multicolor spectrum obtained by superimposing light emitted from the plurality of light sources. A first color pixel having sensitivity to a first color, a second color pixel having sensitivity to a second color, and a third color. The ratio of the integrated light amount for each color obtained by controlling the plurality of light sources and receiving the first multicolor spectrum light with the plurality of pixels is controlled by xenon. White light emitted from a lamp, halogen lamp, or white LED A light source control unit that matches the ratio of the light intensity integral value for each color obtained by receiving the continuous spectrum light that is light by the pixels of the plurality of colors, and the light source control unit includes the first wavelength of the first multicolor spectrum light. The integrated light amount of the band matches the integrated light amount of the first wavelength band of the continuous spectrum light, and the integrated light value of the second wavelength band of the first multicolor spectrum light and the second wavelength band of the continuous spectrum light. The light amount ratio Kv: Kb of the V light and the B light is determined so that the integrated light amount matches, and the light obtained by combining the V light and the B light at the light amount ratio Kv: Kb is defined as B2 light, The light intensity integral values obtained by receiving the B2 light with the first color pixel, the second color pixel, and the third color pixel are B2b, B2g, and B2r, respectively, and the G light of the first multicolor spectrum light is the first color pixel. , The light intensity integral values obtained by receiving light at the second color pixel and the third color pixel, respectively b, Gg, and Gr, and Rb, Rg, and Rr are the light intensity integral values obtained by receiving the R light of the first multicolor spectrum light by the first color pixel, the second color pixel, and the third color pixel, respectively. When the integrated light quantity values obtained by receiving the continuous spectrum light with the first color pixel, the second color pixel, and the third color pixel are Xb, Xg, and Xr, respectively, B2 An endoscope system that calculates a light amount ratio Pb2: Pg: Pr of light, G light, and R light.
光源制御部は、光量比Kv:Kbと光量比Pb2:Pg:Prを用いて、V光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを算出することが好ましい。観察対象の種類毎に光量比Cv:Cb:Cg:Crを記憶する光量比記憶部を備え、光源制御部は、観察対象の種類毎の光量比Cv:Cb:Cg:Crのなかから光量比Cv:Cb:Cg:Crを選択することが好ましい。第1色画素は青色画素、第2色画素は緑色画素、第3色画素は赤色画素であることが好ましい。 The light source controller preferably calculates the light quantity ratio Cv: Cb: Cg: Cr of the V light, B light, G light, and R light using the light quantity ratio Kv: Kb and the light quantity ratio Pb2: Pg: Pr. . A light amount ratio storage unit that stores a light amount ratio Cv: Cb: Cg: Cr for each type of observation target is provided, and the light source control unit is configured to have a light amount ratio Cv: Cb: Cg: Cr for each type of observation target. It is preferable to select Cv: Cb: Cg: Cr. Preferably, the first color pixel is a blue pixel, the second color pixel is a green pixel, and the third color pixel is a red pixel.
複数の光源が発する光量をそれぞれ検出する光量検出部を備え、光源制御部は、光量検出部による検出結果を用いて、複数の光源のうち、第1多色スペクトル光を形成する光量の指定値に対して、光量の不足が最も大きい最劣化光源の光量に合わせて、残りの光源の光量を設定することが好ましい。光量検出部は、複数の光源が発光している間、複数の光源が発光する光の検出を繰り返し行うことが好ましい。 The light source control unit includes a light amount detection unit that detects the amount of light emitted by each of the plurality of light sources, and the light source control unit uses a detection result of the light amount detection unit to specify a light amount designation value for forming the first multicolor spectrum light among the plurality of light sources. On the other hand, it is preferable to set the light quantity of the remaining light sources in accordance with the light quantity of the most deteriorated light source having the largest light quantity shortage. It is preferable that the light amount detection unit repeatedly detects light emitted from the plurality of light sources while the plurality of light sources emit light.
第1多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証する検証部を備えることが好ましい。 The ratio of the integrated amount of light for each color obtained by receiving the first multicolor spectrum light with each of the pixels of a plurality of colors is the ratio of the integrated amount of light for each color obtained by receiving the continuous spectrum light with each of the pixels of a plurality of colors. It is preferable to provide a verification unit that verifies whether or not they match.
複数の光源が発する光量をそれぞれ検出する光量検出部を備え、検証部は、光量検出部による検出結果を用いて、第1多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証することが好ましい。 A light amount detection unit that detects light amounts emitted from a plurality of light sources, respectively, and the verification unit uses the detection result of the light amount detection unit to receive the first multicolor spectrum light by each of the pixels of a plurality of colors. It is preferable to verify whether or not the ratio of the light quantity integral value matches the ratio of the light quantity integral value for each color obtained by receiving continuous spectrum light with a plurality of color pixels.
検証部は、撮像センサの出力を用いて、第1多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証することが好ましい。光源制御部は、検証部による検証結果を用いて複数の光源を制御することが好ましい。 Using the output of the image sensor, the verification unit receives the first multicolor spectrum light by the plurality of color pixels, and the ratio of the integrated light amount for each color, and receives the continuous spectrum light by the plurality of color pixels. It is preferable to verify whether or not the light intensity integral value ratio for each color matches. It is preferable that the light source control unit controls a plurality of light sources using the verification result by the verification unit.
第1色画素で受光する波長帯域は第1波長帯域と第2波長帯域に区切られており、第1多色スペクトル光の第1波長帯域の光量積分値と連続スペクトル光の第1波長帯域の光量積分値とは、それぞれ第1色画素の第1波長帯域で受光して得られる光量積分値であり、第1多色スペクトル光の第2波長帯域の光量積分値と連続スペクトル光の第2波長帯域の光量積分値とは、それぞれ第1色画素の第2波長帯域で受光して得られる光量積分値であることが好ましい。 The wavelength band received by the first color pixel is divided into a first wavelength band and a second wavelength band, and the integrated amount of light of the first wavelength band of the first multicolor spectrum light and the first wavelength band of the continuous spectrum light. The light amount integrated value is a light amount integrated value obtained by receiving light in the first wavelength band of the first color pixel, and the light amount integrated value of the second wavelength band of the first multicolor spectrum light and the second light of the continuous spectrum light. The light amount integral value in the wavelength band is preferably a light amount integral value obtained by receiving light in the second wavelength band of the first color pixel.
本発明は、第1波長帯域の紫色光であるV光を発する紫色光源、第2波長帯域の青色光であるB光を発する青色光源、緑色光であるG光を発する緑色光源、及び、赤色光であるR光を発する赤色光源を有する複数の光源を有し、複数の光源が発光する光を重ね合わせた第1多色スペクトルを有する第1多色スペクトル光を発する光源部と、異なる色に感度を有する複数色の画素を有する撮像センサであって、第1色に感度を有する第1色画素と、第2色に感度を有する第2色画素と、第3色に感度を有する第3色画素とを有する撮像センサと、を有する内視鏡システムの作動方法において、光源制御部が複数の光源を制御し、第1多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、キセノンランプ、ハロゲンランプ、または白色LEDが発光する白色光である連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させるステップであって、光源制御部は、第1多色スペクトル光の第1波長帯域の光量積分値と連続スペクトル光の第1波長帯域の光量積分値とが一致し、且つ、第1多色スペクトル光の第2波長帯域の光量積分値と連続スペクトル光の第2波長帯域の光量積分値とが一致するように、V光とB光の光量比Kv:Kbを決定し、光量比Kv:KbでV光とB光を合成した光をB2光とした場合であって、B2光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれB2b、B2g、及びB2rとし、第1多色スペクトル光のG光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれGb、Gg、及びGrとし、第1多色スペクトル光のR光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれRb、Rg、及びRrとし、連続スペクトル光を第1色画素、第2色画素、及び第3色画素で受光して得る光量積分値をそれぞれXb、Xg、及びXrとした場合において、下記数3を満たすように、B2光、G光、及びR光の光量比Pb2:Pg:Prを算出するステップを有する。
The present invention includes a purple light source that emits V light that is purple light in the first wavelength band, a blue light source that emits B light that is blue light in the second wavelength band, a green light source that emits G light that is green light, and red A light source unit that has a plurality of light sources having a red light source that emits R light that is light, and that emits first multicolor spectrum light having a first multicolor spectrum in which light emitted from the plurality of light sources is superimposed, has a different color. An image sensor having a plurality of color pixels having sensitivity to the first color pixel, the first color pixel having sensitivity to the first color, the second color pixel having sensitivity to the second color, and the first color pixel having sensitivity to the third color. In an operating method of an endoscope system having an imaging sensor having three color pixels, a color obtained by a light source control unit controlling a plurality of light sources and receiving a first multicolor spectrum light by a plurality of color pixels, respectively. The ratio of the light intensity integral value for each xenon lamp, halogen The light source control unit is a step of matching the ratio of the light intensity integral value for each color obtained by receiving continuous spectrum light, which is white light emitted from a lamp or white LED, with each of a plurality of color pixels. The light intensity integral value of the first wavelength band of the color spectrum light matches the light intensity integral value of the first wavelength band of the continuous spectrum light, and the light intensity integral value of the second wavelength band of the first multicolor spectrum light and the continuous spectrum. The light quantity ratio Kv: Kb of the V light and the B light is determined so that the light quantity integral value of the second wavelength band of the light matches, and the light obtained by combining the V light and the B light at the light quantity ratio Kv: Kb is B2 light. In this case, B2b, B2g, and B2r are respectively integrated light amounts obtained by receiving the B2 light at the first color pixel, the second color pixel, and the third color pixel, and the first multicolor spectrum light G light for the first color pixel, the second color pixel, and the third color image Gb, Gg, and Gr are the light intensity integral values obtained by receiving light at, respectively, and the light quantity integral obtained by receiving the R light of the first multicolor spectrum light at the first color pixel, the second color pixel, and the third color pixel. In the case where the values are Rb, Rg, and Rr, respectively, and the integrated light quantity values obtained by receiving the continuous spectrum light with the first color pixel, the second color pixel, and the third color pixel are Xb, Xg, and Xr, respectively. The step of calculating the light quantity ratio Pb2: Pg: Pr of the B2 light, the G light, and the R light so as to satisfy the
本発明の内視鏡システム及び内視鏡システムの作動方法は、複数の光源が発光する光を重ね合わせた多色スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、白色光源が発光する光の少なくとも一部の波長帯域を有する連続スペクトル光を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させることにより、多色スペクトル光を照明光として用いる場合でも、連続スペクトル光を照明光に用いた場合とほぼ同様に観察対象を観察可能にすることができる。 According to the endoscope system and the operation method of the endoscope system of the present invention, the light intensity integral value for each color obtained by receiving the multicolor spectrum light obtained by superimposing the light emitted from the plurality of light sources by the pixels of the plurality of colors, respectively. By matching the ratio to the ratio of the integrated amount of light for each color obtained by receiving the continuous spectrum light having at least a part of the wavelength band of the light emitted from the white light source with the pixels of the plurality of colors, the multicolor spectrum light Even when the light is used as illumination light, the observation object can be observed in substantially the same manner as when continuous spectrum light is used as illumination light.
[第1実施形態]
図1に示すように、内視鏡システム10は、内視鏡12と、内視鏡光源装置14と、プロセッサ装置16と、モニタ18と、コンソール19とを有する。内視鏡12は内視鏡光源装置14と光学的に接続されるとともに、プロセッサ装置16と電気的に接続される。内視鏡12は、被検体内に挿入される挿入部12aと、挿入部12aの基端部分に設けられた操作部12bと、挿入部12aの先端側に設けられた湾曲部12c及び先端部12dを有している。操作部12bのアングルノブ12eを操作することにより、湾曲部12cは湾曲動作する。この湾曲動作によって、先端部12dが所望の方向に向けられる。また、操作部12bには、アングルノブ12eの他、ズーム操作部13等が設けられている。
[First Embodiment]
As shown in FIG. 1, the
プロセッサ装置16は、モニタ18及びコンソール19と電気的に接続される。モニタ18は、各観察モードの画像や画像に付帯する画像情報等を出力表示する。コンソール19は、機能設定等の入力操作を受け付けるユーザインタフェースとして機能する。なお、プロセッサ装置16には、画像や画像情報等を記録する外付けの記録部(図示省略)を接続してもよい。
The
図2に示すように、内視鏡光源装置14は、観察対象に照射する照明光を発生する装置であり、複数の光源を有する光源部20と、光源部20の各光源を制御する光源制御部22と、光源部20が発する光の光路を結合する光路結合部23とを備えている。
As shown in FIG. 2, the endoscope
光源部20は、紫色LED(以下、V−LED(Violet Light Emitting Diode)という)20a、青色LED(以下、B−LED(Blue Light Emitting Diode)という)20b、緑色LED(以下、G−LED(Green Light Emitting Diode)という)20c、及び、赤色LED(以下、R−LED(Red Light Emitting Diode)という)20dの4色のLEDを有する。
The
図3に示すように、V−LED20aは、中心波長405nm、波長帯域380〜420nmの紫色光(以下、V光という)を発光する紫色光源である。B−LED20bは、中心波長450nm、波長帯域420〜490nmの青色光(以下、B光という)を発する青色光源である。G−LED20cは、中心波長が524nm〜525nm、波長帯域が480nm〜590nmの緑色光(以下、G光という)を発する緑色光源である。R−LED20dは、中心波長が628〜629nmであり、波長帯域が580〜700nmの赤色光(以下、R光という)を発光する赤色光源である。なお、これらの各LED20a〜20dの中心波長は±5nmから±10nm程度の幅を有する。
As shown in FIG. 3, the V-
光源部20は、これらの互いに異なる色の光を独立して発光する複数の光源によって、V光、B光、G光、及びR光を重ね合わせた多色スペクトルを有する多色スペクトル光を発する。V−LED20aの波長帯域とB−LED20bの波長帯域には重複があり、B−LED20bの波長帯域とG−LED20cの波長帯域にも重複があり、かつ、G−LED20cの波長帯域とR−LED20dの波長帯域にも重複がある。また、各LED20a〜20dの発光量(以下、単に光量という)はそれぞれ独立に制御可能であるため、多色スペクトル光の分光スペクトルは、各LED20a〜20dの光量を変えることによって変化させることができる。本実施形態では、光源部20は、図4に示す従来の内視鏡システムが用いてきたキセノンランプが発する白色光の広帯域な連続スペクトル光26を照明光として用いて観察する場合を模倣する特定のバランスで、V光、B光、G光、及びR光を発光する。このキセノンエミュレートモードで光源部20が発する多色スペクトル光を、以下では第1多色スペクトル光という。図3に示す分光スペクトルを有する多色スペクトル光が、本実施形態の第1多色スペクトル光25であり、第1多色スペクトル光25の分光スペクトルが第1多色スペクトルである。
The
光源制御部22は、光源部20が有する各LED20a〜20dの駆動電流や駆動電圧、駆動電流または駆動電圧を各LED20a〜20dにパルス入力する際のパルス幅やパルス長等を個別に制御することによって、各LED20a〜20dが発する各光の発光タイミングや光量を制御する。本実施形態では、光源部20から第1多色スペクトル光25を発光する場合、光源制御部22は、各LED20a〜20dを同時に点灯し、かつ、各LED20a〜20dの発光量の比(以下、光量比という)を制御する。そして、光源制御部22は、各LED20a〜20dの光量比を制御することで、第1多色スペクトル光25を撮像センサ48の複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、連続スペクトル光26を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させる。
The
光量積分値とは、撮像センサ48が複数色の各画素で光電変換して得る信号電荷の量である。このため、撮像センサ48の機種や設定等によっては、複数色の各画素で異なるゲインをかけて信号電荷の読み出しを行って画像信号を出力するが、光量積分値は撮像センサ48が信号電荷の読み出し時にかけるゲインの値には依存しない。また、光量積分値は、プロセッサ装置16が画像信号に対して行う信号処理の内容にも依存しない。本実施形態では、光量積分値は、光源部20が発する第1多色スペクトル光(あるいはキセノンランプの連続スペクトル光26)の分光スペクトルと、撮像センサ48のカラーフィルタの分光スペクトルの波長毎の積を、カラーフィルタの波長帯域毎に積分して算出する。
The light amount integral value is the amount of signal charge obtained by the image sensor 48 performing photoelectric conversion on each pixel of a plurality of colors. For this reason, depending on the model and setting of the image sensor 48, the signal charge is read out by applying different gains to each pixel of a plurality of colors, and the image signal is output. It does not depend on the value of gain applied at the time of reading. Further, the light quantity integral value does not depend on the content of signal processing performed by the
連続スペクトルとは白色光源が発光する光の少なくとも一部の波長帯域を有する光の分光スペクトルであり、連続スペクトル光とは連続スペクトルを有する光である。白色光源とは、1つの光源から可視光域(例えば400nmから700nm)にわたってなだらかな分布の光を出す光源である。より具体的には、白色光源とは、キセノンランプや、ハロゲンランプ、または白色LED等である。また、白色光源が発光する光の少なくとも一部の波長帯域を有する光とは、白色光源が発光する光からカラーフィルタ等によって抽出した光をいう。 The continuous spectrum is a spectral spectrum of light having at least a part of the wavelength band of light emitted from the white light source, and the continuous spectral light is light having a continuous spectrum. A white light source is a light source that emits light with a gentle distribution over a visible light range (for example, 400 nm to 700 nm) from one light source. More specifically, the white light source is a xenon lamp, a halogen lamp, a white LED, or the like. The light having at least a part of the wavelength band of light emitted from the white light source refers to light extracted from the light emitted from the white light source by a color filter or the like.
多色スペクトルとは、複数の光源がそれぞれ発光する光の分光スペクトルを重ね合わせて得る1つの分光スペクトルであり、複数の光源が発光する光を重ね合わせた光が多色スペクトル光である。広帯域とは、光源部20で用いる複数の光源(LED20a〜20d)のうち少なくとも1個の光源が発光する光の波長帯域よりも波長帯域が広いことを表す。キセノンランプの白色光は、LED20aが発光するV光の波長帯域(紫色波長帯域)、LED20bが発光するB光の波長帯域(青色波長帯域)、LED20cが発光するG光の波長帯域(緑色波長帯域)、及び、LED20dが発光するR光の波長帯域(赤色波長帯域)の各波長帯域よりも波長帯域が広く、これら全ての波長帯域(波長350nm以上700nm未満)の各波長の成分を含み、かつ、可視光域にわたってなだらかな分布を有する光である。したがって、キセノンランプが発光する白色光は、広帯域な連続スペクトル光26である。
A multicolor spectrum is one spectral spectrum obtained by superimposing spectral spectra of light emitted from a plurality of light sources, and light obtained by superimposing light emitted from a plurality of light sources is multicolor spectrum light. The broadband indicates that the wavelength band is wider than the wavelength band of light emitted from at least one light source among the plurality of light sources (
光源部20が発光する多色スペクトル光(第1多色スペクトル光25)は、光路結合部23を介して挿入部12a内に挿通されたライトガイド41に入射される。ライトガイド41は、内視鏡12及びユニバーサルコード(内視鏡12と内視鏡光源装置14及びプロセッサ装置16とを接続するコード)内に内蔵されており、光路結合部23から導光される照明光を内視鏡12の先端部12dまで伝搬する。なお、ライトガイド41としては、マルチモードファイバを使用することができる。一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた経がφ0.3〜0.5mmの細径なファイバケーブルを使用することができる。
The multicolor spectrum light (first multicolor spectrum light 25) emitted from the
内視鏡12の先端部12dには、照明光学系30aと撮像光学系30bが設けられている。照明光学系30aは照明レンズ45を有しており、この照明レンズ45を介して、ライトガイド41によって伝搬された照明光は観察対象に照射される。撮像光学系30bは、対物レンズ46、ズームレンズ47、撮像センサ48を有している。観察対象からの戻り光(反射光の他、観察対象等から発生する蛍光を含む光)は、対物レンズ46及びズームレンズ47を介して撮像センサ48に入射する。これにより、撮像センサ48に観察対象が結像される。なお、ズームレンズ47は、ズーム操作部13を操作することで、テレ端とワイド端の間で自在に移動され、撮像センサ48に結像する観察対象を拡大または縮小する。
The
撮像センサ48は、異なる色に感度を有する複数色の画素を有する。すなわち、撮像センサ48には、互いに色(カラーフィルタの分光スペクトル)が異なる画素がある。より具体的には、撮像センサ48は、青、緑、及び赤を含む原色系カラーフィルタを有する原色系カラー撮像センサであり、観察対象からの戻り光を複数色の画素でそれぞれ撮像して各色の画像信号を出力する。撮像センサ48としては、CCD(Charge Coupled Device)撮像センサやCMOS(Complementary Metal-Oxide Semiconductor)撮像センサを利用可能である。本実施形態では、撮像センサ48は、図5に示す分光スペクトルを有する青色カラーフィルタ(以下、Bフィルタという)、緑色カラーフィルタ(以下、Gフィルタという)、及び赤色カラーフィルタ(以下、Rフィルタという)の3色のカラーフィルタのいずれかが各画素に設けられている。 The imaging sensor 48 has a plurality of color pixels having sensitivity to different colors. That is, the image sensor 48 includes pixels having different colors (color filter spectral spectra). More specifically, the image sensor 48 is a primary color image sensor having primary color filters including blue, green, and red, and images each of the return light from the observation target with pixels of a plurality of colors. The image signal is output. As the image sensor 48, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) image sensor can be used. In the present embodiment, the image sensor 48 includes a blue color filter (hereinafter referred to as a B filter), a green color filter (hereinafter referred to as a G filter), and a red color filter (hereinafter referred to as an R filter) having the spectrum shown in FIG. ) Is provided in each pixel.
Bフィルタが設けられたB画素(青色画素)は、観察対象からの戻り光のうちBフィルタを透過する青色光成分を受光し、Gフィルタが設けられたG画素(緑色画素)は、観察対象からの戻り光のうちGフィルタを透過する緑色光成分を受光する。同様に、Rフィルタが設けられたR画素(赤色画素)は、観察対象からの戻り光のうちRカラーフィルタを透過する赤色光成分を受光する。したがって、光源部20が第1多色スペクトル光25を発光する場合、B画素は第1多色スペクトル光25のうち、V光とB光の各戻り光を受光し、B画像信号(青色画像信号)を出力する。同様に、光源部20が第1多色スペクトル光25を発光する場合、G画素はG光の戻り光を受光してG画像信号(緑色画像信号)を出力し、かつ、R画素はR光の戻り光を受光してR画像信号(赤色画像信号)を出力する。
The B pixel (blue pixel) provided with the B filter receives the blue light component transmitted through the B filter among the return light from the observation target, and the G pixel (green pixel) provided with the G filter is the observation target. The green light component which permeate | transmits G filter among the return lights from is received. Similarly, the R pixel (red pixel) provided with the R filter receives the red light component that passes through the R color filter in the return light from the observation target. Therefore, when the
撮像センサ48が出力する各色の画像信号は、CDS/AGC回路50に送信される。CDS/AGC回路50は、アナログ信号である画像信号に相関二重サンプリング(CDS;Correlated Double Sampling)や自動利得制御(AGC;Automatic Gain Control)を行う。CDS/AGC回路50を経た画像信号は、A/Dコンバータ51により、デジタル画像信号に変換される。A/D変換後のデジタル画像信号がプロセッサ装置16に入力される。
Each color image signal output from the image sensor 48 is transmitted to the CDS / AGC circuit 50. The CDS / AGC circuit 50 performs correlated double sampling (CDS) and automatic gain control (AGC) on an image signal that is an analog signal. The image signal that has passed through the CDS / AGC circuit 50 is converted into a digital image signal by the A /
プロセッサ装置16は、受信部53と、DSP(Digital Signal Processor)56と、ノイズ除去部58と、画像生成部62と、映像信号生成部66とを備えている。
The
受信部53は、内視鏡12からデジタルのRGB画像信号を受信する。DSP56は、受信した画像信号に対して、欠陥補正処理、オフセット処理、ゲイン補正処理、リニアマトリクス処理、ガンマ変換処理、及びデモザイク処理等の各種信号処理を施す。欠陥補正処理では、撮像センサ48の欠陥画素の信号が補正される。オフセット処理では、欠陥補正処理が施されたRGB画像信号から暗電流成分が除かれ、正確な零レベルが設定される。ゲイン補正処理では、オフセット処理後のRGB画像信号に特定のゲインを乗じることにより信号レベルが整えられる。ゲイン補正処理後のRGB画像信号には、色再現性を高めるためのリニアマトリクス処理が施される。その後、ガンマ変換処理によって明るさや彩度が整えられる。リニアマトリクス処理後のRGB画像信号には、デモザイク処理(等方化処理、同時化処理とも言う)が施され、各画素で不足した色の信号が補間によって生成される。このデモザイク処理によって、全画素がRGB各色の信号を有するようになる。
The receiving unit 53 receives a digital RGB image signal from the
ノイズ除去部58は、DSP56でデモザイク処理等が施されたRGB画像信号に対してノイズ除去処理(例えば移動平均法やメディアンフィルタ法等による)を施すことによって、RGB画像信号からノイズを除去する。ノイズが除去されたRGB画像信号は、画像生成部62に送信される。
The
画像生成部62は、RGB画像信号に対して、色変換処理、色彩強調処理、及び構造強調処理を行い、画像(以下、内視鏡画像という)を生成する。色変換処理では、RGB画像信号に対して3×3のマトリックス処理、階調変換処理、及び3次元LUT(ルックアップテーブル)処理などにより色変換処理を行う。色彩強調処理は、色変換処理済みのRGB画像信号に対して行われる。構造強調処理は、例えば表層血管やピットパターン等の観察対象の構造を強調する処理であり、色彩強調処理後のRGB画像信号に対して行われる。上記のように、構造強調処理まで各種画像処理等を施したRGB画像信号を用いたカラー画像が内視鏡画像である。映像信号生成部66は、画像生成部62が生成した内視鏡画像をモニタ18で表示可能な画像として表示するための映像信号に変換する。この映像信号を用いて、モニタ18は内視鏡画像を表示する。
The
以下、本実施形態の内視鏡システム10がキセノンエミュレートモードの照明光として使用する第1多色スペクトル光25の特性と、第1多色スペクトル光25を形成するV光、B光、G光、及びR光の光量比の求め方を説明する。
Hereinafter, the characteristics of the first
まず、光源制御部22は、V光、B光、G光、及びR光の光量比を任意に変更することができるが、これらの各色光の光量比を調節するだけでは、図6に示すようにキセノンランプの連続スペクトル光26の分光スペクトルを再現することはできない。例えば、V光及びB光の光量を連続スペクトル光26に一致させても、これらの中間の波長帯域(約420nm〜430nmの波長帯域)の光量は連続スペクトル光26の光量には及ばない。逆に、V光とB光の中間の波長帯域の光量を連続スペクトル光26の光量に一致させると、V光及びB光の中心波長の光量は連続スペクトル光26の光量を大幅に超過する。
First, the light
したがって、光源制御部22は、各色のLED20a〜20dでキセノンランプの連続スペクトル光26を再現する代わりに、第1多色スペクトル光25をB画素で受光して得る光量積分値、G画素で受光して得る光量積分値、及びR画素で受光して得る光量積分値の比率が、キセノンランプの連続スペクトル光26をB画素で受光して得る光量積分値、G画素で受光して得る光量積分値、及びR画素で受光して得る光量積分値の比率にほぼ一致するように、V光、B光、G光、及びR光の光量比を調節する。こうすると、第1多色スペクトル光25とキセノンランプの連続スペクトル光26の分光スペクトルが異なっていたとしても、結果として、撮像センサ48で観察対象を撮像して得る画像信号が等しくなるので、モニタ18に表示する内視鏡画像も実質的に同じものである。すなわち、分光スペクトルを一致させなくても、観察対象の見え方がキセノンランプを用いた場合と同じ内視鏡画像が得られる。
Therefore, instead of reproducing the
第1多色スペクトル光25を形成するV光をB画素、G画素、及びR画素で受光して得る光量積分値をそれぞれVb、Vg、及びVrとする。同様に、第1多色スペクトル光25を形成するB光をB画素、G画素、及びR画素で受光して得る光量積分値をそれぞれBb、Bg、及びBrとし、第1多色スペクトル光25を形成するG光をB画素、G画素、及びR画素で受光して得る光量積分値をそれぞれGb、Gg、及びGrとし、第1多色スペクトル光25を形成するR光をB画素、G画素、及びR画素で受光して得る光量積分値をそれぞれRb、Rg、及びRrとする。
The light amount integral values obtained by receiving the V light forming the first
V光をB画素で受光して得る光量積分値Vbは、例えば最大値(中心波長の光量)を「1」に規格化したV光の分光スペクトル(図6参照)とBカラーフィルタの分光スペクトル(図5参照)の波長毎の積を積分することにより求められる。V光の分光スペクトル及びBカラーフィルタの分光スペクトルは既知なので、V光をB画素で受光して得る光量積分値Vbは既知量である。他の光量積分値Vg、Vr、Bb、Bg、Br、Rb、Rg、及びRrも同様である。 The light intensity integrated value Vb obtained by receiving the V light by the B pixel is, for example, the spectrum of the V light (see FIG. 6) with the maximum value (the light quantity of the center wavelength) normalized to “1” and the spectrum of the B color filter. It is obtained by integrating the product of each wavelength (see FIG. 5). Since the spectral spectrum of the V light and the spectral spectrum of the B color filter are known, the light amount integrated value Vb obtained by receiving the V light by the B pixel is a known amount. The same applies to the other light intensity integrated values Vg, Vr, Bb, Bg, Br, Rb, Rg, and Rr.
また、キセノンランプの連続スペクトル光26をB画素で受光して得る光量積分値をXbとし、キセノンランプの連続スペクトル光26をG画素で受光して得る光量積分値をXgとし、かつ、キセノンランプの連続スペクトル光26をR画素で受光して得る光量積分値をXrとする。連続スペクトル光26をB画素で受光して得る光量積分値Xbは、例えば最大値を「1」に規格化したキセノンランプの連続スペクトル光26(図4または図6参照)とBカラーフィルタの分光スペクトル(図5参照)の波長毎の積を積分することにより求められる。連続スペクトル光26の分光スペクトル及びBカラーフィルタの分光スペクトルは既知なので、連続スペクトル光26をB画素で受光して得る光量積分値Xbは既知量である。他の光量積分値Xg及びXrも同様である。
Further, the integrated light amount obtained by receiving the Xenon lamp
そして、第1多色スペクトル光25を形成するV光、B光、G光、及びR光の光量比をV光:B光:G光:R光=Cv:Cb:Cg:Crとする。これらCv、Cb、Cg、Crの値は変数であり、第1多色スペクトル光25をB画素で受光して得る光量積分値、G画素で受光して得る光量積分値、及びR画素で受光して得る光量積分値の比率が、キセノンランプの連続スペクトル光26をB画素で受光して得る光量積分値、G画素で受光して得る光量積分値、及びR画素で受光して得る光量積分値の比率に一致するように決定する。
And let the light quantity ratio of V light, B light, G light, and R light which form the 1st
すなわち、第1多色スペクトル光25を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crは、数1を満たすように決定すればよいが、方程式の数よりも変数の数の方が多いので、このままではV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを一意に定めることができない。
That is, the light quantity ratio Cv: Cb: Cg: Cr of the V light, B light, G light, and R light forming the first
そこで、本実施形態ではまずB画素で受光するV光とB光の光量比(V光:B光=Kv:Kb)を決定する。具体的には、B画素で受光する波長帯域を、V光の第1波長帯域(波長380nm以上430nm未満)とB光の第2波長帯域(波長430nm以上480nm未満)の2つの波長帯域に区切る。そして、第1多色スペクトル光25の第1波長帯域の光量積分値と、キセノンランプの連続スペクトル光26の第1波長帯域の光量積分値が一致し、かつ、第1多色スペクトル光25の第2波長帯域の光量積分値と、キセノンランプの連続スペクトル光26の第2波長帯域の光量積分値を一致するように、V光とB光の光量比Kv:Kbを決定する。
Therefore, in this embodiment, first, the light quantity ratio between the V light and the B light received by the B pixel (V light: B light = Kv: Kb) is determined. Specifically, the wavelength band received by the B pixel is divided into two wavelength bands, a first wavelength band for V light (
V光の第1及び第2波長帯域の各光量積分値をVb1及びVb2とし、B光の第1及び第2波長帯域の各光量積分値をBb1及びBb2とする。また、連続スペクトル光26の第1及び第2波長帯域の各光量積分値をXb1、Xb2とする。V光の第1波長帯域の光量積分値Vb1は、V光の分光スペクトルとBカラーフィルタの分光スペクトルの積を第1波長帯域で積分することで算出する。V光の分光スペクトルとBカラーフィルタの分光スペクトルは既知なので、V光の第1波長帯域の光量積分値Vb1は既知量である。他の光量積分値Vb2、Bb1、Bb2、Xb1、Xb2も同様である。
The respective light amount integral values of the first and second wavelength bands of the V light are denoted as Vb1 and Vb2, and the light amount integral values of the first and second wavelength bands of the B light are denoted as Bb1 and Bb2. Further, the respective light amount integral values of the first and second wavelength bands of the
したがって、V光とB光の光量比Kv:Kbは、数2によって算出できる。本実施形態では、図7に示すように、Kv:Kb≒0.53:1(≒0.35:0.65)である。 Therefore, the light quantity ratio Kv: Kb between the V light and the B light can be calculated by the equation (2). In this embodiment, as shown in FIG. 7, Kv: Kb≈0.53: 1 (≈0.35: 0.65).
第1多色スペクトル光25を形成するV光とB光の光量比Kv:Kbが定まれば、この光量比で合成したV光とB光の合成光を擬似的に青色光(以下、B2光という)として扱うことができる(図7参照)。
If the light quantity ratio Kv: Kb of the V light and the B light forming the first
このため、B2光をB画素で受光して得る光量積分値をB2b、B2光をG画素で受光して得る光量積分値をB2g、B2光をR画素で受光して得る光量積分値をB2rとし、第1多色スペクトル光25を形成するB2光、G光、及びR光の光量比をPb2:Pg:Prとすると、数3によってB2光、G光、及びR光の光量比Pb2:Pg:Prを算出することができる。本実施形態では、Pb2:Pg:Pr=1:1.64:1.65(≒0.24:0.36:0.40)である。
Therefore, the integrated light amount obtained by receiving the B2 light at the B pixel is B2b, the integrated light amount obtained by receiving the B2 light at the G pixel is B2g, and the integrated light amount obtained by receiving the B2 light at the R pixel is B2r. Assuming that the light quantity ratio of the B2 light, G light, and R light forming the first
こうして第1多色スペクトル光25を形成するV光とB光の光量比Kv:Kbと、B2光、G光、及びR光の光量比Pb2:Pg:Prが定まれば、これらを用いて第1多色スペクトル光25を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを算出することができる。本実施形態では、Cv:Cb:Cg:Cr=Kv/Kb:1:Pg/Pb2:Pr/Pb2=0.53:1:1.64:1.65(≒0.11:0.22:0.32:0.36)である。
If the light quantity ratio Kv: Kb of the V light and the B light and the light quantity ratio Pb2: Pg: Pr of the B2 light, the G light, and the R light forming the first
上記光量比Cv:Cb:Cg:CrでV光、B光、G光、及びR光を合成した多色スペクトル光が第1多色スペクトル光25である(図3参照)。内視鏡システム10は、V光、B光、G光、及びR光の光量比を上記光量比Cv:Cb:Cg:Crにした第1多色スペクトル光25を用いることで、第1多色スペクトル光25を撮像センサ48の複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、キセノンランプの連続スペクトル光26を撮像センサ48の複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致する。
The first
具体的には、数1からも分かるように、例えば、第1多色スペクトル光25を用いた場合のG画素での光量積分値(CvVg+CbBg+CgGg+CrRg)に対するB画素での光量積分値(CvVb+CbBb+CgGb+CrRb)の比率(CvVb+CbBb+CgGb+CrRb)/(CvVg+CbBg+CgGg+CrRg)が、キセノンランプの連続スペクトル光26を用いる場合のG画素での光量積分値Xgに対するB画素での光量積分値Xbの比率Xb/Xgに一致する。かつ、第1多色スペクトル光25を用いた場合のG画素での光量積分値(CvVg+CbBg+CgGg+CrRg)に対するR画素での光量積分値(CvVr+CbBr+CgGr+CrRr)の比率(CvVr+CbBr+CgGr+CrRr)/(CvVg+CbBg+CgGg+CrRg)は、キセノンランプの連続スペクトル光26を用いる場合のG画素での光量積分値Xgに対するR画素での光量積分値Xrの比率Xr/Xgに一致する。
Specifically, as can be seen from
すなわち、第1多色スペクトル光25を用いれば、撮像センサ48から得られる画像信号の色毎のバランスがキセノンランプの連続スペクトル光26を用いた場合とほぼ同じになる。このため、内視鏡システム10は、観察対象の見え方をキセノンランプの連続スペクトル光26を用いた場合とほぼ同じになる。また、DSP56で行う各種信号処理や、ノイズ除去部58で行うノイズ除去処理、画像生成部62で行う各種画像処理等で用いるゲインやマトリクスを再計算する必要もなく、従来と同じゲインやマトリクスを使用できるので、ノイズもキセノンランプの連続スペクトル光26を用いる場合とほぼ同じになる。
In other words, if the first
したがって、本実施形態のように撮像センサ48が、青色(第1色)に感度を有するB画素(第1色画素)と、緑色(第2色)に感度を有するG画素(第2色画素)と、赤色(第3色)に感度を有するR画素(第3色画素)と、を有する場合、光源制御部22は、V光、B光、G光、及びR光を上記光量比Cv:Cb:Cg:Crで発光させることにより、B画素で得る青色の光量積分値とG画素で得る第2色の光量積分値との比率を、第1多色スペクトル光25を用いる場合と連続スペクトル光26を用いる場合とで一致させ、かつ、R画素で得る赤色の光量積分値と緑色の光量積分値との比率を、第1多色スペクトル光25を用いる場合と連続スペクトル光26を用いる場合とで一致させる。
Therefore, as in the present embodiment, the imaging sensor 48 includes a B pixel (first color pixel) having sensitivity to blue (first color) and a G pixel (second color pixel) having sensitivity to green (second color). ) And R pixels (third color pixels) having sensitivity to red (third color), the light
第1多色スペクトル光25は、キセノンランプの連続スペクトル光26と比較すると、一部の波長帯域(V光とB光の中間の波長帯域等)の波長成分が少ないが、いわゆる表層血管やピットパターン等の粘膜の表層付近の構造の情報や、中深層血管等の粘膜下の中深層の構造に関する情報は、第1多色スペクトル光25を形成する各色光が十分に担持している。したがって、内視鏡システム10では、第1多色スペクトル光25を用いることで、こうした表層血管等の見え方も含めて観察対象の見え方をキセノンランプの連続スペクトル光26を用いた場合とほぼ一致する。逆に言えば、キセノンランプの連続スペクトル光26のうち、V光とB光の中間の波長帯域等の光は、内視鏡画像を明るくするが、第1多色スペクトル光25を形成する各色光と比較すると、表層血管や中深層血管等の観察対象の構造の見え方への寄与が少ない。このため、内視鏡観察には、第1多色スペクトル光25で不足はない。
Compared with the
なお、第1多色スペクトル光25を撮像センサ48の複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率は、連続スペクトル光26を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に対して少なくとも5%〜10%程度の誤差を許容できる。視覚が色差の違いに比較的鈍感であることもあり、誤差が上記程度であれば、観察対象の見え方はキセノンランプの連続スペクトル光26を用いた場合とほぼ同じになるので、各比率はほぼ一致していると見做せる。したがって、本明細書等で言う、第1多色スペクトル光25を撮像センサ48の複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率と、連続スペクトル光26を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率の「一致」には、上記のような誤差を含んだ「ほぼ一致」も含む。
In addition, the ratio of the light intensity integral value for each color obtained by receiving the first
[第2実施形態]
内視鏡システム10の観察対象は例えば食道であり、食道の反射率は、図8に示すように波長毎に異なる。このため、図9に示すように、V光、B光、G光、及びR光の各最大値を「1」に規格化した多色スペクトル光201を用いる場合でも、食道からの戻り光202は食道の反射率を反映して変化する。同様に、図10に示すように、キセノンランプの連続スペクトル光26を用いる場合でも、食道からの戻り光203は食道の反射率を反映して元の連続スペクトル光26から変化する。なお、食道の反射率には、食道からの反射光の光量の他に、食道の粘膜等を形成する組織から発生する蛍光の光量も含まれている。このため、戻り光202は多色スペクトル光201の反射光の他、多色スペクトル光201を照射したことによって食道から発生する蛍光も含む。戻り光203も同様である。
[Second Embodiment]
The observation target of the
上記のように、食道からの戻り光202及び戻り光203は、食道の反射率を反映して変化するので、第2実施形態では、光源制御部22は、食道に照射した多色スペクトル光201の戻り光202を撮像センサ48の複数色の画素で受光して得る色毎の光量積分値の比率が、食道に照射したキセノンランプの連続スペクトル光26を撮像センサ48の複数の画素で受光して得る色毎の光量積分値の比率に一致するように、V光、B光、G光、及びR光の光量比を制御する。
As described above, since the
このように、食道からの戻り光を撮像センサ48の複数色の画素で受光して得る色毎の光量積分値を、キセノンランプの連続スペクトル光26を撮像センサ48の複数の画素で受光して得る色毎の光量積分値の比率に一致させた多色スペクトル光が、図11に示す第1多色スペクトル光225である。グラフ226は、第1多色スペクトル光225の食道からの戻り光である。
As described above, the integrated light amount for each color obtained by receiving the return light from the esophagus with the pixels of the plurality of colors of the image sensor 48, and the
数1〜数3で用いる各光量積分値の算出する際に、V光、B光、G光、R光、及び連続スペクトル光26の代わりに戻り光202及び戻り光203のデータを用いれば、第1実施形態と同様にして、第1多色スペクトル光225を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを算出することができる。具体的には、第1多色スペクトル光225の場合、Cv:Cb:Cg:Cr=0.53:1:1.36:1.33(≒0.13:0.24:0.32:0.32)である。なお、第1多色スペクトル光225の場合、Kv:Kb=1.05:1.98(≒0.35:0.65)であり、Pb2:Pg:Pr=2.02:2.75:2.69(=0.27:0.37:0.36)である。
When calculating each light amount integral value used in
第2実施形態のように、特定の観察対象の性状を加味してV光、B光、G光、及びR光の光量比を設定した第1多色スペクトル光225を用いれば、特定の観察対象の見え方が、キセノンの連続スペクトル光26を用いる場合と特に正確に一致する。
As in the second embodiment, when the first
なお、観察対象の反射率は、観察対象の種類(部位)によって異なる。例えば、食道の他、胃や大腸等も内視鏡システム10の観察対象であるが、図12に示すように、食道と胃と大腸とでは各波長の反射率は異なる。したがって、食道の反射率を考慮した第1多色スペクトル光225を形成するV光、B光、G光、及びR光の光量比と、胃の反射率を考慮した第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比とは異なる。同様に、大腸の反射率を考慮した第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比も、食道や胃の場合とは異なる。このため、食道や胃や大腸等の観察対象の種類に合わせて第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比を適切に制御することが好ましい。
Note that the reflectance of the observation target varies depending on the type (part) of the observation target. For example, in addition to the esophagus, the stomach, the large intestine, and the like are objects to be observed by the
この場合、図13に示す内視鏡システム240のように、観察対象の種類毎に、複数のV光、B光、G光、及びR光の光量比を記憶する光量比記憶部241を設ける。光量比記憶部241には、例えば、食道用光量比251と胃用光量比252と大腸用光量比253を予め記憶しておく。そして、キセノンランプを模倣する第1多色スペクトル光を用いる場合、光源制御部22は、光量比記憶部241が記憶する複数の光量比のなかから、観察対象の種類に応じた光量比を選択し、V光、B光、G光、及びR光の光量比を選択した光量比に制御する。観察対象が胃の場合、光源制御部22は光量比記憶部241から胃用光量比252を選択し、V光、B光、G光、及びR光の光量比を選択した胃用光量比252に制御する。こうすれば、観察対象の種類に合わせた第1多色スペクトル光を発光することができる。
In this case, as in the
なお、内視鏡システム240では、光量比記憶部241を内視鏡光源装置14に設けているが、光量比記憶部241は、プロセッサ装置16に設けてもよく、内視鏡12に設けても良い。すなわち、光源制御部22が観察対象の種類に合わせて適切な光量比を選択することができれば、光量比記憶部241を設けておく場所は任意である。
In the
[第3実施形態]
上記第1実施形態及び第2実施形態では、原色系カラーフィルタを有する撮像センサ48を用いているが、内視鏡システム10及び240は、原色系の撮像センサ48の代わりに、補色系カラーフィルタを有する補色系カラー撮像センサを用いることもできる。補色系カラーフィルタは、シアンカラーフィルタ(Cy)、マゼンタカラーフィルタ(Mg)、及びイエローカラーフィルタ(Ye)を含む。本実施形態では、図14に示すように、補色系カラーフィルタは、例えば、Cy、Mg、及びYeに加え、グリーンカラーフィルタ(G)を備える。すなわち、本実施形態では、撮像センサ48は、シアン画素(以下、Cy画素という)、マゼンタ画素(以下、Mg画素という)、イエロー画素(以下、Ye画素という)、及びグリーン画素(以下、G画素という)を有する。
[Third Embodiment]
In the first embodiment and the second embodiment, the imaging sensor 48 having a primary color filter is used. However, the
撮像センサ48に補色系カラー撮像センサを用いる場合、観察対象の見え方をキセノンランプの連続スペクトル光26を用いる場合とほぼ等しくする第1多色スペクトル光は、第1及び第2実施形態の第1多色スペクトル光25及び225とはV光、B光、G光、及びR光の光量比が異なる。このため、これらの代わりに補色系カラー撮像センサ用のV光、B光、G光、及びR光の光量比を用いる必要がある。
When a complementary color imaging sensor is used as the imaging sensor 48, the first multicolor spectrum light that makes the appearance of the observation object substantially the same as the case where the
補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光をCy画素、Mg画素、Ye画素、及びG画素で受光して得る光量積分値をそれぞれVcy、Vmg、Vye、及びVgとする。同様に、補色系カラー撮像センサ用の第1多色スペクトル光を形成するB光をCy画素、Mg画素、Ye画素、及びG画素で受光して得る光量積分値をそれぞれBcy、Bmg、Bye、及びBgとし、補色系カラー撮像センサ用の第1多色スペクトル光を形成するG光をCy画素、Mg画素、Ye画素、及びG画素で受光して得る光量積分値をそれぞれGcy、Gmg、Gye、及びGgとし、補色系カラー撮像センサ用の第1多色スペクトル光を形成するR光をCy画素、Mg画素、Ye画素、及びG画素で受光して得る光量積分値をそれぞれRcy、Rmg、Rye、及びRgとする。これらが既知量であることは第1及び第2実施形態と同様である。 The light intensity integral values obtained by receiving the V light forming the first multicolor spectrum light for the complementary color imaging sensor by the Cy pixel, Mg pixel, Ye pixel, and G pixel are Vcy, Vmg, Vye, and Vg, respectively. To do. Similarly, the light intensity integral values obtained by receiving the B light forming the first multicolor spectrum light for the complementary color imaging sensor with the Cy pixel, Mg pixel, Ye pixel, and G pixel are respectively Bcy, Bmg, Bye, And Bg, and the light quantity integral values obtained by receiving the G light forming the first multicolor spectrum light for the complementary color imaging sensor with the Cy pixel, the Mg pixel, the Ye pixel, and the G pixel are Gcy, Gmg, and Gye, respectively. , Gg, and Rcy, Rmg, Rmg, Rmg, and Rcy, Rmg, respectively, obtained by receiving the R light forming the first multicolor spectrum light for the complementary color imaging sensor by the Cy pixel, Mg pixel, Ye pixel, and G pixel. Let Rye and Rg. The fact that these are known amounts is the same as in the first and second embodiments.
また、キセノンランプの連続スペクトル光26をCy画素で受光して得る光量積分値をXcyとし、キセノンランプの連続スペクトル光26をMg画素で受光して得る光量積分値をXmgとし、キセノンランプの連続スペクトル光26をYe画素で受光して得る光量積分値をXyeとし、かつ、キセノンランプの連続スペクトル光26をG画素で受光して得る光量積分値をXgとする。これらが既知量であることは第1及び第2実施形態と同様である。
Also, the integrated light quantity obtained by receiving the
そして、補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比は、第1及び第2実施形態と同様に、V光:B光:G光:R光=Cv:Cb:Cg:Crとする。これらCv、Cb、Cg、Crの値は変数であり、補色系カラー撮像センサ用の第1多色スペクトル光を補色系の各画素で受光して得る光量積分値の比率が、キセノンランプの連続スペクトル光26を補色系の各画素で受光して得る光量積分値の比率に一致するように決定する。すなわち、補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crは、数4を満たすように決定すればよい。数4は、方程式の数と変数の数が等しいので、これを解いてV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを求めることができる。
And the light quantity ratio of V light, B light, G light, and R light which forms the 1st multicolor spectrum light for complementary color type color image sensors is V light: B similarly to 1st and 2nd embodiment. Light: G light: R light = Cv: Cb: Cg: Cr. These values of Cv, Cb, Cg, and Cr are variables, and the ratio of the integrated light amount obtained by receiving the first multicolor spectrum light for the complementary color imaging sensor by each pixel of the complementary color system is the continuous value of the xenon lamp. The
あるいは、以下に説明する算出方法によっても、補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを算出することができる。 Alternatively, the light quantity ratio Cv: Cb: Cg: Cr of the V light, B light, G light, and R light forming the first multicolor spectrum light for the complementary color imaging sensor is also obtained by the calculation method described below. Can be calculated.
この場合、図15に示すように、Cy、Mg、Ye、及びGの各カラーフィルタの感度を波長毎に合算し、補色系カラー撮像センサの総合感度Sumを求め、補色系カラー撮像センサが総合感度Sumのカラーフィルタを有する1つの画素(以下、S画素という)とみなす。 In this case, as shown in FIG. 15, the sensitivities of the color filters Cy, Mg, Ye, and G are added for each wavelength to obtain the total sensitivity Sum of the complementary color image sensor, and the complementary color image sensor is integrated. It is regarded as one pixel (hereinafter referred to as S pixel) having a color filter with sensitivity Sum.
次いで、波長帯域を、V光の第1波長帯域(波長380nm以上430nm未満)と、B光の第2波長帯域(波長430nm以上480nm未満)と、G光の第3波長帯域(波長480nm以上580nm未満)と、R光の第4波長帯域(波長580nm以上700nm未満)と、に区切り、補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光をS画素で受光して得る光量積分値のうち、第1〜第4波長帯域の光量積分値をそれぞれVS1、VS2、VS3、及びVS4とする。 Next, the wavelength band includes the first wavelength band of V light (wavelength of 380 nm to less than 430 nm), the second wavelength band of B light (wavelength of 430 nm to less than 480 nm), and the third wavelength band of G light (wavelength of 480 nm to 580 nm). And the fourth wavelength band of R light (wavelength 580 nm or more and less than 700 nm), and the amount of light obtained by receiving the V light forming the first multicolor spectrum light for the complementary color imaging sensor with the S pixel Among the integrated values, the integrated light amount values in the first to fourth wavelength bands are VS1, VS2, VS3, and VS4, respectively.
同様に、補色系カラー撮像センサ用の第1多色スペクトル光を形成するB光をS画素で受光して得る光量積分値のうち、第1〜第4波長帯域の光量積分値をそれぞれBS1、BS2、BS3、及びBS4とし、補色系カラー撮像センサ用の第1多色スペクトル光を形成するG光をS画素で受光して得る光量積分値のうち、第1〜第4波長帯域の光量積分値をそれぞれGS1、GS2、GS3、及びGS4とし、かつ、補色系カラー撮像センサ用の第1多色スペクトル光を形成するR光をS画素で受光して得る光量積分値のうち、第1〜第4波長帯域の光量積分値をそれぞれRS1、RS2、RS3、及びRS4とする。また、キセノンランプの連続スペクトル光26をS画素で受光して得る光量積分値のうち、第1〜第4波長帯域の光量積分値をそれぞれXS1、XS2、XS3、及びXS4とする。
Similarly, among the light amount integral values obtained by receiving the B light forming the first multicolor spectrum light for the complementary color imaging sensor with the S pixel, the light amount integral values of the first to fourth wavelength bands are respectively BS1, Among the light amount integration values obtained by receiving the G light forming the first multicolor spectrum light for the complementary color image sensor with the S pixel as BS2, BS3, and BS4, the light amount integration in the first to fourth wavelength bands. Among the light intensity integral values obtained by receiving the R light forming the first multicolor spectrum light for the complementary color imaging sensor with the S pixel, the values being GS1, GS2, GS3, and GS4, respectively. Assume that the integrated light quantity values in the fourth wavelength band are RS1, RS2, RS3, and RS4, respectively. In addition, among the light amount integral values obtained by receiving the
光量積分値VS1は、V光の分光スペクトルと総合感度Sumの波長毎の積を第1波長帯域の範囲で積分することで算出する。他の光量積分値VS2、VS3、VS4、BS1、BS2、BS3、BS4、GS1、GS2、GS3、GS4、RS1、RS2、RS3、RS4、XS1、XS2、XS3、及びXS4も同様である。 The light quantity integration value VS1 is calculated by integrating the product of the spectral spectrum of the V light and the total sensitivity Sum for each wavelength in the range of the first wavelength band. The same applies to the other light intensity integrated values VS2, VS3, VS4, BS1, BS2, BS3, BS4, GS1, GS2, GS3, GS4, RS1, RS2, RS3, RS4, XS1, XS2, XS3, and XS4.
そして、数4の代わりに、数5によって、補色系カラー撮像センサ用の第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを算出する。本実施形態で用いる図14の補色系カラーフィルタを有する補色系カラー撮像センサの場合、数5によって求めた光量比はCv:Cb:Cg:Cr≒0.12:0.23:0.27:0.39である。図16に示す多色スペクトル光は、数5によって求めた光量比のV光、B光、G光、及びR光で形成する補色系カラー撮像センサ用の第1多色スペクトル光325である。
Then, instead of Equation 4, the light quantity ratio Cv: Cb: Cg: Cr of V light, B light, G light, and R light forming the first multicolor spectrum light for the complementary color imaging sensor is obtained by Equation 5. Is calculated. In the case of the complementary color imaging sensor having the complementary color filter of FIG. 14 used in this embodiment, the light quantity ratio obtained by Equation 5 is Cv: Cb: Cg: Cr≈0.12: 0.23: 0.27: 0.39. The multicolor spectrum light shown in FIG. 16 is the first
補色系カラー撮像センサ用の第1多色スペクトル光325を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crの数5による算出方法は、複数の波長帯域(第1〜第4波長帯)で、第1多色スペクトル光を補色系カラー撮像センサの複数色の画素でそれぞれ受光して得る色毎の光量積分値の合計値を、キセノンランプの連続スペクトル光26を補色系カラー撮像センサの複数色の画素でそれぞれ受光して得る色毎の光量積分値の合計値と一致させる算出方法である。数5の算出方法は、数4の算出方法に比べて、色毎の光量積分値の比率に誤差が発生するが、その代わりに、確実にCv>0、Cb>0、Cg>0、かつCr>0を満たす範囲内でCv、Cb、Cg、及びCrを決定できる利点がある。第1多色スペクトル光325を補色系カラー撮像センサの複数の画素で受光して得る色毎の光量積分値の比率は、キセノンランプの連続スペクトル光26を補色系カラー撮像センサの複数の画素で受光して得る色毎の光量積分値の比率と実質的に一致し、これらの誤差は例えば数%程度である。
The light quantity ratio Cv: Cb: Cg: Cr of the V light, B light, G light, and R light forming the first
したがって、本実施形態のように、撮像センサ48が、シアン(第1色)に感度を有するCy画素(第1色画素)と、マゼンタ(第3色)に感度を有するMg画素(第3色画素)と、イエロー(第4色)に感度を有するYe画素(第4色画素)と、グリーン(第2色)に感度を有するG画素(第2色画素)を有する場合、光源制御部22は、V光、B光、G光、及びR光を上記光量比Cv:Cb:Cg:Crで発光させることにより、Cy画素で得るシアンの光量積分値とG画素で得るグリーンの光量積分値との比率を、第1多色スペクトル光25を用いる場合と連続スペクトル光26を用いる場合とで一致させ、Mg画素で得るマゼンタの光量積分値とグリーンの光量積分値との比率を、第1多色スペクトル光25を用いる場合と連続スペクトル光26を用いる場合とで一致させ、かつ、Ye画素で得るイエローの光量積分値とグリーンの光量積分値との比率を、第1多色スペクトル光25を用いる場合と連続スペクトル光26を用いる場合とで一致させる。
Therefore, as in the present embodiment, the imaging sensor 48 includes a Cy pixel (first color pixel) having sensitivity to cyan (first color) and an Mg pixel (third color) having sensitivity to magenta (third color). Pixel), a Ye pixel (fourth color pixel) having sensitivity to yellow (fourth color), and a G pixel (second color pixel) having sensitivity to green (second color), the light
上記第3実施形態の数5による光量比の算出方法は、撮像センサ48に原色系カラー撮像センサを用いる場合にも応用可能である。原色系カラー撮像センサのなかには、B画素、G画素、及びR画素に加え、エメラルド色カラーフィルタを有するE画素を有するセンサや、カラーフィルタが設けられていない白画素(W画素)を有するセンサもある。これらの原色系カラー撮像センサを用いる場合には、数4の光量比の算出方法よりも数5の光量比の算出方法の方が好適な場合がある。 The method for calculating the light amount ratio according to Equation 5 in the third embodiment can also be applied to the case where a primary color imaging sensor is used as the imaging sensor 48. Among primary color imaging sensors, in addition to B pixels, G pixels, and R pixels, there are sensors having E pixels having emerald color filters, and sensors having white pixels (W pixels) that are not provided with color filters. is there. When these primary color imaging sensors are used, the light quantity ratio calculation method of Formula 5 may be preferable to the calculation method of Light quantity ratio of Formula 4.
なお、上記第3実施形態のように撮像センサ48に補色系カラー撮像センサを用いる場合も、第2実施形態と同様に観察対象を加味して第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを制御することが好ましい。 Even when a complementary color imaging sensor is used as the imaging sensor 48 as in the third embodiment, V light and B that form the first multicolor spectrum light in consideration of the observation object as in the second embodiment. It is preferable to control the light quantity ratio Cv: Cb: Cg: Cr of light, G light, and R light.
第1実施形態の数2や、第3実施形態の数5に示す通り、第1多色スペクトル光のうち複数色の光源が発光する波長帯域の光を1つの画素で受光する場合、1つの画素が受光する光の波長帯域毎(すなわち各光源が発光する光の波長帯域毎)に、光量積分値を、キセノンランプの連続スペクトル光26を受光して得る光量積分値に一致させると、第1多色スペクトル光を形成するV光、B光、G光、及びR光の光量比Cv:Cb:Cg:Crを適切に決定することができる。この方法は、光源の色数が画素の色数よりも多い場合に特に効果的である(第1実施形態の数2参照)。
As shown in Equation 2 of the first embodiment and Equation 5 of the third embodiment, when light of a wavelength band emitted from a plurality of color light sources is received by one pixel among the first multicolor spectrum light, one pixel is received. For each wavelength band of light received by the pixel (that is, for each wavelength band of light emitted by each light source), the light intensity integrated value is matched with the light intensity integrated value obtained by receiving the
[第4実施形態]
上記第1〜第3実施形態では、光源制御部22は、光源部20の各LED20a〜20dによって、キセノンランプの連続スペクトル光26を用いる場合を模倣する第1多色スペクトル光25、225、及び325を発生させているが、光源制御部22は、光源部20の各LED20a〜20dによって、第1多色スペクトル光25、225、及び325と切り替えて、第1多色スペクトル光25及びキセノンランプの連続スペクトル光26とは異なる第2多色スペクトルを有する第2多色スペクトル光を発生させるようにしても良い。
[Fourth Embodiment]
In the first to third embodiments, the light
第2多色スペクトル光は、従来のキセノンランプを用いた内視鏡システムにはない固有の分光スペクトルを有する照明光である。例えば、光源制御部22は、図17に示すように、V光またはB光の少なくともいずれか一方(本実施形態ではV光)の光量を第1多色スペクトル光25よりも大きくする。すなわち、第2多色スペクトル光401をB画素で受光して得る光量積分値を、第1多色スペクトル光25をB画素で受光して得る光量積分値よりも大きくする。また、本実施形態では、第1多色スペクトル光25に対して、第2多色スペクトル光401を形成するV光の光量だけを変化させているが、さらに、第2多色スペクトル光401は、G画素で受光して得る光量積分値を、第1多色スペクトル光25をG画素で受光して得る光量積分値よりも小さくすることが好ましい。
The second multicolor spectrum light is illumination light having a unique spectral spectrum not found in an endoscope system using a conventional xenon lamp. For example, as shown in FIG. 17, the light
上記第2多色スペクトル光401を用いて観察対象を観察すれば、粘膜表層にある血管やピットパターン等を、キセノンランプの連続スペクトル光26を用いる場合よりも明瞭に観察することができる。このため、第1多色スペクトル光25と第2多色スペクトル光401と切り替え可能にしておけば、上記のような多色スペクトル光を用いる場合の特有の利点をも享受できる。
If the observation target is observed using the second
第1多色スペクトル光25と第2多色スペクトル光401との切り替えは、内視鏡12の操作部12bに設けた観察モード切り替えスイッチ(図示しない)等を用いて、任意に切り替えられるようにすることができるが、特に、内視鏡システム10で用いる内視鏡12の機種に応じて自動的に第1多色スペクトル光25と第2多色スペクトル光401とを切り替えることが好ましい。
Switching between the first
このように、内視鏡12の機種によって第1多色スペクトル光25と第2多色スペクトル光401を自動的に切り替える場合、図18に示す内視鏡システム410のように、内視鏡12には機種を示すID(Identification Data)を記憶するID記憶部411を設け、内視鏡光源装置14には、内視鏡機種検出部412を設ける。内視鏡機種検出部412は、内視鏡12が内視鏡光源装置14に接続された場合に、ID記憶部411から内視鏡12のIDを読み出すことによって、接続された内視鏡12の機種を検出し、検出結果を光源制御部22に入力する。そして、光源制御部22は、内視鏡機種検出部412によって検出された内視鏡12の機種によって、光源部20で発生させる照明光を第1多色スペクトル光25と第2多色スペクトル光401とで切り替える。より具体的には、光源制御部22は、内視鏡12の機種が、キセノンランプの連続スペクトル光を用いる従来の内視鏡システムで使用する機種である場合は、光源部20で発生させる照明光を第1多色スペクトル光25に自動設定し、かつ、内視鏡12の機種が上記以外の機種である場合(多色スペクトル光を用いる内視鏡システムでだけ用いられる機種の場合等)には、光源部20で発生させる照明光を第2多色スペクトル光401に自動設定することが好ましい。
As described above, when the first
キセノンランプを用いる従来の内視鏡システムで使用する内視鏡を接続する場合、医師は使い慣れた従来の内視鏡システムと同様に観察対象を観察できることを望むことが多く、多色スペクトル光を照明光として使用する内視鏡システムでだけ用いる内視鏡を接続する場合は、医師は多色スペクトル光の利点を活かした観察を望むことが多い。このため、上記のように、内視鏡12の機種によって照明光を第1多色スペクトル光25と第2多色スペクトル光401とで自動的に切り替えると、操作や設定等をせずに、ニーズに合った内視鏡画像を自動的に提供することができる。もちろん、初期設定を上記のように内視鏡12の機種に応じて自動設定し、その後は、医師の判断で手動切り替えられるようにすることがさらに好ましい。
When connecting an endoscope to be used in a conventional endoscope system using a xenon lamp, doctors often desire to be able to observe an observation object in the same manner as a conventional endoscope system that is familiar to users. When an endoscope used only in an endoscope system used as illumination light is connected, a doctor often desires observation using the advantages of multicolor spectrum light. Therefore, as described above, when the illumination light is automatically switched between the first
図18の内視鏡システム410では、内視鏡光源装置14が内視鏡機種検出部412によって内視鏡12の接続を検知し、かつ、内視鏡12からIDを読み出して内視鏡12の機種を検出しているが、図19に示す内視鏡システム420のように、プロセッサ装置16にID読取部413を設け、ID読取部413によって内視鏡12の接続を検知し、かつ、内視鏡12からIDを読み出しても良い。この場合、内視鏡機種検出部412は、プロセッサ装置16のID読取部413から内視鏡12のIDを取得し、その機種を検出すれば良い。
In the
[第5実施形態]
LED等の半導体光源は、キセノンランプ等の従来の光源と比較すると長寿命であるが、LED等の半導体光源であっても、図20に示すように経時的に劣化して、既定の駆動電流や既定の駆動電圧で駆動しても、光量が低下する。また、半導体光源の種類(発光する光の波長等)によっても経時劣化の程度は異なる。経時劣化を無視すると、光源制御部22が例えば第1多色スペクトル光25を発光させるための既定の制御をしても、第1多色スペクトル光25の条件を満たさない多色スペクトル光が発せられてしまうことがある。このため、光源制御部22は、光源部20の各LED20a〜20dの経時劣化を考慮して、第1多色スペクトル光25や第2多色スペクトル光401を発光させることが好ましい。
[Fifth Embodiment]
A semiconductor light source such as an LED has a longer life than a conventional light source such as a xenon lamp. However, even a semiconductor light source such as an LED deteriorates with time as shown in FIG. Even if it is driven with a predetermined driving voltage, the amount of light decreases. The degree of deterioration with time varies depending on the type of semiconductor light source (wavelength of emitted light, etc.). When aging deterioration is ignored, even if the light
上記のように光源部20の各LED20a〜20dに経時劣化があっても第1実施形態等の条件を満たす第1多色スペクトル光25や第2多色スペクトル光401を発光させるためには、例えば、図21に示す内視鏡システム500のように、内視鏡光源装置14に光量検出部501を設け、光源制御部22には経時劣化検出部504を設ける。
In order to cause the first
光量検出部501は、V光の光量を検出するためのV光量検出部502aと、B光の光量を検出するためのB光量検出部502bと、G光の光量を検出するためのG光量検出部502cと、R光の光量を検出するためのR光量検出部502dとを備える。V光量検出部302aは、ミラー503aを介してV光の一部を取得することで、V−LED20aが発光したV光の光量を検出する。ミラー503aは、V−LED20aの光路中に配置され、V−LED20aが発光したV光の一部を反射してV光量検出部502aに入射させ、かつ、残りのV光を光路結合部23に向けて透過する。同様に、B−LED20b、G−LED20c、及びR−LED20dの光路中には、これらが発光した各色光の一部を反射してB光量検出部502b、G光量検出部502c、及びR光量検出部502dにそれぞれ入射させ、残りの各色光を光路結合部23に向けて透過するミラー503b、ミラー503c、及びミラー503dが配置される。B光量検出部502bは、ミラー503bを介してB光の一部を取得してB−LED20bが発光したB光の光量を検出する。G光量検出部502cは、ミラー503cを介してG光の一部を取得してG−LED20cが発光したG光の光量を検出する。R光量検出部502dは、ミラー503dを介してR光の一部を取得してR−LED20dが発光したR光の光量を検出する。
The
光量検出部501は、各色用の光量検出部502a〜502dが検出したV光、B光、G光、及びR光の光量を光源制御部22に入力する。光源制御部22では、経時劣化検出部504が、第1多色スペクトル光25を発光する各LED20a〜20dの駆動電流等の駆動条件と、光量検出部501で実際に検出された各色光の光量とを用いて、各LED20a〜20dの経時劣化を検出する。具体的には、経時劣化検出部504は、各LED20a〜20dのうち、既定の光量に対して最も光量が低下した最劣化光源を検出する。光源制御部22は、経時劣化検出部504で検出した最劣化光源の光量に合わせて、残りの光源の光量を設定する。例えば、図22に示すように、光源制御部22が第1多色スペクトル光25を発光する駆動条件で各LED20a〜20dを駆動することで各LED20a〜20dの光量を指定したにも関わらず、R−LED20dの経時劣化のためにR光の光量が第1多色スペクトル光25を形成する指定の光量に満たず、かつ、V光、B光、及びG光は第1多色スペクトル光25を形成する指定の光量が発光した多色スペクトル光524になっていたとする。この場合、光源制御部22では、経時劣化検出部504がR−LED20dを最劣化光源として検出する。このため、図23に示すように、光源制御部22は、R−LED20dが発光するR光の光量に合わせて、V光、B光、及びG光の光量を低減させることにより、経時劣化したR−LED20dが発するR光の光量と、V光、B光、及びG光の光量のバランスを保たれた新たな第1多色スペクトル光525を発光させる。すなわち、各LED20a〜20dの少なくともいずれか1つに光量の不足が検出された場合、光源制御部22は、第1多色スペクトル光25を形成する各LED20a〜20dの光量の指定値に対して、光量の不足量が最も大きい最劣化光源の光量に合わせて、残りの光源の光量を設定する。これにより、各色光のバランスが保たれた第1多色スペクトル光525を発光させる。
The light
上記のように、各LED20a〜20dが発光する各色光の光量を検出し、これら各LED20a〜20dの中で最も経時劣化した光源の光量に合わせて残りの光源の光量を設定することで、光源制御部22は、光源部20によって常に各色光のバランスが保たれた第1多色スペクトル光25や第2多色スペクトル光401を安定して発光させることができる。また、上記のようにすれば、常に各色光のバランスが保たれた第1多色スペクトル光25及び325や第2多色スペクトル光401が安定して発光されるので、マトリックス処理で用いるマトリックス等、内視鏡画像を生成するために用いる信号処理パラメータや画像処理パラメータを再計算したり、複数用意したりしておく必要がない。また、撮像センサ48のカラーフィルタに混色がある場合には、内視鏡画像を生成するために用いる信号処理パラメータや画像処理パラメータを再計算したり、複数用意したりしておいても補正しきれないが、上記のようにすれば、常に安定して観察対象を観察することができる。
As described above, the light amount of each color light emitted by each
上記第5実施形態で光量検出部501が行う各色光の光量検出は、少なくともキャリブレーション時に行うことが好ましい。特に、光量検出部501は、観察対象を観察するために各LED20a〜20dが発光している間、各色光の光量検出を繰り返し行なって、光源制御部22にフィードバックして、リアルタイムに第1多色スペクトル光25等のバランスを整えることが好ましい。
The light amount detection of each color light performed by the light
[第6実施形態]
上記第5実施形態の内視鏡システム500では、LED20a〜20dの経時劣化を検出しているが、LED20a〜20dの経時劣化以外の要因によって、光源制御部22が正確な第1多色スペクトル光25が発光できない場合もある。この場合、図24に示す内視鏡システム600のように、第5実施形態の内視鏡システム500と同様の光量検出部501等を設け、光源制御部22には経時劣化検出部504の代わりに、検証部604を設ける。
[Sixth Embodiment]
In the
検証部604は、模倣対象であるキセノンランプの連続スペクトル光26を撮像センサ48の各色の画素で受光して得る色毎の光量積分値の比率を模倣比率テーブル606に予め記憶している。検証部604は、この模倣比率テーブル606と光量検出部501の検出結果を用いて、実際に発光した第1多色スペクトル光25を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、キセノンランプの連続スペクトル光26を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証する。
The
検証部604は、光量検出部501の検出結果である各LED20a〜20dの実際の光量と撮像センサ48のカラーフィルタの分光特性から各色画素の光量積分値を算出し、これらの比率を求める。例えば、撮像センサ48がB画素、G画素、及びR画素を有する原色系カラー撮像センサである場合、G画素で得る光量積分値に対するB画素で得る光量積分値の比率(以下、本実施形態においてBp/Gpという)と、G画素で得る光量積分値に対するR画素で得る光量積分値の比率(以下、本実施形態においてRp/Gpという)を算出する。
The
また、模倣するキセノンランプの連続スペクトル光26と、撮像センサ48のカラーフィルタの分光特性から各色画素の光量積分値は予め算出し、模倣比率テーブル606は、模倣する連続スペクトル光26を用いた場合のG画素で得る光量積分値に対するB画素で得る光量積分値の比率(以下、本実施形態においてBx/Gxという)と、模倣する連続スペクトル光26を用いた場合のG画素で得る光量積分値に対するR画素で得る光量積分値(以下、本実施形態においてRx/Gxという)とを記憶する。
In addition, the light intensity integral value of each color pixel is calculated in advance from the
このため、検証部604は、算出した比率Bp/Gpと模倣比率テーブル606に記憶している比率Bx/Gxを比較し、かつ、算出した比率Rp/Gpと模倣比率テーブル606に記憶している比率Rx/Gxを比較する。これら2つの比較の結果、比率Bx/Gxに対して比率Bp/Gpの誤差が許容範囲内(例えば比率Bp/Gpの10%程度以下)であり、かつ、比率Rx/Gxに対して比率Rp/Gpの誤差が許容範囲内(例えば比率Bx/Gxの10%程度以下)であれば、第1多色スペクトル光25が適切に発光していると判断する。この場合、光源制御部22は、第1多色スペクトル光25の発光を継続する。
Therefore, the
一方、比率Bx/Gxに対して比率Bp/Gpの誤差が許容範囲外である場合、または、比率Rx/Gxに対して比率Rp/Gpの誤差が許容範囲外である場合、検証部604は適切な第1多色スペクトル光25が発光されていないと判断する。この場合、光源制御部22は、検証部604の検証結果を用いてLED20a〜20dをフィードバック制御する。すなわち、光源制御部22は、検証部604で算出した比率Bx/Gxに対して比率Bp/Gpの誤差、または、比率Rx/Gxに対して比率Rp/Gpの誤差に基づいて、各LED20a〜20dの光量を調整して制御する。これにより、照明光は常に適切な第1多色スペクトル光25に補正される。
On the other hand, when the error of the ratio Bp / Gp is out of the allowable range with respect to the ratio Bx / Gx, or when the error of the ratio Rp / Gp is out of the allowable range with respect to the ratio Rx / Gx, the
上記第6実施形態の内視鏡システム600では、検証部604が各色の光量積分値の算出する際等に観察対象の種類を考慮していないが、第2実施形態と同様に観察対象の種類を考慮して検証部604で算出する各色の光量積分値や光量積分値の比率を算出することができる。また、上記第6実施形態の内視鏡システム600の検証部604は、第5実施形態の経時劣化検出部504として機能することもできる。なお、上記第6実施形態では、内視鏡光源装置14に検証部604を設けているが、検証部604はプロセッサ装置16に設けても良い。
In the
上記第6実施形態の内視鏡システム600は、光量検出部501の検出結果を用いて照明光が第1多色スペクトル光25になっているかを検証しているが、光量検出部501の検出結果を用いる代わりに、撮像センサ48の出力を用いて照明光が第1多色スペクトル光25になっているかを検証することもできる。この場合、図25に示す内視鏡システム700のように、プロセッサ装置16に検証部704を設ける。
The
検証部704は、光量検出部501の検出結果の代わりに、受信部53から取得する撮像センサ48の出力を用いる以外は、上記第6実施形態の検証部604と同様である。すなわち、検証部704は、模倣比率テーブル706に模倣対象であるキセノンランプの連続スペクトル光26を撮像センサ48の各色の画素で受光して得る色毎の光量積分値の比率を記憶しており、この模倣比率テーブル706と撮像センサ48の出力を用いて、実際に発光した第1多色スペクトル光25を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、キセノンランプの連続スペクトル光26を複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証する。
The
検証部704は、撮像センサ48の出力である画像信号を受信部53から取得し、これらの比率を求める。撮像センサ48がB画素、G画素、及びR画素を有する原色系カラー撮像センサである場合、例えば検証部704はB画像信号、G画像信号、及びR画像信号の各々の平均値等(平均値や中央値等の統計量)を求めることにより各色の画素の光量積分値を算出し、それらの比率Bp/Gpと比率Rp/Gpを算出する。なお、検証部704が算出する各色の画像信号の平均値等は、撮像センサ48からの信号電荷の読み出し時にかかるゲインや受信部53で行う各種処理の具体的内容に影響されるので本明細書でいう光量積分値そのものではないが、第1多色スペクトル光25を発光するキセノンエミュレートモードでは常に同じ処理をするので、各色の画像信号の平均値等は実質的に光量積分値を表す。
The
模倣比率テーブル706は、模倣する連続スペクトル光26を用いる場合のB画像信号、G画像信号、及びR画像信号の各々の平均値等を用いて算出した比率Bx/Gx及び比率Rx/Gxを記憶する。検証部704は、算出した比率Bp/Gpと模倣比率テーブル706に記憶している比率Bx/Gxを比較し、かつ、算出した比率Rp/Gpと模倣比率テーブル606に記憶している比率Rx/Gxを比較し、光源制御部22がこれらの比較結果(検証部704の検証結果)に基づいてLED20a〜20dの制御するのは上記第6実施形態の内視鏡システム600と同様である。
The imitation ratio table 706 stores the ratio Bx / Gx and the ratio Rx / Gx calculated using the average values of the B image signal, the G image signal, and the R image signal when the continuous spectrum light 26 to be imitated is used. To do. The
なお、実際の観察対象を撮影しながら検証部704による検証を行うことができるが、観察対象の個体差等の影響を除くためには、例えば生体粘膜の反射率を模した模擬体(ファントム)や照明光をほぼ直接に撮像センサ48に入射させる白板を撮影して検証をすることが好ましい。
Although verification by the
上記変形例の内視鏡システム700は、検証部704が各色の光量積分値の算出する際等に観察対象の種類を考慮していないが、第2実施形態と同様に観察対象の種類を考慮して検証部704で算出する各色の光量積分値や光量積分値の比率を算出することができる。このように、検証部704が行う検証に観察対象の種類を考慮する場合、食道、胃、及び大腸等の反射率を模した模擬体を用いる。
The
上記変形例の内視鏡システム700では、検証部704は、撮像センサ48の出力として受信部53から画像信号を取得しているが、受信部53から画像信号を取得する代わりに、DPS56、ノイズ除去部58、または画像生成部62から画像信号を取得することができる。検証部704は、これらプロセッサ装置16の各部から画像信号を取得する代わりに、内視鏡12のA/Dコンバータ51、CDS/AGC回路50、または撮像センサ48から画像信号を取得してもよい。
In the
上記第1〜第5実施形態では、B−LED20bが発するB光をそのまま第1多色スペクトル光25、225、325、及び525に利用しているが、約450nmから約500nmの波長の光は表層血管やピットパターン等の構造のコントラストを低下させてしまう。このため、図26に示す内視鏡システム800のように、B−LED20bの光路中に、約450nmから約500nmの波長の光を低減する帯域制限部801を配置することによって、B−LED20bが発するB光から、約450nmから約500nmの波長成分を低減したBs光を生成し、Bs光を第1多色スペクトル光25、225、325、及び525に用いることが好ましい。この場合、光量比は、帯域制限部801を通過後のBs光の分光スペクトルを用いて算出する。
In the first to fifth embodiments, the B light emitted from the B-
上記第1〜第6実施形態では、撮像センサ48が設けられた内視鏡12を被検体内に挿入して観察を行う内視鏡システムによって本発明を実施しているが、カプセル内視鏡システムでも本発明は好適である。例えば、図27に示すように、カプセル内視鏡システムでは、カプセル内視鏡900と、プロセッサ装置(図示しない)とを少なくとも有する。
In the first to sixth embodiments, the present invention is implemented by the endoscope system in which the
カプセル内視鏡900は、光源部902と光源制御部903と、撮像センサ904と、画像生成部906と、送受信アンテナ908とを備えている。光源部902は、上記第1〜第6実施形態の光源部20と同様に、V光を発するV−LEDと、B光を発するB−LEDと、G光を発するG−LEDと、R光を発するR−LEDと、を有している。
The
光源制御部903は、上記各実施形態及び変形例の光源制御部22と同様にして光源部902の駆動を制御する。また、光源制御部903は、送受信アンテナ908によって、カプセル内視鏡システムのプロセッサ装置と無線で通信可能である。カプセル内視鏡システムのプロセッサ装置は、上記第1〜第6実施形態のプロセッサ装置16とほぼ同様であるが、画像生成部906はカプセル内視鏡900に設けられ、生成された内視鏡画像は、送受信アンテナ908を介してプロセッサ装置に送信される。撮像センサ904は上記第1〜第6実施形態の撮像センサ48と同様に構成される。
The light
なお、上記第1〜第6実施形態では、光源制御部22は、キセノンランプの白色光を模倣するための第1多色スペクトル光25、225、325、及び525を発生させているが、キセノンランプの白色光の代わりに、他の広帯域な連続スペクトル光を模倣するための第1多色スペクトル光を発生さても良い。例えば、従来の内視鏡システムでは、キセノンランプ以外のハロゲンランプを用いる場合がある。キセノンランプ以外のハロゲンランプを模倣するための第1多色スペクトル光を発生させても良く、模倣するランプの種類を医師等が選択できるようにしても良い。同様に、励起光を発する励起光光源と、励起光の照射によって蛍光を発する蛍光体を組み合わせた広帯域光源や、半導体光源からなる広帯域光源が発する連続スペクトル光を模倣することもできる。蛍光体に励起光を照射して広帯域光源は、例えば、紫外光、紫色光、または青色光等を発光する励起光光源と、紫外光、紫色光、または青色光等の照射によって緑色から黄色(あるいは赤色)の蛍光を発光する蛍光体を組み合わせて構成される。半導体光源からなる広帯域光源は、例えば、白色光を発生する半導体光源である。上記のように、キセノンランプ以外の広帯域な連続スペクトル光(実質的に白色に見える擬似白色光やその他白色以外の光を含む)を模倣する場合も、上記実施形態のキセノンランプの白色光を模倣する場合と同様にして第1多色スペクトル光を発生させることができる。
In the first to sixth embodiments, the light
上記第1〜第6実施形態では、V−LED20a、B−LED20b、G−LED20c、R−LED20dの4色のLEDを用いているが、内視鏡光源装置14に用いる複数の光源が発光する光の色(波長)や組み合わせ、LEDの個数等は、これ以外の色及び組み合わせでも良い。また、LEDの代わりに、LD(Laser Diode)等の他の半導体光源を用いても良い。LEDやLDと蛍光体を組み合わせた光源を用いても良い。
In the said 1st-6th embodiment, although the LED of 4 colors, V-LED20a, B-LED20b, G-LED20c, and R-LED20d is used, the several light source used for the endoscope
なお、上記第1〜第6実施形態では、光源部20の各LED20a〜20dを全て同時に点灯しているが、撮像センサ48が観察対象を撮像している間(光電変換をする間の時間)にこれら各LED20a〜20dを順次点灯させても良い。また、撮像センサ48が観察対象を撮像している間に、色毎に点灯時間を調節して、光量を制御してもよい。これらの場合も上記第1〜第5実施形態のように光源部20の各LED20a〜20dを同時に点灯するのと同じ結果が得られる。
In the first to sixth embodiments, all the
10,240,410,420,500,600,700,800 内視鏡システム
20 光源部
22 光源制御部
25,225,325,525 第1多色スペクトル光
26 連続スペクトル光
412 内視鏡機種検出部
501 光量検出部
504 経時劣化検出部
604,704 検証部
900 カプセル内視鏡
10, 240, 410, 420, 500, 600, 700, 800
Claims (12)
異なる色に感度を有する複数色の画素を有する撮像センサであって、第1色に感度を有する第1色画素と、第2色に感度を有する第2色画素と、第3色に感度を有する第3色画素とを有する撮像センサと、
前記複数の光源を制御し、前記第1多色スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、キセノンランプ、ハロゲンランプ、または白色LEDが発光する白色光である連続スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させる光源制御部とを備え、
前記光源制御部は、
前記第1多色スペクトル光の前記第1波長帯域の光量積分値と前記連続スペクトル光の前記第1波長帯域の光量積分値とが一致し、且つ、前記第1多色スペクトル光の前記第2波長帯域の光量積分値と前記連続スペクトル光の前記第2波長帯域の光量積分値とが一致するように、前記V光と前記B光の光量比Kv:Kbを決定し、
前記光量比Kv:Kbで前記V光と前記B光を合成した光をB2光とした場合であって、前記B2光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれB2b、B2g、及びB2rとし、前記第1多色スペクトル光のG光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれGb、Gg、及びGrとし、前記第1多色スペクトル光のR光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれRb、Rg、及びRrとし、前記連続スペクトル光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれXb、Xg、及びXrとした場合において、下記数3を満たすように、B2光、G光、及びR光の光量比Pb2:Pg:Prを算出する内視鏡システム。
A violet light source that emits V light that is violet light in the first wavelength band, a blue light source that emits B light that is blue light in the second wavelength band, a green light source that emits G light as green light, and R that is red light A plurality of light sources having a red light source that emits light, and a light source unit that emits first multicolor spectrum light having a first multicolor spectrum obtained by superimposing light emitted from the plurality of light sources;
An imaging sensor having a plurality of color pixels having sensitivity to different colors, the first color pixel having sensitivity to the first color, the second color pixel having sensitivity to the second color, and the sensitivity to the third color. An imaging sensor having a third color pixel;
The white light emitted from the xenon lamp, the halogen lamp, or the white LED is used to control the plurality of light sources and to determine the ratio of the integrated light amount for each color obtained by receiving the first multicolor spectrum light by the pixels of the plurality of colors. A light source control unit that matches the ratio of the integrated amount of light for each color obtained by receiving continuous spectrum light that is light by the pixels of the plurality of colors,
The light source controller is
The integrated amount of light in the first wavelength band of the first multicolor spectrum light matches the integrated amount of light in the first wavelength band of the continuous spectrum light, and the second of the first multicolor spectrum light. Determining the light quantity ratio Kv: Kb of the V light and the B light so that the light quantity integral value of the wavelength band and the light quantity integral value of the second wavelength band of the continuous spectrum light match;
The light obtained by combining the V light and the B light at the light quantity ratio Kv: Kb is B2 light, and the B2 light is used as the first color pixel, the second color pixel, and the third color pixel. The light quantity integral values obtained by receiving light at B2b, B2g, and B2r are respectively received by the first color pixel, the second color pixel, and the third color pixel. The obtained light amount integral values are Gb, Gg, and Gr, respectively, and the light amount obtained by receiving the R light of the first multicolor spectrum light by the first color pixel, the second color pixel, and the third color pixel. The integral values are Rb, Rg, and Rr, respectively, and the light amount integral values obtained by receiving the continuous spectrum light at the first color pixel, the second color pixel, and the third color pixel are Xb, Xg, and In the case of Xr, B2 , G light, and R light quantity ratio of Pb2: Pg: an endoscope system for calculating the Pr.
前記光量比Kv:Kbと前記光量比Pb2:Pg:Prを用いて、前記V光、前記B光、前記G光、及び前記R光の光量比Cv:Cb:Cg:Crを算出する請求項1記載の内視鏡システム。 The light source controller is
The light quantity ratio Cv: Cb: Cg: Cr of the V light, the B light, the G light, and the R light is calculated using the light quantity ratio Kv: Kb and the light quantity ratio Pb2: Pg: Pr. The endoscope system according to 1.
前記光源制御部は、前記観察対象の種類毎の光量比Cv:Cb:Cg:Crのなかから光量比Cv:Cb:Cg:Crを選択する請求項2項に記載の内視鏡システム。 A light amount ratio storage unit for storing a light amount ratio Cv: Cb: Cg: Cr for each type of observation object;
The endoscope system according to claim 2, wherein the light source control unit selects a light amount ratio Cv: Cb: Cg: Cr from a light amount ratio Cv: Cb: Cg: Cr for each type of the observation target.
前記光源制御部は、前記光量検出部による検出結果を用いて、前記複数の光源のうち、前記第1多色スペクトル光を形成する光量の指定値に対して、光量の不足が最も大きい最劣化光源の光量に合わせて、残りの光源の光量を設定する請求項1〜4のいずれか1項に記載の内視鏡システム。 A light amount detection unit for detecting the amount of light emitted by the plurality of light sources,
The light source control unit uses the detection result of the light amount detection unit, and among the plurality of light sources, the light source has the greatest shortage of light amount with respect to a specified value of the light amount forming the first multicolor spectrum light. The endoscope system of any one of Claims 1-4 which sets the light quantity of the remaining light sources according to the light quantity of a light source.
前記検証部は、前記光量検出部による検出結果を用いて、前記第1多色スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率が、前記連続スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致しているか否かを検証する請求項7に記載の内視鏡システム。 A light amount detection unit for detecting the amount of light emitted by the plurality of light sources,
The verification unit uses the detection result of the light amount detection unit, and the ratio of the light amount integral value for each color obtained by receiving the first multicolor spectrum light by the pixels of the plurality of colors is the continuous spectrum light. The endoscope system according to claim 7, wherein it is verified whether or not the light intensity integrated value ratio for each color obtained by receiving light at the pixels of the plurality of colors matches.
前記第1多色スペクトル光の前記第1波長帯域の光量積分値と前記連続スペクトル光の前記第1波長帯域の光量積分値とは、それぞれ前記第1色画素の前記第1波長帯域で受光して得られる光量積分値であり、
前記第1多色スペクトル光の前記第2波長帯域の光量積分値と前記連続スペクトル光の前記第2波長帯域の光量積分値とは、それぞれ前記第1色画素の前記第2波長帯域で受光して得られる光量積分値である請求項1ないし10いずれか1項記載の内視鏡システム。 The wavelength band received by the first color pixel is divided into the first wavelength band and the second wavelength band,
The light intensity integral value of the first wavelength band of the first multicolor spectrum light and the light intensity integral value of the first wavelength band of the continuous spectrum light are received in the first wavelength band of the first color pixel, respectively. Is the light intensity integral value obtained by
The light intensity integral value of the second wavelength band of the first multicolor spectrum light and the light intensity integral value of the second wavelength band of the continuous spectrum light are received in the second wavelength band of the first color pixel, respectively. The endoscope system according to any one of claims 1 to 10, which is a light quantity integral value obtained in the above manner.
光源制御部が前記複数の光源を制御し、前記第1多色スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率を、キセノンランプ、ハロゲンランプ、または白色LEDが発光する白色光である連続スペクトル光を前記複数色の画素でそれぞれ受光して得る色毎の光量積分値の比率に一致させるステップであって、
前記光源制御部は、
前記第1多色スペクトル光の前記第1波長帯域の光量積分値と前記連続スペクトル光の前記第1波長帯域の光量積分値とが一致し、且つ、前記第1多色スペクトル光の前記第2波長帯域の光量積分値と前記連続スペクトル光の前記第2波長帯域の光量積分値とが一致するように、前記V光と前記B光の光量比Kv:Kbを決定し、
前記光量比Kv:Kbで前記V光と前記B光を合成した光をB2光とした場合であって、前記B2光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれB2b、B2g、及びB2rとし、前記第1多色スペクトル光のG光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれGb、Gg、及びGrとし、前記第1多色スペクトル光のR光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれRb、Rg、及びRrとし、前記連続スペクトル光を前記第1色画素、前記第2色画素、及び前記第3色画素で受光して得る光量積分値をそれぞれXb、Xg、及びXrとした場合において、下記数3を満たすように、B2光、G光、及びR光の光量比Pb2:Pg:Prを算出するステップを有する内視鏡システムの作動方法。
A violet light source that emits V light that is violet light in the first wavelength band, a blue light source that emits B light that is blue light in the second wavelength band, a green light source that emits G light as green light, and R that is red light A plurality of light sources each having a red light source that emits light, and a light source unit that emits first multicolor spectrum light having a first multicolor spectrum in which light emitted from the plurality of light sources is superimposed; An imaging sensor having a plurality of color pixels, a first color pixel having sensitivity to a first color, a second color pixel having sensitivity to a second color, and a third color pixel having sensitivity to a third color In an operation method of an endoscope system having an imaging sensor having
The light source control unit controls the plurality of light sources, and the ratio of the integrated amount of light for each color obtained by receiving the first multicolor spectrum light by the pixels of the plurality of colors is set as a xenon lamp, a halogen lamp, or a white LED. Is a step of matching the ratio of the integrated amount of light for each color obtained by receiving the continuous spectrum light that is white light emitted by each of the pixels of the plurality of colors,
The light source controller is
The integrated amount of light in the first wavelength band of the first multicolor spectrum light matches the integrated amount of light in the first wavelength band of the continuous spectrum light, and the second of the first multicolor spectrum light. Determining the light quantity ratio Kv: Kb of the V light and the B light so that the light quantity integral value of the wavelength band and the light quantity integral value of the second wavelength band of the continuous spectrum light match;
The light obtained by combining the V light and the B light at the light quantity ratio Kv: Kb is B2 light, and the B2 light is used as the first color pixel, the second color pixel, and the third color pixel. The light quantity integral values obtained by receiving light at B2b, B2g, and B2r are respectively received by the first color pixel, the second color pixel, and the third color pixel. The obtained light amount integral values are Gb, Gg, and Gr, respectively, and the light amount obtained by receiving the R light of the first multicolor spectrum light by the first color pixel, the second color pixel, and the third color pixel. The integral values are Rb, Rg, and Rr, respectively, and the light amount integral values obtained by receiving the continuous spectrum light at the first color pixel, the second color pixel, and the third color pixel are Xb, Xg, and In the case of Xr, B2 , G light, and R light quantity ratio of Pb2: Pg: operation method of the endoscope system having the step of calculating the Pr.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018216972A JP6602939B2 (en) | 2018-11-20 | 2018-11-20 | Endoscope system and method for operating endoscope system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018216972A JP6602939B2 (en) | 2018-11-20 | 2018-11-20 | Endoscope system and method for operating endoscope system |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015131741A Division JP2017012395A (en) | 2015-06-30 | 2015-06-30 | Endoscope system and method of operating endoscope system |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019186119A Division JP6874087B2 (en) | 2019-10-09 | 2019-10-09 | Endoscope system and how to operate the endoscope system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019058689A JP2019058689A (en) | 2019-04-18 |
JP6602939B2 true JP6602939B2 (en) | 2019-11-06 |
Family
ID=66175929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018216972A Active JP6602939B2 (en) | 2018-11-20 | 2018-11-20 | Endoscope system and method for operating endoscope system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6602939B2 (en) |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001208985A (en) * | 2000-01-27 | 2001-08-03 | Olympus Optical Co Ltd | Endoscope device |
JP2001201697A (en) * | 2000-01-17 | 2001-07-27 | Olympus Optical Co Ltd | Endoscope light source device |
JP4734074B2 (en) * | 2005-09-30 | 2011-07-27 | オリンパスメディカルシステムズ株式会社 | Endoscope device |
JP5767775B2 (en) * | 2009-07-06 | 2015-08-19 | 富士フイルム株式会社 | Endoscope device |
JP5485835B2 (en) * | 2010-09-07 | 2014-05-07 | 富士フイルム株式会社 | Endoscope light source device and light amount control method thereof, endoscope system and control method thereof |
WO2015005277A1 (en) * | 2013-07-11 | 2015-01-15 | オリンパスメディカルシステムズ株式会社 | Light source device |
JP5976045B2 (en) * | 2013-08-27 | 2016-08-23 | 富士フイルム株式会社 | Endoscope light source device and endoscope system using the same |
JP5931031B2 (en) * | 2013-09-23 | 2016-06-08 | 富士フイルム株式会社 | Endoscope system and method for operating endoscope system |
EP3050492A4 (en) * | 2013-10-30 | 2017-09-20 | Olympus Corporation | Light source unit and endoscope device |
-
2018
- 2018-11-20 JP JP2018216972A patent/JP6602939B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019058689A (en) | 2019-04-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2017012395A (en) | Endoscope system and method of operating endoscope system | |
JP6461739B2 (en) | Image processing apparatus, endoscope system, and method of operating image processing apparatus | |
JP6013382B2 (en) | Endoscope system and operating method thereof | |
JP5931031B2 (en) | Endoscope system and method for operating endoscope system | |
US9895054B2 (en) | Endoscope system, light source device, operation method for endoscope system, and operation method for light source device | |
JP6206691B2 (en) | Endoscope system and operating method thereof | |
CN107518867A (en) | Light supply apparatus and endoscopic system | |
JP6159817B2 (en) | Calibration method and endoscope system | |
JP6690003B2 (en) | Endoscope system and operating method thereof | |
WO2017154325A1 (en) | Endoscope system, processor device, endoscope system operation method | |
WO2020039932A1 (en) | Endoscope system | |
JP2019136555A (en) | Endoscope light source device, endoscope system, and method of operating endoscope light source device | |
JP2016007355A (en) | Light source device, endoscope system, operation method of light source device, and operation method of endoscope system | |
US9977232B2 (en) | Light source device for endoscope, endoscope system, and method for operating light source device for endoscope | |
JP7196016B2 (en) | Information processing device and its operating method, endoscope system and its operating method | |
JP6602939B2 (en) | Endoscope system and method for operating endoscope system | |
JP6874087B2 (en) | Endoscope system and how to operate the endoscope system | |
JP2016158837A (en) | Endoscope light source device, endoscope system, and operation method of endoscope light source device | |
JP6905038B2 (en) | Light source device and endoscopic system | |
JP6039605B2 (en) | Endoscope system and operating method thereof | |
JP7191978B2 (en) | Endoscope light source device, endoscope device, and light intensity adjustment method | |
JP6659817B2 (en) | Medical image processing equipment | |
JP2016209517A (en) | Endoscope system and operation method therefor | |
JP6276149B2 (en) | Endoscope system and operating method thereof | |
JP6386939B2 (en) | Endoscope light source device, endoscope system, and operation method of endoscope light source device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190828 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190910 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191009 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6602939 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |