JP2010109875A - 撮像装置 - Google Patents

Abstract

【課題】赤外カットフィルタの抜出後においてもカラー画像の出力が可能である場合に、ソフトウェアによる処理負荷が少なくカラー画像の出力を行う。
【解決手段】撮像装置は、撮像光学系１により形成された被写体像を光電変換する撮像素子３と、該撮像素子からの出力信号を用いて画像を生成する画像生成手段５，６と、該生成された画像に関する情報を取得する情報取得手段と、撮像光学系内から撮像素子までの光路に対して挿抜される赤外カットフィルタ２と、撮像モードをカラーモードと白黒モードとで切り替える制御手段１４とを有する。制御手段は、赤外カットフィルタの挿抜による画像に関する情報の変化量に応じて、赤外カットフィルタが抜出された後の撮像モードを切り替える。
【選択図】図１

Description

本発明は、赤外カットフィルタを挿抜可能なビデオカメラ等の撮像装置に関する。

ビデオカメラ等の撮像装置は、入射した光により被写体像を形成する撮像光学系と、該被写体像を光電変換する撮像素子と、該撮像素子からの出力信号に対して各種信号処理を施すことにより画像を生成する画像生成回路とを有する。撮像素子としては、ＣＣＤセンサやＣＭＯＳセンサ等が用いられ、該撮像素子を１枚だけ用いる単板式の撮像装置においては、撮像素子の画素ごとに互いに異なる色に対応する色フィルタが配置される。

赤（Ｒ），緑（Ｇ）及び青（Ｂ）の色信号を得るには、色フィルタとしてＲＧＢの原色フィルタを用いる場合と、マジェンタ（Ｍｇ），シアン（Ｃｙ），イエロー（Ｙｅ）及びＧの補色フィルタを用いる場合とがある。これらの色フィルタはいずれも、染料又は顔料を用いてＲ，Ｇ，Ｂ，Ｍｇ，Ｃｙ又はイエローの光のみを透過させるように分光透過特性が設計されているが、近赤外領域の光に対してはある程度の透過率を有する。また、撮像素子の光電変換部は、主にシリコン（Ｓｉ）等の半導体で構成されているため、光電変換部の分光感度特性は波長の長い近赤外光まで感度を有する。このため、色フィルタを備えた撮像素子から得られた信号は、近赤外領域の光の光電変換成分も含んでいる。

一方、人間の色に対する感度特性である色覚特性と明るさに対する感度特性である比視感度特性は、可視域である３８０ｎｍから７８０ｎｍまでの感度特性であり、７００ｎｍより長波長域ではほとんど感度を有さない。そこで、一般的な撮像においては、色再現性を人間の色覚特性に合わせるために、撮像素子の前に近赤外領域の光線を通過させない視感度補正用の赤外カットフィルタ（以下、ＩＲＣＦという）を設ける必要がある。これに対し、監視カメラ等のように色再現性よりも感度を重視する場合は、近赤外領域の光を利用するため、ＩＲＣＦを設けずに撮像素子に近赤外光を受光させる方がよい。

このため、色再現性を重視する場合はＩＲＣＦを撮像素子の前に配置（挿入）してカラー映像を出力し、感度を優先する場合はＩＲＣＦを撮像素子の前から除去する（抜出する）撮像装置が提案されている。通常、ＩＲＣＦを撮像素子の前から除去した場合は、画像のカラーバランスが崩れるため、白黒映像を出力する。

特許文献１には、ＩＲＣＦを設けずに、ＲＧＢの各色にマトリクス演算を行ってカラー画像出力を行う撮像装置が開示されている。
特開２００５−２９５４１９号公報

しかしながら、特許文献１にて開示された撮像装置のように、ＲＧＢの各色に対するマトリクス演算をソフトウェアにより行うには処理負担が大きく、またハードウェアによりマトリクス演算を行うためには、そのようなハードウェアを追加する必要が生ずる。さらに、ＩＲＣＦの挿抜の前後で各色の比較を行っていないために、同じ被写体でもＩＲＣＦの挿抜によって色が大きく変化してしまうおそれがある。

本発明は、ＩＲＣＦの抜出後においてもカラー画像の出力が可能である場合に、ソフトウェアによる処理負荷が少なく、かつ余計なハードウェアを追加する必要もなく該カラー画像の出力を行えるようにした撮像装置を提供する。

本発明の一側面としての撮像装置は、撮像光学系により形成された被写体像を光電変換する撮像素子と、該撮像素子からの出力信号を用いて画像を生成する画像生成手段と、該生成された画像に関する情報を取得する情報取得手段と、撮像光学系内から撮像素子までの光路に対して挿抜される赤外カットフィルタと、撮像モードをカラーモードと白黒モードとで切り替える制御手段とを有する。そして、制御手段は、赤外カットフィルタの挿抜による画像に関する情報の変化量に応じて、赤外カットフィルタが抜出された後の撮像モードを切り替えることを特徴とする。

また、本発明の他の一側面としての撮像装置は、撮像光学系により形成された被写体像を光電変換する撮像素子と、該撮像素子からの出力信号を用いて画像を生成する画像生成手段と、生成された画像中の被写体を照らす光源に関する情報を生成する光源情報生成手段と、撮像光学系内から撮像素子までの光路に対して挿抜される赤外カットフィルタと、撮像モードをカラーモードと白黒モードとで切り替える制御手段とを有する。そして、制御手段は、光源に関する情報に応じて、赤外カットフィルタが抜出された後の撮像モードを切り替えることを特徴とする。

本発明によれば、赤外カットフィルタの抜出後においてもカラー画像の出力が可能である場合に、ソフトウェアによる処理負荷が少なく、かつ余計なハードウェアを追加する必要もなくカラー画像を出力することができる。しかも、赤外カットフィルタの挿抜による画像に関する情報の変化量又は光源に関する情報に応じて、赤外カットフィルタの抜出後にカラー画像を出力するか否かを決定するので、該フィルタの抜出によるカラー画像での同じ被写体の色の変化を抑えることができる。

以下、本発明の好ましい実施例について図面を参照しながら説明する。

図１には、本発明の実施例１である撮像装置としてのビデオカメラの構成を示す。１は撮像レンズ（撮像光学系）、２はＩＲＣＦ（赤外カットフィルタ）、３はＣＣＤセンサ又はＣＭＯＳセンサにより構成される撮像素子（以下、ＣＣＤという）である。撮像レンズ１に入射した光は、該撮像レンズ１の結像作用によってＣＣＤ３の受光面上に被写体像を形成する。

４はＡＤ変換部であり、ＣＣＤ３からのアナログ信号をデジタル信号に変換する。５は映像信号処理部であり、ＣＣＤ３に設けられた色フィルタが補色フィルタである場合は、ＣＣＤ３からのＣｙ，Ｍｇ，Ｙｅ及びＧ成分を示す信号（出力信号）に基づいて所定の演算を行い、Ｒ，Ｇ及びＢの撮像信号、すなわち原画像を生成する。なお、ＣＣＤ３が原色フィルタを有する場合には、映像信号処理部５は、ＣＣＤ３からのＲ，Ｇ及びＢ成分を示す出力信号に基づいてＲ，Ｇ及びＢの撮像信号を生成する。

６はＷＢ処理部（ホワイトバランス処理手段）であり、原画像におけるＲ，Ｇ及びＢの撮像信号を増幅する。具体的には、後述するＲＧＢゲイン算出部９で算出されたＲゲイン，Ｇゲイン及びＢゲイン（以下、これらを色ゲインともいう）を受けて、Ｒ，Ｇ及びＢ原信号のそれぞれに乗じるゲインを変えることでホワイトバランス処理（以下、ＷＢという）を行う。映像信号処理部５及びＷＢ処理部６により画像生成手段が構成される。ホワイトバランス処理後の画像を、以下の説明ではＷＢ画像という。

７は情報取得手段しての輝度/色情報算出部であり、ＷＢ画像から、ＡＥ（自動露出制御）用及びＩＲＣＦの挿抜判断用の評価値である輝度情報（被写体の輝度に応じた輝度信号）Ｙを取得する。また、輝度/色情報算出部７は、ＩＲＣＦの挿抜によるＷＢ用の色ゲイン又は色情報の変化を見るための評価値であるＲ，Ｇ，Ｂの色信号を取得する。色ゲインや色情報は、画像に関する情報に相当する。

８はγ処理部であり、ＷＢ画像に対してγ処理を行って出力画像を生成する。ＷＢゲイン算出部９は、輝度/色情報算出部７にて取得されたＲ，Ｇ，Ｂの色信号から被写体の白色の領域（特定領域）を検出し、該白色領域でのＲ，Ｇ，Ｂの色信号の値が互いに等しくなるように、Ｒゲイン，Ｇゲイン及びＢゲインを算出する。算出されたＲゲイン，Ｇゲイン及びＢゲインは、ＷＢ処理部６に送信される。

１０は色情報記憶部であり、１１は色情報比較部である。色情報記憶部１０は、所定時間ごとにＲ，Ｇ，Ｂの色信号（つまりは色情報）を記憶し、該色情報を色情報比較部１１に送信する。

色情報比較部１１は、色情報記憶部１０から送信されてきた現在から所定時間前の色情報と、輝度/色情報算出部７から送信された現在の色情報との差、すなわち色情報の変化量を算出する。

１２はＩＲＣＦ挿抜判定部であり、輝度/色情報算出部７にて取得された輝度情報Ｙに基づいてＩＲＣＦ２の挿抜の判定を行う。ＩＲＣＦ挿抜判定部１２は、輝度情報Ｙが大きい場合にはＩＲＣＦ２を撮像レンズ１内（撮像光学系内）から撮像素子３までの光路に挿入するよう判定する。これにより、ＩＲＣＦ２によってカットされる近赤外領域の光（近赤外光）を用いずに撮像が行われ、後述する映像信号出力部１５からはカラー画像が出力される。

一方、輝度情報Ｙが小さい場合には、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２を上記光路から抜出するよう判定する。ＩＲＣＦ２を上記光路から抜出することで、撮像素子３は近赤外の光も光電変換し、撮像素子３の感度が向上する。このとき、近赤外光の影響を受けてカラーバランスが崩れるため、後述する映像信号出力部１５から白黒画像を出力させるのが一般的である。

１３はＩＲＣＦ制御回路であり、ＩＲＣＦ挿抜判定部１２での判定結果を受けてＩＲＣＦ２の挿抜制御を行う。具体的には、本実施例のビデオカメラは、ＩＲＣＦ２を保持する部材をアクチュエータの駆動力によってＩＲＣＦ２が上記光路に対して挿抜されるように動作する挿抜機構を有し、ＩＲＣＦ制御回路１３は該アクチュエータの駆動を制御する。

１４は制御手段としての映像選択部である。映像選択部１４は、ＩＲＣＦ挿抜判定部１２からの判定結果を受けて、ＩＲＣＦ２の挿抜による色情報比較部１１からの色情報の変化量に応じてカラー画像出力と白黒画像出力のうちいずれかを選択（設定）する。以下の説明において、カラー画像を出力する撮像モードをカラーモードともいい、白黒画像を出力する撮像モードを白黒モードともいう。

映像信号出力部１５は、映像選択部１４からの選択情報を受けて、カラー画像出力又は白黒画像出力を行う。ここにいう出力は、不図示のディスプレイに画像を表示したり、不図示の記録媒体（半導体メモリ、磁気テープ、光ディスク等）に記録したりすることに相当する。

次に、本実施例におけるＩＲＣＦ２の抜出後におけるカラー画像出力と白黒画像出力の選択について説明する。

監視カメラのように昼夜問わず使用されるカメラにおいては、日中において明度が十分な場合には、ＩＲＣＦ２を光路内に挿入してカラー画像を出力する。夜間になって明度が不十分になると、ゲインによるノイズの影響から、色再現性よりも感度を重視する。その場合には、近赤外光を利用するため、ＩＲＣＦ２を光路内に挿入せず、ＣＣＤ３に近赤外光を光電変換させる。

図２及び図３には、ＣＣＤの分光透過率特性を示している。原色フィルタを有するＣＣＤ（以下、原色ＣＣＤという）では、図２に示すようなＲ，Ｇ及びＢ光に対する透過率（つまりは撮像信号）が得られる。また、補色フィルタを有するＣＣＤ（以下、補色ＣＣＤという）では、図３に示すようなＭｇ，Ｇｒ，Ｃｙ及びＹ光に対する透過率（撮像信号）が得られる。図中の「ＩＲＣＦ」は、Ｒよりも長波長側の光（近赤外光及び赤外光）を除去するＩＲＣＦ２の分光透過率特性である。

ＩＲＣＦ２が光路から抜出されることにより、ＩＲＣＦ２で除去されていた約６５０ｎｍより長波長側の光に対してもＣＣＤ３が感度を有するようになるため、ＣＣＤ３の感度を上げることが可能となる。ただし、近赤外光の影響により、Ｒ光、又はＭｇ及びＹｅ光に対する感度が著しく上がるため、カラーバランスが崩れる。カラーバランスが崩れると、正しく色再現ができないため、通常は白黒画像を出力する。

ここで、図４、図５、図６及び図７には、各種光源の分光特性を示す。図４及び図５にそれぞれ示すような蛍光灯や水銀灯では、６５０ｎｍ以上の波長成分がなく、ＩＲＣＦ２の挿抜による色情報の変化量が多くない。したがって、色再現性をほぼ維持したカラー画像の出力が可能となる。色情報は、被写体の持つ主たる情報であるため、カラー画像を出力する方が望ましい。

図６には、赤外照明の分光特性を示している。一般に、赤外照明にはＬＥＤが使用されることが多く、８００〜１０００ｎｍの短波長光が発せられる。８００ｎｍより長波長側になると、原色ＣＣＤ及び補色ＣＣＤとも、各色フィルタの透過率がほぼ同じとなり、ＣＣＤの感度は上がるが、カラーバランスは大きくは崩れない。このため、カラー画像の出力を行うことができる。これに対し、図７に示す白熱灯では、６５０ｎｍ以上の波長成分を多く含んでいるため、画像が赤みを帯びてカラーバランスが大きく崩れる。このため、ＩＲＣＦ２を光路外に抜出して、白黒画像の出力に切り替える方がよい。

本実施例では、このような理論に基づいて、ＩＲＣＦ２の挿抜による画像に関する情報（色情報）の変化量に応じて撮像モードを切り替える。

次に、図８のフローチャートを用いて、ＩＲＣＦ２の挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御について説明する。この制御は、主としてＷＢゲイン算出部９、輝度/色情報算出部７、ＩＲＣＦ挿抜判定部１２、ＩＲＣＦ制御回路１３及び映像選択部１４がコンピュータプログラムに従って動作することで実行される。

輝度情報Ｙが閾値Ｙｔｈよりも小さい場合、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２を抜出すべきと判定し、ＩＲＣＦ２の抜出指示をＩＲＣＦ制御回路１３に送る。これにより、ＩＲＣＦ制御回路１３は、ＩＲＣＦ２を光路外に抜出する。この際、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２が抜出されたことを示す情報を映像選択部１４に送る（Ｓ８０１）。

輝度/色情報算出部７は、ＷＢ画像を複数の領域に分割し、該領域ごとにＲとＢの色情報を所定時間ごとに色情報記憶部１０に記憶させている。色情報比較部１１は、輝度/色情報算出部７からのＩＲＣＦ２の抜出後の（抜出状態での）色情報と、色情報記憶部１０からのＩＲＣＦ２の抜出前の（挿入状態での）色情報とを比較し、色情報の変化量ΔＲ，ΔＢを算出する（Ｓ８０２）。

ここで、ＷＢ画像において白色の領域（特定領域）は、波長領域４００〜６５０ｎｍの全波長成分を反射する領域である。色情報を比較する領域として、ＷＢゲイン算出部９にて算出される白色領域を用いることにより、色情報の変化量ΔＲ，ΔＢをともに偏りなく算出することができる。

なお、ＷＢ画像において注目する領域が決まっている場合には、該領域を予め指定（設定）しておき、その領域のＩＲＣＦ２抜出前後での色情報の変化量を求めてもよい。また、ＷＢ画像において注目する被写体が決まっている場合には、その被写体の動きを動体検出処理により検出し、その検出結果に基づいて該被写体の少なくとも１部を含む領域のＩＲＣＦ２抜出前後での色情報の変化量を求めてもよい。このような色情報（画像に関する情報）の変化量を求める領域を選択する選択手段を設けることにより、注目領域や注目被写体を含む領域以外の領域での色情報の変化に起因する誤動作を減少させることができる。注目領域の選択をユーザが不図示の操作スイッチを介して行えるようにしてもよい。これらのことは、後述する他の実施例でも同様である。

また、被写体の動きが多いシーンにおいては、長時間にわたって色の変化の少ない領域での色情報の変化量、又はＷＢ画像全体での平均値としての色情報の変化量を求めるようにするとよい。これにより、ＩＲＣＦ２の挿抜前後での被写体の動きによる色情報の変化量ΔＲ，ΔＢの誤算出を回避することができる。

次に、映像選択部１４は、Ｓ８０２で算出された色情報の変化量ΔＲ，ΔＢをそれぞれ、所定値としての閾値Ｒｔｈ，Ｂｔｈと比較する（Ｓ８０３）。閾値Ｒｔｈ，Ｂｔｈは、カラーバランスの変化（崩れ）が許容される色情報の変化量の最大値であり、画像の画素数やノイズ感等に依存するパラメータである。ビデオカメラの使用環境やユーザの画像の好み等に応じて、閾値Ｒｔｈ，Ｂｔｈを任意に設定できるようにしてもよい。

ここで、色情報の変化量が閾値より大きいと判定する条件として、
ΔＲ＞Ｒｔｈ ｏｒ ΔＢ＞Ｂｔｈ …（１）
を設定することにより、色情報の変化に対して敏感に反応することが可能となる。

また、色情報の変化量が閾値より大きいと判定する条件として、
ΔＲ＞Ｒｔｈ ａｎｄ ΔＢ＞Ｂｔｈ …（２）
を設定すれば、式（１）に比べて、色情報の変化が確実にあった場合にのみに色情報の変化量が大きいと判断することができる。

上記のように、閾値Ｒｔｈ，Ｂｔｈと論理（ｏｒ，ａｎｄ）との組み合わせにより、色情報の変化に対する誤判定を防止し、意図した色の変化に対してのみ色の変化があると判定することが可能となる。

また、色情報の変化量の大小判定を行う場合に、ＩＲＣＦ２の抜出前と抜出後における色情報を時間的に平均しておくとよい。このように時間的に平均化された色情報を用いることにより、ゲイン等によるノイズの影響を大きく受けることなく、色情報の変化量を正確に算出することができる。

映像選択部１４は、ＩＲＣＦ２の挿抜前後での色情報の変化量が上記閾値より大きいと判定した場合、つまりカラーバランスに許容できない崩れが生じた場合は、色再現性が確保されていないとして、白黒画像出力を選択する（Ｓ８０４）。すなわち、ＩＲＣＦ２の抜出後の撮像モードとして白黒モードを選択（設定）する。

一方、ＩＲＣＦ２が抜出されたが、色情報の変化量が上記閾値より小さいと判定した場合、つまりカラーバランスが大きくは崩れておらず、ほぼ色再現性が確保されている場合は、映像選択部１４は、カラー画像出力を選択する（Ｓ８０５）。すなわち、ＩＲＣＦ２の抜出後の撮像モードとしてカラーモードを選択する。

このように、本実施例では、ＩＲＣＦ２の挿抜による色情報の変化量が小さい場合に限ってＩＲＣＦ２の抜出後にカラー画像を出力するので、ＩＲＣＦ２の抜出によるカラー画像での同じ被写体の色の変化を抑えることができる。また、ＩＲＣＦ２の抜出後にカラー画像を出力する際のソフトウェアよる処理負荷が少なく、かつ余計なハードウェアを追加する必要もない。

次に、図９のフローチャートを用いて、ＩＲＣＦ２の抜出後におけるカラー画像出力の継続判定処理について説明する。この処理は、映像選択部１４により行われる。

映像選択部１４は、ＩＲＣＦ２の抜出後（カラー画像出力状態）における所定時間Ｔごとに色情報の変化量を算出する（Ｓ９０１，Ｓ９０２）。ここでの所定時間Ｔは、ＲとＢの色情報の安定度に応じて決定される。ゲイン等の影響によるノイズ成分の発生により色情報が大きく変動することがある。このため、所定時間Ｔとしては、該所定時間Ｔでの色情報の平均化によってノイズ成分を十分吸収できる時間が設定される。

色情報の変化量を算出するためには、ＩＲＣＦ２の抜出前の色情報とＩＲＣＦ２の抜出後に所定時間Ｔごとに算出される色情報とを比較する。これは、ＩＲＣＦ２の抜出後に、ＩＲＣＦ２の抜出前とは異なる光源からの照明光が被写体に照射されたような場合に、被写体の色情報が変化して正しい色再現が行われていない状態を判定するためである。

そして、映像選択部１４は、Ｓ８０３と同様に、色情報の変化量の大小判定を行う（Ｓ９０３）。色情報の変化量が大きい場合には白黒画像出力に切り替え（Ｓ９０４）、変化量が小さい場合には引き続きカラー画像出力を継続する（Ｓ９０５）。

このように、ＩＲＣＦ２の抜出後にも色情報の変化を監視することにより、ＩＲＣＦ２の抜出後の光源の変化にも対応でき、高い色再現性を持ったカラー画像の出力を継続することができる。

図１０には、本発明の実施例２であるビデオカメラの構成を示している。本実施例において、図１に示した構成要素と同じ構成要素には、図１と同符号を付して説明に代える。本実施例では、図１に示した色情報記憶部１０の代わりに輝度情報記憶部１６が設けられているとともに、図１に示した色情報比較部１１の代わりに輝度情報比較部１７が設けられている。

輝度情報記憶部１６は、所定時間ごとに画像に関する情報としての輝度情報Ｙを記憶し、該輝度情報Ｙを輝度情報比較部１７に送信する。輝度情報比較部１７は、輝度情報記憶部１６から送信された所定時間前の輝度情報と輝度/色情報算出部７にて算出されて送信された現在の輝度情報とから、輝度情報の変化量を算出する。

実施例１でも説明したように、ＩＲＣＦ挿抜判定部１２は、輝度情報Ｙが大きい場合には、ＩＲＣＦ２を光路内に挿入するよう判定する。一方、輝度情報Ｙが小さい場合には、ＩＲＣＦ２を光路から抜出するよう判定する。

本実施例における映像選択部１４は、ＩＲＣＦ挿抜判定部１２からの判定結果と輝度情報比較部１７からの輝度情報とに基づいて、ＩＲＣＦ２を抜出した状態でカラー画像出力と白黒画像出力のうちどちらを行うかを選択する。

次に、図１１のフローチャートを用いて、ＩＲＣＦ２の挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御について説明する。この制御は、主としてＷＢゲイン算出部９、輝度/色情報算出部７、ＩＲＣＦ挿抜判定部１２、ＩＲＣＦ制御回路１３及び映像選択部１４がコンピュータプログラムに従って動作することで実行される。

輝度情報Ｙが閾値Ｙｔｈよりも小さい場合、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２を抜出すべきと判定し、ＩＲＣＦ２の抜出指示をＩＲＣＦ制御回路１３に送る。これにより、ＩＲＣＦ制御回路１３は、ＩＲＣＦ２を光路外に抜出する。この際、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２が抜出されたことを示す情報を映像選択部１４に送る（Ｓ１１０１）。

輝度/色情報算出部７は、ＷＢ画像を複数の領域に分割し、該領域ごとに輝度情報Ｙを所定時間ごとに輝度情報記憶部１６に記憶させている。輝度情報比較部１７は、輝度/色情報算出部７からのＩＲＣＦ２の抜出後の輝度情報と、輝度情報記憶部１６からのＩＲＣＦ２抜出前の輝度情報とを比較し、輝度情報Ｙの変化量ΔＹを算出する（Ｓ１１０２）。

被写体の動きが多いシーンにおいては、長時間にわたって輝度の変化の少ない領域での輝度情報の変化量、又はＷＢ画像全体での平均値としての輝度情報の変化量を求めるようにするとよい。これにより、ＩＲＣＦ２の挿抜前後での被写体の動きによる輝度情報の変化量ΔＹの誤算出を回避することができる。

次に、映像選択部１４は、Ｓ１１０２で算出された輝度情報Ｙの変化量ΔＹを、所定値としての閾値Ｙｔｈと比較する（Ｓ１１０３）。閾値Ｙｔｈは、カラーバランスの変化（崩れ）が許容される色情報の変化量の最大値であり、画像の画素数やノイズ感等に依存するパラメータである。ビデオカメラの使用環境やユーザの画像の好み等に応じて、閾値Ｙｔｈを任意に設定できるようにしてもよい。

また、輝度情報の変化量の大小判定を行う場合に、ＩＲＣＦ２の抜出前と抜出後における輝度情報を時間的に平均しておくとよい。このように時間的に平均化された輝度情報を用いることにより、ゲイン等によるノイズの影響を大きく受けることなく、輝度情報の変化量を正確に算出することができる。

映像選択部１４は、ＩＲＣＦ２の挿抜前後での輝度情報Ｙの変化量ΔＹが閾値Ｙｔｈより大きいと判定した場合、つまりカラーバランスに許容できない崩れが生じた場合は、色再現性が確保されていないとして、白黒画像出力を選択する（Ｓ１１０４）。すなわち、ＩＲＣＦ２の抜出後の撮像モードとして白黒モードを選択する。

一方、ＩＲＣＦ２が抜出されたが、輝度情報Ｙの変化量ΔＹが閾値Ｙｔｈより小さいと判定された場合、つまりカラーバランスが大きくは崩れておらず、ほぼ色再現性が確保されている場合は、映像選択部１４は、カラー画像出力を選択する（Ｓ１１０５）。すなわち、ＩＲＣＦ２の抜出後の撮像モードとしてカラーモードを選択する。

このように、本実施例では、ＩＲＣＦ２の挿抜による輝度情報の変化量が小さい場合に限ってＩＲＣＦ２の抜出後にカラー画像を出力するので、ＩＲＣＦ２の抜出後におけるカラー画像での同じ被写体の色の変化を抑えることができる。また、カラー画像を出力する際のソフトウェアよる処理負荷が少なく、かつ余計なハードウェアを追加する必要もない。

次に、図１２のフローチャートを用いて、ＩＲＣＦ２の抜出後におけるカラー画像出力の継続判定処理について説明する。この処理は、映像選択部１４により行われる。

映像選択部１４は、ＩＲＣＦ２の抜出後（カラー画像出力状態）における所定時間Ｔごとに輝度情報Ｙの変化量ΔＹを算出する（Ｓ１２０１，Ｓ１２０２）。ここでの所定時間Ｔは、輝度情報の安定度に応じて決定される。ゲイン等の影響によるノイズ成分の発生により輝度情報が大きく変動することがある。このため、所定時間Ｔとしては、該所定時間Ｔでの輝度情報の平均化によってノイズ成分を十分吸収できる時間が設定される。

輝度情報Ｙの変化量ΔＹを算出するためには、ＩＲＣＦ２の抜出前の輝度情報とＩＲＣＦ２の抜出後に所定時間Ｔごとに算出される輝度情報とを比較する。これは、ＩＲＣＦ２の抜出後に、ＩＲＣＦ２の抜出前とは異なる光源からの照明光が被写体に照射されたような場合に、被写体の色情報が変化する程の輝度変化が生じ、正しい色再現が行われていない状態を判定するためである。

そして、映像選択部１４は、Ｓ１１０３と同様に、輝度情報の変化量の大小判定を行う（Ｓ１２０３）。輝度情報の変化量が所定値より大きい場合には白黒画像出力に切り替え（Ｓ１２０４）、変化量が所定値より小さい場合には引き続きカラー画像出力を継続する（Ｓ１２０５）。

このように、ＩＲＣＦ２の抜出後にも輝度情報の変化を監視することにより、ＩＲＣＦ２の抜出後の光源の変化にも対応でき、高い色再現性を持ったカラー画像の出力を継続することができる。

図１３には、本発明の実施例３であるビデオカメラの構成を示している。本実施例において、図１に示した構成要素と同じ構成要素には、図１と同符号を付して説明に代える。本実施例では、図１に示した構成要素に加えて、光源算出部１８と光源設定部１９とが設けられている。

光源情報生成手段の１つとしての光源算出部１８は、ＷＢゲイン算出部９で算出されたＲゲイン，Ｇゲイン及びＢゲインから光源データを算出する。光源データは、ＷＢ画像中の被写体を照らす光源に関する情報である。

他の光源情報生成手段としての光源設定部１９は、ビデオカメラが設置された環境の光源データをユーザがマニュアルで設定する場合に用いられる。設定された光源データは、ＷＢゲイン算出部９に送られ、ＷＢゲイン算出部９は、該光源データに基づいてＲゲイン，Ｇゲイン及びＢゲインを算出する。また、光源算出部１８及び光源設定部１９からの光源データは映像選択部１４にも送信され、光源に応じてカラー画像出力と白黒画像出力のいずれかを選択する場合に使用される。

次に、本実施例におけるＩＲＣＦ２の抜出後におけるカラー画像出力と白黒画像出力の選択について説明する。

図１４には、ＷＢを行ったときの各種光源によるＲゲインとＢゲインの分布を示している。横軸はＲゲインを、縦軸はＢゲインを示している。図中の楕円は各光源下でＲゲインとＢゲインの存在する範囲を示している。ＷＢを行った場合のＲゲインとＢゲインの存在範囲は光源の種類によって異なり、Ｒゲイン及びＢゲインの存在範囲から光源の種類をおおむね推定することができる。光源の種類が推定できれば、４００ｎｍ以上の波長成分に対する６５０ｎｍ以上の近赤外成分が占める割合も推定することができ、この結果、ＩＲＣＦ２の挿抜による色情報の変化量も推定することができる。したがって、ＩＲＣＦ２の抜出前のＲゲイン及びＢゲインから光源の種類を推定することにより、ＩＲＣＦ２の抜出後にカラー画像出力と白黒画像出力のうちどちらを選択すべきかを判定することができる。このように、本実施例では、光源データに応じて撮像モードを切り替える。

本実施例では、ＩＲＣＦ２の挿抜による色情報の変化量を直接求めるわけではないが、光源データと色情報の変化量とが対応しているので、結果的にＩＲＣＦ２の挿抜による色情報の変化量に応じて撮像モードを切り替えることに相当する。

また、本実施例では、特定の光源下でビデオカメラが使用されることを想定して、ユーザによって光源を設定させる光源設定部１９を有する。光源設定部１９で光源の種類が設定された場合には、光源算出部１８で推定された光源ではなく、光源設定部１９で設定された光源のデータに基づいてカラー画像出力と白黒画像出力のうちどちらを選択すべきかを判定してもよい。

さらに、特定の時間に光源からの照明が被写体に照射される場合等、撮像環境や被写体がスケジューリングされている場合も考えられる。このような場合には、スケジューリングと組み合わせてカラー画像出力と白黒画像出力のうちどちらを選択すべきかを判定することにより、光源が定期的に変化する場合でも適切な撮像モードの選択を行うことができる。

次に、図１５のフローチャートを用いて、ＩＲＣＦ２の挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御について説明する。この制御は、主としてＷＢゲイン算出部９、光源算出部１８、ＩＲＣＦ挿抜判定部１２、ＩＲＣＦ制御回路１３及び映像選択部１４がコンピュータプログラムに従って動作することで実行される。

輝度情報Ｙが閾値Ｙｔｈよりも小さい場合、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２を抜出すべきと判定し、ＩＲＣＦ２の抜出指示をＩＲＣＦ制御回路１３に送る。これにより、ＩＲＣＦ制御回路１３は、ＩＲＣＦ２を光路外に抜出する。この際、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２が抜出されたことを示す情報を映像選択部１４に送る（Ｓ１５０１）。

次に、光源算出部１８は光源データを算出する（Ｓ１５０２）。ここでは、上述したようにＲゲイン及びＢゲインの分布範囲から光源データが生成される。光源データは映像選択部１４に送信される。なお、これらの処理に代えて、光源設定部１９において設定された光源データを映像選択部１４に送信してもよい。

映像選択部１４は、光源データに基づいて、その光源がＩＲＣＦ２の抜出によってカラーバランスが大きく崩れる光源か否かを判定する。具体的には、光源の近赤外成分が所定値より多い場合（例えば４００ｎｍ以上の波長成分に対する近赤外成分が占める割合が所定割合より多い場合）には、カラーバランスが大きく崩れる（実施例１で説明した色情報の変化量が閾値より大きくなる）光源と判定する。一方、近赤外成分が所定値より少ない場合（例えば、上述した近赤外成分が占める割合が所定割合より少ない場合）にはカラーバランスが大きくは崩れない（色情報の変化量が閾値より小さい）光源と判定する。

映像選択部１４は、カラーバランスが大きく崩れる光源である場合は白黒画像出力を選択する。すなわち、ＩＲＣＦ２の抜出後の撮像モードとして白黒モードを選択する。そうでない光源である場合はカラー画像出力を選択する。すなわち、ＩＲＣＦ２の抜出後の撮像モードとしてカラーモードを選択する（Ｓ１５０３，Ｓ１５０４，Ｓ１５０５）。

このように、本実施例では、光源がＩＲＣＦ２の挿抜による色情報の変化量が小さい光源である場合にＩＲＣＦ２の抜出後にカラー画像を出力するので、該カラー画像における同じ被写体の色の変化を抑えることができる。また、カラー画像を出力する際のソフトウェアよる処理負荷が少なく、かつ余計なハードウェアを追加する必要もない。

なお、被写体を照らす光源が近赤外光をほとんど含まない光源である場合は、ＩＲＣＦ２の挿入状態でのＷＢにおいて、図２１の斜線範囲Ａ内に存在するＲゲイン及びＢゲインによって被写体の色を白色に補正することができる。このため、斜線範囲（以下、白補正可能ゲイン範囲という）Ａ内に存在するＲゲイン及びＢゲインによって被写体の色を白色に補正することができない場合には、光源が近赤外光を含む光源であると推定できる。つまり、ＩＲＣＦ２の抜出後に、近赤外光がＣＣＤ３に入射すると考えられ、カラーバランスが崩れると推定できる。

このように、光源の種類ごとの色ゲインの存在範囲ではなく、白補正可能ゲイン範囲Ａに実際のＲゲイン及びＢゲインが存在するか否かを上記光源データに代えて光源に関する情報として取得して用いてもよい。そして、実際のＲゲイン及びＢゲインが白補正可能ゲイン範囲Ａに存在する場合に限り、ＩＲＣＦ２の抜出後にカラー画像出力を行うことも可能である。

次に、図１６のフローチャートを用いて、ＩＲＣＦ２の抜出後におけるカラー画像出力の継続判定処理について説明する。この処理は、光源算出部１８及び映像選択部１４により行われる。

光源算出部１８は、ＩＲＣＦ２の抜出後（カラー画像出力状態）における所定時間Ｔごとに、Ｓ１５０２と同様に光源データを算出する（Ｓ１６０１，Ｓ１６０２）。ここでの所定時間Ｔは、ＲとＢの色情報の安定度に応じて決定される。ゲイン等の影響によるノイズ成分の発生により色情報が大きく変動することがある。このため、所定時間Ｔとしては、該所定時間Ｔでの色情報の平均化によってノイズ成分を十分吸収できる時間が設定される。所定時間Ｔごとに算出された光源データは、映像選択部１４に送信される。

映像選択部１４は、所定時間Ｔごとに送信されてくる光源データに基づいて、光源がカラー画像出力可能な光源か否かを判定する。カラー画像出力が可能な光源である場合はカラー画像出力を維持し、そうでない光源である場合には白黒画像出力に切り替える（Ｓ１６０３，Ｓ１６０４，Ｓ１６０５）。

このように、ＩＲＣＦ２の抜出後にも光源データの変化を監視することにより、ＩＲＣＦ２の抜出後の光源の変化にも対応でき、高い色再現性を持ったカラー画像の出力を継続することができる。

図１７には、本発明の実施例４であるビデオカメラの構成を示している。本実施例において、図１に示した構成要素と同じ構成要素には、図１と同符号を付して説明に代える。本実施例では、図１に示した構成要素に加えて、ＩＲＣＦ抜出時映像設定部２０が設けられている。

ＩＲＣＦ抜出時映像設定部２０は、ＩＲＣＦ２の抜出時にカラー画像出力及び白黒画像出力のうちどちらを選択するかをユーザに設定させるために設けられている。

次に、本実施例におけるＩＲＣＦ２の抜出後におけるカラー画像出力と白黒画像出力の選択について説明する。

ＩＲＣＦ２の抜出状態での撮像モード、すなわちカラー画像出力と白黒画像出力のうちどちらを選択するかは、ビデオカメラの設置環境やユーザの好みに依存する。ある視野に設定された画角や設定される光源や被写体が決まっている場合には、ＩＲＣＦ２の抜出時の撮像モードをユーザに設定させることにより、ユーザの意図に反した誤動作を防止することができる。

また、定期的に画角や被写体が変更される場合や、特定時間に被写体に対して照明光が照射される場合等、撮像環境や被写体がスケジューリングされている場合には、該スケジューリングに合わせて撮像モードの設定を行うようにしてもよい。

図１８には、本発明の実施例５であるビデオカメラの構成を示している。本実施例において、図１に示した構成要素と同じ構成要素には、図１と同符号を付して説明に代える。本実施例では、図１に示した構成要素に加えて、ＷＢゲイン記憶部２１とＷＢゲイン比較部２２とが設けられている。

ＷＢゲイン記憶部２１は、所定時間ごとにＷＢゲイン算出部９で算出されたＲゲイン，Ｇゲイン及びＢゲインを記憶する。ＷＢゲイン比較部２２は、ＷＢゲイン記憶部２１から送られてきた所定時間前のＲゲイン，Ｇゲイン及びＢゲインと、ＷＢゲイン算出部９で算出された現在のＲゲイン，Ｇゲイン及びＢゲインと比較し、画像に関する情報としての各色ゲインの変化量を算出する。

映像選択部１４は、ＩＲＣＦ挿抜判定部１２での判定結果とＷＢゲイン比較部２２で算出された各色ゲインの変化量に基づいて、ＩＲＣＦ２の抜出後にカラー画像出力と白黒画像出力のうちどちらを選択するかを判定する。

本実施例におけるＩＲＣＦ２の抜出後におけるカラー画像出力と白黒画像出力の選択は、実施例１と同様である。

次に、図１９のフローチャートを用いて、ＩＲＣＦ挿抜によりカラー映像の出力を行うか白黒映像に切り換えるかの動作を説明する。ＩＲＣＦ２の挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御について説明する。この制御は、主としてＷＢゲイン算出部９、ＩＲＣＦ挿抜判定部１２、ＷＢゲイン比較部２２、ＩＲＣＦ制御回路１３及び映像選択部１４がコンピュータプログラムに従って動作することで実行される。

輝度情報Ｙが閾値Ｙｔｈよりも小さい場合、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２を抜出すべきと判定し、ＩＲＣＦ２の抜出指示をＩＲＣＦ制御回路１３に送る。これにより、ＩＲＣＦ制御回路１３は、ＩＲＣＦ２を光路外に抜出する。この際、ＩＲＣＦ挿抜判定部１２は、ＩＲＣＦ２が抜出されたことを示す情報を映像選択部１４に送る（Ｓ１９０１）。

ＷＢゲイン比較部２２は、ＷＢゲイン算出部９において算出されたＩＲＣＦ２の抜出後のＲゲイン，Ｇゲイン及びＢゲインと、ＷＢゲイン記憶部２１からのＩＲＣＦ２の抜出前のＲゲイン，Ｇゲイン及びＢゲインとをそれぞれ比較する。これにより、ＩＲＣＦ２の抜出によるＲゲイン，Ｇゲイン及びＢゲインの変化量ΔＲgain，ΔＧgain，ΔＢgainを算出する（Ｓ１９０２）。

次に、映像選択部１４は、Ｓ１９０２で算出された変化量ΔＲgain，ΔＧgain及びΔＢgainをそれぞれ、所定値としての閾値Ｒgainｔｈ、Ｇgainｔｈ及びＢgainｔｈと比較する（Ｓ１９０３）。閾値Ｒgainｔｈ，Ｇgainｔｈ及びＢgainｔｈは、カラーバランスの変化（崩れ）が許容される色ゲイン（つまりは色情報）の変化量の最大値であり、画像の画素数やノイズ感等に依存するパラメータである。ビデオカメラの使用環境やユーザの画像の好み等に応じて、閾値Ｒgainｔｈ，Ｇgainｔｈ及びＢgainｔｈを任意に設定できるようにしてもよい。

色ゲインの変化量が閾値より大きいと判断する条件として、
ΔＲgain＞Ｒgainth or ΔＧgain＞Ｇgainth or ΔＢgain＞Ｂgainth …（３）
を設定することにより、色ゲインの変化に対して敏感に反応することが可能となる。

また、色ゲインの変化量が閾値より大きいと判断する条件として、
ΔＲgain＞Ｒgainth and ΔＧgain＞Ｇgainth and ΔＢgain＞Ｂgainth …（４）
を設定すれば、式（３）に比べて、色ゲインの変化が確実にあった場合にのみに色ゲインの変化量が大きいと判断することができる。

上記のように、閾値Ｒgainｔｈ，Ｇgainｔｈ及びＢgainｔｈと論理（ｏｒ，ａｎｄ）との組み合わせにより、色ゲインの変化に対する誤判定を防止し、意図した色ゲインの変化に対してのみ色の変化があると判定することが可能となる。

さらに、色ゲインの変化量の大小判定を行う場合に、ＩＲＣＦ２の抜出前と抜出後における色ゲインを時間的に平均しておくとよい。このように時間的に平均化された色ゲインを用いることにより、ＡＧＣ（オートゲインコントロール）等によるノイズの影響を大きく受けることなく、色ゲインの変化量を正確に算出することができる。

映像選択部１４は、ＩＲＣＦ２の挿抜前後での色ゲインの変化量が閾値より大きいと判定した場合、つまりＩＲＣＦ２の抜出によりカラーバランスに許容できない崩れが生じた場合は、色再現性が確保されていないとして、白黒画像出力を選択する（Ｓ１９０４）。すなわち、撮像モードとして白黒モードを選択する。

一方、ＩＲＣＦ２が抜出されたが、色ゲインの変化量が閾値より小さいと判定した場合、つまりＩＲＣＦ２の抜出によりカラーバランスが大きくは崩れておらず、ほぼ色再現性が確保されている場合は、映像選択部１４は、カラー画像出力を選択する（Ｓ１９０５）。すなわち、撮像モードとしてカラーモードを選択する。

このように、本実施例では、ＩＲＣＦ２の挿抜による色ゲインの変化量が小さい場合に限ってＩＲＣＦ２の抜出後にカラー画像を出力するので、ＩＲＣＦ２の抜出によるカラー画像での同じ被写体の色の変化を抑えることができる。また、ＩＲＣＦ２の抜出後にカラー画像を出力する際のソフトウェアよる処理負荷が少なく、かつ余計なハードウェアを追加する必要もない。

次に、図２０のフローチャートを用いて、ＩＲＣＦ２の抜出後におけるカラー画像出力の継続判定処理について説明する。この処理は、ＷＢゲイン比較部２２及び映像選択部１４により行われる。

ＷＢゲイン比較部２２は、ＩＲＣＦ２の抜出後（カラー画像出力状態）における所定時間Ｔごとに、Ｒゲイン，Ｇゲイン及びＢゲインの変化量を算出する（Ｓ２００１，Ｓ２００２）。ここでの所定時間Ｔは、各色ゲインの安定度に応じて決定される。ＷＢが安定するまで色ゲインが大きく変動することがある。このため、所定時間Ｔとしては、ＷＢが十分安定する時間が設定される。

また、Ｒゲイン，Ｇゲイン及びＢゲインの変化量を算出する場合には、ＩＲＣＦ２の抜出前の各色ゲインとＩＲＣＦ２の抜出後に所定時間Ｔごとに算出される各色ゲインとを比較する。これは、ＩＲＣＦ２の抜出後に、ＩＲＣＦ２の抜出前とは異なる光源からの照明光が被写体に照射されたような場合に、被写体の色情報が変化して正しい色再現が行われていない状態を判定するためである。

そして、映像選択部１４は、Ｓ１９０３と同様に、色ゲインの変化量の大小判定を行う（Ｓ２００３）。色ゲインの変化量が閾値より大きい場合には白黒画像出力に切り替え（Ｓ２００４）、変化量が閾値より小さい場合には引き続きカラー画像出力を継続する（Ｓ９０５）。

このように、ＩＲＣＦ２の抜出後にも色ゲインの変化を監視することにより、ＩＲＣＦ２の抜出後の光源の変化にも対応でき、高い色再現性を持ったカラー画像の出力を継続することができる。

以上説明した各実施例は代表的な例にすぎず、本発明の実施に際しては、各実施例に対して種々の変形や変更が可能である。

例えば、上記各実施例では、撮像光学系を一体に有した撮像装置について説明したが、本発明は、撮像光学系の交換が可能な撮像装置にも適用することができる。

本発明の実施例１であるビデオカメラの構成を示すブロック図。 原色ＣＣＤの分光透過率特性を示す図。 補色ＣＣＤの分光透過率特性を示す図。 蛍光灯の分光特性を示す図。 水銀灯の分光特性を示す図。 赤外照明の分光特性を示す図。 白熱灯の分光特性を示す図。 実施例１におけるＩＲＣＦの挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御を示すフローチャート。 実施例１におけるＩＲＣＦの抜出後におけるカラー画像出力の継続判定処理を示すフローチャート。 本発明の実施例２であるビデオカメラの構成を示すブロック図。 実施例２におけるＩＲＣＦの挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御を示すフローチャート。 実施例２におけるＩＲＣＦの抜出後におけるカラー画像出力の継続判定処理を示すフローチャート。 本発明の実施例３であるビデオカメラの構成を示すブロック図。 各光源下でのＲゲイン及びＢゲインの存在範囲を示す図。 実施例３におけるＩＲＣＦの挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御を示すフローチャート。 実施例３におけるＩＲＣＦの抜出後におけるカラー画像出力の継続判定処理を示すフローチャート。 本発明の実施例３であるビデオカメラの構成を示すブロック図。 本発明の実施例４であるビデオカメラの構成を示すブロック図。 実施例４におけるＩＲＣＦの挿抜に応じたカラー画像出力と白黒画像出力との切り替え制御を示すフローチャート。 実施例４におけるＩＲＣＦの抜出後におけるカラー画像出力の継続判定処理を示すフローチャート。 白補正可能ゲイン範囲を示す図。

符号の説明

１ 撮像レンズ
２ 赤外カットフィルタ（ＩＲＣＦ）
３ 撮像素子
５ 映像信号処理部
６ ＷＢ処理部
７ 輝度／色情報算出部
９ ＷＢゲイン算出部
１１ 色情報比較部
１２ ＩＲＣＦ挿抜判定部
１４ 映像選択部
１７ 輝度情報比較部
１８ 光源算出部
２２ ＷＢゲイン比較部

Claims (8)

1. 撮像光学系により形成された被写体像を光電変換する撮像素子と、
   該撮像素子からの出力信号を用いて画像を生成する画像生成手段と、
   前記生成された画像に関する情報を取得する情報取得手段と、
   前記撮像光学系内から前記撮像素子までの光路に対して挿抜される赤外カットフィルタと、
   撮像モードをカラーモードと白黒モードとで切り替える制御手段とを有し、
   前記制御手段は、前記赤外カットフィルタの挿抜による前記画像に関する情報の変化量に応じて、前記赤外カットフィルタが抜出された後の前記撮像モードを切り替えることを特徴とする撮像装置。
2. 前記画像に関する情報は、前記画像の色情報であることを特徴とする請求項１に記載の撮像装置。
3. 前記画像に関する情報は、前記画像の輝度情報であることを特徴とする請求項１に記載の撮像装置。
4. 前記生成された画像に対してホワイトバランス処理を行うホワイトバランス処理手段を有し、
   前記画像に関する情報は、前記ホワイトバランス処理における色ゲインであることを特徴とする請求項１に記載の撮像装置。
5. 前記制御手段は、前記画像に関する情報の変化量が所定値より多い場合は前記撮像モードを前記白黒モードに設定し、前記画像に関する情報の変化量が前記所定値より少ない場合は前記撮像モードを前記カラーモードに設定することを特徴とする請求項１から４のいずれか１つに記載の撮像装置。
6. 撮像光学系により形成された被写体像を光電変換する撮像素子と、
   該撮像素子からの出力信号を用いて画像を生成する画像生成手段と、
   前記生成された画像中の被写体を照らす光源に関する情報を生成する光源情報生成手段と、
   前記撮像光学系内から前記撮像素子までの光路に対して挿抜される赤外カットフィルタと、
   撮像モードをカラーモードと白黒モードとで切り替える制御手段とを有し、
   前記制御手段は、前記光源に関する情報に応じて、前記赤外カットフィルタが抜出された後の前記撮像モードを切り替えることを特徴とする撮像装置。
7. 前記制御手段は、前記光源の近赤外成分が所定値より多い場合は前記撮像モードを前記白黒モードに設定し、前記近赤外成分が前記所定値より少ない場合は前記撮像モードを前記カラーモードに設定することを特徴とする請求項６に記載の撮像装置。
8. 前記生成された画像に対してホワイトバランス処理を行うホワイトバランス処理手段を有し、
   前記光源に関する情報を、前記ホワイトバランス処理における色ゲインの存在範囲に基づいて取得することを特徴とする請求項６に記載の撮像装置。