JP4973334B2

JP4973334B2 - 撮像装置および撮像装置の切り替え方法

Info

Publication number: JP4973334B2
Application number: JP2007167129A
Authority: JP
Inventors: 詳二只野
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2007-06-26
Filing date: 2007-06-26
Publication date: 2012-07-11
Anticipated expiration: 2027-06-26
Also published as: CN101335833A; CN101335833B; JP2009010447A; US20090001268A1; US7582871B2

Description

本発明は撮像装置および撮像装置の切り替え方法に関し、特に被写体の状況に応じた画像を外部に出力する撮像装置および遠赤外線領域の電磁波を検出する遠赤外線カメラと、可視光を検出する可視光カメラとを備える撮像装置の切り替え方法に関する。

従来、撮像した画像信号を基に画像処理を行うことで、撮像範囲内の特定の物体を検出する種々の技術が考えられており、このような技術は監視カメラなどに用いられていた。また、可視光を検出して撮像する可視光カメラだけでなく、近赤外線カメラや遠赤外線カメラも知られており、これらは撮像対象の温度を検出することで物体を識別できるようになっていた。

ところで、可視光カメラと赤外線カメラ（遠赤外線カメラ）とでは、それぞれの特性の違いから、比較的確実に識別可能な物体も異なる。このため、可視光カメラと遠赤外線カメラとの両方の機能を備えるハイブリッドカメラが知られている。一般的に、ハイブリッドカメラは、ユーザがハイブリッドカメラから受信した画像を見て、可視光カメラの映像が暗くなったと判断すると、遠赤外線カメラに切り替えている。

ここで、周囲の照度（検出した信号のレベル）に応じて、可視光カメラと遠赤外線カメラとを自動で切り替える技術が知られている（例えば、特許文献１〜３参照）。このような技術によれば、昼夜を問わず視認性のよい方の画像を得ることができる。
特開２００２−１４２２２８号公報特開２００５−００６０６６号公報特開２００５−２８６５３５号公報

ところで、昼間であっても、霧が発生した場合や粉塵が舞っている状況では、可視光カメラより遠赤外線カメラの画像の方が、視認性がよい場合がある。しかし、従来のハイブリッドカメラは、霧や粉塵を見分けることができず、必ずしも視認性のよい画像を得ることはできないという問題があった。

本発明はこのような点に鑑みてなされたものであり、状況に応じて視認性の高い画像を得ることができる撮像装置および撮像装置の切り替え方法を提供することを目的とする。

本発明では上記課題を解決するために、被写体の状況に応じた画像を外部に出力する撮像装置において、遠赤外線領域の電磁波を検出する遠赤外線カメラと、可視光を検出し、検出した可視光の輝度に応じて前記状況を判断する輝度判断部と、検出した可視光の明度に応じて前記状況を判断する明度判断部とを有する可視光カメラと、前記輝度判断部の判断と前記明度判断部の判断とに基づいて、前記赤外線カメラが出力する画像と前記可視光カメラが出力する画像とを切り替える切り替え部と、を有し、前記明度判断部は、前記明度に応じて前記状況が霧または粉塵の状況であると判断できるよう構成されており、前記切り替え部は、前記明度判断部が、前記状況が霧または粉塵の状況であると判断したとき、前記遠赤外線カメラが出力する画像に切り替える撮像装置が提供される。

このような撮像装置によれば、切り替え部により、輝度判断部の判断と明度判断部の判断とに基づいて、赤外線カメラが出力する画像と可視光カメラが出力する画像とが切り替えられる。

本発明によれば、輝度による判断のみならず、明度による判断も行うため、状況に応じて視認性の高い画像を提供することができる。

以下、本発明の実施の形態を、図面を参照して詳細に説明する。以下の実施の形態で説明する撮像装置は、被写体から反射または放射されている、異なる周波数帯域の光（電磁波）をそれぞれ検出可能な２つのカメラを備えている。ここでは、そのような撮像装置をハイブリッドカメラと呼称する。

図１は、実施の形態に係るハイブリッドカメラの構成について概略的に示す図である。
図１に示す撮像システムは、ハイブリッドカメラ１とサーバ２とを有している。
ハイブリッドカメラ１は、それぞれ主として、遠赤外線領域の電磁波を検出可能な遠赤外線カメラ３と、可視光を検出可能な可視光カメラ４と、各カメラによる撮像画像を用いて信号処理を行う画像処理回路５とを備えている。

ハイブリッドカメラ１は、それぞれ通信回線を通じてサーバ２に接続されており、例えば、ハイブリッドカメラ１の出力画像をサーバ２に接続されるモニタにおいて表示させる、あるいは、ハイブリッドカメラ１の動作制御や各種設定をサーバ２側から実行できるようになっている。

遠赤外線カメラ３および可視光カメラ４は、それぞれ同じ方向を撮像する。遠赤外線カメラ３は、遠赤外線を検出するセンサとして、例えば、照射された遠赤外線が持つエネルギー（熱）を検知する焦電素子、ボロメータなどを備えている。また、可視光カメラ４は、可視光を検出するセンサとして、例えば、ＣＣＤ（Charge Coupled Devices）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）型イメージセンサなどの固体撮像素子を備えている。

画像処理回路５は、遠赤外線カメラ３および可視光カメラ４により撮像された画像信号を基に、各種の信号処理を行う。特に、本実施の形態では、これら双方の画像信号を基に、撮像範囲内から特定の物体を検出して、出力画像内においてその物体の検出を明示させるような処理を実行する。

なお、遠赤外線カメラ３および可視光カメラ４は、それぞれのセンサからの出力信号をデジタル信号に変換する機能を備え、画像処理回路５は、遠赤外線カメラ３および可視光カメラ４から出力されるデジタル画像信号を基に処理を行う。また、遠赤外線カメラ３および可視光カメラ４は、それぞれ画素数の異なるセンサを具備していてもよい。ただし、この場合には、各カメラの内部には解像度変換機能が設けられ、各カメラから画像処理回路５に対しては、それぞれフレーム当たり同じ画素数（例えば８ビットでデジタイズされた２５６階調の画像）のデジタル画像信号が出力されるようにする。

なお、遠赤外線カメラ３と可視光カメラ４とは、必ずしも完全に同じタイミングで撮像動作が実行される必要はない。例えば、各カメラの撮像間隔がそれぞれ異なるものとされてもよい。言うまでもなく、各カメラの撮像タイミングはできるだけ近接していることが望ましい。

また、ハイブリッドカメラ１の画像処理回路５からの出力画像をサーバ２のモニタにおいて表示させる、あるいは、ハイブリッドカメラ１の動作制御や各種設定をサーバ２側から実行できるようになっている。

画像切り替え部６は、遠赤外線カメラ３が撮像した画像と可視光カメラ４が撮像した画像を切り替えて、サーバ２に出力する。具体的には切り替え信号“１”が入力されると、遠赤外線カメラ３の画像をサーバ２に出力し、切り替え信号“０”が入力されると、可視光カメラ４の画像をサーバ２に出力する。

同期信号生成部７は、遠赤外線カメラ３と可視光カメラ４とが略同じ時刻で画像撮影し、略同じタイミングで撮像した画像を画像処理回路５に出力させる同期信号を生成する。
図２は、可視光カメラの構成を示すブロック図である。

可視光カメラ４は、レンズ１１と、シャッタ１２と、固体撮像素子１３と、ＣＣＤ制御部１４と、画像処理回路１５とを有している。
レンズ１１は、被写体からの光を固体撮像素子１３に集光する。

シャッタ１２が少しでも開放されていると、可視光がレンズ１１を通して固体撮像素子１３に到達する。
固体撮像素子１３は、本実施の形態では、３行３列の９画素のＣＣＤセンサである。

ＣＣＤ制御部１４は、画像信号に対するＡ／Ｄ変換を含むアナログフロントエンド処理を実行する回路である。このＣＣＤ制御部１４は、ＣＤＳ処理部１４１とＡＧＣ処理部１４２と８ビットのＡ／Ｄ変換部１４３とＴＧ１４４とを有している。

ＣＤＳ処理部１４１は、アンプ雑音とリセット雑音を除去する。
ＡＧＣ処理部１４２は、被写体が暗くなるとゲインを大きくする処理を行う。ゲインの値は“０”から“１０”の値をとり、“１０”が最大のゲイン量であることを示す。

ＴＧ１４４は、固体撮像素子１３とＣＤＳ処理部１４１を制御するタイミング信号を生成する。
次に、レンズ１１からＣＣＤ制御部１４までの動作を簡単に説明する。

固体撮像素子１３で光電変換された信号は、ＣＤＳ処理部１４１を経てＡＧＣ処理部１４２に入る。
ＡＧＣ処理部１４２は、センサの出力データのゲインを決定する。そして、Ａ／Ｄ変換部１４３は入力された信号をデジタイズし、画像処理回路１５に出力する。

画像処理回路１５は、輝度判断部１５１と、明度判断部１５２と、ＯＲ回路１５３とを有している。
輝度判断部１５１および明度判断部１５２にはＴＧ１４４のタイミング信号が入力されており、これらはそれぞれ同期して動作する。

輝度判断部１５１は、入力される画像信号の輝度を判断する部位であり、輝度生成部５１ａと、平均値生成部５１ｂと、最大値抽出部５１ｃと、最小値抽出部５１ｄと、差分演算部５１ｅと、切り替え判断部５１ｆとを有している。

輝度生成部５１ａは、Ａ／Ｄ変換部１４３が生成したデジタル信号から固体撮像素子１３の９画素の輝度値を生成する。ここで、生成される輝度値は、８ビット、すなわち“０”から“２５５”の値をとる。“０”が一番暗く、“２５５”が一番明るい。

平均値生成部５１ｂは、輝度生成部５１ａが生成した固体撮像素子１３の全画素の輝度値の平均値を生成する。
最大値抽出部５１ｃは、輝度生成部５１ａが生成した固体撮像素子１３の全画素の輝度値の最大値を抽出する。

最小値抽出部５１ｄは、輝度生成部５１ａが生成した固体撮像素子１３の全画素の輝度値の最小値を抽出する。
差分演算部５１ｅは、最大値と最小値の差を演算し、差分値を取得する。

切り替え判断部５１ｆは、周囲の明るさ（暗さ）を判断するために設けられており、レベル判断部５１１ｆと、ゲイン確認部５１２ｆと、ＩＲＩＳ確認部５１３ｆと、ＡＮＤ回路５１４ｆとを有している。

レベル判断部５１１ｆは、入力される値が、明暗を判断するために予め与えられた条件を満たす値か否かを判断する。例えば、入力される平均値のレベルが“２０”以下で、かつ、入力される差分値（最大値と最小値との差）が“１０”以下のとき条件を満たすと判断し、“１”を出力する。それ以外のときは条件を満たさないと判断し、“０”を出力する。

ゲイン確認部５１２ｆは、ＡＧＣ処理部１４２のゲイン量（“０”〜“１０”）を調査する。ゲイン量が“１０”のとき“１”を出力し、それ以外は“０”を出力する。
ＩＲＩＳ確認部５１３ｆは、シャッタ１２が完全に開放されているか否かを調査する。完全に開放されているとき“１”を出力し、それ以外は“０”を出力する。

ＡＮＤ回路５１４ｆは、レベル判断部５１１ｆ、ゲイン確認部５１２ｆおよびＩＲＩＳ確認部５１３ｆの出力値がいずれも“１”の場合に輝度切り替え信号“１”を出力し、それ以外は“０”を出力する。

明度判断部１５２は、入力される画像信号の明度を判断する部位であり、明度生成部５２ａと、レベル判断部５２ｂとを有している。
明度生成部５２ａは、固体撮像素子１３が単板の場合、Ａ／Ｄ変換部１４３が生成したデジタル信号から固体撮像素子１３の９画素の明度値を演算して生成する。ここで、生成される明度には赤色、緑色、青色（ＲＧＢ）の３つがある。明度値は、赤色、緑色、青色ともに“０”から“２５５”の値をとり、赤色、緑色、青色の全ての明度値が“２５５”のとき、画像は白色となる。

レベル判断部５２ｂは、明度生成部５２ａが生成した明度を使用して値が満たす値か否かを判断する。この判断基準は特に限定されないが、本実施の形態では一例として「赤色−“３”＜緑色＜赤色＋“３”」、「緑色−“３”＜青色＜緑色＋“３”」、「青色−“３”＜赤色＜青色＋“３”」を満たした画素が画素全体の８５％を超えたとき、赤色、青色、緑色のいずれもがほとんど同じ値（通常の景色を捉えることが難しい状態）であると判断して、可視光カメラ４が霧、粉塵を撮影していると判断し、明度切り替え信号“１”を出力する。

ＯＲ回路１５３は、輝度切り替え信号と、明度切り替え信号の論理和（ＯＲ）をとり、少なくともいずれか一方から“１”が出力されれば切り替え信号として“１”を画像切り替え部６に出力する。

次に、画像処理回路１５の処理を説明するが、まず、輝度判断部１５１の処理を説明し、その後、明度判断部１５２の処理を説明する。
＜輝度判断部の処理＞
図３は、輝度判断部の処理を示すフローチャートである。

まず、輝度生成部５１ａは、ＴＧ１４４のタイミング信号が入力されたか否かを判断する（ステップＳ１）。
タイミング信号が入力されていない場合（ステップＳ１のＮｏ）、タイミング信号の入力を待機する。

タイミング信号が入力されると（ステップＳ１のＹｅｓ）、輝度生成部５１ａは、ＣＣＤ制御部１４から入力されるデジタル信号から、固体撮像素子１３の全画素の輝度値を生成する（ステップＳ２）。

次に、平均値生成部５１ｂは、輝度生成部５１ａが生成した輝度値の平均値を生成する（ステップＳ３）。
次に、最大値抽出部５１ｃは、輝度生成部５１ａが生成した輝度値の最大値を抽出する（ステップＳ４）。

次に、最小値抽出部５１ｄは、輝度生成部５１ａが生成した輝度値の最小値を抽出する（ステップＳ５）。
次に差分演算部５１ｅは、抽出された最大値と最小値との差分を演算し、差分値を取得する（ステップＳ６）。

レベル判断部５１１ｆは、入力された差分値が与えられた条件を満たす値か否かを判断する（ステップＳ７）。
条件を満たす値ではない場合（ステップＳ７のＮｏ）、ステップＳ１に移行し、ステップＳ１以降の処理を継続して行う。

一方、条件を満たす値である場合（ステップＳ７のＹｅｓ）、レベル判断部５１１ｆは“１”を出力する。
次に、ゲイン確認部５１２ｆは、ゲインが最大か否かを判断する（ステップＳ８）。ゲインが最大でなければ（ステップＳ８のＮｏ）、ステップＳ１に移行し、ステップＳ１以降の処理を継続して行う。

一方、ゲインが最大であれば（ステップＳ８のＹｅｓ）、ゲイン確認部５１２ｆは、“１”を出力する。
次に、ＩＲＩＳ確認部５１３ｆは、シャッタ１２は開放状態か否かを判断する（ステップＳ９）。開放状態でなければ（ステップＳ９のＮｏ）、ステップＳ１に移行し、ステップＳ１以降の処理を継続して行う。

一方、開放状態の場合（ステップＳ９のＹｅｓ）、ＩＲＩＳ確認部５１３ｆは、“１”を出力する。
ＡＮＤ回路５１４ｆは、レベル判断部５１１ｆ、ゲイン確認部５１２ｆおよびＩＲＩＳ確認部５１３ｆからいずれも“１”が出力されているため輝度切り替え信号“１”を出力する（ステップＳ１０）。

これにより、ＯＲ回路１５３は“１”を出力し、画像処理回路１５は、切り替え信号“１”を出力する。
なお、本実施の形態では、まずステップＳ７でレベル判断部５１１ｆの判断を行い、その後、ステップＳ８でゲイン確認部５１２ｆの判断を行い、最後にステップＳ９でＩＲＩＳ確認部５１３ｆの判断を行ったが、本発明では判断を行う順番は特に限定されない。

＜明度判断部の処理＞
図４は、明度判断部の処理を示すフローチャートである。
まず、明度生成部５２ａは、ＴＧ１４４のタイミング信号が入力されたか否かを判断する（ステップＳ２１）。

タイミング信号が入力されていない場合（ステップＳ２１のＮｏ）、タイミング信号の入力を待機する。
タイミング信号が入力されると（ステップＳ２１のＹｅｓ）、明度生成部５２ａは、ＣＣＤ制御部１４から入力されるデジタル信号から、明度を生成する（ステップＳ２２）。

次に、レベル判断部５２ｂは、生成された明度が与えられた条件を満たす値か否かを判断する（ステップＳ２３）。
条件を満たす値ではない場合（ステップＳ２３のＮｏ）、ステップＳ２１に移行し、ステップＳ２１以降の処理を継続して行う。

一方、条件を満たす値の場合（ステップＳ２３のＹｅｓ）、レベル判断部５２ｂは、明度切り替え信号“１”を出力する（ステップＳ２４）。
これにより、ＯＲ回路１５３は“１”を出力し、画像処理回路１５は、切り替え信号“１”を出力する。

以下、ハイブリッドカメラ１の動作を、具体例を用いて説明する。
＜Ａ：輝度による判断＞
＜Ａ−１＞
ＴＧ１４４からのタイミング信号により、輝度生成部５１ａが、固体撮像素子１３の９画素の輝度を生成した結果、輝度値“５０”，“７５”，“９０”，“１２０”，“８０”，“１８０”，“２００”，“９０”，“１６０”が生成されたとする。

このとき、平均値生成部５１ｂは、９画素の輝度値の平均値“１１６”を生成する。最大値抽出部５１ｃは、最大値“２００”を抽出する。最小値抽出部５１ｄは、最小値“５０”を抽出する。差分演算部５１ｅは、最大値と最小値の差を演算し、差分値“１５０”を取得する。

＜Ａ−２＞
ここで、レベル判断部５１１ｆは、平均値のレベルが“２０”以下で、かつ、差分値が“１０”以下のとき条件を満たす（暗い）と判断するよう予め設定されているものとする。今回入力された値の平均値は“１１６”であり、差分値は“１５０”であるため、レベル判断部５１１ｆは、条件を満たさない（明るい）と判断する。従って、レベル判断部５１１ｆは、“０”を出力する。これにより、ＡＮＤ回路５１４ｆは輝度切り替え信号“０”を出力する。

＜Ａ−３＞
一定時間の後に輝度生成部５１ａが固体撮像素子１３の９画素の輝度値を生成した結果、輝度値“１６”，“１８”，“１７”，“１６”，“２５”，“２２”，“１８”，“１７”，“１６”が生成されたとする。

このとき、平均値生成部５１ｂは、輝度値の平均値“１８”を生成する。最大値抽出部５１ｃは、最大値“２５”を抽出し、最小値抽出部５１ｄは、最小値“１６”を抽出する。差分演算部５１ｅは、差分値“９”を取得する。このため、レベル判断部５１１ｆは、条件を満たす（暗い）と判断する。

＜Ａ−４＞
ゲイン確認部５１２ｆが、ＡＧＣ処理部１４２のゲインの値を確認した結果“８”であった。

＜Ａ−５＞
ＩＲＩＳ確認部５１３ｆは、シャッタ１２が開放状態になっていなかったことを確認した。

＜Ａ−６＞
その後すぐに輝度生成部５１ａが、固体撮像素子１３の９画素の輝度値を生成した結果、輝度値“３０”，“３５”，“５５”，“８０”，“３５”，“７０”，“９０”，“８５”，“９５”が生成されたとする。このとき平均値は“６４”、差分値は“６５”であるため、レベル判断部５１１ｆは、条件を満たさない（明るい）と判断する。

＜Ａ−７＞
一定時間経過後に輝度生成部５１ａが、固体撮像素子１３の９画素の輝度値を生成した結果、輝度値“１６”，“１９”，“１８”，“１７”，“２４”，“２２”，“１７”，“１７”，“１８”が生成されたとする。このとき平均値は“１８”、差分値は“８”のため、レベル判断部５１１ｆは、条件を満たす（暗い）と判断する。

＜Ａ−８＞
ここで、ゲイン確認部５１２ｆは、ＡＧＣ処理部１４２のゲインの値が最大値“１０”であることを確認した。また、ＩＲＩＳ確認部５１３ｆは、シャッタ１２が開放状態になっていたのを確認した。

＜Ａ−９＞
レベル判断部５１１ｆが条件を満たしたと判断し、ゲイン確認部５１２ｆが、ゲインが最大であると確認し、ＩＲＩＳ確認部５１３ｆが、シャッタ１２が開放状態になっていたのを確認した。この３つの条件が成り立っているため、画像処理回路１５は、輝度切り替え信号“１”を出力する。

＜Ａ−１０＞
これにより、切り替え信号“１”が、画像切り替え部６に入力され、画像切り替え部６は、ハイブリッドカメラ１としての出力画像を、可視光カメラ４の画像から遠赤外線カメラ３の画像に切り替える。

＜Ｂ：明度による判断＞
＜Ｂ−１＞
ＴＧ１４４からのタイミング信号により、明度生成部５２ａが、固体撮像素子１３の９画素の明度値（赤色，緑色，青色）を生成した結果、明度値（２００，２０５，２１０），（２２０，２０５，２１０），（１００，２０５，５０），（８０，２０，２１０），（１００，９０，２１０），（１９０，１００，５０），（８０，７５，１００），（１２０，１４０，８０），（２０，５０，２４０）が生成されたものとする。

このとき、「赤色−“３”＜緑色＜赤色＋“３”」、「緑色−“３”＜青色＜緑色＋“３”」、かつ、「青色−“３”＜赤色＜青色＋“３”」を満たす画素は一個もないため、レベル判断部５２ｂは、明度切り替え信号“０”を出力する。

＜Ｂ−２＞
一定時間後、明度生成部５２ａが固体撮像素子１３の９画素の明度値を生成した結果、明度値（２２０，２２２，２２１)，（２１１，２１２，２１３），（２２１，２２０，２２２），（２２２，２２０，２２１），（２１２，２１１，２１０），（１９０，１９１，１９２），（２２２，２２３，２２４），（２１５，２１４，２１６），（２２６，２２８，２００）を生成されたものとする。「赤色−“３”＜緑色＜赤色+“３”」、「緑色−“３”＜青色＜緑色+“３”」、かつ、「青色−“３”＜赤色＜青色+“３”」を満たす画素は、最後の画素（２２６，２２８，２００）以外の８個であった。９個のうち８個（約８９％）が上記条件を満たしていた。このため明度切り替え信号“１”を出力する。

＜Ｂ−３＞
これにより、切り替え信号“１”が、画像切り替え部６に入力され、画像切り替え部６は、ハイブリッドカメラ１としての出力画像を、可視光カメラ４の画像から遠赤外線カメラ３の画像に切り替える。

以上説明したように、本実施の形態の撮像システムによれば、輝度による判断に加えて明度による判断もするようにしたので、たとえ昼間であっても霧や粉塵の発生により、画面全体が白色や灰色にしか見えない場合には、自動的に遠赤外線カメラ３に切り替わるため、容易に視認性のよい画像を表示させることがきる。

なお、本実施の形態では、可視光カメラ４の画像から遠赤外線カメラ３の画像に切り替える場合について説明したが、逆の場合も同様にして切り替えることができる。すなわち、切り替え信号“０”が、画像切り替え部６に入力されると、画像切り替え部６は、ハイブリッドカメラ１としての出力画像を、遠赤外線カメラ３の画像から可視光カメラ４の画像に切り替える。

また、本実施の形態では、ハイブリッドカメラ１で切り替え信号を生成し、サーバ２にいずれか一方の画像を送信するようにしたが、本発明はこれに限らず、サーバ２が遠赤外線カメラ３および可視光カメラ４の画像を受け取った後にサーバ２側で切り替えを行うようにしてもよい。

以上、本発明の撮像装置および撮像装置の切り替え方法を、図示の実施の形態に基づいて説明したが、本発明はこれに限定されるものではなく、各部の構成は、同様の機能を有する任意の構成のものに置換することができる。また、本発明に、他の任意の構成物や工程が付加されていてもよい。

また、本発明は、前述した実施の形態のうちの、任意の２以上の構成（特徴）を組み合わせたものであってもよい。

実施の形態に係るハイブリッドカメラの構成について概略的に示す図である。可視光カメラの構成を示すブロック図である。輝度判断部の処理を示すフローチャートである。明度判断部の処理を示すフローチャートである。

符号の説明

１ハイブリッドカメラ、２サーバ、３遠赤外線カメラ、４可視光カメラ、５画像処理回路、６画像切り替え部、７同期信号生成部、１１レンズ、１２シャッタ、１３固体撮像素子、１４ＣＣＤ制御部、１５画像処理回路、１５１輝度判断部、１５２明度判断部

Claims

被写体の状況に応じた画像を外部に出力する撮像装置において、
遠赤外線領域の電磁波を検出する遠赤外線カメラと、
可視光を検出し、検出した可視光の輝度に応じて前記状況を判断する輝度判断部と、検出した可視光の明度に応じて前記状況を判断する明度判断部とを有する可視光カメラと、
前記輝度判断部の判断と前記明度判断部の判断とに基づいて、前記遠赤外線カメラが出力する画像と前記可視光カメラが出力する画像とを切り替える切り替え部と、
を有し、
前記明度判断部は、前記明度に応じて前記状況が霧または粉塵の状況であると判断できるよう構成されており、
前記切り替え部は、前記明度判断部が、前記状況が霧または粉塵の状況であると判断したとき、前記遠赤外線カメラが出力する画像に切り替える撮像装置。
前記明度判断部は、前記可視光カメラの撮像素子の画素における赤色、緑色、青色の明度がそれぞれ略等しいとき、霧または粉塵の明度であると判断する請求項１記載の撮像装置。
遠赤外線領域の電磁波を検出する遠赤外線カメラと、可視光を検出する可視光カメラとを備える撮像装置の切り替え方法において、
輝度判断部が、前記可視光カメラが検出した可視光の輝度に応じて被写体の状況を判断し、
明度判断部が、前記可視光カメラが検出した可視光の明度に応じて被写体の状況を判断し、
前記輝度判断部の判断と前記明度判断部の判断とに基づいて、前記遠赤外線カメラが出力する画像と前記可視光カメラが出力する画像とを切り替え、
明度に応じて前記状況が霧または粉塵の状況であると判断したとき、前記遠赤外線カメラが出力する画像に切り替える撮像装置の切り替え方法。