JP2012005054A - 低照度対応カメラ - Google Patents
低照度対応カメラ Download PDFInfo
- Publication number
- JP2012005054A JP2012005054A JP2010140696A JP2010140696A JP2012005054A JP 2012005054 A JP2012005054 A JP 2012005054A JP 2010140696 A JP2010140696 A JP 2010140696A JP 2010140696 A JP2010140696 A JP 2010140696A JP 2012005054 A JP2012005054 A JP 2012005054A
- Authority
- JP
- Japan
- Prior art keywords
- light
- image data
- light emitting
- emission intensity
- illumination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Studio Devices (AREA)
Abstract
【課題】低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所について、低い消費電力で高い視認性を得ることを課題とする。
【解決手段】広角ＬＥＤ７Ａと狭角ＬＥＤ７Ｂによる照明下でそれぞれ被写体からの反射光を広角レンズ２で受光センサ９へ集光し、受光センサにより得られる受光強度データを所定のフレーム周期で取得してフレーム画像データＤ１，Ｄ２，・・・を生成し、そのフレーム画像データに基づいて動画像データを作成する際、制御部１０は、上記フレーム周期に同期させて、広角ＬＥＤと狭角ＬＥＤとを交互にＯＮ／ＯＦＦ制御し、各ＬＥＤそれぞれの照明下で得られるフレーム画像データを用いて１つの動画像データを作成する。
【選択図】図６
【解決手段】広角ＬＥＤ７Ａと狭角ＬＥＤ７Ｂによる照明下でそれぞれ被写体からの反射光を広角レンズ２で受光センサ９へ集光し、受光センサにより得られる受光強度データを所定のフレーム周期で取得してフレーム画像データＤ１，Ｄ２，・・・を生成し、そのフレーム画像データに基づいて動画像データを作成する際、制御部１０は、上記フレーム周期に同期させて、広角ＬＥＤと狭角ＬＥＤとを交互にＯＮ／ＯＦＦ制御し、各ＬＥＤそれぞれの照明下で得られるフレーム画像データを用いて１つの動画像データを作成する。
【選択図】図６
Description
本発明は、比較的暗い撮像箇所の撮影に適した低照度対応カメラに関するものである。
近年、タクシーなどでは車内監視のための小型カメラ（車内監視カメラ）が搭載されている。これは、車内で発生した乗客とのトラブルの状況把握に役立つだけでなく、抑止になる点でも有用だからである。このようなトラブルは昼間だけでなく深夜に発生することも多いため、車内監視カメラには、室内灯が点灯していない暗闇の中でも映像を取得できることが要求される。そのため、車内監視カメラとしては、低照度対応の受光素子（センサ）を搭載したカメラや、照明機能付きのカメラなどが用いられる。その中でも、低照度対応のセンサを搭載した車内監視カメラは比較的高価であるため、照明機能付きの車内監視カメラの方が普及している。照明機能付きの車内監視カメラは、一般に、ＬＥＤ等の発光手段を用いて被写体を照明し、その被写体からの反射光をセンサ（受光手段）で受光し、これにより得られる受光強度データを所定のフレーム周期（フレームレート）で取得してフレーム画像データを生成し、そのフレーム画像データに基づいて動画像データを作成する。
車内監視カメラは、一般に、運転席前の上部に配置されたルームミラー付近に設置されることが多い。車内監視カメラでは、カメラから数十ｃｍ程度の距離にある運転席だけでなく、助手席の様子、さらに運転席や助手席のドア（車体前部ドア）からの不法侵入等に対する防犯対応も考えれば車体前部ドア付近の様子までも、撮像できることが望まれる。そのため、車内監視カメラには、この撮像を可能にするほどの広画角性が望まれる。一方で、車内監視カメラとして照明機能付きのものを用いる場合、運転者の視認性に与える影響等を考慮すると、その照明に可視光を用いることには大きな制限がある。そのため、その照明としては、センサの受光感度のある帯域のうち可視光外の波長帯域（例えば赤外波長帯域）で発光する光源（赤外ＬＥＤ等）を用いるものが多い。しかしながら、広画角性が望まれる車内監視カメラの撮像範囲に含まれる広い領域を照明できるほどの高パワータイプの赤外ＬＥＤ等の可視光外波長の光源は、用途が限られているので高価であり、照明機器として蛍光灯に置き換わってきている可視光ＬＥＤ等の可視光の光源とは違って安価に入手することが困難である。そのため、広画角性が望まれる照明機能付きの車内監視カメラを安価に提供するためには、その光源として、安価な低パワータイプの可視光外波長の光源を高パワータイプのものよりも多く搭載して広い領域を照明できるようにする構成が提案されている。
車内監視カメラは、自動車のバッテリー等を用いたバッテリー駆動であるため、その電力消費量をむやみに増やすことはできない。そのため、照明に用いる光源の発光量を照明に必要な最小限の量に抑えることが重要となる。しかしながら、電力消費量を抑えるために、車載監視カメラに近い運転席や助手席の様子を認識するために必要な最小限の光量で照明すると、後部座席（座席が３列以上ある自動車については２列目以降の座席）の様子を撮像するには光量が不足する。そのため、後部座席の様子を認識できるほどの画像が得られず、後部座席についての視認性が悪いという問題が生じる。また、運転席や助手席であっても比較的暗い手元や足元等の暗部箇所では光量不足となり、そのような箇所も視認性が悪いという問題が生じる。
ここで、後部座席や暗部箇所などの視認性を高めるために、センサの感度（増幅率）を高めることも考えられるが、この場合にはセンサ出力に含まれるノイズが増大してしまい、かえって視認性を悪化させることになり得る。よって、後部座席や暗部箇所の視認性を高める場合には、照明の発光強度を高める方が好ましい。しかしながら、後部座席の様子や暗部箇所の様子を認識できるほどの光量で撮像可能範囲全体を照明することは、電力消費量を増大させるため、バッテリー駆動である車内監視カメラではその実現が難しい。
上述した問題は、照明機能付きの車内監視カメラに限ったものではなく、低照度環境下において、照明機能付きのカメラにより、比較的遠い箇所の被写体あるいは比較的暗い箇所などのように強い発光強度の照明下において高い視認性が得られる撮像箇所について、低い消費電力で高い視認性を得ようとする場合には、その用途あるいは使用場所などに制限されず、同様に生じ得る問題である。
本発明は、以上の問題に鑑みなされたものであり、その目的とするところは、低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所について、低い消費電力で高い視認性を得ることができる低照度対応カメラを提供することである。
上記目的を達成するために、請求項１の発明は、発光手段と、該発光手段の発光波長帯域の少なくとも一部について受光感度を持つ受光手段と、該発光手段による照明下で被写体からの反射光を該受光手段へ集光する集光手段と、該受光手段により得られる受光強度データを所定のフレーム周期で取得してフレーム画像データを生成し、該フレーム画像データに基づいて動画像データを作成する動画像データ作成手段とを有する低照度対応カメラにおいて、上記発光手段は、出射角が広くかつ出射強度が弱い第１発光部と出射角が狭くかつ出射強度が強い第２発光部とを含んだ複数の発光部を有しており、上記フレーム周期に同期させて、上記複数の発光部の中で発光強度が最大となる発光部が順次切り替わるように、各発光部の発光強度を制御する発光強度制御手段を設け、上記動画像データ作成手段は、上記複数の発光部のうちの少なくとも２つの発光部が該複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成することを特徴とするものである。
また、請求項２の発明は、請求項１の低照度対応カメラにおいて、上記第１発光部の出射角は１２０度であり、上記第２発光部の出射角は４０度であることを特徴とするものである。
また、請求項３の発明は、発光手段と、該発光手段の発光波長帯域の少なくとも一部について受光感度を持つ受光手段と、該発光手段による照明下で被写体からの反射光を該受光手段へ集光する集光手段と、該受光手段により得られる受光強度データを所定のフレーム周期で取得してフレーム画像データを生成し、該フレーム画像データに基づいて動画像データを作成する動画像データ作成手段とを有する低照度対応カメラにおいて、上記発光手段は、撮像可能範囲内の互いに異なる箇所に向けて光を照射する複数の発光部を有しており、上記フレーム周期に同期させて、上記複数の発光部の中で発光強度が最大となる発光部が順次切り替わるように、各発光部の発光強度を制御する発光強度制御手段を設け、上記動画像データ作成手段は、上記複数の発光部のうちの少なくとも２つの発光部が該複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成することを特徴とするものである。
また、請求項４の発明は、請求項３の低照度対応カメラにおいて、上記複数の発光部は、非対称の発光強度分布を有する非対称分布発光部を含んでおり、強い発光強度による照明下で高い視認性が得られる強発光強度被写体を強い発光強度で照明し、弱い発光強度による照明下で高い視認性が得られる弱発光強度被写体を弱い発光強度で照明するように、該非対称分布発光部の発光強度分布を設定したことを特徴とするものである。
また、請求項５の発明は、請求項１乃至４のいずれか１項に記載の低照度対応カメラにおいて、上記動画像データ作成手段は、少なくとも一部の撮像可能範囲について、上記少なくとも２つの発光部が上記複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られる同一撮像箇所についての複数の受光強度データを合成して該同一撮像箇所についての１つの受光強度データを生成し、これにより生成した受光強度データを用いて上記動画像データを作成することを特徴とするものである。
また、請求項６の発明は、請求項１乃至６のいずれか１項に記載の低照度対応カメラにおいて、上記動画像データ作成手段は、撮像可能範囲を分割して得られる複数の撮像箇所について、それぞれ、上記少なくとも２つの発光部のうち高い視認性が得られる発光部による照明下で得られる受光強度データを用いて上記動画像データを作成することを特徴とするものである。
また、請求項７の発明は、請求項６の低照度対応カメラにおいて、複数のフレーム画像データそれぞれを格納可能な複数のメモリ領域を有するフレームメモリを有し、上記動画像データ作成手段は、上記少なくとも２つの発光部による照明下でそれぞれ得られる受光強度データのうち最初に得られた受光強度データから生成したフレーム画像データが格納されているメモリ領域に対し、上記複数の撮像箇所に対応するメモリ部分のデータを、高い視認性が得られる他の発光部による照明下で得られる受光強度データから生成したフレーム画像データのものに置き換える処理を行うことを特徴とするものである。
また、請求項８の発明は、請求項１乃至７のいずれか１項に記載の低照度対応カメラにおいて、上記発光手段は、発光波長帯域として赤外波長帯域を有するものであることを特徴とするものである。
また、請求項２の発明は、請求項１の低照度対応カメラにおいて、上記第１発光部の出射角は１２０度であり、上記第２発光部の出射角は４０度であることを特徴とするものである。
また、請求項３の発明は、発光手段と、該発光手段の発光波長帯域の少なくとも一部について受光感度を持つ受光手段と、該発光手段による照明下で被写体からの反射光を該受光手段へ集光する集光手段と、該受光手段により得られる受光強度データを所定のフレーム周期で取得してフレーム画像データを生成し、該フレーム画像データに基づいて動画像データを作成する動画像データ作成手段とを有する低照度対応カメラにおいて、上記発光手段は、撮像可能範囲内の互いに異なる箇所に向けて光を照射する複数の発光部を有しており、上記フレーム周期に同期させて、上記複数の発光部の中で発光強度が最大となる発光部が順次切り替わるように、各発光部の発光強度を制御する発光強度制御手段を設け、上記動画像データ作成手段は、上記複数の発光部のうちの少なくとも２つの発光部が該複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成することを特徴とするものである。
また、請求項４の発明は、請求項３の低照度対応カメラにおいて、上記複数の発光部は、非対称の発光強度分布を有する非対称分布発光部を含んでおり、強い発光強度による照明下で高い視認性が得られる強発光強度被写体を強い発光強度で照明し、弱い発光強度による照明下で高い視認性が得られる弱発光強度被写体を弱い発光強度で照明するように、該非対称分布発光部の発光強度分布を設定したことを特徴とするものである。
また、請求項５の発明は、請求項１乃至４のいずれか１項に記載の低照度対応カメラにおいて、上記動画像データ作成手段は、少なくとも一部の撮像可能範囲について、上記少なくとも２つの発光部が上記複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られる同一撮像箇所についての複数の受光強度データを合成して該同一撮像箇所についての１つの受光強度データを生成し、これにより生成した受光強度データを用いて上記動画像データを作成することを特徴とするものである。
また、請求項６の発明は、請求項１乃至６のいずれか１項に記載の低照度対応カメラにおいて、上記動画像データ作成手段は、撮像可能範囲を分割して得られる複数の撮像箇所について、それぞれ、上記少なくとも２つの発光部のうち高い視認性が得られる発光部による照明下で得られる受光強度データを用いて上記動画像データを作成することを特徴とするものである。
また、請求項７の発明は、請求項６の低照度対応カメラにおいて、複数のフレーム画像データそれぞれを格納可能な複数のメモリ領域を有するフレームメモリを有し、上記動画像データ作成手段は、上記少なくとも２つの発光部による照明下でそれぞれ得られる受光強度データのうち最初に得られた受光強度データから生成したフレーム画像データが格納されているメモリ領域に対し、上記複数の撮像箇所に対応するメモリ部分のデータを、高い視認性が得られる他の発光部による照明下で得られる受光強度データから生成したフレーム画像データのものに置き換える処理を行うことを特徴とするものである。
また、請求項８の発明は、請求項１乃至７のいずれか１項に記載の低照度対応カメラにおいて、上記発光手段は、発光波長帯域として赤外波長帯域を有するものであることを特徴とするものである。
請求項１に係る発明においては、第１発光部による照明下で、カメラから近い近距離被写体について広い範囲で視認性の高い画像を得ることができる。一方、第２発光部による照明下では、狭い範囲で、カメラから遠い遠距離被写体や暗部箇所に存在する暗部被写体について視認性の高い画像を得ることができる。これにより、請求項１に係る発明によれば、第１発光部によって近距離被写体について広い範囲で高い視認性を確保するとともに、所定の狭い範囲に存在する遠距離被写体や暗部被写体については第２発光部によって高い視認性を確保することができる。しかも、請求項１に係る発明においては、複数の発光部の中で発光強度が最大となる発光部が順次変更されるので、第２発光部を当該発光強度で常時発光させる場合よりも、少ない消費電力で、遠距離被写体や暗部被写体について同等の視認性をもつ動画像データを得ることができる。
ここで、出射強度の強い第２発光部の出射角を出射強度の弱い第１発光部と同等の出射角とすると、消費電力を増大させるばかりか、次のように電力を無駄に消費させることにもなる。すなわち、第２発光部の出射角を第１発光部のものと同等に広げると、カメラから近い近距離被写体に強い光が当たり、近距離被写体にいわゆる白飛び（明るすぎてセンサの受光感度上限を超え真っ白くなる状態）が発生するおそれがある。このように近距離被写体に白飛びを発生させるほどの強い光は、その近距離被写体の視認性を向上させる効果がないので、無駄となる。
請求項１に係る発明では、第２発光部の出射角が狭く、その照明範囲が狭い範囲に制限されるため、近距離被写体に白飛びを発生させる無駄な電力消費を抑えることができる。特に、カメラから遠い遠距離被写体と第２発光部との間に近距離被写体が存在しないように設定すれば、近距離被写体に白飛びを発生させることないので、無駄な電力消費の削減効果が高い。
ここで、出射強度の強い第２発光部の出射角を出射強度の弱い第１発光部と同等の出射角とすると、消費電力を増大させるばかりか、次のように電力を無駄に消費させることにもなる。すなわち、第２発光部の出射角を第１発光部のものと同等に広げると、カメラから近い近距離被写体に強い光が当たり、近距離被写体にいわゆる白飛び（明るすぎてセンサの受光感度上限を超え真っ白くなる状態）が発生するおそれがある。このように近距離被写体に白飛びを発生させるほどの強い光は、その近距離被写体の視認性を向上させる効果がないので、無駄となる。
請求項１に係る発明では、第２発光部の出射角が狭く、その照明範囲が狭い範囲に制限されるため、近距離被写体に白飛びを発生させる無駄な電力消費を抑えることができる。特に、カメラから遠い遠距離被写体と第２発光部との間に近距離被写体が存在しないように設定すれば、近距離被写体に白飛びを発生させることないので、無駄な電力消費の削減効果が高い。
請求項３に係る発明においては、撮像可能範囲内の互いに異なる撮像箇所に向けて光を照射する複数の発光部の中で、発光強度が最大となる発光部をフレームごとに順次変更する。これにより、撮像可能範囲内の互いに異なる複数の撮像箇所を、遠距離被写体や暗部被写体について高い視認性が得られる比較的強い発光強度で、順次照明することができる。その結果、撮像可能範囲の全体を遠距離被写体や暗部被写体について高い視認性が得られる比較的強い発光強度で常時照明する場合よりも、少ない消費電力で、遠距離被写体や暗部被写体について高い視認性をもつ動画像データを得ることができる。
請求項１及び３の発明において、上述した複数の発光部のうちの少なくとも２つの発光部が最大発光強度で発光する照明下でそれぞれ得られる２以上のフレーム画像データを用いて、動画像データに用いる１つのフレーム画像データを作成する場合、その動画像データのフレームレートは、受光手段により得られる受光強度データを取得する上記所定のフレーム周期のフレームレートよりも落ちることになる。この場合でも、映像のなめらかさは落ちるものの、遠距離被写体や暗部被写体についての視認性が落ちるわけではない。
なお、特許文献１には、レンズから入射する被写体の光学像を２方向に分光する分光光学系と、２方向に分光された光学像のそれぞれを電気信号に変換する２個の固体撮像素子と、同２個の固体撮像素子を１フレーム期間ごとに１／２フレームに相当する時間以内で、かつ相互に重複しない間隔で順次露光制御する電子シャッタ制御手段と、同電子シャッタ制御手段の順次露光制御に同期して発光用同期信号を出力する発光用同期信号出力手段とを備えたカラーカメラと、同カラーカメラの上記発光用同期信号を受け上記固体撮像素子の露光制御に同期して波長帯域の異なる複数色の光を順次切り替えて発光する照明装置が開示されている。この照明装置は、固体撮像素子の露光制御に同期して、波長帯域の異なる複数色の光を順次切り替えて発光させるが、その出射強度やその照明箇所はいずれも同じものである。したがって、この照明装置を用いても、強い発光強度の照明下で高い視認性が得られる撮像箇所について低い消費電力で高い視認性を得ることはできない。
以上、本発明によれば、低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所について、低い消費電力で高い視認性を得ることができるという優れた効果が得られる。
〔実施形態１〕
以下、本発明を、低照度対応カメラである車内監視カメラに適用した一実施形態（以下、本実施形態を「実施形態１」という。）について説明する。
本実施形態１に係る車内監視カメラは、タクシー等の車両に搭載して車内の様子を撮像した動画像を得るものであり、以下のような特徴を有する。
すなわち、従来の車内監視カメラは、夜間などに室内灯を点灯していない暗闇の車内を一定光量で照明するものであったので、一般に、消費電力を抑制するために比較的弱い発光強度で照明する。そのため、運転席や助手席などのカメラに近い撮像箇所では視認性が得られるものの、後部座席などのカメラから遠い撮像箇所については十分な視認性が得られない場合がある。一方、カメラから遠い撮像箇所の視認性を得るために強い発光強度で照明すると、消費電力量が増大するだけでなく、カメラに近い撮像箇所に白飛びが発生して視認性が悪化するという問題が出る。本実施形態１に係る車内監視カメラは、出射角が広くかつ出射強度が弱い照明と第１発光部と出射角が狭くかつ出射強度が強い第２発光部とを交互に発光させて、各発光部それぞれの照明下で得た受光強度データを用いて有効な視認性が得られる撮像箇所を切り貼りし、これにより得られるフレーム画像を用いて遠近両方の視認性が高い動画像データを作成するようにしている。
以下、本発明を、低照度対応カメラである車内監視カメラに適用した一実施形態（以下、本実施形態を「実施形態１」という。）について説明する。
本実施形態１に係る車内監視カメラは、タクシー等の車両に搭載して車内の様子を撮像した動画像を得るものであり、以下のような特徴を有する。
すなわち、従来の車内監視カメラは、夜間などに室内灯を点灯していない暗闇の車内を一定光量で照明するものであったので、一般に、消費電力を抑制するために比較的弱い発光強度で照明する。そのため、運転席や助手席などのカメラに近い撮像箇所では視認性が得られるものの、後部座席などのカメラから遠い撮像箇所については十分な視認性が得られない場合がある。一方、カメラから遠い撮像箇所の視認性を得るために強い発光強度で照明すると、消費電力量が増大するだけでなく、カメラに近い撮像箇所に白飛びが発生して視認性が悪化するという問題が出る。本実施形態１に係る車内監視カメラは、出射角が広くかつ出射強度が弱い照明と第１発光部と出射角が狭くかつ出射強度が強い第２発光部とを交互に発光させて、各発光部それぞれの照明下で得た受光強度データを用いて有効な視認性が得られる撮像箇所を切り貼りし、これにより得られるフレーム画像を用いて遠近両方の視認性が高い動画像データを作成するようにしている。
図１は、本実施形態１における車内監視カメラの概要を示す正面図である。
図２は、本実施形態１における車内監視カメラの概要を示す平面図である。
本車内監視カメラ１は、広角レンズ２、カメラユニット３、カメラケーブル４、照明ユニット５Ａ，５Ｂ、照明ケーブル６Ａ，６Ｂ、ユニット間ケーブル８などを備えている。広角レンズ２は、車内監視カメラに要求される広画角性が得られるように、９０度以上１８０度以下の範囲内、好ましくは約１３５度程度の画角のものを用いる。カメラケーブル４は、電源ラインと映像ラインを複合した電線である。照明ケーブル６Ａ，６Ｂは、ＬＥＤ７Ａ，７Ｂの電源ラインの電線である。ユニット間ケーブル８は、カメラユニット３と照明ユニット５Ａ，５Ｂのタイミング信号（同期信号）を伝達するためのケーブルで、本車内監視カメラ１の筐体内部で接続されている。このタイミング信号は、カメラケーブル４と照明ケーブル６Ａ，６Ｂを経由して外部で接続される構成でも構わない。
図２は、本実施形態１における車内監視カメラの概要を示す平面図である。
本車内監視カメラ１は、広角レンズ２、カメラユニット３、カメラケーブル４、照明ユニット５Ａ，５Ｂ、照明ケーブル６Ａ，６Ｂ、ユニット間ケーブル８などを備えている。広角レンズ２は、車内監視カメラに要求される広画角性が得られるように、９０度以上１８０度以下の範囲内、好ましくは約１３５度程度の画角のものを用いる。カメラケーブル４は、電源ラインと映像ラインを複合した電線である。照明ケーブル６Ａ，６Ｂは、ＬＥＤ７Ａ，７Ｂの電源ラインの電線である。ユニット間ケーブル８は、カメラユニット３と照明ユニット５Ａ，５Ｂのタイミング信号（同期信号）を伝達するためのケーブルで、本車内監視カメラ１の筐体内部で接続されている。このタイミング信号は、カメラケーブル４と照明ケーブル６Ａ，６Ｂを経由して外部で接続される構成でも構わない。
発光手段としての照明ユニット５Ａ，５Ｂは、広角レンズ２の近傍に配置され、本実施形態１では可視光外の波長帯を持つ光源を用いるのが好ましい。本実施形態１では、その光源として赤外波長帯の発光ダイオード（ＬＥＤ）７Ａ，７Ｂを用いる。発光部であるＬＥＤ７Ａ，７Ｂは、そのＬＥＤ素子の光出射面に出射レンズが配置されたものであり、所望の出射角の範囲で光を放射状に照射するように構成されている。
図３（ａ）〜（ｃ）は、ＬＥＤ７Ａ，７Ｂからの出射光の照射距離とその出射角を説明するための説明図である。
本実施形態１のＬＥＤ７Ａ，７Ｂを用いるＬＥＤ素子は、いずれも同じ発光強度をもつものであるが、出射レンズが異なっている。そのため、出射角が広い出射レンズが用いられる広角ＬＥＤ７Ａは、図３（ａ）に示すように、その出射強度が低く照射距離が短いものとなる。一方、出射角が狭い出射レンズが用いられる狭角ＬＥＤ７Ｂは、図３（ｂ）に示すように、その出射強度が高く照射距離が長いものである。本実施形態においては、広角ＬＥＤ７Ａを運転席や助手席等の近距離被写体を照らす用途に使用し、狭角ＬＥＤ７Ｂを後部座席等の遠距離被写体を照らす用途に使用する。なお、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの配置は、互いに近い位置に配置していれば、本実施形態１のものに限定されることはない。
本実施形態１のＬＥＤ７Ａ，７Ｂを用いるＬＥＤ素子は、いずれも同じ発光強度をもつものであるが、出射レンズが異なっている。そのため、出射角が広い出射レンズが用いられる広角ＬＥＤ７Ａは、図３（ａ）に示すように、その出射強度が低く照射距離が短いものとなる。一方、出射角が狭い出射レンズが用いられる狭角ＬＥＤ７Ｂは、図３（ｂ）に示すように、その出射強度が高く照射距離が長いものである。本実施形態においては、広角ＬＥＤ７Ａを運転席や助手席等の近距離被写体を照らす用途に使用し、狭角ＬＥＤ７Ｂを後部座席等の遠距離被写体を照らす用途に使用する。なお、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの配置は、互いに近い位置に配置していれば、本実施形態１のものに限定されることはない。
図３（ｃ）は、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂを同時に発光させた場合の照明領域を説明したものである。この場合、両者の照明領域が重複している近距離中央部分（運転席と助手席の間付近）が極端に明るくなり、無駄となる。また、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂを同時に発光させる場合には、いずれか一方を発光させる場合と比較して、消費電力は２倍にまで増大する。そのため、本実施形態では、後述するように、フレーム周期に同期させて、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂを交互に強弱させるようにしている。
なお、ＬＥＤ７Ａ，７Ｂは、広角レンズ２の入射範囲に照明光が直接入り込まないように構成する必要がある。本実施形態１では、ＬＥＤ７Ａ，７Ｂを６個搭載した例について説明するが、本車内監視カメラ１の設置環境などに応じ、発光強度が強すぎるようであれば数を減らし、弱すぎるようであれば数を増やすようにする。
図４は、本車内監視カメラ１が搭載される車両が２列シートの自動車である場合の照明ユニット５Ａ，５Ｂによる照明領域を示す説明図である。
なお、図４において、符号Ａ〜Ｄは乗員を示しており、セダンタイプの自動車の例である。なお、実際の乗員位置は車両によって多少の違いはある。
本実施形態における照明ユニット５Ａ，５Ｂの照明範囲は、図４に示すように、おおよそ、ｘ＝５０ｃｍ、ｄ１＝３０ｃｍ、ｄ２＝１５０ｃｍである。この場合における広角ＬＥＤ７Ａの出射角を計算すると、２×arctan（５０／３０）≒１１８度であり、おおよそ１２０度である。一方、狭角ＬＥＤ７Ｂの出射角を計算すると、２×arctan（５０／１５０）≒３７度であり、おおよそ４０度である。車両のサイズやシート構成によって各ＬＥＤ７Ａ，７Ｂの最適な出射角は異なってくるが、概ね、この程度の出射角をもつＬＥＤを組み合わせれば、広角ＬＥＤ７Ａによって運転席や助手席を十分に照明でき、狭角ＬＥＤ７Ｂによって後部座席を十分に照明できる。
なお、図４において、符号Ａ〜Ｄは乗員を示しており、セダンタイプの自動車の例である。なお、実際の乗員位置は車両によって多少の違いはある。
本実施形態における照明ユニット５Ａ，５Ｂの照明範囲は、図４に示すように、おおよそ、ｘ＝５０ｃｍ、ｄ１＝３０ｃｍ、ｄ２＝１５０ｃｍである。この場合における広角ＬＥＤ７Ａの出射角を計算すると、２×arctan（５０／３０）≒１１８度であり、おおよそ１２０度である。一方、狭角ＬＥＤ７Ｂの出射角を計算すると、２×arctan（５０／１５０）≒３７度であり、おおよそ４０度である。車両のサイズやシート構成によって各ＬＥＤ７Ａ，７Ｂの最適な出射角は異なってくるが、概ね、この程度の出射角をもつＬＥＤを組み合わせれば、広角ＬＥＤ７Ａによって運転席や助手席を十分に照明でき、狭角ＬＥＤ７Ｂによって後部座席を十分に照明できる。
図５は、本車内監視カメラ１が搭載される車両が３列シートの自動車である例における照明領域を示す説明図である。
この例における照明範囲は、図５に示すように、おおよそ、ｘ＝５０ｃｍ、ｄ１＝３０ｃｍ、ｄ２＝１００ｃｍ、ｄ３＝１７０ｃｍである。この場合において、運転席や助手席などの近距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／３０）≒１１８度であり、おおよそ１２０度である。また、２列目の座席などの中距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／１００）≒５３度であり、おおよそ５５度である。また、３列目の座席などの遠距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／１７０）≒３３度であり、おおよそ３５度である。
この例における照明範囲は、図５に示すように、おおよそ、ｘ＝５０ｃｍ、ｄ１＝３０ｃｍ、ｄ２＝１００ｃｍ、ｄ３＝１７０ｃｍである。この場合において、運転席や助手席などの近距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／３０）≒１１８度であり、おおよそ１２０度である。また、２列目の座席などの中距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／１００）≒５３度であり、おおよそ５５度である。また、３列目の座席などの遠距離被写体用のＬＥＤの出射角を計算すると、２×arctan（５０／１７０）≒３３度であり、おおよそ３５度である。
図６は、照明ユニット５Ａ，５Ｂ及びカメラユニット３を示す機能ブロック図である。
カメラユニット３は、ＬＥＤ７Ａ，７Ｂによる照明下での被写体からの反射光は、集光手段としての広角レンズ２で集光され、受光手段としての受光センサ９の受光面に導かれる。広角レンズ２は、例えばガラスやプラスチックなどの材料を組み合わせた４郡６枚などで構成される複数のレンズから構成される。受光センサ９は、ＣＣＤやＣＭＯＳなどで構成されるものが知られているが、一般に、ＣＣＤの方が低照度の感度が高いので好適に利用できる。ただし、ＣＭＯＳも高感度化が盛んに進められているので、ＣＭＯＳを利用してもよい。受光センサ９の解像度は、本実施形態１では車内監視向けの用途であるため、例えば、ＶＧＡ（６４０×４８０ドット）程度に設定され、フレームレートは３０ｆｐｓ（ｆｒａｍｅ ｐｅｒ Ｓｅｃｏｎｄ）以下とする。本実施形態１のような低照度対応カメラにおいては、弱い光に対応するために例えば露光時間を長くすることがあり、この場合にはフレームレートが落ちる傾向にある。また、受光センサ９の機能、若しくは、この受光センサ９の制御デバイスの機能として、暗い箇所を明るくし、明るすぎる箇所を暗くして、動画像を見やすくする輝度補正処理を行うものが知られている。これは、動画像の平均輝度を一定に保つように輝度レベルの増幅率を変更するものであり、多くの場合、複数のフレームにまたがって平均輝度を算出して徐々に補正する。
カメラユニット３は、ＬＥＤ７Ａ，７Ｂによる照明下での被写体からの反射光は、集光手段としての広角レンズ２で集光され、受光手段としての受光センサ９の受光面に導かれる。広角レンズ２は、例えばガラスやプラスチックなどの材料を組み合わせた４郡６枚などで構成される複数のレンズから構成される。受光センサ９は、ＣＣＤやＣＭＯＳなどで構成されるものが知られているが、一般に、ＣＣＤの方が低照度の感度が高いので好適に利用できる。ただし、ＣＭＯＳも高感度化が盛んに進められているので、ＣＭＯＳを利用してもよい。受光センサ９の解像度は、本実施形態１では車内監視向けの用途であるため、例えば、ＶＧＡ（６４０×４８０ドット）程度に設定され、フレームレートは３０ｆｐｓ（ｆｒａｍｅ ｐｅｒ Ｓｅｃｏｎｄ）以下とする。本実施形態１のような低照度対応カメラにおいては、弱い光に対応するために例えば露光時間を長くすることがあり、この場合にはフレームレートが落ちる傾向にある。また、受光センサ９の機能、若しくは、この受光センサ９の制御デバイスの機能として、暗い箇所を明るくし、明るすぎる箇所を暗くして、動画像を見やすくする輝度補正処理を行うものが知られている。これは、動画像の平均輝度を一定に保つように輝度レベルの増幅率を変更するものであり、多くの場合、複数のフレームにまたがって平均輝度を算出して徐々に補正する。
動画像データ作成手段としての制御部１０は、受光センサ９の出力データ（受光強度データ）を順次取り込み、ＮＴＳＣなどの標準的な映像信号伝達形式に変換した動画像データを作成してカメラケーブル４に出力する。
照明ユニット５Ａ，５Ｂは、照明ケーブル６Ａ，６Ｂを介してＬＥＤ７Ａ，７Ｂの図示しない駆動電源と接続されている。もちろん、カメラユニット３と共通の電源でも構わない。照明ユニット５Ａ，５Ｂの光源としては、電球や蛍光灯なども考えられるが、消費電力の少なさや赤外波長の選択性から、本実施形態１ではＬＥＤ７Ａ，７Ｂを採用している。
発光ドライバ１１は、図示しない駆動電源を元に電流源を生成し、ＬＥＤ７Ａ，７Ｂの発光強度を交互にＯＮ／ＯＦＦ駆動させるように動作する。広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂとしてそれぞれ必要とされる光量に応じて、１つのＬＥＤでは対応できない場合は、複数のＬＥＤで分担して照明するようにすることも可能である。この場合、照明が重なって局所的に明るい箇所が存在しないように配置することが重要である。
照明ユニット５Ａ，５Ｂは、照明ケーブル６Ａ，６Ｂを介してＬＥＤ７Ａ，７Ｂの図示しない駆動電源と接続されている。もちろん、カメラユニット３と共通の電源でも構わない。照明ユニット５Ａ，５Ｂの光源としては、電球や蛍光灯なども考えられるが、消費電力の少なさや赤外波長の選択性から、本実施形態１ではＬＥＤ７Ａ，７Ｂを採用している。
発光ドライバ１１は、図示しない駆動電源を元に電流源を生成し、ＬＥＤ７Ａ，７Ｂの発光強度を交互にＯＮ／ＯＦＦ駆動させるように動作する。広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂとしてそれぞれ必要とされる光量に応じて、１つのＬＥＤでは対応できない場合は、複数のＬＥＤで分担して照明するようにすることも可能である。この場合、照明が重なって局所的に明るい箇所が存在しないように配置することが重要である。
図７は、照明ユニット５Ａ，５Ｂの発光ドライバ１１の回路構成を示す説明図である。
本実施形態１においては、照明用駆動電源１２をもとにした定電流源１３Ａ，１３Ｂを配置してＬＥＤ７Ａ，７Ｂを発光させる。もし、広角ＬＥＤ７Ａと狭角ＬＥＤ７Ｂとでそれぞれ独立に発光強度を変更する場合には、これらの定電流源１３Ａ，１３Ｂの電流値を変更すればよい。定電流源１３Ａ，１３ＢとＬＥＤ７Ａ，７Ｂとの間には、それぞれ、入力されるタイミング信号Ａ，ＢによってＯＮ／ＯＦＦ動作するスイッチ部１４Ａ，１４Ｂが配置されている。このスイッチ部１４Ａ，１４Ｂに入力するタイミング信号Ａ，Ｂを制御することで、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂのいずれかに電流を供給するかを選択することができる。なお、ここでは、スイッチ部１４Ａ，１４Ｂに入力されるタイミング信号Ａ，Ｂを制御することで電流を供給するＬＥＤ７Ａ，７Ｂを選択する構成について説明したが、定電流源１３Ａ，１３Ｂを１つのＤ／Ａコンバータなどの電圧設定と電圧電流変換の抵抗で構成し、タイミング信号をパラレルデジタル信号とすることで、Ｄ／Ａコンバータの設定電圧を逐次変更してＬＥＤ７Ａ，７Ｂの発光強度を変化させることもできる。なお、照明の回路とタイミング信号を増やすことで多数の照明に対応可能である。
本実施形態１においては、照明用駆動電源１２をもとにした定電流源１３Ａ，１３Ｂを配置してＬＥＤ７Ａ，７Ｂを発光させる。もし、広角ＬＥＤ７Ａと狭角ＬＥＤ７Ｂとでそれぞれ独立に発光強度を変更する場合には、これらの定電流源１３Ａ，１３Ｂの電流値を変更すればよい。定電流源１３Ａ，１３ＢとＬＥＤ７Ａ，７Ｂとの間には、それぞれ、入力されるタイミング信号Ａ，ＢによってＯＮ／ＯＦＦ動作するスイッチ部１４Ａ，１４Ｂが配置されている。このスイッチ部１４Ａ，１４Ｂに入力するタイミング信号Ａ，Ｂを制御することで、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂのいずれかに電流を供給するかを選択することができる。なお、ここでは、スイッチ部１４Ａ，１４Ｂに入力されるタイミング信号Ａ，Ｂを制御することで電流を供給するＬＥＤ７Ａ，７Ｂを選択する構成について説明したが、定電流源１３Ａ，１３Ｂを１つのＤ／Ａコンバータなどの電圧設定と電圧電流変換の抵抗で構成し、タイミング信号をパラレルデジタル信号とすることで、Ｄ／Ａコンバータの設定電圧を逐次変更してＬＥＤ７Ａ，７Ｂの発光強度を変化させることもできる。なお、照明の回路とタイミング信号を増やすことで多数の照明に対応可能である。
図８は、カメラユニット３に設けられた制御部１０を示すブロック図である。
制御部１０は、受光センサ９からの出力データを受け取って処理を行う画像処理部１５と、画像処理部１５での処理により得られるフレーム画像データを格納するフレームメモリ１６と、フレームメモリ１６に格納されたフレーム画像データからなる動画像データを、外部モニタに表示するための標準的なデータフォーマットであるＮＴＳＣ規格に変換するＮＴＳＣ変換部１７と、撮像画像全体あるいは一部の輝度情報を取得して明るさを判別する輝度判定部１８とを備えている。
制御部１０は、受光センサ９からの出力データを受け取って処理を行う画像処理部１５と、画像処理部１５での処理により得られるフレーム画像データを格納するフレームメモリ１６と、フレームメモリ１６に格納されたフレーム画像データからなる動画像データを、外部モニタに表示するための標準的なデータフォーマットであるＮＴＳＣ規格に変換するＮＴＳＣ変換部１７と、撮像画像全体あるいは一部の輝度情報を取得して明るさを判別する輝度判定部１８とを備えている。
画像処理部１５は、３０ｆｐｓもしくは６０ｆｐｓの速度で受光センサ９からの出力データに基づくフレーム画像データを順次フレームメモリ１６に格納する。昼間など十分な明るさ（輝度）があり、ＬＥＤ７Ａ，７Ｂの照明を必要としない場合には、データを加工する必要はないため、フレーム画像データを適切な速度でＮＴＳＣ変換部１７に転送する。この場合、ＬＥＤ７Ａ，７Ｂを使用する必要がないため、タイミング信号Ａ，Ｂも出力する必要は無い。昼間か夜間かの判断は、外部からの設定で行われてもよいが、カメラが自動的にフレーム画像データの平均輝度を判断して、あらかじめ設定された輝度より暗い時間が長く続けば夜間と判断するようにしてもよい。また、輝度判定部１８による輝度があらかじめ設定されたレベルを超えているかどうかの比較結果を用いてもよい。
夜間などの低照度環境下において撮像する必要がある場合、ＬＥＤ７Ａ，７Ｂを駆動して撮像範囲を照明する。この場合、画像処理部１５は、発光強度制御手段として機能し、まず、タイミング信号ＡをＯＮにし、タイミング信号ＢをＯＦＦにする命令を、発光ドライバ１１に指示する。これにより、ＬＥＤ７Ａは、図４に示したように出射強度が弱く（すなわち照明距離が短く）出射角が広い照明範囲ＬＡで照明を行い、受光センサ９からの出力データに基づくフレーム画像データをフレームメモリ１６の所定のメモリ領域に第１フレーム画像データとして格納する。次に、タイミング信号ＡをＯＦＦにし、タイミング信号ＢをＯＮにする命令を、発光ドライバ１１に指示する。これにより、ＬＥＤ７Ｂは、図４に示したように出射強度が強く（すなわち照明距離が長く）出射角が狭い照明範囲ＬＢで照明を行い、受光センサ９からの出力データに基づくフレーム画像データをフレームメモリ１６の所定のメモリ領域に第２フレーム画像データとして格納する。なお、ここでいう「照明距離」とは、光源の出射面と、最低限必要な光量が得られる箇所のうち最も遠い箇所との距離を意味する。
図９は、フレームメモリ１６に対する画像処理部１５の処理シーケンスの一例について説明する説明図である。
なお、この説明図は、横軸に時間軸をとり、ｔ１〜ｔ８まで順次１フレームごとにフレームメモリ１６の各メモリ領域に対してアクセスされるデータを示している。図中矢印は、データの移動を示している。
この処理シーケンスでは、１つ分のフレーム画像データを格納するメモリ領域（メモリ１〜５）を少なくとも５つ備えるフレームメモリ１６を用いる。このようなフレームメモリ１６は、単一の物理メモリの記憶領域を５つに分割したものを用いてもよいし、５つの物理メモリを個別に用意してもよい。ただし、後述するように、１フレーム周期内に複数の処理を行う必要があるため、データのリード速度及びライト速度には十分な高速性が要求される。
なお、この説明図は、横軸に時間軸をとり、ｔ１〜ｔ８まで順次１フレームごとにフレームメモリ１６の各メモリ領域に対してアクセスされるデータを示している。図中矢印は、データの移動を示している。
この処理シーケンスでは、１つ分のフレーム画像データを格納するメモリ領域（メモリ１〜５）を少なくとも５つ備えるフレームメモリ１６を用いる。このようなフレームメモリ１６は、単一の物理メモリの記憶領域を５つに分割したものを用いてもよいし、５つの物理メモリを個別に用意してもよい。ただし、後述するように、１フレーム周期内に複数の処理を行う必要があるため、データのリード速度及びライト速度には十分な高速性が要求される。
以下、本処理シーケンスの流れについて具体的に説明する。
まず、時刻ｔ１において、メモリ１に１フレーム分のフレーム画像データＤ１を格納すると同時に、メモリ２に格納されている処理済みフレーム画像データＰ１をＮＴＳＣ変換部１７へ出力する。
時刻ｔ２では、メモリ２に次の１フレーム分のフレーム画像データＤ２を格納すると同時に、メモリ５から既に処理済みである処理済みフレーム画像データＰ２をＮＴＳＣ変換部１７へ出力する。
時刻ｔ３では、メモリ４に次の１フレーム分のフレーム画像データＤ３を格納すると同時に、時刻ｔ２と同様にメモリ５から処理済みフレーム画像データＰ２を繰り返し出力する。また同時に、メモリ１に格納されているフレーム画像データＤ１とメモリ２に格納されているフレーム画像データＤ２とを組み合わせて編集処理し、その処理済みフレーム画像データＤ１２をメモリ３に格納する。
まず、時刻ｔ１において、メモリ１に１フレーム分のフレーム画像データＤ１を格納すると同時に、メモリ２に格納されている処理済みフレーム画像データＰ１をＮＴＳＣ変換部１７へ出力する。
時刻ｔ２では、メモリ２に次の１フレーム分のフレーム画像データＤ２を格納すると同時に、メモリ５から既に処理済みである処理済みフレーム画像データＰ２をＮＴＳＣ変換部１７へ出力する。
時刻ｔ３では、メモリ４に次の１フレーム分のフレーム画像データＤ３を格納すると同時に、時刻ｔ２と同様にメモリ５から処理済みフレーム画像データＰ２を繰り返し出力する。また同時に、メモリ１に格納されているフレーム画像データＤ１とメモリ２に格納されているフレーム画像データＤ２とを組み合わせて編集処理し、その処理済みフレーム画像データＤ１２をメモリ３に格納する。
ここで、処理済みフレーム画像データＤ１２の編集処理については後述するが、フレーム画像データＤ１の画像にフレーム画像データＤ２のすべてを上書きするということではなく、画像フレームを領域分割して一部の領域のデータを互いに入れ替えたり、両方の画像の輝度や色差データを平均化したりすることを意味している。本実施形態１において、１フレームは、少なくとも、カメラから近い被写体部分に対応するフレーム部分（近距離領域）と、カメラから遠い被写体部分に対応するフレーム部分（遠距離離領域）とに分割される。
時刻ｔ４では、メモリ５に次の１フレーム分のフレーム画像データＤ４を格納すると同時に、メモリ３から処理済みフレーム画像データＤ１２をＮＴＳＣ変換部１７へ出力する。
時刻ｔ５では、メモリ２に次の１フレーム分のフレーム画像データＤ５を格納すると同時に、時刻ｔ４と同様にメモリ３から処理済みフレーム画像データＤ１２を繰り返し出力する。また同時に、メモリ４に格納されているフレーム画像データＤ３とメモリ５に格納されているフレーム画像データＤ４とを組み合わせて編集処理し、その処理済みフレーム画像データＤ３４をメモリ１に格納する。
時刻ｔ６では、メモリ３に次の１フレーム分のフレーム画像データＤ６を格納すると同時に、メモリ１から処理済みフレーム画像データＤ３４をＮＴＳＣ変換部１７へ出力する。
時刻ｔ７では、メモリ５に次の１フレーム分のフレーム画像データＤ７を格納すると同時に、時刻ｔ６と同様にメモリ１から処理済みフレーム画像データＤ３４を繰り返し出力する。また同時に、メモリ２に格納されているフレーム画像データＤ５とメモリ３に格納されているフレーム画像データＤ６とを組み合わせて編集処理し、その処理済みフレーム画像データＤ５６をメモリ４に格納する。
時刻ｔ８では、メモリ１に次の１フレーム分のフレーム画像データＤ８を格納すると同時に、メモリ４から処理済みフレーム画像データＤ５６をＮＴＳＣ変換部１７へ出力する。
時刻ｔ５では、メモリ２に次の１フレーム分のフレーム画像データＤ５を格納すると同時に、時刻ｔ４と同様にメモリ３から処理済みフレーム画像データＤ１２を繰り返し出力する。また同時に、メモリ４に格納されているフレーム画像データＤ３とメモリ５に格納されているフレーム画像データＤ４とを組み合わせて編集処理し、その処理済みフレーム画像データＤ３４をメモリ１に格納する。
時刻ｔ６では、メモリ３に次の１フレーム分のフレーム画像データＤ６を格納すると同時に、メモリ１から処理済みフレーム画像データＤ３４をＮＴＳＣ変換部１７へ出力する。
時刻ｔ７では、メモリ５に次の１フレーム分のフレーム画像データＤ７を格納すると同時に、時刻ｔ６と同様にメモリ１から処理済みフレーム画像データＤ３４を繰り返し出力する。また同時に、メモリ２に格納されているフレーム画像データＤ５とメモリ３に格納されているフレーム画像データＤ６とを組み合わせて編集処理し、その処理済みフレーム画像データＤ５６をメモリ４に格納する。
時刻ｔ８では、メモリ１に次の１フレーム分のフレーム画像データＤ８を格納すると同時に、メモリ４から処理済みフレーム画像データＤ５６をＮＴＳＣ変換部１７へ出力する。
時刻ｔ９以降も、上述のような処理シーケンスの繰り返しとなる。このような処理シーケンスにより、受光センサ９からの出力データを順次取得するフレーム速度の半分の速度でフレームが更新される動画像データを得ることができる。
図５に示した例のように、近距離被写体、中距離被写体、遠距離被写体など３つ以上になる場合は、フレームメモリ１６のメモリ領域の数を増やすことになるが、同様な考え方で未処理のフレーム画像データを消去することなく、順番に処理するようにすれば良い。
なお、ここでは、ノンインターレースにおけるフレーム毎に画像処理を行う場合について説明したが、インターレースの場合、フィールド毎に処理を行うようにしても良い。その場合は、上記で説明したフレームをフィールドに置き換えるだけでも可能であるが、ラインズレが発生するため、２フィールドを１まとめとして扱うことが望ましい。
図５に示した例のように、近距離被写体、中距離被写体、遠距離被写体など３つ以上になる場合は、フレームメモリ１６のメモリ領域の数を増やすことになるが、同様な考え方で未処理のフレーム画像データを消去することなく、順番に処理するようにすれば良い。
なお、ここでは、ノンインターレースにおけるフレーム毎に画像処理を行う場合について説明したが、インターレースの場合、フィールド毎に処理を行うようにしても良い。その場合は、上記で説明したフレームをフィールドに置き換えるだけでも可能であるが、ラインズレが発生するため、２フィールドを１まとめとして扱うことが望ましい。
本実施形態１では、上記処理シーケンスの処理タイミング（フレーム周期）に同期して、時刻ｔ１ではタイミング信号ＡがＯＮになり、タイミング信号ＢがＯＦＦになるように、画像処理部１５がＬＥＤ７Ａ，７Ｂの発光強度を制御する。その結果、フレーム画像データＤ１は比較的弱い強度の照明下で得られたものとなる。続いて、時刻ｔ２ではタイミング信号ＡがＯＦＦになり、タイミング信号ＢがＯＮになるように制御される。これにより、フレーム画像データＤ２は比較的強い強度の照明下で得られたものとなる。処理済みフレーム画像データＤ１２は、この２種類の照明強度で得られたフレーム画像データＤ１，Ｄ２を用い、フレームの一部の領域である近距離領域についてはフレーム画像データＤ１を積極的に採用し、フレームの他部の領域である遠距離領域についてはフレーム画像データＤ２を積極的に採用するなどして、編集加工したものである。このような編集加工を行うことで、遠近両方をそれぞれ適度な照明条件で撮像したようなフレーム画像データＤ１２を得ることができる。なお、ＬＥＤをＯＦＦにすると次のＯＮ時の立ち上がり時間が遅くなる点が問題となるようであれば、ＬＥＤをＯＦＦにする代わりに、そのＬＥＤを微弱発光させるようにしてもよい。また、受光センサ９の輝度補正は、ＬＥＤ７Ａ，７ＢのＯＮ／ＯＦＦに追従しないことが重要である。
図１０は、２つのフレーム画像データＤ１，Ｄ２を編集加工して新たな１つのフレーム画像データＤ１２を作成する編集処理の一例を示す説明図である。
本実施形態１において、車内監視カメラ１は、自動車の運転席前の上部に配置されたルームミラー付近に設置され、そこから車内を後部側に向かって撮像するように配置される。なお、ルームミラーの無い場合でも、フロントガラスの上部付近に設置すれば同様である。一般に、自動車は、運転席と助手席との間に隙間があり、その隙間から後部座席を撮影することができる。したがって、本実施形態１では、１フレームを三分割し、その中央領域を後部座席が含まれる遠距離領域とし、その両側領域を運転席及び助手席が含まれる近距離領域として設定している。
本実施形態１において、車内監視カメラ１は、自動車の運転席前の上部に配置されたルームミラー付近に設置され、そこから車内を後部側に向かって撮像するように配置される。なお、ルームミラーの無い場合でも、フロントガラスの上部付近に設置すれば同様である。一般に、自動車は、運転席と助手席との間に隙間があり、その隙間から後部座席を撮影することができる。したがって、本実施形態１では、１フレームを三分割し、その中央領域を後部座席が含まれる遠距離領域とし、その両側領域を運転席及び助手席が含まれる近距離領域として設定している。
フレーム画像データＤ１は、上述したように広角ＬＥＤ７Ａによる比較的弱い照明下で得られたものであるのに対し、フレーム画像データＤ２は狭角ＬＥＤ７Ｂによる比較的強い照明下で得られたものである。本実施形態１においては、運転席と助手席の視認性を優先することとし、フレーム画像データＤ１をベースに編集加工処理を行う。フレーム画像データＤ１は、広角ではあるが照明距離が短いため、図１０に示すように、後部座席の乗客Ｃは暗くてほとんど認識できない状態である。逆に、フレーム画像データＤ２は、狭角であるが照明距離が長いので後部座席の乗客Ｃを良く認識できるが、運転席のドライバーＡと助手席の乗客Ｂは照明範囲外であるため暗くてほとんど認識できない。そのため、本実施形態１においては、フレーム画像データＤ２から図１０に示す破線で囲った領域（遠距離領域）を切り出し、その切り出した遠距離領域だけを、フレーム画像データＤ１に上書きする処理を行い、これによりフレーム画像データＤ１２を得る。さらに、このようにして得たフレーム画像データＤ１２に対して全体的な明るさ調整を行ったり、境界をぼかしたりするなどの画質改善処理を行うことが好ましい。以上のような編集加工処理を行うことで、運転席のドライバＡ、助手席の乗客Ｂ、後部座席の乗客Ｃの全員について視認性の高いフレーム画像データＤ１２が得られる。なお、他のフレーム画像データＤ３〜Ｄ８についての編集加工処理も同様に行われる。
本実施形態１においては、２つのフレーム画像データから１つのフレーム画像データを作成するので、受光センサ９のフレームレート（フレーム速度）に比べて半分のフレームレートに落ちることになる。ＮＴＳＣフォーマットは規定のレートで映像を出力する必要があるため、本実施形態１では同じフレーム画像データを２回連続で出力している。
また、編集加工処理を更に高機能で行う場合には、編集加工前のフレーム画像データから輝度レベルを読み取り、白飛びと判断する領域に対して、照度が低い方のフレーム画像データを採用し、逆に一定レベル以下の輝度の領域に対しては、照度が高い方のフレーム画像データを採用するなどの、自動判別アルゴリズムを搭載することも有効である。基本的に車内監視などのセキュリティー用途では、高速な動作の取り込みが不要なため、フレームレートが半分に落ちても、特に不具合となることは無い。また、出力されるものは動画像であるため、細かい境界での不連続性に関しても大きな不具合とはならないため、画像処理を簡素化することも可能である。
また、編集加工処理を更に高機能で行う場合には、編集加工前のフレーム画像データから輝度レベルを読み取り、白飛びと判断する領域に対して、照度が低い方のフレーム画像データを採用し、逆に一定レベル以下の輝度の領域に対しては、照度が高い方のフレーム画像データを採用するなどの、自動判別アルゴリズムを搭載することも有効である。基本的に車内監視などのセキュリティー用途では、高速な動作の取り込みが不要なため、フレームレートが半分に落ちても、特に不具合となることは無い。また、出力されるものは動画像であるため、細かい境界での不連続性に関しても大きな不具合とはならないため、画像処理を簡素化することも可能である。
なお、本実施形態１では、１フレームを図１０に示すように横方向に三分割した例について説明したが、その分割方法は、カメラの撮像領域内のどの被写体の視認性を高めるかなどの設計事項に応じて適宜設定される。例えば、後部座席の乗客Ｃの足元の箇所は高い視認性が必要ないが、運転席のドライバーＡと助手席の乗客Ｂの手元の箇所について高い視認性を得たい場合には、例えば図１１に示すように、１フレーム中の中央領域上部を遠距離領域とし、残りの領域を近距離領域として設定してもよい。
また、照明強度を変えずに受光センサ９の輝度補正もしくは受光センサ９の増幅率をフレームごとに変えることで、本実施形態１と同様の効果を得ることは不可能ではないが、後部座席の乗客Ｃに届く光量がわずかであることを考えると、Ｓ／Ｎ比は照明強度を変える本実施形態１のもの方が有利であり、より良い方法といえる。
〔変形例１〕
次に、上記実施形態１における画像処理部１５の処理シーケンスの変形例（以下、本変形例を「変形例１」という。）について説明する。
図１２は、本変形例１における画像処理部１５の処理シーケンスを説明する説明図である。
本変形例１は、１フレームの領域分割の設定が例えば図１０や図１１に示した分割方法のように簡単であったり、２つのフレーム画像データの編集加工処理が一方を他方のデータに置き換えるだけ等の簡単な処理であったりする場合に適した例である。
次に、上記実施形態１における画像処理部１５の処理シーケンスの変形例（以下、本変形例を「変形例１」という。）について説明する。
図１２は、本変形例１における画像処理部１５の処理シーケンスを説明する説明図である。
本変形例１は、１フレームの領域分割の設定が例えば図１０や図１１に示した分割方法のように簡単であったり、２つのフレーム画像データの編集加工処理が一方を他方のデータに置き換えるだけ等の簡単な処理であったりする場合に適した例である。
本変形例１におけるフレームメモリ１６は、２つのメモリ領域に分割されている。このようなフレームメモリ１６は、単一の物理メモリの記憶領域を２つに分割したものを用いてもよいし、２つの物理メモリを個別に用意してもよい。ただし、１フレーム周期内に複数の処理を行う必要があるため、データのリード速度及びライト速度には十分な高速性が要求される点は、上記実施形態１と同様である。
以下、本変形例１における処理シーケンスの流れについて具体的に説明する。
まず、時刻ｔ１では、メモリ１に１フレーム分のフレーム画像データＤ１を格納すると同時に、メモリ２から処理済みフレーム画像データＰ１をＮＴＳＣ変換部１７へ出力する。
時刻ｔ２では、フレーム画像データＤ１が格納されているメモリ１に対して、次の１フレーム分のフレーム画像データＤ２の中から切り出された領域部分のデータのみを上書きする。例えば、図１０に示した例においては、遠距離領域である中央領域のデータをフレーム画像データＤ２から切り出し、メモリ１にアクセスしてそのデータのみをフレーム画像データＤ１に上書きする。また同時に、時刻ｔ１と同様にメモリ２から処理済みフレーム画像データＰ１を繰り返し出力する。
時刻ｔ３では、メモリ２に次の１フレーム分のフレーム画像データＤ３を格納すると同時に、時刻ｔ２で作成された処理済みフレーム画像データＤ１２をメモリ１からＮＴＳＣ変換部１７へ出力する。
時刻ｔ４では、時刻ｔ２と同様の動作になる。具体的には、フレーム画像データＤ３が格納されたメモリ２に、次の１フレーム分のフレーム画像データＤ４を部分的に上書きすると同時に、メモリ１から処理済みフレーム画像データＤ１２を繰り返し出力する。
時刻ｔ５では、メモリ１に次の１フレーム分のフレーム画像データＤ５を格納すると同時に、時刻ｔ４で作成された処理済みフレーム画像データＤ３４を出力する。
時刻ｔ６では、時刻ｔ４と同様の動作になる。具体的には、フレーム画像データＤ５が格納されたメモリ１に、次の１フレーム分のフレーム画像データＤ６を部分的に上書きすると同時に、メモリ２から処理済みフレーム画像データＤ３４を繰り返し出力する。
なお、時刻ｔ７以降も、上述のような処理シーケンスの繰り返しとなる。このような処理シーケンスにより、受光センサ９からの出力データを順次取得するフレーム速度の半分の速度でフレームが更新される動画像データを得ることができる。
まず、時刻ｔ１では、メモリ１に１フレーム分のフレーム画像データＤ１を格納すると同時に、メモリ２から処理済みフレーム画像データＰ１をＮＴＳＣ変換部１７へ出力する。
時刻ｔ２では、フレーム画像データＤ１が格納されているメモリ１に対して、次の１フレーム分のフレーム画像データＤ２の中から切り出された領域部分のデータのみを上書きする。例えば、図１０に示した例においては、遠距離領域である中央領域のデータをフレーム画像データＤ２から切り出し、メモリ１にアクセスしてそのデータのみをフレーム画像データＤ１に上書きする。また同時に、時刻ｔ１と同様にメモリ２から処理済みフレーム画像データＰ１を繰り返し出力する。
時刻ｔ３では、メモリ２に次の１フレーム分のフレーム画像データＤ３を格納すると同時に、時刻ｔ２で作成された処理済みフレーム画像データＤ１２をメモリ１からＮＴＳＣ変換部１７へ出力する。
時刻ｔ４では、時刻ｔ２と同様の動作になる。具体的には、フレーム画像データＤ３が格納されたメモリ２に、次の１フレーム分のフレーム画像データＤ４を部分的に上書きすると同時に、メモリ１から処理済みフレーム画像データＤ１２を繰り返し出力する。
時刻ｔ５では、メモリ１に次の１フレーム分のフレーム画像データＤ５を格納すると同時に、時刻ｔ４で作成された処理済みフレーム画像データＤ３４を出力する。
時刻ｔ６では、時刻ｔ４と同様の動作になる。具体的には、フレーム画像データＤ５が格納されたメモリ１に、次の１フレーム分のフレーム画像データＤ６を部分的に上書きすると同時に、メモリ２から処理済みフレーム画像データＤ３４を繰り返し出力する。
なお、時刻ｔ７以降も、上述のような処理シーケンスの繰り返しとなる。このような処理シーケンスにより、受光センサ９からの出力データを順次取得するフレーム速度の半分の速度でフレームが更新される動画像データを得ることができる。
本変形例１のように編集加工時に必要なメモリ容量を削減できる手法は、図１０に示すように横方向に三分割した例のように、上書きする領域が固定的である場合に適している。一方、任意の領域を切り出す領域分割は、輝度レベルを読み取って特定領域の映像データを入れ替える画像認識する場合に有効である。この場合は、図９に示した手法での処理が好ましい。領域の設定は、カメラから乗員までの距離、シートの大きさや間隔によって最適値は変わるため、車両に設置する際に調整できるようにしても良いが、細かい画像品質への要求がなければ、あらかじめ定めた設定でも構わない。
〔実施形態２〕
次に、本発明を、低照度対応カメラである車内監視カメラに適用した他の実施形態（以下、本実施形態を「実施形態２」という。）について説明する。
なお、本実施形態２に係る車内監視カメラの基本構成は上記実施形態１のものと同様であるため、以下の説明では上記実施形態１とは異なる点のみ説明する。
次に、本発明を、低照度対応カメラである車内監視カメラに適用した他の実施形態（以下、本実施形態を「実施形態２」という。）について説明する。
なお、本実施形態２に係る車内監視カメラの基本構成は上記実施形態１のものと同様であるため、以下の説明では上記実施形態１とは異なる点のみ説明する。
図１３は、本実施形態２に係る車内監視カメラをルームミラー２０に取り付けた状態を示す正面図である。
本実施形態２において、ルームミラー２０はミラー取付部２１によって自動車のフロントガラスに取り付けられている。本実施形態２の車内監視カメラは、２つの照明ユニット２５Ａ，２５Ｂをカメラユニット２３とは別体に構成し、カメラユニット２３をルームミラー２０の中央に、２つの照明ユニット２５Ａ，２５Ｂをルームミラー２０の左右に少し離して配置している。具体的には、図１０に示すように、ルームミラー２０の取付部２１にステイ２２を設置し、このステイ２２に２つの照明ユニット２５Ａ，２５Ｂを取り付けている。
本実施形態２において、ルームミラー２０はミラー取付部２１によって自動車のフロントガラスに取り付けられている。本実施形態２の車内監視カメラは、２つの照明ユニット２５Ａ，２５Ｂをカメラユニット２３とは別体に構成し、カメラユニット２３をルームミラー２０の中央に、２つの照明ユニット２５Ａ，２５Ｂをルームミラー２０の左右に少し離して配置している。具体的には、図１０に示すように、ルームミラー２０の取付部２１にステイ２２を設置し、このステイ２２に２つの照明ユニット２５Ａ，２５Ｂを取り付けている。
図１４は、本実施形態２における照明ユニット２５Ａ，２５Ｂの照明範囲を示す説明図である。
図１４に示すように、照明ユニット２５Ａ，２５Ｂのうち図中右側に取り付けた照明ユニット２５Ａは、車内における図中左側の領域に向けて光りを照射するように、そのＬＥＤの出射面が向けられている。一方、図中左側に取り付けた照明ユニット２５Ｂは、車内における図中右側の領域に向けて光りを照射するように、そのＬＥＤの出射面が向けられている。このように２つの照明ユニット２５Ａ，２５Ｂの照射方向が互いに交差するように２つの照明ユニット２５Ａ，２５Ｂを配置するのが好ましい。このような配置とすることで、車内のシートに隠れてしまう被写体領域を減らすことができ、より広い範囲について視認性の高い画像が得られる。また、各照明ユニット２５Ａ，２５Ｂは、それぞれ、前席と後席の両方が照射範囲に入るように、照明距離、出射角、照射方向などが設定される。
図１４に示すように、照明ユニット２５Ａ，２５Ｂのうち図中右側に取り付けた照明ユニット２５Ａは、車内における図中左側の領域に向けて光りを照射するように、そのＬＥＤの出射面が向けられている。一方、図中左側に取り付けた照明ユニット２５Ｂは、車内における図中右側の領域に向けて光りを照射するように、そのＬＥＤの出射面が向けられている。このように２つの照明ユニット２５Ａ，２５Ｂの照射方向が互いに交差するように２つの照明ユニット２５Ａ，２５Ｂを配置するのが好ましい。このような配置とすることで、車内のシートに隠れてしまう被写体領域を減らすことができ、より広い範囲について視認性の高い画像が得られる。また、各照明ユニット２５Ａ，２５Ｂは、それぞれ、前席と後席の両方が照射範囲に入るように、照明距離、出射角、照射方向などが設定される。
上述した実施形態１においては、一方の照明ユニット５Ａが前席（近距離被写体）の照明を担当し、他方の照明ユニット５Ｂが後席（遠距離被写体）の照明を担当したが、本実施形態２では、一方の照明ユニット２５Ａが車内の図中左側に位置する前席及び後席の照明を担当し、他方の照明ユニット２５Ｂが車内の図中右側に位置する前席及び後席の照明を担当する点で、相違している。そのため、本実施形態２の照明ユニット２５Ａ，２５Ｂとしては、いずれも比較的狭角なタイプのＬＥＤを用いる。
また、本実施形態２において、フレーム画像データＤ１は、照明ユニット５Ａによる照明下で得られたものとなり、フレーム画像データＤ２は照明ユニット５Ｂによる照明下で得られたものとなる。そして、本実施形態２では、フレーム画像データＤ１をベースに編集加工処理を行う。具体的には、本実施形態２では、１フレームを横方向中央で左右に２分割し、フレーム画像データＤ２から照明ユニット５Ｂの照明範囲に対応する右半分領域を切り出し、その切り出した右半分領域だけを、フレーム画像データＤ１に上書きする処理を行い、これによりフレーム画像データＤ１２を得る。このような編集加工処理を行うことで、運転席のドライバＡ、助手席の乗客Ｂ、後部座席の乗客Ｃ及びＤの全員について視認性の高いフレーム画像データＤ１２が得られる。なお、本実施形態２に係る編集加工処理における、照明ユニット５Ａ，５ＢのＯＮ／ＯＦＦ制御やフレームメモリ１６に対するアクセス方法などは、上記実施形態１と同様であるので説明を省略する。
〔変形例２〕
次に、上記実施形態２における照明ユニット２５Ａ，２５Ｂの変形例（以下、本変形例を「変形例２」という。）について説明する。
図１５（ａ）は、一般的なＬＥＤの発光強度分布を示す説明図であり、図１５（ｂ）は、本変形例２で用いるＬＥＤの発光強度分布を示す説明図である。
上記実施形態２において、各照明ユニット２５Ａ，２５Ｂは、前席及び後席の両方を照明することを担当するので、その照明領域内に互いに距離が異なる２つの被写体が存在する。そのため、図１５（ａ）に示す一般的なＬＥＤのように発光強度分布が正規分布している場合、距離が遠い後席（遠距離被写体）よりも距離が近い前席（近距離被写体）の方が若干強い光で照明される。そのため、遠距離被写体と近距離被写体との間で照明ムラが生じ、その視認性に差が出る。
次に、上記実施形態２における照明ユニット２５Ａ，２５Ｂの変形例（以下、本変形例を「変形例２」という。）について説明する。
図１５（ａ）は、一般的なＬＥＤの発光強度分布を示す説明図であり、図１５（ｂ）は、本変形例２で用いるＬＥＤの発光強度分布を示す説明図である。
上記実施形態２において、各照明ユニット２５Ａ，２５Ｂは、前席及び後席の両方を照明することを担当するので、その照明領域内に互いに距離が異なる２つの被写体が存在する。そのため、図１５（ａ）に示す一般的なＬＥＤのように発光強度分布が正規分布している場合、距離が遠い後席（遠距離被写体）よりも距離が近い前席（近距離被写体）の方が若干強い光で照明される。そのため、遠距離被写体と近距離被写体との間で照明ムラが生じ、その視認性に差が出る。
本変形例２で用いる照明ユニット２５Ａ，２５Ｂは、図１５（ｂ）に示すように、発光強度分布が非対称であるＬＥＤを用いている。具体的には、各照明ユニット２５Ａ，２５Ｂで用いるＬＥＤは、その発光強度分布が後席（遠距離被写体）を照らす領域側にピーク値がシフトしている。このような発光強度分布が非対称であるＬＥＤは、その出射レンズとして非球面レンズを用いることで実現できる。なお、図１５（ａ）及び（ｂ）に示す破線矢印は、各照明ユニット２５Ａ，２５Ｂのｃを示すものである。本変形例２においては、その各照明ユニット２５Ａ，２５Ｂが前席と後席の概ね中心に設定すればよい。
なお、本変形例２においては、上下方向については一般的な発光強度分布で問題ないが、上下方向についても遠被写体間で照明ムラが生じる場合には、発光強度分布が上下方向に非対称であるものを用いてもよい。
なお、本変形例２においては、上下方向については一般的な発光強度分布で問題ないが、上下方向についても遠被写体間で照明ムラが生じる場合には、発光強度分布が上下方向に非対称であるものを用いてもよい。
以上、上記実施形態１（変形例１を含む。）に係る低照度対応カメラである車内監視カメラ１は、発光手段としての照明ユニット５Ａ，５Ｂと、照明ユニット５Ａ，５Ｂの発光波長帯域の少なくとも一部について受光感度を持つ受光手段としての受光センサ９と、照明ユニット５Ａ，５Ｂによる照明下で被写体からの反射光を受光センサ９へ集光する集光手段としての広角レンズ２と、受光センサ９により得られる受光強度データを所定のフレーム周期（フレームレート）で取得してフレーム画像データＤ１，Ｄ２，・・・を生成し、そのフレーム画像データに基づいて動画像データを作成する動画像データ作成手段としての制御部１０とを備えている。この車内監視カメラ１の照明ユニット５Ａ，５Ｂは、出射角が広くかつ照明距離が短い第１発光部としての広角ＬＥＤ７Ａと出射角が狭くかつ照明距離が長い第２発光部としての狭角ＬＥＤ７Ｂとを有している。そして、上記フレーム周期に同期させて、これらのＬＥＤ７Ａ，７Ｂの間で最大発光強度で発光するＬＥＤが順次切り替わるように、各ＬＥＤ７Ａ，７Ｂの発光強度を制御する発光強度制御手段としての制御部１０を有し、この制御部１０は、各ＬＥＤ７Ａ，７Ｂが発光する照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成する。これにより、夜間の暗い車内のような低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所（遠距離領域）について、低い消費電力で高い視認性を得ることができる。しかも、本実施形態１（変形例１を含む。）においては、運転席や助手席などの近い被写体部分と後部座席などの遠い被写体部分の両方について、視認性の高い映像を得ることができる。
この場合、広角ＬＥＤ７Ａの出射角は１２０度とし、狭角ＬＥＤ７Ｂの出射角は４０度とするのが好ましい。
また、上記実施形態２（変形例２を含む。）に係る車内監視カメラ１は、照明ユニット２５Ａ，２５Ｂが、撮像可能範囲内の互いに異なる箇所に向けて光を照射する複数の発光部（ＬＥＤ）を有している。そして、フレーム周期に同期させて、これらのＬＥＤの間で最大発光強度で発光するＬＥＤが順次切り替わるように、各ＬＥＤ７Ａ，７Ｂの発光強度を制御する発光強度制御手段としての制御部１０を有し、この制御部１０は、各ＬＥＤ７Ａ，７Ｂが発光する照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成する。これにより、夜間の暗い車内のような低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所（遠距離領域）について、低い消費電力で高い視認性を得ることができる。
また、上記変形例２のように、上記実施形態２で用いる照明ユニット２５Ａ，２５ＢのＬＥＤを、非対称の発光強度分布を有する非対称分布発光部とし、強い発光強度による照明下で高い視認性が得られる強発光強度被写体である後席を強い発光強度で照明し、弱い発光強度による照明下で高い視認性が得られる弱発光強度被写体である前席を弱い発光強度で照明するように、各ＬＥＤの発光強度分布を設定すると、前席と後席との間の照明ムラが少なくなり、より高い画質の動画像を得ることができる。
また、上記実施形態１において、制御部１０は、少なくとも一部の撮像可能範囲について、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの各照明下でそれぞれ得られる同一撮像箇所（図１０に示す中央領域又は図１１に示す中央領域上部）についての複数の受光強度データＤ１，Ｄ２から、その同一撮像箇所についての１つの新規な受光強度データＤ１２を生成し、その受光強度データＤ１２を用いて動画像データへ作成する。これにより、当該同一撮像箇所について、当該複数の受光強度データＤ１，Ｄ２が互いに補完しあった視認性の高い画像を得ることができる。
一方、上記変形例１のように、制御部１０は、撮像可能範囲を分割して得られる複数の撮像箇所について、それぞれ広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの各照明下で得られる受光強度データＤ１，Ｄ２を用いて動画像データを作成するようにしてもよい。この場合、その動画像データの作成処理を簡単化することができる。
また、上記変形例１においては、複数のフレーム画像データそれぞれを格納可能な複数のメモリ領域（メモリ１〜５）を有するフレームメモリ１６を設け、制御部１０は、広角ＬＥＤ７Ａの照明下で得られるから生成したフレーム画像データＤ１が格納されているメモリ１に対し、その図１０に示す中央領域又は図１１に示す中央領域上部に対応するメモリ部分のデータを、高い視認性が得られる狭角ＬＥＤ７Ｂによる照明下で得られる受光強度データから生成したフレーム画像データＤ２のものに置き換える処理を行う。これにより、必要なメモリ容量を削減できる。
また、ＬＥＤ７Ａ，７Ｂが発光波長帯域として赤外波長帯域を有するものであれば、車内監視カメラの用途に本発明を適用する場合でも、運転者の視認性に与える影響等を少なくできる。
この場合、広角ＬＥＤ７Ａの出射角は１２０度とし、狭角ＬＥＤ７Ｂの出射角は４０度とするのが好ましい。
また、上記実施形態２（変形例２を含む。）に係る車内監視カメラ１は、照明ユニット２５Ａ，２５Ｂが、撮像可能範囲内の互いに異なる箇所に向けて光を照射する複数の発光部（ＬＥＤ）を有している。そして、フレーム周期に同期させて、これらのＬＥＤの間で最大発光強度で発光するＬＥＤが順次切り替わるように、各ＬＥＤ７Ａ，７Ｂの発光強度を制御する発光強度制御手段としての制御部１０を有し、この制御部１０は、各ＬＥＤ７Ａ，７Ｂが発光する照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成する。これにより、夜間の暗い車内のような低照度環境下において、強い発光強度の照明下で高い視認性が得られる撮像箇所（遠距離領域）について、低い消費電力で高い視認性を得ることができる。
また、上記変形例２のように、上記実施形態２で用いる照明ユニット２５Ａ，２５ＢのＬＥＤを、非対称の発光強度分布を有する非対称分布発光部とし、強い発光強度による照明下で高い視認性が得られる強発光強度被写体である後席を強い発光強度で照明し、弱い発光強度による照明下で高い視認性が得られる弱発光強度被写体である前席を弱い発光強度で照明するように、各ＬＥＤの発光強度分布を設定すると、前席と後席との間の照明ムラが少なくなり、より高い画質の動画像を得ることができる。
また、上記実施形態１において、制御部１０は、少なくとも一部の撮像可能範囲について、広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの各照明下でそれぞれ得られる同一撮像箇所（図１０に示す中央領域又は図１１に示す中央領域上部）についての複数の受光強度データＤ１，Ｄ２から、その同一撮像箇所についての１つの新規な受光強度データＤ１２を生成し、その受光強度データＤ１２を用いて動画像データへ作成する。これにより、当該同一撮像箇所について、当該複数の受光強度データＤ１，Ｄ２が互いに補完しあった視認性の高い画像を得ることができる。
一方、上記変形例１のように、制御部１０は、撮像可能範囲を分割して得られる複数の撮像箇所について、それぞれ広角ＬＥＤ７Ａ及び狭角ＬＥＤ７Ｂの各照明下で得られる受光強度データＤ１，Ｄ２を用いて動画像データを作成するようにしてもよい。この場合、その動画像データの作成処理を簡単化することができる。
また、上記変形例１においては、複数のフレーム画像データそれぞれを格納可能な複数のメモリ領域（メモリ１〜５）を有するフレームメモリ１６を設け、制御部１０は、広角ＬＥＤ７Ａの照明下で得られるから生成したフレーム画像データＤ１が格納されているメモリ１に対し、その図１０に示す中央領域又は図１１に示す中央領域上部に対応するメモリ部分のデータを、高い視認性が得られる狭角ＬＥＤ７Ｂによる照明下で得られる受光強度データから生成したフレーム画像データＤ２のものに置き換える処理を行う。これにより、必要なメモリ容量を削減できる。
また、ＬＥＤ７Ａ，７Ｂが発光波長帯域として赤外波長帯域を有するものであれば、車内監視カメラの用途に本発明を適用する場合でも、運転者の視認性に与える影響等を少なくできる。
なお、以上の説明では、各照明ユニット５Ａ，５Ｂ，２５Ａ，２５Ｂが発光する照明下でそれぞれ得られた２つのフレーム画像データＤ１，Ｄ２を用いて１つのフレーム画像データＤ１２を生成し、フレームレートを落とした動画像データを作成する場合について説明したが、動画像データの作成方法はこれに限られない。例えば、各照明ユニット５Ａ，５Ｂ，２５Ａ，２５Ｂが発光する照明下でそれぞれ得られた２つのフレーム画像データＤ１，Ｄ２をそのまま用いて、あるいは、当該２つのフレーム画像データＤ１，Ｄ２に対して何らかの画像補正処理を施したものを用いて、フレームレートを落とさない動画像データを作成してもよい。この場合、例えば上記実施形態１であれば、当該２つのフレーム画像データＤ１，Ｄ２が高速に切り替わる動画像となるので、その残像により、運転席や助手席などの近い被写体部分と後部座席などの遠い被写体部分の両方とも高い視認性をもって視聴者に知覚されるので、同様の効果が得られる。また、例えば上記実施形態２であれば、当該２つのフレーム画像データＤ１，Ｄ２が高速に切り替わる動画像となるので、その残像により、撮像可能範囲の全体を比較邸強い発光強度で照明した映像が視聴者に知覚されるので、同様の効果が得られる。
１ 車内監視カメラ
２ 広角レンズ
３，２３ カメラユニット
４ カメラケーブル
５Ａ，５Ｂ，２５Ａ，２５Ｂ 照明ユニット
６Ａ，６Ｂ 照明ケーブル
７Ａ，７Ｂ ＬＥＤ
８ ユニット間ケーブル
９ 受光センサ
１０ 制御部
１１ 発光ドライバ
１２ 照明用駆動電源
１３Ａ，１３Ｂ 定電流源
１４Ａ，１４Ｂ スイッチ部
１５ 画像処理部
１６ フレームメモリ
１７ ＮＴＳＣ変換部
１８ 輝度判定部
２０ ルームミラー
２ 広角レンズ
３，２３ カメラユニット
４ カメラケーブル
５Ａ，５Ｂ，２５Ａ，２５Ｂ 照明ユニット
６Ａ，６Ｂ 照明ケーブル
７Ａ，７Ｂ ＬＥＤ
８ ユニット間ケーブル
９ 受光センサ
１０ 制御部
１１ 発光ドライバ
１２ 照明用駆動電源
１３Ａ，１３Ｂ 定電流源
１４Ａ，１４Ｂ スイッチ部
１５ 画像処理部
１６ フレームメモリ
１７ ＮＴＳＣ変換部
１８ 輝度判定部
２０ ルームミラー
Claims (8)
- 発光手段と、
該発光手段の発光波長帯域の少なくとも一部について受光感度を持つ受光手段と、
該発光手段による照明下で被写体からの反射光を該受光手段へ集光する集光手段と、
該受光手段により得られる受光強度データを所定のフレーム周期で取得してフレーム画像データを生成し、該フレーム画像データに基づいて動画像データを作成する動画像データ作成手段とを有する低照度対応カメラにおいて、
上記発光手段は、出射角が広くかつ出射強度が弱い第１発光部と出射角が狭くかつ出射強度が強い第２発光部とを含んだ複数の発光部を有しており、
上記フレーム周期に同期させて、上記複数の発光部の中で発光強度が最大となる発光部が順次切り替わるように、各発光部の発光強度を制御する発光強度制御手段を設け、
上記動画像データ作成手段は、上記複数の発光部のうちの少なくとも２つの発光部が該複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成することを特徴とする低照度対応カメラ。 - 請求項１の低照度対応カメラにおいて、
上記第１発光部の出射角は１２０度であり、上記第２発光部の出射角は４０度であることを特徴とする低照度対応カメラ。 - 発光手段と、
該発光手段の発光波長帯域の少なくとも一部について受光感度を持つ受光手段と、
該発光手段による照明下で被写体からの反射光を該受光手段へ集光する集光手段と、
該受光手段により得られる受光強度データを所定のフレーム周期で取得してフレーム画像データを生成し、該フレーム画像データに基づいて動画像データを作成する動画像データ作成手段とを有する低照度対応カメラにおいて、
上記発光手段は、撮像可能範囲内の互いに異なる箇所に向けて光を照射する複数の発光部を有しており、
上記フレーム周期に同期させて、上記複数の発光部の中で発光強度が最大となる発光部が順次切り替わるように、各発光部の発光強度を制御する発光強度制御手段を設け、
上記動画像データ作成手段は、上記複数の発光部のうちの少なくとも２つの発光部が該複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られたフレーム画像データを用いて１つの動画像データを作成することを特徴とする低照度対応カメラ。 - 請求項３の低照度対応カメラにおいて、
上記複数の発光部は、非対称の発光強度分布を有する非対称分布発光部を含んでおり、
強い発光強度による照明下で高い視認性が得られる強発光強度被写体を強い発光強度で照明し、弱い発光強度による照明下で高い視認性が得られる弱発光強度被写体を弱い発光強度で照明するように、該非対称分布発光部の発光強度分布を設定したことを特徴とする低照度対応カメラ。 - 請求項１乃至４のいずれか１項に記載の低照度対応カメラにおいて、
上記動画像データ作成手段は、少なくとも一部の撮像可能範囲について、上記少なくとも２つの発光部が上記複数の発光部の中で発光強度が最大となる時の照明下でそれぞれ得られる同一撮像箇所についての複数の受光強度データを合成して該同一撮像箇所についての１つの受光強度データを生成し、これにより生成した受光強度データを用いて上記動画像データを作成することを特徴とする低照度対応カメラ。 - 請求項１乃至６のいずれか１項に記載の低照度対応カメラにおいて、
上記動画像データ作成手段は、撮像可能範囲を分割して得られる複数の撮像箇所について、それぞれ、上記少なくとも２つの発光部のうち高い視認性が得られる発光部による照明下で得られる受光強度データを用いて上記動画像データを作成することを特徴とする低照度対応カメラ。 - 請求項６の低照度対応カメラにおいて、
複数のフレーム画像データそれぞれを格納可能な複数のメモリ領域を有するフレームメモリを有し、
上記動画像データ作成手段は、上記少なくとも２つの発光部による照明下でそれぞれ得られる受光強度データのうち最初に得られた受光強度データから生成したフレーム画像データが格納されているメモリ領域に対し、上記複数の撮像箇所に対応するメモリ部分のデータを、高い視認性が得られる他の発光部による照明下で得られる受光強度データから生成したフレーム画像データのものに置き換える処理を行うことを特徴とする低照度対応カメラ。 - 請求項１乃至７のいずれか１項に記載の低照度対応カメラにおいて、
上記発光手段は、発光波長帯域として赤外波長帯域を有するものであることを特徴とする低照度対応カメラ。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010140696A JP5500442B2 (ja) | 2010-06-21 | 2010-06-21 | 低照度対応カメラ |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010140696A JP5500442B2 (ja) | 2010-06-21 | 2010-06-21 | 低照度対応カメラ |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2012005054A true JP2012005054A (ja) | 2012-01-05 |
| JP2012005054A5 JP2012005054A5 (ja) | 2013-05-16 |
| JP5500442B2 JP5500442B2 (ja) | 2014-05-21 |
Family
ID=45536474
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010140696A Expired - Fee Related JP5500442B2 (ja) | 2010-06-21 | 2010-06-21 | 低照度対応カメラ |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5500442B2 (ja) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014010336A (ja) * | 2012-06-29 | 2014-01-20 | Panasonic Corp | 撮像装置およびその制御方法 |
| JP2015228284A (ja) * | 2014-05-30 | 2015-12-17 | 株式会社ユピテル | 光照射システム |
| KR20160108448A (ko) * | 2014-01-10 | 2016-09-19 | 아비질론 코포레이션 | 내면 반사를 감소시키기 위한 카메라 하우징 |
| JP2019061112A (ja) * | 2017-09-27 | 2019-04-18 | アイシン精機株式会社 | カメラモジュール |
| JP2019202726A (ja) * | 2018-05-25 | 2019-11-28 | 株式会社Ｓｕｂａｒｕ | 車両の乗員監視装置 |
| JP2020075700A (ja) * | 2019-09-24 | 2020-05-21 | 株式会社ユピテル | 光照射システム |
| JP2020078026A (ja) * | 2018-11-09 | 2020-05-21 | 株式会社日立製作所 | 画像撮影装置及び遠隔画像監視システム |
| FR3130710A1 (fr) * | 2021-12-20 | 2023-06-23 | Valeo Comfort And Driving Assistance | Dispositif d’observation d’un habitacle d’un véhicule |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11205666A (ja) * | 1997-11-13 | 1999-07-30 | Casio Comput Co Ltd | 電子カメラ装置および撮像方法 |
| JP2002027316A (ja) * | 2000-07-12 | 2002-01-25 | Nikon Corp | 電子カメラシステム、および照明シミュレーションプログラムを記録した記録媒体 |
| JP2007281937A (ja) * | 2006-04-07 | 2007-10-25 | Fujifilm Corp | 撮影システム、画像合成装置、および画像合成プログラム |
-
2010
- 2010-06-21 JP JP2010140696A patent/JP5500442B2/ja not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11205666A (ja) * | 1997-11-13 | 1999-07-30 | Casio Comput Co Ltd | 電子カメラ装置および撮像方法 |
| JP2002027316A (ja) * | 2000-07-12 | 2002-01-25 | Nikon Corp | 電子カメラシステム、および照明シミュレーションプログラムを記録した記録媒体 |
| JP2007281937A (ja) * | 2006-04-07 | 2007-10-25 | Fujifilm Corp | 撮影システム、画像合成装置、および画像合成プログラム |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014010336A (ja) * | 2012-06-29 | 2014-01-20 | Panasonic Corp | 撮像装置およびその制御方法 |
| KR102343519B1 (ko) | 2014-01-10 | 2021-12-24 | 아비질론 코포레이션 | 내면 반사를 감소시키기 위한 카메라 하우징 |
| KR20160108448A (ko) * | 2014-01-10 | 2016-09-19 | 아비질론 코포레이션 | 내면 반사를 감소시키기 위한 카메라 하우징 |
| JP2015228284A (ja) * | 2014-05-30 | 2015-12-17 | 株式会社ユピテル | 光照射システム |
| JP2019061112A (ja) * | 2017-09-27 | 2019-04-18 | アイシン精機株式会社 | カメラモジュール |
| JP2019202726A (ja) * | 2018-05-25 | 2019-11-28 | 株式会社Ｓｕｂａｒｕ | 車両の乗員監視装置 |
| JP7211673B2 (ja) | 2018-05-25 | 2023-01-24 | 株式会社Subaru | 車両の乗員監視装置 |
| JP2020078026A (ja) * | 2018-11-09 | 2020-05-21 | 株式会社日立製作所 | 画像撮影装置及び遠隔画像監視システム |
| JP7168418B2 (ja) | 2018-11-09 | 2022-11-09 | 株式会社日立製作所 | 画像撮影装置及び遠隔画像監視システム |
| JP2021121537A (ja) * | 2019-09-24 | 2021-08-26 | 株式会社ユピテル | 光照射システム |
| JP2020075700A (ja) * | 2019-09-24 | 2020-05-21 | 株式会社ユピテル | 光照射システム |
| FR3130710A1 (fr) * | 2021-12-20 | 2023-06-23 | Valeo Comfort And Driving Assistance | Dispositif d’observation d’un habitacle d’un véhicule |
| WO2023117542A1 (fr) * | 2021-12-20 | 2023-06-29 | Valeo Comfort And Driving Assistance | Dispositif d'observation d'un habitacle d'un véhicule |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5500442B2 (ja) | 2014-05-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5500442B2 (ja) | 低照度対応カメラ | |
| US7935928B2 (en) | Device and method for producing images | |
| US6631316B2 (en) | Image processing system to control vehicle headlamps or other vehicle equipment | |
| JP4491453B2 (ja) | 赤外画像と視覚画像を周辺部に依存して融合させることにより車両の周辺部を可視化するための方法及び装置 | |
| JP5441462B2 (ja) | 車両用撮像装置 | |
| US11178353B2 (en) | System and method for processing streamed video images to correct for flicker of amplitude-modulated lights | |
| US20080084165A1 (en) | Headlight Control Apparatus for Automobile | |
| JP2002240629A (ja) | 車載用ビデオカメラ | |
| JP2005170063A (ja) | 自動車用補助機器制御装置 | |
| US20120127313A1 (en) | Method and device for a vehicle-based illumination in insufficiently illuminated traffic environments | |
| US20130088598A1 (en) | Obstacle detection system and method, and obstacle detection apparatus | |
| JP5441450B2 (ja) | 車両用撮像装置 | |
| JP3793487B2 (ja) | 撮像システム | |
| JP2009018804A (ja) | 自動車用補助機器制御装置 | |
| JP4705923B2 (ja) | 暗視撮像装置、ヘッドライトモジュール、車両及び暗視撮像装置の制御方法 | |
| EP3605497A1 (en) | Illumination image capture device | |
| EP2709356B1 (en) | Method for operating a front camera of a motor vehicle considering the light of the headlight, corresponding device and motor vehicle | |
| JP2008230464A (ja) | 車載カメラ用自動露出装置 | |
| JP2004048345A (ja) | 撮像システム | |
| JP2012005051A (ja) | 低照度対応カメラ | |
| JP5436892B2 (ja) | 車両用撮像装置 | |
| JP7136055B2 (ja) | 露光制御装置 | |
| CN115769250A (zh) | 用于机动车的视觉系统 | |
| JP6939875B2 (ja) | 照明撮像装置 | |
| WO2019003361A1 (ja) | 撮像システム及び撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130328 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130328 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131122 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140117 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140214 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140227 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5500442 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |