JP2015192222A - 撮像装置及び撮像制御方法 - Google Patents

Abstract

【課題】周囲の環境の変化の有無に拘わらず、適正な露光条件を用いて映像を撮像する。
【解決手段】撮像装置は、映像を撮像する撮像部と、複数の異なる露光条件を用いて、各露光条件に応じて、撮像部により撮像された映像の画像データを生成する信号処理部と、露光条件毎に、信号処理部により生成された映像の画像データを画像認識する画像認識部と、画像認識部における露光条件毎の映像の画像データの画像認識結果を基に、撮像部における映像の撮像に適する露光条件を選択する選択部と、を備える。
【選択図】図１

Description

本発明は、露光条件を用いて撮像する撮像装置及び撮像制御方法に関する。

従来から、撮像装置（例えばデジタルカメラ）が被写体を撮像する際に、露光条件（即ち、カメラパラメータ）の異なる複数の画像を撮像して合成し、合成後の画像のダイナミックレンジを広げるための技術としてＨＤＲ（High Dynamic Range）技術が知られている。ＨＤＲ技術により、単一の露光条件では再現が困難な階調特性を有する画像が得られる。例えば、日中の屋外で撮像装置が被写体を撮像する際、撮像装置が撮像可能なダイナミックレンジよりも撮像環境のダイナミックレンジが広い場合がある。このような場合には、撮像装置が撮像可能なダイナミックレンジ外の階調情報が得られないので、撮像により得られた画像には白飛びや黒潰れという現象が発生する。ＨＤＲ技術により、このような現象の発生を抑制できる。

ここで、ＨＤＲ技術に関する先行技術として、例えば特許文献１に示す撮像装置が提案されている。

特許文献１に示す撮像装置は、露光条件の異なる複数の画像を撮像し、撮像により得られた複数の画像データをＨＤＲ合成してダイナミックレンジを広げたＨＤＲ画像データを生成する。また、撮像装置は、ＨＤＲ合成前の少なくとも１つの画像データから特徴量を抽出し、抽出された特徴量を基に、ＨＤＲ画像データに対して特殊効果を付加する。これにより、特許文献１に示す撮像装置は、ＨＤＲ効果、即ちダイナミックレンジが広がり、更に、特殊効果が付加された画像を得ることができる。

特開２０１３−９００９５号公報

特許文献１に示す撮像装置は、ＨＤＲモード撮像では、同一のタイミングに階調の異なる複数の画像を撮像し、これらの複数の画像を用いてＨＤＲ合成を行うことによってＨＤＲ画像データを生成する。このため、ある瞬間において撮像された複数の画像に基づいて生成されたＨＤＲ画像データは、ダイナミックレンジが広がり、白飛びや黒潰れの発生が抑制されていると考えられる。

しかし、例えば特許文献１に示す撮像装置が動画を撮像している場合には、周囲の環境の変化に応じて、適正な露光条件が得られた状態で撮像することが困難な場合がある。例えば、特許文献１の構成では、撮像装置を把持しているユーザが急に明るい場所に移動した場合、又は、ユーザの近くでランプ若しくは照明が急に点灯した場合等には、直前の状態と適正な露光条件が異なるので、適正な露光条件を用いた動画の撮像が困難となる場合がある。

本発明は、上述した従来の課題を解決するために、周囲の環境の変化の有無に拘わらず、適正な露光条件を用いて映像を撮像する撮像装置及び撮像制御方法を提供することを目的とする。

本発明は、映像を撮像する撮像部と、複数の異なる露光条件を用いて、各露光条件に応じて、前記撮像部により撮像された前記映像の画像データを生成する信号処理部と、前記露光条件毎に、前記信号処理部により生成された前記映像の画像データを画像認識する画像認識部と、前記画像認識部における前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記撮像部における映像の撮像に適する露光条件を選択する選択部と、を備える、撮像装置である。

また、本発明は、撮像装置における撮像制御方法であって、映像を撮像するステップと、複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、撮像制御方法である。

また、本発明は、ネットワークを介して接続された撮像装置と画像認識装置とにおける撮像制御方法であって、映像を撮像するステップと、複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、前記露光条件毎に生成された前記映像の画像データを前記撮像装置から送信するステップと、前記露光条件毎に生成された前記映像の画像データを前記画像認識装置において受信するステップと、前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、撮像制御方法である。

本発明によれば、周囲の環境の変化の有無に拘わらず、適正な露光条件を用いて映像を撮像することができる。

本実施形態の撮像装置の内部構成の一例を詳細に示すブロック図 ３つの露光条件のセットに関する概念説明図 各露光条件を用いた認識用画像データと、露光条件に対応するカメラパラメータのシャッター速度とイメージセンサのゲインとの調整幅の最大値及び最小値の一例とを示す説明図 本実施形態の撮像装置の詳細な動作手順の一例を示すフローチャート 本実施形態の撮像装置の詳細な動作手順の一例を示すタイムチャート 本変形例の撮像制御システムのシステム構成の一例を詳細に示すブロック図

以下、本発明に係る撮像装置及び撮像制御方法の実施形態（以下、「本実施形態」という）について、図面を参照して説明する。以下、本実施形態の撮像装置について説明し、必要に応じて、本発明に係る撮像制御方法について説明する。なお、本発明は、撮像装置の装置カテゴリの発明、撮像制御方法の方法カテゴリの発明に限定されず、撮像装置と後述する画像認識装置（例えばＰＣ（Personal Computer））とを含む撮像制御システムのシステムカテゴリの発明としても良い。

本実施形態の撮像装置は、所定位置（例えば天井面）に固定され、又は所定面から吊り下げられて支持される監視カメラである。また、本実施形態の撮像装置は、ユーザにより把持されて使用されるデジタルカメラでも良い。また、本実施形態の撮像装置は、移動体（例えば鉄道、飛行機、バス、船舶、自動車、バイク、自転車）に搭載された車載カメラとして使用されても良い。

本実施形態の撮像装置は、映像を撮像する撮像部と、複数の異なる撮像時の露光条件を用いて、各露光条件に応じて、撮像部により撮像された映像の画像データを生成する信号処理部と、露光条件毎に信号処理部が生成した映像の画像データを画像認識する画像認識部と、画像認識部が露光条件毎に映像の画像データを画像認識した画像認識結果を基に、撮像部における映像の撮像に適する露光条件を選択する。

以下、具体的な構成について、図１を参照して詳細に説明する。

図１は、本実施形態の撮像装置１０の内部構成の一例を詳細に示すブロック図である。図１に示す撮像装置１０は、撮像部ＩＭと、信号処理部１３と、出力切換部１５と、伝送用画像記憶バッファ１７と、認識用画像記憶バッファ１９と、画像圧縮部２１と、画像伝送部２３と、動き検出部２５と、画像認識部２７と、カメラパラメータ制御ドライバ２９とを含む構成である。なお、本実施形態の撮像装置１０の使用状況に応じて、動き検出部２５は必ずしも必要ではなく、省略されても良い。例えば、ＬＰＲ（Ｌｉｃｅｎｓｅｄ Ｐｌａｔｅ Ｒｅｃｏｇｎｉｔｉｏｎ：ナンバープレート認識）処理のように撮像装置１０が車両に取り付けられた場合又は移動中のユーザが撮像装置１０を所持している場合等、撮像装置１０自身が静止していない状況で使用される場合には、動き検出部２５は省略されても良い。なお、車両に取り付けられた撮像装置１０がＬＰＲ処理する場合には、ＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）操作信号により設定された範囲又は検出した前方の車両の下方範囲（例えばリアゲートガラスから下方の範囲）が対象となる。

撮像部ＩＭは、レンズＬＳと、絞り部ＩＲと、シャッター部ＳＨと、イメージセンサ１１とを含む。レンズＬＳは、被写体像をイメージセンサ１１の撮像面に向けて形成するために１つ以上の光学レンズを用いて構成され、例えば単焦レンズ、ズームレンズ、魚眼レンズ、又は所定度以上の広角な画角が得られるレンズである。

レンズＬＳの光軸の後方（図１の紙面右側。以下同様。）には、絞り部ＩＲが配置されている。絞り部ＩＲは、絞り値（口径）が可変であり、レンズＬＳを通過した被写体光の光量を制限する。絞り部ＩＲの絞り値は、本実施形態の撮像装置１０の撮像時の露光条件を構成するカメラパラメータの一例であり、後述するカメラパラメータ制御ドライバ２９により変更される。カメラパラメータと信号処理部１３との関係の詳細については後述する。

絞り部ＩＲの後方には、シャッター部ＳＨが配置されている。シャッター部ＳＨは、撮像装置１０の撮像時に所定のシャッター速度で開動作及び閉動作を交互に行って、絞り部ＩＲを通過した被写体光をイメージセンサ１１に通過させる。シャッター部ＳＨのシャッター速度は、本実施形態の撮像装置１０の撮像時の露光条件を構成するカメラパラメータの一例であり、後述するカメラパラメータ制御ドライバ２９により変更される。

イメージセンサ１１は、例えばＣＣＤ（Charged Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）の固体撮像素子を用いて構成され、イメージセンサ１１のゲインを用いて、イメージセンサ１１の撮像面に結像された被写体像を電気信号に光電変換する。イメージセンサ１１の出力は、信号処理部１３に入力される。

信号処理部１３は、露光条件Ａ信号処理部１３ａと、露光条件Ｂ信号処理部１３ｂと、露光条件Ｃ信号処理部１３ｃと、ＨＤＲ（High Dynamic Range）処理部１３ｄとを含む。信号処理部１３は、複数の異なる露光条件を用いて、各露光条件に応じて、イメージセンサ１１の光電変換により生成された被写体像の電気信号を用いて、所定フォーマットに従った映像の画像データとして、伝送用画像データと認識用画像データとを生成する。

伝送用画像データは、例えば撮像装置１０とネットワークを介して接続された外部機器に伝送（送信）されて、外部機器を操作するユーザの閲覧に供される。一方、認識用画像データは、後述する複数の異なる露光条件に従って個々に生成された画像データであり、画像認識部２７における画像認識に供される。なお、詳細は後述するが、画像認識部２７は、複数の異なる露光条件に従って生成された認識用画像データの画像認識結果を基に、撮像装置１０の周囲に適する露光条件を選択する。

具体的には、信号処理部１３は、例えば３つの異なる露光条件Ａ，Ｂ，Ｃを用いて、各露光条件Ａ，Ｂ，Ｃに従った認識用画像データを生成し、更に、これらの露光条件Ａ，Ｂ，Ｃに従って生成した認識用画像データを合成（所謂、ＨＤＲ合成）して伝送用画像データを生成する。なお、本実施形態では、説明を分かり易くするために、３つの異なる露光条件Ａ，Ｂ，Ｃを用いて説明するが、露光条件は３つに限定されず、２つ以上であれば良い。

露光条件Ａ信号処理部１３ａ，露光条件Ｂ信号処理部１３ｂ，露光条件Ｃ信号処理部１３ｃは、それぞれ同一の動作開始タイミングでは信号処理を行うのではなく、図５に示すように、パイプライン処理として、異なる動作開始タイミングで並列に信号処理を行う。また、本実施形態では、露光条件Ａ，Ｂ，Ｃ毎に、撮像装置１０のカメラパラメータ（例えば絞り値、シャッター速度、イメージセンサ１１のゲインのうち１つ又は複数の組み合わせ）が、カメラパラメータ制御ドライバ２９によりセット（設定）される。

従って、信号処理部１３では、露光条件Ａ信号処理部１３ａが露光条件Ａに従った認識用画像データを生成すると、カメラパラメータ制御ドライバ２９により、露光条件Ａに対応するカメラパラメータは露光条件Ｂに対応するカメラパラメータに変更される。

同様に、露光条件Ｂ信号処理部１３ｂが露光条件Ｂに従った認識用画像データを生成すると、カメラパラメータ制御ドライバ２９により、露光条件Ｂに対応するカメラパラメータは露光条件Ｃに対応するカメラパラメータに変更される。

更に、露光条件Ｃ信号処理部１３ｃが露光条件Ｃに従った認識用画像データを生成すると、カメラパラメータ制御ドライバ２９により、露光条件Ｃに対応するカメラパラメータは露光条件Ｃに対応するカメラパラメータに変更される。信号処理部１３では、このようなカメラパラメータのセットが繰り返し行われる。

露光条件Ａ信号処理部１３ａは、露光条件Ａに対応するカメラパラメータを用いて、露光条件Ａに従った認識用画像データ、即ち、所定の画像処理が施されていないＲＧＢ（Red Green Blue）形式又はＹＵＶ（輝度・色差）形式のＲＡＷデータと言われる画像データのフレームを生成する。

露光条件Ｂ信号処理部１３ｂは、露光条件Ｂに対応するカメラパラメータを用いて、露光条件Ｂに従った認識用画像データ、即ち、所定の画像処理が施されていないＲＧＢ（Red Green Blue）形式又はＹＵＶ（輝度・色差）形式のＲＡＷデータと言われる画像データのフレームを生成する。

露光条件Ｃ信号処理部１３ｃは、露光条件Ｃに対応するカメラパラメータを用いて、露光条件Ｃに従った認識用画像データ、即ち、所定の画像処理が施されていないＲＧＢ（Red Green Blue）形式又はＹＵＶ（輝度・色差）形式のＲＡＷデータと言われる画像データのフレームを生成する。

ＨＤＲ処理部１３ｄは、露光条件Ａ信号処理部１３ａ，露光条件Ｂ信号処理部１３ｂ，露光条件Ｃ信号処理部１３ｃにより生成された認識用画像データのフレームを合成し、例えば撮像装置１０とネットワークを介して接続された外部機器に対する伝送用画像データを生成する。ＨＤＲ処理部１３ｄにより生成された伝送用画像データは、ＨＤＲ効果により、単一の露光条件（例えば露光条件Ａ）に従って生成された認識用画像データに比べて、ダイナミックレンジが高くなっている。

これにより、信号処理部１３は、例えばＨＤＲ処理部１３ｄにより生成された伝送用画像データが外部機器のディスプレイに表示された場合には、人の視覚が有するダイナミックレンジにおいてカバーできるので、人の閲覧に適する明瞭性の高い画像データを得ることができる。

切換部の一例としての出力切換部１５は、外部信号（例えば撮像装置１０のユーザの入力操作によって生成されたＵＩ操作信号）に応じて、信号処理部１３の出力、即ち、単一の露光条件に従って生成された認識用画像データ又はＨＤＲ処理部１３ｄにより生成された伝送用画像データの出力を、伝送用画像記憶バッファ１７又は認識用画像記憶バッファ１９に切り換える。

なお、出力切換部１５は、上述した外部信号（例えば撮像装置１０のユーザの入力操作によって生成されたＵＩ操作信号）以外に、例えば時分割（異なるタイムスロット）で、認識用画像データ又は伝送用画像データの出力を伝送用画像記憶バッファ１７又は認識用画像記憶バッファ１９に切り換えても良い。ここでいうタイムスロットは、認識用画像データを用いた画像処理に供されるタイムスロットと、伝送用画像データを用いた画像伝送に供されるタイムスロットとの２つがある。

例えば、出力切換部１５は、単一の露光条件に従って生成された認識用画像データを伝送用画像記憶バッファ１７に出力して記憶させる。また、出力切換部１５は、ＨＤＲ処理部１３ｄにより生成された認識用画像データを認識用画像記憶バッファ１９に出力して記憶させる。なお、出力切換部１５は、単一の露光条件に従って生成された認識用画像データを伝送用画像記憶バッファ１７に出力して記憶させても良い。

第２の記憶部の一例としての伝送用画像記憶バッファ１７は、例えばＲＡＭ（Random Access Memory）又はフラッシュメモリ等の半導体メモリを用いて構成され、出力切換部１５から出力された伝送用画像データを記憶する。なお、伝送用画像記憶バッファ１７は、出力切換部１５から出力された認識用画像データを記憶しても良い。また、伝送用画像記憶バッファ１７は、撮像装置１０に内蔵されたハードディスク装置、又は、例えばＵＳＢ（Universal Serial Bus）端子を介して接続可能な外部接続媒体（例えばフラッシュメモリ等の半導体メモリ）でも良い。

第１の記憶部の一例としての認識用画像記憶バッファ１９は、例えばＲＡＭ又はフラッシュメモリ等の半導体メモリを用いて構成され、出力切換部１５から出力された認識用画像データを記憶する。この認識用画像データは、露光条件Ａ信号処理部１３ａ，露光条件Ｂ信号処理部１３ｂ，露光条件Ｃ信号処理部１３ｃにより生成された画像データ（ＲＡＷデータ）である。なお、認識用画像記憶バッファ１９は、撮像装置１０に内蔵されたハードディスク装置、又は、例えばＵＳＢ端子を介して接続可能な外部接続媒体（例えばフラッシュメモリ等の半導体メモリ）でも良い。

画像圧縮部２１は、例えばコーデックを用いて構成され、伝送用画像記憶バッファ１７に記憶された伝送用画像データ（又は認識用画像データ）を用いて、伝送用画像データ（又は認識用画像データ）の保存及び送信が可能なデータフォーマットに変換するための符号化データを生成する。画像圧縮部２１は、符号化データを画像伝送部２３に出力する。

画像伝送部２３は、画像圧縮部２１により生成された伝送用画像データ（又は認識用画像データ）の符号化データを用いて、例えば送信先である外部機器（不図示）に送信するためのパケット生成処理を行い、ネットワークを介して、符号化データのパケットを外部機器に送信する。これにより、撮像装置１０は、伝送用画像データ（又は認識用画像データ）の符号化データを外部機器に送信できる。

動き検出部２５は、例えばＤＳＰ（Digital Signal Processor）を用いて構成され、複数の異なる露光条件Ａ，Ｂ，Ｃに従って生成された認識用画像データを認識用画像記憶バッファ１９から読み出して、ＶＭＤ（Video Motion Detector）処理し、認識用画像データにおける動きの有無を検出する。

動き検出部２５は、ＶＭＤ処理を行った認識用画像データを認識用画像記憶バッファ１９に書き込み、認識用画像記憶バッファ１９の書き込み位置（アドレス）に関する情報を画像認識部２７に出力する。なお、上述したように、露光条件Ａ，Ｂ，Ｃに従った認識用画像データは異なるタイミングで並列な信号処理によって生成されるので、動き検出部２５におけるＶＭＤ処理も並列に行われる（図５参照）。

画像認識部２７は、例えばＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）又はＤＳＰを用いて構成され、動き検出部２５から出力されたアドレスに関する情報を基に、認識用画像記憶バッファ１９から、複数の異なる露光条件Ａ，Ｂ，Ｃに従って生成された認識用画像データを読み出して画像認識（例えばＦＤ（顔検出：Face Detection）、ＦＲ（顔認識：Face Recognition））を行う。なお、画像認識部２７は、動き検出部２５のＶＭＤ処理結果を用いて、認識用画像データの画像認識を行っても良い。

また、選択部の一例としての画像認識部２７は、複数の異なる露光条件Ａ，Ｂ，Ｃに従って生成された認識用画像データの画像認識結果を基に、最も良好な画像認識結果が得られた１つの認識用画像データに対応する露光条件を、撮像装置１０の周囲に適する露光条件として選択する。画像認識部２７は、選択された露光条件に関する情報をカメラパラメータ制御ドライバ２９に出力する。

カメラパラメータ制御ドライバ２９は、画像認識部２７の出力に応じて、絞り部ＩＲの絞り量とシャッター部ＳＨのシャッター速度とイメージセンサ１１のゲインとをそれぞれ調整する制御回路を有する。露光条件制御部の一例としてのカメラパラメータ制御ドライバ２９は、例えば画像認識部２７から出力された露光条件に関する情報を用いて、複数の異なる露光条件Ａ，Ｂ，Ｃに対応する各カメラパラメータを、絞り部ＩＲ，シャッター部ＳＨ，イメージセンサ１１に対してセットする。

なお、上述したように、本実施形態のカメラパラメータは、絞り部ＩＲの絞り量、シャッター部ＳＨのシャッター速度、及びイメージセンサ１１のゲインとするが、これらのうちいずれか１つだけでも良いし、複数のカメラパラメータからなる組み合わせ（例えば絞り量とシャッター速度、シャッター速度とゲイン、ゲインと絞り量）でも良い。

図２は、３つの露光条件Ａ，Ｂ，Ｃのセットに関する概念説明図である。詳細は図３を参照して説明するが、例えばシャッター速度は３０から３００まで調整可能であって、例えばイメージセンサ１１のゲインは０から４０まで調整可能とする。図２の下段において、点線ＢＴＬは、画像認識部２７における認識用画像データの画像認識が行われる度に選択された最も良好な露光条件を示す。このため、第１回目の画像認識では、最も良好な画像認識結果が得られた露光条件は露光条件Ｂであり、第２回目の画像認識では、最も良好な画像認識結果が得られた露光条件は露光条件Ａであり、以降同様にして、第ｎ回目の画像認識では、最も良好な画像認識結果が得られた露光条件は露光条件Ｂとする。

図２において、カメラパラメータ制御ドライバ２９は、例えば第１回目の画像認識によって露光条件Ｂが画像認識部２７により選択された場合には（時刻ｔ１）、露光条件Ａ，Ｂ，Ｃのうち、最良の露光条件Ｂが中心となるようにカメラパラメータをセットし、更に、露光条件Ｂに対応するカメラパラメータの一部又は全部について少し値を変更（調整）して他の露光条件（時刻ｔ１では露光条件Ａ，Ｃ）をセットする。時刻ｔ１，ｔ２，ｔ３，…，ｔｎは、カメラパラメータ制御ドライバ２９における露光条件のセットタイミングを示す。

また、例えばカメラパラメータ制御ドライバ２９は、例えば第２回目の画像認識によって露光条件Ａが画像認識部２７により選択された場合には（時刻ｔ２）、露光条件Ａ，Ｂ，Ｃのうち、最良の露光条件Ａが中心となるようにカメラパラメータをセットし、更に、露光条件Ａに対応するカメラパラメータの一部又は全部について少し値を変更（調整）して他の露光条件（時刻ｔ２では露光条件Ｂ，Ｃ）をセットする。以降、同様にして、露光条件Ａ，Ｂ，Ｃがセットされていく。

図３は、各露光条件Ａ，Ｂ，Ｃを用いた認識用画像データと、露光条件に対応するカメラパラメータのシャッター速度とイメージセンサ１１のゲインとの調整幅の最大値及び最小値の一例とを示す説明図である。

図３の中段に示すように、例えばシャッター速度は３０から３００まで調整可能であって、例えば調整幅の最大値は３０とし、調整幅の最小値は１０とする。即ち、シャッター速度は、３０から３００の間で、１０から３０の値毎に調整可能である。同様に、例えばイメージセンサ１１のゲインは０から４０まで調整可能であって、例えば調整幅の最大値は３とし、調整幅の最小値は１とする。即ち、イメージセンサ１１のゲインは、０から４０の間で、１から３の値毎に調整可能である。

また、図３の下段に示すように、露光条件Ａに対応するカメラパラメータは、イメージセンサ１１のゲインが０、シャッター速度が２００である。露光条件Ｂに対応するカメラパラメータは、イメージセンサ１１のゲインが０、シャッター速度が３０である。露光条件Ｃに対応するカメラパラメータは、イメージセンサ１１のゲインが４０、シャッター速度が３０である。

また、図３の上段には、露光条件Ａに対応するカメラパラメータの撮像によって生成された認識用画像データＩＭ２と、露光条件Ｂに対応するカメラパラメータの撮像によって生成された認識用画像データＩＭ３と、露光条件Ｃに対応するカメラパラメータの撮像によって生成された認識用画像データＩＭ４とが示されている。また、図３の上段には、露光条件Ａ，Ｂ，Ｃ以外の露光条件に対応するカメラパラメータ（例えば、シャッター速度が３００、イメージセンサ１１のゲインが０）の撮像によって生成された認識用画像データＩＭ１も示されている。

認識用画像データＩＭ１，ＩＭ２は、画像としての明度が低く、更に、コントラストが小さいので、画像認識部２７において良好な画像認識結果が得られる可能性は低い。一方、認識用画像データＩＭ４は、画像としての明度が高く、更に、コントラストが大きいので、画像認識部２７において良好な画像認識結果が得られる可能性はある。認識用画像データＩＭ３は、画像としての明度、コントラストがともに適正値であり、画像認識部２７において最も良好な画像認識結果が得られる。

次に、本実施形態の撮像装置１０の詳細な動作手順の一例について、図４を参照して説明する。図４は、本実施形態の撮像装置１０の詳細な動作手順の一例を示すフローチャートである。図４の説明では、撮像装置１０は、時分割（異なるタイムスロット）で、認識用画像データ又は伝送用画像データの出力を伝送用画像記憶バッファ１７又は認識用画像記憶バッファ１９に切り換えるとする。

図４において、認識用画像データを用いた画像認識に供されるタイムスロットではない場合には（Ｓ１、ＮＯ）、伝送用画像データを用いた画像伝送に供されるタイムスロットであるため、カメラパラメータ制御ドライバ２９は、伝送用画像データを得るための露光条件Ａ，Ｂ，Ｃのカメラパラメータを、絞り部ＩＲ、シャッター部ＳＨ及びイメージセンサ１１にセットする（Ｓ２）。伝送用画像データを用いた画像伝送に供されるタイムスロットでは、露光条件Ａ，Ｂ，Ｃのカメラパラメータは所定値（固定値）とする。ステップＳ２におけるカメラパラメータのセットが完了して、カメラパラメータの内容が絞り部ＩＲ、シャッター部ＳＨ及びイメージセンサ１１に反映されるまで、撮像装置１０は待機する（Ｓ３）。

ステップＳ３の後、撮像装置１０は、露光条件Ａ，Ｂ，Ｃに従って生成された認識用画像データを合成（ＨＤＲ合成）することによって伝送用画像データを生成し（Ｓ４）、出力切換部１５を介して、伝送用画像データを伝送用画像記憶バッファ１７に書き込む（Ｓ５）。更に、撮像装置１０は、伝送用画像記憶バッファ１７に書き込んだ伝送用画像データを圧縮して伝送用画像データの符号化データを生成して外部機器に伝送（送信）する（Ｓ６）。伝送用画像データを用いた画像伝送に供されるタイムスロットは、ステップＳ２からステップＳ６までの動作が完結する程度に予め設けられている。ステップＳ６の後、撮像装置１０の動作はステップＳ１に戻る。

一方、認識用画像データを用いた画像認識に供されるタイムスロットである場合には（Ｓ１、ＹＥＳ）、カメラパラメータ制御ドライバ２９は、認識用画像データを得るための露光条件Ａ，Ｂ，Ｃのカメラパラメータを、絞り部ＩＲ、シャッター部ＳＨ及びイメージセンサ１１にセットする（Ｓ７）。認識用画像データを用いた画像伝送に供されるタイムスロットでは、図２を参照して説明したように、露光条件Ａ，Ｂ，Ｃのカメラパラメータは可変値とする。ステップＳ７におけるカメラパラメータのセットが完了して、カメラパラメータの内容が絞り部ＩＲ、シャッター部ＳＨ及びイメージセンサ１１に反映されるまで、撮像装置１０は待機する（Ｓ８）。

ステップＳ８の後、撮像装置１０は、露光条件Ａ，Ｂ，Ｃに従った認識用画像データをそれぞれ生成し（Ｓ９）、出力切換部１５を介して、認識用画像データを認識用画像記憶バッファ１９に書き込む（Ｓ１０）。撮像装置１０は、露光条件Ａ，Ｂ，Ｃに従って生成されたそれぞれの認識用画像データを用いてＶＭＤ処理を行い、更に、露光条件Ａ，Ｂ，Ｃに従って生成されたそれぞれの認識用画像データを用いて画像認識を行う（Ｓ１１）。

撮像装置１０は、ステップＳ１１における画像認識において、露光条件Ａ，Ｂ，Ｃに従って生成されたそれぞれの認識用画像データのうち最も良好な画像認識結果が得られた認識用画像データに対応する露光条件のカメラパラメータを選択する（Ｓ１２）。ステップＳ１２の後、撮像装置１０の動作はステップＳ１に戻り、撮像装置１０の電源がＯＦＦされるまで、ステップＳ１において判断されたタイムスロット毎の動作が繰り返される。

図５は、本実施形態の撮像装置１０の詳細な動作手順の一例を示すタイムチャートである。図５では、イメージセンサ１１と、動き検出部２５と、カメラパラメータ制御ドライバ２９（図５では、単に「制御ドライバ」記載）と、画像認識部２７との時系列な動作手順が示されている。なお、図５に示す説明の前提として、イメージセンサ１１のゲインとシャッター部ＳＨのシャッター速度との各初期値が予めセットされているとする。また、図５では、信号処理部１３が伝送用画像データの１フレームを生成する時間を３３．３ｍｓとしている。

図５において、カメラパラメータ制御ドライバ２９は、認識用画像データを用いた画像認識に供される前回のタイムスロットにおいて選択された露光条件のカメラパラメータに応じて、複数の異なる３つの露光条件のカメラパラメータをセットする。矢印ＦＤＢａは、例えばカメラパラメータ制御ドライバ２９が露光条件Ａのカメラパラメータ（例えばゲイン）をイメージセンサ１１にセットするタイミングを示す。イメージセンサ１１では、区間ＩＭａにおいて、矢印ＦＤＢａによってセットされた露光条件Ａのカメラパラメータに応じた撮像が行われる。これにより、露光条件Ａに従った認識用画像データが生成される。

また、区間ＩＭａが終了する前に、カメラパラメータ制御ドライバ２９は、露光条件Ｂのカメラパラメータ（例えばゲイン）をイメージセンサ１１にセットする。矢印ＦＤＢｂは、例えばカメラパラメータ制御ドライバ２９が露光条件Ｂのカメラパラメータ（例えばゲイン）をイメージセンサ１１にセットするタイミングを示す。イメージセンサ１１では、区間ＩＭｂにおいて、矢印ＦＤＢｂによってセットされた露光条件Ｂのカメラパラメータに応じた撮像が行われる。これにより、露光条件Ｂに従った認識用画像データが生成される。

また、区間ＩＭｂが終了する前に、カメラパラメータ制御ドライバ２９は、露光条件Ｃのカメラパラメータ（例えばゲイン）をイメージセンサ１１にセットする。矢印ＦＤＢｃは、例えばカメラパラメータ制御ドライバ２９が露光条件Ｃのカメラパラメータ（例えばゲイン）をイメージセンサ１１にセットするタイミングを示す。イメージセンサ１１では、区間ＩＭｃにおいて、矢印ＦＤＢｃによってセットされた露光条件Ｃのカメラパラメータに応じた撮像が行われる。これにより、露光条件Ｃに従った認識用画像データが生成される。

区間ＩＭａの後、動き検出部２５は、区間ＶＤａ（例えば６６．６ｍｓ）において、区間ＩＭａの撮像によって生成された認識用画像データをＶＭＤ処理し、区間ＶＤａの終了後に、ＶＭＤ処理後の認識用画像データを認識用画像記憶バッファ１９に書き込むとともに、認識用画像記憶バッファ１９の書き込み位置（アドレス）に関する情報をカメラパラメータ制御ドライバ２９に出力する（矢印Ｂｆａ参照）。

区間ＩＭｂの後、動き検出部２５は、区間ＶＤｂ（同様に例えば６６．６ｍｓ）において、区間ＩＭｂの撮像によって生成された認識用画像データをＶＭＤ処理し、区間ＶＤｂの終了後に、ＶＭＤ処理後の認識用画像データを認識用画像記憶バッファ１９に書き込むとともに、認識用画像記憶バッファ１９の書き込み位置（アドレス）に関する情報をカメラパラメータ制御ドライバ２９に出力する（矢印Ｂｆｂ参照）。

区間ＩＭｃの後、動き検出部２５は、区間ＶＤｃ（同様に例えば６６．６ｍｓ）において、区間ＩＭｃの撮像によって生成された認識用画像データをＶＭＤ処理し、区間ＶＤｃの終了後に、ＶＭＤ処理後の認識用画像データを認識用画像記憶バッファ１９に書き込むとともに、認識用画像記憶バッファ１９の書き込み位置（アドレス）に関する情報をカメラパラメータ制御ドライバ２９に出力する（矢印Ｂｆｃ参照）。

区間ＶＤａの後、画像認識部２７は、区間Ｄｆａにおいて、カメラパラメータ制御ドライバ２９が保持するアドレスに関する情報を参照し、露光条件Ａに従って生成された認識用画像データを認識用画像記憶バッファ１９から取得する。画像認識部２７は、区間Ｄｆａの後に、区間ＦＤａにおいて、露光条件Ａに従って生成された認識用画像データの画像認識を行う。

区間ＦＤａの後、画像認識部２７は、区間Ｄｆｂにおいて、カメラパラメータ制御ドライバ２９が保持するアドレスに関する情報を参照し、露光条件Ｂに従って生成された認識用画像データを認識用画像記憶バッファ１９から取得する。画像認識部２７は、区間Ｄｆｂの後に、区間ＦＤｂにおいて、露光条件Ｂに従って生成された認識用画像データの画像認識を行う。

更に、区間ＦＤｂの後、画像認識部２７は、区間Ｄｆｃにおいて、カメラパラメータ制御ドライバ２９が保持するアドレスに関する情報を参照し、露光条件Ｃに従って生成された認識用画像データを認識用画像記憶バッファ１９から取得する。画像認識部２７は、区間Ｄｆｃの後に、同様な区間において、露光条件Ｃに従って生成された認識用画像データの画像認識を行う。

以上により、本実施形態の撮像装置１０は、複数の異なる露光条件Ａ，Ｂ，Ｃを用いて、各露光条件Ａ，Ｂ，Ｃのカメラパラメータに応じて、撮像部ＩＭにより撮像された認識用画像データを生成する。撮像装置１０は、露光条件Ａ，Ｂ，Ｃ毎に、信号処理部１３により生成された認識用画像データを画像認識し、露光条件Ａ，Ｂ，Ｃ毎の認識用画像データの画像認識結果を基に、撮像部ＩＭにおける映像の撮像に適する露光条件のカメラパラメータを選択して撮像部ＩＭにおけるカメラパラメータの変更（調整）のためにフィードバックする。

これにより、撮像装置１０は、複数の異なる露光条件Ａ，Ｂ，Ｃに従って撮像されたそれぞれの認識用画像データの画像認識結果の中で最も画像認識結果が良好な露光条件を選択するので、撮像装置１０を操作するユーザの周囲の環境が急に変化した場合でも急な変化が生じていない場合でも、適正な露光条件を用いて映像を撮像することができる。

また、撮像装置１０は、複数の異なる露光条件Ａ，Ｂ，Ｃ毎に生成された映像の認識用画像データを認識用画像記憶バッファ１９に個別に記憶することができる。

また、撮像装置１０は、複数の異なる露光条件Ａ，Ｂ，Ｃ毎に映像の認識用画像データを生成して認識用画像記憶バッファ１９に記憶し、また、映像の伝送用画像データを生成して伝送用画像記憶バッファ１７に記憶するので、認識用画像データと伝送用画像データとを区別して記憶する複数の記憶部を保持できる。

また、撮像装置１０は、複数の異なる露光条件Ａ，Ｂ，Ｃ毎に生成された映像の認識用画像データを合成（例えばＨＤＲ合成）することにより、映像の伝送用画像データを生成するので、単一の露光条件に従って生成された映像の画像データに比べて、ダイナミックレンジが拡大された画像データを生成して外部機器に伝送することができる。

また、撮像装置１０は、所定の入力操作（例えばユーザの入力操作）に応じて、認識用画像データを認識用画像記憶バッファ１９又は伝送用画像記憶バッファ１７への出力を簡易に切り換えることができる。例えばユーザがデータ容量の大きい認識用画像データを外部機器に伝送することを選んだ場合には、撮像装置１０は、ユーザの簡易な入力操作（例えばＵＩ（UI：User Interface）操作）により、認識用画像データを伝送用画像記憶バッファ１７に出力できる。

また、撮像装置１０は、周囲の環境の急な変化が生じた場合でも、複数の異なる露光条件Ａ，Ｂ，Ｃに従って生成された認識用画像データの画像認識結果を基に選択された露光条件（例えば露光条件Ｂ）に従って、撮像部ＩＭにおけるカメラパラメータを調整するので、周囲の環境に合った適正な露光条件を用いて、映像を撮像することができる。

また、撮像装置１０は、選択された露光条件（例えば露光条件Ｂ）に従って、所定のカメラパラメータとして、例えば絞り部ＩＲの絞り量、シャッター部ＳＨのシャッター速度及びイメージセンサ１１のゲインのうち、いずれか又は複数の組み合わせを調整することができる。

（本実施形態の変形例）
なお、本実施形態では、認識用画像データのサイズは非常に大きいので、認識用画像データを直接、ネットワークを介して送受信することは、撮像装置１０と外部機器との間のネットワークに相当の負荷がかかることになり、大きな伝送レートによる伝送が困難となり好ましくない。しかし、ネットワークの伝送技術が将来的に進歩してくると、非常に大きな認識用画像データを直接、ネットワークを介して送受信しても相当の負荷がかからないことも十分に考えられる。

そこで、本実施形態の変形例（以下、「本変形例」という）では、上述した本実施形態の撮像装置１０の動き検出部２５及び画像認識部２７の構成を、撮像装置１０とは異なる外部機器（例えば図６に示す画像認識装置５０）に設けた撮像制御システム１００について、図６を参照して説明する。図６は、本変形例の撮像制御システム１００のシステム構成の一例を詳細に示すブロック図である。

図６に示す撮像制御システム１００は、撮像装置１０Ａと、画像認識装置５０とがネットワークＮＷ１，ＮＷ２を介して接続された構成である。

図６に示す撮像装置１０Ａは、図１に示す撮像装置１０の構成のうち、動き検出部２５及び画像認識部２７が省略された構成であり、具体的には、撮像部ＩＭと、信号処理部１３と、出力切換部１５と、伝送用画像記憶バッファ１７と、認識用画像記憶バッファ１９と、画像圧縮部２１と、画像伝送部２３と、動き検出部２５と、画像認識部２７と、カメラパラメータ制御ドライバ２９とを含む構成である。

画像認識装置５０は、通信部３１と、動き検出部２５Ａと、画像認識部２７Ａとを含む構成である。本変形例では、撮像装置１０Ａ及び画像認識装置５０の各部の動作のうち、撮像装置１０の対応する各部の動作と同一の内容については説明を簡略化又は省略し、異なる内容について説明する。

具体的には、撮像装置１０Ａでは、画像伝送部２３Ａは、伝送用画像データ又は認識用画像データを伝送用画像記憶バッファ１７又は認識用画像記憶バッファ１９から読み出し、ネットワークＮＷ１を介して画像認識装置５０に伝送（送信）する。

画像認識装置５０では、通信部３１は、画像伝送部２３Ａから伝送（送信）された伝送用画像データ又は認識用画像データを受信して動き検出部２５Ａに出力する。画像認識部２７Ａは、上述した本実施形態と同様に、複数の異なる露光条件Ａ，Ｂ，Ｃ毎に生成されたそれぞれの認識用画像データを画像認識し、画像認識結果の中で最も良好な画像認識結果が得られた認識用画像データに対応する露光条件を選択し、選択された露光条件に関する情報を通信部３１に出力する。

通信部３１は、画像認識部２７Ａにより選択された露光条件に関する情報を、ネットワークＮＷ２を介して撮像装置１０Ａのカメラパラメータ制御ドライバ２９に送信する。なお、図６の複雑化を避けるために、通信部３１とカメラパラメータ制御ドライバ２９との間に、撮像装置１０Ａ内に設けられる通信部の図示を省略している。カメラパラメータ制御ドライバ２９の動作は上述した本実施形態のカメラパラメータ制御ドライバ２９と同一のため、説明を省略する。なお、ネットワークＮＷ１，ＮＷ２は同一のネットワークでも良いし、異なるネットワークでも良く、無線ネットワーク（例えば無線ＬＡＮ（Local Area Network）、無線ＷＡＮ（Wide Area Network））である。

以上により、本変形例の撮像制御システム１００では、撮像装置１０Ａは、複数の異なる露光条件Ａ，Ｂ，Ｃを用いて、各露光条件Ａ，Ｂ，Ｃに応じて、撮像部ＩＭにより撮像された認識用画像データを生成し、ネットワークＮＷ１を介して画像認識装置５０に送信する。画像認識装置５０は、露光条件Ａ，Ｂ，Ｃ毎に、撮像装置１０Ａから受信した認識用画像データを画像認識する。また、画像認識装置５０は、露光条件Ａ，Ｂ，Ｃ毎の認識用画像データの画像認識結果を基に、撮像装置１０Ａにおける映像の撮像に適する露光条件を選択して撮像部ＩＭにおけるカメラパラメータの変更（調整）のためにフィードバックする。

これにより、撮像装置１０Ａは、複数の異なる露光条件Ａ，Ｂ，Ｃに従って撮像されたそれぞれの認識用画像データの画像認識処理を画像認識装置５０に行わせることができるので、画像認識処理に要する回路構成を削減できる。

また、画像認識装置５０は、ネットワークＮＷ１を介して接続された撮像装置１０Ａから送信された複数の認識用画像データに対する画像認識結果の中で最も画像認識結果が良好な露光条件を選択し、選択結果（即ち、選択された露光条件に関する情報）を撮像装置１０Ａに返信する。従って、撮像制御システム１００では、撮像装置１０Ａは、周囲の環境が急に変化した場合でも急な変化が生じていない場合でも、例えば遠隔地に設置された画像認識装置５０により選択された適正な露光条件に関する情報をリアルタイムに受信すれば、周囲の環境に合わせた露光条件を用いて映像を撮像することができる。

以下、上述した本発明に係る撮像装置及び撮像制御方法の構成、作用及び効果を説明する。

本発明の一実施形態は、映像を撮像する撮像部と、複数の異なる露光条件を用いて、各露光条件に応じて、前記撮像部により撮像された前記映像の画像データを生成する信号処理部と、前記露光条件毎に、前記信号処理部により生成された前記映像の画像データを画像認識する画像認識部と、前記画像認識部における前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記撮像部における映像の撮像に適する露光条件を選択する選択部と、を備える、撮像装置である。

この構成では、信号処理部は、複数の異なる露光条件を用いて、各露光条件に応じて、撮像部により撮像された映像の画像データを生成する。画像認識部は、露光条件毎に、信号処理部により生成された映像の画像データを画像認識する。選択部は、画像認識部における露光条件毎の画像データの画像認識結果を基に、撮像部における映像の撮像に適する露光条件を選択する。

これにより、撮像装置は、複数の異なる露光条件に従って撮像されたそれぞれの画像データの画像認識結果の中で最も画像認識結果が良好な露光条件を選択するので、周囲の環境が急に変化した場合でも急な変化が生じていない場合でも、適正な露光条件を用いて映像を撮像することができる。

また、本発明の一実施形態は、前記露光条件毎に、前記信号処理部により生成された前記映像の画像データを記憶する第１の記憶部、を更に備える、撮像装置である。

この構成によれば、撮像装置は、複数の異なる露光条件毎に生成された映像の画像データを第１の記憶部（認識用画像記憶バッファ１９）に記憶できる。

また、本発明の一実施形態は、前記信号処理部は、前記露光条件毎に、前記映像の認識用画像データを生成して第１の記憶部に記憶し、前記撮像部により撮像された前記映像の伝送用画像データを生成して前記第１の記憶部とは異なる第２の記憶部に記憶する、撮像装置である。

この構成によれば、撮像装置は、複数の異なる露光条件毎に映像の認識用画像データを生成して第１の記憶部（認識用画像記憶バッファ１９）に記憶し、また、映像の伝送用画像データを生成して第２の記憶部（伝送用画像記憶バッファ１７）に記憶するので、認識用画像データと伝送用画像データとを区別して記憶する複数の記憶部を保持できる。

また、本発明の一実施形態は、前記信号処理部は、前記露光条件毎に生成された前記映像の認識用画像データを合成することで、前記映像の伝送用画像データを生成する、撮像装置である。

この構成によれば、撮像装置は、複数の異なる露光条件毎に生成された映像の認識用画像データを合成（例えばＨＤＲ合成）することにより、映像の伝送用画像データを生成するので、単一の露光条件に従って生成された映像の画像データに比べて、ダイナミックレンジが拡大された画像データを生成することができる。

また、本発明の一実施形態は、所定の入力操作に応じて、前記映像の認識用画像データの前記第１の記憶部又は前記第２の記憶部への出力を切り換える切換部、を更に備える、撮像装置である。

この構成によれば、撮像装置は、所定の入力操作（例えばユーザの入力操作）に応じて、映像の認識用画像データを第１の記憶部（認識用画像記憶バッファ１９）又は第２の記憶部（伝送用画像記憶バッファ１７）への出力を簡易に切り換えることができる。例えばユーザがデータ容量の大きい認識用画像データを外部機器に伝送することを選んだ場合には、撮像装置は、ユーザの簡易な入力操作（例えばＵＩ操作）により、認識用画像データを第２の記憶部（伝送用画像記憶バッファ１７）に出力できる。

また、本発明の一実施形態は、前記選択部により選択された前記露光条件に応じて、前記撮像部における所定の撮像パラメータを調整する露光条件制御部、を更に備える、撮像装置である。

この構成によれば、撮像装置は、周囲の環境の急な変化が生じた場合でも、複数の異なる露光条件に従って生成された認識用画像データの画像認識結果を基に選択された露光条件に従って、撮像部における所定の撮像パラメータを調整するので、周囲の環境に合った適正な露光条件を用いて、映像を撮像することができる。

また、本発明の一実施形態は、前記撮像部は、レンズと、前記レンズを通過する光量を調整する絞り部と、撮像時に開動作及び閉動作を交互に行うシャッター部と、前記シャッターを通過した光が撮像面に結像された光学像を光電変換するイメージセンサと、を含み、前記所定の撮像パラメータは、前記絞り部の絞り量、前記シャッター部のシャッター速度及び前記イメージセンサの光電変換時のゲインのうち、いずれか又は複数の組み合わせである、撮像装置である。

この構成によれば、撮像装置は、選択された露光条件に従って、所定の撮像パラメータとして、例えば絞り部の絞り量、シャッター部のシャッター速度及びイメージセンサのゲインのうち、いずれか又は複数の組み合わせを調整することができる。

また、本発明の一実施形態は、撮像装置における撮像制御方法であって、映像を撮像するステップと、複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、撮像制御方法である。

この方法によれば、信号処理部は、複数の異なる露光条件を用いて、各露光条件に応じて、撮像部により撮像された映像の画像データを生成する。画像認識部は、露光条件毎に、信号処理部により生成された映像の画像データを画像認識する。選択部は、画像認識部における露光条件毎の画像データの画像認識結果を基に、撮像部における映像の撮像に適する露光条件を選択する。

これにより、撮像装置は、複数の異なる露光条件に従って撮像されたそれぞれの画像データの画像認識結果の中で最も画像認識結果が良好な露光条件を選択するので、周囲の環境が急に変化した場合でも急な変化が生じていない場合でも、適正な露光条件を用いて映像を撮像することができる。

また、本発明の一実施形態は、ネットワークを介して接続された撮像装置と画像認識装置とにおける撮像制御方法であって、映像を撮像するステップと、複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、前記露光条件毎に生成された前記映像の画像データを前記撮像装置から送信するステップと、前記露光条件毎に生成された前記映像の画像データを前記画像認識装置において受信するステップと、前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、撮像制御方法である。

この方法によれば、撮像装置は、複数の異なる露光条件を用いて、各露光条件に応じて、撮像部により撮像された映像の画像データを生成して画像認識装置に送信する。画像認識装置は、露光条件毎に、撮像装置から受信した映像の画像データを画像認識する。また、画像認識装置は、露光条件毎の画像データの画像認識結果を基に、撮像部における映像の撮像に適する露光条件を選択する。

これにより、撮像装置は、複数の異なる露光条件に従って撮像されたそれぞれの画像データの画像認識処理を画像認識装置に行わせることができるので、画像認識処理に要する回路構成を削減できる。また、画像認識装置は、ネットワークを介して接続された撮像装置から送信された複数の認識用画像データに対する画像認識結果の中で最も画像認識結果が良好な露光条件を選択し、選択結果を撮像装置に返信する。従って、撮像制御システムでは、撮像装置は、周囲の環境が急に変化した場合でも急な変化が生じていない場合でも、例えば遠隔地に設置された画像認識装置により選択された適正な露光条件に関する情報をリアルタイムに受信すれば、周囲の環境に合わせた露光条件を用いて映像を撮像することができる。

本発明は、周囲の環境の変化の有無に拘わらず、適正な露光条件を用いて映像を撮像する撮像装置及び撮像制御方法として有用である。

１０、１０Ａ 撮像装置
１１ イメージセンサ
１３ 信号処理部
１３ａ 露光条件Ａ信号処理部
１３ｂ 露光条件Ｂ信号処理部
１３ｃ 露光条件Ｃ信号処理部
１３ｄ ＨＤＲ処理部
１５ 出力切換部
１７ 伝送用画像記憶バッファ
１９ 認識用画像記憶バッファ
２１ 画像圧縮部
２３ 画像伝送部
２５、２５Ａ 動き検出部
２７、２７Ａ 画像認識部
２９ カメラパラメータ制御ドライバ
３１ 通信部
５０ ＰＣ
１００ 撮像制御システム
ＩＲ 絞り部
ＬＳ レンズ
ＳＨ シャッター

Claims (9)

1. 映像を撮像する撮像部と、
   複数の異なる露光条件を用いて、各露光条件に応じて、前記撮像部により撮像された前記映像の画像データを生成する信号処理部と、
   前記露光条件毎に、前記信号処理部により生成された前記映像の画像データを画像認識する画像認識部と、
   前記画像認識部における前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記撮像部における映像の撮像に適する露光条件を選択する選択部と、を備える、
   撮像装置。
2. 請求項１に記載の撮像装置であって、
   前記露光条件毎に、前記信号処理部により生成された前記映像の画像データを記憶する第１の記憶部、を更に備える、
   撮像装置。
3. 請求項１に記載の撮像装置であって、
   前記信号処理部は、
   前記露光条件毎に、前記映像の認識用画像データを生成して第１の記憶部に記憶し、
   前記撮像部により撮像された前記映像の伝送用画像データを生成して前記第１の記憶部とは異なる第２の記憶部に記憶する、
   撮像装置。
4. 請求項３に記載の撮像装置であって、
   前記信号処理部は、
   前記露光条件毎に生成された前記映像の認識用画像データを合成することで、前記映像の伝送用画像データを生成する、
   撮像装置。
5. 請求項３又は４に記載の撮像装置であって、
   所定の入力操作に応じて、前記映像の認識用画像データの前記第１の記憶部又は前記第２の記憶部への出力を切り換える切換部、を更に備える、
   撮像装置。
6. 請求項１〜５のうちいずれか一項に記載の撮像装置であって、
   前記選択部により選択された前記露光条件に応じて、前記撮像部における所定の撮像パラメータを調整する露光条件制御部、を更に備える、
   撮像装置。
7. 請求項６に記載の撮像装置であって、
   前記撮像部は、
   レンズと、前記レンズを通過する光量を調整する絞り部と、撮像時に開動作及び閉動作を交互に行うシャッター部と、前記シャッター部を通過した光が撮像面に結像された光学像を光電変換するイメージセンサと、を含み、
   前記所定の撮像パラメータは、
   前記絞り部の絞り量、前記シャッター部のシャッター速度及び前記イメージセンサの光電変換時のゲインのうち、いずれか又は複数の組み合わせである、
   撮像装置。
8. 撮像装置における撮像制御方法であって、
   映像を撮像するステップと、
   複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、
   前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、
   前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、
   撮像制御方法。
9. ネットワークを介して接続された撮像装置と画像認識装置とにおける撮像制御方法であって、
   映像を撮像するステップと、
   複数の異なる露光条件を用いて、各露光条件に応じて、撮像された前記映像の画像データを生成するステップと、
   前記露光条件毎に生成された前記映像の画像データを前記撮像装置から送信するステップと、
   前記露光条件毎に生成された前記映像の画像データを前記画像認識装置において受信するステップと、
   前記露光条件毎に生成された前記映像の画像データを画像認識するステップと、
   前記露光条件毎の前記映像の画像データの画像認識結果を基に、前記映像の撮像に適する露光条件を選択するステップと、を有する、
   撮像制御方法。