JP2023129847A - 車載カメラシステム、および、車載カメラの露光条件決定方法 - Google Patents

Abstract

【課題】 正確な３次元情報と物標認識情報を、車速の影響を受けることなく取得できる、車載カメラシステムを提供する。【解決手段】 視野領域の少なくとも一部が重複したステレオ視領域を有するように自車両に配置された複数のカメラと、自車両の挙動に基づいて、複数のカメラが撮像したステレオ視領域の特徴点の移動量を求める移動量演算部と、移動量が閾値以下となるように複数のカメラの第１露光条件を決定する第１露光条件決定部と、車外の外光条件に基づいて、複数のカメラの第２露光条件を決定する第２露光条件決定部と、第１露光条件で撮像した画像を用いて、ステレオ視領域の３次元情報を取得する３次元情報取得部と、第２露光条件で撮像した画像を用いて、自車両周辺の物標を認識する物標認識部と、複数のカメラの各々の露光条件を第１露光条件または第２露光条件に切り替える露光制御部と、を備える車載カメラシステム。【選択図】 図５

Description

本発明は、複数のカメラを併用して自車両の外界を認識する、車載カメラシステム、および、車載カメラの露光条件決定方法に関する。

運転支援システムや自動運転システムの技術要素として、ＡＣＣ（Adaptive Cruise Control）や、ＡＥＢＳ（Advanced Emergency Braking System）や、ＬＫＡＳ（Lane Keeping Assist System）などの車両制御技術が知られている。これらの車両制御技術を実現する具体的な構成として、車載カメラで撮像した画像に基づいて自車両周辺の物標（例えば、他車両、歩行者、サイクリスト、交通信号機、交通標識、白線、障害物など）を常時認識・追跡することで、先行車に追従走行したり、緊急ブレーキを発動したり、走行車線をはみ出さぬよう操舵制御したりするものが知られている。また、自車両の前後だけでなく側方も監視できるように複数のカメラを配置することで、自動駐車を可能にした車両も普及しつつある。

ここで、車載カメラの露光時間を制御する従来技術して、特許文献１が知られている。同文献の要約書には、課題として「車両の走行状態に配慮して、車両周辺の画像を撮像して表示する。」と記載されており、解決手段として「車載カメラ制御装置は、車載カメラが搭載された車両の車速を取得する車速取得手段と、車速取得手段で取得した車速に応じて、車載カメラの露光時間を変更するカメラ制御手段とを備える。」と記載されている。また、同文献の段落００３６には「車両が高速に移動しているときは、鮮明な画像ではないものの、リアルタイムに車両周辺の画像を表示することができる。」との記載がある。

特開２００８－１７４０７８号公報

上記のように、特許文献１の露光時間制御は、自車両周辺の画像をリアルタイム表示するために、車速に応じて車載カメラの露光時間を一律に変更するものであるが、この露光時間制御によっては、高速移動時に鮮明な画像を取得できないという問題があった。従って、特許文献１の技術で撮像された不鮮明な画像を利用すると、自車両周辺の物標を正確に認識することができず、ＡＣＣ、ＡＥＢＳ、ＬＫＡＳ等の車両制御を適切に実現できない可能性があった。

そこで、本発明では、距離測定用の露光制御と物標認識用の露光制御を時分割に切り替えて撮像することで、ＡＣＣ、ＡＥＢＳ、ＬＫＡＳ等の車両制御に必要とされる、正確な３次元情報と物標認識情報を、車速の影響を受けることなく取得できる、車載カメラシステム、および、車載カメラの露光条件決定方法を提供することを目的とする。

上記課題を解決するため、本発明の車載カメラシステムは、視野領域の少なくとも一部が重複したステレオ視領域を有するように自車両に配置された複数のカメラと、自車両の挙動に基づいて、前記複数のカメラが撮像した前記ステレオ視領域の特徴点の移動量を求める移動量演算部と、前記移動量が閾値以下となるように前記複数のカメラの第１露光条件を決定する第１露光条件決定部と、車外の外光条件に基づいて、前記複数のカメラの第２露光条件を決定する第２露光条件決定部と、前記第１露光条件で撮像した画像を用いて、前記ステレオ視領域の３次元情報を取得する３次元情報取得部と、前記第２露光条件で撮像した画像を用いて、自車両周辺の物標を認識する物標認識部と、前記複数のカメラの各々の露光条件を前記第１露光条件または前記第２露光条件に切り替える露光制御部と、を備える車載カメラシステムとした。

本発明の車載カメラシステム、および、車載カメラの露光条件決定方法によれば、距離測定用の露光制御と物標認識用の露光制御を時分割に切り替えて撮像することで、ＡＣＣ、ＡＥＢＳ、ＬＫＡＳ等の車両制御に必要とされる、正確な３次元情報と物標認識情報を、車速の影響を受けることなく取得することができる。

一実施例の車載カメラシステムの機能ブロック図。 各カメラの視野領域とステレオ視領域の関係を示す上面図。 図１のカメラ制御部の機能ブロック図。 一実施例の車載カメラシステムの処理フローチャート。 ３次元情報の演算ライン、および、特徴点移動量の演算領域の具体例。

以下、本発明の一実施例に係る車載カメラシステム１００を、図面を用いて説明する。

図１は、車載カメラシステム１００の機能ブロック図である。この車載カメラシステム１００は、自車両１に搭載されたシステムであり、演算処理装置１０と、カメラ２０（２１～２６）と、車両制御装置３０と、投光器４０を備える。以下、カメラ２０、車両制御装置３０、投光器４０の概説後、演算処理装置１０を詳細に説明する。

＜カメラ２０＞
カメラ２０は、自車両周辺を撮像して撮像データＰを出力するセンサであり、本実施例の自車両１には、車外全周を撮像できるように複数のカメラ２０（２１～２６）が設置されている。なお、各カメラは、撮像範囲の少なくとも一部が他カメラの撮像範囲と重複するように設置されているものとする。

図２は、自車両１の上面図であり、各カメラの視野領域Ｃと、ステレオ視領域Ｖの関係を例示した図である。本実施例の自車両１には、実線で示す前方の視野領域Ｃ_２１を撮像する前方カメラ２１と、一点鎖線で示す右前の視野領域Ｃ_２２を撮像する右前カメラ２２と、破線で示す右後の視野領域Ｃ_２３を撮像する右後カメラ２３と、実線で示す後方の視野領域Ｃ_２４を撮像する後方カメラ２４と、一点鎖線で示す左後の視野領域Ｃ_２５を撮像する左後カメラ２５と、破線で示す左前の視野領域Ｃ_２６を撮像する左前カメラ２６が設置されており、これら六つのカメラ２０によって、車外全周を撮像することができる。

複数の視野領域Ｃが重複する領域では、同一物体を複数の視線方向から撮像（ステレオ撮像）でき、周知のステレオマッチングの技術を用いれば撮像物（自車両周辺の移動体、静止物、路面など）の３次元情報を生成できる。そのため、視野領域Ｃが重複する領域を、ステレオ視領域Ｖと称する。

なお、図２では、前後左右のステレオ視領域Ｖ_１～Ｖ_４を例示しているが、ステレオ視領域Ｖの数や方向はこの例に限定されない。また、図２は、各カメラの視野領域Ｃを単純化して図示したものであり、各カメラの実際の撮像可能距離は、図示する大小関係である必要はない。一例を挙げれば、各カメラの実際の撮像可能距離は、前方カメラ２１と後方カメラ２４が２００ｍ程度であり、その他のカメラが５０ｍ程度である。この場合、ステレオ視領域Ｖの撮像可能距離は、５０ｍ程度となる。

＜車両制御装置３０＞
車両制御装置３０は、後述する物標測距の結果などに基づいて、図示しない、操舵系、駆動系、制動系を制御することで、ＡＣＣ、ＡＥＢＳ、ＬＫＡＳ、自動駐車等の車両制御を実行させる制御装置である。なお、車両制御装置３０は、後述するカメラ制御部１２に、自車両１の車速情報を送信したり、所望の情報（３次元地図、自車姿勢、物標認識、物標測距）の優先送信を要請したりもする。

＜投光器４０＞
投光器４０は、各カメラでより鮮明な画像データＰを撮像できるようにするため、ステレオ視領域Ｖの範囲内に可視光または近赤外線を所望の光量で投光する装置である。なお、自車両１の外界が十分に明るい場合は、投光器４０を使用しなくても良い。また、投光器４０を使用する場合も、常時投光は必要無く、各カメラの撮像タイミングと同期して投光すれば良い。

＜演算処理装置１０＞
演算処理装置１０は、カメラ２０の出力（画像データＰ）に基づいて、自車両周辺の３次元情報を取得したり、自車姿勢を推定したり、自車両周辺の物標（例えば、他車両、歩行者、サイクリスト、交通信号機、交通標識、白線、障害物など）を認識したり、物標までの距離を計測したりするための装置である。なお、この演算処理装置１０は、具体的には、ＣＰＵ等の演算装置、半導体メモリ等の記憶装置、および、通信装置などのハードウェアを備えたコンピュータである。そして、演算装置が所定のプログラムを実行することで、後述するカメラ制御部１２等の各機能部を実現するが、以下では、このような周知技術を適宜省略しながら説明する。

本実施例の演算処理装置１０は、図１に示すように、センサインターフェース１１、カメラ制御部１２、投光器制御部１３、画像分配部１４、特徴点移動量演算部１５、３次元情報取得部１６、３次元地図記憶部１７、自車姿勢推定部１８、物標認識部１９、物標測距部１ａを備えている。以下、各部の機能を順次説明する。

＜＜センサインターフェース１１＞＞
センサインターフェース１１は、カメラ制御部１２の指令をカメラ２０（２１～２６）に送信するとともに、カメラ２０（２１～２６）から画像データＰを受信し、画像分配部１４に送信する機能部である。これにより、各カメラは、カメラ制御部１２が設定した露光条件で画像データＰを撮像することができる。なお、露光条件の詳細は後述する。

＜＜カメラ制御部１２＞＞
カメラ制御部１２は、センサインターフェース１１を介してカメラ２０（２１～２６）を制御するとともに、投光器制御部１３を介して投光器４０を制御する機能部である。このカメラ制御部１２は、図３に示すように、基準露光条件記憶部１２ａ、第１露光条件決定部１２ｂ、外光条件判定部１２ｃ、第２露光条件決定部１２ｄ、露光制御部１２ｅ、撮像制御部１２ｆ、投光条件決定部１２ｇを有している。以下、各部を詳細に説明する。

基準露光条件記憶部１２ａは、演算処理装置１０の起動時、または、車速や車外環境が大きく変化した場合に、各カメラに設定する基準露光条件（基準露光時間）を記憶した機能部である。

第１露光条件決定部１２ｂは、後述する特徴点移動量演算部１５から受信した特徴点移動量、または、車両制御装置３０から受信した車速情報に基づいて、第１露光条件を決定する機能部である。この第１露光条件は、３次元情報を取得するための画像データＰ１を撮像する際の露光時間を規定したものであり、特徴点移動量が所定の閾値（例えば、２画素）以下となるような露光時間、あるいは、車速に反比例する露光時間が設定される。

外光条件判定部１２ｃは、後述する画像分配部１４から受信した画像データＰの輝度情報に基づいて、車外の外光条件を判定する機能部である。なお、外光条件を判定する際には、例えば、各カメラに設定されたゲインと、画像データＰ内の平均輝度を考慮する。従って、画像データＰの平均輝度が同等であっても、ゲインが高ければ外界が暗いと判定され、ゲインが低ければ外界が明るいと判定される。

第２露光条件決定部１２ｄは、外光条件判定部１２ｃで判定した外光条件に基づいて、第２露光条件を決定する機能部である。この第２露光条件は、物標を認識するための画像データＰ２を撮像する際の露光時間を規定したものであり、外光量に略反比例する露光時間が設定される。なお、外光量と第２露光条件の関係は、所定の演算式から求めても良いし、予め用意したテーブルを参照しても良い。

なお、第１露光条件の露光時間と、第２露光条件の露光時間を比較すると、基本的には、前者が短く、後者が長い関係にある。従って、第１露光条件下で撮像された画像データＰ１には、画像が暗いため物標の認識には適さないという欠点があるが、サンプリング周期が短いため自車両周辺の環境変化を素早く検知できるという利点がある。一方、第２露光条件下で撮像された画像データＰ２には、サンプリング周期が長いため自車両周辺の環境変化を素早く検知するには適さないという欠点があるが、画像が明るいため物標を正確に認識できるという利点がある。

露光制御部１２ｅは、処理手順や、車速や、認識した物標の種別・距離・衝突可能性等に応じて、基準露光条件、第１露光条件、第２露光条件の何れかを選択して、撮像制御部１２ｆに送信する機能部である。なお、本実施例では、各カメラの露光条件を、その時々の各カメラの優先用途を考慮しつつも時分割で設定するため、各カメラからは３次元情報取得用の画像データＰ１と物標認識用の画像データＰ２が所定比率で出力されることとなる。例えば、自車両１が高速走行中である場合や衝突可能性のある物標を検知した場合などのように、カメラ２０の優先用途が３次元情報の取得であれば、第１露光条件の使用割合を高めて多数の画像データＰ１と少数の画像データＰ２を撮像すれば良いし、物標認識であれば、第２露光条件の使用割合を高めて少数の画像データＰ１と多数の画像データＰ２を撮像すれば良い。

また、車速を考慮して露光条件を設定する場合であれば、次のように露光条件が設定される。例えば、自車両１が一定速度（例えば、１０ｋｍ／ｈ）以上で移動中の場合は、各カメラに対し、３次元情報取得用の第１露光条件を優先して設定する。具体的には、各カメラに第１露光条件を設定する割合（期間または回数）を高め、第２露光条件を設定する割合（期間または回数）を抑制する。逆に、自車両１が一定速度未満で移動中の場合は、各カメラに対し、物標認識用の第２露光条件を優先して設定する。

ここで、同じステレオ視領域Ｖに対応するカメラ群に対しては同じ露光条件が設定する必要があるが、ステレオ視領域Ｖが異なるカメラ間であれば異なる露光条件を同期時に設定しても良い。例えば、自車両１が前進中の場合は、前方のステレオ視領域Ｖ_１に対応するカメラ群（前方カメラ２１、右前カメラ２２、左前カメラ２６）に、３次元情報取得用の第１露光条件を優先設定し、後方のステレオ視領域Ｖ_３に対応するカメラ群（右後カメラ２３、後方カメラ２４、左後カメラ２５）に、物標認識用の第２露光条件を優先設定しても良い。

撮像制御部１２ｆは、露光制御部１２ｅで設定された露光条件を用いて、各カメラの撮像タイミングを制御する機能部である。ここで、同じステレオ視領域Ｖに対応するカメラ群は同期して撮像する必要があるが、ステレオ視領域Ｖが異なるカメラ間であれば撮像タイミングを異ならせても良い。従って、例えば、前方のステレオ視領域Ｖ_１に対応するカメラ群（２１、２２、２６）と、後方のステレオ視領域Ｖ_３に対応するカメラ群（２３、２４、２５）に同じ撮像周期（例えば、５０ｍｓ）が設定された場合、前者と後者の撮像タイミングに、例えば半周期分の時間差（例えば、２５ｍｓ）を設けても良い。これにより、車外撮像するサンプリング周期を実質的に半減させることができる。

投光条件決定部１２ｇは、撮像制御部１２ｆの出力に基づいて、投光器４０の投光タイミングと投光量を決定し、投光器制御部１３に送信する機能部である。上記したように、投光器４０は、各カメラの撮像中に投光していれば足りるので、各カメラが撮像していない期間中は投光しないように制御すれば、投光器４０での消費電力を抑制することができる。

＜＜投光器制御部１３＞＞
投光器制御部１３は、投光条件決定部１２ｇで決定した投光タイミング、投光量に従って、投光器４０の投光を制御する機能部である。

＜＜画像分配部１４＞＞
画像分配部１４は、センサインターフェース１１を介して受信した画像データＰを、制御手順、自車両１の走行状況や、車両制御装置３０の要請内容などに応じて、カメラ制御部１２、特徴点移動量演算部１５、３次元情報取得部１６、または、物標認識部１９に分配する機能部である。なお、画像分配部１４で画像データＰの種別を区別できるよう、画像データＰには、露光条件（または露光時間）を示す情報が付加されているものとする。

＜＜特徴点移動量演算部１５＞＞
特徴点移動量演算部１５は、画像分配部１４から受信した画像データＰ内の任意の特徴点について、その画像データＰ内での移動量を演算する機能部である。

図４（ａ）は、画像データＰ内での特徴点の移動の一例である。図示するように、路面に引かれた白線の奥側端部を特徴点とした場合、仮に自車両１が停止していれば、白線の奥側端部とその奥側の路面の境界は明確であるため、特徴点の移動量が小さいと判定することができるが、高速走行中の自車両１から撮像した図４の画像データＰでは、白線の奥側端部と路面の境界が曖昧になるため、特徴点の移動量が大きいと判定することができる。そこで、特徴点移動量演算部１５では、特徴点近傍の画像の明瞭さなどに基づいて、特徴点の移動量を演算する。なお、特徴点の移動量は車速に比例するため、特徴点の移動量の演算を、車速の概算と見做すこともできる。

＜＜３次元情報取得部１６＞＞
３次元情報取得部１６は、周知のステレオマッチングの技術を用いて、ステレオ視領域Ｖを同期撮像した一組の画像データＰ上の任意の演算ライン上の各画素について、３次元情報を取得する機能部である。

図４（ｂ）は、画像データＰ内に例示した、３次元情報を取得するための演算ラインである。図４に例示する画像データＰでは、略上半分に空が撮像されており、略下半分に路面が撮像されているため、画像データＰの縦方向に演算ラインを設定して、その演算ライン上でステレオマッチングを実施すると、画像データＰの下端の路面の画素に対しては最も近い距離情報が演算され、画像データＰの下端から略中央までの路面の画素に対しては徐々に遠くなる距離情報が演算され、略中央から上端までの空の画素に対しては無効（距離測定不能）を示す距離情報が演算される。なお、図４では、１本の演算ラインのみを図示しているが、演算能力に余力があれば、画像データＰ上に複数の数、任意の角度の演算ラインを設定し、その夫々について３次元情報を演算しても良い。

＜＜３次元地図記憶部１７＞＞
３次元地図記憶部１７は、３次元情報取得部１６で取得した３次元情報を時系列に蓄積することで、自車両周辺の路面勾配や物標等を示す３次元地図を生成して記憶する機能部である。なお、３次元地図記憶部１７に移動体と思われる物標の過去の３次元情報が記憶されている場合は、各カメラに第１露光条件を優先設定して、その移動体の現在の３次元情報を更新できるようにすることで、当該移動体を追跡できるようにすることが望ましい。

＜＜自車姿勢推定部１８＞＞
自車姿勢推定部１８は、３次元地図記憶部１７に記憶された３次元地図に基づいて、路面に対する自車両１の姿勢を推定する機能部である。

＜＜物標認識部１９＞＞
物標認識部１９は、周知のパターンマッチングの技術を用いて、画像データＰ２に撮像された物標を認識する機能部である。

図４（ｃ）は、物標認識部１９が画像データＰから認識した物標を例示したものである。この例では、自車両走行車線を走行する先行車と、自車両走行車線の右車線を走行する先行車が認識されている。この場合、前者は、車両を後方から撮像した画像パターンとのパターンマッチングにより物標（他車両）として認識されたものであり、後者は、車両を左後方から撮像した画像パターンとのパターンマッチングにより物標（他車両）として認識されたものである。

＜＜物標測距部１ａ＞＞
物標測距部１ａは、物標認識部１９が認識した物標の、画像データＰ内での全幅、全高などに基づいて、当該物標までの距離を推測する機能部である。なお、物標がステレオ視領域Ｖ内にある場合はステレオマッチングの技術を用いて物標までの距離を演算しても良いし、物標までの距離が３次元地図として予め登録されている場合は、３次元地図が示す距離を、物標までの距離として採用しても良い。ここで求めた物標までの距離の情報は、車両制御装置３０に送信されるため、車両制御装置３０は、物標までの距離に応じて、ＡＣＣやＡＥＢＳ、自動駐車等の各種車両制御を実行することができる。

＜フローチャート＞
次に、図５のフローチャートを用いて、上記した車載カメラシステム１００の各部の処理を順次説明する。なお、ここでは、説明を簡略化するため、車外の明るさは一定であり、また、車速も一定であるものとする。

まず、ステップＳ１では、カメラ制御部１２（１２ａ、１２ｅ、１２ｆ）は、各々のカメラ２０に基準露光条件を設定して、画像データＰを撮像させる。

ステップＳ２では、特徴点移動量演算部１５は、ステップＳ１で撮像した画像データＰに基づいて、特徴点移動量を演算する。

ステップＳ３では、カメラ制御部１２（１２ｂ）は、演算した特徴点移動量が所定の閾値以下であるかを判定する。そして、特徴点移動量が所定の閾値以下であればステップＳ５に進み、そうでなければ、ステップＳ４に進む。

ステップＳ４では、カメラ制御部１２（１２ｂ、１２ｅ、１２ｆ）は、より短縮した露光時間をカメラ２０に設定して画像データＰを撮像させる。新たに撮像した画像データＰに対しても、上記したステップＳ２，Ｓ３の処理が実行されるため、最終的には、特徴点移動量が所定の閾値以下となる露光時間が決定される。

ステップＳ５では、カメラ制御部１２（１２ｂ）は、特徴点移動量が所定の閾値以下となった露光時間を、第１露光条件に決定する。

ステップＳ６では、カメラ制御部１２（１２ｃ）は、画像データＰに基づいて、車外の外光条件を取得する。

ステップＳ７では、カメラ制御部１２（１２ｄ）は、外光条件に基づいて、第２露光条件を決定する。

ステップＳ８では、カメラ制御部１２（１２ｅ）は、各カメラに優先設定された露光条件等を考慮して、次回撮像の目的を設定する。そして、次回撮像目的が距離情報（３次元情報、自車姿勢情報）の取得である場合は、ステップＳ９に進み、次回撮像目的が物標情報（物標認識情報、物標測距情報）の取得である場合は、ステップＳ１２に進む。

ステップＳ９では、カメラ制御部１２（１２ｂ、１２ｅ、１２ｆ、１２ｇ）は、カメラ２０に第１露光条件を設定し、画像データＰ１を撮像させる。

ステップＳ１０では、３次元情報取得部１６は、同じステレオ視領域Ｖを同期撮像した複数の画像データＰ１に基づいて３次元情報を取得する。また、取得した３次元情報は、３次元地図として、３次元地図記憶部１７に記憶される。

ステップＳ１１では、自車姿勢推定部１８は、自車両１の姿勢を推定する。推定した自車姿勢は、車両制御装置３０に送信され、車両制御に利用される。

一方、ステップＳ１２では、カメラ制御部１２（１２ｄ、１２ｅ、１２ｆ、１２ｇ）は、カメラ２０に第２露光条件を設定し、画像データＰ２を撮像させる。

ステップＳ１３では、物標認識部１９は、画像データＰ２内の物標を認識する。

ステップＳ１４では、物標測距部１ａは、認識した物標までの距離を測定する。測定した物標までの距離は、車両制御装置３０に送信され、所望の車両制御に利用される。

ステップＳ１５では、演算処理装置１０は、走行が終了したかを判定する。そして、走行が終了していなければ、ステップＳ８に戻り、撮像を継続する。これにより、各カメラは、画像データＰ１、Ｐ２を所定比率で撮像することができる。一方、走行が終了すれば、図５の処理を終了する。なお、車外の明るさや車速が大きく変化した場合は、ステップＳ１からの処理を再度実行すれば良い。

以上で説明した本実施例の車載カメラシステムによれば、距離測定用の露光制御と物標認識用の露光制御を時分割に切り替えて撮像することで、ＡＣＣ、ＡＥＢＳ、ＬＫＡＳ等の車両制御に必要とされる、正確な３次元情報と物標認識情報を、車速の影響を受けることなく取得することができる。

１ 自車両、
１００ 車載カメラシステム、
１０ 演算処理装置、
１１ センサインターフェース、
１２ カメラ制御部、
１２ａ 基準露光条件記憶部、
１２ｂ 第１露光条件決定部、
１２ｃ 外光条件判定部、
１２ｄ 第２露光条件決定部、
１２ｅ 露光制御部、
１２ｆ 撮像制御部、
１２ｇ 投光条件決定部、
１３ 投光器制御部、
１４ 画像分配部、
１５ 特徴点移動量演算部、
１６ ３次元情報取得部、
１７ ３次元地図記憶部、
１８ 自車姿勢推定部、
１９ 物標認識部、
１ａ 物標測距部、
２０（２１～２６） カメラ、
３０ 車両制御装置、
４０ 投光器
Ｃ 視野領域
Ｖ ステレオ視領域
Ｐ 画像データ

Claims (8)

1. 視野領域の少なくとも一部が重複したステレオ視領域を有するように自車両に配置された複数のカメラと、
   自車両の挙動に基づいて、前記複数のカメラが撮像した前記ステレオ視領域の特徴点の移動量を求める移動量演算部と、
   前記移動量が閾値以下となるように前記複数のカメラの第１露光条件を決定する第１露光条件決定部と、
   車外の外光条件に基づいて、前記複数のカメラの第２露光条件を決定する第２露光条件決定部と、
   前記第１露光条件で撮像した画像を用いて、前記ステレオ視領域の３次元情報を取得する３次元情報取得部と、
   前記第２露光条件で撮像した画像を用いて、自車両周辺の物標を認識する物標認識部と、
   前記複数のカメラの各々の露光条件を前記第１露光条件または前記第２露光条件に切り替える露光制御部と、
   を備えることを特徴とする車載カメラシステム。
2. 請求項１に記載の車載カメラシステムにおいて、
   前記露光制御部は、自車両の車速が所定値以上である場合に、前記第２露光条件より前記第１露光条件を優先することを特徴とする車載カメラシステム。
3. 請求項１に記載の車載カメラシステムにおいて、
   前記３次元情報取得部が過去に取得したステレオ視領域の３次元情報を当該ステレオ視領域に含まれる物標と対応付けて記憶する記憶部をさらに備え、
   前記露光制御部は、現時点で前記ステレオ視領域に含まれる物標の３次元情報が前記記憶部に記憶されている場合、前記第２露光条件よりも前記第１露光条件を優先することを特徴とする車載カメラシステム。
4. 請求項１に記載の車載カメラシステムにおいて、
   前記複数のカメラは、複数の前記ステレオ視領域を有するように配置され、
   前記露光制御部は、各ステレオ視領域を撮像するカメラ群毎に、前記第１露光条件と前記第２露光条件を切り替えることを特徴とする車載カメラシステム。
5. 請求項４に記載の車載カメラシステムにおいて、
   前記露光制御部は、複数のステレオ視領域のいずれかに自車両と衝突する可能性がある物標が存在する場合、前記物標を検知したステレオ視領域を撮像するカメラについて、前記第２露光条件よりも前記第１露光条件を優先することを特徴とする車載カメラシステム。
6. 請求項４に記載の車載カメラシステムにおいて、
   前記複数のカメラのうち、第１ステレオ視領域を撮像するカメラと、第２ステレオ視領域を撮像するカメラと、の撮像タイミングが所定時間ずれるように撮像タイミングを制御する撮像タイミング制御部をさらに備え、
   前記３次元情報取得部は、前記第１ステレオ視領域で撮像した画像と、前記第２ステレオ視領域で撮像した画像と、に基づいて、前記３次元情報を取得することを特徴とする車載カメラシステム。
7. 請求項１に記載の車載カメラシステムにおいて、
   前記カメラの撮像と同期して投光する投光器をさらに備えることを特徴とする車載カメラシステム。
8. 複数のカメラの視野領域が重複したステレオ視領域を撮像する撮像ステップと、
   自車両の挙動に基づいて、前記複数のカメラが撮像した前記ステレオ視領域の特徴点の移動量を求める移動量演算ステップと、
   前記移動量が閾値以下となるように前記複数のカメラの第１露光条件を決定する第１露光条件決定ステップと、
   車外の外光条件に基づいて、前記複数のカメラの第２露光条件を決定する第２露光条件決定ステップと、
   前記第１露光条件で撮像した画像を用いて、前記ステレオ視領域の３次元情報を取得する３次元情報取得ステップと、
   前記第２露光条件で撮像した画像を用いて、自車両周辺の物標を認識する物標認識ステップと、
   前記複数のカメラの各々の露光条件を前記第１露光条件または前記第２露光条件に切り替える露光制御ステップと、
   を備えることを特徴とする車載カメラの露光条件決定方法。

Images