JP2022097022A - 周辺監視装置 - Google Patents
周辺監視装置 Download PDFInfo
- Publication number
- JP2022097022A JP2022097022A JP2020210365A JP2020210365A JP2022097022A JP 2022097022 A JP2022097022 A JP 2022097022A JP 2020210365 A JP2020210365 A JP 2020210365A JP 2020210365 A JP2020210365 A JP 2020210365A JP 2022097022 A JP2022097022 A JP 2022097022A
- Authority
- JP
- Japan
- Prior art keywords
- lamp
- illuminance
- imaging
- output
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
【課題】 ランプの温度上昇に起因するランプの寿命低下及び損傷を抑制しつつ撮像装置が被写体を適切に撮像できるようにランプの出力を適切に制御する。【解決手段】 周辺監視装置は、自動露出機能を利用して撮像範囲に位置する被写体を撮像する第1撮像処理を実行可能な撮像装置11、12と、撮像範囲を照射可能なランプ17、18と、ランプ17、18の出力を制御可能な制御ユニット10を備える。撮像装置11、12は、第1撮像処理の実行中、所定のタイミングにおいて、第1撮像処理と並行して、自動露出機能を利用せずに一定の露出時間で撮像範囲に位置する被写体を撮像する第2撮像処理を実行する。制御ユニット10は、第2撮像処理により取得された被写体の撮像画像に基づいて撮像範囲の環境照度を演算し、少なくとも環境照度に基づいてランプ17、18の出力を決定する。【選択図】 図3
Description
本発明は、車両の周辺を撮像する撮像装置の撮像範囲を照射するランプの出力を制御する周辺監視装置に関する。
従来から、車両の周辺を撮像する撮像装置の撮像範囲の照度に応じて当該撮像範囲を照射するランプの出力を制御する周辺監視装置が知られている。例えば、特許文献1には、全方位カメラの撮像範囲の照度が不足している場合に車両のコーナーランプを点灯することにより当該撮像範囲の照度を高くするように構成された車両用監視装置が開示されている。コーナーランプは、車両の運転者によるスイッチ操作により点灯されるようになっている。
一般に、このような周辺監視装置は、撮像範囲の照度が「撮像装置が被写体を適切に撮像するために必要な照度(以下、単に「適正照度」とも称する。)」以上の状態が維持されるように、ランプの出力を比較的に高めに設定するように構成されている。この構成によれば、撮像装置は被写体を適切に撮像できるものの、ランプが高出力の状態が継続するため、ランプの温度が上昇し易く、結果としてランプの寿命が低下したり損傷したりする可能性がある。
そこで、周辺監視装置は、ランプの出力を制限する(比較的に低めに設定する)ように構成され得る。この構成によれば、ランプの温度の上昇度合いが緩やかになるため上述した問題の発生は抑制できると考えられるが、その一方で、撮像範囲の照度が不足し、被写体を適切に撮像できない可能性がある。
本発明は、上述した問題に対処するためになされたものである。即ち、本発明の目的の一つは、ランプの温度上昇に起因するランプの寿命低下及び損傷を抑制しつつ撮像装置が被写体を適切に撮像できるようにランプの出力を適切に制御することが可能な周辺監視装置を提供することにある。
本発明による周辺監視装置(以下、「本発明装置」と称する。)は、
車両に搭載され、
自動露出機能を有し、当該自動露出機能を利用して撮像範囲に位置する被写体を撮像する第1撮像処理を実行可能な撮像装置(11、12)と、
前記撮像範囲を照射可能なランプ(17、18)と、
前記ランプ(17、18)の出力を制御可能な制御ユニット(10)と、
を備える。
前記撮像装置(11、12)は、
前記第1撮像処理の実行中、所定のタイミングにおいて、当該第1撮像処理と並行して、前記自動露出機能を利用せずに一定の露出時間で前記撮像範囲に位置する被写体を撮像する第2撮像処理を実行するように構成され、
前記制御ユニット(10)は、
前記第2撮像処理により取得された前記被写体の撮像画像に基づいて前記撮像範囲の環境照度を演算し、
少なくとも前記環境照度に基づいて前記ランプ(17、18)の出力を決定する、
ように構成されている。
なお、自動露出機能は、被写体の輝度等に基づいて露出時間を適正な時間(適正露出時間)に設定するとともにゲインのレベルを適正なレベル(適正ゲイン)に調整する制御(露出制御)を実行する周知の機能である。
車両に搭載され、
自動露出機能を有し、当該自動露出機能を利用して撮像範囲に位置する被写体を撮像する第1撮像処理を実行可能な撮像装置(11、12)と、
前記撮像範囲を照射可能なランプ(17、18)と、
前記ランプ(17、18)の出力を制御可能な制御ユニット(10)と、
を備える。
前記撮像装置(11、12)は、
前記第1撮像処理の実行中、所定のタイミングにおいて、当該第1撮像処理と並行して、前記自動露出機能を利用せずに一定の露出時間で前記撮像範囲に位置する被写体を撮像する第2撮像処理を実行するように構成され、
前記制御ユニット(10)は、
前記第2撮像処理により取得された前記被写体の撮像画像に基づいて前記撮像範囲の環境照度を演算し、
少なくとも前記環境照度に基づいて前記ランプ(17、18)の出力を決定する、
ように構成されている。
なお、自動露出機能は、被写体の輝度等に基づいて露出時間を適正な時間(適正露出時間)に設定するとともにゲインのレベルを適正なレベル(適正ゲイン)に調整する制御(露出制御)を実行する周知の機能である。
本発明装置は、第1撮像処理に加えて第2撮像処理を実行し、第2撮像処理により取得された撮像画像に基づいて撮像範囲の環境照度を演算する。第2撮像処理では、自動露出機能を利用せずに一定の露出時間で被写体が撮像される。このため、第2撮像処理により取得された撮像画像に基づいて演算された環境照度は、撮像装置の周辺環境の照度を正確に反映した値となる。従って、このような環境照度に基づいてランプの出力を決定することにより、ランプの出力が撮像範囲の照度に対して過剰になったり不足したりする事態が発生し難くなる。これにより、ランプの温度上昇に起因するランプの寿命低下及び損傷を抑制しつつ撮像装置が被写体を適切に撮像できるようにランプの出力を適切に制御することができる。
本発明の一側面は、
更に、前記ランプ(17、18)の温度を測定する温度センサ(15、16)を備える。
前記制御ユニット(10)は、
前記温度センサ(15、16)から取得した前記ランプ(17、18)の温度が所定の上限温度以下である場合に満たされる温度条件が成立する場合、前記環境照度に基づいて決定された前記ランプ(17、18)の出力を維持し、
前記温度条件が成立しない場合、前記環境照度に基づいて決定された前記ランプ(17、18)の出力を下げる、
ように構成されている。
更に、前記ランプ(17、18)の温度を測定する温度センサ(15、16)を備える。
前記制御ユニット(10)は、
前記温度センサ(15、16)から取得した前記ランプ(17、18)の温度が所定の上限温度以下である場合に満たされる温度条件が成立する場合、前記環境照度に基づいて決定された前記ランプ(17、18)の出力を維持し、
前記温度条件が成立しない場合、前記環境照度に基づいて決定された前記ランプ(17、18)の出力を下げる、
ように構成されている。
本発明装置は、温度条件が成立しない場合(即ち、ランプの温度が上限温度を超える場合)、環境照度に基づいて決定されたランプの出力を下げる。即ち、ランプの出力を維持して撮像範囲の照度を確保することよりも、ランプの温度上昇に起因したランプの寿命低下及び損傷を抑制することを優先する。そして、ランプの出力低下により撮像範囲の照度が不足した分は、撮像装置の露出制御で補うように構成されている。この構成によれば、ランプの出力をより適切に制御することができる。
本発明の一側面において、
前記撮像装置は、前記車両の側方部分に設けられる側方撮像装置(11、12)であり、
更に、前記車両の前方部分に設けられ、前記車両の前方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な前方撮像装置(113)と、
前記車両の後方部分に設けられ、前記車両の後方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な後方撮像装置(114)と、を備え、
前記制御ユニット(110)は、
前記前方撮像装置(113)及び前記後方撮像装置(114)のうち前記車両の進行方向側の撮像装置による撮像処理により取得された被写体の撮像画像に基づいて当該撮像装置の撮像範囲の照度である進行方向照度を演算し、
前記環境照度が所定の第1目標照度以下且つ前記進行方向照度が所定の第2目標照度以下である場合に満たされる第1特定条件が成立する場合、前記環境照度が前記第1目標照度以下且つ前記進行方向照度が前記第2目標照度より高い場合に満たされる第2特定条件が成立する場合と比較して、前記ランプ(17、18)の出力を下げる、
ように構成されている。
前記撮像装置は、前記車両の側方部分に設けられる側方撮像装置(11、12)であり、
更に、前記車両の前方部分に設けられ、前記車両の前方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な前方撮像装置(113)と、
前記車両の後方部分に設けられ、前記車両の後方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な後方撮像装置(114)と、を備え、
前記制御ユニット(110)は、
前記前方撮像装置(113)及び前記後方撮像装置(114)のうち前記車両の進行方向側の撮像装置による撮像処理により取得された被写体の撮像画像に基づいて当該撮像装置の撮像範囲の照度である進行方向照度を演算し、
前記環境照度が所定の第1目標照度以下且つ前記進行方向照度が所定の第2目標照度以下である場合に満たされる第1特定条件が成立する場合、前記環境照度が前記第1目標照度以下且つ前記進行方向照度が前記第2目標照度より高い場合に満たされる第2特定条件が成立する場合と比較して、前記ランプ(17、18)の出力を下げる、
ように構成されている。
第1特定条件が成立する場合、ランプの点灯継続時間は比較的に長くなると推定され、第2特定条件が成立する場合、ランプの点灯継続時間は比較的に短くなると推定される。本発明装置は、第1特定条件が成立する場合、第2特定条件が成立する場合と比較して、ランプの出力を下げる。即ち、ランプの点灯継続時間が比較的に長くなると推定される場合は、比較的に短くなると推定される場合と比較して、撮像範囲の照度を確保することよりも、ランプを長時間継続して点灯可能な状態に維持することを優先する。そして、ランプの出力低下により撮像範囲の照度が不足した分は、撮像装置の露出制御で補うように構成されている。この構成によっても、ランプの出力をより適切に制御することができる。
上記説明においては、発明の理解を助けるために、実施形態に対応する発明の構成要件に対して、実施形態で用いた符号を括弧書きで添えているが、発明の各構成要件は、前記符号によって規定される実施形態に限定されるものではない。
(構成)
以下、本発明の実施形態に係る周辺監視装置(以下、「本実施装置」とも称する。)について図面を参照しながら説明する。本実施装置は、車両に搭載される。図1に示すように、本実施装置は、周辺監視ECU10を備える。周辺監視ECU10は、マイクロコンピュータを主要部として備える。ECUは、Electronic Control Unitの略である。マイクロコンピュータは、CPU、ROM、RAM及びインターフェース(I/F)等を含み、CPUはROMに格納されたインストラクション(プログラム、ルーチン)を実行することにより各種機能を実現するようになっている。以下では、本実施装置が搭載された車両を「自車両」と称する。
以下、本発明の実施形態に係る周辺監視装置(以下、「本実施装置」とも称する。)について図面を参照しながら説明する。本実施装置は、車両に搭載される。図1に示すように、本実施装置は、周辺監視ECU10を備える。周辺監視ECU10は、マイクロコンピュータを主要部として備える。ECUは、Electronic Control Unitの略である。マイクロコンピュータは、CPU、ROM、RAM及びインターフェース(I/F)等を含み、CPUはROMに格納されたインストラクション(プログラム、ルーチン)を実行することにより各種機能を実現するようになっている。以下では、本実施装置が搭載された車両を「自車両」と称する。
周辺監視ECU10は、左サイドカメラ11、右サイドカメラ12、前方カメラ13、後方カメラ14、左温度センサ15、右温度センサ16、左サイドランプ17、右サイドランプ18及びディスプレイ19に接続されている。以下では、周辺監視ECU10を単に「ECU10」とも称する。
左サイドカメラ11は、自車両の左サイドミラー(図示省略)の下面に設置されており、自車両の左側方領域に位置する被写体を撮像する。左サイドカメラ11は、可視光領域及び赤外線領域における撮像が可能であり、撮像範囲が比較的に明るい場合(典型的には、昼間)は可視光領域で撮像し、撮像範囲が比較的に暗い場合(典型的には、夜間)は赤外線領域で撮像する。
左サイドカメラ11は、自動露出機能を有する。自動露出機能は、被写体の輝度等に基づいて露出時間を適正露出時間に設定するとともにゲインのレベルを適正ゲインに調整する制御(露出制御)を実行する周知の機能である。左サイドカメラ11は、自動露出機能を利用して被写体を撮像し、撮像して得られた左画像データを所定の第1フレームレート(本実施形態では、30fps)でECU10に出力する。左サイドカメラ11は、「撮像装置」又は「側方撮像装置」の一例に相当する。
左サイドミラーの近傍には左サイドランプ17が設置されている。左サイドランプ17は、赤外線を放射するランプであり、左サイドカメラ11の撮像範囲を照射可能である。左サイドランプ17は、撮像範囲が比較的に明るい状態から暗い状態に変化した時点で点灯を開始する。具体的には、ECU10は、左サイドカメラ11から出力される左画像データ(即ち、自動露出機能を利用して得られた画像データ)に基づいて撮像範囲の照度を演算し、当該照度が所定の点灯閾値以下になった場合、左サイドランプ17の点灯を開始する。左サイドランプ17は、撮像範囲が比較的に暗い状態から明るい状態に変化した時点で消灯する。具体的には、ECU10は、左画像データに基づいて演算された撮像範囲の照度が所定の消灯閾値(>点灯閾値)を超えた場合、左サイドランプ17を消灯する。ECU10は、左サイドランプ17が点灯状態にあるときの出力を制御可能となっている(後述)。
右サイドカメラ12は、自車両の右サイドミラー(図示省略)の下面に設置されており、自車両の右側方領域に位置する被写体を撮像する。右サイドカメラ12は、左サイドカメラ11と略同一の構成を有するので、その詳細な説明は省略する。右サイドカメラ12は、自動露出機能を利用して被写体を撮像し、撮像して得られた右画像データを第1フレームレートでECU10に出力する。右サイドカメラ12は、「撮像装置」又は「側方撮像装置」の一例に相当する。
右サイドミラーの近傍には右サイドランプ18が設置されている。右サイドランプ18は、赤外線を放射するランプであり、右サイドカメラ12の撮像範囲を照射可能である。右サイドランプ18は、左サイドランプと略同一の構成を有する。ECU10は、右サイドカメラ12から出力される右画像データ(即ち、自動露出機能を利用して得られた画像データ)に基づいて撮像範囲の照度を演算し、当該照度が点灯閾値以下になった場合、右サイドランプ18の点灯を開始する。ECU10は、右画像データに基づいて演算された撮像範囲の照度が消灯閾値を超えた場合、右サイドランプ18を消灯する。ECU10は、右サイドランプ18が点灯状態にあるときの出力を制御可能となっている(後述)。
前方カメラ13は、自車両の前端中央部に設置されており、自車両の前方領域に位置する被写体を撮像する。前方カメラ13は、可視光領域で撮像する。即ち、自車両のヘッドランプ(図示省略)は前方カメラ13の撮像範囲を照射可能となっており、ヘッドランプが点灯状態にある期間中は、ヘッドランプが当該撮像範囲を照射することにより可視光領域での撮像が可能となっている。
前方カメラ13は、自動露出機能を有する。前方カメラ13は、自動露出機能を利用して被写体を撮像し、撮像して得られた前方画像データを第1フレームレートでECU10に出力する。
後方カメラ14は、自車両の後端中央部に設置されており、自車両の後方領域に位置する被写体を撮像する。後方カメラ14は、可視光領域で撮像する。即ち、自車両のテールランプ(図示省略)は後方カメラ14の撮像範囲を照射可能となっており、テールランプが点灯状態にある期間中は、テールランプが当該撮像範囲を照射することにより可視光領域での撮像が可能となっている。なお、テールランプに加えて、バックランプ(シフトレバーの位置がRレンジの場合に点灯するランプ)及び/又はブレーキランプが後方カメラ14の撮像範囲を照射するように構成されてもよい。
後方カメラ14は、自動露出機能を有する。後方カメラ14は、自動露出機能を利用して被写体を撮像し、撮像して得られた後方画像データを第1フレームレートでECU10に出力する。
カメラ11乃至14は、イグニッションスイッチがオン状態にある期間中、左画像データ、右画像データ、前方画像データ及び後方画像データをECU10に出力するように構成されている。ECU10は、これらの画像データに基づいて、(1)PVM画像生成及び表示処理、並びに、(2)駐車枠及び障害物の検出及び送信処理を行う。以下、具体的に説明する。
(1)PVM画像生成及び表示処理
ECU10は、PVM(Panoramic View Monitor)画像を生成する。PVMとは、自車両が比較的に低速で走行している場合に表示画面(本実施形態では、ディスプレイ19)に自車両の周辺領域を表示する周知の機能である。PVM画像は、PVM用に生成される画像であり、一例として俯瞰画像が挙げられる。ECU10は、俯瞰画像を、左画像データ、右画像データ、前方画像データ及び後方画像データ、並びに、ECU10のROMに予め格納されている自車両の平面画像を合成することにより生成する。
ECU10は、PVM(Panoramic View Monitor)画像を生成する。PVMとは、自車両が比較的に低速で走行している場合に表示画面(本実施形態では、ディスプレイ19)に自車両の周辺領域を表示する周知の機能である。PVM画像は、PVM用に生成される画像であり、一例として俯瞰画像が挙げられる。ECU10は、俯瞰画像を、左画像データ、右画像データ、前方画像データ及び後方画像データ、並びに、ECU10のROMに予め格納されている自車両の平面画像を合成することにより生成する。
ECU10は、車速が所定のPVM車速閾値(例えば、12[km/h])以下であり、且つ、車内に設けられた図示しないスイッチ(PVMを起動するためのスイッチ)が押下された場合、ディスプレイ19に俯瞰画像を表示する。ディスプレイ19は、自車両の乗員が視認可能な位置に設けられている。本実施形態では、ディスプレイ19として、ナビゲーションシステムに使用されるディスプレイが使用される。なお、(1)の処理は、イグニッションスイッチがオン状態にある期間中に実行される構成に限られず、例えば、車速がPVM車速閾値以下である期間中に実行されるように構成されてもよい。
(2)駐車枠及び障害物の検出及び送信処理
自車両には、駐車支援システムが採用されている。駐車支援システムは、自車両が比較的に低速で走行している場合に、駐車枠(自車両が駐車可能なスペースを区画する線)に自車両を自動的に駐車させる自動駐車制御を行う周知のシステムである。駐車支援システムは、自車両の乗員の操作(典型的には、スイッチ操作)によって起動され得る。ECU10は、左画像データ、右画像データ、前方画像データ及び後方画像データを解析し、駐車枠の有無、障害物の有無、自車両と駐車枠との相対関係(距離及び方位等)、及び、自車両と障害物との相対関係(距離、方位及び相対速度等)を演算する(即ち、駐車枠及び障害物を検出する。)。ECU10は、検出された駐車枠及び障害物に関する情報を駐車支援システムに送信する。駐車支援システムは、この情報に基づいて自動駐車制御を実行する。なお、(2)の処理は、イグニッションスイッチがオン状態にある期間中に実行される構成に限られず、例えば、車速が所定の駐車支援車速閾値(例えば、30[km/h])以下である期間中に実行されるように構成されてもよい。
自車両には、駐車支援システムが採用されている。駐車支援システムは、自車両が比較的に低速で走行している場合に、駐車枠(自車両が駐車可能なスペースを区画する線)に自車両を自動的に駐車させる自動駐車制御を行う周知のシステムである。駐車支援システムは、自車両の乗員の操作(典型的には、スイッチ操作)によって起動され得る。ECU10は、左画像データ、右画像データ、前方画像データ及び後方画像データを解析し、駐車枠の有無、障害物の有無、自車両と駐車枠との相対関係(距離及び方位等)、及び、自車両と障害物との相対関係(距離、方位及び相対速度等)を演算する(即ち、駐車枠及び障害物を検出する。)。ECU10は、検出された駐車枠及び障害物に関する情報を駐車支援システムに送信する。駐車支援システムは、この情報に基づいて自動駐車制御を実行する。なお、(2)の処理は、イグニッションスイッチがオン状態にある期間中に実行される構成に限られず、例えば、車速が所定の駐車支援車速閾値(例えば、30[km/h])以下である期間中に実行されるように構成されてもよい。
以下では、このようにしてカメラ11乃至14が自動露出機能を利用して撮像範囲に位置する被写体を撮像する処理を「第1撮像処理」と称する。
左サイドカメラ11は、第1撮像処理に加え、自動露出機能を利用せずに一定の露出時間で撮像範囲に位置する被写体を撮像する処理である第2撮像処理を実行する。第2撮像処理では、露出時間は極めて短い値(例えば、数[ms])に設定される。左サイドカメラ11は、第2撮像処理により得られた左画像データを、第1フレームレートよりも低い所定の第2フレームレート(本実施形態では、1fps)でECU10に出力する。左サイドカメラ11は、第2撮像処理を、左サイドランプ17が点灯状態にある期間中にのみ実行する。この第2撮像処理は、左サイドカメラ11による第1撮像処理と並行して実行される。
左サイドカメラ11は、第1撮像処理に加え、自動露出機能を利用せずに一定の露出時間で撮像範囲に位置する被写体を撮像する処理である第2撮像処理を実行する。第2撮像処理では、露出時間は極めて短い値(例えば、数[ms])に設定される。左サイドカメラ11は、第2撮像処理により得られた左画像データを、第1フレームレートよりも低い所定の第2フレームレート(本実施形態では、1fps)でECU10に出力する。左サイドカメラ11は、第2撮像処理を、左サイドランプ17が点灯状態にある期間中にのみ実行する。この第2撮像処理は、左サイドカメラ11による第1撮像処理と並行して実行される。
同様に、右サイドカメラ12は、第1撮像処理に加え、第2撮像処理を実行する。右サイドカメラ12は、第2撮像処理により得られた右画像データを、第2フレームレートでECU10に出力する。右サイドカメラ12は、第2撮像処理を、右サイドランプ18が点灯状態にある期間中にのみ実行する。この第2撮像処理は、右サイドカメラ12による第1撮像処理と並行して実行される。以下、左右のサイドカメラ11及び12を、単に「サイドカメラ11及び12」とも称する。
ECU10は、第2撮像処理により得られた左画像データから左撮像画像を生成し、当該左撮像画像を構成する各画素の輝度値に基づいて左サイドカメラ11の撮像範囲(左側方領域)の照度を演算する。撮像画像の輝度値から撮像範囲の照度を演算する手法は周知であるので、その詳細な説明は省略する。
同様に、ECU10は、第2撮像処理により得られた右画像データから右撮像画像を生成し、当該右撮像画像を構成する各画素の輝度値に基づいて右サイドカメラ12の撮像範囲(右側方領域)の照度を演算する。
同様に、ECU10は、第2撮像処理により得られた右画像データから右撮像画像を生成し、当該右撮像画像を構成する各画素の輝度値に基づいて右サイドカメラ12の撮像範囲(右側方領域)の照度を演算する。
上述したように、第2撮像処理は、自動露出機能を利用せずに(即ち、露出制御を行わずに)一定の短い露出時間で実行される。このため、上記左撮像画像及び右撮像画像に基づいてそれぞれ演算された照度は、対応するサイドカメラ11及び12の周辺環境の照度を正確に反映した値となる。以下では、このようにして演算された照度を「環境照度」と称し、左右の区別が必要な場合は、それぞれ「左環境照度」及び「右環境照度」と称する。加えて、第2撮像処理により取得された撮像画像を「環境照度用画像」と称し、左右の区別が必要な場合は、それぞれ「環境照度用左画像」及び「環境照度用右画像」と称する。環境照度は、ECU10が左右のサイドランプ17及び18の出力を制御する際に使用される(後述)。環境照度用画像は、環境照度を演算するために生成される画像であり、上記(1)及び(2)の処理には使用されない。
左温度センサ15は、左サイドランプ17に設けられ、左サイドランプ17の温度を測定する。
右温度センサ16は、右サイドランプ18に設けられ、右サイドランプ18の温度を測定する。
左右の温度センサ15及び16は、左右のサイドランプ17及び18の温度に応じた信号をそれぞれ発生する。ECU10は、所定時間が経過する毎に左右の温度センサ15及び16が発生した信号を取得し、当該信号に基づいて左右のサイドランプ17及び18の温度をそれぞれ検出する。左右のサイドランプ17及び18の温度は、ECU10が左右のサイドランプ17及び18の出力を制御する際に使用される(後述)。
右温度センサ16は、右サイドランプ18に設けられ、右サイドランプ18の温度を測定する。
左右の温度センサ15及び16は、左右のサイドランプ17及び18の温度に応じた信号をそれぞれ発生する。ECU10は、所定時間が経過する毎に左右の温度センサ15及び16が発生した信号を取得し、当該信号に基づいて左右のサイドランプ17及び18の温度をそれぞれ検出する。左右のサイドランプ17及び18の温度は、ECU10が左右のサイドランプ17及び18の出力を制御する際に使用される(後述)。
左右のサイドランプ17及び18の出力は、ECU10により制御される。ECU10は、現在の左右の環境照度及び左右のサイドランプ17及び18の温度に基づいて、対応する左右のサイドランプ17及び18の出力値をそれぞれ演算する(以下、左右のサイドランプ17及び18を「サイドランプ17及び18」又は「ランプ」と称する場合がある。)。
具体的には、ECU10は、現在の環境照度と所定の目標照度との大小関係に基づいてランプ出力を「通常出力モード」又は「低出力モード」の何れかに設定する。目標照度は、点灯閾値よりも低い照度であり、実験又はシミュレーションにより予め決定され得る。ECU10のROMには、ランプ出力が通常出力モードに設定された場合に使用される通常出力関数と、ランプ出力が低出力モードに設定された場合に使用される低出力関数と、が予め格納されている。通常出力関数は、現在の環境照度を入力として、撮像範囲の照度を適正照度(サイドカメラ11及び12が被写体を適切に撮像するために必要な照度)まで高めるために必要なランプの出力値を演算(出力)する関数である。低出力関数は、現在の環境照度を入力として、撮像範囲の照度を適正照度よりも低い所定の照度まで高めるために必要なランプの出力値を演算(出力)する関数である。なお、「適正照度よりも低い所定の照度」は実験又はシミュレーションにより予め決定され得る。
ECU10は、現在の環境照度が目標照度以下の場合、ランプ出力を通常出力モードに設定する。即ち、通常出力関数に基づいてランプの出力値を演算する。一方、ECU10は、現在の環境照度が目標照度より高い場合、ランプ出力を低出力モードに設定する。即ち、低出力関数に基づいてランプの出力値を演算する。
加えて、ECU10は、現在のランプの温度と所定の上限温度との大小関係に基づいてランプ出力を維持するか、「保護モード」に設定する。上限温度は、ランプの温度に起因してランプの寿命が低下したり損傷したりする可能性が極めて低い温度の上限値であり、実験又はシミュレーションにより予め決定され得る。ECU10のROMには、ランプ出力が保護モードに設定された場合に使用される保護関数が予め格納されている。保護関数は、通常出力モード又は低出力モードで演算されたランプの出力値を入力として、ランプの温度を上限温度以下に下げるために必要なランプの出力値を演算(出力)する関数である。
ECU10は、現在のランプの温度が上限温度以下である場合に満たされる温度条件が成立する場合、現在のランプの出力設定を維持する。一方、ECU10は、温度条件が成立しない場合、ランプ出力を保護モードに設定する。即ち、保護関数に基づいてランプの出力値を演算する(別言すれば、環境照度に基づいて決定されたランプの出力値を低減する。)。
ECU10は、このようにして演算されたランプの出力値を用いてランプを制御する。
ECU10は、このようにして演算されたランプの出力値を用いてランプを制御する。
(具体的作動)
次に、ECU10のCPUの具体的作動について説明する。以下では、説明の便宜上、左サイドランプ17に対する作動について説明する。右サイドランプ18に対する作動は、以下の「左」を「右」と読み替えることで説明され得る。これは、図5についても同様である。CPUは、イグニッションスイッチがオン状態にある期間中、所定時間が経過する毎に図2にフローチャートにより示したルーチンを繰り返し実行するように構成されている。加えて、CPUは、イグニッションスイッチがオン状態にあり且つ左サイドランプ17が点灯状態にある期間中、所定時間が経過する毎に図3にフローチャートにより示したルーチンを繰り返し実行するように構成されている。即ち、左サイドランプ17が点灯状態にある期間中は、CPUは、図3のルーチンを図2のルーチンと並行して実行する。
次に、ECU10のCPUの具体的作動について説明する。以下では、説明の便宜上、左サイドランプ17に対する作動について説明する。右サイドランプ18に対する作動は、以下の「左」を「右」と読み替えることで説明され得る。これは、図5についても同様である。CPUは、イグニッションスイッチがオン状態にある期間中、所定時間が経過する毎に図2にフローチャートにより示したルーチンを繰り返し実行するように構成されている。加えて、CPUは、イグニッションスイッチがオン状態にあり且つ左サイドランプ17が点灯状態にある期間中、所定時間が経過する毎に図3にフローチャートにより示したルーチンを繰り返し実行するように構成されている。即ち、左サイドランプ17が点灯状態にある期間中は、CPUは、図3のルーチンを図2のルーチンと並行して実行する。
所定のタイミングになると、CPUは、図2のステップ200から処理を開始してステップ210に進み、第1撮像処理によりカメラ11乃至14から出力された画像データ(左画像データ、右画像データ、前方画像データ及び後方画像データ)を取得する。
続いて、CPUは、ステップ220及びステップ230の処理((1)の処理)と、ステップ240及びステップ250の処理((2)の処理)と、を並行して実行する。即ち、CPUは、ステップ220にて、取得した画像データに基づいてPVM画像(例えば、俯瞰画像)を生成し、ステップ230にて、生成したPVM画像をディスプレイ19に表示する。加えて、CPUは、ステップ240にて、取得した画像データに基づいて駐車枠及び障害物を検出し、ステップ250にて、検出した駐車枠及び障害物に関する情報を駐車支援システムに送信する。
CPUは、ステップ230及びステップ250の終了後、ステップ295に進んで本ルーチンを一旦終了する。
CPUは、ステップ230及びステップ250の終了後、ステップ295に進んで本ルーチンを一旦終了する。
所定のタイミングになると、CPUは、図3のステップ300から処理を開始してステップ305に進み、第2撮像処理により左サイドカメラ11から出力された左画像データを取得したか否かを判定する。即ち、CPUは、現在の周期が第2フレームレートで左画像データが出力された周期であるか否かを判定する。第2撮像処理による左画像データを取得していない場合、CPUは、ステップ305にて「No」と判定し、ステップ395に進んで本ルーチンを一旦終了する。
一方、第2撮像処理による左画像データを取得した場合、CPUは、ステップ305にて「Yes」と判定し、ステップ310にて、当該左画像データから環境照度用左画像を生成する。
続いて、CPUは、ステップ315に進み、環境照度用左画像に基づいて左環境照度を演算する。
続いて、CPUは、ステップ315に進み、環境照度用左画像に基づいて左環境照度を演算する。
次いで、CPUは、ステップ320に進み、左温度センサ15から左サイドランプ17の温度を取得する。その後、CPUは、ステップ325に進み、ステップ315にて演算された左環境照度が目標照度以下であるか否かを判定する。左環境照度が目標照度以下である場合、CPUは、ステップ325にて「Yes」と判定し、ステップ330にて、左サイドランプ17の出力設定を通常出力モードに設定する。即ち、通常出力関数に現在の左環境照度を入力して左サイドランプ17の出力値を演算する。
一方、左環境照度が目標照度よりも高い場合、CPUは、ステップ325にて「No」と判定し、ステップ335にて、左サイドランプ17の出力設定を低出力モードに設定する。即ち、低出力関数に現在の左環境照度を入力して左サイドランプ17の出力値を演算する。
ステップ330又はステップ335の終了後、CPUは、ステップ340に進み、温度条件(左サイドランプ17の温度≦上限温度)が成立しているか否かを判定する。温度条件が成立している場合、CPUは、ステップ340にて「Yes」と判定し、ステップ345にて、左サイドランプ17の出力設定を維持する。即ち、ステップ330又はステップ335にて演算された左サイドランプ17の出力値を維持する。
一方、温度条件が成立していない場合、CPUは、ステップ340にて「No」と判定し、ステップ350にて、左サイドランプ17の出力設定を保護モードに設定する。即ち、ステップ330又はステップ335にて演算された左サイドランプ17の出力値を保護関数に入力して左サイドランプ17の出力値を演算する(別言すれば、左環境照度に基づいて決定された左サイドランプ17の出力値を低減する。)。
ステップ345又はステップ350の終了後、CPUは、ステップ355に進んで左サイドランプ17を制御する。即ち、左サイドランプ17の出力値をステップ345又はステップ350にて演算された出力値に設定する。その後、CPUは、ステップ395に進んで本ルーチンを一旦終了する。
このようにして左右のサイドランプ17及び18が制御されることにより、図2のステップ230では十分な視認性を有するPVM画像が表示され得る。加えて、ステップ240では高い検出精度で駐車枠及び障害物が検出され得る。このため、駐車支援システムは、ステップ250にてCPUから送信された駐車枠及び障害物に関する情報に基づいて自動駐車制御を適切に実行することができる。
以上説明したように、本実施装置は、第1撮像処理に加えて第2撮像処理を実行し、第2撮像処理により取得された撮像画像(環境照度用画像)に基づいて撮像範囲の環境照度を演算する。第2撮像処理では、自動露出機能を利用せずに一定の露出時間で被写体が撮像される。このため、環境照度用画像に基づいて演算された環境照度は、サイドカメラ11及び12の周辺環境の照度を正確に反映した値となる。従って、このような環境照度に基づいてサイドランプ17及び18の出力を決定する(制御する)ことにより、サイドランプ17及び18の出力が撮像範囲の照度に対して過剰になったり不足したりする事態が発生し難くなる。
図4を参照して具体的に説明する。図4の実線20は、撮像範囲の照度を適正照度以上の状態に維持するためにサイドランプ17及び18の出力を最大に設定した場合の点灯継続時間と温度との関係を示す。この場合、ランプの出力は撮像範囲の照度に関わらず最大に設定されるので、ランプの出力が撮像範囲の照度に対して過剰になっている可能性が高い。このようにランプの出力を最大に設定すると、実線20に示すように、ランプの温度は点灯開始から比較的に短時間で上限温度に到達する(別言すれば、ランプが過熱状態になる)ので、ランプの温度上昇に起因してランプの寿命が低下したり損傷したりする可能性が高くなる。
一方、実線22は、サイドランプ17及び18の出力を制限した場合の点灯継続時間と温度との関係を示す。この場合、ランプの出力は撮像範囲の照度に関わらず制限されるので、ランプの出力が撮像範囲の照度に対して不足している可能性が高い。このようにランプの出力を制限すると、実線22に示すように、ランプの点灯開始から時間が経過してもランプの温度が上限温度に到達することは抑制できるものの、撮像範囲の照度不足により被写体を適切に撮像できない可能性が高くなる。
これに対し、実線21aは、本実施装置によりサイドランプ17及び18の出力が制御された場合の点灯継続時間と温度との関係を示す。本実施装置は、環境照度に基づいてランプの出力を制御するので、ランプの出力が撮像範囲の照度に対して過剰になったり不足したりする事態が発生し難くなり、適正な出力を維持できる。これにより、ランプの温度上昇に起因するランプの寿命低下及び損傷を抑制しつつサイドカメラ11及び12が被写体を適切に撮像できるようにランプの出力を適切に制御することができる。
本実施装置によれば、実線21aに示すように、ランプの点灯開始から時間が経過してもランプの温度上昇幅に余裕を持たせることができる。このため、例えば、自車両が周辺環境が暗い領域に進入したことによりランプの出力を増大させる必要が生じても、ランプの寿命低下及び損傷を引き起こすことなく、必要に応じた出力でランプを制御することができる(破線21b参照)。即ち、ランプの温度を将来の出力増大に適切に対応できる温度に維持しておくことが可能になる。
特に、本実施装置は、温度条件が成立しない場合(即ち、サイドランプ17及び18の温度が上限温度を超える場合)、環境照度に基づいて決定されたランプの出力を下げる。即ち、ランプの出力を維持して撮像範囲の照度を確保することよりも、ランプの温度に起因したランプの寿命低下及び損傷を抑制することを優先する。そして、ランプの出力低下により撮像範囲の照度が不足した分は、対応するサイドカメラ11及び12の露出制御で補うように構成されている。この構成によれば、ランプの出力をより適切に制御できる。
ところで、第1撮像処理により取得された撮像画像は、露出制御された画像データに基づいて生成されることにより適切な明るさに補正された画像である。このため、当該撮像画像に基づいて演算された環境照度は、サイドカメラの周辺環境の照度とは乖離した値となる。仮に、このような環境照度に基づいてランプの出力を制御しようとすると、環境照度はランプの出力変更に伴い変動し、変動した環境照度によりランプの出力が変更されるため、サイドカメラの露出制御とランプの出力制御が交互に断続的に行われることになる。その結果、ランプの出力が安定するまでに時間がかかる(即ち、制御応答性が低い)という問題が生じる。加えて、ランプの出力が安定するまでの間はランプの明るさが頻繁に変動するため、ディスプレイに表示される表示画像の明るさが頻繁に変動し、視認性が低下するという問題が生じる。
これに対し、本実施装置によれば、第2撮像処理により取得された撮像画像(環境照度用画像)に基づいて演算された環境照度は露出制御の影響を受けないため、ランプの出力は当該環境照度に基づいて一意的に決定され、極めて短時間で安定する(即ち、制御応答性が非常に高い)。加えて、表示画像の明るさが変動し難いため、良好な視認性を確保できる。
(変形例)
続いて、本発明の変形例に係る周辺監視装置(以下、「本変形装置」とも称する。)について図面を参照しながら説明する。以下では、本実施装置と同一の構成要素については同一の符号を付し、その詳細な説明は省略する。本変形装置は、以下の2点で本実施装置と相違している。
・環境照度及び進行方向環境照度(後述)に基づいてサイドランプ17及び18の点灯継続時間を推定し、推定結果に基づいてランプの出力を制御する。
・サイドランプ17及び18の出力制御に加え、サイドカメラ11及び12の自動露出機能を「通常モード」と「制限モード」(後述)との間で切り替え制御する(協調制御を行う)。
以下、主に相違点について具体的に説明する。
続いて、本発明の変形例に係る周辺監視装置(以下、「本変形装置」とも称する。)について図面を参照しながら説明する。以下では、本実施装置と同一の構成要素については同一の符号を付し、その詳細な説明は省略する。本変形装置は、以下の2点で本実施装置と相違している。
・環境照度及び進行方向環境照度(後述)に基づいてサイドランプ17及び18の点灯継続時間を推定し、推定結果に基づいてランプの出力を制御する。
・サイドランプ17及び18の出力制御に加え、サイドカメラ11及び12の自動露出機能を「通常モード」と「制限モード」(後述)との間で切り替え制御する(協調制御を行う)。
以下、主に相違点について具体的に説明する。
図5に示すように、本変形装置は、周辺監視ECU110(以下、単に「ECU110」と称する。)を備える。ECU110は、前方カメラ13及び14の代わりに前方カメラ113及び114に接続されており、左右の温度センサ15及び16には接続されていない点でECU10と相違している。
前方カメラ113は、第1撮像処理に加え、第2撮像処理を実行する点で前方カメラ13と相違している。前方カメラ113は、第2撮像処理により得られた前方画像データを第2フレームレートでECU110に出力する。前方カメラ113は、第2撮像処理を、ヘッドランプが点灯状態にある期間中にのみ実行する。この第2撮像処理は、前方カメラ113による第1撮像処理と並行して実行される。なお、前方カメラ113は、「前方撮像装置」の一例に相当する。
後方カメラ114は、第1撮像処理に加え、第2撮像処理を実行する点で後方カメラ14と相違している。後方カメラ114は、第2撮像処理により得られた後方画像データを第2フレームレートでECU110に出力する。後方カメラ114は、第2撮像処理を、テールランプが点灯状態にある期間中にのみ実行する。この第2撮像処理は、後方カメラ114による第1撮像処理と並行して実行される。なお、後方カメラ114は、「後方撮像装置」の一例に相当する。
ECU110は、第2撮像処理により得られた前方画像データから前方撮像画像を生成し、当該前方撮像画像を構成する各画素の輝度値に基づいて前方カメラ113の撮像範囲(前方領域)の照度を演算する。以下では、このようにして演算された照度を「前方環境照度」と称し、前方撮像画像を「環境照度用画像」又は「環境照度用前方画像」と称する。前方環境照度は、自車両の前進中にECU110がサイドランプ17及び18の出力を制御する際に使用される(後述)。
ECU110は、第2撮像処理により得られた後方画像データから後方撮像画像を生成し、当該後方撮像画像を構成する各画素の輝度値に基づいて後方カメラ114の撮像範囲(後方領域)の照度を演算する。以下では、このようにして演算された照度を「後方環境照度」と称し、後方撮像画像を「環境照度用画像」又は「環境照度用後方画像」と称する。後方環境照度は、自車両の後退中にECU110がサイドランプ17及び18の出力を制御する際に使用される(後述)。
ECU110は、第2撮像処理により得られた後方画像データから後方撮像画像を生成し、当該後方撮像画像を構成する各画素の輝度値に基づいて後方カメラ114の撮像範囲(後方領域)の照度を演算する。以下では、このようにして演算された照度を「後方環境照度」と称し、後方撮像画像を「環境照度用画像」又は「環境照度用後方画像」と称する。後方環境照度は、自車両の後退中にECU110がサイドランプ17及び18の出力を制御する際に使用される(後述)。
ECU110は、現在の左右の環境照度と、現在の自車両の進行方向側のカメラから取得された環境照度である進行方向環境照度(即ち、前進中は前方環境照度、後退中は後方環境照度)と、に基づいて、サイドランプ17及び18の点灯継続時間を推定する。
具体的には、ECU110は、「現在の環境照度が所定の第1目標照度以下、且つ、現在の進行方向環境照度が所定の第2目標照度以下」である場合に満たされる長時間条件が成立する場合、ランプの点灯継続時間は比較的に長くなると推定する。即ち、将来の左側方領域及び右側方領域の照度は現在の進行方向領域の照度に準じた値になる可能性が高いことから、現在の進行方向環境照度が第2目標照度以下である場合、ECU110は、将来の左環境照度及び右環境照度はそれほど高くならず、従って、ランプの点灯継続時間は比較的に長くなると推定する。なお、長時間条件は、「第1特定条件」の一例に相当する。
ここで、第1目標照度は、点灯閾値よりも低い照度であり、実験又はシミュレーションにより予め決定され得る。第1目標照度は、上記実施形態の目標照度と同一であってもよい。第2目標照度は、ヘッドランプ及びテールランプの点灯を開始するか否かを決定する前後点灯閾値よりも低い照度であり、実験又はシミュレーションにより予め決定され得る。第1目標照度と第2目標照度は同一であってもよいし、相違していてもよい。相違している場合、両者の大小関係は問わない。
ECU110は、長時間条件が成立する場合、現在の環境照度が第1目標照度以下ではあるものの、ランプの点灯継続時間が比較的に長くなると推定されることから、ランプ出力を低出力モードに設定する。即ち、ECU110は、ランプ出力を通常モードに設定して撮像範囲の照度を確保することよりも、ランプを長時間継続して点灯することによる温度上昇を抑制することを優先する。
このとき、ECU110は、対応するサイドカメラ11及び12の自動露出機能を「通常モード」に設定する。通常モードの自動露出機能は、実施形態における自動露出機能と同等である。これにより、ランプ出力が低出力モードに設定されても、撮像範囲の照度不足分は対応するサイドカメラ11及び12の露出制御(例えば、露出時間を長くするとともにゲインのレベルを上げる制御)で補われるため、第1撮像処理により取得される左右の撮像画像を適切な明るさに維持できる。
一方、ECU110は、「現在の環境照度が第1目標照度以下、且つ、現在の進行方向環境照度が第2目標照度より高い」場合に満たされる短時間条件が成立する場合、ランプの点灯継続時間は比較的に短くなると推定する。即ち、現在の進行方向環境照度が第2目標照度より高い場合、ECU110は、将来の左環境照度及び右環境照度はある程度高くなるため、ランプの点灯継続時間は比較的に短くなると推定する。なお、短時間条件は、「第2特定条件」の一例に相当する。
ECU110は、短時間条件が成立する場合、現在の環境照度が第1目標照度以下であることから、ランプ出力を通常出力モードに設定する。これにより、撮像範囲の照度が適正照度に維持される。なお、ランプの点灯継続時間は比較的に短くなると推定されることから、ランプ出力が通常出力モードに設定されても温度の上昇幅はそれほど大きくならないと考えられる。
このとき、ECU110は、対応するサイドカメラ11及び12の自動露出機能を「制限モード」に設定する。制限モードは、通常モードよりも露出制御の制御量を制限したモードであり、通常モードと比較して適正露出時間が短めに設定されるとともに適正ゲインが低めに設定される。これは、ランプ出力が通常出力モードに設定されることにより撮像範囲がある程度明るくなるので、露出制御の制御量を抑えて第1撮像処理により取得される左右の撮像画像が必要以上に明るくならないようにするためである。これにより、当該撮像画像を適切な明るさに維持できるとともにノイズを低減することができる。
これに対し、ECU110は、長時間条件及び短時間条件が何れも成立しない場合(即ち、現在の環境照度が第1目標照度より高い場合)、ランプ出力を通常出力モードに設定し、対応するサイドカメラ11及び12の自動露出機能を「通常モード」に設定する。即ち、実施形態と同様の制御を行う。なお、本変形例では、第1目標照度は点灯閾値よりも低い照度と規定したが、例えば、第1目標照度は消灯閾値と等しくてもよい。この場合、ECU110は、長時間条件及び短時間条件が何れも成立しない場合、ランプを消灯する。
このように、本変形例では、ECU110は、長時間条件及び短時間条件の成立可否に基づいて、ランプの出力制御に加え、対応するサイドカメラ11及び12の自動露出機能を「通常モード」と「制限モード」との間で切り替え制御する(協調制御を行う)。
(具体的作動)
次に、ECU10のCPUの具体的作動について説明する。CPUは、イグニッションスイッチがオン状態にある期間中、所定時間が経過する毎に図2にフローチャートにより示したルーチンを繰り返し実行するように構成されている。加えて、CPUは、イグニッションスイッチがオン状態にあり且つ左サイドランプ17が点灯状態にある期間中、所定時間が経過する毎に図6にフローチャートにより示したルーチンを繰り返し実行するように構成されている。即ち、左サイドランプ17が点灯状態にある期間中は、CPUは、図6のルーチンを図2のルーチンと並行して実行する。
次に、ECU10のCPUの具体的作動について説明する。CPUは、イグニッションスイッチがオン状態にある期間中、所定時間が経過する毎に図2にフローチャートにより示したルーチンを繰り返し実行するように構成されている。加えて、CPUは、イグニッションスイッチがオン状態にあり且つ左サイドランプ17が点灯状態にある期間中、所定時間が経過する毎に図6にフローチャートにより示したルーチンを繰り返し実行するように構成されている。即ち、左サイドランプ17が点灯状態にある期間中は、CPUは、図6のルーチンを図2のルーチンと並行して実行する。
所定のタイミングになると、CPUは、図6のステップ600から処理を開始してステップ605に進み、第2撮像処理により左サイドカメラ11、前方カメラ113及び後方カメラ114からそれぞれ出力された左画像データ、前方画像データ及び後方画像データを取得したか否かを判定する。即ち、CPUは、現在の周期が第2フレームレートでこれらの画像データが出力された周期であるか否かを判定する。第2撮像処理によるこれらの画像データを取得していない場合、CPUは、ステップ605にて「No」と判定し、ステップ695に進んで本ルーチンを一旦終了する。
一方、第2撮像処理によるこれらの画像データを取得した場合、CPUは、ステップ605にて「Yes」と判定し、ステップ610にて、左画像データ、前方画像データ及び後方画像データから、環境照度用左画像、環境照度用前方画像及び環境照度用後方画像をそれぞれ生成する。
続いて、CPUは、ステップ615に進み、環境照度用左画像に基づいて左環境照度を演算する。加えて、CPUは、現在の自車両の進行方向に対応した環境照度用画像(即ち、前進中は環境照度用前方画像、後退中は環境照度用後退画像)に基づいて進行方向環境照度を演算する。なお、自車両の進行方向は、例えばシフトレバーの位置を表すシフトレバーポジションセンサ(図示省略)から取得し得る。
続いて、CPUは、ステップ615に進み、環境照度用左画像に基づいて左環境照度を演算する。加えて、CPUは、現在の自車両の進行方向に対応した環境照度用画像(即ち、前進中は環境照度用前方画像、後退中は環境照度用後退画像)に基づいて進行方向環境照度を演算する。なお、自車両の進行方向は、例えばシフトレバーの位置を表すシフトレバーポジションセンサ(図示省略)から取得し得る。
次いで、CPUは、ステップ620に進み、長時間条件(左環境照度≦第1目標照度、且つ、進行方向環境照度≦第2目標照度)が成立するか否かを判定する。長時間条件が成立する場合、CPUは、ステップ620にて「Yes」と判定し(即ち、左サイドランプ17の点灯継続時間は比較的に長くなると推定し)、ステップ625に進む。
ステップ625では、CPUは、左サイドランプ17の出力設定を低出力モードに設定し、左サイドカメラ11の設定を通常モードに設定する。
ステップ625では、CPUは、左サイドランプ17の出力設定を低出力モードに設定し、左サイドカメラ11の設定を通常モードに設定する。
一方、長時間条件が成立していない場合、CPUは、ステップ620にて「No」と判定し、ステップ635にて短時間条件(左環境照度≦第1目標照度、且つ、進行方向環境照度>第2目標照度)が成立するか否かを判定する。短時間条件が成立する場合、CPUは、ステップ635にて「Yes」と判定し(即ち、左サイドランプ17の点灯継続時間は比較的に短くなると推定し)、ステップ640に進む。
ステップ640では、CPUは、左サイドランプ17の出力設定を通常出力モードに設定し、左サイドカメラ11の設定を制限モードに設定する。
ステップ640では、CPUは、左サイドランプ17の出力設定を通常出力モードに設定し、左サイドカメラ11の設定を制限モードに設定する。
これに対し、短時間条件が成立していない場合(左環境照度>第1目標照度が成立する場合)、CPUは、ステップ635にて「No」と判定し、ステップ645に進む。
ステップ645では、CPUは、左サイドランプ17の出力設定を低出力モードに設定し、左サイドカメラ11の設定を通常モードに設定する。
ステップ645では、CPUは、左サイドランプ17の出力設定を低出力モードに設定し、左サイドカメラ11の設定を通常モードに設定する。
ステップ625、ステップ640又はステップ645の終了後、CPUは、ステップ630に進んで左サイドランプ17の出力値をステップ625、640又は645にて設定されたモードに則って演算された出力値に設定する。加えて、CPUは、左サイドカメラ11をステップ625、640又は645にて設定されたモードに則って露出制御する。即ち、CPUは、左サイドカメラ11を左サイドランプ17と協調させる協調制御を行う。その後、CPUは、ステップ695に進んで本ルーチンを一旦終了する。
以上説明したように、本変形装置は、長時間条件が成立する場合、短時間条件が成立する場合と比較して、サイドランプ17及び18の出力を下げる。即ち、撮像範囲の照度を確保することよりも、サイドランプ17及び18を長時間継続して点灯可能な状態に維持することを優先する。そして、サイドランプ17及び18の出力低下により撮像範囲の照度が不足した分は、対応するサイドカメラ11及び12の露出制御で補うように構成されている。この構成によっても、実施形態と同様の作用効果を奏することができる。
図7を参照して具体的に説明する。図7の実線30aは、短時間条件が成立した場合のサイドランプ17及び18の点灯継続時間と温度との関係を示す。この場合、サイドランプ17及び18の出力は通常出力モードに設定されるので、実線30aは図4の実線21aと同様の振る舞いとなる。即ち、適正な出力を維持できる。加えて、ランプの温度を将来の出力増大に適切に対応できる温度に維持しておくことが可能になる(破線30b参照)。
一方、実線31aは、長時間条件が成立した場合のサイドランプ17及び18の点灯継続時間と温度との関係を示す。この場合、サイドランプ17及び18の出力は低出力モードに設定されるので、サイドランプ17及び18の温度の上昇度合いは短時間条件が成立した場合よりも緩やかになる。このため、短時間条件が成立した場合と比較してランプの温度上昇幅に更に余裕を持たせることができるので、より長時間の点灯に適切に対応できる温度に維持しておくことが可能になる(破線31b参照)。
なお、本変形例では、前方カメラ113及び後方カメラ114は第2撮像処理を実行するが、第2撮像処理を実行しないように構成されてもよい。この場合、ECU110は、第1撮像処理により取得された前方撮像画像及び後方撮像画像に基づいて前方照度及び後方照度をそれぞれ演算し、当該前方照度及び後方照度を進行方向照度として使用してもよい。
加えて、ECU110は、「現在の環境照度が第1目標照度以下、且つ、駐車支援システムが作動している」場合にランプの点灯継続時間が比較的に長くなる(即ち、長時間条件が成立する)と推定してもよい。そして、ECU110は、「現在の環境照度が第1目標照度以下、且つ、駐車支援システムが作動していない」場合にランプの点灯継続時間が比較的に短くなる(即ち、短時間条件が成立する)と推定してもよい。
更に、ECU110のROMには、ランプ出力が通常出力モードに設定されたときに使用される通常出力用自動露出マップと、ランプ出力が低出力モードに設定されたときに使用される低出力用自動露出マップと、が格納されていてもよい。そして、ECU110は、長時間条件が成立した場合、サイドカメラ11及び12を通常モードに設定する代わりに、低出力用自動露出マップを参照して露出制御してもよい。また、短時間条件が成立した場合、サイドカメラ11及び12を制限モードに設定する代わりに、通常出力用自動露出マップを参照して露出制御するように構成されてもよい。このように、ランプ出力のモードに応じた自動露出マップを個別に準備することにより、第1撮像処理を適切に実行できる。
以上、本実施形態に係る周辺監視装置について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の目的を逸脱しない限り、種々の変更が可能である。
例えば、サイドカメラ11及び12は、自車両の側方部分に設置される構成に限られず、サイドランプ17及び18とともに自車両の任意の部分に設置され得る。
加えて、サイドランプ17及び18は、可視光線を放射するランプであってもよい。
加えて、サイドランプ17及び18は、可視光線を放射するランプであってもよい。
更に、第1撮像処理は、所定の車速以下の場合に行われるように構成されてもよく、第2撮像処理は、所定の車速以下、且つ、サイドランプ17及び18が点灯状態にある期間中に行われるように構成されてもよい。
10:周辺監視ECU、11:左サイドカメラ、12:右サイドカメラ、13:前方カメラ、14:後方カメラ、17:左サイドランプ、18:右サイドランプ、19:ディスプレイ
Claims (3)
- 車両に搭載され、
自動露出機能を有し、当該自動露出機能を利用して撮像範囲に位置する被写体を撮像する第1撮像処理を実行可能な撮像装置と、
前記撮像範囲を照射可能なランプと、
前記ランプの出力を制御可能な制御ユニットと、
を備えた周辺監視装置において、
前記撮像装置は、
前記第1撮像処理の実行中、所定のタイミングにおいて、当該第1撮像処理と並行して、前記自動露出機能を利用せずに一定の露出時間で前記撮像範囲に位置する被写体を撮像する第2撮像処理を実行するように構成され、
前記制御ユニットは、
前記第2撮像処理により取得された前記被写体の撮像画像に基づいて前記撮像範囲の環境照度を演算し、
少なくとも前記環境照度に基づいて前記ランプの出力を決定する、
ように構成された、
周辺監視装置。 - 請求項1に記載の周辺監視装置であって、
更に、前記ランプの温度を測定する温度センサを備え、
前記制御ユニットは、
前記温度センサから取得した前記ランプの温度が所定の上限温度以下である場合に満たされる温度条件が成立する場合、前記環境照度に基づいて決定された前記ランプの出力を維持し、
前記温度条件が成立しない場合、前記環境照度に基づいて決定された前記ランプの出力を下げる、
ように構成された、
周辺監視装置。 - 請求項1に記載の周辺監視装置であって、
前記撮像装置は、前記車両の側方部分に設けられる側方撮像装置であり、
更に、前記車両の前方部分に設けられ、前記車両の前方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な前方撮像装置と、
前記車両の後方部分に設けられ、前記車両の後方領域を撮像範囲として当該撮像範囲に位置する被写体を撮像可能な後方撮像装置と、を備え、
前記制御ユニットは、
前記前方撮像装置及び前記後方撮像装置のうち前記車両の進行方向側の撮像装置による撮像処理により取得された被写体の撮像画像に基づいて当該撮像装置の撮像範囲の照度である進行方向照度を演算し、
前記環境照度が所定の第1目標照度以下且つ前記進行方向照度が所定の第2目標照度以下である場合に満たされる第1特定条件が成立する場合、前記環境照度が前記第1目標照度以下且つ前記進行方向照度が前記第2目標照度より高い場合に満たされる第2特定条件が成立する場合と比較して、前記ランプの出力を下げる、
ように構成された、
周辺監視装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020210365A JP2022097022A (ja) | 2020-12-18 | 2020-12-18 | 周辺監視装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020210365A JP2022097022A (ja) | 2020-12-18 | 2020-12-18 | 周辺監視装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022097022A true JP2022097022A (ja) | 2022-06-30 |
Family
ID=82164894
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020210365A Pending JP2022097022A (ja) | 2020-12-18 | 2020-12-18 | 周辺監視装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022097022A (ja) |
-
2020
- 2020-12-18 JP JP2020210365A patent/JP2022097022A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109963744B (zh) | 照明装置 | |
JP4484856B2 (ja) | 自動車用ヘッドライト制御装置 | |
US20120002052A1 (en) | Obstacle detection apparatus, obstacle detection system having same, and obstacle detection method | |
US20190193633A1 (en) | Viewing device for vehicle | |
JP4191759B2 (ja) | 車両用オートライトシステム | |
JP4701279B2 (ja) | 視覚支援装置 | |
US20110035099A1 (en) | Display control device, display control method and computer program product for the same | |
JP6969488B2 (ja) | 画像表示装置 | |
JP2006350670A (ja) | 夜間運転視界支援装置 | |
US20210160432A1 (en) | Image processing device | |
JP4400512B2 (ja) | 車載カメラ制御装置 | |
JP6305430B2 (ja) | 撮像設定変更装置、撮像システム、および撮像設定変更方法 | |
JP4731177B2 (ja) | 車両の赤外線撮影表示装置及び赤外線撮影表示方法 | |
JP5712821B2 (ja) | 撮影表示制御システム | |
JP2007028540A (ja) | 車両外状況提示システム及び車両外状況提示方法 | |
JP2006349637A (ja) | 車載霧状態判定装置、およびオートフォグランプシステム | |
JP2022097022A (ja) | 周辺監視装置 | |
JP2008146404A (ja) | 車載用画像認識装置 | |
JP4314103B2 (ja) | 車載カメラ | |
JP2007013777A (ja) | 撮像装置 | |
JP6322723B2 (ja) | 撮像装置および車両 | |
JP2002274257A (ja) | 車両用監視装置 | |
JP2004189060A (ja) | 車両用周辺視認装置 | |
JP2004123061A (ja) | 撮影システム | |
JP6204022B2 (ja) | 画像処理装置、撮像装置および画像処理方法 |