JP2019116220A - 車両用視認装置 - Google Patents
車両用視認装置 Download PDFInfo
- Publication number
- JP2019116220A JP2019116220A JP2017251726A JP2017251726A JP2019116220A JP 2019116220 A JP2019116220 A JP 2019116220A JP 2017251726 A JP2017251726 A JP 2017251726A JP 2017251726 A JP2017251726 A JP 2017251726A JP 2019116220 A JP2019116220 A JP 2019116220A
- Authority
- JP
- Japan
- Prior art keywords
- partial image
- signal
- vehicle
- image
- cut out
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】視認範囲を変更する際の注意対象に対する視認性を向上可能な車両用視認装置を提供することを目的とする。【解決手段】通常切り出す部分画像32は点線で示す部分画像32を切り出してモニタ14に表示する。そして、予め定めた信号に連動して、切り出す部分画像32を一点鎖線で示す部分画像32に拡大する場合、自転車Xが一点鎖線の外側になってしまうと、モニタ14に表示されない。そこで、撮影画像30中の注意対象(自転車や、歩行者、障害物、車両等)を検出し、撮影画像30中に注意対象を検出した場合は、予め定めた信号に連動して切り出す部分画像32を変更する際に、実線で示すように、注意対象を含むように切り出す部分画像32の位置を変更する。【選択図】図4
Description
本発明は、車両周辺を撮影して撮影画像を表示することにより車両周辺を視認する車両用視認装置に関する。
車両周辺の撮影画像を表示して車両周辺を視認する車両用視認装置を光学ミラーの代わりとして車両に搭載する技術が知られている。
このような車両用視認装置では、カメラ等によって撮影することで得られる撮影画像のうちの一部の部分画像を表示して、光学ミラーのような視認性を提供するものがある。部分画像を表示するので、視認範囲を変更する場合には、撮影画像から部分画像を切り出す位置を変更することで視認範囲を変更することができる。
例えば、特許文献1では、撮影画像から部分画像を切り出して表示する際に、撮影画像の範囲を示す枠線、及び切り出した画像の範囲を示す枠線をインジケータとして、切り出した部分画像と共に表示することが提案されている。このように、インジケータを表示することで、変更した視認範囲が元からどの程度ずれたかや、変更可能な視認範囲等をインジケータにより容易に認識することが可能となる。
ところで、右左折や、後退などに連動して、視認範囲を変更する制御を行う場合、特許文献1の技術のように、切り出す部分画像を変更する際に、注意対象が映らなくなってしまうことがあるため、改善の余地がある。
本発明は、上記事実を考慮して成されたもので、視認範囲を変更する際の注意対象に対する視認性を向上可能な車両用視認装置を提供することを目的とする。
上記目的を達成するために第1の態様は、車両周辺の撮影画像から切り出した部分画像を表示する表示部と、前記撮影画像中の予め定めた注意対象を検出する検出部と、予め定めた信号に連動して前記部分画像の切り出し領域を変更して前記表示部に表示し、かつ前記部分画像の切り出し領域を変更する際に、前記注意対象が前記検出部によって検出された場合、前記注意対象を含むように前記部分画像の切り出し領域を変更して前記表示部に表示する表示制御を行う制御部と、を備える。
第1の態様によれば、表示部では、車両周辺の撮影画像から切り出した部分画像が表示される。すなわち、表示部を確認することで車両周辺を視認することができる。
検出部では、撮影画像中の予め定めた注意対象が検出される。検出部は、例えば、自転車や、歩行者、障害物、車両等の注意対象が撮影画像中に存在するか否かを画像処理等によって検出する。
そして、制御部では、予め定めた信号に連動して部分画像の切り出し領域を変更して表示部に表示し、かつ部分画像の切り出し領域を変更する際に、注意対象が検出部によって検出された場合、注意対象を含むように部分画像の切り出し領域を変更して表示部に表示する表示制御が行われる。これにより、変更された部分画像に注意対象が含まれるので、視認範囲を変更する際の注意対象に対する視認性を向上することが可能となる。
また、第2の態様は、車両周辺の撮影画像から切り出した部分画像を表示する表示部と、前記撮影画像の撮影範囲外を含む車両周辺の予め定めた注意対象を検出する周辺検出部と、予め定めた信号に連動して前記部分画像の切り出し領域を変更して前記表示部に表示し、かつ前記部分画像の切り出し領域を変更する際に、前記撮影画像の撮影範囲に近づく注意対象が前記周辺検出部によって検出された場合、前記注意対象が接近する方向の前記部分画像を切り出して前記表示部に表示する表示制御を行う制御部と、を備える。
第2の態様によれば、表示部では、車両周辺の撮影画像から切り出した部分画像が表示される。すなわち、表示部を確認することで車両周辺を視認することができる。
周辺検出部では、撮影画像の撮影範囲外を含む車両周辺の予め定めた注意対象が検出される。周辺検出部は、例えば、自転車や、歩行者、障害物、車両等の注意対象が撮影画像外を含む車両周辺に存在するか否かを画像処理等によって検出する。或いは、各種レーダ等によって注意対象を検出してもよい。
そして、制御部では、予め定めた信号に連動して部分画像の切り出し領域を変更して表示部に表示し、かつ部分画像の切り出し領域を変更する際に、撮影画像の撮影範囲に近づく注意対象が周辺検出部によって検出された場合、注意対象が接近する方向の部分画像を切り出して表示部に表示する表示制御が行われる。これにより、撮影画像中に注意対象が存在していなくても、当該撮影画像の撮影範囲に注意対象が近づいている場合には、注意対象の近づく方向の部分画像を切出して表示するので、近づく注意対象をより速い時期に視認することが可能となり、視認範囲を変更する際の注意対象に対する視認性を向上することが可能となる。
なお、表示制御は、部分画像の切り出し領域の移動及び拡大の少なくとも一方の変更を行い、少なくとも一方の変更により検出部によって検出された注意対象が部分画像に含まれない場合、部分画像に注意対象が含まれるように少なくとも一方の変更を行って表示部に表示してもよい。
また、表示制御は、予め定めた信号に連動して、部分画像を予め定めた領域に移動して部分画像を切り出して表示部に表示し、部分画像を予め定めた領域に移動する際に、注意対象が部分画像内から部分画像外となる場合、部分画像に注意対象が含まれる領域まで移動して部分画像の切り出し領域の移動を停止し、停止した領域の部分画像を切り出して表示部に表示してもよい。
また、表示制御は、注意対象の移動に追従して切り出し位置を更に変更して表示してもよい。
さらに、予め定めた信号は、後退信号、方向指示信号、舵角信号、方向指示器の操作部への接触検知信号、表示部への視線検知信号、音声入力信号、乗員降車の予備動作の検知信号、及び視認範囲の変更指示を行う操作部への接触検知信号の少なくとも1つの信号を適用してもよい。
なお、表示制御は、予め定めた信号に連動して部分画像の切り出し領域を予め定めた領域に拡大して切り出して表示部に表示し、かつ部分画像の切り出し領域を拡大する際に、検出部によって検出された注意対象が予め定めた領域まで拡大せずに含まれる場合は、予め定めた領域まで拡大せずに部分画像に注意対象が含まれる領域まで部分画像の切り出す領域を拡大して表示部に表示してもよい。これにより、部分画像の切り出し領域を予め定めた範囲まで拡大して切り出して表示部に表示する場合に比べて、表示部に表示する注意対象の大きさを大きくすることができる。
以上説明したように本発明によれば、視認範囲を変更する際の注意対象に対する視認性を向上可能な車両用視認装置を提供できる、という効果がある。
以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。
(第1実施形態)
図1は、第1発明の実施の形態に係る車両用視認装置の概略構成を示す図である。
(第1実施形態)
図1は、第1発明の実施の形態に係る車両用視認装置の概略構成を示す図である。
本実施形態に係る車両用視認装置は、後側方カメラ12、表示部としてのモニタ14、並びに、検出部及び制御部としての制御装置18が車両の左右に対応してそれぞれ設けられている。
後側方カメラ12は、車両のサイドドア(フロントサイドドア、図示省略)の上下方向中間部の車両前側端に外側に設置されて車両後側方を撮影する。後側方カメラ12は、支持体としての略直方体形箱状の筐体13に設けられており、レンズが車両後側方に向けて配置され、車両の後側方を撮影する。筐体13の車幅方向内側端部は、サイドドアに取付けられており、筐体13がサイドドア(車体側)に車両前後方向に回動可能に支持されている。
モニタ14は、フロントピラーの下端付近に設けられ、後側方カメラ12の後側方撮影画像を主に表示する。すなわち、アウターミラーの代わりとされ、モニタ14を確認することにより、車両後側方を視認することができる。
制御装置18は、左右のそれぞれに対応して設けられており、左右各々の後側方カメラ12の撮影画像の表示制御を行う。
続いて、本実施形態に係る車両用視認装置10の制御系の構成について説明する。図2は、本実施形態に係る車両用視認装置10の制御系の構成を示すブロック図である。
制御装置18は、CPU18A、ROM18B、RAM18C、及びI/O(入出力インタフェース)18Dがそれぞれバス18Eに接続されたマイクロコンピュータで構成されている。
ROM18Bには、後側方カメラ12の後側方撮影画像をモニタ14に表示するための表示制御等を行うための各種プログラムが記憶されている。ROM18Bに記憶されたプログラムをRAM18Cに展開してCPU18Aが実行することにより、モニタ14への表示制御が行われる。
I/O18Dには、後側方カメラ12、モニタ14、及び、操作部16が接続されている。
後側方カメラ12は、車両後側方を撮影することによって後側方撮影画像を得る。撮影によって得られた後側方撮影画像は、後側方カメラ12の撮影結果として制御装置18に出力する。
モニタ14は、後側方カメラ12によって撮影された後側方撮影画像を表示する。後側方撮影画像を表示する際には、撮影画像の左右を反転する鏡像変換等の画像処理を行って表示する。
操作部16は、モニタ14に表示される画像の表示位置、すなわち、後側方の視認範囲の変更の指示等を行う。操作部16は、例えば、視認範囲の車幅方向への変更指示や、車両上下方向への変更指示等を行うためのスイッチやセンサや、視認範囲の拡大や縮小の変更指示を行うスイッチやセンサ、視認範囲を変更する対象のモニタ14(左または右)を指示するためのスイッチ等を備える。また、操作部16は、後側方の視認範囲の変更の指示等が乗員によって行われると、変更指示信号を制御装置18に出力する。操作部16は、具体的には、左スイッチ、右スイッチ、及び方向指示部等を含む。すなわち、左スイッチまたは右スイッチによって視認範囲を変更するモニタ14に対応する方向(左または右)を指示し、方向指示部によって視認範囲の変更方向(車幅方向及び車両上下方向)を指示する。なお、視認範囲の変更については音声入力による変更指示を可能としてもよい。
また、制御装置18は、本実施形態では、車両の左右に対応して一対設けられているので、それぞれ相互通信可能なようにそれぞれのI/O18Dに他方の制御装置18が接続されている。なお、制御装置18は1つとして、左右のそれぞれの後側方カメラ12やモニタ14を制御する形態としてもよい。
ここで、制御装置18によるモニタ14への後側方カメラ12の撮影画像の表示方法について詳細に説明する。図3は、撮影画像30から生成する視認用画像を説明するための図である。
本実施形態に係る車両用視認装置10では、図3に示すように、後側方カメラ12によって車両の後側方を撮影し、撮影によって得られる撮影画像30から図3の点線で示す部分画像32を切り出す。そして、切り出した部分画像32を視認用画像34としてモニタ14に表示する。すなわち、本実施形態に係る車両用視認装置10では、撮影画像30の一部の部分画像32を表示するため、切り出す位置を変更することで、視認範囲の変更が可能とされている。
視認範囲の変更は、例えば、操作部16を操作することで行われる。具体的には、操作部16を操作することで、視認範囲を変更する方向(左または右)を選択し、視認範囲の変更方向(車幅方向及び車両上下方向)を指示する。これにより、制御装置18が、撮影画像30の現在の部分画像32の位置から操作部16によって操作された方向に切り出す部分画像32の位置を変更してモニタ14に表示する。
また、本実施形態では、予め定めた信号に連動して視認範囲を変更する機能を備えている。予め定めた信号に連動して視認範囲を変更する想定シーンとしては、一例として、車線変更、旋回の予備動作、後方確認時、及び乗員の降車時等がある。例えば、シフトポジションセンサ等から得られる車両の後退信号、方向指示器から得られる方向指示信号、及び舵角センサから得られる舵角信号の少なくとも1つの信号に連動して視認範囲を変更する。より具体的には、後退信号を検出した場合に、切り出す部分画像32を車両下側及び外側方向に拡大、または切り出す部分画像32を車輌下側方向に移動する。また、方向指示信号を検出した場合に、方向指示器により指示された方向へ部分画像32を移動または拡大する。また、舵角信号を検出した場合に、舵角に応じた方向に部分画像32を移動または拡大する。ここで、部分画像32を移動または拡大する際には、アスフェリカルミラーで後側方を視認するように、部分画像32の一部または全面を圧縮して表示してもよい。また、予め定めた信号の他の例としては、例えば、レバーコンビネーションスイッチ等の方向指示器の操作部への接触検知信号や、モニタ14への視線検知信号、音声入力信号、乗員降車の予備動作の検知信号(例えば、運転者の視線検知信号やドアノブへの接触検知信号等)、操作部16における視認範囲の拡大や縮小の変更指示等を行うためのスイッチやセンサの接触検知信号などがある。詳細には、予め定めた信号として接触検知信号を用いる場合には、車線変更などのシーンにおいて、方向指示器への入力操作を行う前に、例えば方向指示器の操作部を触りながら、車両周囲を事前に確認することが考えられる。従って、操作部への接触検知信号を検出した場合に視認変更することで、車両周囲を確認したいシーンにおいて視認範囲を変更でき、乗員にとって使い勝手が良いものとなる。また、予め定めた信号としてモニタ14への視線検知信号を用いる場合には、モニタ14へ視線を向ける行為は、車両周囲を確認したい場合で、例えば車線変更、後退等を行う事前動作である場合が多い。従って、モニタ14へ視線を向ける行為を検出した場合に視認変更することで、車両周囲を確認したいシーンにおいて視認範囲を変更でき、乗員にとって使い勝手が良いものとなる。また、予め定めた信号として乗員降車の予備動作の検知信号を用いる場合には、降車前に、事前に車両周囲の情報を確認でき、安全に降車できる。
なお、予め定めた信号に連動して視認範囲を変更する際の視認範囲の変更量(移動量や拡大量)は、操作部16を操作して乗員によって予め設定された量を適用する。
このように本実施形態では、予め定めた信号に連動して、視認範囲を変更する機能を備えているが、視認範囲を変更する際に、撮影画像30中に注意対象が存在していても、切り出した部分画像32に映っていない場合がある。
例えば、図4に示すように、撮影画像30中に自転車Xが映っている場合について説明する。通常切り出す部分画像32は図4点線で示す部分画像32を切り出してモニタ14に表示する。そして、予め定めた信号に連動して、予め定めた範囲に部分画像32を拡大する。この場合、予め定めた信号に連動して切り出す部分画像32を図4一点鎖線で示す部分画像32Aに拡大する場合、自転車Xが一点鎖線の外側になってしまうと、モニタ14に表示されない。
そこで、本実施形態では、撮影画像30中の注意対象(自転車や、歩行者、障害物、車両等)を検出し、撮影画像30中に注意対象を検出した場合は、予め定めた信号に連動して切り出す部分画像32を変更する際に、図4の実線で示すように、注意対象を含むように切り出す部分画像32の位置を変更して部分画像32Bを切り出すようになっている。これにより、撮影画像30中に注意対象が含まれ、かつ予め定めた信号に連動して視認範囲を変更する場合に、注意対象をモニタ14に確実に表示することができ、視認性を向上できる。
なお、予め定めた信号に連動して、視認範囲を変更する例としては、図5(A)〜(F)の例が一例として挙げられる。
図5(A)の例では、例えば、後退信号に連動して視認範囲を車両下側に移動する。この場合、図5(A)の点線の部分画像32から一点鎖線の部分画像32Aに切り出す部分画像32の位置を変更して視認範囲を変更する。視認範囲を変更する際に撮影画像30中に注意対象として障害物が存在する場合、本実施形態では、図5(A)の実線で示すように、障害物を含む部分画像32Bを切り出して、障害物を含むように視認範囲を変更する。
図5(B)の例では、例えば、方向指示信号または舵角信号に連動して、視認範囲を車幅方向に移動する。この場合、図5(B)の点線の部分画像32から一点鎖線の部分画像32Aに切り出す部分画像32の位置を変更して視認範囲を変更する。視認範囲を変更する際に撮影画像30中に注意対象として自転車が存在する場合、本実施形態では、図5(B)の実線で示すように、自転車を含む部分画像32Bを切り出して、自転車を含むように視認範囲を変更する。
図5(C)の例では、例えば、後退信号に連動して視認範囲を車両下側に拡大する。この場合、図5(C)の点線の部分画像32から一点鎖線の部分画像32Aに切り出す部分画像32の領域を拡大して部分画像32Aを切り出して、モニタ14の画面に収まるように縮小して表示することで視認範囲を変更する。視認範囲を変更する際に撮影画像30中に注意対象として障害物が存在する場合、本実施形態では、図5(C)の実線で示すように、障害物を含む領域まで拡大した部分画像32Bを切り出して障害物を含むように視認範囲を変更する。なお、切り出した部分画像32A、32Bをモニタ14の画面に収まるように縮小して表示する際には、画面の予め定めた位置より上側または下側のみを圧縮することで画面に収まるように縮小して表示してもよいし、部分画像32A、32Bの全面を圧縮することで画面に収まるように縮小して表示してもよい。
図5(D)の例では、例えば、方向指示信号または舵角信号に連動して、視認範囲を車幅方向に拡大する。この場合、図5(D)の点線の部分画像32から一点鎖線の部分画像32Aに切り出す部分画像32の領域を拡大して切り出して、モニタ14の画面に収まるように縮小して表示することで視認範囲を変更する。視認範囲を変更する際に撮影画像30中に注意対象として自転車が存在する場合、本実施形態では、図5(D)の実線で示すように、自転車を含む領域まで拡大した部分画像32Bを切り出して、自転車を含むように視認範囲を変更する。なお、切り出した部分画像32A、32Bをモニタ14の画面に収まるように縮小して表示する際には、画面の予め定めた位置より車両内側または車両外側のみを圧縮することで画面に収まるように縮小してもよいし、部分画像32A、32Bの全面を圧縮することで画面に収まるように縮小してもよい。
図5(E)の例は、図5(B)の部分画像32の移動と、図5(D)の部分画像32の拡大とを組み合わせたものである。例えば、方向指示信号または舵角信号に連動して、切り出す部分画像32を車幅方向に移動して、図5(E)の点線の部分画像32から一点鎖線の部分画像32Aに変更する。このとき、撮影画像30中に注意対象としての自転車が存在する場合には、自転車を含むように切り出す部分画像32を図5(E)の実線で示す部分画像32Bのように車幅方向に拡大して切り出して、モニタ14の画面に収まるように縮小して表示することで視認範囲を変更する。なお、図5(E)と同様にして、図5(A)と図5(C)を組み合わせてもよい。
図5(F)の例は、図5(B)の部分画像32の移動と、図5(C)の部分画像32の拡大とを組み合わせたものである。例えば、方向指示信号または舵角信号に連動して、切り出す部分画像32を車幅方向に移動して図5(F)の点線の部分画像32から一点鎖線の部分画像32Aに変更する。このとき、撮影画像30中に注意対象としての障害物が存在する場合には、障害物を含むように切り出す部分画像32を図5(F)の実線で示す部分画像32Bのように車両下側方向に拡大して切り出して、モニタ14の画面に収まるように縮小して表示することで視認範囲を変更する。なお、図5(F)と同様にして、図5(A)と図5(D)を組み合わせてもよい。
なお、図5(C)の例のように、後退信号等の予め定めた信号に連動して視認範囲を車両下側に拡大する際に、図6(A)に示すように、点線の部分画像32から一点鎖線の部分画像32Aまで拡大せずに、実線の部分画像32Bに障害物等の注意対象が含まれる場合には、予め定めた領域の部分画像32Aまで拡大せずに、部分画像32Bを切り出して表示してもよい。また、同様に、図5(D)の例のように、方向指示信号または舵角信号等の予め定めた信号に連動して、視認範囲を車幅方向に拡大する際に、図6(B)に示すように、点線の部分画像32から一点鎖線の部分画像32Aまで拡大せずに、実線の部分画像32Bに自転車等の注意対象が含まれる場合には、予め定めた領域の部分画像32Aまで拡大せずに、部分画像32Bを切り出して表示してもよい。これらにより、モニタ14に表示する注意対象の大きさを部分画像32Aを切り出してモニタ14に表示する場合よりも大きくすることができる。
また、上記以外の予め定めた信号を検知した際の視認範囲の変更方向の例としては、方向指示器の操作部への接触信号を検知した場合には、車幅方向または車両下側方向へ視認範囲を変更してもよい。乗員降車の予備動作の検知信号を検知した場合には、車幅方向または車両下側方向へ視認範囲を変更してもよい。操作部16における視認範囲の拡大や縮小の変更指示を行うためのスイッチやセンサへの接触信号を検知した場合には、変更指示の方向に応じて、図5(C)に示すように、車両下側方向に視認範囲を拡大または縮小を行ってもよいし、図5(D)に示すように、車幅方向に視認範囲を拡大または縮小してもよい。音声入力信号を検知した場合には、音声入力によって指示された方向に視認範囲を移動、拡大、または縮小してもよい。
なお、部分画像32の切り出す位置を変更してモニタ14に表示する際には、変更前後の途中の切出し位置の部分画像32を表示して、徐々に視認範囲を変更して表示するようにしてもよい。例えば、部分画像32の切り出す位置を図4の点線の部分画像32から実線の部分画像32B(または一点鎖線の部分画像32A)の位置に変更してモニタ14に表示する際に、点線の位置と実線(または一点鎖線)の位置の間の変更前後の途中の部分画像32を表示して、徐々に視認範囲を変更すうように表示する。
続いて、上述のように構成された本実施形態に係る車両用視認装置10の制御装置18で行われる具体的な処理について説明する。図7は、本実施形態に係る車両用視認装置10の制御装置18で行われる表示制御の一例を示すフローチャートである。なお、図7の表示制御は、図示しないイグニッションスイッチ(IG)がオンされた場合に、ROM18Bに予め記憶された表示制御プログラムを実行することにより開始する。また、以下では、一例として、予め定めた信号に連動した視認範囲の変更例として、予め定めた信号に連動して視認範囲を拡大する場合を説明する。
ステップ100では、後側方カメラ12の撮影を開始するよう制御装置18が後側方カメラ12を制御してステップ102へ移行する。
ステップ102では、制御装置18が、後側方カメラ12の撮影結果を取得し、取得した後側方の撮影画像30に対して鏡像変換を行ってモニタ14への表示を開始してステップ104へ移行する。すなわち、撮影画像30から部分画像32が切出し、切り出した部分画像32を鏡像変換を行って視認用画像34をモニタ14に表示する。モニタ14がフロントピラー下端付近に設けられているので、アウターミラーの代わりにモニタ14を見ることにより、後側方を視認することが可能となる。
ステップ104では、制御装置18が、視認範囲連動変更条件が成立したか否かを判定する。該判定は、予め定めた信号(例えば、後退信号や、方向指示信号、舵角信号等の信号)を検出したか否かを判定する。該判定が肯定された場合にはステップ106へ移行し、否定された場合にはステップ104に戻って上述の処理を繰り返す。
ステップ106では、制御装置18が、撮影範囲内の注意対象を検出してステップ108へ移行する。例えば、後側方カメラ12の撮影画像30の中に、自転車や、歩行者、障害物、車両等の注意対象が存在するか否かを画像処理等によって検出する。
ステップ108では、制御装置18が、撮影範囲内に注意対象があるか否かを判定する。該判定が否定された場合にはステップ110へ移行し、肯定された場合にはステップ112へ移行する。
ステップ110では、制御装置18が、予め設定した範囲の部分画像32を切り出してモニタ14に表示してステップ116へ移行する。例えば、後退信号に連動して車両下側及び車両外側方向に表示範囲を拡大する場合には、予め設定した範囲に拡大した部分画像32を切り出してモニタ14に表示する。また、後退信号に連動して車両下側方向に表示範囲を移動する場合には、車両下方向に予め定めた量を移動した部分画像32を切り出してモニタ14に表示する。また、方向指示信号や舵角信号に連動させる場合には、方向指示または舵角方向に部分画像32を拡大または移動した部分画像32を切り出してモニタ14に表示する。
一方、ステップ112では、制御装置18が、注意対象が変更後の部分画像32外に存在するか否かを判定する。すなわち、撮影画像30中に注意対象が存在する場合に、ステップ110で予め定めた範囲の部分画像32を切り出して視認範囲を変更した場合に、注意対象がモニタ14に映らないか否かを判定する。該判定が否定された場合にはステップ110へ移行し、判定が肯定された場合にはステップ114へ移行する。
ステップ114では、制御装置18が、注意対象を含むように切出し範囲を拡大して部分画像32を切り出してモニタ14に表示してステップ116へ移行する。例えば、後退信号に連動して車両下側及び車両外側に表示範囲を拡大する場合には、図4に示すように、一点鎖線で示す予め定めた範囲の部分画像32Aを切り出したのでは、自転車が映らないので、実線で示すように自転車を含む範囲の部分画像32Bに拡大してモニタ14に表示する。これにより、予め定めた信号に連動して視認範囲を変更する際に、注意対象を確実に視認することが可能となり、視認性が向上する。なお、注意対象の自転車を含む範囲の部分画像32Bに拡大してモニタ14に表示した後に、注意対象の移動に追従して、部分画像32Bの切り出す位置も動的に変更してモニタ14に表示してもよい。注意対象の移動に追従して動的に部分画像32Bの切出し位置を変更することで、注意対象を見逃すことがなくなる。
ステップ116では、制御装置18が、予め定めた復帰条件が成立したか否かを判定する。該判定は、例えば、後退信号や、方向指示信号、舵角信号(例えば、予め定めた舵角以上の信号)が検出されなくなったか否かを判定する。該判定が肯定された場合にはステップ118へ移行し、否定された場合にはステップ108に戻って上述の処理を繰り返す。
ステップ118では、制御装置18が、視認範囲を変更する前の元の視認範囲の部分画像32を切り出してモニタ14に表示してステップ104に戻って上述の処理を繰り返す。
このように制御装置18が処理を行うことにより、視認範囲を変更する際に、注意対象が映らなくなってしまうことを抑制することができる。
(第2実施形態)
続いて、第2実施形態に係る車両用視認装置について説明する。なお、本実施形態は、概略構成及び制御系の構成は、上記の実施形態と同一であるため、詳細な説明を省略する。
続いて、第2実施形態に係る車両用視認装置について説明する。なお、本実施形態は、概略構成及び制御系の構成は、上記の実施形態と同一であるため、詳細な説明を省略する。
上記の実施形態では、モニタ14に注意対象が表示されてなくても、撮影画像30中に注意対象が存在する場合は、予め定めた信号に連動して視認範囲を変更する際に、注意対象を含むように視認範囲を変更することで視認性を向上した。これに対して、本実施形態では、モニタ14に注意対象が表示されている場合に、予め定めた信号に連動して視認範囲を変更することで、注意対象が表示されなくなってしまうことを防止するようにしたものである。
例えば、後退信号に連動して、図8に示すように、切り出す部分画像32を図8の点線の部分画像32から車両下側の一点鎖線の部分画像32Aに移動する場合、視認範囲の変更により注意対象としての自転車Xがモニタ14に表示されなくなってしまう。そこで、本実施形態では、予め定めた信号に連動して視認範囲を変更する際に、移動先の部分画像32に注意対象が含まれない場合は、注意対象を含むように視認範囲に変更する。具体的には、図8の一点鎖線の部分画像32Aまで切り出す部分画像32を移動せずに、実線で示す部分画像32Bで切り出す位置の移動を停止して、自転車Xを含む部分画像32Bを切り出して表示する。これにより、予め定めた信号に連動して視認範囲を変更する際に、注意対象が表示されなくなることを防止できる。
ここで、本実施形態に係る車両用視認装置10の制御装置18で行われる具体的な処理について説明する。図9は、本実施形態に係る車両用視認装置10の制御装置18で行われる表示制御の一例を示すフローチャートである。なお、図9の表示制御は、図示しないイグニッションスイッチ(IG)がオンされた場合に、ROM18Bに予め記憶された表示制御プログラムを実行することにより開始する。また、図7と同一処理は同一符号を付して説明する。また、以下では、一例として、予め定めた信号に連動した視認範囲の変更例として、予め定めた信号に連動して視認範囲を移動する場合を説明する。
ステップ100では、後側方カメラ12の撮影を開始するよう制御装置18が後側方カメラ12を制御してステップ102へ移行する。
ステップ102では、制御装置18が、後側方カメラ12の撮影結果を取得し、取得した後側方の撮影画像30に対して鏡像変換を行ってモニタ14への表示を開始してステップ104へ移行する。すなわち、撮影画像30から部分画像32が切出し、切り出した部分画像32を鏡像変換を行って視認用画像34をモニタ14に表示する。モニタ14がフロントピラー下端付近に設けられているので、アウターミラーの代わりにモニタ14を見ることにより、後側方を視認することが可能となる。
ステップ104では、制御装置18が、視認範囲連動変更条件が成立したか否かを判定する。該判定は、予め定めた信号(例えば、後退信号や、方向指示信号、舵角信号等の信号)を検出したか否かを判定する。該判定が肯定された場合にはステップ105へ移行し、否定された場合にはステップ104に戻って上述の処理を繰り返す。
ステップ105では、制御装置18が、モニタ14に表示された画像内の注意対象を検出してステップ107へ移行する。例えば、後側方カメラ12の撮影画像30から切り出して表示している部分画像32の中に、自転車や、歩行者、障害物等の注意対象が存在するか否かを画像処理等によって検出する。
ステップ107では、制御装置18が、モニタ14に表示された画像内に注意対象があるか否かを判定する。該判定が否定された場合にはステップ110へ移行し、肯定された場合にはステップ112へ移行する。
ステップ110では、制御装置18が、予め設定した範囲の部分画像32を切り出してモニタ14に表示してステップ116へ移行する。例えば、後退信号に連動して車両下側及び車両外側方向に表示範囲を拡大する場合には、予め設定した範囲に拡大した部分画像32を切り出してモニタ14に表示する。また、後退信号に連動して車両下側方向に表示範囲を移動する場合には、車両下方向に予め定めた量を移動した部分画像32を切り出してモニタ14に表示する。また、方向指示信号や舵角信号に連動させる場合には、方向指示または舵角方向に部分画像32を拡大または移動した部分画像32を切り出してモニタ14に表示する。
一方、ステップ112では、制御装置18が、注意対象が変更後の部分画像32外に存在するか否かを判定する。すなわち、モニタ14に表示された画像内に注意対象が存在する場合に、ステップ110を行うことで予め定めた範囲の部分画像32を切り出して視認範囲を変更した場合に、注意対象がモニタ14に映らないか否かを判定する。該判定が否定された場合にはステップ110へ移行し、判定が肯定された場合にはステップ113へ移行する。
ステップ113では、制御装置18が、注意対象を含むように切出範囲の移動を停止して部分画像32を切り出してモニタ14に表示してステップ116へ移行する。例えば、後退信号に連動して車両下側に切出範囲を移動する場合には、図8に示すように、一点鎖線で示す予め定めた範囲の部分画像32Aに移動して切り出したのでは、自転車が映らないので、実線で示すように自転車を含む範囲の部分画像32Bまで移動し、自転車が外れないように切出範囲の移動を停止して切出した部分画像32Bをモニタ14に表示する。これにより、予め定めた信号に連動して視認範囲を変更する際に、注意対象を確実に視認することが可能となり、視認性が向上する。なお、注意対象の自転車を含む範囲の部分画像32Bに切出し位置を変更してモニタ14に表示した後に、注意対象の移動に追従して、部分画像32Bの切り出す位置も動的に変更してモニタ14に表示してもよい。注意対象の移動に追従して動的に部分画像32Bの切出し位置を変更することで、注意対象を見逃すことがなくなる。
ステップ116では、制御装置18が、予め定めた復帰条件が成立したか否かを判定する。該判定は、例えば、後退信号や、方向指示信号、舵角信号(例えば、予め定めた舵角以上の信号)が検出されなくなったか否かを判定する。該判定が肯定された場合にはステップ118へ移行し、否定された場合にはステップ108に戻って上述の処理を繰り返す。
ステップ118では、制御装置18が、視認範囲を変更する前の元の視認範囲の部分画像32を切り出してモニタ14に表示してステップ104に戻って上述の処理を繰り返す。
このように制御装置18が処理を行うことにより、視認範囲を変更する際に、注意対象が映らなくなってしまうことを抑制することができる。
(第3実施形態)
続いて、第3実施形態に係る車両用視認装置について説明する。図10は、本実施形態に係る車両用視認装置の概略構成を示すブロック図である。
続いて、第3実施形態に係る車両用視認装置について説明する。図10は、本実施形態に係る車両用視認装置の概略構成を示すブロック図である。
本実施形態に係る車両用視認装置11は、第1実施形態に係る車両用視認装置10に対して、図10に示すように、周辺検出部としての周辺監視部20を備える点が異なり、他の部分については同一であるため、差異のみを説明する。
周辺監視部20は、I/O18Dに接続されており、後側方カメラ12の撮影範囲外を含む車両周辺の注意対象(例えば、自転車や、歩行者、車両、障害物等)を監視し、監視結果を制御装置18に出力する。周辺監視部20は、例えば、レーザレーダや、超音波レーダ等の各種レーダを適用してもよい。或いは、後側方カメラ12の撮影範囲より広い範囲を撮影する周辺カメラを適用してもよい。
制御装置18は、周辺監視部20の監視結果に基づいて、後側方カメラ12の撮影範囲に近づく注意対象を検出する。そして、予め定めた信号に連動して、切出す部分画像32を予め定めた位置に変更して視認範囲を変更する際に、後側方カメラ12の撮影範囲に近づく注意対象を検出した場合は、注意対象が近づく方向の部分画像32を切出して表示する。
ここで、本実施形態に係る車両用視認装置11の制御装置18で行われる具体的な処理について説明する。図11は、本実施形態に係る車両用視認装置11の制御装置18で行われる表示制御の一部の処理例を示すフローチャートである。なお、図11の処理は、図7及び図9のステップ110の代わりに行われる。
すなわち、ステップ108またはステップ107の判定が否定されると、ステップ200へ移行して、制御装置18が、周辺監視部20の監視結果に基づいて、撮影範囲外の注意対象を検出してステップ202へ移行する。
ステップ202では、制御装置18が、後側方カメラ12の撮影範囲方向に注意対象が移動しているか否かを判定する。該判定が否定された場合にステップ204へ移行し、肯定された場合はステップ206へ移行する。
ステップ204では、制御装置18が、予め設定した範囲の部分画像32を切り出してモニタ14に視認用画像34を表示して一連の処理をリターンしてステップ116へ移行する。例えば、後退信号に連動して車両下側及び車両外側方向に表示範囲を拡大する場合には、予め設定した範囲に拡大した部分画像32を切り出してモニタ14に表示する。また、後退信号に連動して車両下側方向に表示範囲を移動する場合には、車両下方向に予め定めた量を移動した部分画像32を切り出してモニタ14に表示する。また、方向指示信号や舵角信号に連動させる場合には、方向指示または舵角方向に部分画像32を拡大または移動した部分画像32を切り出してモニタ14に表示する。
一方、ステップ206では、制御装置18が、注意対象が近づく方向の部分画像32を切出してモニタ14に表示して一連の処理をリターンしてステップ116へ移行する。すなわち、後側方カメラ12の撮影画像30中に注意対象が存在していなくても、当該撮影画像30の撮影範囲に注意対象が近づいている場合には、注意対象の近づく方向の部分画像32を切出して表示するので、近づく注意対象をより速い時期に視認することが可能となる。
なお、上記の実施の形態では、モニタ14をフロントピラーの下端付近に設けた例を説明したが、モニタ14の位置はこれに限るものではない。例えば、インナーミラーの位置に設けてもよい。或いはコンビネーションメータ内に設けてもよい。或いは、センターコンソールに設けてもよい。或いは、フロントウインドシールドガラスの上部付近または天井の車両前方部に設けたインナーミラーに設けてもよい。
また、上記の実施形態における制御装置18で行われる処理は、ソフトウエアの処理として説明したが、これに限るものではない。例えば、ハードウエアで行う処理としてもよいし、ハードウエアとソフトウエアの双方を組み合わせた処理としてもよい。
また、上記の実施形態における制御装置18で行われる処理は、プログラムとして記憶媒体に記憶して流通させるようにしてもよい。
さらに、本発明は、上記に限定されるものでなく、上記以外にも、その主旨を逸脱しない範囲内において種々変形して実施可能であることは勿論である。
10 車両用視認装置
12 後側方カメラ
14 モニタ
18 制御装置
20 周辺監視部
12 後側方カメラ
14 モニタ
18 制御装置
20 周辺監視部
Claims (7)
- 車両周辺の撮影画像から切り出した部分画像を表示する表示部と、
前記撮影画像中の予め定めた注意対象を検出する検出部と、
予め定めた信号に連動して前記部分画像の切り出し領域を変更して前記表示部に表示し、かつ前記部分画像の切り出し領域を変更する際に、前記注意対象が前記検出部によって検出された場合、前記注意対象を含むように前記部分画像の切り出し領域を変更して前記表示部に表示する表示制御を行う制御部と、
を備えた車両用視認装置。 - 車両周辺の撮影画像から切り出した部分画像を表示する表示部と、
前記撮影画像の撮影範囲外を含む車両周辺の予め定めた注意対象を検出する周辺検出部と、
予め定めた信号に連動して前記部分画像の切り出し領域を変更して前記表示部に表示し、かつ前記部分画像の切り出し領域を変更する際に、前記撮影画像の撮影範囲に近づく注意対象が前記周辺検出部によって検出された場合、前記注意対象が接近する方向の前記部分画像を切り出して前記表示部に表示する表示制御を行う制御部と、
を備えた車両用視認装置。 - 前記表示制御は、前記部分画像の切り出し領域の移動及び拡大の少なくとも一方の変更を行い、前記少なくとも一方の変更により前記検出部によって検出された前記注意対象が前記部分画像に含まれない場合、前記部分画像に前記注意対象が含まれるように前記少なくとも一方の変更を行って前記表示部に表示する請求項1に記載の車両用視認装置。
- 前記表示制御は、予め定めた信号に連動して、前記部分画像を予め定めた領域に移動して前記部分画像を切り出して前記表示部に表示し、前記部分画像を予め定めた領域に移動する際に、前記注意対象が前記部分画像内から部分画像外となる場合、前記部分画像に前記注意対象が含まれる領域まで移動して前記部分画像の切り出し領域の移動を停止し、停止した領域の前記部分画像を切り出して前記表示部に表示する請求項1に記載の車両用視認装置。
- 前記表示制御は、前記注意対象の移動に追従して前記切り出し位置を更に変更して表示する請求項1〜4の何れか1項に記載の車両用視認装置。
- 前記予め定めた信号は、後退信号、方向指示信号、舵角信号、方向指示器の操作部への接触検知信号、前記表示部への視線検知信号、音声入力信号、乗員降車の予備動作の検知信号、及び視認範囲の変更指示を行う操作部への接触検知信号の少なくとも1つの信号である請求項1〜5の何れか1項に記載の車両用視認装置。
- 前記表示制御は、前記予め定めた信号に連動して前記部分画像の切り出し領域を予め定めた領域に拡大して切り出して前記表示部に表示し、かつ前記部分画像の切り出し領域を拡大する際に、前記検出部によって検出された前記注意対象が前記予め定めた領域まで拡大せずに含まれる場合は、前記予め定めた領域まで拡大せずに前記部分画像に前記注意対象が含まれる領域まで前記部分画像の切り出す領域を拡大して前記表示部に表示する請求項1に記載の車両用視認装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017251726A JP2019116220A (ja) | 2017-12-27 | 2017-12-27 | 車両用視認装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017251726A JP2019116220A (ja) | 2017-12-27 | 2017-12-27 | 車両用視認装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019116220A true JP2019116220A (ja) | 2019-07-18 |
Family
ID=67303890
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017251726A Pending JP2019116220A (ja) | 2017-12-27 | 2017-12-27 | 車両用視認装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2019116220A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021024481A (ja) * | 2019-08-07 | 2021-02-22 | 株式会社デンソーテン | 電子ミラーシステム、電子ミラー装置および情報出力方法 |
JP2021149591A (ja) * | 2020-03-19 | 2021-09-27 | エヌ・ティ・ティ・コムウェア株式会社 | 画像判定装置、画像判定方法、および、プログラム |
JP2023032500A (ja) * | 2021-08-27 | 2023-03-09 | ネオトーキョー株式会社 | デジタルルームミラー |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008030705A (ja) * | 2006-07-31 | 2008-02-14 | Aisin Aw Co Ltd | 車両周辺画像表示システム |
JP2009073250A (ja) * | 2007-09-19 | 2009-04-09 | Denso Corp | 車両後方表示装置 |
US20100066516A1 (en) * | 2008-09-15 | 2010-03-18 | Denso Corporation | Image displaying in-vehicle system, image displaying control in-vehicle apparatus and computer readable medium comprising program for the same |
JP2010163104A (ja) * | 2009-01-16 | 2010-07-29 | Denso Corp | 車両用表示装置及びそれを備えた車両周辺視野表示システム |
JP2010184588A (ja) * | 2009-02-12 | 2010-08-26 | Clarion Co Ltd | 車両周辺監視装置 |
JP2014003482A (ja) * | 2012-06-19 | 2014-01-09 | Ichikoh Ind Ltd | 車両周辺視認装置 |
US20140277940A1 (en) * | 2013-03-15 | 2014-09-18 | Gentex Corporation | Display system and method thereof |
-
2017
- 2017-12-27 JP JP2017251726A patent/JP2019116220A/ja active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008030705A (ja) * | 2006-07-31 | 2008-02-14 | Aisin Aw Co Ltd | 車両周辺画像表示システム |
JP2009073250A (ja) * | 2007-09-19 | 2009-04-09 | Denso Corp | 車両後方表示装置 |
US20100066516A1 (en) * | 2008-09-15 | 2010-03-18 | Denso Corporation | Image displaying in-vehicle system, image displaying control in-vehicle apparatus and computer readable medium comprising program for the same |
JP2010064725A (ja) * | 2008-09-15 | 2010-03-25 | Denso Corp | 車載撮影画像表示制御装置、車載撮影画像表示制御装置用のプログラム、および車載撮影画像表示システム |
JP2010163104A (ja) * | 2009-01-16 | 2010-07-29 | Denso Corp | 車両用表示装置及びそれを備えた車両周辺視野表示システム |
JP2010184588A (ja) * | 2009-02-12 | 2010-08-26 | Clarion Co Ltd | 車両周辺監視装置 |
JP2014003482A (ja) * | 2012-06-19 | 2014-01-09 | Ichikoh Ind Ltd | 車両周辺視認装置 |
US20140277940A1 (en) * | 2013-03-15 | 2014-09-18 | Gentex Corporation | Display system and method thereof |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021024481A (ja) * | 2019-08-07 | 2021-02-22 | 株式会社デンソーテン | 電子ミラーシステム、電子ミラー装置および情報出力方法 |
JP2021149591A (ja) * | 2020-03-19 | 2021-09-27 | エヌ・ティ・ティ・コムウェア株式会社 | 画像判定装置、画像判定方法、および、プログラム |
JP7340484B2 (ja) | 2020-03-19 | 2023-09-07 | エヌ・ティ・ティ・コムウェア株式会社 | 画像判定装置、画像判定方法、および、プログラム |
JP2023032500A (ja) * | 2021-08-27 | 2023-03-09 | ネオトーキョー株式会社 | デジタルルームミラー |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5310602B2 (ja) | 車両用周辺監視システム | |
JP6683451B2 (ja) | 車両用視認装置 | |
JP6548900B2 (ja) | 画像生成装置、画像生成方法及びプログラム | |
JP2010130646A (ja) | 車両周辺確認装置 | |
JPWO2015037117A1 (ja) | 情報表示システム及び情報表示装置 | |
WO2017195684A1 (ja) | 車両用視認装置 | |
JP6393653B2 (ja) | 車両用視認装置 | |
JP2013183298A (ja) | 車両用後方視界支援装置及び車両用後方視界支援方法 | |
JP2010130647A (ja) | 車両周辺確認装置 | |
JP2016168877A (ja) | 車両用視認装置 | |
JP2020088415A (ja) | 車両用電子ミラーシステム | |
JP2005067514A (ja) | 車両用表示装置 | |
JP2018142885A (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム | |
JP2019116220A (ja) | 車両用視認装置 | |
WO2019193819A1 (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム | |
JP2018144554A (ja) | 車両用ヘッドアップディスプレイ装置 | |
JP2019040354A (ja) | 運転支援装置、および運転支援方法 | |
JP2017186008A (ja) | 情報表示システム | |
JP2008162550A (ja) | 外部環境表示装置 | |
WO2017179389A1 (ja) | 車両用視認装置 | |
KR101941607B1 (ko) | 차량용 촬영 표시 장치 및 기록 매체 | |
CN111186375B (zh) | 车辆用电子镜系统 | |
JP4799236B2 (ja) | 車載表示システム | |
JP2006039641A (ja) | 車両周辺監視システム | |
JP2019038372A (ja) | 画像表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200529 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210305 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210511 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20211109 |