JP5040938B2 - 駐車支援装置及び駐車支援映像の表示方法 - Google Patents

駐車支援装置及び駐車支援映像の表示方法 Download PDF

Info

Publication number
JP5040938B2
JP5040938B2 JP2009043934A JP2009043934A JP5040938B2 JP 5040938 B2 JP5040938 B2 JP 5040938B2 JP 2009043934 A JP2009043934 A JP 2009043934A JP 2009043934 A JP2009043934 A JP 2009043934A JP 5040938 B2 JP5040938 B2 JP 5040938B2
Authority
JP
Japan
Prior art keywords
parking
vehicle
target position
position mark
obstacle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009043934A
Other languages
English (en)
Other versions
JP2010195271A (ja
Inventor
照久 高野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2009043934A priority Critical patent/JP5040938B2/ja
Publication of JP2010195271A publication Critical patent/JP2010195271A/ja
Application granted granted Critical
Publication of JP5040938B2 publication Critical patent/JP5040938B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)

Description

本発明は、車両の駐車を支援する駐車支援装置及び駐車支援映像の表示方法に関する。
従来、車両の駐車を支援する駐車支援装置として、車載カメラで撮影された車両周囲の映像を車両上方から見下ろした俯瞰映像に変換し、この車両周囲の俯瞰映像を車内のディスプレイに表示しながら駐車支援を行うものが知られている。また、この車両周囲の俯瞰映像上に、障害物への接触を回避するための目安となるL字形状のガイドを重畳してディスプレイに表示させることで、車両ドライバの運転操作を容易にする試みもなされている(例えば、特許文献1参照。)。
特開2006−27334号公報
しかしながら、駐車時に障害物となる他の駐車車両などは高さのある立体物であるため、俯瞰映像上では倒れ込みが生じ、その倒れ込みの度合いも自車と駐車目標位置との位置関係により変化する。このため、俯瞰映像上で駐車車両の端部となるバンパ位置にL字形状のガイドを合わせて駐車を行っても、駐車過程において自車と実際の駐車車両のバンパ位置との距離が、ドライバが想定している距離と異なることがあり、ドライバの適切な判断を妨げる要因となる場合があった。
本発明は、以上のような従来技術の問題点に鑑みて創案されたものであって、俯瞰映像における立体物の倒れ込みを考慮して、障害物を回避するための目安となる位置を俯瞰映像上で正しく提示して車両の駐車を適切に支援することができる駐車支援装置及び駐車支援映像の表示方法を提供することを目的としている。
本発明は、車両周囲の俯瞰映像と、車両の駐車目標位置を表す目標位置マークと、駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表す障害物回避位置マークとを表示手段に表示しながら駐車支援を行うものであり、表示手段に表示された俯瞰映像上で目標位置マークを移動させる操作がなされたときに、目標位置マークと連動して障害物回避位置マークを俯瞰映像上を移動させるとともに、障害物回避位置マークの移動量を目標位置マークの移動量よりも大きくすることで、上述した課題を解決する。
本発明によれば、駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表す障害物回避位置マークが、目標位置マークと連動して俯瞰映像上を移動し、且つ、その移動量が目標位置マークの移動量よりも大きくなるので、俯瞰映像上での立体物の倒れ込みを考慮した適正な位置に障害物回避マークを表示することができ、車両の駐車を適切に支援することができる。
本発明を適用した駐車支援システムの構成を示す構成図である。 ディスプレイに表示される自車周囲の俯瞰映像の映像例を示す図である。 駐車場で車庫入れ駐車を行う駐車シーンを示す模式図である。 L字枠の表示方法を説明するための座標系を示す図である。 駐車目標位置を設定する際の駐車支援コントローラによる一連の処理の流れを示すフローチャートである。 俯瞰映像上における駐車枠とL字枠との位置関係を説明する図である。 L字枠と車載カメラとの位置関係に応じてL字枠の形状が変化する例を説明する図である。 駐車経路を算出する際の駐車支援コントローラによる一連の処理の流れを示すフローチャートである。 駐車経路の計算に用いる幾何学モデルを示す図である。 俯瞰映像上における駐車枠とL字枠との移動量の差を、L字枠の俯瞰映像上における位置座標に応じて変化させる例を説明する図である。 L字枠の形状を駐車車両のタイヤを含む外形形状に合わせて変更する例を説明する図である。
以下、本発明の具体的な実施形態について、図面を参照しながら詳細に説明する。
図1は、本発明を適用した駐車支援システムの構成を示す構成図である。この駐車支援システムは、自車周囲の俯瞰映像を表示しながら自車の駐車時におけるドライバの運転操作を支援するものであり、図1に示すように、本システムの中核をなす駐車支援コントローラ10に対して、車両周囲の映像を撮影する4つの車載カメラ1〜4と、駐車支援のための映像を表示するディスプレイ5と、ドライバによる操作入力を受け付ける操作入力デバイス6とが接続されて構成される。
車載カメラ1〜4は、例えば180度程度の画角を有する広角のCCDカメラ或いはCMOSカメラよりなり、これら4つの車載カメラ1〜4で自車周囲を囲む全ての領域の映像を撮影できるように、自車の適所に搭載されている。具体的には、車載カメラ1は自車のフロントグリル、車載カメラ2はリアフィニッシャ、車載カメラ3は右ドアミラー、車載カメラ4は左ドアミラーに各々取り付けられ、それぞれ自車周囲の所定範囲の領域の映像を路面に対して斜めに見下ろす方向で撮影する。
ディスプレイ5は、自車の車室内に設置された液晶表示器などの表示装置であり、駐車支援コントローラ10により生成された駐車支援のための俯瞰映像を表示する。
操作入力デバイス6は、自車のドライバによる駐車目標位置の設定などの操作入力を受け付けるものであり、例えば方向キーやタッチパネルなどからなる。この操作入力デバイス6は、ドライバによる操作がなされると、その操作入力に応じた操作信号を駐車支援コントローラ10に入力する。
駐車支援コントローラ10は、例えば、所定の処理プログラムに従って動作するマイクロコンピュータやフレームメモリなどを備えて構成され、マイクロコンピュータのCPUで処理プログラムが実行されることによって、駐車支援のための各種機能を実現する。
具体的には、駐車支援コントローラ10は、4つの車載カメラ1〜4で撮影された映像を入力し、これらの映像を所定の座標変換アルゴリズムに従って自車上方の仮想視点から見た映像にそれぞれ視点変換するとともに繋ぎ合せて、自車周囲を自車上方から見下ろした俯瞰映像を生成し、生成した自車周囲の俯瞰映像をディスプレイ5に表示させる。
ディスプレイ5に表示される自車周囲の俯瞰映像の一例を図2に示す。この図2の映像例において、領域A1はフロントグリルに取り付けられた車載カメラ1で撮影された映像を視点変換した映像であり、領域A2はリアフィニッシャに取り付けられた車載カメラ2で撮影された映像を視点変換した映像である。また、領域A3は右サイドカメラに取り付けられた車載カメラ3で撮影された映像を視点変換した映像であり、領域A4は左サイドカメラに取り付けられた車載カメラ4で撮影された映像を視点変換した映像である。なお、俯瞰映像の中心は自車位置を表す自車位置マークであり、コンピュータグラフィックス画像が重畳されている。この図2の映像例のように、ディスプレイ5に表示される俯瞰映像は、自車を中心としてその周囲360度の状況を自車上方から見下ろすかたちで確認できる映像となっている。
また、駐車支援コントローラ10は、俯瞰映像上における自車の駐車目標位置を表す駐車枠(目標位置マーク)と、この駐車枠で示される駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表すL字枠(障害物回避位置マーク)とを、俯瞰映像に重畳してディスプレイ5に表示させる。この駐車枠及びL字枠は、操作入力デバイス6を用いたドライバの操作により俯瞰映像上を移動可能とされている。つまり、ドライバがディスプレイ5に表示された俯瞰映像を見ながら、操作入力デバイス6を用いて駐車枠を所望の位置に移動させることにより、自車を駐車させる目標となる駐車目標位置をドライバが望む位置に自由に設定できるようになっている。
また、駐車支援コントローラ10は、ドライバの操作により駐車目標位置が所望の位置に設定されると、この駐車目標位置と自車位置との位置関係に基づいて、自車を駐車目標位置へと誘導するための駐車経路を算出する。この駐車経路は、例えば、自車を後退させて駐車目標位置に駐車させる場合を想定すると、後退走行を開始するのに最適な後退開始位置まで自車を前進させる経路と、後退開始位置から駐車目標位置まで後退走行する経路とを組み合わせた一連の経路として算出される。
以上のように構成される本実施形態の駐車支援システムでは、駐車支援コントローラ10で生成した自車周囲の俯瞰映像をディスプレイ5に表示することによって、自車のドライバが駐車目標位置の設定を容易に行えるようにしている。すなわち、ドライバは、ディスプレイ5に表示された俯瞰映像を見ながら、操作入力デバイス6を用いて俯瞰映像上の駐車枠を所望の位置に移動させるといった簡単な操作により、駐車目標位置を所望の位置に設定することができる。このとき、ディスプレイ5に表示された俯瞰映像上で駐車目標位置を表す駐車枠が移動すると、この駐車枠と連動して、障害物回避の目安位置を表すL字枠も俯瞰映像上を移動するので、ドライバは、俯瞰映像上に表示されている他の駐車車両などの障害物にL字枠が干渉しないように駐車枠の位置を設定すれば、障害物を回避して駐車できる最適な位置に駐車目標位置を設定することが可能となる。
ここで、駐車の際の障害物となる他の駐車車両などは高さのある立体物であるため、俯瞰映像上ではその駐車車両の映像に倒れ込みが生じ、車両端部のバンパが俯瞰映像上では実際の位置とは異なる位置に表示される。これに対して、駐車目標位置は路面上の位置なので俯瞰映像上の表示位置と実際の位置とが一致している。このため、俯瞰映像上における駐車枠とL字枠との相対位置関係を一定にしておくと、自車のドライバに正確な指標を与えることができずに適切な操作の妨げとなる懸念がある。そこで、本実施形態の駐車支援システムでは、ディスプレイ5に表示された俯瞰映像上で駐車枠の移動に連動してL字枠を移動させる際に、俯瞰映像上における障害物の倒れ込みを考慮して、L字枠の移動量が駐車枠の移動量よりも大きくなるようにし、目標駐車位置の設定をより適切に行えるようにしている。
以下、具体的な駐車シーンを例に挙げながら、本実施形態の駐車支援システムにより俯瞰映像を表示しながら駐車支援を行う方法の一例を具体的に説明する。
図3は、駐車場で車庫入れ駐車を行う駐車シーンを示したものである。ここでは、駐車車両V1と駐車車両V2の間の空きスペースに駐車目標位置を設定し、この駐車目標位置に自車V0を後退させながら駐車させる場合を考える。この場合、ドライバは、まず、駐車目標位置を設定しようとする空きスペースの横で自車V0を停車させ、ディスプレイ5に表示される俯瞰映像を見ながら、操作入力デバイス6を用いてこの俯瞰映像上の駐車目標位置を設定しようとする空きスペースに駐車枠F1を移動させる。なお、図3中の領域Aがディスプレイ5に表示される俯瞰映像の表示領域である。
ドライバ操作により駐車目標位置が確定すると、駐車支援コントローラ10は、この駐車目標位置(駐車枠F1の位置)と自車V0の現在位置との位置関係に基づいて、自車V0を一旦前進させて後退開始位置P1に移動させた後、この後退開始位置P1から自車V0を後退させて駐車目標位置へと到達させる一連の経路を、駐車経路として算出する。後退開始位置P1は、例えば、舵角一定で駐車目標位置に到達する経路L1と自車V0の現在位置から舵角一定で前進したときの経路L2との交点となる位置に設定される。
ここで、駐車支援コントローラ10で以上の駐車経路を算出する際、駐車目標位置が図3における右より(反対側の駐車スペースに近づく方向)に設定されれば、駐車目標位置に到達する経路L1が隣接する駐車車両V1の前端から離れた位置を通る経路となるため、駐車車両V1への干渉の可能性はなくなるが、その場合には、後退開始位置P1の位置も図中の右よりになるため、反対側の駐車スペースに駐車している駐車車両V3などへの干渉が懸念される。また、超音波ソナーやレーダーなどを用い、或いは車載カメラ1〜4で撮影した映像に対してパターンマッチングなどの画像認識処理を行うことで、駐車車両V1などの障害物の位置を正確に求めて、その位置を避けるように駐車経路を算出することも考えられるが、このような手法ではコストアップや処理負荷の増大を招くといった問題がある。
そこで、本実施形態の駐車支援システムでは、駐車枠F1と連動して移動するL字枠F2を俯瞰映像に重畳してディスプレイ5に表示させ、ドライバがこのL字枠F2を俯瞰映像で表示されている駐車車両V1の角(バンパ位置)に合わせるように駐車枠F1を移動させて駐車目標位置を設定することで、駐車車両V1に干渉せず、且つ、駐車車両V3への干渉も回避できる最適な駐車経路を算出して、自車V0の駐車をより適切に支援できるようにしている。
駐車枠F1とともに俯瞰映像に重畳して表示されるL字枠F2は、上述したように、俯瞰映像上で障害物回避の目安位置を表すものであり、自車ドライバが駐車車両V1などの障害物の位置を俯瞰映像上で特定するものである。このため、L字枠F2の表示位置は、俯瞰映像における駐車車両V1などの倒れ込みを考慮して定める必要があり、倒れ込みの生じない駐車目標位置を表す駐車枠F1に対しては、倒れ込みの度合いに応じてその位置関係が変化する。つまり、自車V0のドライバによる操作に応じて駐車枠F1とL字枠F2とが俯瞰映像上で連動して移動する際、駐車枠F1の移動量よりもL字枠F2の移動量の方が大きくなっている。以下、駐車枠F1を移動させたときのL字枠F2の表示方法について、さらに詳しく説明する。
図4は、以下の説明で用いる座標系を示したものである。この座標系は、自車V0の後輪車軸中心を原点として、自車V0の右方向をX軸の正方向、自車V0の前向き方向をY軸の正方向としている。また、Z軸方向は路面から上向きの方向とする。ここでは、図3に示した駐車シーンを想定して、自車V0の左サイドミラーに取り付けた車載カメラ4の撮影領域に駐車目標位置を設定するものとし、この車載カメラ4の座標を(Xc,Yc,Zc)とする。なお、以下では、L字枠F2の位置はL字の角(交点)の座標で表し、駐車枠F1の位置はL字枠F2に近い角の座標で表すものとする。
図5は、駐車目標位置を設定する際の駐車支援コントローラ10による一連の処理の流れを示すフローチャートである。
駐車目標位置の設定処理が開始されると、駐車支援コントローラ10は、まずステップS101において、自車周囲の俯瞰映像をディスプレイ5に表示させるとともに、駐車枠F1及びL字枠F2を、俯瞰映像上の初期設定位置に重畳してディスプレイ5に表示させる。ここで、L字枠F2の初期設定位置は、例えば図6(a)に示すように、Y座標Yaが車載カメラ4のY座標Ycと等しく、X座標Xaが自車V0の側面から所定距離dだけ離れた位置となる座標(Xa,Ya)とする。また、目標枠F1の初期設定位置の座標は、図6(a)に示すように(Xt,Yt)とする。なお、図6(a)〜図6(c)の各図は、図4の破線で囲まれた領域を拡大して駐車枠F1とL字枠F2との位置関係を説明する図である。
次に、駐車支援コントローラ10は、ステップS102において、操作入力デバイス6からの操作信号に基づき、ドライバが俯瞰映像上の駐車枠F1を移動させる操作を行ったかどうかを判定する。そして、駐車枠F1を移動させる操作が行われた場合は、次のステップS103において、駐車枠F1の移動量(dx,dy)に対するL字枠F2の移動量(dx’,dy’)を|dx’|>|dx|,|dy’|>|dy|として、移動後のL字枠F2の表示位置を算出する。
例えば、駐車枠F1が初期設定位置(Xt,Yt)からX軸−方向にdx1(dx1>0)、Y軸+方向にdy1(dy1>0)移動した場合、L字枠F2は、初期設定位置(Xa,Ya)からX軸−方向にdx1’(dx1’>dx1)、Y軸+方向にdy1’(dy1’>dy1)だけ移動する。この場合、駐車枠F1の表示位置が初期設定位置(Xt,Yt)から(Xt−dx1,Yt+dy1)へと変化することに伴い、L字枠F2の表示位置は、図6(b)に示すように、初期設定位置(Xa,Ya)から(Xa−dx1’,Ya+dy1’)へと変化する。さらに、駐車枠F1が(Xt−dx1,Yt+dy1)からX軸−方向にdx2(dx2>0)、Y軸+方向にdy2(dy2>0)移動して、その表示位置が(Xt−dx1−dx2,Yt+dy1+dy2)へと変化すると、L字枠F2は(Xa−dx1’,Ya+dy1’)からX軸−方向にdx2’(dx2’>dx2)、Y軸+方向にdy2’(dx2’>dx2)だけ移動し、その表示位置は、図6(c)に示すように、(Xa−dx1’−dx2’,Ya+dy1’+dy2’)へと変化する。つまり、俯瞰映像上で駐車枠F1を自車V0から遠ざければ遠ざけるほど、駐車枠F1の移動量よりも大きな移動量で、L字枠F2が遠ざかっていくことになる。
次に、駐車支援コントローラ10は、ステップS104において、L字枠F2の表示位置のY座標が、車載カメラ4のY座標Ycよりも小さいかどうかを判定する。ここで、L字枠F2の初期設定位置を、そのY座標Yaが車載カメラ4のY座標Ycと等しくなる位置に設定していれば、駐車枠F1がY軸の−方向に移動することに伴ってL字枠F2がY軸−方向に移動した場合に、移動後のL字枠F2のY座標が車載カメラ4のY座標Ycよりも小さいと判断できる。そして、L字枠F2の表示位置のY座標が車載カメラ4のY座標Yaよりも小さい場合には、次のステップS105において、駐車車両の側面側のY軸−方向への倒れ込みに合わせるように、L字枠F2の形状を変形させる。
すなわち、図7(a)に示すように、L字枠F2の表示位置のY座標が車載カメラ4のY座標Ycと等しいか又は大きいときは、L字枠F2の形状を駐車枠F1と平行となるようにする。一方、図7(b)及び図7(c)に示すように、L字枠F2の表示位置のY座標が車載カメラ4のY座標Ycよりも小さいときは、L字枠F2の形状をその1つの辺が駐車枠F2に対して斜めになるように変形する。このとき、L字枠F2の斜めとなる辺の傾きは、L字枠F2の表示位置のY座標と車載カメラ4のY座標との差に応じて変化させ、図7(b)のように差が小さいときと比べて、図7(c)のように差が大きいときの方が、より大きく傾くようにする。
その後、駐車支援コントローラ10は、ステップS106において、操作入力デバイス6からの操作信号に基づき、ドライバによる駐車枠F1の操作が終了して駐車目標位置が確定したかどうかを判定する。そして、駐車目標位置が確定していなければステップS102に戻って以降の処理を繰り返し、駐車目標位置が確定したら一連の処理を終了する。
次に、図3に示した駐車シーンを前提として、俯瞰映像上のL字枠F2の表示位置をもとに自車V0の駐車過程で障害物となる駐車車両V1の実際の位置を推定して駐車経路の計算に反映させる方法について、図8及び図9を参照して説明する。
図8は、駐車経路を算出する際の駐車支援コントローラ10による一連の処理の流れを示すフローチャートである。また、図9は、駐車経路の計算に用いる幾何学モデルを示す図である。
駐車経路を算出する処理が開始されると、駐車支援コントローラ10は、まずステップS201において、障害物となる駐車車両V1の角(バンパ位置)の高さZbを設定する。この障害物車両V1のバンパ高さZbは、例えば、標準的な車両における最低地上高に設定すればよい。
次に、駐車支援コントローラ10は、ステップS202において、ディスプレイ5に表示されている俯瞰映像上のL字枠F2の座標位置を認識し、このL字枠F2の座標位置と、ステップS201で設定した駐車車両V1のバンパ高さZbと、車載カメラ4の取り付け高さZcとに基づいて、図9に示す幾何学モデルを用いて、駐車車両V1の実際のバンパ位置を路面上に投影したバンパ投影点Pbの座標を求める。
例えば、L字枠F2が俯瞰映像上の(Xa,Ya)の位置に表示されているときに、俯瞰映像上では駐車車両の角(バンパ位置)にL字枠F2が一致しているとする。このとき、駐車車両V1の実際のバンパ位置を路面上に投影したバンパ投影点Pbの座標(Xb,Yb,0)は、L字枠F2の座標(Xa,Ya)と、駐車車両V1のバンパ高さZbと、車載カメラ4の取り付け高さをZcとに基づき、下記式(1)及び式(2)により求めることができる。
Xb=(1−Zb/Zc)×Xa ・・・(1)
Yb=(1−Zb/Zc)×Ya ・・・(2)
また、L字枠F2が俯瞰映像上の(Xa,Yb)からX軸方向にdx’、Y軸方向にdy’移動して(Xa+dx’,Ya+dy’)の位置に表示されているときに、俯瞰映像上では駐車車両の角(バンパ位置)にL字枠F2が一致しているとすると、駐車車両V1の実際のバンパ位置を路面上に投影したバンパ投影点Pbの座標(Xb’,Yb’,0)は、L字枠F2の座標(Xa+dx’,Ya+dy’)と、駐車車両V1のバンパ高さZbと、車載カメラ4の取り付け高さをZcとに基づき、下記式(3)及び式(4)により求めることができる。
Xb’=(1−Zb/Zc)×(Xa+dx’) ・・・(3)
Yb’=(1−Zb/Zc)×(Ya+dy’) ・・・(4)
次に、駐車支援コントローラ1は、ステップS203において、以上のように求めた駐車車両V1のバンパ投影点Pbの座標を用いて、駐車車両V1を回避して自車V0を駐車目標位置へと到達させる駐車経路を算出する。すなわち、駐車支援コントローラ1は、以上のように求めたバンパ投影点Pbに対して所定のマージン分だけ駐車車両V1から離れた位置を通って自車V0が駐車目標位置に到達する経路を駐車経路として算出する。そして、駐車経路が算出されると図8の処理フローを終了し、その後、自車V0を駐車目標位置へと誘導するための各種処理を実行する。
ここで、上記の式(1)〜式(4)から、L字枠F2の位置を(Xa,Yb)からX軸方向にdx’、Y軸方向にdy’移動したときの駐車車両V1のバンパ投影点Pbの移動量は、下記式(5)及び式(6)により求められる。
Xb’−Xb=(1−Zb/Zc)×dx’ ・・・(5)
Yb’−Yb=(1−Zb/Zc)×dy’ ・・・(6)
これら式(5)及び式(6)から分かるように、L字枠F2の俯瞰映像上における移動量(dx’,dy’)に対して、駐車経路の計算に用いる駐車車両V1のバンパ投影点Pbの移動量は、X軸方向にZb/Zc×dx’、Y軸方向にZb/Zc×dy’だけ小さくなる。つまり、俯瞰映像上で駐車目標位置を設定するための駐車枠F1の移動量よりも大きな移動量で移動するL字枠F2に対して、実際の駐車経路の計算に用いる駐車車両V1のバンパ投影点Pbの移動量は小さくなるので、俯瞰映像上のL字枠F2の位置を基準として駐車経路を算出するようにしても、実際の駐車車両V1の停車位置に即した適切な駐車経路を算出することができる。
なお、以上の例では、駐車車両V1のバンパ高さZbを標準的な車両における最低地上高に設定するようにしているが、駐車車両V1のバンパ投影点Pbの移動量が俯瞰映像上における駐車枠F1の移動量と等しくなるように、俯瞰映像上における駐車枠F1の移動量dxとL字枠F2の移動量dx’との関係から、下記式(7)及び式(8)により、駐車車両V1のバンパ高さZbを設定するようにしてもよい。
(1−Zb/Zc)×dx’=dx ・・・(7)
Zb=(1−dx/dx’)×Zc ・・・(8)
ところで、本実施形態の駐車支援システムでは、上述したように、俯瞰映像上における駐車目標位置を表す駐車枠と、この駐車枠で示される駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表すL字枠とを、自車ドライバの操作に応じて俯瞰映像上で連動して移動させる際に、障害物となる駐車車両などの倒れ込みを考慮して、L字枠の移動量が駐車枠の移動量よりも大きくなるようにしている。ここで、障害物の倒れ込み量、つまり、俯瞰映像上でL字枠を合わせる位置となる障害物の映像の角の位置と実際の障害物の角の位置との差は、当該障害物の映像を撮影している車載カメラの取り付け高さによって異なるものとなる。
例えば、自車V0のフロントグリルに取り付けられた車載カメラ1の取り付け高さZfcが、自車V0の左サイドミラーに取り付けられた車載カメラ4の取り付け高さZscよりも低い(Zsc>Zfc)場合、図10に示すように、俯瞰映像上で車載カメラ1の映像領域A1に映る障害物の角の位置(L字枠を合わせる位置)C1と実際の障害物の角の位置(路面上の投影点)C1’との差は、俯瞰映像上で車載カメラ4の映像領域A4に存在する障害物の角の位置(L字枠を合わせる位置)C2と実際の障害物の角の位置(路面上の投影点)C2’との差よりも大きくなる。
したがって、俯瞰映像上で駐車枠及びL字枠を移動させて駐車目標位置を設定しようとするドライバに対して、駐車目標位置の設定を適切に支援するためには、俯瞰映像上における駐車枠とL字枠との移動量の差を、L字枠の俯瞰映像上における位置座標、つまり障害物となる駐車車両などの映像が、俯瞰映像のどの車載カメラの撮影領域にあるかによって変化させることが望ましい。例えば、車載カメラ1の取り付け高さZfcが車載カメラ4の取り付け高さZscよりも低い(Zsc>Zfc)場合、L字枠を車載カメラ1の映像領域A1で移動させるときの駐車枠との移動量の差dfcは、L字枠を車載カメラ4の映像領域A4で移動させるときの駐車枠との移動量の差dfcよりも大きく(dfc>dsc)する。
また、俯瞰映像の表示範囲を広く取った場合には、図11に示すように、俯瞰映像に障害物となる駐車車両V1のタイヤが表示される場合もある。このような場合には、L字枠F2の形状を駐車車両V1のタイヤを含む外形形状に合わせて変更することが望ましい。これにより、俯瞰映像上で駐車車両V1の角にL字枠を合わせやすくなり、操作性が向上する。
以上、具体的な例を挙げながら詳細に説明したように、本実施形態の駐車支援システムによれば、自車のドライバがディスプレイ5に表示された俯瞰映像を見ながら駐車枠を所望の位置に移動させて駐車目標位置を設定しようとするときに、障害物を回避する目安となるL字枠が駐車枠と連動して移動し、且つ、その移動量が、俯瞰映像上における障害物の倒れ込みを考慮して、駐車枠の移動量よりも大きくなるようにしている。したがって、自車のドライバは、L字枠を俯瞰映像上の障害物の角に合わせるように駐車枠を移動させることにより、自車の駐車目標位置を最適な位置に簡便な操作で設定することができる。また、駐車目標位置が最適な位置に設定されるので、障害物を回避する合理的な駐車経路を算出して自車を駐車目標位置へと誘導することができ、自車の駐車を適切に支援することができる。
また、本実施形態の駐車支援システムによれば、L字枠を俯瞰映像上に重畳してディスプレイ5に表示する際に、L字枠と車載カメラとの位置関係に応じて、俯瞰映像上の障害物がL字枠側に倒れ込む場合には、その倒れ込みに合わせるようにL字枠の形状を変化させるようにしているので、ドライバがL字枠を俯瞰映像上の障害物の角に正しく合わせやすくなり、操作性が向上する。
また、本実施形態の駐車支援システムによれば、自車周囲の映像を撮影する車載カメラ1〜4の自車への取り付け高さの違いを考慮して、俯瞰映像におけるどの車載カメラの映像領域にL字枠を表示しているかにより俯瞰映像上における駐車枠とL字枠との移動量の差を変化させるようにしているので、俯瞰映像のどの映像領域にL字枠を表示する場合でも、障害物の倒れ込みを正しく反映させることができる。
また、本実施形態の駐車支援システムによれば、俯瞰映像上のL字枠の表示位置を基準として実際の障害物位置を推定し、その障害物を回避する駐車経路を算出するようにしているので、ドライバの意向に沿った合理的な駐車経路を簡便に算出し、自車を駐車目標位置へと適切に誘導することができる。
なお、以上は、自車の駐車目標位置をドライバが手動で設定するシステムを前提として説明したが、本発明は、駐車目標位置を自動設定するシステムに適用することも可能である。駐車目標位置の自動設定を行う駐車支援システムは、例えば、俯瞰映像に対して白線認識などの画像処理を行って駐車スペースを検知して駐車目標位置の設定を行うが、このとき、俯瞰映像上で検知した駐車スペースに駐車枠を重畳し、さらに障害物回避の目安となるL字枠を重畳してディスプレイに表示することで、検知した駐車スペースを駐車目標位置として設定するかどうかを自車のドライバに確認させる。ここで、俯瞰映像上の駐車枠とL字枠が初期設定位置から動いてその位置に表示されているものと考えると、上述したドライバの操作により駐車枠とL字枠とを移動させる場合と同様に考えられる。つまり、駐車目標位置を自動設定する駐車支援システムに本発明を適用する場合には、俯瞰映像上における駐車枠の位置に応じて、この駐車枠に対するL字枠の相対位置関係を異ならせるように、これら駐車枠及びL字枠を俯瞰映像に重畳してディスプレイに表示することにより、上述した実施形態と同様の効果を得ることができる。
以下、参考として、上述した実施形態と特許請求の範囲に記載の構成要件との対応関係を付記する。上述した実施形態の駐車支援システムにおいて、自車に取り付けられた車載カメラ1〜4が、特許請求の範囲に記載の「撮像手段」に相当する。また、車載カメラ1〜4が撮影した映像から自車周囲の俯瞰映像を生成する駐車支援コントローラ10による処理が、特許請求の範囲に記載の「映像変換手段」に相当する。また、自車の車室内に設置されたディスプレイ5が、特許請求の範囲に記載の「表示手段」に相当する。また、自車のドライバによる操作入力を受け付ける操作入力デバイス6が、特許請求の範囲に記載の「操作手段」に相当する。また、俯瞰映像上のL字枠の表示位置に基づいて自車の駐車経路を算出する駐車支援コントローラ10による処理が、特許請求の範囲に記載の「駐車経路算出手段」に相当する。また、上述した実施形態で説明した駐車枠が特許請求の範囲に記載の「目標位置マーク」に相当し、L字枠が「障害物回避位置マーク」に相当する。
なお、以上説明した本発明の実施形態は、本発明の一適用例を例示的に示したものであり、本発明の技術的範囲が上記の実施形態として開示した内容に限定されることを意図するものではない。つまり、本発明の技術的範囲は、上記の実施形態で開示した具体的な技術事項に限らず、この開示から容易に導きうる様々な変形、変更、代替技術なども含むものである。
1〜4 車載カメラ
5 ディスプレイ
6 操作入力デバイス
10 駐車支援コントローラ
F1 駐車枠
F2 L字枠

Claims (8)

  1. 車両周囲の映像を撮影する複数の撮像手段と、
    前記複数の撮像手段により撮影された映像を車両上方から見下ろした映像に視点変換するとともに繋ぎ合せて車両周囲の俯瞰映像を生成する映像変換手段と、
    前記映像変換手段により生成された車両周囲の俯瞰映像と、車両の駐車目標位置を表す目標位置マークと、前記駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表す障害物回避位置マークとを表示する表示手段と、
    前記表示手段に表示された俯瞰映像上で前記目標位置マークを移動させて前記駐車目標位置を設定する操作を受け付ける操作手段と、
    前記操作手段を用いた操作により設定された駐車目標位置への駐車経路を算出する駐車経路算出手段と、を備え、
    前記障害物回避位置マークは、前記操作手段を用いた操作により前記目標位置マークが移動するときに当該目標位置マークと連動して前記俯瞰映像上を移動し、前記障害物回避位置マークの移動量が前記目標位置マークの移動量よりも大きいことを特徴とする駐車支援装置。
  2. 前記目標位置マークと前記障害物回避位置マークとの移動量の差は、前記目標位置マークが前記俯瞰映像上における車両位置から遠ざかるほど大きくなることを特徴とする請求項1に記載の駐車支援装置。
  3. 前記目標位置マークと前記障害物回避位置マークとの移動量の差が、前記俯瞰映像上における前記障害物回避位置マークの位置座標に応じて変化することを特徴とする請求項1又は2に記載の駐車支援装置。
  4. 前記障害物回避位置マークは、前記複数の撮像手段のうちで前記駐車目標位置の映像を撮影している撮像手段との位置関係に応じて、形状が変化することを特徴とする請求項1乃至3のいずれか一項に記載の駐車支援装置。
  5. 前記駐車経路算出手段は、前記俯瞰映像上における前記障害物回避位置マークの表示位置を基準に障害物が存在すると推定される位置を算出し、当該障害物の位置を回避するように前記駐車経路を算出することを特徴とする請求項1乃至4のいずれか一項に記載の駐車支援装置。
  6. 前記障害物は前記駐車目標位置に隣接して駐車されている駐車車両であり、
    前記駐車経路算出手段は、前記駐車車両のバンパ高さと、前記複数の撮像手段のうちで前記駐車車両の映像を撮影している撮像手段の設置高さと、前記俯瞰映像上における前記障害物回避位置マークの表示位置とに基づいて、実際に前記駐車車両が存在すると推定される位置を算出することを特徴とする請求項5に記載の駐車支援装置。
  7. 車両周囲の映像を撮影する複数の撮像手段と、
    前記複数の撮像手段により撮影された映像を車両上方から見下ろした映像に視点変換するとともに繋ぎ合せて車両周囲の俯瞰映像を生成する映像変換手段と、
    前記映像変換手段により生成された車両周囲の俯瞰映像と、車両の駐車目標位置を表す目標位置マークと、前記駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表す障害物回避位置マークとを表示する表示手段と、
    前記俯瞰映像に対して画像処理を行って前記駐車目標位置を自動設定する駐車目標位置設定手段と、
    前記駐車目標位置設定手段により設定された駐車目標位置への駐車経路を算出する駐車経路算出手段と、を備え、
    前記俯瞰映像上における前記目標位置マークの位置に応じて、前記目標位置マークに対する前記障害物回避位置マークの相対位置関係が異なることを特徴とする駐車支援装置。
  8. 車両周囲の俯瞰映像と、車両の駐車目標位置を表す目標位置マークと、前記駐車目標位置への駐車過程で障害物を回避するための目安となる位置を表す障害物回避位置マークとを、駐車支援のための映像として表示手段に表示する駐車支援映像の表示方法であって、
    前記表示手段に表示された俯瞰映像上で前記目標位置マークを移動させる操作がなされたときに、前記目標位置マークと連動して前記障害物回避位置マークを俯瞰映像上を移動させるとともに、前記障害物回避位置マークの移動量を前記目標位置マークの移動量よりも大きくすることを特徴とする駐車支援映像の表示方法。
JP2009043934A 2009-02-26 2009-02-26 駐車支援装置及び駐車支援映像の表示方法 Active JP5040938B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009043934A JP5040938B2 (ja) 2009-02-26 2009-02-26 駐車支援装置及び駐車支援映像の表示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009043934A JP5040938B2 (ja) 2009-02-26 2009-02-26 駐車支援装置及び駐車支援映像の表示方法

Publications (2)

Publication Number Publication Date
JP2010195271A JP2010195271A (ja) 2010-09-09
JP5040938B2 true JP5040938B2 (ja) 2012-10-03

Family

ID=42820458

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009043934A Active JP5040938B2 (ja) 2009-02-26 2009-02-26 駐車支援装置及び駐車支援映像の表示方法

Country Status (1)

Country Link
JP (1) JP5040938B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6115248B2 (ja) * 2013-03-28 2017-04-19 日産自動車株式会社 駐車支援装置
JP2014193660A (ja) * 2013-03-28 2014-10-09 Nissan Motor Co Ltd 駐車支援装置
JP6115249B2 (ja) * 2013-03-28 2017-04-19 日産自動車株式会社 駐車支援装置
CN106379235B (zh) * 2016-11-10 2019-06-25 上海为森车载传感技术有限公司 辅助停车的实现方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4457690B2 (ja) * 2004-02-18 2010-04-28 日産自動車株式会社 運転支援装置
JP2006027334A (ja) * 2004-07-13 2006-02-02 Nissan Motor Co Ltd 運転支援装置および方法
JP4769625B2 (ja) * 2006-04-25 2011-09-07 トヨタ自動車株式会社 駐車支援装置及び駐車支援方法

Also Published As

Publication number Publication date
JP2010195271A (ja) 2010-09-09

Similar Documents

Publication Publication Date Title
JP5003946B2 (ja) 駐車支援装置
US9007462B2 (en) Driving assist apparatus, driving assist system, and driving assist camera unit
JP5309442B2 (ja) 駐車支援方法及び駐車支援装置
JP5136256B2 (ja) 駐車支援装置および画像表示方法
WO2019008764A1 (ja) 駐車支援方法及び駐車支援装置
WO2003107273A1 (ja) 運転支援装置
JP2009017462A (ja) 運転支援システム及び車両
JP5471141B2 (ja) 駐車支援装置及び駐車支援方法
JP5724446B2 (ja) 車両の運転支援装置
JP2004240480A (ja) 運転支援装置
JP7000383B2 (ja) 画像処理装置および画像処理方法
JP2002354467A (ja) 車両周囲情報表示装置
JP5040938B2 (ja) 駐車支援装置及び駐車支援映像の表示方法
JP5287344B2 (ja) 駐車支援装置及び障害物検知方法
JP2008213647A (ja) 駐車支援方法及び駐車支援装置
JP5273068B2 (ja) 車両周辺監視装置
JP5226621B2 (ja) 車両用画像表示装置
JP2014107696A (ja) 車載画像処理装置
JP5305750B2 (ja) 車両周辺表示装置およびその表示方法
JP6148848B2 (ja) 車載画像処理装置
JP6439233B2 (ja) 車両用画像表示装置及び画像処理方法
JP6573218B2 (ja) 車両用画像表示装置及び設定方法
JP6274936B2 (ja) 運転支援装置
JP2012188058A (ja) 表示装置
JP2013197816A (ja) 車載画像表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110224

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120612

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120625

R150 Certificate of patent or registration of utility model

Ref document number: 5040938

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150720

Year of fee payment: 3