JPWO2012039004A1 - 運転支援装置 - Google Patents
運転支援装置 Download PDFInfo
- Publication number
- JPWO2012039004A1 JPWO2012039004A1 JP2012534829A JP2012534829A JPWO2012039004A1 JP WO2012039004 A1 JPWO2012039004 A1 JP WO2012039004A1 JP 2012534829 A JP2012534829 A JP 2012534829A JP 2012534829 A JP2012534829 A JP 2012534829A JP WO2012039004 A1 JPWO2012039004 A1 JP WO2012039004A1
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- recommended route
- obstacle
- calculation unit
- host vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/165—Anti-collision systems for passive traffic, e.g. including static obstacles, trees
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
Abstract
障害物位置計算部4が障害物の位置を計算し、自車位置計算部5が自車両の位置を計算する。走行軌跡計算部6は自車両が障害物への接触を回避して走行できる推奨ルートを計算して、撮像部7が撮像した車両周辺画像に推奨ルートを重ねて表示部10に表示させる。推奨ルートが存在しない場合は警報出力部11が警報を発して、将来的に障害物に接触する恐れがあることを警告する。
Description
この発明は、車両の運転者に対して運転支援を行う運転支援装置に関する。
従来、駐車スペース横を走行しながらソナーでスキャンして障害物までの距離を検出し、検出点群から真の障害物形状を推定することで駐車スペースの大きさを計算して、大きさに応じて駐車可否を運転者に通知する運転支援装置が実用化されている。また、自車両全体を含む鳥瞰画像を運転者に提供する、いわゆるアラウンドビューモニタも実用化されている(例えば、特許文献1参照)。
従来の運転支援装置は以上のように構成されているので、駐車可否の情報および自車両全体を含む鳥瞰画像を運転者に提供すれば、車両周辺状況の認識に大きな助けとなる。しかしながら、狭路の通行、駐車スペースへの駐車等を行うための適切な走行経路および運転操作は分からず、運転者が直感的に把握できないという課題があった。そのため、鳥瞰画像を見ながら運転者自身が走行経路およびアプローチの仕方を考えて運転操作を行う必要があった。
この発明は、上記のような課題を解決するためになされたもので、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することを目的とする。
この発明の運転支援装置は、自車両に設置され、少なくとも進行方向の車両周辺画像を撮像する撮像部と、車両周辺画像を表示する表示部と、少なくとも進行方向にある障害物の位置情報を取得する障害物位置計算部と、自車両の位置情報を取得する自車位置計算部と、自車両に関する車両情報を記憶しているメモリ部と、障害物位置計算部が取得した障害物の位置情報およびメモリ部の記憶している車両情報より、自車位置計算部が取得した位置にある自車両が障害物に接触せず走行できる推奨ルートを計算し、撮像部が撮像した車両周辺画像に当該推奨ルートを重ねて表示部に表示させる走行軌跡計算部とを備えるものである。
この発明によれば、自車両が障害物に接触せず走行できる推奨ルートを車両周辺画像に重ねて表示することにより、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することができる。
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1に示す運転支援装置は、ECU(Electronic Control Unit)1と、車両前部に設置され車両前方を撮像する撮像部7と、車両前部に設置され車両前方に障害物を検出する障害物検出部8と、車両の移動量および向き等を検出する車両状態検出部9と、画像を表示する表示部10と、警報を発生する警報出力部11とを備える。本実施の形態1では、撮像部7として、車両前部に設置され車両前方の画像を撮像するカメラを用いる。また、障害物検出部8として、車両前部に設置され車両前方に存在する障害物までの距離を検知するソナー(超音波センサ)を用いる。車両状態検出部9として、車輪の回転数を検知する車輪速センサ等を用いる。表示部10として、車両に搭載されたカーナビゲーション等のモニタを用いる。警報出力部11として、車両に搭載されたカーナビゲーション、カーオーディオ等のスピーカまたはブザーを用いる。
実施の形態1.
図1に示す運転支援装置は、ECU(Electronic Control Unit)1と、車両前部に設置され車両前方を撮像する撮像部7と、車両前部に設置され車両前方に障害物を検出する障害物検出部8と、車両の移動量および向き等を検出する車両状態検出部9と、画像を表示する表示部10と、警報を発生する警報出力部11とを備える。本実施の形態1では、撮像部7として、車両前部に設置され車両前方の画像を撮像するカメラを用いる。また、障害物検出部8として、車両前部に設置され車両前方に存在する障害物までの距離を検知するソナー(超音波センサ)を用いる。車両状態検出部9として、車輪の回転数を検知する車輪速センサ等を用いる。表示部10として、車両に搭載されたカーナビゲーション等のモニタを用いる。警報出力部11として、車両に搭載されたカーナビゲーション、カーオーディオ等のスピーカまたはブザーを用いる。
ECU1は、データを記憶するメモリ2と、不図示のプログラムメモリに格納されたプログラムを実行して障害物位置計算部4、自車位置計算部5、および走行軌跡計算部6の処理内容を実行するCPU3とを有する。このプログラムには、撮像部7と障害物検出部8の情報から障害物の位置および形状を計算する障害物位置計算部4と、車両状態検出部9の情報から自車両の位置を計算する自車位置計算部5と、障害物に自車両が接触せず走行できる推奨ルートを計算し、撮像部7が撮像した車両前方画像に当該推奨ルートを重ねて表示部10に表示させる走行軌跡計算部6の処理内容が記述されている。
次に、運転支援装置の動作を説明する。
図2は運転支援装置の動作を示すフローチャートである。図3は状況に応じた動作を表す図であり、タイムラインに沿って、道路20を走行中の自車両21a,21bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
メモリ2には、予め自車両の寸法、車輪幅、旋回性能等の車両情報が登録されているものとする。
図2は運転支援装置の動作を示すフローチャートである。図3は状況に応じた動作を表す図であり、タイムラインに沿って、道路20を走行中の自車両21a,21bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
メモリ2には、予め自車両の寸法、車輪幅、旋回性能等の車両情報が登録されているものとする。
撮像部7は、自車両の走行中に進行方向である車両前方画像を撮像し、メモリ2に蓄積する(ステップST1)。また、このときの自車位置を自車位置計算部5が計算する(ステップST2)。自車位置計算部5は仮想の2次元座標を設定して、この2次元座標上に、ステップST1で撮像した車両前方画像と、その車両前方画像を撮像したときの自車位置(撮像位置)とを設定する。自車位置計算部5は、前回の撮像位置に、車両状態検出部9から入力される車輪速パルスに基づく移動距離を加算して、今回の撮像位置を求め、これを自車位置とすればよい。
続いて、走行軌跡計算部6は、過去に撮像してメモリ2に蓄積してある車両前方画像の中から、今回の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンおよび推奨ルートをオーバーレイする(ステップST3)。この自車アイコンは予めメモリ2に登録しておけばよい。また、過去に走行軌跡計算部6が計算した推奨ルートがメモリ2に存在していれば、走行軌跡計算部6はその推奨ルートをオーバーレイする。図3の例では、今回の自車両21bの位置において、過去の自車両21aの位置で撮像した車両前方画像30に自車アイコン26をオーバーレイした画像31が生成される。
続いて、走行軌跡計算部6は、メモリ2に推奨ルートが存在せず表示部10に未表示か、既に表示している推奨ルートから自車両が逸脱したかを判定する(ステップST4)。ここでは、推奨ルート未表示とし(ステップST4“YES”)、続くステップST5にて障害物検出部8が車両前方の障害物の有無を検知する。障害物検出部8を構成するソナーは、車両前方の障害物を検知すると、車両から障害物までの距離および方向を障害物位置計算部4へ出力し(ステップST5“YES”)、障害物位置計算部4がその障害物を車両前方画像上に特定する(ステップST6)。
一方、走行軌跡計算部6が推奨ルートを表示部10に表示させている場合、または、自車位置が表示中の推奨ルート上に存在しており逸脱せず走行中と判断できる場合には(ステップST4“NO”)、ステップST1に戻る。また、障害物が存在しない場合には(ステップST5“NO”)、ステップST11にて、走行軌跡計算部6が車両前方画像にオーバーレイしていた推奨ルートを消去する。
ステップST6の障害物特定の方法としては公知の方法を用いればよい。ここでは(1)カメラとソナーを併用する場合、(2)カメラのみ使用する場合の2つの方法を説明する。
(1)カメラとソナーを併用する場合
障害物検出部8を構成するソナーは、以下のような計測誤差要因が考えられ、障害物をより正確に特定するためには繰り返し精度の誤差の影響を排除する必要がある。
・障害物の距離計測誤差:温湿度、風、信号処理回路のばらつき、その他外乱
・推定ロジックによる誤差:反射面の特定、形状の曲線近似方法
・障害物の形状による誤差
障害物検出部8を構成するソナーは、以下のような計測誤差要因が考えられ、障害物をより正確に特定するためには繰り返し精度の誤差の影響を排除する必要がある。
・障害物の距離計測誤差:温湿度、風、信号処理回路のばらつき、その他外乱
・推定ロジックによる誤差:反射面の特定、形状の曲線近似方法
・障害物の形状による誤差
そこで、本実施の形態1では、ソナーはカメラで撮像した画像上で障害物を特定するための補助的な役割とし、距離計測は画像上で行うことで、上記の誤差要因の影響をなくし、繰り返し精度および絶対精度の向上を図る。具体的には、ステップST6にて障害物位置計算部4が、自車位置から障害物までの距離および方向と、ソナーの検知可能エリアの情報とに基づいて、メモリ2に蓄積された車両前方画像上で当該障害物を特定して輪郭を検出する。次いで障害物位置計算部4は、障害物の輪郭のうち自車アイコン座標との最接近点を計算して、2次元座標上に障害物として設定する。設定された障害物に奥行き情報はない。なお、画像上から輪郭を抽出する画像処理方法は公知の技術であるため説明は省略する。
(2)カメラのみ使用する場合
ステップST6にて、障害物位置計算部4がメモリ2に蓄積された複数フレームの車両前方画像を用い、モーションステレオ法により障害物の立体的な形状を認識して、2次元座標上に障害物として投影する。モーションステレオ法は公知の技術であるため説明は省略する。
ステップST6にて、障害物位置計算部4がメモリ2に蓄積された複数フレームの車両前方画像を用い、モーションステレオ法により障害物の立体的な形状を認識して、2次元座標上に障害物として投影する。モーションステレオ法は公知の技術であるため説明は省略する。
障害物位置計算部4は、上記(1)または(2)の方法により障害物の位置座標を車両前方画像上に特定し、続けて自車位置から障害物までの距離を計算する。また、障害物が複数ある場合には、障害物同士の間隔も計算する。さらに、障害物位置計算部4は障害物を回避して到達する目標位置の座標を設定したり、画像上から道路を認識したりする。障害物位置計算部4が算出した障害物までの距離、障害物同士の間隔、目標位置、道路エリア等の情報はメモリ2へ出力する。図3の例では、道路20を走行中の自車両21bの位置にて障害物検出部8が障害物22,23を検知すると、障害物位置計算部4が画像上で障害物22,23の位置および形状、障害物22,23同士の間隔、自車両21bまでの距離を計算すると共に、道路20のエリアを計算する。
障害物位置計算部4による目標位置の設定方法としては、例えば障害物22,23の中点24を決定し、中点24を中心にした自車両21bの点対照の位置を求めて目標位置25に設定する。また、前方が曲がり角などの状況で、目標位置25が道路20から外れるようであれば位置を調整してもよい。なお、この目標位置設定方法は一例であり、この方法に限定されるものではない。
このようにして仮想の2次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部6がメモリ2に予め登録されている車幅、旋回性能等の車両情報を用いて、自車両21bが道路20上を障害物22,23に接触せずに走行可能な推奨ルートを計算する(ステップST7)。走行軌跡計算部6は推奨ルートとして理想ライン27および走行可能ライン28のいずれか一方、または両方を計算する。理想ライン27は、車幅と同じ幅を持ち、障害物22,23に接触せずに自車位置から目標位置25までを辿る最短経路とする。また、走行可能ライン28は、自車位置から目標位置25まで後戻りせず最大限大回りして障害物を迂回することのできる幅を持ったエリアとする。また、推奨ルートが道路エリアからはみ出さないようにしたり、推奨ルートが障害物へ所定距離(例えば、50cm)以上接近しないようにしたりといった計算条件を設定してもよい。
計算の結果、障害物22,23を回避走行可能な推奨ルートが存在する場合(ステップST8“YES”)、走行軌跡計算部6はその推奨ルートを車両前方画像にオーバーレイして、表示部10に表示する(ステップST9)。画面表示する推奨ルートは、ステップST7で計算した理想ライン27および走行可能ライン28のいずれか一方、または両方とする。図3の画像31では、理想ライン27と走行可能ライン28の両方が表示されている。画面表示された推奨ルートの範囲内で自車両を走行させれば障害物に接触することなく通行できるので、運転者自身が走行経路を考える必要がなくなり、直感的に運転操作できるようになる。
また、走行軌跡計算部6は計算した推奨ルートをメモリ2に記憶させる。
また、走行軌跡計算部6は計算した推奨ルートをメモリ2に記憶させる。
なお、走行軌跡計算部6は、計算した推奨ルートの幅および形状より、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。難易度は例えば推奨ルートの幅を基準に判定することとし、推奨ルートの幅が許容範囲より広ければ難易度「低」、許容範囲内であれば難易度「中」、許容範囲より狭ければ難易度「高」となる。この他にも、推奨ルートを辿るためのハンドルの操舵角の大きさに応じて難易度を判定するなど、どのように判定してもよい。
図4は、推奨ルート幅を基準に判定した難易度に応じて走行可能ラインの表示色を可変にした画面表示例を示す。障害物22,23の間隔が図4(a)で最も広く、図4(c)で最も狭い。この場合、理想ライン27は車幅で一定であるが、走行可能ライン28a,28b,28cの幅は障害物22,23の間隔が狭まるに応じて狭くなる。そのため、図4(a)では走行軌跡計算部6が走行可能ライン28aを難易度「低」と判定して表示色を「青」に設定する。図4(b)では走行可能ライン28bを難易度「中」、表示色を「黄」に設定する。図4(c)では走行可能ライン28cを難易度「高」、表示色を「赤」に設定する。理想ライン27の表示色は、図4(a)〜(c)共通で「緑」とする。このように、運転操作の難易度に応じて推奨ルートの表示色を変更し、運転者に注意喚起する。
一方、計算の結果、推奨ルートが存在しない場合(ステップST8“NO”)、走行軌跡計算部6は表示部10に警告画面を表示させるか、警報出力部11に警報音を出力させるかして、障害物回避が不可能であり衝突の恐れがあることを運転者に知らせる(ステップST10)。次いで走行軌跡計算部6は、表示中の推奨ルートがあれば車両前方画像から消去し、メモリ2からも消去する(ステップST11)。
ステップST9で推奨ルートを画面表示させた場合、再びステップST1から処理を開始し、ステップST3で車両前方画像に自車アイコンをオーバーレイする際にメモリ2に登録されている推奨ルートもオーバーレイさせる(ステップST1〜ST3)。続くステップST4では、自車位置計算部5が新たに取得した自車位置が、表示中の推奨ルート上に存在するか否かを判定し、自車位置が推奨ルート上に存在していれば(ステップST4“NO”)、ステップST1〜ST3を繰り返し行って表示画面を自車両の走行に合わせて更新する。
一方、自車位置が推奨ルートから逸脱した場合、または、推奨ルートが表示されていないか既に消去された場合は(ステップST4“YES”)、推奨ルートの再計算を行う必要があるのでステップST5以降の処理を行う。なお、自車位置が推奨ルートから逸脱した場合に表示部10が警告画面を表示したり、警報出力部11が警報音を出力したりして、運転者に注意喚起してもよい。
以上より、実施の形態1によれば、運転支援装置は、自車両の前部に設置されて前進方向の車両前方画像を撮像する撮像部7と、車両前方画像を表示する表示部10と、自車両の前部に設置されて前進方向にある障害物を検知する障害物検出部8と、障害物検出部8の検知情報と撮像部7の撮像した車両前方画像とを用いて前進方向にある障害物の位置情報を計算する障害物位置計算部4と、車両状態検出部9の検知情報を用いて自車両の位置情報を計算する自車位置計算部5と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ2と、障害物位置計算部4が計算した障害物の位置情報およびメモリ2の記憶している車両情報より、自車位置計算部5が計算した位置にある自車両が障害物に接触せず走行できる推奨ルートを計算し、撮像部7が撮像した車両前方画像に当該推奨ルートを重ねて表示部10に表示させる走行軌跡計算部6とを備える構成にした。これによって運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から通行が可能かどうかが分かるようになるので、運転支援装置が運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
また、実施の形態1によれば、自車位置計算部5は、計算した自車両の位置情報を用いて推奨ルートから自車両が逸脱したか否かを判定し、走行軌跡計算部6は自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したので、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。また、自車逸脱の場合(図2のフローチャートではステップST4にて自車逸脱または推奨ルート未表示の場合)に推奨ルートの再計算をするようにしたので、CPU3の演算負荷を軽減できる。
なお、ステップST4の処理を省略して、毎回推奨ルートの再計算を行うことも可能である。具体的には、自車位置計算部5が自車両の移動に伴い自車位置を計算する都度、走行軌跡計算部6が推奨ルートを再計算し、当該推奨ルートが変化した場合に表示し直すように構成する。この構成の場合にも、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。
また、実施の形態1によれば、警報を発する警報出力部11を備え、走行軌跡計算部6は、推奨ルートを再計算する際、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部11に警報を発させるように構成した。このため、実際の自車両と障害物との位置関係にかかわらず、将来的に障害物に接触することを運転者に警告できる。なお、運転者への警告方法は、警報音の出力でも、警告画面の表示でもよく、あるいは音と画面表示の両方でもよい。
また、実施の形態1によれば、走行軌跡計算部6は、推奨ルートを辿る運転操作の難易度に応じて、当該推奨ルートの表示色を変化させるように構成した。このため、運転者が運転操作の難易度を直感的に把握できる。
実施の形態2.
本実施の形態2の運転支援装置は、図1に示す運転支援装置と図面上では同様の構成であるため、以下では図1を援用して説明する。ただし、上記実施の形態1では車両前部に撮像部7および障害物検出部8を設置して、自車両が前方へ走行している際の走行支援を行う構成であったが、本実施の形態2では車両後部に撮像部7および障害物検出部8を設置して、自車両が後方へ走行している際の走行支援を行う構成にする。
本実施の形態2の運転支援装置は、図1に示す運転支援装置と図面上では同様の構成であるため、以下では図1を援用して説明する。ただし、上記実施の形態1では車両前部に撮像部7および障害物検出部8を設置して、自車両が前方へ走行している際の走行支援を行う構成であったが、本実施の形態2では車両後部に撮像部7および障害物検出部8を設置して、自車両が後方へ走行している際の走行支援を行う構成にする。
以下では、駐車時に後退する場合を例に用いて、本実施の形態2に係る運転支援装置のパーキングモードの動作を説明する。図5は、運転支援装置の状況に応じた動作を表した図であり、タイムラインに沿って、道路40を走行中の自車両41a,41bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
運転支援装置の動作は、上記実施の形態1の図2と同じフローであり、先ず撮像部7が自車両の走行中に進行方向である車両後方画像を撮像し、メモリ2に蓄積する(ステップST1)。また、自車位置計算部5が車両状態検出部9から移動量および向きの情報を取得し、撮像時の自車位置を計算する(ステップST2)。続いて、走行軌跡計算部6は、過去に撮像してメモリ2に蓄積してある車両後方画像の中から、現在の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンをオーバーレイする(ステップST3)。図5の例では、自車両41aの位置で撮像した車両後方画像50に自車アイコン45をオーバーレイした画像51が、自車両41bの位置で画面表示される。また、メモリ2に推奨ルートが記憶されていれば、走行軌跡計算部6はその推奨ルートもオーバーレイする。続いて走行軌跡計算部6は、推奨ルートが表示部10に未表示か、または既に表示している推奨ルートから自車両が逸脱したかを判定し(ステップST4)、障害物検出部8が車両後方の障害物の有無を検知し(ステップST5)、障害物位置計算部4が障害物検出部8の検知結果および撮像部7の撮像画像に基づいて、または撮像部7の撮像画像のみに基づいて障害物を特定する(ステップST6)。
図5の例では、障害物位置計算部4が、自車両41bの後方の駐車スペースに駐車してある他車両42,43を障害物として特定し、さらに自車両41bから他車両42,43までの距離、他車両42,43同士の間隔、道路エリア等を求めてメモリ2へ出力する。続けて障害物位置計算部4は運転者から目標位置を受け付けて、目標位置を設定する。例えば表示部10をタッチパネル式にして、運転者が表示部10に表示された画像51上に目標位置44を指定する。
このようにして仮想の2次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部6がメモリ2に予め登録されている車両情報を用いて、自車両41bが道路40上を駐車中の他車両42,43に接触せずに駐車可能な推奨ルートを計算する(ステップST7)。推奨ルートの計算は上記実施の形態1と同様に行えばよく、理想ライン46および走行可能ライン47のいずれか一方、または両方を計算する。そして、走行軌跡計算部6は推奨ルートが存在すれば(ステップST8“YES”)、その推奨ルートを画像51にオーバーレイすると共にメモリ2に出力する(ステップST9)。さらに、走行軌跡計算部6は、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。
一方、推奨ルートが存在しなければ(ステップST8“NO”)、走行軌跡計算部6は表示部10に警告画面を表示させるか、警報出力部11に警報音を出力させるかして、運転者が指定した駐車スペース(目標位置)への駐車が不可能であることを知らせる(ステップST10)。次いで走行軌跡計算部6は、表示中の推奨ルートがあれば車両後方画像から消去し、メモリ2からも消去する(ステップST11)。
さらに、ステップST4にて自車両が推奨ルート上から逸脱した場合に、運転者に注意喚起する構成にしてもよい。図6(a)は、自車両と推奨ルートの位置関係を示す平面図であり、図6(b)はこのときの表示画面である。この例では推奨ルートとして走行可能ライン47が画面表示されており、自車位置計算部5が走行可能ライン47から自車両41が逸脱したことを判定すると、その判定を受けて走行軌跡計算部6が表示部10に「STOP」の文字を表示させて、自車両が走行可能ラインから逸脱したことを警告する。なお、運転者への警告方法は、警告画面の表示に加え(または警告画面の表示に代えて)、警報音の出力でもよい。
以上より、実施の形態2によれば、運転支援装置は、自車両の後部に設置されて後退方向の車両後方画像を撮像する撮像部7と、車両後方画像を表示する表示部10と、自車両の後部に設置されて後退方向にある駐車車両を検知する障害物検出部8と、障害物検出部8の検知情報と撮像部7の撮像した車両後方画像とを用いて後退方向にある駐車車両の位置情報を計算する障害物位置計算部4と、車両状態検出部9の検知情報を用いて自車両の位置情報を計算する自車位置計算部5と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ2と、運転者から車両後方画像上の任意の目標位置の指定を受けた場合に、自車両の位置から目標位置まで障害物に接触せずに車両後方へ進行できる推奨ルートを計算し、車両後方画像に当該推奨ルートを重ねて表示させる走行軌跡計算部6とを備える構成にした。このため、運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から駐車が可能かどうかが分かるようになるので、運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
また、実施の形態2でも上記実施の形態1と同様に、自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したり、または、自車両の位置を計算する都度推奨ルートを再計算し、自車両の移動に伴い推奨ルートが変化した場合に表示し直すように構成したりしてもよい。この構成によれば、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。さらに、走行軌跡計算部6が推奨ルートを再計算する際に、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部11に警報を発させるように構成することにより、実際の自車両と障害物との位置関係にかかわらず将来的に障害物に接触することを運転者に警告できる。また、推奨ルートを辿る運転操作の難易度に応じて表示色を変化させるように構成することにより、運転者が運転操作の難易度を直感的に把握できる。
上記実施の形態1では撮像部7および障害物検出部8を車両前部に設置し、上記実施の形態2では車両後部に設置する構成としたが、これに限定されるものではなく、撮像部7および障害物検出部8を車両前部および後部にそれぞれ設置して、車両の進行方向に応じて使い分ける構成であってもよい。
また、上記実施の形態1,2に係る運転支援装置は、推奨ルートとして理想ラインのみ、走行可能ラインのみ、または理想ラインと走行可能ラインの両方を画面表示する構成としたが、好ましくは理想ラインと走行可能ラインの両方を画面表示する構成がよい。
走行可能ラインのみ画像表示する場合、図7(a)に示すように、自車両60を走行可能ライン61内で走行中、どのくらい余裕があるのか直感的に分からないため、少しの操作ミス等で突然範囲外に出てしまう場合がある。これは、走行可能ライン61のみでは適切な走行軌跡が示されていないので、余裕のない位置を走行していても運転者には分からないためである。適切な走行軌跡は理想ラインで示されるが、理想ラインは自車両が障害物に接触せず目標位置まで走行できる最短経路であり、走行可能ラインの中央とは限らない。例えば、単純に走行可能ライン61の中央ライン62を辿ろうとすると、わずかな舵遅れで破線63のようにはみ出してしまう。
一方、理想ラインのみ画面表示する場合、図7(b)に示すように、自車両60を理想ライン64に沿わせるために頻繁な舵の修正を強いられたり、必要以上に低速で走行するようになったりと、運転者に難しさを感じさせてしまう可能性がある。しかし、実際には余裕があるので、それほど厳密にラインに沿って走行する必要はない。
そこで、図7(c)に示すように、走行可能ライン61と理想ライン64の両方を画面表示すれば、上記の各デメリットを解消できる。即ち、運転者は理想ライン64を目標にして適切な走行軌跡に近い部分を辿りながら、理想ライン64と走行可能ライン61の比較により余裕を認識して運転操作ができる。
走行可能ラインのみ画像表示する場合、図7(a)に示すように、自車両60を走行可能ライン61内で走行中、どのくらい余裕があるのか直感的に分からないため、少しの操作ミス等で突然範囲外に出てしまう場合がある。これは、走行可能ライン61のみでは適切な走行軌跡が示されていないので、余裕のない位置を走行していても運転者には分からないためである。適切な走行軌跡は理想ラインで示されるが、理想ラインは自車両が障害物に接触せず目標位置まで走行できる最短経路であり、走行可能ラインの中央とは限らない。例えば、単純に走行可能ライン61の中央ライン62を辿ろうとすると、わずかな舵遅れで破線63のようにはみ出してしまう。
一方、理想ラインのみ画面表示する場合、図7(b)に示すように、自車両60を理想ライン64に沿わせるために頻繁な舵の修正を強いられたり、必要以上に低速で走行するようになったりと、運転者に難しさを感じさせてしまう可能性がある。しかし、実際には余裕があるので、それほど厳密にラインに沿って走行する必要はない。
そこで、図7(c)に示すように、走行可能ライン61と理想ライン64の両方を画面表示すれば、上記の各デメリットを解消できる。即ち、運転者は理想ライン64を目標にして適切な走行軌跡に近い部分を辿りながら、理想ライン64と走行可能ライン61の比較により余裕を認識して運転操作ができる。
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組合せ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
以上のように、この発明に係る運転支援装置は、障害物への接触を回避して走行できる推奨ルートを計算して車両周辺画像に重ねて表示するようにしたので、車両に搭載して通行および駐車の運転操作を支援する運転支援装置などに用いるのに適している。
この発明は、車両の運転者に対して運転支援を行う運転支援装置に関する。
従来、駐車スペース横を走行しながらソナーでスキャンして障害物までの距離を検出し、検出点群から真の障害物形状を推定することで駐車スペースの大きさを計算して、大きさに応じて駐車可否を運転者に通知する運転支援装置が実用化されている。また、自車両全体を含む鳥瞰画像を運転者に提供する、いわゆるアラウンドビューモニタも実用化されている(例えば、特許文献1参照)。
従来の運転支援装置は以上のように構成されているので、駐車可否の情報および自車両全体を含む鳥瞰画像を運転者に提供すれば、車両周辺状況の認識に大きな助けとなる。しかしながら、狭路の通行、駐車スペースへの駐車等を行うための適切な走行経路および運転操作は分からず、運転者が直感的に把握できないという課題があった。そのため、鳥瞰画像を見ながら運転者自身が走行経路およびアプローチの仕方を考えて運転操作を行う必要があった。
この発明は、上記のような課題を解決するためになされたもので、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することを目的とする。
この発明の運転支援装置は、自車両に設置され、少なくとも進行方向の車両周辺画像を撮像する撮像部と、車両周辺画像を表示する表示部と、少なくとも進行方向にある障害物の位置情報を取得する障害物位置計算部と、自車両の位置情報を取得する自車位置計算部と、自車両に関する車両情報を記憶しているメモリ部と、障害物位置計算部が取得した障害物の位置情報およびメモリ部の記憶している車両情報より、自車位置計算部が取得した位置にある自車両が障害物に接触せず所定の目標位置まで走行できる最短経路、および自車両が障害物を後戻りせず迂回して目標位置まで走行できる走行可能範囲のいずれか一方、または両方であり、撮像部が撮像した車両周辺画像より認識した道路からはみ出さない推奨ルートを計算し、撮像部が撮像した車両周辺画像に当該推奨ルートを重ねて表示部に表示させる走行軌跡計算部とを備えるものである。
この発明によれば、自車両が障害物に接触せず走行できる推奨ルートを車両周辺画像に重ねて表示することにより、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することができる。
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態1.
図1に示す運転支援装置は、ECU(Electronic Control Unit)1と、車両前部に設置され車両前方を撮像する撮像部7と、車両前部に設置され車両前方に障害物を検出する障害物検出部8と、車両の移動量および向き等を検出する車両状態検出部9と、画像を表示する表示部10と、警報を発生する警報出力部11とを備える。本実施の形態1では、撮像部7として、車両前部に設置され車両前方の画像を撮像するカメラを用いる。また、障害物検出部8として、車両前部に設置され車両前方に存在する障害物までの距離を検知するソナー(超音波センサ)を用いる。車両状態検出部9として、車輪の回転数を検知する車輪速センサ等を用いる。表示部10として、車両に搭載されたカーナビゲーション等のモニタを用いる。警報出力部11として、車両に搭載されたカーナビゲーション、カーオーディオ等のスピーカまたはブザーを用いる。
実施の形態1.
図1に示す運転支援装置は、ECU(Electronic Control Unit)1と、車両前部に設置され車両前方を撮像する撮像部7と、車両前部に設置され車両前方に障害物を検出する障害物検出部8と、車両の移動量および向き等を検出する車両状態検出部9と、画像を表示する表示部10と、警報を発生する警報出力部11とを備える。本実施の形態1では、撮像部7として、車両前部に設置され車両前方の画像を撮像するカメラを用いる。また、障害物検出部8として、車両前部に設置され車両前方に存在する障害物までの距離を検知するソナー(超音波センサ)を用いる。車両状態検出部9として、車輪の回転数を検知する車輪速センサ等を用いる。表示部10として、車両に搭載されたカーナビゲーション等のモニタを用いる。警報出力部11として、車両に搭載されたカーナビゲーション、カーオーディオ等のスピーカまたはブザーを用いる。
ECU1は、データを記憶するメモリ2と、不図示のプログラムメモリに格納されたプログラムを実行して障害物位置計算部4、自車位置計算部5、および走行軌跡計算部6の処理内容を実行するCPU3とを有する。このプログラムには、撮像部7と障害物検出部8の情報から障害物の位置および形状を計算する障害物位置計算部4と、車両状態検出部9の情報から自車両の位置を計算する自車位置計算部5と、障害物に自車両が接触せず走行できる推奨ルートを計算し、撮像部7が撮像した車両前方画像に当該推奨ルートを重ねて表示部10に表示させる走行軌跡計算部6の処理内容が記述されている。
次に、運転支援装置の動作を説明する。
図2は運転支援装置の動作を示すフローチャートである。図3は状況に応じた動作を表す図であり、タイムラインに沿って、道路20を走行中の自車両21a,21bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
メモリ2には、予め自車両の寸法、車輪幅、旋回性能等の車両情報が登録されているものとする。
図2は運転支援装置の動作を示すフローチャートである。図3は状況に応じた動作を表す図であり、タイムラインに沿って、道路20を走行中の自車両21a,21bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
メモリ2には、予め自車両の寸法、車輪幅、旋回性能等の車両情報が登録されているものとする。
撮像部7は、自車両の走行中に進行方向である車両前方画像を撮像し、メモリ2に蓄積する(ステップST1)。また、このときの自車位置を自車位置計算部5が計算する(ステップST2)。自車位置計算部5は仮想の2次元座標を設定して、この2次元座標上に、ステップST1で撮像した車両前方画像と、その車両前方画像を撮像したときの自車位置(撮像位置)とを設定する。自車位置計算部5は、前回の撮像位置に、車両状態検出部9から入力される車輪速パルスに基づく移動距離を加算して、今回の撮像位置を求め、これを自車位置とすればよい。
続いて、走行軌跡計算部6は、過去に撮像してメモリ2に蓄積してある車両前方画像の中から、今回の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンおよび推奨ルートをオーバーレイする(ステップST3)。この自車アイコンは予めメモリ2に登録しておけばよい。また、過去に走行軌跡計算部6が計算した推奨ルートがメモリ2に存在していれば、走行軌跡計算部6はその推奨ルートをオーバーレイする。図3の例では、今回の自車両21bの位置において、過去の自車両21aの位置で撮像した車両前方画像30に自車アイコン26をオーバーレイした画像31が生成される。
続いて、走行軌跡計算部6は、メモリ2に推奨ルートが存在せず表示部10に未表示か、既に表示している推奨ルートから自車両が逸脱したかを判定する(ステップST4)。ここでは、推奨ルート未表示とし(ステップST4“YES”)、続くステップST5にて障害物検出部8が車両前方の障害物の有無を検知する。障害物検出部8を構成するソナーは、車両前方の障害物を検知すると、車両から障害物までの距離および方向を障害物位置計算部4へ出力し(ステップST5“YES”)、障害物位置計算部4がその障害物を車両前方画像上に特定する(ステップST6)。
一方、走行軌跡計算部6が推奨ルートを表示部10に表示させている場合、または、自車位置が表示中の推奨ルート上に存在しており逸脱せず走行中と判断できる場合には(ステップST4“NO”)、ステップST1に戻る。また、障害物が存在しない場合には(ステップST5“NO”)、ステップST11にて、走行軌跡計算部6が車両前方画像にオーバーレイしていた推奨ルートを消去する。
ステップST6の障害物特定の方法としては公知の方法を用いればよい。ここでは(1)カメラとソナーを併用する場合、(2)カメラのみ使用する場合の2つの方法を説明する。
(1)カメラとソナーを併用する場合
障害物検出部8を構成するソナーは、以下のような計測誤差要因が考えられ、障害物をより正確に特定するためには繰り返し精度の誤差の影響を排除する必要がある。
・障害物の距離計測誤差:温湿度、風、信号処理回路のばらつき、その他外乱
・推定ロジックによる誤差:反射面の特定、形状の曲線近似方法
・障害物の形状による誤差
障害物検出部8を構成するソナーは、以下のような計測誤差要因が考えられ、障害物をより正確に特定するためには繰り返し精度の誤差の影響を排除する必要がある。
・障害物の距離計測誤差:温湿度、風、信号処理回路のばらつき、その他外乱
・推定ロジックによる誤差:反射面の特定、形状の曲線近似方法
・障害物の形状による誤差
そこで、本実施の形態1では、ソナーはカメラで撮像した画像上で障害物を特定するための補助的な役割とし、距離計測は画像上で行うことで、上記の誤差要因の影響をなくし、繰り返し精度および絶対精度の向上を図る。具体的には、ステップST6にて障害物位置計算部4が、自車位置から障害物までの距離および方向と、ソナーの検知可能エリアの情報とに基づいて、メモリ2に蓄積された車両前方画像上で当該障害物を特定して輪郭を検出する。次いで障害物位置計算部4は、障害物の輪郭のうち自車アイコン座標との最接近点を計算して、2次元座標上に障害物として設定する。設定された障害物に奥行き情報はない。なお、画像上から輪郭を抽出する画像処理方法は公知の技術であるため説明は省略する。
(2)カメラのみ使用する場合
ステップST6にて、障害物位置計算部4がメモリ2に蓄積された複数フレームの車両前方画像を用い、モーションステレオ法により障害物の立体的な形状を認識して、2次元座標上に障害物として投影する。モーションステレオ法は公知の技術であるため説明は省略する。
ステップST6にて、障害物位置計算部4がメモリ2に蓄積された複数フレームの車両前方画像を用い、モーションステレオ法により障害物の立体的な形状を認識して、2次元座標上に障害物として投影する。モーションステレオ法は公知の技術であるため説明は省略する。
障害物位置計算部4は、上記(1)または(2)の方法により障害物の位置座標を車両前方画像上に特定し、続けて自車位置から障害物までの距離を計算する。また、障害物が複数ある場合には、障害物同士の間隔も計算する。さらに、障害物位置計算部4は障害物を回避して到達する目標位置の座標を設定したり、画像上から道路を認識したりする。障害物位置計算部4が算出した障害物までの距離、障害物同士の間隔、目標位置、道路エリア等の情報はメモリ2へ出力する。図3の例では、道路20を走行中の自車両21bの位置にて障害物検出部8が障害物22,23を検知すると、障害物位置計算部4が画像上で障害物22,23の位置および形状、障害物22,23同士の間隔、自車両21bまでの距離を計算すると共に、道路20のエリアを計算する。
障害物位置計算部4による目標位置の設定方法としては、例えば障害物22,23の中点24を決定し、中点24を中心にした自車両21bの点対照の位置を求めて目標位置25に設定する。また、前方が曲がり角などの状況で、目標位置25が道路20から外れるようであれば位置を調整してもよい。なお、この目標位置設定方法は一例であり、この方法に限定されるものではない。
このようにして仮想の2次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部6がメモリ2に予め登録されている車幅、旋回性能等の車両情報を用いて、自車両21bが道路20上を障害物22,23に接触せずに走行可能な推奨ルートを計算する(ステップST7)。走行軌跡計算部6は推奨ルートとして理想ライン27および走行可能ライン28のいずれか一方、または両方を計算する。理想ライン27は、車幅と同じ幅を持ち、障害物22,23に接触せずに自車位置から目標位置25までを辿る最短経路とする。また、走行可能ライン28は、自車位置から目標位置25まで後戻りせず最大限大回りして障害物を迂回することのできる幅を持ったエリアとする。また、推奨ルートが道路エリアからはみ出さないようにしたり、推奨ルートが障害物へ所定距離(例えば、50cm)以上接近しないようにしたりといった計算条件を設定してもよい。
計算の結果、障害物22,23を回避走行可能な推奨ルートが存在する場合(ステップST8“YES”)、走行軌跡計算部6はその推奨ルートを車両前方画像にオーバーレイして、表示部10に表示する(ステップST9)。画面表示する推奨ルートは、ステップST7で計算した理想ライン27および走行可能ライン28のいずれか一方、または両方とする。図3の画像31では、理想ライン27と走行可能ライン28の両方が表示されている。画面表示された推奨ルートの範囲内で自車両を走行させれば障害物に接触することなく通行できるので、運転者自身が走行経路を考える必要がなくなり、直感的に運転操作できるようになる。
また、走行軌跡計算部6は計算した推奨ルートをメモリ2に記憶させる。
また、走行軌跡計算部6は計算した推奨ルートをメモリ2に記憶させる。
なお、走行軌跡計算部6は、計算した推奨ルートの幅および形状より、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。難易度は例えば推奨ルートの幅を基準に判定することとし、推奨ルートの幅が許容範囲より広ければ難易度「低」、許容範囲内であれば難易度「中」、許容範囲より狭ければ難易度「高」となる。この他にも、推奨ルートを辿るためのハンドルの操舵角の大きさに応じて難易度を判定するなど、どのように判定してもよい。
図4は、推奨ルート幅を基準に判定した難易度に応じて走行可能ラインの表示色を可変にした画面表示例を示す。障害物22,23の間隔が図4(a)で最も広く、図4(c)で最も狭い。この場合、理想ライン27は車幅で一定であるが、走行可能ライン28a,28b,28cの幅は障害物22,23の間隔が狭まるに応じて狭くなる。そのため、図4(a)では走行軌跡計算部6が走行可能ライン28aを難易度「低」と判定して表示色を「青」に設定する。図4(b)では走行可能ライン28bを難易度「中」、表示色を「黄」に設定する。図4(c)では走行可能ライン28cを難易度「高」、表示色を「赤」に設定する。理想ライン27の表示色は、図4(a)〜(c)共通で「緑」とする。このように、運転操作の難易度に応じて推奨ルートの表示色を変更し、運転者に注意喚起する。
一方、計算の結果、推奨ルートが存在しない場合(ステップST8“NO”)、走行軌跡計算部6は表示部10に警告画面を表示させるか、警報出力部11に警報音を出力させるかして、障害物回避が不可能であり衝突の恐れがあることを運転者に知らせる(ステップST10)。次いで走行軌跡計算部6は、表示中の推奨ルートがあれば車両前方画像から消去し、メモリ2からも消去する(ステップST11)。
ステップST9で推奨ルートを画面表示させた場合、再びステップST1から処理を開始し、ステップST3で車両前方画像に自車アイコンをオーバーレイする際にメモリ2に登録されている推奨ルートもオーバーレイさせる(ステップST1〜ST3)。続くステップST4では、自車位置計算部5が新たに取得した自車位置が、表示中の推奨ルート上に存在するか否かを判定し、自車位置が推奨ルート上に存在していれば(ステップST4“NO”)、ステップST1〜ST3を繰り返し行って表示画面を自車両の走行に合わせて更新する。
一方、自車位置が推奨ルートから逸脱した場合、または、推奨ルートが表示されていないか既に消去された場合は(ステップST4“YES”)、推奨ルートの再計算を行う必要があるのでステップST5以降の処理を行う。なお、自車位置が推奨ルートから逸脱した場合に表示部10が警告画面を表示したり、警報出力部11が警報音を出力したりして、運転者に注意喚起してもよい。
以上より、実施の形態1によれば、運転支援装置は、自車両の前部に設置されて前進方向の車両前方画像を撮像する撮像部7と、車両前方画像を表示する表示部10と、自車両の前部に設置されて前進方向にある障害物を検知する障害物検出部8と、障害物検出部8の検知情報と撮像部7の撮像した車両前方画像とを用いて前進方向にある障害物の位置情報を計算する障害物位置計算部4と、車両状態検出部9の検知情報を用いて自車両の位置情報を計算する自車位置計算部5と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ2と、障害物位置計算部4が計算した障害物の位置情報およびメモリ2の記憶している車両情報より、自車位置計算部5が計算した位置にある自車両が障害物に接触せず走行できる推奨ルートを計算し、撮像部7が撮像した車両前方画像に当該推奨ルートを重ねて表示部10に表示させる走行軌跡計算部6とを備える構成にした。これによって運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から通行が可能かどうかが分かるようになるので、運転支援装置が運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
また、実施の形態1によれば、自車位置計算部5は、計算した自車両の位置情報を用いて推奨ルートから自車両が逸脱したか否かを判定し、走行軌跡計算部6は自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したので、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。また、自車逸脱の場合(図2のフローチャートではステップST4にて自車逸脱または推奨ルート未表示の場合)に推奨ルートの再計算をするようにしたので、CPU3の演算負荷を軽減できる。
なお、ステップST4の処理を省略して、毎回推奨ルートの再計算を行うことも可能である。具体的には、自車位置計算部5が自車両の移動に伴い自車位置を計算する都度、走行軌跡計算部6が推奨ルートを再計算し、当該推奨ルートが変化した場合に表示し直すように構成する。この構成の場合にも、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。
また、実施の形態1によれば、警報を発する警報出力部11を備え、走行軌跡計算部6は、推奨ルートを再計算する際、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部11に警報を発させるように構成した。このため、実際の自車両と障害物との位置関係にかかわらず、将来的に障害物に接触することを運転者に警告できる。なお、運転者への警告方法は、警報音の出力でも、警告画面の表示でもよく、あるいは音と画面表示の両方でもよい。
また、実施の形態1によれば、走行軌跡計算部6は、推奨ルートを辿る運転操作の難易度に応じて、当該推奨ルートの表示色を変化させるように構成した。このため、運転者が運転操作の難易度を直感的に把握できる。
実施の形態2.
本実施の形態2の運転支援装置は、図1に示す運転支援装置と図面上では同様の構成であるため、以下では図1を援用して説明する。ただし、上記実施の形態1では車両前部に撮像部7および障害物検出部8を設置して、自車両が前方へ走行している際の走行支援を行う構成であったが、本実施の形態2では車両後部に撮像部7および障害物検出部8を設置して、自車両が後方へ走行している際の走行支援を行う構成にする。
本実施の形態2の運転支援装置は、図1に示す運転支援装置と図面上では同様の構成であるため、以下では図1を援用して説明する。ただし、上記実施の形態1では車両前部に撮像部7および障害物検出部8を設置して、自車両が前方へ走行している際の走行支援を行う構成であったが、本実施の形態2では車両後部に撮像部7および障害物検出部8を設置して、自車両が後方へ走行している際の走行支援を行う構成にする。
以下では、駐車時に後退する場合を例に用いて、本実施の形態2に係る運転支援装置のパーキングモードの動作を説明する。図5は、運転支援装置の状況に応じた動作を表した図であり、タイムラインに沿って、道路40を走行中の自車両41a,41bの状況、運転支援装置が行うデータ処理、表示部10の画面表示を表す。
運転支援装置の動作は、上記実施の形態1の図2と同じフローであり、先ず撮像部7が自車両の走行中に進行方向である車両後方画像を撮像し、メモリ2に蓄積する(ステップST1)。また、自車位置計算部5が車両状態検出部9から移動量および向きの情報を取得し、撮像時の自車位置を計算する(ステップST2)。続いて、走行軌跡計算部6は、過去に撮像してメモリ2に蓄積してある車両後方画像の中から、現在の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンをオーバーレイする(ステップST3)。図5の例では、自車両41aの位置で撮像した車両後方画像50に自車アイコン45をオーバーレイした画像51が、自車両41bの位置で画面表示される。また、メモリ2に推奨ルートが記憶されていれば、走行軌跡計算部6はその推奨ルートもオーバーレイする。続いて走行軌跡計算部6は、推奨ルートが表示部10に未表示か、または既に表示している推奨ルートから自車両が逸脱したかを判定し(ステップST4)、障害物検出部8が車両後方の障害物の有無を検知し(ステップST5)、障害物位置計算部4が障害物検出部8の検知結果および撮像部7の撮像画像に基づいて、または撮像部7の撮像画像のみに基づいて障害物を特定する(ステップST6)。
図5の例では、障害物位置計算部4が、自車両41bの後方の駐車スペースに駐車してある他車両42,43を障害物として特定し、さらに自車両41bから他車両42,43までの距離、他車両42,43同士の間隔、道路エリア等を求めてメモリ2へ出力する。続けて障害物位置計算部4は運転者から目標位置を受け付けて、目標位置を設定する。例えば表示部10をタッチパネル式にして、運転者が表示部10に表示された画像51上に目標位置44を指定する。
このようにして仮想の2次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部6がメモリ2に予め登録されている車両情報を用いて、自車両41bが道路40上を駐車中の他車両42,43に接触せずに駐車可能な推奨ルートを計算する(ステップST7)。推奨ルートの計算は上記実施の形態1と同様に行えばよく、理想ライン46および走行可能ライン47のいずれか一方、または両方を計算する。そして、走行軌跡計算部6は推奨ルートが存在すれば(ステップST8“YES”)、その推奨ルートを画像51にオーバーレイすると共にメモリ2に出力する(ステップST9)。さらに、走行軌跡計算部6は、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。
一方、推奨ルートが存在しなければ(ステップST8“NO”)、走行軌跡計算部6は表示部10に警告画面を表示させるか、警報出力部11に警報音を出力させるかして、運転者が指定した駐車スペース(目標位置)への駐車が不可能であることを知らせる(ステップST10)。次いで走行軌跡計算部6は、表示中の推奨ルートがあれば車両後方画像から消去し、メモリ2からも消去する(ステップST11)。
さらに、ステップST4にて自車両が推奨ルート上から逸脱した場合に、運転者に注意喚起する構成にしてもよい。図6(a)は、自車両と推奨ルートの位置関係を示す平面図であり、図6(b)はこのときの表示画面である。この例では推奨ルートとして走行可能ライン47が画面表示されており、自車位置計算部5が走行可能ライン47から自車両41が逸脱したことを判定すると、その判定を受けて走行軌跡計算部6が表示部10に「STOP」の文字を表示させて、自車両が走行可能ラインから逸脱したことを警告する。なお、運転者への警告方法は、警告画面の表示に加え(または警告画面の表示に代えて)、警報音の出力でもよい。
以上より、実施の形態2によれば、運転支援装置は、自車両の後部に設置されて後退方向の車両後方画像を撮像する撮像部7と、車両後方画像を表示する表示部10と、自車両の後部に設置されて後退方向にある駐車車両を検知する障害物検出部8と、障害物検出部8の検知情報と撮像部7の撮像した車両後方画像とを用いて後退方向にある駐車車両の位置情報を計算する障害物位置計算部4と、車両状態検出部9の検知情報を用いて自車両の位置情報を計算する自車位置計算部5と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ2と、運転者から車両後方画像上の任意の目標位置の指定を受けた場合に、自車両の位置から目標位置まで障害物に接触せずに車両後方へ進行できる推奨ルートを計算し、車両後方画像に当該推奨ルートを重ねて表示させる走行軌跡計算部6とを備える構成にした。このため、運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から駐車が可能かどうかが分かるようになるので、運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
また、実施の形態2でも上記実施の形態1と同様に、自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したり、または、自車両の位置を計算する都度推奨ルートを再計算し、自車両の移動に伴い推奨ルートが変化した場合に表示し直すように構成したりしてもよい。この構成によれば、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。さらに、走行軌跡計算部6が推奨ルートを再計算する際に、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部11に警報を発させるように構成することにより、実際の自車両と障害物との位置関係にかかわらず将来的に障害物に接触することを運転者に警告できる。また、推奨ルートを辿る運転操作の難易度に応じて表示色を変化させるように構成することにより、運転者が運転操作の難易度を直感的に把握できる。
上記実施の形態1では撮像部7および障害物検出部8を車両前部に設置し、上記実施の形態2では車両後部に設置する構成としたが、これに限定されるものではなく、撮像部7および障害物検出部8を車両前部および後部にそれぞれ設置して、車両の進行方向に応じて使い分ける構成であってもよい。
また、上記実施の形態1,2に係る運転支援装置は、推奨ルートとして理想ラインのみ、走行可能ラインのみ、または理想ラインと走行可能ラインの両方を画面表示する構成としたが、好ましくは理想ラインと走行可能ラインの両方を画面表示する構成がよい。
走行可能ラインのみ画像表示する場合、図7(a)に示すように、自車両60を走行可能ライン61内で走行中、どのくらい余裕があるのか直感的に分からないため、少しの操作ミス等で突然範囲外に出てしまう場合がある。これは、走行可能ライン61のみでは適切な走行軌跡が示されていないので、余裕のない位置を走行していても運転者には分からないためである。適切な走行軌跡は理想ラインで示されるが、理想ラインは自車両が障害物に接触せず目標位置まで走行できる最短経路であり、走行可能ラインの中央とは限らない。例えば、単純に走行可能ライン61の中央ライン62を辿ろうとすると、わずかな舵遅れで破線63のようにはみ出してしまう。
一方、理想ラインのみ画面表示する場合、図7(b)に示すように、自車両60を理想ライン64に沿わせるために頻繁な舵の修正を強いられたり、必要以上に低速で走行するようになったりと、運転者に難しさを感じさせてしまう可能性がある。しかし、実際には余裕があるので、それほど厳密にラインに沿って走行する必要はない。
そこで、図7(c)に示すように、走行可能ライン61と理想ライン64の両方を画面表示すれば、上記の各デメリットを解消できる。即ち、運転者は理想ライン64を目標にして適切な走行軌跡に近い部分を辿りながら、理想ライン64と走行可能ライン61の比較により余裕を認識して運転操作ができる。
走行可能ラインのみ画像表示する場合、図7(a)に示すように、自車両60を走行可能ライン61内で走行中、どのくらい余裕があるのか直感的に分からないため、少しの操作ミス等で突然範囲外に出てしまう場合がある。これは、走行可能ライン61のみでは適切な走行軌跡が示されていないので、余裕のない位置を走行していても運転者には分からないためである。適切な走行軌跡は理想ラインで示されるが、理想ラインは自車両が障害物に接触せず目標位置まで走行できる最短経路であり、走行可能ラインの中央とは限らない。例えば、単純に走行可能ライン61の中央ライン62を辿ろうとすると、わずかな舵遅れで破線63のようにはみ出してしまう。
一方、理想ラインのみ画面表示する場合、図7(b)に示すように、自車両60を理想ライン64に沿わせるために頻繁な舵の修正を強いられたり、必要以上に低速で走行するようになったりと、運転者に難しさを感じさせてしまう可能性がある。しかし、実際には余裕があるので、それほど厳密にラインに沿って走行する必要はない。
そこで、図7(c)に示すように、走行可能ライン61と理想ライン64の両方を画面表示すれば、上記の各デメリットを解消できる。即ち、運転者は理想ライン64を目標にして適切な走行軌跡に近い部分を辿りながら、理想ライン64と走行可能ライン61の比較により余裕を認識して運転操作ができる。
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組合せ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
以上のように、この発明に係る運転支援装置は、障害物への接触を回避して走行できる推奨ルートを計算して車両周辺画像に重ねて表示するようにしたので、車両に搭載して通行および駐車の運転操作を支援する運転支援装置などに用いるのに適している。
Claims (8)
- 自車両に設置され、少なくとも進行方向の車両周辺画像を撮像する撮像部と、
前記車両周辺画像を表示する表示部と、
少なくとも進行方向にある障害物の位置情報を取得する障害物位置計算部と、
前記自車両の位置情報を取得する自車位置計算部と、
前記自車両に関する車両情報を記憶しているメモリ部と、
前記障害物位置計算部が取得した障害物の位置情報および前記メモリ部の記憶している車両情報より、前記自車位置計算部が取得した位置にある自車両が前記障害物に接触せず走行できる推奨ルートを計算し、前記撮像部が撮像した車両周辺画像に当該推奨ルートを重ねて前記表示部に表示させる走行軌跡計算部とを備える運転支援装置。 - 前記推奨ルートは、自車両が障害物に接触せず所定の目標位置まで走行できる最短経路、および前記自車両が前記障害物を後戻りせず迂回して前記目標位置まで走行できる走行可能範囲のいずれか一方、または両方であることを特徴とする請求項1記載の運転支援装置。
- 前記走行軌跡計算部は、前記撮像部が撮像した車両周辺画像より認識した道路からはみ出さない推奨ルートを計算することを特徴とする請求項1記載の運転支援装置。
- 前記走行軌跡計算部は、前記自車位置計算部が自車両の移動に伴い位置情報を取得する都度推奨ルートを再計算し、当該推奨ルートが変化した場合に表示し直すことを特徴とする請求項1記載の運転支援装置。
- 前記走行軌跡計算部は、前記自車位置計算部が取得した自車両の位置情報を用いて推奨ルートから自車両が逸脱したか否かを判定し、当該自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すことを特徴とする請求項1記載の運転支援装置。
- 警報を発する警報出力部を備え、
前記走行軌跡計算部は、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に前記警報出力部に警報を発させることを特徴とする請求項1記載の運転支援装置。 - 前記走行軌跡計算部は、推奨ルートを辿る運転操作の難易度に応じて、当該推奨ルートの表示色を変化させることを特徴とする請求項1記載の運転支援装置。
- 前記走行軌跡計算部は、運転者から車両周辺画像上の任意の目標位置の指定を受けた場合に、自車両の位置から当該目標位置まで障害物に接触せずに車両後方へ進行できる推奨ルートを計算し、車両周辺画像に当該推奨ルートを重ねて前記表示部に表示させるパーキングモードを有することを特徴とする請求項1記載の運転支援装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2010/005735 WO2012039004A1 (ja) | 2010-09-22 | 2010-09-22 | 運転支援装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPWO2012039004A1 true JPWO2012039004A1 (ja) | 2014-02-03 |
Family
ID=45873524
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012534829A Pending JPWO2012039004A1 (ja) | 2010-09-22 | 2010-09-22 | 運転支援装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JPWO2012039004A1 (ja) |
WO (1) | WO2012039004A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016149594A (ja) * | 2015-02-10 | 2016-08-18 | クラリオン株式会社 | 車両用進入可否判定装置 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6188515B2 (ja) * | 2013-09-25 | 2017-08-30 | 株式会社日立製作所 | 車線誘導装置、車線誘導システムおよび車線誘導方法 |
WO2017018192A1 (ja) * | 2015-07-29 | 2017-02-02 | 株式会社デンソー | 情報表示装置 |
JP6428713B2 (ja) * | 2015-07-29 | 2018-11-28 | 株式会社デンソー | 情報表示装置 |
JP7064977B2 (ja) * | 2018-06-21 | 2022-05-11 | 鹿島建設株式会社 | 操作支援システム |
JP7151511B2 (ja) * | 2019-01-25 | 2022-10-12 | 株式会社デンソー | 車両の周辺監視装置 |
JP7111121B2 (ja) * | 2019-04-09 | 2022-08-02 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
WO2020208989A1 (ja) * | 2019-04-09 | 2020-10-15 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
JP7419918B2 (ja) * | 2020-03-26 | 2024-01-23 | 株式会社Jvcケンウッド | 駐車支援制御装置、駐車支援装置、駐車支援方法およびプログラム |
CN112035452B (zh) * | 2020-08-26 | 2022-09-06 | 重庆长安汽车股份有限公司 | 基于大数据的网联车用户出游分析方法 |
JP2022126240A (ja) * | 2021-02-18 | 2022-08-30 | トヨタ自動車株式会社 | 車両用表示装置 |
US20230256985A1 (en) * | 2022-02-14 | 2023-08-17 | Continental Advanced Lidar Solutions Us, Llc | Method and system for avoiding vehicle undercarriage collisions |
CN115237124A (zh) * | 2022-06-30 | 2022-10-25 | 魔门塔(苏州)科技有限公司 | 行驶路径边界确定方法及装置、车辆、存储介质、终端 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000118334A (ja) * | 1998-10-15 | 2000-04-25 | Toyota Motor Corp | 駐車支援装置 |
JP2002352397A (ja) * | 2001-05-29 | 2002-12-06 | Fuji Heavy Ind Ltd | 車両用運転支援装置 |
WO2006064544A1 (ja) * | 2004-12-14 | 2006-06-22 | Hitachi, Ltd. | 自動車庫入れ装置 |
DE102005062151A1 (de) * | 2005-12-22 | 2007-07-05 | Daimlerchrysler Ag | Verfahren und Vorrichtung zur Unterstützung eines Fahrzeugführers bei der Passage von Fahrwegverengungen |
JP2009208742A (ja) * | 2008-03-06 | 2009-09-17 | Aisin Seiki Co Ltd | 駐車支援装置 |
JP2010173511A (ja) * | 2009-01-30 | 2010-08-12 | Nissan Motor Co Ltd | 車両用運転支援装置および車両用運転支援方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1123305A (ja) * | 1997-07-03 | 1999-01-29 | Toyota Motor Corp | 車両用走行案内装置 |
JP2008003880A (ja) * | 2006-06-23 | 2008-01-10 | Honda Motor Co Ltd | 車両周辺監視システム、車両周辺監視プログラム、車両周辺監視システムの構築方法およびサーバ |
JP4648335B2 (ja) * | 2007-01-10 | 2011-03-09 | 独立行政法人科学技術振興機構 | 車両走行用仮想試験を行うシステム及びプログラム |
JP2009015547A (ja) * | 2007-07-04 | 2009-01-22 | Omron Corp | 運転支援装置および方法、並びに、プログラム |
-
2010
- 2010-09-22 WO PCT/JP2010/005735 patent/WO2012039004A1/ja active Application Filing
- 2010-09-22 JP JP2012534829A patent/JPWO2012039004A1/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000118334A (ja) * | 1998-10-15 | 2000-04-25 | Toyota Motor Corp | 駐車支援装置 |
JP2002352397A (ja) * | 2001-05-29 | 2002-12-06 | Fuji Heavy Ind Ltd | 車両用運転支援装置 |
WO2006064544A1 (ja) * | 2004-12-14 | 2006-06-22 | Hitachi, Ltd. | 自動車庫入れ装置 |
DE102005062151A1 (de) * | 2005-12-22 | 2007-07-05 | Daimlerchrysler Ag | Verfahren und Vorrichtung zur Unterstützung eines Fahrzeugführers bei der Passage von Fahrwegverengungen |
JP2009208742A (ja) * | 2008-03-06 | 2009-09-17 | Aisin Seiki Co Ltd | 駐車支援装置 |
JP2010173511A (ja) * | 2009-01-30 | 2010-08-12 | Nissan Motor Co Ltd | 車両用運転支援装置および車両用運転支援方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016149594A (ja) * | 2015-02-10 | 2016-08-18 | クラリオン株式会社 | 車両用進入可否判定装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2012039004A1 (ja) | 2012-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2012039004A1 (ja) | 運転支援装置 | |
US10474911B2 (en) | Smart parking assist apparatus and method | |
KR101438941B1 (ko) | 주차 지원 제어 장치 및 방법 | |
JP5713623B2 (ja) | ドライバーアシスト方法 | |
US9475492B2 (en) | Parking assist device | |
KR101503418B1 (ko) | 반자동 주차 기계 | |
US10268905B2 (en) | Parking assistance apparatus | |
CN111201558B (zh) | 用于示出车辆的周围环境的方法 | |
US20180322349A1 (en) | Parking Space Detection Method and Device | |
EP3650285A1 (en) | Parking assistance method and parking assistance device | |
JP4962739B2 (ja) | 駐車支援装置 | |
JP3941770B2 (ja) | 衝突可能性判定装置 | |
JP5282730B2 (ja) | 運転支援装置 | |
JPWO2019008762A1 (ja) | 駐車支援方法及び駐車支援装置 | |
JP2021044751A (ja) | 周辺監視装置 | |
JP5469509B2 (ja) | 車線位置検出装置および車線位置検出方法 | |
WO2012144076A1 (ja) | 車両周辺監視装置及び車両周辺監視情報の表示方法 | |
JP4576772B2 (ja) | 駐車支援装置 | |
KR20150028492A (ko) | 조향 휠 제어 방법 및 이를 위한 시스템 | |
KR101278064B1 (ko) | 차량의 주차 보조 영상 제공 방법 및 그의 제공 시스템 | |
JP4957589B2 (ja) | 障害物警告装置、障害物警告方法及びコンピュータプログラム | |
US20230017805A1 (en) | Parking assist apparatus, parking assist system, and parking assist method | |
JP6385991B2 (ja) | 出庫支援装置 | |
JP2016197312A (ja) | 運転支援表示装置 | |
JP5083137B2 (ja) | 運転支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20131224 |