JP2007295043A - 車両周囲監視装置 - Google Patents

車両周囲監視装置 Download PDF

Info

Publication number
JP2007295043A
JP2007295043A JP2006117258A JP2006117258A JP2007295043A JP 2007295043 A JP2007295043 A JP 2007295043A JP 2006117258 A JP2006117258 A JP 2006117258A JP 2006117258 A JP2006117258 A JP 2006117258A JP 2007295043 A JP2007295043 A JP 2007295043A
Authority
JP
Japan
Prior art keywords
obstacle
vehicle
image
overhead image
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006117258A
Other languages
English (en)
Other versions
JP4846426B2 (ja
Inventor
Shusaku Okamoto
修作 岡本
Teppei Abe
哲平 安部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2006117258A priority Critical patent/JP4846426B2/ja
Publication of JP2007295043A publication Critical patent/JP2007295043A/ja
Application granted granted Critical
Publication of JP4846426B2 publication Critical patent/JP4846426B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

【課題】自車両に対する障害物の存在位置を検出して表示することができるようにすること。
【解決手段】自車両200の周囲を撮影する車載カメラ110と、車載カメラ110で撮影した画像から自車両200を含む自車両200の周囲の俯瞰画像300を生成する画像合成部120と、車載カメラ110で撮影した画像から障害物600を検出する障害物検出部130と、俯瞰画像300を所定の表示領域内に表示するとともに障害物600の俯瞰画像300上の自車両200に対する存在位置をアイコン700で表示する表示部150と、を具備する。
【選択図】図1

Description

本発明は、車両に設置したカメラで撮像した画像から車両の周囲の俯瞰画像を生成し、生成した俯瞰画像をカーナビゲーション装置などのディスプレイに表示することにより、自車両と周囲との位置関係をドライバーに分かりやすく提示する車両周囲監視装置に関する。
この種の車両周囲監視装置として、例えば図12に示すように、車載カメラ10を車両20のリアトランク部などに後ろ向きに設置し、車載カメラ10で撮影した画像を運転席に設けたカーナビゲーション装置などのディスプレイに表示する監視システムが知られている。
この車両周囲監視装置によれば、ドライバーは、運転席のディスプレイに表示された車載カメラ10の画像から、バックミラーを見ることなく車両20の後方の様子を監視することができる。
最近では、この種の車両周囲監視装置として、単に車両20の周囲の画像を提示するだけでなく、例えば図13に示すように、ディスプレイ30に車載カメラ10の画像11に車両20のタイヤの移動軌跡21を重ねて表示することにより、車両20の進む先をドライバーに知らせることが可能な監視システムも提供されつつある。
しかしながら、これらの監視システムでは、車両20の後方の様子はわかるものの、自車両と周囲との位置関係が分かりにくいという課題があった。
従来、このような課題を解消する車両周囲監視装置として、自車両とその周囲全体との位置関係を、客観的に分かりやすくドライバーに知らせるようにしたものが知られている(例えば、特許文献1参照)。
特許文献1記載の車両周囲監視装置では、例えば、図14に示すように車載カメラで撮影したカメラ画像13を、図15に示すように自車両の周囲を仮想的な視点から見たような俯瞰画像14に合成して表示するようにしている。
この車両周囲監視装置においては、自車両の周囲の様子をあたかも上方から見下ろしたような俯瞰画像14に合成して表示するので、自車両の直近周囲の位置関係をドライバーにわかりやすく提示することができる。
特開2004−032464号公報
しかしながら、特許文献1記載の車両周囲監視装置では、車載カメラで撮影したカメラ画像13を俯瞰画像14に合成する際に、カメラ画像13の一部の画像(図14に破線で囲んだ部分の画像)のみを使用している。
このため、この車両周囲監視装置では、車載カメラで撮影したカメラ画像13をそのまま表示した場合に比べて、ドライバーが俯瞰画像14を通じて知り得る周囲の状況は当然少なくなる。
従って、この車両周囲監視装置においては、車載カメラで撮影したカメラ画像13には存在していても、俯瞰画像14の表示範囲の外に存在している例えば歩行者や自転車などの物体(以下、これを「障害物」という)は、俯瞰画像14を見ただけでは確認することができないという点が課題となる。
なお、ここでは、図12に示すように、1つの車載カメラ10で車両20の後方を撮影する場合を例にとって説明したが、例えば、図16に示すように、リアカメラ10R、フロントカメラ10F、サイドカメラ10Sなどの複数台の車載カメラで撮影したカメラ画像を使って俯瞰画像を合成した場合でも上述と同様の問題が生じる。
本発明は、かかる点に鑑みてなされたもので、自車両に対する障害物の存在位置を検出して表示することができる車両周囲監視装置を提供することを目的とする。
かかる課題を解決するため、本発明の車両周囲監視装置は、車両の周囲を撮影する撮像手段と、前記撮像手段で撮影した画像から前記車両を含む前記車両の周囲の俯瞰画像を生成する俯瞰画像生成手段と、前記撮像手段で撮影した前記画像から障害物を検出する障害物検出手段と、表示画面に画像を表示する表示手段と、を有し、前記表示手段により前記俯瞰画像生成手段で生成した前記俯瞰画像を前記表示画面の所定の表示領域内に表示し、前記障害物検出手段で検出された前記障害物が前記俯瞰画像に含まれていないとき、前記表示画面に前記障害物をアイコンで表示し、前記アイコンを前記俯瞰画像の車両位置に対して表示する構成を採る。
本発明によれば、撮像手段で撮影した画像から検出した障害物の俯瞰画像上の車両に対する現在位置をアイコンで表示するので、俯瞰画像の表示範囲の外に存在している障害物についても、俯瞰画像を見ただけでその存在を確認することができる。
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、各図において同一の構成または機能を有する構成要素及び相当部分には、同一の符号を付してその説明は繰り返さない。
図1は、本発明の一実施の形態に係る車両周囲監視装置の構成を示すブロック図である。
図1に示すように、この車両周囲監視装置100は、撮像手段としての車載カメラ110、俯瞰画像生成手段としての画像合成部120、障害物検出手段としての障害物検出部130、障害物危険度判定手段としての障害物危険度判断部140、表示手段としての表示部150、報知手段としての報知部160を備えている。
図1において、車載カメラ110は、図15に示したリアカメラ10R、フロントカメラ10F、サイドカメラ10Sなどと同様、自車両200(図5参照)の周囲を撮影する。
画像合成部120は、車載カメラ110で撮影した画像から自車両200の周囲の俯瞰画像300(図6参照)を合成する。
障害物検出部130は、図2に示すように、車載カメラ110で撮影したカメラ画像500から障害物(ここでは人物)600を検出する。なお、障害物600としては、人物、自転車、三輪車、車両などの移動体を指す。また、障害物検出部130は、自車両200および障害物600の移動速度や移動方向などから自車両200と障害物600との現在の位置関係を計算する。
障害物危険度判断部140は、障害物検出部130で検出した障害物600の危険度を判定する。本例の障害物危険度判断部140は、障害物検出部130で検出した自車両200と障害物600との相対的な位置と移動方向と移動速度とにより算出した、障害物が自車両200に衝突するまでの時間に基づいて危険度を判定する。
表示部150は、例えばカーナビゲーション装置などのようなディスプレイを備え、画像合成部120で合成した俯瞰画像をディスプレイの所定の表示領域内に表示するとともに、障害物危険度判断部140で判定した危険度に応じて、障害物600の俯瞰画像300上の自車両200に対する現在位置をアイコン700(図6参照)で表示する。ここでいうアイコンとは、俯瞰画像表示範囲外の接近物の存在を示す目的のシンボルであり、本実施の形態で示したものに限らない。アイコンは前記目的を満たすものであれば、他のデザインを使っても構わない。
俯瞰画像表示の具体的な実現方法としては、例えばカーナビゲーション装置のナビ画面と本例の俯瞰画像の表示画面であるディスプレイを共用する場合は、ナビ画面と俯瞰画像との切り替えをスイッチによって行うか、または所定速度(例えば10km/h)以下の場合に俯瞰画像を優先的に表示するなどする。もちろん所定速度以上でも俯瞰画像を表示するようにしてもよい。一方、ナビ画面と俯瞰画像の表示画面が別々の場合には、専用ディスプレイに常に俯瞰画像を表示してもよい。
報知手段としての報知部160は、障害物検出部130で障害物600を検出した場合に、障害物危険度判断部140によって判定された危険度に応じて警告音を鳴らす。
本例の車両周囲監視装置100においては、障害物検出部130で検出された障害物600が、俯瞰画像300の表示視野範囲の内側に位置しているか外側に位置しているかを判断することにより、障害物600の存在の報知方法を切り替えるようにしている。
具体的には、障害物600が俯瞰画像300の表示視野範囲の外側に位置している場合には、図6に示すように障害物600をアイコン700で表示し、障害物600が俯瞰画像300の表示視野範囲の内側に位置している場合には、図8に示すように障害物600をそのまま俯瞰して表示するようにしている。俯瞰された障害物については、その位置をより分かりやすくするため、後述するように前記障害物を強調するグラフィックなどを追加してもよい。
そして、本例の車両周囲監視装置100においては、俯瞰画像300の画面の表示視野範囲外にいる障害物600と自車両200との相対的な位置関係が接近しつつある場合に、自車両200に接近中の障害物600をアイコン700で表示して前もってドライバーに知らせるようにしている。
そのためには、障害物検出部130で検出された障害物600の存在位置が、俯瞰画像300の画面の表示視野範囲の外か内かを判断する必要がある。
図2、図3および図4は、障害物検出部130で検出された障害物600の存在位置が、俯瞰画像300の画面の表示視野範囲の外か内かを判断する際の判断方法の一例を説明するための図である。
この判断方法においては、まず、図2(b)、図3(b)、図4(b)に示すようなマスク画像800を準備する。
マスク画像800は、図2(a)、図3(a)、図4(a)に示す元のカメラ画像500から俯瞰画像300に変換する際に、元のカメラ画像500のうち俯瞰画像300に使われている部分(図に破線で示す部分で、以下、これを「マスク部801」という)と、それ以外の部分(俯瞰画像300に使われていない部分)とを区別するための画像である。
次に、この判断方法においては、カメラ画像500から障害物検出部130により障害物600を検出する。図2(c)、図3(c)、図4(c)は、カメラ画像500から障害物検出部130により障害物600を検出した検出画像を示している。
そして、この判断方法においては、障害物検出部130により検出された障害物600が、マスク画像800のマスク部801と重なる部分があるかどうかを判断する。
ここで、図2(d)に示すように、障害物検出部130により検出された障害物600が、マスク画像800のマスク部801と重なる部分が全く無い場合には、障害物600が俯瞰画像300の表示範囲外に存在していると判断する。
また、図3(d)および図4(d)に示すように、障害物検出部130により検出された障害物600が、マスク画像800のマスク部801と少しでも重なる部分がある場合には、障害物600が俯瞰画像300の表示範囲内に存在していると判断する。
なお、この判断方法はあくまで一例であり、例えば、俯瞰画像300の表示範囲を座標情報で保持しておき、障害物600の存在位置が俯瞰画像300の表示範囲に含まれるかどうかを数値的に計算する判断方法などを用いてもよい。
本例の車両周囲監視装置100においては、上述のようにして、障害物600が俯瞰画像300の表示範囲の内側に存在しているか外側に存在しているかを判断して区別し、その判断結果に応じて、障害物600の存在の報知方法を切り替えて表示するようにしている。
なお、上記内容は、説明を簡単にするために車両の後部に配設した1台の車載カメラ(リアカメラ)110を使って俯瞰画像300を合成する場合の例であるが、車両の全周囲を見渡すように1台または複数の車載カメラ110を車両に設置し、これらの車載カメラ110で撮影された複数の画像を個々に変換し合成することで、車両の全周囲を見下ろすような俯瞰画像300を表示するシステムにおいても同様に、障害物600が俯瞰画像300の表示範囲の内側に存在しているか外側に存在しているかを判断することが可能である。
次に、本例の車両周囲監視装置100において、障害物600の存在の報知方法を切り替えて表示する場合の具体例について、車両の全周囲を表示する俯瞰画像300に基づいて説明する。
図5は、自車両200の周囲の実際の状況を示しており、自車両200の左前方から障害物600としての人が近づいてきている状況を示している。
図5に示す状況では、障害物600としての人が俯瞰画像300の画像の表示範囲300a内には写っていない。
図6は、このように障害物600が俯瞰画像300の表示範囲外に存在している場合に、障害物600の存在をドライバーに表示部150で警告表示をする一例を示した図である。
図6に示すように、障害物600が俯瞰画像300の表示範囲外に存在している場合には、俯瞰画像300に含まれない障害物600を、その動きの方向(移動方向)が分かるようなアイコン700で表示する。
ここで、アイコン700は、障害物600の接近度合い、つまり危険度に応じて色分けしてもよい。この障害物600の接近度合いに応じてアイコン700を色分けする具体的な方法としては、例えば、自車両200までの到達時間が5〜4秒ではアイコン700を青色で表示し、自車両200までの到達時間が4〜3秒ではアイコン700を黄色で表示し、自車両200までの到達時間が3秒以下で俯瞰画像300の表示範囲の画面に出現するまでは赤色で表示するなどが考えられる。上述のアイコン700の切り替えの基準時間はあくまで一例であることはいうまでもない。
また、アイコン700の表示に合わせて報知部160で警告音を出してもよい。警告音の出し方としては、例えばビープ音を一定時間鳴らして一定時間止めるようにすればよい。すなわちビープ音を鳴らす設定時間としては、障害物600の自車両200までの到達時間が5〜4秒では1秒、自車両200までの到達時間が4〜3秒では0.5秒、自車両200までの到達時間が3秒以下では0.25秒とする。ビープ音を鳴らして止めるのは1回でも複数回でもよい。
このように、本例の車両周囲監視装置100は、ドライバーが俯瞰画像300を見ていないときに自車両200に接近物(障害物600)が近づいていることを検出した場合に、警告音を鳴らすことによりドライバーに俯瞰画像300を見るように促すことができる。
一方、図7は、自車両200の周囲の実際の状況を示しており、自車両200の左前方から障害物600としての人が近づいてきている状況を示している。
図7に示す状況では、障害物600としての人が俯瞰画像300の画像の表示範囲300a内に写っている。
図8は、このように障害物600が俯瞰画像300の表示範囲内に存在している場合に、障害物600の存在をドライバーに警告表示をする一例を示した図である。
このように、障害物600が俯瞰画像300の表示範囲内に存在している場合には、俯瞰画像300に含まれている障害物600の路面上での位置をグラフィックで表示する。
例えば、図8に示すように、障害物600が俯瞰画像300の表示範囲内に存在している場合には、障害物600の路面上での位置を例えば線600aで表示する。なお、俯瞰画像300の表示範囲内に存在している障害物600のアイコンとしては、危険度が低いときには丸いアイコン、高いときには四角などの多角形のアイコンなど、視覚的にわかりやすいものにしてもよい。
図9及び図10に、上述のように、障害物600が俯瞰画像300の表示範囲の内か外かを区別した結果に応じて、画面表示を切り替える仕組みを用いることにより、歩行者(障害物600)が自車両200に近づきつつある場合に、その接近度合いに応じて画面表示がかわっていく様子を示す。
図9は、自車両200に対して左側遠方から歩行者(障害物600)が、自車両200に向かって接近し、途中で自車両200の進行方向に沿って方向転換した後、再び自車両200に近づいてきている状況を示している。
図10は、本例の車両周囲監視装置100において、上述の歩行者を障害物600と認識した結果をディスプレイに表示する表示例を示している。
図9および図10において、自車両200に近づいてくる歩行者は、図1に示す車載カメラ110により撮影され、そのカメラ画像500から障害物検出部130により障害物600として検出される。
図9において、障害物600としての歩行者が位置Aに存在している時点では、検出された歩行者が自車両200に接近しているため障害物600の接近警告は表示するが、まだ自車両200に対して遠方にいる。
そこで、本例の車両周囲監視装置100においては、この時点では、図10(a)に示すように、危険度のレベルが低いことを意味する青色のアイコン700を、障害物600の存在位置に合わせて俯瞰画像300の左方に表示する。アイコン表示に合わせて、危険度のレベルが低いことを示す警告音を鳴らしてもよい。
ここで、障害物600の存在位置に合わせて俯瞰画像300に表示するとは、検出した障害物600(本例の場合は歩行者)がディスプレイに表示されている俯瞰画像300に出現する可能性の最も高い場所に表示することを示す。
このアイコン700の表示画面上での表示場所は、例えばある時間での検出位置と、それから一定時間前の検出位置とを求め、それら2つの検出位置を線で結んだ延長線上が、俯瞰画像300に交わるところとして決めるなどすればよい。
ここで、アイコン700の表示画面上での表示場所は、複数の時刻における位置を求め、それらを高次曲線で結んだ障害物移動予測軌跡を求め、それにより高精度に俯瞰画像300に出現する場所を求めるようにしてもよい。
次いで、図9において、障害物600としての歩行者が位置Bに存在している時点では、歩行者が向きを変え自車両200には接近しない方向に向かっていることが障害物検出部130により検出される。
この時点では、歩行者は自車両200に接近する可能性が無くなるので、図10(b)に示すように、図10(a)で表示したアイコン700は消去する。ただし、アイコン700が消えた瞬間をドライバーが見ていない場合もあるので、アイコン700は消去せずにそのまま残しておいても構わない。
次いで、図9において、障害物600としての歩行者が位置Cに存在している時点では、歩行者が再び向きを変え自車両200に接近する方向に向かっていることが障害物検出部130により検出される。
この時点では、検出された歩行者は自車両200にかなり接近してきているため、障害物600の接近警告表示としては、図10(c)に示すように、危険度のレベルが中程度であることを意味する黄色のアイコン700を、障害物600の存在位置に合わせて俯瞰画像300の左方に表示する。アイコン表示の切り替えに合わせて、危険度のレベルが中程度であることを示す警告音を鳴らしてもよい。
そして、図9において、障害物600としての歩行者が位置Cにおいて自車両200にさらに接近する方向に向かっていることが障害物検出部130により検出された時点では、検出された歩行者は自車両200にかなり接近して危険度のレベルが高まってくるので、図10(d)に示すように、この危険度に応じてアイコン700の色を黄色から赤色に切り替えて表示する。アイコン表示の切り替えに合わせて、危険度のレベルが高まったことを示す警告音を鳴らしてもよい。
次いで、図9において、障害物600としての歩行者が位置Dに存在して、歩行者が俯瞰画像300の表示範囲内に写るまで接近して来た場合には、表示画面で障害物600としての歩行者を直接判断できるようになる。
従って、この場合には、アイコン700を表示する必要がなくなるので、図10(e)に示すように、図10(d)で示した赤色のアイコン700を消去する。ただし、この場合、俯瞰画像300では歩行者の一部(例えば足下のみ)しか表示されない場合もあるので、図10(e)に示すように、歩行者をグラフィック(ここでは、赤い線)で強調して表示してもよい。
なお、本例の車両周囲監視装置100においては、障害物検出部130で歩行者を識別し、アイコン700を識別結果に応じた人のデザインにしているが、ここで障害物600が人か物か識別できない場合には、危険を表す意味で検出した障害物600を、例えば図11に示すように、エクスクラメーションマーク700aの表示にしてもよい。
また、本例の車両周囲監視装置100においては、障害物検出部130にて歩行者(障害物600)と自車両200との離間距離を計算し、この離間距離をアイコン700に表記するようにしている。
ここで、上述の離間距離が不明でも自車両200に対する障害物600の接近時間が分かる場合には、離間距離の表示を接近時間の表示に切り替えてもよい。
また、ここで、自車両200に対する障害物600の離間距離、接近時間のいずれか若しくは両方が分かる場合でも、離間距離や接近時間を表示せず、シンプルにエクスクラメーションマーク700aだけを表示してももちろん構わない。
このように、本例の車両周囲監視装置100は、車載カメラ110のカメラ画像500から俯瞰画像300を合成して表示部150のディスプレイに表示する場合、カメラ画像500には写っているが俯瞰画像300には表示されない領域に存在する障害物600の現在の状況を把握することができる。
従って、本例の車両周囲監視装置100においては、もし俯瞰画像300には表示されない領域で、自車両200に近づく歩行者などの障害物600が検出された場合に、俯瞰画像300上の自車両200に対する障害物600の現在の正確な存在位置や移動方向を表示部150のディスプレイに表示して、障害物600の存在を瞬時に分かりやすくドライバーに提示することができる。
本発明に係る車両周囲監視装置は、自車両に対する障害物の存在位置を検出して表示することができるので、車両に設置したカメラで撮像した画像から車両の周囲の俯瞰画像を生成し、生成した俯瞰画像をカーナビゲーション装置などのディスプレイに表示することにより、自車両と周囲との位置関係をドライバーに分かりやすく提示する車両周囲監視装置として有用である。
本発明の一実施の形態に係る車両周囲監視装置の構成を示すブロック図 (a)、(b)、(c)、(d)は、本発明の一実施の形態に係る車両周囲監視装置において障害物検出部で検出された障害物の存在位置が俯瞰画像の画面の表示視野範囲の外か内かを判断する際の判断方法の一例を説明するための図 (a)、(b)、(c)、(d)は、本発明の一実施の形態に係る車両周囲監視装置において障害物検出部で検出された障害物の存在位置が俯瞰画像の画面の表示視野範囲の外か内かを判断する際の判断方法の他の例を説明するための図 (a)、(b)、(c)、(d)は、本発明の一実施の形態に係る車両周囲監視装置において障害物検出部で検出された障害物の存在位置が俯瞰画像の画面の表示視野範囲の外か内かを判断する際の判断方法のさらに他の例を説明するための図 本発明の一実施の形態に係る車両周囲監視装置において自車両の左前方から障害物としての人が近づいてきている状況を示す概略平面図 本発明の一実施の形態に係る車両周囲監視装置において障害物が俯瞰画像の表示範囲外に存在している場合に障害物の存在をドライバーに警告表示をする一例を示した図 本発明の一実施の形態に係る車両周囲監視装置において自車両の左前方から障害物としての人が近づいてきている状況を示す概略平面図 本発明の一実施の形態に係る車両周囲監視装置において障害物が俯瞰画像の表示範囲内に存在している場合に障害物の存在をドライバーに警告表示をする一例を示した図 本発明の一実施の形態に係る車両周囲監視装置において自車両に対して左側遠方から歩行者が自車両に向かって接近し途中で自車両の進行方向に沿って方向転換した後再び自車両に近づいてきている状況を示す概略平面図 (a)、(b)、(c)、(d)、(e)は、本発明の一実施の形態に係る車両周囲監視装置において歩行者を障害物と認識した結果をディスプレイに表示する表示例を示す概略平面図 本発明の一実施の形態に係る車両周囲監視装置のディスプレイに表示されるアイコンの例を示す図 従来の車両周囲監視装置を搭載した車両の外観を示す概略斜視図 従来の車両周囲監視装置における表示画面の一例を示す概略正面図 従来の車載カメラで撮影したカメラ画像を示す図 従来の車載カメラで撮影したカメラ画像から合成した俯瞰画像を示す図 従来の車載カメラの配設位置を説明するための車両の概略平面図
符号の説明
100 車両周囲監視装置
110 車載カメラ
120 画像合成部
130 障害物検出部
140 障害物危険度判断部
150 表示部
160 報知部
200 自車両
300 俯瞰図
500 カメラ画像
600 障害物
700 アイコン
800 マスク画像
801 マスク部

Claims (6)

  1. 車両の周囲を撮影する撮像手段と、前記撮像手段で撮影した画像から前記車両を含む前記車両の周囲の俯瞰画像を生成する俯瞰画像生成手段と、前記撮像手段で撮影した前記画像から障害物を検出する障害物検出手段と、表示画面に画像を表示する表示手段と、を有し、
    前記表示手段により前記俯瞰画像生成手段で生成した前記俯瞰画像を前記表示画面の所定の表示領域内に表示し、前記障害物検出手段で検出された前記障害物が前記俯瞰画像に含まれていないとき、前記表示画面に前記障害物をアイコンで表示し、前記アイコンを前記俯瞰画像の車両位置に対して表示する車両周囲監視装置。
  2. 前記障害物検出手段で検出した障害物の危険度を判定する障害物危険度判定手段を備え、前記障害物危険度判定手段で判定した危険度に応じて前記アイコンを切り替えて表示する請求項1記載の車両周囲監視装置。
  3. 前記撮像手段を複数配設し、前記俯瞰画像生成手段は前記複数の前記撮像手段で撮影した複数の画像を合成して前記俯瞰画像を生成する合成手段からなる請求項1または請求項2記載の車両周囲監視装置。
  4. 前記障害物検出手段は、前記車両に対しての前記障害物との方向および衝突までの時間を検出し、前記衝突までの時間に基づいて前記危険度を判定する請求項1から請求項3のいずれかに記載の車両周囲監視装置。
  5. 前記障害物が前記俯瞰画像に含まれるときと、前記障害物が前記俯瞰画像に含まれていないときとは異なるアイコンに変更して前記表示画面に表示する請求項1から請求項4のいずれかに記載の車両周囲監視装置。
  6. 前記障害物検出手段で前記障害物を検出した場合に、前記障害物危険度判定手段によって判定された危険度に応じて、警告音を鳴らす報知手段を備えた請求項2から請求項5のいずれかに記載の車両周囲監視装置。
JP2006117258A 2006-04-20 2006-04-20 車両周囲監視装置 Expired - Fee Related JP4846426B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006117258A JP4846426B2 (ja) 2006-04-20 2006-04-20 車両周囲監視装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006117258A JP4846426B2 (ja) 2006-04-20 2006-04-20 車両周囲監視装置

Publications (2)

Publication Number Publication Date
JP2007295043A true JP2007295043A (ja) 2007-11-08
JP4846426B2 JP4846426B2 (ja) 2011-12-28

Family

ID=38765249

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006117258A Expired - Fee Related JP4846426B2 (ja) 2006-04-20 2006-04-20 車両周囲監視装置

Country Status (1)

Country Link
JP (1) JP4846426B2 (ja)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009206689A (ja) * 2008-02-27 2009-09-10 Nissan Motor Co Ltd 車両用表示装置および車両用表示方法
WO2012073391A1 (ja) * 2010-11-29 2012-06-07 パナソニック株式会社 運転支援表示装置
JP2013090005A (ja) * 2011-10-13 2013-05-13 Aisin Seiki Co Ltd 画像生成装置
US8446268B2 (en) 2009-04-14 2013-05-21 Hyundai Motor Japan R&D Center, Inc. System for displaying views of vehicle and its surroundings
JP2013168826A (ja) * 2012-02-16 2013-08-29 Hitachi Constr Mach Co Ltd 作業機械の周囲監視装置
WO2014069471A1 (ja) * 2012-10-31 2014-05-08 クラリオン株式会社 画像処理システム及び画像処理方法
JP2015008453A (ja) * 2013-05-29 2015-01-15 京セラ株式会社 カメラ装置および警告方法
JP2015065515A (ja) * 2013-09-24 2015-04-09 日立建機株式会社 車両周囲移動物体検知システム
JP2015139128A (ja) * 2014-01-23 2015-07-30 トヨタ自動車株式会社 車両用周辺監視装置
JP2015210649A (ja) * 2014-04-25 2015-11-24 日立建機株式会社 車体近傍障害物報知システム
JP2016018355A (ja) * 2014-07-08 2016-02-01 アルパイン株式会社 車両周囲画像生成装置および車両周囲画像生成方法
JP2016149803A (ja) * 2016-04-22 2016-08-18 日立建機株式会社 作業機械の周囲監視装置
WO2016140016A1 (ja) * 2015-03-03 2016-09-09 日立建機株式会社 車両の周囲監視装置
JP2016218795A (ja) * 2015-05-21 2016-12-22 富士通テン株式会社 画像処理装置および画像処理方法
JP2017046214A (ja) * 2015-08-27 2017-03-02 株式会社デンソー 車載表示制御装置、車載表示制御方法
WO2017130577A1 (ja) * 2016-01-25 2017-08-03 株式会社Jvcケンウッド 表示装置、表示方法、プログラム
JP2017135695A (ja) * 2016-01-25 2017-08-03 株式会社Jvcケンウッド 表示装置、表示方法、プログラム
JP2017200006A (ja) * 2016-04-26 2017-11-02 株式会社Soken 表示制御装置
WO2018143285A1 (ja) * 2017-02-02 2018-08-09 株式会社デンソー 画像表示装置
JP2021022825A (ja) * 2019-07-26 2021-02-18 アイシン精機株式会社 周辺監視装置
JP2021097283A (ja) * 2019-12-13 2021-06-24 本田技研工業株式会社 車両周囲監視装置、車両、車両周囲監視方法およびプログラム
US11258963B2 (en) 2018-03-05 2022-02-22 Denso Corporation Image creation device and image creation method
WO2024043277A1 (ja) * 2022-08-24 2024-02-29 株式会社アイシン 周辺監視装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101629577B1 (ko) * 2014-12-10 2016-06-13 현대오트론 주식회사 카메라를 이용한 모니터링 방법 및 장치

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001195699A (ja) * 2000-01-14 2001-07-19 Yazaki Corp 車両用周辺監視装置及び、車両用衝突危険判断処理プログラムを記録した記録媒体
JP2002074595A (ja) * 2000-08-29 2002-03-15 Hitachi Ltd 車両の安全運転支援システム
JP2002335524A (ja) * 1999-09-20 2002-11-22 Matsushita Electric Ind Co Ltd 運転支援装置
JP2004114879A (ja) * 2002-09-27 2004-04-15 Clarion Co Ltd 駐車補助装置および画像表示装置
JP2005262967A (ja) * 2004-03-17 2005-09-29 Denso Corp 車両の衝突予知警告装置
JP2006027556A (ja) * 2004-07-21 2006-02-02 Nissan Motor Co Ltd 車両用周辺監視装置
JP2007142545A (ja) * 2005-11-15 2007-06-07 Denso Corp 車両周辺画像処理装置及びプログラム。
JP2007288611A (ja) * 2006-04-18 2007-11-01 Alpine Electronics Inc 車載用画像表示装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002335524A (ja) * 1999-09-20 2002-11-22 Matsushita Electric Ind Co Ltd 運転支援装置
JP2001195699A (ja) * 2000-01-14 2001-07-19 Yazaki Corp 車両用周辺監視装置及び、車両用衝突危険判断処理プログラムを記録した記録媒体
JP2002074595A (ja) * 2000-08-29 2002-03-15 Hitachi Ltd 車両の安全運転支援システム
JP2004114879A (ja) * 2002-09-27 2004-04-15 Clarion Co Ltd 駐車補助装置および画像表示装置
JP2005262967A (ja) * 2004-03-17 2005-09-29 Denso Corp 車両の衝突予知警告装置
JP2006027556A (ja) * 2004-07-21 2006-02-02 Nissan Motor Co Ltd 車両用周辺監視装置
JP2007142545A (ja) * 2005-11-15 2007-06-07 Denso Corp 車両周辺画像処理装置及びプログラム。
JP2007288611A (ja) * 2006-04-18 2007-11-01 Alpine Electronics Inc 車載用画像表示装置

Cited By (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009206689A (ja) * 2008-02-27 2009-09-10 Nissan Motor Co Ltd 車両用表示装置および車両用表示方法
US8446268B2 (en) 2009-04-14 2013-05-21 Hyundai Motor Japan R&D Center, Inc. System for displaying views of vehicle and its surroundings
WO2012073391A1 (ja) * 2010-11-29 2012-06-07 パナソニック株式会社 運転支援表示装置
US8848050B2 (en) 2010-11-29 2014-09-30 Panasonic Corporation Drive assist display apparatus
JP2013090005A (ja) * 2011-10-13 2013-05-13 Aisin Seiki Co Ltd 画像生成装置
JP2013168826A (ja) * 2012-02-16 2013-08-29 Hitachi Constr Mach Co Ltd 作業機械の周囲監視装置
WO2014069471A1 (ja) * 2012-10-31 2014-05-08 クラリオン株式会社 画像処理システム及び画像処理方法
JP2014090349A (ja) * 2012-10-31 2014-05-15 Clarion Co Ltd 画像処理システム及び画像処理方法
US9485438B2 (en) 2012-10-31 2016-11-01 Clarion Co., Ltd. Image processing system with image conversion unit that composites overhead view images and image processing method
JP2015008453A (ja) * 2013-05-29 2015-01-15 京セラ株式会社 カメラ装置および警告方法
JP2015065515A (ja) * 2013-09-24 2015-04-09 日立建機株式会社 車両周囲移動物体検知システム
JP2015139128A (ja) * 2014-01-23 2015-07-30 トヨタ自動車株式会社 車両用周辺監視装置
JP2015210649A (ja) * 2014-04-25 2015-11-24 日立建機株式会社 車体近傍障害物報知システム
JP2016018355A (ja) * 2014-07-08 2016-02-01 アルパイン株式会社 車両周囲画像生成装置および車両周囲画像生成方法
WO2016140016A1 (ja) * 2015-03-03 2016-09-09 日立建機株式会社 車両の周囲監視装置
CN106797452A (zh) * 2015-03-03 2017-05-31 日立建机株式会社 车辆的周围监视装置
US10017112B2 (en) 2015-03-03 2018-07-10 Hitachi Construction Machinery Co., Ltd. Surroundings monitoring device of vehicle
JPWO2016140016A1 (ja) * 2015-03-03 2018-02-15 日立建機株式会社 車両の周囲監視装置
US10579884B2 (en) 2015-05-21 2020-03-03 Fujitsu Ten Limited Image processing device and image processing method
JP2016218795A (ja) * 2015-05-21 2016-12-22 富士通テン株式会社 画像処理装置および画像処理方法
WO2017034026A1 (ja) * 2015-08-27 2017-03-02 株式会社デンソー 表示制御装置および表示制御方法
JP2017046214A (ja) * 2015-08-27 2017-03-02 株式会社デンソー 車載表示制御装置、車載表示制御方法
WO2017130577A1 (ja) * 2016-01-25 2017-08-03 株式会社Jvcケンウッド 表示装置、表示方法、プログラム
JP2017135695A (ja) * 2016-01-25 2017-08-03 株式会社Jvcケンウッド 表示装置、表示方法、プログラム
CN107924265B (zh) * 2016-01-25 2020-12-15 Jvc 建伍株式会社 显示装置、显示方法以及存储介质
CN107924265A (zh) * 2016-01-25 2018-04-17 Jvc 建伍株式会社 显示装置、显示方法、程序
JP2016149803A (ja) * 2016-04-22 2016-08-18 日立建機株式会社 作業機械の周囲監視装置
CN109076197A (zh) * 2016-04-26 2018-12-21 株式会社电装 显示控制装置
WO2017188247A1 (ja) * 2016-04-26 2017-11-02 株式会社デンソー 表示制御装置
CN109076197B (zh) * 2016-04-26 2020-09-04 株式会社电装 显示控制装置
JP2017200006A (ja) * 2016-04-26 2017-11-02 株式会社Soken 表示制御装置
US11064151B2 (en) 2016-04-26 2021-07-13 Denso Corporation Display control apparatus
US11750768B2 (en) 2016-04-26 2023-09-05 Denso Corporation Display control apparatus
WO2018143285A1 (ja) * 2017-02-02 2018-08-09 株式会社デンソー 画像表示装置
JP2018125749A (ja) * 2017-02-02 2018-08-09 株式会社デンソー 画像表示装置
US11258963B2 (en) 2018-03-05 2022-02-22 Denso Corporation Image creation device and image creation method
JP7354649B2 (ja) 2019-07-26 2023-10-03 株式会社アイシン 周辺監視装置
JP2021022825A (ja) * 2019-07-26 2021-02-18 アイシン精機株式会社 周辺監視装置
US11787335B2 (en) 2019-07-26 2023-10-17 Aisin Corporation Periphery monitoring device
JP2021097283A (ja) * 2019-12-13 2021-06-24 本田技研工業株式会社 車両周囲監視装置、車両、車両周囲監視方法およびプログラム
JP7065068B2 (ja) 2019-12-13 2022-05-11 本田技研工業株式会社 車両周囲監視装置、車両、車両周囲監視方法およびプログラム
WO2024043277A1 (ja) * 2022-08-24 2024-02-29 株式会社アイシン 周辺監視装置

Also Published As

Publication number Publication date
JP4846426B2 (ja) 2011-12-28

Similar Documents

Publication Publication Date Title
JP4846426B2 (ja) 車両周囲監視装置
JP5454934B2 (ja) 運転支援装置
JP4687160B2 (ja) 周辺監視装置
JP4760831B2 (ja) 車両周囲監視装置及び車両周囲監視方法
JP4883977B2 (ja) 車両用画像表示装置
JP5099451B2 (ja) 車両周辺確認装置
JP4807263B2 (ja) 車両用表示装置
JP4745403B2 (ja) 情報処理装置及びその制御方法等
WO2012043184A1 (ja) 駐車支援装置
JP4687411B2 (ja) 車両周辺画像処理装置及びプログラム
JPWO2018061294A1 (ja) 周辺監視装置
JP2010183170A (ja) 車両用表示装置
JP2012071635A5 (ja)
JP5708669B2 (ja) 車両用表示装置
JP2007074326A (ja) 運転支援装置
JP2006227811A (ja) 運転支援装置
JP2007221200A (ja) 車両周辺監視装置
JP2007028363A (ja) トップビュー画像生成装置及びトップビュー画像表示方法
JP2007124097A (ja) 車両周辺視認装置
JP4936060B2 (ja) 車両用走行支援装置
JP2010264945A (ja) 駐車支援装置、駐車支援方法及び駐車支援プログラム
JP7121120B2 (ja) 車両制御装置
JP2008059178A (ja) 運転支援装置およびプログラム
JP2013161440A (ja) 車両周辺監視装置
JP6363393B2 (ja) 車両周辺監視装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090417

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110824

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110913

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111012

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141021

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4846426

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees