JP2008056080A - 車両周辺画像表示装置及び表示方法 - Google Patents

車両周辺画像表示装置及び表示方法 Download PDF

Info

Publication number
JP2008056080A
JP2008056080A JP2006234963A JP2006234963A JP2008056080A JP 2008056080 A JP2008056080 A JP 2008056080A JP 2006234963 A JP2006234963 A JP 2006234963A JP 2006234963 A JP2006234963 A JP 2006234963A JP 2008056080 A JP2008056080 A JP 2008056080A
Authority
JP
Japan
Prior art keywords
vehicle
image
scale
displayed
peripheral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006234963A
Other languages
English (en)
Other versions
JP5159070B2 (ja
Inventor
Koichi Abe
光一 阿部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2006234963A priority Critical patent/JP5159070B2/ja
Priority to US11/845,520 priority patent/US8553081B2/en
Publication of JP2008056080A publication Critical patent/JP2008056080A/ja
Application granted granted Critical
Publication of JP5159070B2 publication Critical patent/JP5159070B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Image Analysis (AREA)

Abstract

【目的】車両近傍の周辺画像を見やすくでき、しかも、表示範囲を広げることができるようにする「車両周辺画像表示装置及び表示方法」を提供することである。
【構成】車両周辺画像をカメラで取り込んで車両画像と共に表示する際、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示し、設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示する。また、車両からの距離が大きくなるにつれて縮尺率を大きくして車両周辺画像を表示する。
【選択図】図1

Description

本発明は車両周辺画像表示装置及び表示方法に係わり、特に、車両周辺画像をカメラで取り込んで車両画像と共に表示する車両周辺画像表示装置及び表示方法関する。
車両に取り付けられたカメラで車両後方や車両周辺の映像を撮影して車載のモニターに表示し、これにより車庫入れや駐車等に際して運転手を支援するシステムが研究され、実用化されている。かかる支援システムとしてトップビューシステムが知られている(特許文献1参照)。このトップビューシステムは、図10(A),(B)に示すように、車両周囲を撮影する複数のカメラ6a〜6eを車両1に装着し、画像合成処理部7が各カメラ6a〜6eから取り込んだ画像を用いて、図10(C)に示す車両上方所定の位置(仮想視点)8から所定の方向を眺めた風景の合成画像を作成してモニター9に表示し、これにより駐車、車庫入れなどを支援する。
ところで、現在のトップビュー表示では距離感を掴みやすくするために表示スケールを画面全体で一定にしている(等距離表示)。すなわち、車両画像の縮尺と同一縮尺で車両周辺画像を表示している(図11(A)参照)。しかし、かかる表示方法では、車両画像1aの縮尺率が大きいと車両周辺の表示範囲が狭くなり、車両周辺の情況を把握しにくくなる。そこで、図11(B)に示すように1画面に映す周辺範囲を広げると画像全体が小さくなってしまい見づらくなる。結局、現状では、図11(A)に示すように車両周囲2m程度までを表示できるような縮尺で車両および周辺画像を表示している。しかし、かかる表示方法では、画面に映っている物体との距離感は掴みやすいが、画面外の物体を認識できない問題がある。
このため、図12に示すようにトップビュー表示TVEWと共に子画面表示例えばバックビュー表示BVEWを同時に行なうものがある。しかし、スクリーンを2つに分割して表示するものであるため、画像を拡大して表示する場合と同様に車両近傍の周辺画像が見づらくなる。
また、単純に表示範囲を広げると等距離表示であるため、遠くの画像は少ない画像を引き伸ばして表示することになり車両近傍に比べて、ボケが目立つ問題が生じる。
特許3300334号
以上から本発明の目的は、車両近傍の周辺画像を見やすくでき、しかも、表示範囲を広げることができるようにすることである。
本発明の別の目的は表示範囲を広げてもボケが生じないようにすることである。
本発明の第1の態様は車両周辺画像をカメラで取り込んで車両画像と共に表示する車両周辺画像表示方法であり、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示するステップ、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するステップを有している。この第1の態様において、車両からの距離が大きくなるにつれて縮尺率を大きくする。また、第1の態様において、車両状態に連動して、例えばギアシフト、車速、ナビゲーション指示に基づいて縮尺可変で周辺画像を表示する。
本発明の第2の態様は車両周辺画像をカメラで取り込んで車両画像と共に表示する車両周辺画像表示方法であり、少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれを魚眼カメラで撮影してフレームメモリに記憶するステップ、画面を構成する画素毎に、画素と所定カメラのフレームメモリにおけるアドレスとの対応を保存するテーブルを設けるステップ、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示するように、かつ、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するように該テーブルに前記対応関係を保存するステップ、該テーブルの対応関係を用いて前記各フレームメモリにおける画素データを画面に対応するフレームメモリにマッピングして周辺画像を合成するステップ、該フレームメモリより周辺画像を読み出してモニターに表示するステップを有している。
第2の態様において、車両からの距離が大きくなるにつれて縮尺率が大きい縮尺で周辺画像を表示するように前記テーブルに前記対応関係を保存する。また、第2の態様において、車両画像を予め保存しておき、該車両画像を前記周辺画像に重ねて表示する。更に、第2の態様において、車両状態に連動して、例えばギアシフト、車速、ナビゲーション指示に基づいて縮尺可変で周辺画像を表示する。また、第2の態様において、車両状態に連動して車両画像の縮尺と同一縮尺で、あるいは、前記縮尺可変で周辺画像を表示する。
本発明の第3の態様は、車両周辺画像を車両画像と共にモニターに表示する車両周辺画像表示装置であり、少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれ撮影するカメラ、各カメラで撮影した周辺画像を記憶するカメラ対応のフレームメモリ、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示すると共に、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するよう制御する制御部を備えている。
第3の態様において、前記制御部は、車両からの距離が大きくなるにつれて縮尺率が大きくなる縮尺で周辺画像を表示する。
本発明の第4の態様は、車両周辺画像を車両画像と共にモニターに表示する車両周辺画像表示装置であり、少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれ撮影する魚眼カメラ、各魚眼カメラで撮影した周辺画像を記憶するカメラ対応のフレームメモリ、画面を構成する画素毎に、画素と所定カメラのフレームメモリにおけるアドレスとの対応を保存するテーブル、該テーブルの対応関係を用いて前記各フレームメモリにおける画素データを画面に対応するフレームメモリにマッピングするマッピング部を備え、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示するように、かつ、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するように前記テーブルに前記対応関係を保存し、前記画面対応のフレームメモリより周辺画像を読み出してモニターに表示する。
第4の態様の車両周辺画像表示装置は、車両画像を予め保存する車両画像保存部、該車両画像を前記周辺画像に重ねて合成してモニターに表示する合成部を備えている。
また、第4の態様の車両周辺画像表示装置は、車速が設定速度以下になったとき、前記縮尺可変で周辺画像をモニターに表示する。
また、第4の態様の車両周辺画像表示装置は、ギアがバック位置にシフトしたとき前記縮尺可変で周辺画像を表示する。
また、第4の態様の車両周辺画像表示装置は、ナビゲーション装置からの指示に従って前記縮尺可変で周辺画像を表示する。
また、第4の態様の車両周辺画像表示装置は、車両画像の縮尺と同一縮尺の周辺画像を表示するようにした対応関係を保存する第2のテーブルと、車両状態に連動して、車両画像の縮尺と同一縮尺の周辺画像と縮尺可変の周辺画像のうちいずれを表示するか決定する表示周辺画像決定部を備え、前記マッピング部は決定された周辺画像に応じたテーブルを用いてマッピング処理を行なう。
本発明によれば、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示し、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するようにしたから、車両近傍の周辺画像を見やすくでき、しかも、表示範囲を広げることができる。また、表示範囲を広げてもボケを防止できる。
また、本発明によれば、車両状態に連動して、たとえば、車速が設定速度以下になったとき、あるいは、ギアがバック位置にシフトしたとき、あるいは、ナビゲーション装置から指示があったとき、縮尺可変で周辺画像を表示するようにしたから、適時に周辺画像を表示して運転者の運転支援をすることができる。
また、車両状態に連動して車両画像の縮尺と同一の縮尺で、あるいは、縮尺可変で周辺画像を表示するようにしたから、車両状態に適した態様でトップビュー表示ができる。
(A)本発明の原理
図1は本発明の原理説明図であり、図1(A)は車両周辺画像SRLを車両画像CIMの縮尺と同一の縮尺1/Sで表示した表示例、図1(B)は車両から設定距離範囲内の周辺画像を車両画像CIMの縮尺と同一縮尺1/Sで表示し、前記設定距離より外側の周辺画像を車両画像の縮尺1/Sより縮尺率が大きい縮尺で表示する表示例である。
すなわち、図1(C)の枠Aより内側の周辺画像は車両画像CIMと同一縮尺1/Sで表示し、枠A〜Bでは縮尺1/Sより大きい縮尺率例えば(8/10)×1/Sで表示し、枠B〜Cではさらに大きい縮尺率、例えば(6/10)×1/Sで表示し、枠Cの外側では最大の縮尺率、例えば(4/10)×1/Sで表示する。この結果、図1(B)に示すように縮尺可変で周辺画像を表示すれば、図1(A)の縮尺一定の周囲画像に比べてより広範囲の周辺画像を表示できることが分る。
図2は車両周辺画像取得方法の説明図であり、車両11の前部、左右側部及び後部にそれぞれカメラ12A,12B,12C,12Dを取り付け、車両前方の風景、車両左側の風景、車両右側の風景、車両後方の風景を撮影する。各カメラ12A〜12Dはそれぞれ魚眼レンズにより前方1850の範囲にわたって風景を撮影することができ、カメラ12AはラインFFより前方の風景を撮影し、カメラ12BはラインLLより左側の車両左側風景を撮影し、カメラ12CはラインBBより後方の車両後方風景を撮影し、カメラ12DはラインRRより右側の車両右側風景を撮影する。
図2(B)に示すようにカメラ12Bで車両左側の矩形の格子模様を撮影すると図2(C)に示すように魚眼で見た図形(魚眼図形という)になる。矩形図形13と魚眼図形14において同一番号を付した領域は対応しており、矩形図形13における領域1〜6は魚眼図形14では領域1〜6になる。したがって、矩形図形13の領域1〜6の画像を記憶すべきフレームメモリ位置に、該領域に対応する魚眼図形領域1〜6の画像を記憶して読み出せば、魚眼カメラ12Bで撮影した画像を矩形図形に変換してモニターに表示することが可能になる。
図3は魚眼図形14の画像を構成する画素データをフレームメモリ15にマッピングする説明図であり、フレームメモリ15は幅2.5mの矩形図形を記憶する記憶領域を備えているものとする。魚眼図形14の画素位置と矩形図形13の画素位置の対応関係(図2参照)に従って、2.5m幅の魚眼図形14の各画素データをフレームメモリ13にマッピングする。そして、フレームメモリ15から画像を読み出して表示すれば矩形図形の格子模様を表示できる。
以上は、魚眼図形14の画素データを間引くことなくフレームメモリ15にマッピングした場合であるが、車両ボディーからの距離が設定距離より外側の魚眼図形のマッピング比率を可変にすることにより、すなわち、画素データを間引くことにより広範囲の車両周辺画像をフレームメモリ15に保存できるようになる。
図4は車両ボディーから離れる程、魚眼図形の間引き率(マッピング比率)を可変にした場合の説明図であり、車両ボディーから4m幅の魚眼図形14を2.5m幅の矩形図形を記憶するフレームメモリ15にマッピンする場合である。なお、マッピング比率は魚眼図形の画素データ数と実際にフレームメモにマッピングした画素数の比である。
マッピング方法は、例えば、
(1)車両ボディーから0.5mの範囲Aの魚眼図形は幅方向に間引くことなく全画素データをマッピング比率1:1でフレームメモリ15のメモリ領域Aにマッピングし、
(2)車両ボディーから0.5m〜1.5mの範囲Bの魚眼図形は幅方向に2割の画素データを間引いてマッピング比率10:8でフレームメモリ15のメモリ領域Bにマッピングし、
(3)車両ボディーから1.5m〜2.5mの範囲Cの魚眼図形は幅方向に4割の画素データを間引いてマッピング比率10:6でフレームメモリ15のメモリ領域Cにマッピングし、
(4)車両ボディーから2.5m〜4.0mの範囲Dの魚眼図形は幅方向に6割の画素データを間引いてマッピング比率10:4でフレームメモリ15のメモリ領域Dにマッピングする。
以上のようにマッピング比率を変えることにより、2.5m幅の矩形図形を記憶する容量を有するフレームメモリ15に、4m幅の魚眼図形14を記憶することができる。なお、フレームメモリ15のメモリ領域Aは0.5m幅の矩形図形を記憶する領域、メモリ領域Bは0.8m幅の矩形図形を記憶する領域、メモリ領域C、Dはそれぞれ0.6m幅の矩形図形を記憶する領域である。
図4のマッピング比率を可変にしたマッピング法は、縮尺可変で表示されるように魚眼図形(周辺画像)をフレームメモリにマッピングしたことと同等である。すなわち、図4のマッピング法は、車両ボディーから0.5mの範囲の魚眼図形を車両画像の縮尺1/Sと同一縮尺となるようにマッピングし、0.5mより外側の周辺画像をそれぞれ車両画像の縮尺1/Sより縮尺率が大きい縮尺(8/10)×1/S、(6/10)×1/S、(4/10)×1/Sで表示されるようにマッピングしたのと同等である。
以上では、魚眼カメラ12Bで撮影した魚眼図形14をフレームメモリ15にマッピング比率可変で、すなわち、縮尺率可変でマッピングする例を説明したが、他の魚眼カメラ12A,12C,12Dで撮影した魚眼図形をフレームメモリにマッピングする場合も同様である。
図5は各魚眼カメラ12A〜12Dで撮影した魚眼図形14A〜14Dを画面対応のフレームメモリ15にマッピングする場合の説明図である。魚眼図形14A〜14Dは画面フレームメモリ15の対応する領域15A〜15Dにそれぞれマッピングされ、また、予め撮影されて保存されている車両画像16はフレームメモリ15の中央部にマッピングされ、これによりフレームメモリ15に1画面の画像が生成される。なお、魚眼図形14A,14Cは垂直方向において画素が間引かれ、魚眼図形14B、14Dは水平方向に画素が間引かれてフレームメモリ15にマッピングされる。
実際には、後述するようにマッピングテーブルを設け、該マッピングテーブルに予め車両から設定距離、たとえば0.5m以内の周辺画像を車両画像の縮尺と同一縮尺で表示し、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するようにマッピングデータが記憶されており、該マッピングデータに基づいて各魚眼図形はフレームメモリにマッピングされる。
(B)第1実施例
図6は第1実施例の車両周辺画像表示装置の構成図である。
車両11の前部、左右側部及び後部にカメラ12A,12B,12C,12Dを取り付け(図2参照)、車両前方の風景、車両左側の風景、車両右側の風景、車両後方の風景をそれぞれ撮影し、カメラ対応のフレームメモリ21A〜21Dに記憶する。各カメラ12A〜12Dはそれぞれ魚眼レンズにより前方1850の範囲にわたって風景を撮影することができる。画像読出し部22A〜22Dはそれぞれ指示されたフレームメモリのアドレスより画像データを読み出して出力する。
マッピングメモリ23は、フレームメモリ21A〜21Dに記憶されている魚眼図形14A〜14D(図5参照)を画面対応のフレームメモリ15にマッピングするためのテーブルMTBを保存する。マッピングテーブルMTBは図4で説明したようにマッピング比率可変で魚眼図形の画素データがフレームメモリ15にマッピングされるように作成されている。
図7はマッピングテーブルMTBの説明図である。
マッピングテーブルMTBは、画面対応フレームメモリ15のN×Mの各記憶位置にマッピングする魚眼図形の画素データが記憶されているカメラ対応フレームメモリのアドレスを特定する。たとえば、画面対応フレームメモリ15の記憶位置P1にカメラ対応フレームメモリ21AのアドレスA(x0,y0)に保存されている魚眼図形をマッピングするものとすれば、マッピングテーブルMTBは記憶位置P1とアドレスA(x0,y0)の対応を記憶する。同様に、フレームメモリ15の画素位置P2〜P4にカメラ対応フレームメモリ21B〜21DのアドレスB(x1,y1)、C(x2,y2)、D(x3,y3)に保存されている魚眼図形をそれぞれマッピングするものとすれば、マッピングテーブルMTBは記憶位置P2〜P4とアドレスB(x0,y0)、C(x0,y0)、D(x0,y0)の対応を記憶する。
マッピングテーブルMTBは車両からの距離範囲毎のマッピング比率を考慮して自動的に作成することが可能であるが、合成画像を見ながら思考錯誤的に作成することができる。
マッピング部24はマッピングテーブルMTBをラスタース方向にスキャンし、順番に画素毎に、カメラ対応フレームメモリとそのアドレスを読み出し、該フレームメモリの該アドレスから画像データを読み出して画面対応フレームメモリ15に書き込む。全画素について上記の書き込み処理が完了すれば、画面対応フレームメモリ15に周辺画像データがマッピングされたことになる。すなわち、車両から設定距離以内の周辺画像を車両画像の縮尺と同一縮尺で表示し、かつ、設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するための周辺画像データが画面対応フレームメモリ15に書き込まれる。
車両画像保持部25は予め車両画像を保存しているから、画像合成部26は該車両画像と画面対応のフレームメモリ15の周辺画像を合成してモニター27に表示する。
以上、第1実施例によれば、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示し、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示できる。この結果、車両近傍の周辺画像を見やすくでき、しかも、表示範囲を広げることができる。また、表示範囲を広げてもボケを防止することができる。
図8は車両周辺画像を車両状態に連動して表示制御する場合の第1実施例の変形例であり、図6の構成と同一部分には同一符号を付している。異なる点は周辺画像表示制御部31を設けている点である。周辺画像表示制御部31は、ギアシフト位置検出部32、車速検出部33、ナビゲーション装置34にそれぞれ接続され、ギアシフト位置、車速、ナビゲーション指示信号を受信できるようになっている。
(1)ギアシフト位置がバック位置になったとき(車庫入れ、駐車、その他)、あるいは、(2)車速が設定速度以下の低速になったとき(停車/駐車時、混雑走行時、右左折時など)、あるいは、(3)ナビゲーション装置からの指示があったとき(交差点進入時、駐車場進入時など)、周辺画像表示制御部31はマッピング部24及び画像合成部26を制御してモニター27に車両周辺画像を表示する。ナビゲーション装置34は、車両位置に基づいて車両が交差点進入したこと、あるいは駐車場に進入したこと、その他周辺画像を表示した方が安全な場所に進入したことを検知して、周辺画像表示制御部31に周辺画像表示を指示する。
(C)第2実施例
第1実施例は1種類の縮尺可変の車両周辺画像を表示する場合であるが、2種類以上の車両周辺画像を表示できるようにし、車両状態に応じて表示する周辺画像を切り替えるようにすれば便利な場合がある。たとえば、車庫入れや駐車場での駐車時において、最初は広範囲の周辺画像を表示し、車両テール部が周辺障害物(他車、建造物、植木など)に接近したとき距離感を掴みやすくするために従来と同様の縮尺固定の車両周辺画像を表示する。
図9は第2実施例の車両周辺画像表示装置の構成図であり、図6の構成と同一部分には同一符号を付している。異なる点は、
(1)マッピングメモリ23に縮尺可変の広範囲の車両周辺画像(第1車両周辺画像)を表示するためのマッピングテーブルMTBに加えて、車両画像と同一縮尺で車両周辺画像(第2車両周辺画像)を表示するためのマッピングテーブルMTB′を保存する点、
(2)車両状態に基づいていずれの車両周辺画像を表示するか決定する車両周辺画像決定部41を設けている点、
(3)決定された車両周辺画像に応じたマッピングテーブル情報をマッピング部24に入力するマッピングテーブル選択部42を設けている点、
(4)車両状態を検出する車両状態検出部43を設けている点である。
車両状態検出部43はギアシフト位置情報、周辺障害物接近情報を車両周辺画像決定部41に入力する。車両周辺画像決定部41はバック時、車両テール部が周辺障害物より設定距離以上離れていれば第1車両周辺画像を表示するよう決定し、車両テール部が周辺障害物より設定距離以内に接近すれば第2車両周辺画像を表示するよう決定する。マッピングテーブル選択部42は決定された車両周辺画像に応じたマッピングテーブル情報をマッピング部24に入力する、この結果、バック時に車両テール部が周辺障害物より設定距離以上離れていれば、モニター27に第1車両周辺画像が表示されるから、運転者は広範囲の周辺情況を把握して運転ができる。また、車両テール部が周辺障害物に接近すれば、モニター27に第1車両周辺画像が表示されるから、運転者は障害物までの距離を正しく把握してバック運転ができる。
以上ではバック時に表示する周辺画像を切り替えた場合であるが、かかる場合に限らず車両状態に基づいて周辺画像を切り替えて表示する情況があり、そのような情況において第2実施例は効果的である。
本発明の原理説明図である。 車両周辺画像取得方法の説明図である。 魚眼図形の画像を構成する画素データをフレームメモリにマッピングする説明図である。 車両ボディーから離れる程、魚眼図形の間引き率(マッピング比率)を可変にした場合の説明図である。 各魚眼カメラで撮影した魚眼図形を画面対応のフレームメモリにマッピングする場合の説明図である。 第1実施例の車両周辺画像表示装置の構成図である。 マッピングテーブルMTBの説明図である。 車両周辺画像を車両状態に連動して表示制御する場合の第1実施例の変形例である。 第2実施例の車両周辺画像表示装置の構成図である。 従来のトップビューシステムの説明図である。 車両画像の縮尺と同一縮尺で車両周辺画像を表示する従来の表示例である。 トップビュー表示と共にバックビュー表示を同時に行なう表示例である。
符号の説明
12A,12B,12C,12D カメラ
15 画面対応フレームメモリ
21A〜21D カメラ対応フレームメモリ
22A〜22D 画像読出し部
23 マッピングメモリ
MTB マッピングテーブル
24 マッピング部
25 車両画像保持部
26 画像合成部
27 モニター

Claims (19)

  1. 車両周辺画像をカメラで取り込んで車両画像と共に表示する車両周辺画像表示方法において、
    車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示し、
    前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示する、
    ことを特徴とする車両周辺画像表示方法。
  2. 車両からの距離が大きくなるにつれて縮尺率を大きくすることを特徴とする請求項1記載の車両周辺画像表示方法。
  3. 車両周辺画像をカメラで取り込んで車両画像と共に表示する車両周辺画像表示方法において、
    少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれを魚眼カメラで撮影してフレームメモリに記憶し、
    画面を構成する画素毎に、画素と所定カメラのフレームメモリにおけるアドレスとの対応を保存するテーブルを設け、
    車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示するように、かつ、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するように該テーブルに前記対応関係を保存し、
    該テーブルの対応関係を用いて前記各フレームメモリにおける画素データを画面に対応するフレームメモリにマッピングして周辺画像を合成し、
    該フレームメモリより周辺画像を読み出してモニターに表示する、
    ことを特徴とする車両周辺画像表示方法。
  4. 車両からの距離が大きくなるにつれて縮尺率が大きい縮尺で周辺画像を表示するように前記テーブルに前記対応関係を保存することを特徴とする請求項4記載の車両周辺画像表示方法。
  5. 車両画像を予め保存しておき、該車両画像を前記周辺画像に重ねて表示することを特徴とする請求項3または4記載の車両周辺画像表示方法。
  6. 車両状態に連動して、前記縮尺可変で周辺画像を表示する、
    ことを特徴とする請求項1乃至4記載の車両周辺画像表示方法。
  7. 車速が設定速度以下になったとき、前記縮尺可変で周辺画像を表示することを特徴とする請求項6記載の車両周辺画像表示方法。
  8. ギアがバック位置にシフトしたとき、前記縮尺可変で周辺画像を表示することを特徴とする請求項6記載の車両周辺画像表示方法。
  9. ナビゲーション装置からの指示に従って前記縮尺可変で周辺画像を表示することを特徴とする請求項6記載の車両周辺画像表示方法。
  10. 車両状態に連動して車両画像の縮尺と同一縮尺で、あるいは、前記縮尺可変で周辺画像を表示することを特徴とする請求項1乃至4記載の車両周辺画像表示方法。
  11. 車両周辺画像を車両画像と共にモニターに表示する車両周辺画像表示装置において、
    少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれ撮影するカメラ、
    各カメラで撮影した周辺画像を記憶するカメラ対応のフレームメモリ、
    車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示すると共に、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するよう制御する制御部、
    を備えたことを特徴とする車両周辺画像表示装置。
  12. 前記制御部は、車両からの距離が大きくなるにつれて縮尺率が大きくなる縮尺で周辺画像を表示することを特徴とする請求項11記載の車両周辺画像表示装置。
  13. 車両周辺画像を車両画像と共にモニターに表示する車両周辺画像表示装置において、
    少なくとも車両前方の風景、車両後方の風景、車両右側の風景、車両左側の風景のそれぞれ撮影する魚眼カメラ、
    各魚眼カメラで撮影した周辺画像を記憶するカメラ対応のフレームメモリ、
    画面を構成する画素毎に、画素と所定カメラのフレームメモリにおけるアドレスとの対応を保存するテーブル、
    該テーブルの対応関係を用いて前記各フレームメモリにおける画素データを画面に対応するフレームメモリにマッピングするマッピング部、
    を備え、車両から設定距離範囲内の周辺画像を車両画像の縮尺と同一縮尺で表示するように、かつ、前記設定距離より外側の周辺画像を車両画像の縮尺より縮尺率が大きい縮尺で表示するように前記テーブルに前記対応関係を保存し、前記画面対応のフレームメモリより周辺画像を読み出してモニターに表示する、
    ことを特徴とする車両周辺画像表示装置。
  14. 車両からの距離が大きくなるにつれて縮尺率が大きい縮尺で周辺画像を表示するように前記テーブルに前記対応関係を保存する、
    ことを特徴とする請求項13記載の車両周辺画像表示装置。
  15. 車両画像を予め保存する車両画像保存部、
    該車両画像を前記周辺画像に重ねて合成してモニターに表示する合成部、
    を備えたことを特徴とする請求項13または14記載の車両周辺画像表示装置。
  16. 車速が設定速度以下になったとき、前記縮尺可変で周辺画像をモニターに表示することを特徴とする請求項13または14記載の車両周辺画像表示装置。
  17. ギアがバック位置にシフトしたとき、前記縮尺可変で周辺画像を表示することを特徴とする請求項13または14記載の車両周辺画像表示装置。
  18. ナビゲーション装置からの指示に従って前記縮尺可変で周辺画像を表示することを特徴とする請求項13または14記載の車両周辺画像表示装置。
  19. 車両画像の縮尺と同一縮尺の周辺画像を表示するようにした対応関係を保存する第2のテーブルと、
    車両状態に連動して、車両画像の縮尺と同一縮尺の周辺画像と縮尺可変の周辺画像のうちいずれを表示するか決定する表示周辺画像決定部、
    を備え、前記マッピング部は前記決定された周辺画像に応じたテーブルを用いて前記マッピングを行なうことを特徴とする請求項13記載の車両周辺画像表示装置。
JP2006234963A 2006-08-31 2006-08-31 車両周辺画像表示装置及び表示方法 Active JP5159070B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006234963A JP5159070B2 (ja) 2006-08-31 2006-08-31 車両周辺画像表示装置及び表示方法
US11/845,520 US8553081B2 (en) 2006-08-31 2007-08-27 Apparatus and method for displaying an image of vehicle surroundings

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006234963A JP5159070B2 (ja) 2006-08-31 2006-08-31 車両周辺画像表示装置及び表示方法

Publications (2)

Publication Number Publication Date
JP2008056080A true JP2008056080A (ja) 2008-03-13
JP5159070B2 JP5159070B2 (ja) 2013-03-06

Family

ID=39150905

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006234963A Active JP5159070B2 (ja) 2006-08-31 2006-08-31 車両周辺画像表示装置及び表示方法

Country Status (2)

Country Link
US (1) US8553081B2 (ja)
JP (1) JP5159070B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011001794A1 (ja) * 2009-07-02 2011-01-06 富士通テン株式会社 画像生成装置及び画像表示システム
JP2011250363A (ja) * 2010-05-31 2011-12-08 Mitsubishi Electric Corp 映像監視装置
KR20150129542A (ko) * 2014-05-12 2015-11-20 현대모비스 주식회사 어라운드 뷰 시스템의 동작방법

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009225322A (ja) * 2008-03-18 2009-10-01 Hyundai Motor Co Ltd 車両用情報表示システム
JP4840452B2 (ja) * 2009-01-22 2011-12-21 株式会社デンソー 車両周辺表示装置
US20110001819A1 (en) * 2009-07-02 2011-01-06 Sanyo Electric Co., Ltd. Image Processing Apparatus
US20120287279A1 (en) * 2009-10-02 2012-11-15 Mitsubishi Electric Corporation Parking support apparatus
WO2012172923A1 (ja) * 2011-06-16 2012-12-20 アイシン精機株式会社 車両周辺監視装置
JP5798392B2 (ja) * 2011-06-27 2015-10-21 クラリオン株式会社 駐車支援装置
DE102011080718A1 (de) * 2011-08-10 2013-02-14 Robert Bosch Gmbh Manipulation repetitiver Strukturen in anzeigenden Videosystemen
JP5477394B2 (ja) * 2012-01-10 2014-04-23 株式会社デンソー 車両周辺監視装置
JP5459324B2 (ja) * 2012-01-17 2014-04-02 株式会社デンソー 車両周辺監視装置
US9538144B2 (en) * 2012-05-02 2017-01-03 GM Global Technology Operations LLC Full speed lane sensing using multiple cameras
KR101470230B1 (ko) * 2013-10-30 2014-12-08 현대자동차주식회사 주차 영역 추적 장치 및 그 방법
DE102014110527A1 (de) * 2014-07-25 2016-01-28 Connaught Electronics Ltd. Verfahren zum Bestimmen von charakteristischen Bildpunkten für ein Kamerasystem eines Kraftfahrzeugs, Kamerasystem, Fahrassistenzsystem und Kraftfahrzeug
JP6623729B2 (ja) * 2015-12-04 2019-12-25 株式会社ソシオネクスト 測距システム、移動体及び部品
CN108629732B (zh) * 2017-03-15 2021-05-14 比亚迪股份有限公司 车辆环视全景图像生成方法、装置和车辆
US11023742B2 (en) 2018-09-07 2021-06-01 Tusimple, Inc. Rear-facing perception system for vehicles

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064175A1 (fr) * 1999-04-16 2000-10-26 Matsushita Electric Industrial Co., Ltd. Dispositif de traitement d'images et systeme de surveillance
JP2003149711A (ja) * 2001-11-08 2003-05-21 Clarion Co Ltd 車両用モニタ装置
JP2003196645A (ja) * 2001-12-28 2003-07-11 Equos Research Co Ltd 車両の画像処理装置
JP2004233333A (ja) * 2003-01-06 2004-08-19 Alpine Electronics Inc ナビゲーション用立体表示方法およびナビゲーション装置
JP2004254219A (ja) * 2003-02-21 2004-09-09 Denso Corp 車両周辺画像処理装置及びプログラム並びに記録媒体
JP2005142657A (ja) * 2003-11-04 2005-06-02 Denso Corp 車両周辺表示制御装置

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6498620B2 (en) * 1993-02-26 2002-12-24 Donnelly Corporation Vision system for a vehicle including an image capture device and a display system having a long focal length
US6384859B1 (en) * 1995-03-29 2002-05-07 Sanyo Electric Co., Ltd. Methods for creating an image for a three-dimensional display, for calculating depth information and for image processing using the depth information
US6272431B1 (en) * 1997-04-29 2001-08-07 Thomas Zamojdo Method for displaying a map in a vehicle en-route guidance system
JP3300334B2 (ja) 1999-04-16 2002-07-08 松下電器産業株式会社 画像処理装置および監視システム
JP3269056B2 (ja) * 2000-07-04 2002-03-25 松下電器産業株式会社 監視システム
US7266219B2 (en) * 2000-07-19 2007-09-04 Matsushita Electric Industrial Co., Ltd. Monitoring system
JP3297040B1 (ja) * 2001-04-24 2002-07-02 松下電器産業株式会社 車載カメラの画像合成表示方法及びその装置
JP4425495B2 (ja) * 2001-06-08 2010-03-03 富士重工業株式会社 車外監視装置
KR100866450B1 (ko) * 2001-10-15 2008-10-31 파나소닉 주식회사 차량 주위 감시 장치 및 그 조정 방법
US7212653B2 (en) 2001-12-12 2007-05-01 Kabushikikaisha Equos Research Image processing system for vehicle
JP4021685B2 (ja) * 2002-03-04 2007-12-12 松下電器産業株式会社 画像合成変換装置
JP3871614B2 (ja) * 2002-06-12 2007-01-24 松下電器産業株式会社 運転支援装置
DE10227221A1 (de) * 2002-06-18 2004-01-15 Daimlerchrysler Ag Verfahren zur Überwachung des Innen- bzw. Außenraums eines Fahrzeugs sowie ein Fahrzeug mit wenigstens einer Rundsichtkamera
JP4766841B2 (ja) * 2003-09-08 2011-09-07 株式会社オートネットワーク技術研究所 車両に搭載されるカメラ装置及び車両周辺監視装置
JP2005311868A (ja) * 2004-04-23 2005-11-04 Auto Network Gijutsu Kenkyusho:Kk 車両周辺視認装置
JP4560716B2 (ja) * 2004-09-28 2010-10-13 アイシン精機株式会社 車両の周辺監視システム
JP2006311272A (ja) * 2005-04-28 2006-11-09 Denso Corp 車両用映像表示装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064175A1 (fr) * 1999-04-16 2000-10-26 Matsushita Electric Industrial Co., Ltd. Dispositif de traitement d'images et systeme de surveillance
JP2003149711A (ja) * 2001-11-08 2003-05-21 Clarion Co Ltd 車両用モニタ装置
JP2003196645A (ja) * 2001-12-28 2003-07-11 Equos Research Co Ltd 車両の画像処理装置
JP2004233333A (ja) * 2003-01-06 2004-08-19 Alpine Electronics Inc ナビゲーション用立体表示方法およびナビゲーション装置
JP2004254219A (ja) * 2003-02-21 2004-09-09 Denso Corp 車両周辺画像処理装置及びプログラム並びに記録媒体
JP2005142657A (ja) * 2003-11-04 2005-06-02 Denso Corp 車両周辺表示制御装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011001794A1 (ja) * 2009-07-02 2011-01-06 富士通テン株式会社 画像生成装置及び画像表示システム
JP2011015174A (ja) * 2009-07-02 2011-01-20 Fujitsu Ten Ltd 画像生成装置及び画像表示システム
CN102474595A (zh) * 2009-07-02 2012-05-23 富士通天株式会社 图像产生设备和图像显示系统
CN102474595B (zh) * 2009-07-02 2014-11-26 富士通天株式会社 图像产生设备和图像显示系统
JP2011250363A (ja) * 2010-05-31 2011-12-08 Mitsubishi Electric Corp 映像監視装置
KR20150129542A (ko) * 2014-05-12 2015-11-20 현대모비스 주식회사 어라운드 뷰 시스템의 동작방법
KR102159354B1 (ko) * 2014-05-12 2020-09-23 현대모비스 주식회사 어라운드 뷰 시스템의 동작방법

Also Published As

Publication number Publication date
JP5159070B2 (ja) 2013-03-06
US20080055407A1 (en) 2008-03-06
US8553081B2 (en) 2013-10-08

Similar Documents

Publication Publication Date Title
JP5159070B2 (ja) 車両周辺画像表示装置及び表示方法
JP3300334B2 (ja) 画像処理装置および監視システム
CN100438623C (zh) 图象处理装置及监视系统
US20110210868A1 (en) Parking assistance apparatus
JP4606322B2 (ja) 車両運転支援装置
JP3855814B2 (ja) 車両用画像処理装置
JP2002019556A (ja) 監視システム
JP5209578B2 (ja) 車両用画像表示装置
JP2006287892A (ja) 運転支援システム
JPWO2009141846A1 (ja) 車両周囲監視装置および車両周囲監視方法
JP2009100095A (ja) 画像処理装置及び画像処理方法
JP3778849B2 (ja) 車両周辺画像処理装置及び記録媒体
JP2007041791A (ja) 俯瞰画像表示システム及び俯瞰画像の表示方法
JP2007141098A (ja) 画像処理装置及び画像処理方法
JP5064201B2 (ja) 画像表示システム及びカメラ出力制御方法
JP2008024138A (ja) 画像表示装置およびプログラム
JP5168186B2 (ja) 画像処理装置
JP2010183234A (ja) 描画装置
JP2007172501A (ja) 車両運転支援装置
JP2005311698A (ja) 車両周辺視認装置
JP5067136B2 (ja) 車両周辺画像処理装置及び車両周辺状況提示方法
CN111572450B (zh) 图像处理装置、车载照相机系统和图像处理方法
JP2007336230A (ja) 車載周囲死角表示システム
JP2007149011A (ja) 車両周辺視認装置
JP4832272B2 (ja) 車両周辺画像表示装置およびその表示方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110510

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120605

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120710

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121211

R150 Certificate of patent or registration of utility model

Ref document number: 5159070

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151221

Year of fee payment: 3