JP4407246B2 - 車両周辺モニタシステムおよび車両周辺モニタ方法 - Google Patents

車両周辺モニタシステムおよび車両周辺モニタ方法 Download PDF

Info

Publication number
JP4407246B2
JP4407246B2 JP2003382801A JP2003382801A JP4407246B2 JP 4407246 B2 JP4407246 B2 JP 4407246B2 JP 2003382801 A JP2003382801 A JP 2003382801A JP 2003382801 A JP2003382801 A JP 2003382801A JP 4407246 B2 JP4407246 B2 JP 4407246B2
Authority
JP
Japan
Prior art keywords
vehicle
image
camera
periphery monitoring
monitoring system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003382801A
Other languages
English (en)
Other versions
JP2005150938A (ja
Inventor
和彦 酒井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2003382801A priority Critical patent/JP4407246B2/ja
Publication of JP2005150938A publication Critical patent/JP2005150938A/ja
Application granted granted Critical
Publication of JP4407246B2 publication Critical patent/JP4407246B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、カメラで撮影した車両周辺の映像を表示する車両周辺モニタシステムに関する。
カメラで撮影した車両周辺の映像を車内のディスプレイ装置に表示する技術が知られている。非特許文献1には、車両の前方を撮影するフロントモニターカメラ、後方を撮影するバックモニターカメラ、および側面を撮影するサイドモニターカメラを備え、いずれかのカメラで撮影された映像をディスプレイ装置に表示するモニタシステムについて記載されている。
新型車解説書、車種:ハリアー、トヨタ自動車株式会社サービス部、2003年2月、4-124〜4-140
上記車両周辺モニタシステムでは、複数のカメラのうち選択されたカメラによる映像がディスプレイ装置に表示される。表示映像がどのカメラで撮影されている映像かを示すために、表示画面にアイコンが表示される。アイコンは、表示映像の邪魔にならないように画面の端に小さく表示されるので、表示画面を観察する車両の乗員にとってわかりにくい上に、アイコン確認のために視線を画面中央部から画面の端へ大きく移動させる必要がある。
本発明は、車両に搭載された撮像手段で撮像した車両周辺の映像を表示する車両周辺モニタシステムおよび車両周辺モニタ方法に関し、当該車両の一部を含むように撮像し、撮像信号に含まれる当該車両の形状が撮像方向によって異なるようにしたものである。
本発明による車両周辺モニタシステム、車両周辺モニタ方法では、表示映像がどのカメラで撮影されている映像であるかをわかりやすく示すことができる。
以下、図面を参照して本発明を実施するための最良の形態について説明する。
(第一の実施形態)
図1は、本発明の第一の実施形態による車両周辺モニタシステムを説明するブロック図である。図1において、車両にはリアカメラ11、フロントカメラ12、およびサイドカメラ13がそれぞれ搭載されている。リアカメラ11は車両の後方を撮影し、映像信号をカメラ映像処理ECU14へ送出する。フロントカメラ12は車両の前方を撮影し、映像信号をカメラ映像処理ECU14へ送出する。サイドカメラ13は、右サイドカメラおよび左サイドカメラによって構成され、それぞれの映像信号をカメラ映像処理ECU14へ送出するように構成されている。なお、各カメラがアナログ映像信号を出力するカメラの場合は、映像信号がカメラ映像処理ECU14へ送出され、各カメラがディジタルデータとして映像情報を出力するカメラの場合は、映像情報がカメラ映像処理ECU14へ送出される。
図2は、カメラ映像処理ECU14による処理の流れを説明する図である。ステップS21において、カメラ映像処理ECU14は、各カメラから入力される映像信号をディジタルデータに変換し、ステップS22へ進む。なお、各カメラからディジタル化された映像情報が入力される場合、カメラ映像処理ECU14はステップS21をスキップし、ディジタル変換処理を省略する。
ステップS22において、カメラ映像処理ECU14は、ディジタル変換後の画像データに画像処理を施す。画像処理は、変換および変形処理を含む。画像処理の詳細については後述する。カメラ映像処理ECU14は、変換および変形処理を行うとステップS23へ進む。
ステップS23において、カメラ映像処理ECU14は、必要に応じて上記画像処理後の画像データにコンピュータ・グラフィックス(CG)による重畳処理を施す。第1の実施形態では、カメラ映像処理ECU14は重畳処理(ステップS23)をスキップし、ステップS24へ進む。
ステップS24において、カメラ映像処理ECU14は、上記処理後の画像データを用いてディスプレイ装置17の表示解像度に応じた映像信号を生成し、ディスプレイ装置17へ送出する。
図1においてカメラ切り替えスイッチ18は、車両の乗員による操作に応じて、リアカメラ11、フロントカメラ12、およびサイドカメラ13(右および左を含む)のうち1つを選択するための操作信号を出力する。カメラ映像処理ECU14は、カメラ切り替えスイッチ18からの操作信号に対応するカメラからの映像信号に対し、上記処理を施してディスプレイ装置17へ送出する。
ディスプレイコントロールユニット15は、車両の乗員による操作に応じて、カメラ映像処理ECU14からの映像信号、およびナビゲーション装置16からの映像信号のいずれかを選択するための操作信号をディスプレイ装置17へ出力する。ディスプレイコントロールユニット15はさらに、カメラ映像処理ECU14におけるカメラ切り替え時に、表示映像をブラックアウトするための信号をディスプレイ装置17へ出力する。
ディスプレイ装置17は、ディスプレイコントロールユニット15からの表示選択信号に対応する映像信号を選択し、選択した映像信号による再生映像を表示する。
ナビゲーション装置16は、周知のGPS装置によって車両位置を検出し、地図および車両位置を示す再生画像を表示するための映像信号をディスプレイ装置17へ送出する。
図3は、フロントカメラ12による撮影画像の例を示す図である。図3において、フロントバンパー31および車両前方の路面32が撮影されている。車両に搭載するカメラは、コストおよび搭載位置の制約などにより、小型であることが望ましい。一般に、小型のカメラで広い撮影範囲を確保するためには魚眼レンズが用いられる。このため、魚眼レンズ特有のデフォルメ効果により、フロントバンパー31が中央部が窪んだ形状として表現される。
第一の実施形態による車両周辺モニタシステムは、カメラ映像処理ECU14が上記画像処理を行うことにより、図3に示す映像に代えて図4に示す映像をディスプレイ装置17に表示する。図4は、フロントカメラ12による映像信号が選択された場合にディスプレイ装置17に表示される映像の例を示す図である。
カメラ映像処理ECU14によって行われる上記変換および変形処理について、図5を参照して説明する。図5において、入力映像51は、フロントカメラ12から入力される映像信号による再生映像を示し、図3の映像と同等である。カメラ映像処理ECU14は、たとえば、入力映像51を横方向に5分割(X=1〜5)、縦方向に5分割(y=1〜5)の25領域に分割し、これら25の領域においてそれぞれ2値化処理を行う。
2値化データ52は、2値化(ディジタル化)処理後のデータテーブルを示す。2値化データ52において、フロントバンパー31に対応する領域が1で、路面に対応する領域が0で、それぞれ示されている。
座標変換マップ53は、2値化データ52を用いて変換および変形処理を行うための変換テーブルである。この変換および変形処理では、2値化データ52を構成する各データをy座標方向に移動させる。座標変換マップ53における数値は、2値化データ52のy座標のデータが変換後のY座標のどこに対応するかを示す。なお、変換および変形処理ではx座標方向への移動は行わない。すなわち、変換前のx座標は、そのまま変換後のX座標に対応する。
たとえば、座標変換マップ53において(x,y)=(1,3)に対応する数値は「2」である。これは、2値化データ52の(x,y)=(1,3)に対応するデータ「0」を変換後の座標Y=2の行へ移動させる、すなわち、(X,Y)=(1,2)へ移動させることを示す。
同様に、座標変換マップ53において(x,y)=(1,1)に対応する数値は「0」である。これは、2値化データ52の(x,y)=(1,1)に対応するデータ「1」を変換後の座標Y=0の行へ移動させることを示す。この場合には、Y=0の行は存在しないので、当該データ「1」は変換後のデータ構成しない。図5においてデータ54は、以上の処理をX=1の列について完了した状態のデータテーブルを示す。
カメラ映像処理ECU14は、X=2〜5の各列についても同様の処理を行う。たとえば、座標変換マップ53において(x,y)=(3,1)に対応する数値は「2」である。これは、2値化データ52の(x,y)=(3,1)に対応するデータ「1」を変換後の座標Y=2の行へ移動させる、すなわち、(X,Y)=(3,2)へ移動させることを示す。データ55は、以上の処理をX=1〜5の列の全てについて完了した状態のデータテーブルを示す。カメラ映像処理ECU14は、これら25の領域においてそれぞれ上記2値化と逆の処理を行い、出力映像56を得る。出力映像56は、変換および変形処理後の映像信号による再生映像を示し、図4の映像と同等である。図4において、フロントバンパー31の中央部が尖った形状として表現されている。
図6は、車両周辺モニタシステムでフロントカメラ12が選択された場合における、システム内の各ユニット間のシーケンスおよびタイミングの概要を説明する図である。図6のタイミングt1において、カメラ切り替えスイッチ18が車両乗員によって押下操作されると、フロントカメラONを示す操作信号がカメラ映像処理ECU14に入力される。
タイミングt2において、カメラ映像処理ECU14は、フロントカメラON制御を開始し、ディスプレイコントロールユニット15に対し、ディスプレイ装置17の表示画面をブラックアウトするように指令を送る。
タイミングt3において、カメラ映像処理ECU14は、カメラ映像入力をフロントカメラ12からの映像信号に切り替える。フロントカメラ12は、電源ON処理を行い、撮影した車両前方の映像信号の出力を開始する。ディスプレイ装置17は、ブラックアウト表示するので、画像処理(変換および変形処理)前の映像は表示されない。
タイミングt4において、カメラ映像処理ECU14は、フロントカメラ12から映像信号が入力されると上述した変換および変形処理を開始する。タイミングt5において、カメラ映像処理ECU14は、変換および変形処理後の映像信号をディスプレイ装置17へ送出するとともに、ディスプレイコントロールユニット15にフロントカメラに切り替える信号を送出する。タイミングt4以降、フロントカメラ12は逐次撮影した車両前方の映像信号を出力し、カメラ映像処理ECU14は逐次入力される映像信号に対して変換および変形処理を施してディスプレイ装置17へ送出する(タイミングt6)。
ディスプレイコントロールユニット15は、タイミングt6においてフロントカメラに切り替える信号を受信すると、ディスプレイコントロールユニット15に対し、タイミングt7においてディスプレイ装置17の表示画面をブラックアウトを解除するように指令を送る。ディスプレイ装置17は、タイミングt8においてブラックアウト表示を解除する。これにより、フロントカメラ12で撮影され、カメラ映像処理ECU14で画像処理(変換および変形処理)された映像をディスプレイ装置17が表示する。タイミングt8以降、ディスプレイ装置17は、逐次入力される画像処理(変換および変形処理)された映像を表示する。
カメラ映像処理ECU14は、カメラ切り替えスイッチ18からリアカメラ11、もしくはサイドカメラ13を選択する操作信号が入力された場合には、上記画像処理(変換および変形処理)を行わずに、リアカメラ11もしくはサイドカメラ13による映像信号による再生映像をディスプレイ装置17に表示させる。図7は、リアカメラ11からの映像信号による再生映像を示す図である。図7において、リアバンパー71および車両後方の路面72が撮影されている。カメラレンズ(不図示)によるデフォルメ効果により、リアバンパー71の中央部が窪んだ形状として表現される。
以上説明した第一の実施形態によれば、次の作用効果が得られる。
(1)カメラ映像処理ECU14は、フロントカメラ12が選択されているとき、フロントカメラ12で撮影された映像信号に対して以下のような変換および変形処理を行う。すなわち、入力映像51を25領域に分割し、これら25の領域においてそれぞれ2値化処理を行い、2値化データ52に対して座標変換マップ53による変換処理を施す。これにより、処理前は中央部が窪んでいたフロントバンパー31(図3)が、変換後は中央部が尖った形状として表現される(図4)。したがって、バンパー形状が進行方向(前方)をイメージさせるので、ディスプレイ装置17の観察者は、直感的にフロントカメラ12による前方映像であることを認識できる。また、フロントバンパー31近傍の映像を観察する観察者にとって、前方映像であることを認識するための表示画面上の視線移動が少なくてすむ。
(2)カメラ映像処理ECU14は、リアカメラ11もしくはサイドカメラ13が選択されているとき、上記(1)の変換および変形処理を行わずに、リアカメラ11もしくはサイドカメラ13による映像信号による再生映像をディスプレイ装置17に表示させる。したがって、後方映像の場合は、リアバンパー71の中央部が窪んだ形状として表現される。リアバンパー71近傍の映像を観察する観察者にとって、後方映像であることを認識するための表示画面上の視線移動が少なくてすむ。一般に、前方映像および後方映像は類似するが、上記(1)で表示されるバンパー形状と異ならせることで、アイコン表示などを行うことなく、ディスプレイ装置17の観察者に対してわかりやすく後方映像であることを示せる。
(3)フロントカメラ12による映像信号に切り替える時にディスプレイ装置17の表示画像をブラックアウトさせるようにしたので、切り替え途中に画像処理中の画像の表示が防止され、ディスプレイ装置17の観察者に不快感を与えることがない。
以上の説明では、フロントカメラ12が選択されているとき、フロントカメラ12で撮影された映像信号に含まれるフロントバンパー形状を変換(変形)して表示する例を説明した。リアカメラ11が選択されている場合にも、リアカメラ11で撮影された映像信号に含まれるリアバンパー形状を変換するようにしてもよい。ただし、フロントバンパー形状およびリアバンパー形状は、変換後の両者が容易に区別できるように特徴的に変換処理を施すことが望ましい。
上述した説明では、入力映像51を25領域に分割して2値化処理を行ったが、分割数は25領域でなくてもよい。ただし、分割による画素が目立たない程度に分割数を確保するのが望ましい。
分割後の各領域に対して2階調にディジタル化する2値化処理を例にあげて説明したが、階調数は2階調より増やしてもよく、たとえば、4階調であってもよい。
変換および変形処理を行うために座標変換マップ53を用いるようにしたが、変換マップの代わりに、変換および変形処理を関数によって表してもよい。この場合には、変換前のデータを関数(式)に代入することにより、変換後のデータを得る。
(第二の実施形態)
図8は、第二の実施形態による車両周辺モニタシステムでディスプレイ装置17に表示した前方映像を示す図である。図8において、フロントバンパー81および車両前方の路面82の映像が表示されている。さらに、フロントバンパー端から所定距離(たとえば、1m)離れた仮想位置に、前走車両のリアビュー83が線画によって重畳表示(オーバーレイ表示)されている。
図9は、第二の実施形態による車両周辺モニタシステムでディスプレイ装置17に表示した後方映像を示す図である。図9において、リアバンパー91および車両後方の路面92の映像が表示されている。さらに、リアバンパー端から所定距離(たとえば、1m)離れた仮想位置に、後方車両のフロントビュー93が線画によって重畳表示(オーバーレイ表示)されている。
第二の実施形態では、各映像にリアビューもしくはフロントビューを重畳表示させることにより、ディスプレイ装置17の観察者に対して前方映像か後方映像かを認識させる。この場合のカメラ映像処理ECU14は、図2における変換および変形処理(ステップS22)をスキップし、ステップS23において、撮影画像のデータにコンピュータ・グラフィックス(CG)による線画データを重ねて合成する重畳処理を施す。
カメラ映像処理ECU14は、重畳処理を以下のように行う。カメラ映像処理ECU14内の不揮発性メモリ(不図示)には、あらかじめフロントビュー線画およびリアビュー線画の表示に必要なデータがそれぞれ記憶されている。フロントビュー線画およびリアビュー線画の大きさは、ディスプレイ装置17に表示される前方映像および後方映像において、車両周辺モニタシステムが搭載されている当該車両のバンパー端からそれぞれ1mの距離に位置する車両の大きさ(実際に他車が存在する場合に映りこむ大きさ)に対応するように定められている。
カメラ映像処理ECU14が行う処理の流れについて、図10のフローチャートを参照して説明する。図10による処理は、カメラ切り替えスイッチ18が車両乗員によって押下操作され、フロントカメラONもしくはリアカメラONを示す操作信号がカメラ映像処理ECU14に入力される(ステップS51)と起動する。
ステップS52において、カメラ映像処理ECU14は、選択されたカメラによる映像を表示する処理を行う。具体的には、リアカメラ11の場合、カメラ映像入力をリアカメラ11からの映像信号に切り替え、リアカメラ11から映像信号が入力されると、ディジタル変換後の画像データに上述したフロントビュー線画データの合成処理を行う。カメラ映像処理ECU14はさらに、合成処理後の映像信号をディスプレイ装置17へ送出するとともに、ディスプレイコントロールユニット15にリアカメラ11に切り替える信号を送出する。これにより、ディスプレイ装置17には後方映像に重ねてフロントビュー(車体形状)が重畳表示される(画面101)。
ステップS53において、カメラ映像処理ECU14は、映像の表示開始から所定時間(たとえば、10秒)が経過してタイムアウト判定したとき、もしくは、当該車両の車速が所定速度(たとえば、0Km/h)を超えたことを判定したとき、車体形状を示す線画データの合成処理を停止する。これにより、リアカメラ11が選択されていた場合にはフロントビューの重畳表示が停止され、ディスプレイ装置17には後方映像のみが表示される(画面102)。
ステップS54において、カメラ映像処理ECU14は、選択カメラから逐次入力される映像(通常の映像)をディスプレイ装置17に表示する(画面103)。この処理は、カメラ切り替えスイッチ18が車両乗員によって再び押下操作され、他のカメラを選択する操作信号が入力されるまで継続する。
なお、カメラ映像処理ECU14は、カメラ切り替えスイッチ18からサイドカメラ13を選択する操作信号が入力された場合には、上記線画データの合成処理を行わない。これにより、サイドカメラ13から逐次入力される映像(通常の映像)がディスプレイ装置17に表示される。
以上説明した第二の実施形態によれば、次の作用効果が得られる。
(1)カメラ映像処理ECU14は、フロントカメラ12が選択されているとき、フロントカメラ12で撮影された映像信号に対して、前走車両をイメージさせる車体形状のリアビューを線画によって重畳表示するようにした(図8)。したがって、ディスプレイ装置17の観察者は、直感的にフロントカメラ12による前方映像であることを認識できる。また、フロントバンパー81近傍の映像を観察する観察者にとって、前方映像であることを認識するための表示画面上の視線移動が少なくてすむ。
(2)カメラ映像処理ECU14は、リアカメラ11が選択されているとき、リアカメラ11で撮影された映像信号に対して、後方車両をイメージさせる車体形状のフロントビューを線画によって重畳表示するようにした(図9)。したがって、ディスプレイ装置17の観察者は、直感的にリアカメラ11による後方映像であることを認識できる。また、リアバンパー91近傍の映像を観察する観察者にとって、後方映像であることを認識するための表示画面上の視線移動が少なくてすむ。
(3)重畳表示する車体形状のフロントビューおよびリアビューは、当該車両のバンパー端からそれぞれ1mの距離に位置するようにしたので、表示映像の観察者にとって最も重要なバンパー近傍の確認が行いやすくなる。さらに、重畳表示を線画によって行うようにしたので、カメラ映像が遮られることもない。
重畳表示する車体形状のフロントビューおよびリアビューの位置は、当該車両のバンパー端から必ずしも1mでなくてもよく、状況に応じて0.5mや2mの距離に変更してもよい。
重畳表示する車体形状のフロントビューおよびリアビューは、線画表示の他、半透明表示によってカメラ映像に重ねて表示してもよい。
重畳表示する車体形状のフロントビューおよびリアビューの大きさを、それぞれの映像の表示開始からの経過時間とともに徐々に小さく変化させてもよい。
また、フロントビューおよびリアビューの大きさを経過時間とともに徐々に小さく変化させるとき、フロントビューおよびリアビューの表示位置を画面の周辺部(たとえば、右上部)へ向けて徐々に移動させてもよい。
重畳表示する車体形状のフロントビューの代わりに、「後」もしくは「Back」などのテキスト表示を重畳表示させてもよい。これによってディスプレイ装置17の観察者は、直感的にリアカメラ11による後方映像であることを認識できる。前方映像の場合には、リアビューの代わりに「前」もしくは「Front」などのテキスト表示を重畳表示させる。この場合のディスプレイ装置17の観察者は、直感的にフロントカメラ12による後方映像であることを認識できる。
(第三の実施形態)
第三の実施形態では、フロントカメラに切り替え時に、車両前部の特徴的な挙動を示すアニメーション表示を行う。この場合にカメラ映像処理ECU14が行う処理の流れについて、図11のフローチャートを参照して説明する。図11による処理は、カメラ切り替えスイッチ18が車両乗員によって押下操作され、フロントカメラONを示す操作信号がカメラ映像処理ECU14に入力される(ステップS61)と起動する。
ステップS62において、カメラ映像処理ECU14は、アニメーション表示を開始する。具体的には、ナビゲーション装置16による表示画面201をアニメーション画像に切り替える。アニメーション画像は、たとえば、前輪を転舵した状態で後退する車両の動きを例示するプランビュー画像(画面202、203、204)である。
ステップS63において、カメラ映像処理ECU14は、アニメーション表示の終了時にフロントカメラ12からの映像信号をディスプレイ装置17へ送出する。これにより、ディスプレイ装置17には前方映像が表示される(画面205)。このとき、アニメーション画像の一部(画面205の例では照明光)を前方映像とともに表示する。
ステップS64において、カメラ映像処理ECU14は、アニメーション画像の一部の表示を停止する。これにより、ディスプレイ装置17には前方映像のみが表示される(画面206)。以降、カメラ映像処理ECU14は、選択カメラから逐次入力される映像(通常の映像)をディスプレイ装置17に表示する(画面206)。この処理は、カメラ切り替えスイッチ18が車両乗員によって再び押下操作され、他のカメラを選択する操作信号が入力されるまで継続する。
以上説明した第三の実施形態によれば、フロントカメラに切り替え時に前輪を転舵した車両前部の旋回挙動をアニメーション表示するようにしたので、ディスプレイ装置17の観察者は、直感的にフロントカメラ12による前方映像であることを認識できる。通常の車両は、その前輪に転舵機能が備えられているので、アニメーション画像202〜204で示される挙動は、当該車両の前部を含むものであることが明らかである。
上記の例では、フロントカメラに切り替え時に車両前部の特徴的な挙動を示すアニメーション表示を行う例を示したが、リアカメラ切り替え時には、車両後部の特徴的な挙動を示すアニメーション表示を行うようにすればよい。
また、サイドカメラに切り替え時には、車両左右側面の特徴的な挙動を示すアニメーション表示を行うようにすればよい。
以上説明した第一の実施形態および第二の実施形態を組み合わせてもよい。すなわち、図4に示す表示映像に重ねて、図9における車体形状のリアビュー83を重畳表示させる。これにより、表示されている映像がフロントカメラ12による前方映像であることをよりわかりやすく示すことができる。
特許請求の範囲における各構成要素と、発明を実施するための最良の形態における各構成要素との対応について説明する。撮像手段は、たとえば、リアカメラ11(フロントカメラ12、サイドカメラ13)によって構成される。撮像信号は、映像信号が対応する。画像変換処理手段、映像信号出力手段、画像合成処理手段およびアニメーション映像信号出力手段は、たとえば、カメラ映像処理ECU14によって構成される。映像表示手段は、たとえば、ディスプレイ装置17によって構成される。他車両を示す画像は、たとえば、フロントビューおよびリアビューの線画像が対応する。なお、本発明の特徴的な機能を損なわない限り、各構成要素は上記構成に限定されるものではない。
本発明の第一の実施形態による車両周辺モニタシステムを説明するブロック図である。 カメラ映像処理ECUによる処理の流れを説明する図である。 フロントカメラによる撮影画像の例を示す図である。 ディスプレイ装置に表示されるフロントカメラ映像の例を示す図である。 変換および変形処理を説明する図である。 各ユニット間のシーケンスおよびタイミングの概要を説明する図である。 リアカメラからの映像信号による再生映像を示す図である。 第二の実施形態による車両周辺モニタシステムでディスプレイ装置に表示した前方映像を示す図である。 第二の実施形態による車両周辺モニタシステムでディスプレイ装置に表示した後方映像を示す図である。 カメラ映像処理ECUが行う処理の流れを説明するフローチャートである。 第三の実施形態でカメラ映像処理ECUが行う処理の流れを説明するフローチャートである。
符号の説明
11…リアカメラ
12…フロントカメラ
13…サイドカメラ
14…カメラ映像処理ECU
15…ディスプレイコントロールユニット
16…ナビゲーション装置
17…ディスプレイ装置
18…カメラ切り替えスイッチ
31、81…フロントバンパー
71、91…リアバンパー
83…リアビュー
93…フロントビュー

Claims (13)

  1. 車両に搭載され、車両周辺の異なる方向を当該車両の一部を含むように撮像して撮像信号を出力する撮像手段と、
    前記撮像手段による撮像方向によって映像表示手段で表示される前記車両の一部の形状が異なるように前記撮像信号に含まれる前記車両の形状を変換する処理を行う画像変換処理手段と、
    前記画像変換処理手段による変換処理後の撮像信号を前記映像表示手段へ出力する映像信号出力手段と
    を備えることを特徴とする車両周辺モニタシステム。
  2. 請求項1に記載の車両周辺モニタシステムにおいて、
    前記画像変換処理手段は、あらかじめ定められた変換テーブルに基づいて変換処理することを特徴とする車両周辺モニタシステム。
  3. 請求項1または2に記載の車両周辺モニタシステムにおいて、
    前記撮像手段は、前方用カメラ、後方用カメラ、および側方用カメラのうち少なくとも1つによって構成されることを特徴とする車両周辺モニタシステム。
  4. 請求項3に記載の車両周辺モニタシステムにおいて、
    前記後方用カメラは、少なくとも当該車両のリアバンパーの一部を含むように車両後方を撮像して撮像信号を出力し、
    前記画像変換処理手段は、前記撮像信号に含まれる前記リアバンパーの形状を変換することを特徴とする車両周辺モニタシステム。
  5. 請求項3に記載の車両周辺モニタシステムにおいて、
    前記前方用カメラは、少なくとも当該車両のフロントバンパーの一部を含むように車両前方を撮像して撮像信号を出力し、
    前記画像変換処理手段は、前記撮像信号に含まれる前記フロントバンパーの形状を変換することを特徴とする車両周辺モニタシステム。
  6. 請求項3〜5のいずれかに記載の車両周辺モニタシステムにおいて、
    前記撮像信号による映像と他車両を示す画像とを重ね合わせるように前記撮像信号に対して合成処理を行う画像合成処理手段をさらに備え、
    前記映像信号出力手段は、前記画像合成処理手段による合成処理後の撮像信号を前記映像表示手段へ出力することを特徴とする車両周辺モニタシステム。
  7. 請求項6に記載の車両周辺モニタシステムにおいて、
    前記画像合成処理手段は、前記撮像信号が後方用カメラから出力されたものであるとき、後方映像に前記他車両の前部を示す画像を重ね合わせるように合成することを特徴とする車両周辺モニタシステム。
  8. 請求項6に記載の車両周辺モニタシステムにおいて、
    前記画像合成処理手段は、前記撮像信号が前方用カメラから出力されたものであるとき、前方映像に前記他車両の後部を示す画像を重ね合わせるように合成することを特徴とする車両周辺モニタシステム。
  9. 請求項6〜8のいずれかに記載の車両周辺モニタシステムにおいて、
    前記他車両を示す画像は、線画もしくは半透明画像であることを特徴とする車両周辺モニタシステム。
  10. 請求項6〜9のいずれかに記載の車両周辺モニタシステムにおいて、
    画像合成処理手段は、前記他車両が前記フロントバンパーもしくは前記リアバンパーから所定距離に位置するように、前記撮像信号による映像と前記他車両を示す画像とを重ね合わせることを特徴とする車両周辺モニタシステム。
  11. 請求項6〜10のいずれかに記載の車両周辺モニタシステムにおいて、
    前記合成処理手段は、所定時間経過後に前記合成処理を停止することを特徴とする車両周辺モニタシステム。
  12. 請求項3に記載の車両周辺モニタシステムにおいて、
    前記撮像信号が出力されるカメラに応じて、車両前部、車両後部、および車両側面部のいずれかの特徴的な挙動を示すアニメーション表示を行うための映像信号を前記映像表示手段へ出力するアニメーション映像信号出力手段をさらに備えることを特徴とする車両周辺モニタシステム。
  13. 車両に搭載される撮像手段で車両周辺の異なる方向を当該車両の一部を含むように撮像し、
    前記撮像手段による撮像方向によって表示される前記車両の一部の形状が異なるように前記撮像された映像に含まれる前記車両の形状を変換し、
    前記変換した後の映像を表示することを特徴とする車両周辺モニタ方法。
JP2003382801A 2003-11-12 2003-11-12 車両周辺モニタシステムおよび車両周辺モニタ方法 Expired - Fee Related JP4407246B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003382801A JP4407246B2 (ja) 2003-11-12 2003-11-12 車両周辺モニタシステムおよび車両周辺モニタ方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003382801A JP4407246B2 (ja) 2003-11-12 2003-11-12 車両周辺モニタシステムおよび車両周辺モニタ方法

Publications (2)

Publication Number Publication Date
JP2005150938A JP2005150938A (ja) 2005-06-09
JP4407246B2 true JP4407246B2 (ja) 2010-02-03

Family

ID=34691763

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003382801A Expired - Fee Related JP4407246B2 (ja) 2003-11-12 2003-11-12 車両周辺モニタシステムおよび車両周辺モニタ方法

Country Status (1)

Country Link
JP (1) JP4407246B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10484651B2 (en) 2015-06-29 2019-11-19 Aisin Seiki Kabushiki Kaisha Image display control device
JP6806156B2 (ja) 2016-09-30 2021-01-06 アイシン精機株式会社 周辺監視装置
EP3886431A4 (en) 2018-11-22 2021-12-22 Sony Semiconductor Solutions Corporation IMAGE PROCESSING DEVICE, CAMERA SYSTEM AND IMAGE PROCESSING METHOD

Also Published As

Publication number Publication date
JP2005150938A (ja) 2005-06-09

Similar Documents

Publication Publication Date Title
US10462372B2 (en) Imaging device, imaging system, and imaging method
JP4248570B2 (ja) 画像処理装置並びに視界支援装置及び方法
JP5914013B2 (ja) 運転支援装置
JP4315968B2 (ja) 画像処理装置並びに視界支援装置及び方法
WO2002089485A1 (fr) Procede et dispositif pour la presentation d'une image de camera embarquee a bord d'un vehicule
JP2005311868A (ja) 車両周辺視認装置
JP5064201B2 (ja) 画像表示システム及びカメラ出力制御方法
JP2011066763A (ja) 運転支援装置
KR102288950B1 (ko) 차량 및 그 제어 방법
JP2002127852A (ja) 車両周辺表示装置
JP2009253571A (ja) 車両用モニタ映像生成装置
JP7467402B2 (ja) 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム
JP3815291B2 (ja) 車両後方監視装置
JP2006171849A (ja) 画像処理装置
JP2003267171A (ja) 車両後方監視装置
KR100899892B1 (ko) 자동차용 카메라 장치 및 안내선 표시방법
WO2006046715A1 (ja) エンタテインメントシステム
JP2005333565A (ja) 監視装置
JP4791222B2 (ja) 表示制御装置
JP5067136B2 (ja) 車両周辺画像処理装置及び車両周辺状況提示方法
JP4407246B2 (ja) 車両周辺モニタシステムおよび車両周辺モニタ方法
JP7500527B2 (ja) 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム
JP2020135206A (ja) 画像処理装置、車載用カメラシステム及び画像処理方法
JP2010204262A (ja) 表示処理装置
JP6054738B2 (ja) カメラモジュール、カメラシステムおよび画像表示方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060925

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090918

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091020

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091102

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121120

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121120

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131120

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees