JP2004254219A - 車両周辺画像処理装置及びプログラム並びに記録媒体 - Google Patents

車両周辺画像処理装置及びプログラム並びに記録媒体 Download PDF

Info

Publication number
JP2004254219A
JP2004254219A JP2003044732A JP2003044732A JP2004254219A JP 2004254219 A JP2004254219 A JP 2004254219A JP 2003044732 A JP2003044732 A JP 2003044732A JP 2003044732 A JP2003044732 A JP 2003044732A JP 2004254219 A JP2004254219 A JP 2004254219A
Authority
JP
Japan
Prior art keywords
image
vehicle
bird
eye view
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003044732A
Other languages
English (en)
Other versions
JP4067424B2 (ja
Inventor
Hirohiko Yanagawa
博彦 柳川
Manabu Ono
学 小野
Katsuyuki Imanishi
勝之 今西
Tatsuya Ueki
竜也 植木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Soken Inc
Original Assignee
Denso Corp
Nippon Soken Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp, Nippon Soken Inc filed Critical Denso Corp
Priority to JP2003044732A priority Critical patent/JP4067424B2/ja
Publication of JP2004254219A publication Critical patent/JP2004254219A/ja
Application granted granted Critical
Publication of JP4067424B2 publication Critical patent/JP4067424B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

【課題】例えばバックによる駐車時に、運転者に分かりやすい画面表示ができる車両周辺画像処理装置を提供すること。
【解決手段】ステップ100にて、シフト位置がバックであるか否かを判定する。ステップ110では、カメラ1で撮影した画像の座標変換(鳥瞰図変換)を行って、鳥瞰図画像を得る。ステップ120では、ステアリング角が、一定値より大であるか否かを判定する。ステップ130では、車両後方全体を広く確認できるように、モニタ3に原画像を表示する。ステップ140では、駐車枠があるか否かを、例えば鳥瞰図画像の画像データから判定する。ステップ150では、車速が一定値より大であるか否かを判定する。ステップ160では、ステアリング角が、一定値より大であるか否かを判定する。ステップ170では、駐車動作が容易となるように、モニタ3に鳥瞰図画像を表示する。
【選択図】 図5

Description

【0001】
【発明の属する技術分野】
本発明は、例えば車両の後方を撮影してモニタに表示できる車両周辺画像処理装置及びプログラム並びに記録媒体に関するものである。
【0002】
【従来の技術】
従来より、車両の後方の様子を表示する装置として、車両の後部に取り付けたカメラの画像を、そのままモニタに出力する表示装置が知られている。
この表示装置では、車両後方の状態が有る程度分かるが、自車両とモニタに表示されている駐車枠の画像の相対位置関係が分かりに難いという問題がある。
【0003】
この対策として、後方カメラで撮影した画像(後方カメラ画像)を鳥瞰図に変換し、自車両をその中に表示するという技術が提案されている(特許文献1参照)。
【0004】
【特許文献1】
特開2002−87160号公報 (第4,5頁、図8)
【0005】
【発明が解決しようとする課題】
この技術の場合には、自車と駐車枠との位置関係が一目瞭然に分かるので好適であるが、表示範囲が通常例えば自車の周辺数mであるので、駐車枠から遠いアプローチ時には、場合によっては、バックする際の目標が分かりにくいという問題があった。
【0006】
本発明は、前記課題を解決するためになされたものであり、例えばバックによる駐車時に、運転者に分かりやすい画面表示ができる車両周辺画像処理装置及びプログラム並びに記録媒体を提供することを目的とする。
【0007】
【課題を解決するための手段及び発明の効果】
(1)請求項1の発明は、車両周辺の画像を撮影する撮影手段(例えばカメラ)と、画像を表示する表示手段(例えばモニタ)とを備えた車両に対して、撮影手段により撮影された画像を処理して表示手段に表示する車両周辺画像処理装置に関するものである。
【0008】
本発明では、撮影手段により撮影された画像のデータ(例えば撮影手段により撮影された現在の画像データ、又は現在や過去の画像を合成した合成画像のデータ等)に基づいて鳥瞰図画像を生成する。例えば、撮影された通常の画像等を、撮影手段を視点として投影した地上面座標系のデータに変換して鳥瞰図画像を生成する。これにより、画像は、例えばカメラで撮影したままの歪んだ画像ではなく、地面の上方より見たような見やすい鳥瞰図画像となる。
【0009】
特に本発明では、表示手段に、撮影手段により撮影された(鳥瞰図変換されない)原画像と鳥瞰図画像生成手段により生成された鳥瞰図画像とを共に表示する。例えば同じモニタの画面に、カメラで撮影した状態の原画像と(例えば原画像や合成画像を鳥瞰図変換した)鳥瞰図画像とを、並列して同時に表示する。
【0010】
従って、運転者は、表示手段に表示された原画像により、車両周辺の状態を例えばカメラで撮影したままの画像(いわゆるカメラ画像)で全体的に把握できるとともに、鳥瞰図画像により、例えば車両と駐車枠との相対位置が正確に把握できるので、例えばバックにて駐車する際に非常に便利である。
【0011】
(2)請求項2の発明では、表示手段に、原画像及び鳥瞰図画像の両画像のうち、どちらの画像を強調して表示するかを判定し、その判定結果に基づいて、強調表示すべき画像を表示手段に強調して表示する。
これにより、運転者は、強調された画像を見て、車両の周囲の状態を的確に把握できるという効果がある。
【0012】
尚、画像を強調する方法としては、強調する画像を拡大する方法や、その画像を目立たせるために色のついた枠で囲む方法等、運転者の注意を引くための各種の方法が考えられる。
(3)請求項3の発明では、強調表示判定手段は、車両の運転状態に基づいて判定を行う。
【0013】
本発明は、強調表示の判定条件を例示したものである。
例えば車両がバックにより駐車する状態(特に駐車枠に近づいている状態)であることを、車両の運転状態により検出した場合には、自動的に、その運転状態に適した画像を強調して表示することができる。
【0014】
尚、マニュアルの例えばスイッチ操作にて、強調する画像を指定してもよい。
(4)請求項4の発明では、車両の運転状態は、シフト位置及びハンドルの操作状態である。
本発明は、強調表示の判定に用いる車両の運転状態を例示したものである。
【0015】
つまり、例えばシフト位置がバックで、ハンドルが大きく切られている場合には、バックでの駐車時に駐車枠に近接した状態であると判定することができる。
(5)請求項5の発明では、強調表示判定手段は、原画像又は鳥瞰図画像に含まれる駐車枠の画像に基づいて判定を行う。
【0016】
本発明は、強調表示の判定条件を例示したものである。
例えば車両がバックにより駐車する状態(特に駐車枠に近づいている状態)であることを、例えばカメラで撮影した画像中(又はその画像の鳥瞰図画像の画像中)に駐車枠が写っていることにより検出した場合には、自動的に、その運転状態に適した画像を強調して表示することができる。
【0017】
(6)請求項6の発明は、車両周辺の画像を撮影する撮影手段(例えばカメラ)と、画像を表示する表示手段(例えばモニタ)とを備えた車両に対して、前記撮影手段により撮影された画像を処理して前記表示手段に表示する車両周辺画像処理装置に関するものである。
【0018】
本発明では、撮影手段により撮影された画像のデータ(例えば撮影手段により撮影された現在の画像データ、又は現在や過去の画像を合成した合成画像のデータ等)に基づいて鳥瞰図画像を生成する。例えば、撮影された通常の画像等を、撮影手段を視点として投影した地上面座標系のデータに変換して鳥瞰図画像を生成する。これにより、画像は、例えばカメラで撮影したままの歪んだ画像ではなく、地面の上方より見たような見やすい鳥瞰図画像となる。
【0019】
特に本発明では、表示手段に、撮影手段により撮影された(鳥瞰図変換されない)原画像及び鳥瞰図画像生成手段により生成された鳥瞰図画像のうち、どちらの画像を表示するかを判定し、その判定結果に基づいて、表示すべき画像を表示手段に表示する。
【0020】
従って、表示手段には、運転状態に適した画像を適宜選択して表示することができるので、運転が非常に容易になる。例えばバックにて駐車する際に鳥瞰図画像を表示すれば、車両と駐車枠との相対位置を把握できるので、非常に便利である。
【0021】
(7)請求項7の発明では、表示判定手段は、車両の運転状態に基づいて判定を行う。
本発明は、画像表示の判定条件を例示したものである。
例えば車両がバックにより駐車する状態(特に駐車枠に近づいている状態)であることを、車両の運転状態により検出した場合には、自動的に、その運転状態に適した画像を選択して表示することができる。
【0022】
尚、マニュアルの例えばスイッチ操作にて、表示する画像を指定してもよい。
(8)請求項8の発明では、車両の運転状態は、シフト位置及びハンドルの操作状態である。
本発明は、画像表示の判定に用いる車両の運転状態を例示したものである。
【0023】
つまり、例えばシフト位置がバックで、ハンドルが大きく切られている場合には、バックでの駐車時に駐車枠に近接した状態であると判定することができる。
(9)請求項9の発明では、表示判定手段は、原画像又は鳥瞰図画像に含まれる駐車枠の画像に基づいて判定を行う。
【0024】
本発明は、画像表示の判定条件を例示したものである。
例えば車両がバックにより駐車する状態(特に駐車枠に近づいている状態)であることを、例えばカメラで撮影した画像中(又はその画像の鳥瞰図画像の画像中)に駐車枠が写っていることにより検出した場合には、自動的に、その運転状態に適した画像を選択して表示することができる。
【0025】
(10)請求項10の発明では、表示判定手段による判定結果に基づいて、現在表示されている原画像を鳥瞰図画像に切り替える。
つまり、例えばカメラで撮影された画像が表示されている場合に、バックにて駐車する状態(特に駐車枠に近接した状態)となった場合には、その駐車の際の操作に好適な鳥瞰図画像に切り替える。これにより、駐車の際の操作が容易になる。
【0026】
(11)請求項11の発明では、撮影手段により撮影される画像は、車両の後方の画像である。
従って、車両後方の画像(原画像や鳥瞰図画像)を表示することにより、バックでの駐車時の操作が容易になる。
【0027】
(12)請求項12の発明(プログラム)は、請求項1〜11のいずれかに記載の車両周辺画像処理装置の機能を実現するための手段を有している。
つまり、上述した車両周辺画像処理装置の機能を実現するための各手段は、コンピュータのプログラムにより実行される処理により実現することができる。
【0028】
(13)請求項13の発明(記録媒体)は、請求項12に記載のプログラムの機能を実現するための手段を記憶している。
つまり、上述した様なプログラムをコンピュータシステムにて実現する機能は、例えば、コンピュータシステム側で起動するプログラムとして備えることができる。このようなプログラムの場合、例えば、フレキシブルディスク、光磁気ディスク、CD−ROM、DVD、ハードディスク等のコンピュータ読み取り可能な記録媒体に記録し、必要に応じてコンピュータシステムにロードして起動することにより用いることができる。この他、ROMやバックアップRAM等をコンピュータ読み取り可能な記録媒体として前記プログラムを記録しておき、このROMあるいはバックアップRAM等をコンピュータシステムに組み込んで用いても良い。
【0029】
【発明の実施の形態】
以下に、本発明の車両周辺画像処理装置及びプログラム並びに記録媒体の実施の形態の例(実施例)を説明する。
(実施例1)
ここでは、モニタの表示画面に、原画像と鳥瞰図画像とを切り替えて表示する装置を例に挙げて説明する。
【0030】
a)本実施例の基本的なシステム構成を図1及び図2を用いて説明する。
図1に示す様に、本実施例の車両周辺画像処理装置は、自動車の後部に配置されたカメラ(例えばCCDカメラ)1と、ダッシュボードに配置された車載モニタ(例えば液晶ディスプレイ)3と、画像処理等の処理を行うデータ処理ユニット5とを備えている。尚、データ処理ユニット3は、カメラ1又はモニタ5と一体の構造となっていてもよい。
【0031】
前記データ処理ユニット5は、図2に示す様に、マイクロコンピュータを主要部とする画像データ等の処理を行う電子制御装置であり、機能的に、カメラ1で撮影した原画像の画像データや(原画像等を合成した)合成画像の画像データの座標変換を行って鳥瞰図画像を生成する座標変換部11と、鳥瞰図画像から駐車枠の画像データを抽出する駐車枠処理部13と、モニタ3に表示する画像を切り替える切替判断部15と、モニタ3に表示する画像を描画する描画部17とを備えている。
【0032】
また、前記切替判断部15には、画像の切替の判定の際に用いるために、車速センサ21からの車速のデータ、ヨーレートセンサ23からのヨーレートのデータ、ステアリングセンサ25からのステアリング(ハンドル)のステアリング角(操舵角)のデータ等が入力される。
【0033】
そして、後に詳述するように、本実施例では、上述した構成を用いて、モニタ3の表示画面に、カメラ1にて撮影された(通常のカメラ画像である)原画像と(原画像や合成画像を鳥瞰図変換した)鳥瞰図画像とを、駐車の際の運転状態に応じて切り替えて表示する。
【0034】
b)次に、本実施例における基本的な画像処理の手順等を、図3に基づいて説明する。
ここでは、車両を後退(バック)させて駐車枠内に入れる場合を例に挙げる。
▲1▼まず、カメラ1から出力される画像(原画像:出力画像)を、図3(a)左図に示す。
【0035】
この画像は、車両の後部の上部に配置されたカメラ1により、地上に描かれた駐車枠及びその周囲を撮影した画像であるので、自車両(従ってカメラ1)と駐車枠の各線の位置との距離などに応じて、本来矩形である駐車枠が歪んで表示されている。
【0036】
▲2▼次に、図3(a)左図の画像を座標変換して鳥瞰図画像を生成し、更に、その鳥瞰図画像に、自車両の位置やカメラ1の視野角の画像を加入して合成し、その合成画像を、図3(b)右図に示す様に、モニタ5の画面に表示する。
つまり、カメラ1の取り付け高さや、取り付け角度、視野角は既知であるため、カメラ1の出力画像を座標変換部11にて座標変換(周知の鳥瞰図変換)し、図3(a)右図に示す様な鳥瞰図画像とする。
【0037】
尚、カメラ1で撮影した画像を鳥瞰図画像に変換してモニタ5に表示する処理は、例えば前記先行文献1に記載の様に周知技術であるので、詳しい説明は省略する。
▲3▼そして、車両がバックして駐車枠に近づくと、図3(b)左図及び図3(c)左図に示す様に、車両に近い部分は、カメラ1の視野から徐々に外れてしまうので、ここでは、時間的に連続した2つの鳥瞰図画像を取り込んでマッチングさせて、現在の視野の画像に視野外に消えた画像を加えた合成画像とする。
【0038】
▲4▼次に、この合成画像をモニタ3に表示する場合には、図3(b)右図及び図3(c)右図に示す様に、描画部17により、上述した合成画像を描画するとともに、車両の位置とカメラ1の視野角の画像も合成して描画する。
c)次に、本実施例の要部である表示画像の切替処理の手順等を、図4及び図5に基づいて説明する。
【0039】
本実施例では、バックでの駐車の際に、図4の▲1▼、▲2▼、▲3▼の矢印で示される様な走行経路であることを、車両のセンサからのデータや画像処理によって抽出した駐車枠のデータにより判定し、その様なバックでの駐車であると判断された場合には、原画像の表示を鳥瞰図画像の表示に切り替えるものである。以下、順を追って説明する。
【0040】
図5に示す様に、まず、ステップ100にて、シフト位置がバックであるか否かを判定する。ここで肯定判断されるとステップ110に進み、一方否定判断されると一旦本処理を終了する。
尚、シフト位置は、シフト位置検出センサ(図示せず)からの信号や、他の電子制御装置からの信号により検出することができる。
【0041】
ステップ110では、カメラ1で撮影した原画像(通常のカメラ画像)の座標変換(鳥瞰図変換)を行って、鳥瞰図画像を得る。
続くステップ120では、ステアリング角(又はヨーレート)が、一定値より大であるか否か、即ち、大きくハンドルが切られた状態であるか否かを判定する。ここで肯定判断されるとステップ170に進み、一方否定判断されるとステップ130に進む。
【0042】
ステップ170では、シフト位置がバックで且つ大きくハンドルが切られた状態であるので、即ち図4の▲3▼の点線(前進)及び実線(後進)の走行経路を移動して、駐車枠に近接する駐車動作の状態であるとして、駐車動作が容易となるように、モニタ3に鳥瞰図画像を表示して、一旦本処理を終了する。
【0043】
これにより、モニタ3には、例えば図6(a)に示す様に、車両が駐車枠に平行な鳥瞰図画像が表示される。
一方、ステップ130では、シフト位置がバックで且つハンドルが殆ど切られていない状態であるので、即ち図4の▲1▼の実線(後進)の走行経路を移動する駐車動作の最初の状態であるとして、車両後方全体を広く確認できるように、モニタ3に原画像を表示する。
【0044】
続くステップ140では、駐車枠があるか否かを、例えば鳥瞰図画像の画像データから判定する。
具体的には、鳥瞰図画像の画像データを解析して、周知の画像処理によって路面上の白線を抽出し、この白線が駐車枠を示すか否かを判定する。例えば平行な白線が所定間隔を開けて存在すれば駐車枠であると判定する。
【0045】
そして、ここで肯定判断されると、駐車枠内に入れる際の駐車動作の状態であるとして、前記ステップ170に進んで、原画像を鳥瞰図画像に切り替える。これにより、モニタ3には、例えば図6(b)に示す様な鳥瞰図画像が表示される。一方、ここで否定判断されるとステップ150に進む。
【0046】
ステップ150では、車速が一定値より大であるか否かを判定し、ここで肯定判断されると前記ステップ130に戻り、一方否定判断されるとステップ160に進む。
ステップ160では、ステアリング角(又はヨーレート)が、一定値より大であるか否かを判定し、ここで肯定判断されると前記ステップ170に進み、一方否定判断されると前記ステップ130に戻る。
【0047】
つまり、ここでは、車速が低速で大きくハンドルが切られた場合には、例えば図4の▲2▼の点線(前進)及び実線(後進)の走行経路を移動して、駐車枠に近接する駐車動作の状態、或いは、前記図4の▲1▼の実線(後進)の走行経路を移動した後の駐車動作の後半の状態(駐車枠に近接した状態)であるとして、駐車動作が容易となるように、原画像を鳥瞰図画像に切り替える。これにより、モニタ3には、例えば図6(b)に示す画像とほぼ同様な鳥瞰図画像が表示される。
【0048】
この様に、本実施例では、車両をバックにて駐車する際には、その駐車の動作及びそれに伴う駐車枠の画像データに基づいて、最も好ましい画像が原画像か鳥瞰図画像かを判定して、好ましい画像のみをモニタ3に表示するので、駐車動作が容易であるという顕著な効果を奏する。
【0049】
例えば、バックにて駐車を開始する際に、モニタ3に原画像が表示される場合に、車両が駐車枠に接近したときには、モニタ3に表示される画像は、原画像から鳥瞰図画像に切り替えられる。
つまり、車両をバックにて駐車する際には、モニタ3に表示する画像を、運転状態等に応じて、最初から鳥瞰図画像にするか、又は、原画像から鳥瞰図画像に切り替えるので、バックでの駐車が非常に容易になるという顕著な効果を奏する。
(実施例2)
次に、実施例2について説明するが、前記実施例1と同様な箇所の説明は省略する。
【0050】
本実施例では、モニタに原画像と鳥瞰図画像とを同時に並列して表示するものである。
図7に示す様に、本実施例では、バックにて駐車する際には、モニタ31に、カメラにて撮影した原画像と(原画像又は合成画像の)鳥瞰図画像とが、並列して表示される。
【0051】
前記モニタ31の表示画面には、この両画像が表示される領域として、表示画面の左側の小領域33と右側の大領域35とが設定されており、大領域35には、現時点で運転操作にとってより必要とされる画像が表示される。
例えば前記実施例1の表示画像の切り替えの際の判定処理の様にして、強調(具体的には拡大)して表示すべき画像が拡大して表示される。これは、拡大表示が選択された画像の方が、現時点での駐車動作に対して必要性が高いからである。
【0052】
従って、本実施例では、駐車動作の状態等に応じて、モニタ31の小領域33と大領域35に表示される画像が適宜入れ替わって表示されることになる。
例えば、バックにて駐車を開始する際には、鳥瞰図画像が小領域33に小さく表示されるとともに、原画像が大領域35に大きく表示されるが、車両が駐車枠に接近した場合には、画像が切り替わって、原画像が小領域33に小さく表示されるとともに、鳥瞰図画像が大領域35に大きく表示される。
【0053】
また、本実施例では、モニタ31の画面上に、マニュアルのパネルスイッチが設定されている。
このうち、第1スイッチ37は、大領域35にカメラ画像(原画像)を表示させるスイッチである。尚、この第1スイッチ37が操作されると、小領域には何も表示されない。
【0054】
第2スイッチ39は、大領域35に鳥瞰図画像を表示させるスイッチである。尚、この第2スイッチ39が操作されると、小領域には何も表示されない。
第3スイッチ41は、小領域33及び大領域35に原画像及び鳥瞰図画像を表示させるスイッチであり、この第3スイッチ39が操作される毎に、原画像と鳥瞰図画像とが入れ替わる。
【0055】
尚、戻るスイッチ43は、元の操作モードに戻るスイッチである。
この様に、本実施例では、必要な画像を強調して(この場合は拡大して)表示するので、前記実施例1と同様な効果を奏するとともに、両画像を並列して表示するので、車両周辺の情報が多く得られ、よって、一層運転が容易になるという利点がある。
【0056】
尚、本発明は前記実施例になんら限定されるものではなく、本発明を逸脱しない範囲において種々の態様で実施しうることはいうまでもない。
例えば前記実施例1、2では、車両周辺画像処理装置について述べたが、この装置による処理を実行させる手段(プログラム)を記憶している記録媒体も、本発明の範囲である。
【0057】
例えば記録媒体としては、マイクロコンピュータとして構成される電子制御装置、マイクロチップ、フレキシブルディスク、ハードディスク、DVD、光ディスク等の各種の記録媒体が挙げられる。
つまり、上述した車両周辺画像処理装置の処理を実行させることができる例えばプログラム等の手段を記憶したものであれば、特に限定はない。
【図面の簡単な説明】
【図1】実施例1の車両周辺画像処理装置の主要構成を示す説明図である。
【図2】実施例1の車両周辺画像処理装置の電気的構成を示す説明図である。
【図3】実施例1の車両周辺画像処理装置による基本的な処理の手順を示す説明図である。
【図4】駐車の際の車両の動作を示す説明図である。
【図5】実施例1の車両周辺画像処理装置の処理を示すフローチャートである。
【図6】駐車動作の際の鳥瞰図画像を示す説明図である。
【図7】実施例2の車両周辺画像処理装置のモニタの表示画面を示す説明図である。
【符号の説明】
1…カメラ
3、31…車載モニタ(モニタ)
5…データ処理ユニット
11…座標変換部
13…駐車枠処理部
15…切替判断部
17…描画部

Claims (13)

  1. 車両周辺の画像を撮影する撮影手段と、画像を表示する表示手段とを備えた車両に対して、前記撮影手段により撮影された画像を処理して前記表示手段に表示する車両周辺画像処理装置において、
    前記撮影手段により撮影された画像のデータに基づいて鳥瞰図画像を生成する鳥瞰図画像生成手段と、
    前記表示手段に、前記撮影手段により撮影された原画像と前記鳥瞰図画像生成手段により生成された前記鳥瞰図画像とを共に表示する表示制御手段と、
    を備えたことを特徴とする車両周辺画像処理装置。
  2. 前記表示手段に、前記原画像及び前記鳥瞰図画像の両画像のうち、どちらの画像を強調して表示するかを判定する強調表示判定手段と、
    前記強調表示判定手段による判定結果に基づいて、強調表示すべき画像を前記表示手段に強調して表示する強調表示制御手段と、
    を備えたことを特徴とする前記請求項1に記載の車両周辺画像処理装置。
  3. 前記強調表示判定手段は、車両の運転状態に基づいて判定を行うことを特徴とする前記請求項2に記載の車両周辺画像処理装置。
  4. 前記車両の運転状態は、シフト位置及びハンドルの操作状態であることを特徴とする前記請求項3に記載の車両周辺画像処理装置。
  5. 前記強調表示判定手段は、前記原画像又は前記鳥瞰図画像に含まれる駐車枠の画像に基づいて判定を行うことを特徴とする前記請求項2〜4のいずれかに記載の車両周辺画像処理装置。
  6. 車両周辺の画像を撮影する撮影手段と、画像を表示する表示手段とを備えた車両に対して、前記撮影手段により撮影された画像を処理して前記表示手段に表示する車両周辺画像処理装置において、
    前記撮影手段により撮影された画像のデータに基づいて鳥瞰図画像を生成する鳥瞰図画像生成手段と、
    前記表示手段に、前記撮影手段により撮影された原画像及び前記鳥瞰図画像生成手段により生成された前記鳥瞰図画像のうち、どちらの画像を表示するかを判定する表示判定手段と、
    前記表示判定手段による判定結果に基づいて、表示すべき画像を前記表示手段に表示する選択表示制御手段と、
    を備えたことを特徴とする車両周辺画像処理装置。
  7. 前記表示判定手段は、車両の運転状態に基づいて判定を行うことを特徴とする前記請求項6に記載の車両周辺画像処理装置。
  8. 前記車両の運転状態は、シフト位置及びハンドルの操作状態であることを特徴とする前記請求項7に記載の車両周辺画像処理装置。
  9. 前記表示判定手段は、前記原画像又は前記鳥瞰図画像に含まれる駐車枠の画像に基づいて判定を行うことを特徴とする前記請求項6〜8のいずれかに記載の車両周辺画像処理装置。
  10. 前記選択表示制御手段は、前記表示判定手段による判定結果に基づいて、現在表示されている前記原画像を前記鳥瞰図画像に切り替えることを特徴とする前記請求項6〜9のいずれかに記載の車両周辺画像処理装置。
  11. 前記撮影手段により撮影される画像は、車両の後方の画像であることを特徴とする前記請求項1〜10のいずれかに記載の車両周辺画像処理装置。
  12. 前記請求項1〜11のいずれかに記載の車両周辺画像処理装置の機能を実現するための手段を有することを特徴とするプログラム。
  13. 前記請求項12に記載のプログラムの機能を実現するための手段を記憶していることを特徴とする記録媒体。
JP2003044732A 2003-02-21 2003-02-21 車両周辺画像処理装置及びプログラム並びに記録媒体 Expired - Fee Related JP4067424B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003044732A JP4067424B2 (ja) 2003-02-21 2003-02-21 車両周辺画像処理装置及びプログラム並びに記録媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003044732A JP4067424B2 (ja) 2003-02-21 2003-02-21 車両周辺画像処理装置及びプログラム並びに記録媒体

Publications (2)

Publication Number Publication Date
JP2004254219A true JP2004254219A (ja) 2004-09-09
JP4067424B2 JP4067424B2 (ja) 2008-03-26

Family

ID=33027345

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003044732A Expired - Fee Related JP4067424B2 (ja) 2003-02-21 2003-02-21 車両周辺画像処理装置及びプログラム並びに記録媒体

Country Status (1)

Country Link
JP (1) JP4067424B2 (ja)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006253872A (ja) * 2005-03-09 2006-09-21 Toshiba Corp 車両周辺画像表示装置および車両周辺画像表示方法
JP2006298256A (ja) * 2005-04-22 2006-11-02 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP2006327499A (ja) * 2005-05-27 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP2006327433A (ja) * 2005-05-26 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
EP1731366A1 (en) 2005-06-07 2006-12-13 Nissan Motor Company Limited Apparatus and method for displaying images
JP2007161193A (ja) * 2005-12-16 2007-06-28 Denso Corp 駐車支援装置
JP2007168560A (ja) * 2005-12-21 2007-07-05 Denso Corp 駐車支援装置
JP2007274378A (ja) * 2006-03-31 2007-10-18 Denso Corp 画像処理装置,画像表示システムおよびプログラム
JP2008013022A (ja) * 2006-07-05 2008-01-24 Sanyo Electric Co Ltd 車両の運転支援装置
JP2008013015A (ja) * 2006-07-05 2008-01-24 Alpine Electronics Inc 車両周辺画像生成装置および画像切替方法
JP2008056080A (ja) * 2006-08-31 2008-03-13 Alpine Electronics Inc 車両周辺画像表示装置及び表示方法
JP2008148112A (ja) * 2006-12-12 2008-06-26 Clarion Co Ltd 運転支援装置
JP2008296697A (ja) * 2007-05-30 2008-12-11 Aisin Seiki Co Ltd 駐車支援装置
JP2009253460A (ja) * 2008-04-02 2009-10-29 Denso Corp 駐車支援装置
US7734417B2 (en) 2005-05-20 2010-06-08 Nissan Motor., Ltd. Image processing device and method for parking support
WO2010070920A1 (ja) * 2008-12-19 2010-06-24 パナソニック株式会社 車両周囲画像生成装置
JP2011251681A (ja) * 2011-08-01 2011-12-15 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2012006551A (ja) * 2010-06-28 2012-01-12 Honda Motor Co Ltd 車両用画像表示装置
US8194132B2 (en) 2006-01-20 2012-06-05 Old World Industries, Llc System for monitoring an area adjacent a vehicle
JP2013075620A (ja) * 2011-09-30 2013-04-25 Mazda Motor Corp 駐車支援装置
JP2014067120A (ja) * 2012-09-25 2014-04-17 Fujitsu Ten Ltd 画像生成装置、画像表示システム、および、画像生成方法
WO2014084256A1 (ja) * 2012-11-27 2014-06-05 クラリオン株式会社 車載画像処理装置
CN104228714A (zh) * 2013-06-14 2014-12-24 华创车电技术中心股份有限公司 停车影像的提供方法
JP2015173401A (ja) * 2014-03-12 2015-10-01 株式会社デンソー 合成画像生成装置、および合成画像生成プログラム
JP2017188761A (ja) * 2016-04-05 2017-10-12 アルパイン株式会社 車両周辺表示装置及び車両周辺表示方法
JP2019110448A (ja) * 2017-12-19 2019-07-04 クラリオン株式会社 表示制御装置及び表示システム
JP2022145651A (ja) * 2021-03-19 2022-10-04 株式会社デンソー 運転者が車両を操縦するのを支援するためのシステムおよび方法

Cited By (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006253872A (ja) * 2005-03-09 2006-09-21 Toshiba Corp 車両周辺画像表示装置および車両周辺画像表示方法
JP2006298256A (ja) * 2005-04-22 2006-11-02 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP4595649B2 (ja) * 2005-04-22 2010-12-08 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
US7734417B2 (en) 2005-05-20 2010-06-08 Nissan Motor., Ltd. Image processing device and method for parking support
JP2006327433A (ja) * 2005-05-26 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP4561479B2 (ja) * 2005-05-26 2010-10-13 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
JP4595680B2 (ja) * 2005-05-27 2010-12-08 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
JP2006327499A (ja) * 2005-05-27 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
EP1731366A1 (en) 2005-06-07 2006-12-13 Nissan Motor Company Limited Apparatus and method for displaying images
JP2006341641A (ja) * 2005-06-07 2006-12-21 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
US7592928B2 (en) 2005-06-07 2009-09-22 Nissan Motor Co., Ltd. Image display device and method
JP2007161193A (ja) * 2005-12-16 2007-06-28 Denso Corp 駐車支援装置
JP4650252B2 (ja) * 2005-12-16 2011-03-16 株式会社デンソー 駐車支援装置
JP2007168560A (ja) * 2005-12-21 2007-07-05 Denso Corp 駐車支援装置
US11603042B2 (en) 2006-01-20 2023-03-14 Adc Solutions Auto, Llc System for monitoring an area adjacent a vehicle
US9637051B2 (en) 2006-01-20 2017-05-02 Winplus North America, Inc. System for monitoring an area adjacent a vehicle
US8194132B2 (en) 2006-01-20 2012-06-05 Old World Industries, Llc System for monitoring an area adjacent a vehicle
DE102007015498B4 (de) * 2006-03-31 2009-08-06 Denso Corporation, Kariya Vorrichtung und Programm zur Bildverarbeitung
JP4742953B2 (ja) * 2006-03-31 2011-08-10 株式会社デンソー 画像処理装置,画像表示システムおよびプログラム
US7903843B2 (en) 2006-03-31 2011-03-08 Denso Corporation System, program, and apparatus for image processing
JP2007274378A (ja) * 2006-03-31 2007-10-18 Denso Corp 画像処理装置,画像表示システムおよびプログラム
JP2008013015A (ja) * 2006-07-05 2008-01-24 Alpine Electronics Inc 車両周辺画像生成装置および画像切替方法
JP2008013022A (ja) * 2006-07-05 2008-01-24 Sanyo Electric Co Ltd 車両の運転支援装置
JP2008056080A (ja) * 2006-08-31 2008-03-13 Alpine Electronics Inc 車両周辺画像表示装置及び表示方法
US8553081B2 (en) 2006-08-31 2013-10-08 Alpine Electronics, Inc. Apparatus and method for displaying an image of vehicle surroundings
JP2008148112A (ja) * 2006-12-12 2008-06-26 Clarion Co Ltd 運転支援装置
CN101631695B (zh) * 2007-05-30 2011-06-15 爱信精机株式会社 驻车辅助装置
US8049778B2 (en) 2007-05-30 2011-11-01 Aisin Seiki Kabushiki Kaisha Parking assistance device
WO2008149664A1 (ja) * 2007-05-30 2008-12-11 Aisin Seiki Kabushiki Kaisha 駐車支援装置
JP2008296697A (ja) * 2007-05-30 2008-12-11 Aisin Seiki Co Ltd 駐車支援装置
JP2009253460A (ja) * 2008-04-02 2009-10-29 Denso Corp 駐車支援装置
WO2010070920A1 (ja) * 2008-12-19 2010-06-24 パナソニック株式会社 車両周囲画像生成装置
JP2012006551A (ja) * 2010-06-28 2012-01-12 Honda Motor Co Ltd 車両用画像表示装置
JP2011251681A (ja) * 2011-08-01 2011-12-15 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP2013075620A (ja) * 2011-09-30 2013-04-25 Mazda Motor Corp 駐車支援装置
JP2014067120A (ja) * 2012-09-25 2014-04-17 Fujitsu Ten Ltd 画像生成装置、画像表示システム、および、画像生成方法
CN104871204A (zh) * 2012-11-27 2015-08-26 歌乐株式会社 车载图像处理装置
JP5921715B2 (ja) * 2012-11-27 2016-05-24 クラリオン株式会社 車載画像処理装置
US9715633B2 (en) 2012-11-27 2017-07-25 Clarion Co., Ltd. Vehicle-mounted image processing device
CN104871204B (zh) * 2012-11-27 2018-01-26 歌乐株式会社 车载图像处理装置
WO2014084256A1 (ja) * 2012-11-27 2014-06-05 クラリオン株式会社 車載画像処理装置
CN104228714A (zh) * 2013-06-14 2014-12-24 华创车电技术中心股份有限公司 停车影像的提供方法
JP2015173401A (ja) * 2014-03-12 2015-10-01 株式会社デンソー 合成画像生成装置、および合成画像生成プログラム
US9873379B2 (en) 2014-03-12 2018-01-23 Denso Corporation Composite image generation apparatus and composite image generation program
JP2017188761A (ja) * 2016-04-05 2017-10-12 アルパイン株式会社 車両周辺表示装置及び車両周辺表示方法
JP2019110448A (ja) * 2017-12-19 2019-07-04 クラリオン株式会社 表示制御装置及び表示システム
JP2022145651A (ja) * 2021-03-19 2022-10-04 株式会社デンソー 運転者が車両を操縦するのを支援するためのシステムおよび方法

Also Published As

Publication number Publication date
JP4067424B2 (ja) 2008-03-26

Similar Documents

Publication Publication Date Title
JP4067424B2 (ja) 車両周辺画像処理装置及びプログラム並びに記録媒体
JP4156214B2 (ja) 車両周辺画像処理装置及び記録媒体
JP4687411B2 (ja) 車両周辺画像処理装置及びプログラム
JP4910425B2 (ja) 駐車支援装置及び駐車支援方法
JP5914114B2 (ja) 駐車支援装置、及び駐車支援方法
JP5622986B2 (ja) 画像表示システム、画像処理装置及び画像表示方法
JP2009154654A (ja) 車両用駐車支援装置および映像表示方法
JP2020120327A (ja) 周辺表示制御装置
JP2011039600A (ja) 駐車支援装置及び駐車支援方法
JP2010215027A (ja) 車両用運転支援装置
JP2009171129A (ja) 車両用駐車支援装置および画像表示方法
JP2004147083A (ja) 運転支援装置
WO2019193819A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム
JP2004252837A (ja) 車両周辺表示装置および車両周辺表示プログラム
JP2008213647A (ja) 駐車支援方法及び駐車支援装置
JP3988551B2 (ja) 車両周囲監視装置
JP2004260694A (ja) 車両周辺画像処理システム
JP4679816B2 (ja) 車両周辺表示制御装置
JP2012046124A (ja) 画像表示システム、画像処理装置、および、画像表示方法
JP3677458B2 (ja) 車両周辺画像表示装置
JP2007088577A (ja) 車両周辺画像処理システム
JP2007096496A (ja) 車両周囲表示システム
KR101861523B1 (ko) 차량 운전 보조 장치 및 방법
JP5083137B2 (ja) 運転支援装置
JP2006252577A (ja) 地図データ生成装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050422

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070309

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080108

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110118

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4067424

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120118

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130118

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140118

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees