JP2002283913A - 車両周辺表示装置、プログラムおよび記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 車両の操舵輪の舵角を検出するためのセンサ
等を備えることなく車両の予測進路を予測でき、安価で
既存の車両への搭載が容易である車両周辺表示装置を提
供する。 【解決手段】 車両周辺表示装置１は、予測進路算出処
理を実行することで、撮影時刻の異なる鳥瞰図画像を用
いて算出した車両移動パラメータを蓄積し、蓄積した車
両移動パラメータに基づき車両Ｃの過去の移動軌跡を判
別し、判別した過去の移動軌跡に基づいて予測進路を予
測する。つまり、撮影した画像の変化に基づき、車両の
未来の移動軌跡である予測進路を予測している。よっ
て、車両周辺表示装置１によれば、ステアリング舵角セ
ンサ等のセンサを車両に設ける必要が無くなることか
ら、装置の部品点数の増大を抑制でき、コスト上昇を抑
えることができる。また、既存の車両に対する追加設置
を比較的容易に実現できる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、車両の周辺を撮影
して車両周辺画像をモニタに表示する車両周辺表示装
置、コンピュータを車両周辺表示装置の各手段として機
能させるためのプログラムおよび記録媒体に関するもの
である。

【０００２】

【従来の技術】従来より、車両の周辺を撮影して、車内
に備えられる表示装置に表示する車両周辺表示装置とし
ては、例えば、車両の後部に取り付けたカメラで車両後
方の様子を撮影し、カメラで撮影した後方カメラ画像を
そのままモニタに出力（表示）する車両周辺表示装置が
知られている。

【０００３】そして、後方カメラ画像を表示する車両周
辺表示装置は、例えば、車両を後進させて駐車場（駐車
枠内）に車両を入れる後進駐車操作の際に、運転者から
の死角に存在する車両後方の障害物を表示できることか
ら、後進駐車操作を行う運転者を支援することが可能で
ある。

【０００４】また、後方カメラ画像を表示する車両周辺
表示装置としては、後進駐車操作の際に、車両の後進予
測進路を車両カメラ画像にスーパーインポーズ表示する
装置が提案されている（特開２０００−１６８４７５号
公報参照）。そして、車両の後進予測進路の予測方法に
ついては、車両に備えられたステアリング舵角センサに
より操舵輪の舵角を検出し、検出した操舵輪の舵角に基
づいて予測する方法が知られている。

【０００５】このように後進予測進路が表示可能な車両
周辺表示装置を用いることで、運転者は後進予測進路を
知ることができ、障害物等を避けて車両を後進させるこ
とができることから、後進駐車操作が不得意な運転者で
あっても、比較的容易に後進駐車操作を行うことができ
る。

【０００６】

【発明が解決しようとする課題】しかし、上述の車両周
辺表示装置においては、後進予測進路を予測するために
ステアリング舵角センサを備える必要があるため、部品
点数が増大して装置のコストが高くなるという問題があ
る。

【０００７】また、ステアリング舵角センサを備えてい
ない既存の車両に対して、ステアリング舵角センサを追
加設置することは容易ではないことから、既存の車両に
対して後進予測進路が表示可能な車両周辺表示装置を搭
載することは困難であるとともに、センサを追加設置す
る際には高額の設置費用が必要となる。

【０００８】なお、駐車操作時における車両周辺の表示
は、後進駐車操作時に限らず、前進駐車操作時にも、運
転者を支援することができる。例えば、運転者が初心者
であり、壁に囲まれた幅の狭い駐車領域に右折（あるい
は左折）しながら進入して駐車する場合には、車両前方
角部と駐車領域を囲む壁との距離を正確に把握できずに
衝突する可能性が高い。このような状況下で、車両と壁
の位置を鳥瞰図画像で表示することで、初心者である運
転者は、車両と壁との位置関係を容易に把握することが
でき、前進駐車操作を支援することが可能となる。

【０００９】そこで、本発明は上記問題に鑑みなされた
ものであり、車両の操舵輪の舵角を検出するためのセン
サ等を備えることなく車両の予測進路を予測でき、安価
で既存の車両への搭載が容易である車両周辺表示装置を
提供することを目的とする。

【００１０】

【課題を解決するための手段】かかる目的を達成するた
めになされた請求項１に記載の発明は、撮影手段により
撮影された車両周辺の画像を処理して表示手段に表示す
る車両周辺表示装置であり、撮影時刻の異なる車両周辺
画像における一致領域の移動距離および移動方向に基づ
いて、車両の予測進路を予測する点に特徴がある。

【００１１】つまり、請求項１に記載の車両周辺表示装
置は、撮影手段で撮影した車両周辺の画像を処理して表
示手段に表示するにあたり、まず、鳥瞰図画像生成手段
が、撮影手段で撮影した画像を撮影手段を視点として投
影した地上面座標系のデータに変換して鳥瞰図画像を生
成する。次に、進路予測手段が、時間的に連続する少な
くとも２つの鳥瞰図画像における一致領域の移動距離お
よび移動方向を表す移動ベクトルを求めるとともに蓄積
し、この蓄積した複数の移動ベクトルに基づき車両の予
測進路を予測する。そして、表示処理手段が、進路予測
手段にて予測した予測進路を表示手段に表示している。

【００１２】ここで、２つの鳥瞰図画像における一致領
域とは、同一の撮影対象を表示している表示領域のこと
であり、この一致領域は、車両の移動に応じて移動する
ことになる。よって、時間的に連続する少なくとも２つ
の鳥瞰図画像における一致領域の移動距離および移動方
向は、車両の移動距離および移動方向と密接に関係する
ことから、移動ベクトルに基づいて車両の移動距離およ
び移動方向を判別することが可能である。なお、移動方
向に関しては、一致領域の移動方向と車両の移動方向と
は反対方向となる。

【００１３】このため、車両周辺表示装置は、蓄積され
た移動ベクトルを用いることで車両の過去の移動軌跡を
判別でき、また、判別した過去の移動軌跡に基づいて未
来の移動軌跡である予測進路を予測することが可能とな
る。なお、予測進路は、たとえば、線形予測法などを用
いて予測することができる。

【００１４】このように、撮影時刻の異なる画像に基づ
いて車両の予測進路を予測することで、ステアリング舵
角センサ等を車両に設けることなく、車両の予測進路を
予測することができる。したがって、本発明（請求項
１）の車両周辺表示装置によれば、車両の予測進路を予
測するにあたり、ステアリング舵角センサ等のセンサを
車両に設ける必要が無くなることから、装置の部品点数
の増大を抑制でき、コスト上昇を抑えることができる。
また、ステアリング舵角センサ等のセンサが不要である
ことから、この車両周辺表示装置は、既存の車両に対す
る追加設置を比較的容易に実現することができる。

【００１５】そして、上述（請求項１）の車両周辺表示
装置においては、請求項２に記載のように、領域判別手
段が、鳥瞰図画像生成手段により生成された第１鳥瞰図
画像と、この第１鳥瞰図画像の生成時よりも後に生成さ
れた第２鳥瞰図画像とを比較して、その一致領域と不一
致領域とを判別し、周辺画像作成手段が、領域判別手段
により判別された不一致領域を第２鳥瞰図画像に加味し
た車両周辺鳥瞰画像を作成して、表示処理手段が、予測
進路を車両周辺鳥瞰画像に重ね合わせた予測進路合成画
像を表示手段に表示するとよい。

【００１６】つまり、車両周辺鳥瞰画像は、最新の車両
周辺状況を表す最新情報である第２鳥瞰図画像に対し
て、過去の車両周辺状況を表す第１鳥瞰図画像における
不一致領域を加味したものであり、車両周辺のより広域
な範囲の状況を表すことができる。このため、車両周辺
鳥瞰画像を表示装置に表示することで、運転者に対して
車両周辺に関するより多くの情報を提供することができ
る。

【００１７】そして、車両周辺鳥瞰画像に対して予測進
路を重ね合わせた予測進路合成画像は、広域な車両周辺
の状況に加えて、車両の予測進路と車両周辺の障害物等
との位置関係に関する情報を、運転者に対して提供する
ことができる。よって、本発明（請求項２）の車両周辺
表示装置によれば、運転者は、車両の予測進路と車両周
辺の障害物等との位置関係を容易に把握でき、衝突の危
険を回避してより安全に車両を運転することができる。

【００１８】ここで、上述（請求項１または請求項２）
の車両周辺表示装置においては、撮影手段の設置位置が
車両の前後左右のいずれであっても、車両の移動に伴い
一致領域が移動することから、移動ベクトルを求めるこ
とは可能である。しかし、運転者が、車両の予測進路お
よび車両周囲の画像を必要とする状況の一つとしては、
車両を後進させながら所定の駐車領域に車両を移動させ
る後進駐車操作時が挙げられる。

【００１９】そこで、上述（請求項１または請求項２）
の車両周辺表示装置においては、請求項３に記載のよう
に、撮影手段により撮影される画像が車両の後方の画像
であるとよい。つまり、車両後方の画像を撮影すること
で、運転者は車両後方の障害物などを早期に発見するこ
とが可能となるとともに、予測進路と障害物等との位置
関係をより正確に把握することができ、この結果、後進
駐車操作時における運転者の負担を軽減することができ
る。

【００２０】よって、請求項３に記載の車両周辺表示装
置によれば、運転者に対して車両の後進予測進路の周囲
状況を提供することができ、運転者はより安全に後進駐
車操作を行うことができる。また、上述（請求項１から
請求項３のいずれか）の車両周辺表示装置は、請求項４
に記載のように、表示手段に予測進路合成画像を表示す
る場合に、自車両を示す画像を加えて表示するとよい。

【００２１】これにより、自車両と周囲配置物との相対
位置関係が画像として明確に表示されることになり、運
転者は、自車両の位置を容易に把握することができる。
よって、本発明（請求項４）の車両周辺表示装置によれ
ば、運転者が自車両の位置を容易に把握でき、駐車操作
時等における運転者の負担をさらに軽減することが可能
となる。

【００２２】次に、請求項５に記載の発明は、コンピュ
ータを、請求項１から請求項４のいずれかに記載の車両
周辺表示装置における各手段として機能させるためのプ
ログラムである。つまり、上述した車両周辺表示装置の
各手段（鳥瞰図画像生成手段、進路予測手段、表示処理
手段、領域判別手段、周辺画像作成手段）をコンピュー
タシステムにて実現する機能は、例えば、コンピュータ
システム側で起動するプログラムとして備えることがで
きる。従って、このプログラムを利用することにより、
好適な車両周辺表示を行うことができる。

【００２３】さらに、請求項６に記載の発明は、コンピ
ュータを、請求項１から請求項４のいずれかに記載の車
両周辺表示装置における各手段として機能させるための
プログラムを記録したコンピュータ読み取り可能な記録
媒体である。コンピュータシステムで実行されるプログ
ラムは、例えば、フロッピー（登録商標）ディスク、光
磁気ディスク、ＣＤ−ＲＯＭ、ハードディスク等のコン
ピュータ読み取り可能な記録媒体に記録し、必要に応じ
てコンピュータシステムにロードして起動することによ
り用いることができる。この他、ＲＯＭやバックアップ
ＲＡＭをコンピュータ読み取り可能な記録媒体として前
記プログラムを記録しておき、このＲＯＭあるいはバッ
クアップＲＡＭをコンピュータシステムに組み込んで用
いても良い。

【００２４】

【発明の実施の形態】以下に、本発明を適用した車両周
辺表示装置１の実施例を説明する。本実施例の基本的な
システム構成を図１および図２を用いて説明する。図１
に示す様に、本実施例の車両周辺表示装置１は、自動車
（以下、車両Ｃという）の後部に配置されたカメラ２
（例えばＣＣＤカメラ）と、車内のダッシュボード等に
配置された車載モニタ３（例えば液晶ディスプレイ）
と、画像処理を行う画像処理ユニット５を備えている。

【００２５】そして、画像処理ユニット５は、マイクロ
コンピュータを主要部とする画像データの処理を行う電
子装置であり、機能ブロック図は図２に示すように表す
ことができる。図２に示すように、画像処理ユニット５
は、機能的には、カメラ２で撮影した画像データの座標
変換を行って鳥瞰図画像を生成する座標変換部１１と、
時間的に連続した２つの鳥瞰図画像を取り込んでその比
較を行うマッチング部１３と、その２つの鳥瞰図画像の
不一致部分からカメラ２の視野から外れた領域を推定す
る領域推定部１５と、前記２つの鳥瞰図画像の一致部分
から車両の予測経路を予測する進路予測部１７と、車載
モニタ３に表示する画像を描画する描画部１９と、を備
えている。なお、画像処理ユニット５は、カメラ２と一
体の構造となっていてもよい。

【００２６】座標変換部１１は、カメラ２で撮影した車
両周辺の実際の映像を鳥瞰図画像に変換する処理を行っ
ており、従来技術（例えば、特願平１０−２１１８４９
号公報に記載の技術）である透視変換を用いて画像の座
標変換を行うことで、鳥瞰図画像を生成する。

【００２７】マッチング部１３は、後述するブロックマ
ッチング法により、撮影時刻の異なる２つの鳥瞰図画像
の比較を行い、それぞれの画像が一致する領域（以下、
一致領域）と画像が一致しない領域（不一致領域）とを
判別すると共に、一致領域に基づいて移動ベクトルを算
出している。そして、マッチング部１３は、一致領域と
不一致領域に関する情報を領域推定部１５に送り、移動
ベクトルに関する情報を進路予測部１７に送るように処
理を行う。

【００２８】領域推定部１５は、マッチング部１３で比
較を行った２つの鳥瞰図画像のうちの撮影時刻が古い鳥
瞰図画像における不一致領域を、撮影時刻の新しい鳥瞰
図画像に付加した車両周辺鳥瞰画像を生成する。生成し
た車両周辺鳥瞰画像の情報は、描画部１９に送信され
る。

【００２９】進路予測部１７は、後述する予測進路算出
処理を実行することで、マッチング部１３で算出された
移動ベクトルに基づき、車両の予測進路を予測する。そ
して、予測進路の情報を描画部１９に送信する。描画部
１９は、領域推定部１５から受信する車両周辺鳥瞰画像
に進路予測部１７から受信する予測進路を重ね合わせた
予測進路合成画像を生成すると共に、車載モニタ３に予
測進路合成画像を表示する。

【００３０】ここで、第１鳥瞰図画像ＦＬ１と第１鳥瞰
図画像ＦＬ１の生成時よりも後に生成された第２鳥瞰図
画像ＦＬ２とを比較して、移動ベクトルＭＶを算出する
方法を、図３に示す説明図に基づき説明する。本実施例
での移動ベクトルの算出は、いわゆるブロックマッチン
グ法を用いている。ブロックマッチング法は、例えば、
第２鳥瞰図画像ＦＬ２の表示領域の一部であるマクロブ
ロックＭＢＬ（図３では、１６×１６画素）と、第１鳥
瞰図画像ＦＬ１の表示領域のうちマクロブロックＭＢＬ
よりも大きい探索範囲ＳＡ（図３では、３２×３２画
素）とを比較し、探索範囲ＳＡのうち、マクロブロック
ＭＢＬに最も似ている部分を特定する方法である。

【００３１】具体的には、図３に示すように、第２鳥瞰
図画像ＦＬ２の表示領域の一部であるマクロブロックＭ
ＢＬと、第１鳥瞰図画像ＦＬ１の探索範囲ＳＡのうちマ
クロブロックＭＢＬと同じ大きさの比較領域ＣＡとの間
で、対応する各画素をすべて比較し、各画素の比較差分
値の合計値を算出する。そして、探索範囲ＳＡにおける
比較領域ＣＡを１画素ずつ上下方向および左右方向に順
次移動させながら、探索範囲ＳＡのすべての領域におけ
る比較差分合計値を算出し、比較差分合計値が最も小さ
い比較領域ＣＡを、マクロブロックＭＢＬとの一致領域
と判断する。この結果、第１鳥瞰図画像ＦＬ１における
一致領域の位置から第２鳥瞰図画像におけるマクロブロ
ックＭＢＬの位置にかけての移動方向および移動距離が
判明し、この移動方向および移動距離を移動ベクトルＭ
Ｖとする。

【００３２】そして、第２鳥瞰図画像ＦＬ２においてマ
クロブロックＭＢＬを複数箇所に設定して、それぞれの
マクロブロックＭＢＬごとに移動ベクトルＭＶを算出
し、これら複数の移動ベクトルＭＶに基づき、第１鳥瞰
図画像ＦＬ１から第２鳥瞰図画像ＦＬ２にかけての車両
移動パラメータＭＶＡを算出する。なお、車両の移動
は、ある地点を中心とする回転移動と見なすことができ
るため、本実施例における車両移動パラメータは、回転
中心、回転角度および回転半径で表される。

【００３３】なお、本実施例の車両周辺表示装置１で
は、第２鳥瞰図画像ＦＬ２におけるマクロブロックＭＢ
Ｌを１５箇所に設定している。このようにして、車両移
動パラメータＭＶＡを算出する処理は、マッチング部１
３にて実行される。

【００３４】次に、車両Ｃが円周方向に移動した場合に
おける、鳥瞰図画像に含まれる画像領域の移動概念を示
す説明図を図４に示す。なお、図４（ａ）は、移動前の
車両Ｃおよび移動前の鳥瞰図画像に含まれる第１画像領
域ＦＬＡ１を示し、図４（ｂ）は、移動後の車両Ｃ、第
１画像領域ＦＬＡ１および移動後の鳥瞰図画像に含まれ
る第２画像領域ＦＬＡ２を示している。

【００３５】そして、車両Ｃは、図４（ａ）に示す状態
から点Ｏを回転中心とし、回転半径Ｒとして回転角度θ
だけ回転移動すると、図４（ｂ）に示す位置に移動する
ことになる。このとき、移動前の第１画像領域ＦＬＡ１
と、移動後の第２画像領域ＦＬＡ２とにおける同一格子
点は、図４（ｂ）に示す矢印のように移動することにな
り、画像領域における複数の格子点の移動距離および移
動方向は、車両Ｃの回転中心、回転角度および回転半径
に応じて、各格子点毎にそれぞれ異なるものとなる。換
言すれば、複数の格子点のそれぞれの移動距離および移
動方向が定まれば、車両移動パラメータＭＶＡを特定す
ることができことになり、複数の移動ベクトルを用いる
ことで、複数の格子点のそれぞれの移動距離および移動
方向に基づき、車両移動パラメータＭＶＡを特定するこ
とができる。

【００３６】なお、複数の格子点が、前述の図３に示す
マクロブロックＭＢＬに相当するものである。また、画
像領域における複数の格子点の移動距離および移動方向
は、車両の実際の移動方向とは方向が反対となることを
考慮して、車両移動パラメータＭＶＡを算出する。

【００３７】次に、車両Ｃを後進させて駐車区画ＰＡに
駐車する後進駐車操作時における鳥瞰図画像についての
説明図を、図５（ａ）および図５（ｂ）に示す。なお、
図５（ａ）は、後進駐車操作の開始直後である時刻ｔ１
における第１鳥瞰図画像ＦＬ１であり、図５（ｂ）は、
時刻ｔ１から一定時間が経過した時刻ｔ２における第２
鳥瞰図画像ＦＬ２である。

【００３８】また、図５（ａ）には、時刻ｔ１における
撮影領域である第１画像領域ＦＬＡ１を点線で囲まれた
領域として示し、図５（ｂ）には、第１画像領域ＦＬＡ
１を点線で、時刻ｔ２における撮影領域である第２画像
領域ＦＬＡ２を一点鎖線で囲まれた領域として示してい
る。さらに、図５（ｂ）において、第１画像領域ＦＬＡ
１と第２画像領域ＦＬＡ２とが重なり合う領域が一致領
域ＡＣであり、第１画像領域ＦＬＡ１および第２画像領
域ＦＬＡ２のうち一致領域ＡＣ以外の領域が不一致領域
である。このうち、一致領域ＡＣは、網掛け模様を付し
て表している。

【００３９】そして、図５（ａ）および図５（ｂ）から
判るように、最新の撮影領域である第２画像領域ＦＬＡ
２のみでなく、不一致領域を付加することにより、車両
周辺における広い範囲の鳥瞰図画像を表示することがで
きる。また、図５（ａ）および図５（ｂ）から判るよう
に、車両の移動に応じて画像領域の位置が変化すること
から、この画像領域の位置の変化について、前述したブ
ロックマッチング法を用いることで、第１鳥瞰図画像Ｆ
Ｌ１から第２鳥瞰図画像ＦＬ２にかけての複数の移動ベ
クトルＭＶを算出できることが判る。そして、算出した
複数の移動ベクトルＭＶを用いることで、車両が移動し
た際の車両移動パラメータＭＶＡを求めることができ
る。

【００４０】次に、画像処理ユニット５の進路予測部１
７にて実行される予測進路算出処理の処理内容を、図６
に示すフローチャートを用いて説明する。なお、予測進
路算出処理は、画像処理ユニット５が起動されると共に
進路予測部１７にて処理が開始される。

【００４１】なお、画像処理ユニット５が起動されるの
は、後進駐車操作の開始時期であり、例えば、車両Ｃの
シフトレンジがリバース（後進）であるか否かを判断
し、シフトレンジがリバースとなった時点を後進駐車操
作の開始時期である判定する。また、画像処理ユニット
５が起動されると、進路予測部１７の他に、座標変換部
１１、マッチング部１３、領域推定部１５および描画部
１９がそれぞれの処理を開始する。

【００４２】そして、予測進路算出処理が開始される
と、まず、Ｓ１１０（Ｓはステップを表す）では、カウ
ンタｎを初期化（カウンタｎに０を代入）する。なお、
このカウンタｎは、蓄積した車両移動パラメータＭＶＡ
の個数をカウントするためのものである。

【００４３】次のＳ１２０では、マッチング部１３で生
成された最新の車両移動パラメータＭＶＡのデータを、
第ｎ車両移動パラメータＭＶＡｎとして取り込む処理を
行う。なお、第ｎ車両移動パラメータＭＶＡｎにおける
「ｎ」は、カウンタｎと同じ数字を表している。

【００４４】続くＳ１３０では、カウンタｎをインクリ
メント（１加算）する。次のＳ１４０では、カウンタｎ
が所定データ数Ｆより大きいか否かを判断しており、カ
ウンタｎが所定データ数Ｆより大きい場合には肯定判定
されてＳ１５０に移行し、カウンタｎが所定データ数Ｆ
以下である場合には否定判定されてＳ１６０に移行す
る。なお、所定データ数Ｆには、進路予測に必要な移動
ベクトルの個数（例えば、１０個以上）が設定されてい
る。

【００４５】そして、Ｓ１４０で肯定判定されてＳ１５
０に移行すると、Ｓ１５０では、最新のＦ個の車両移動
パラメータ（ＶＭＡｎ-F＋1 からＶＭＡｎまで）を用い
て、線形予測法に基づき、車両Ｃの予測進路を予測す
る。なお、進路予測には、線形予測法以外の予測方法を
用いても良い。

【００４６】また、Ｓ１４０で否定判定されるか、ある
いはＳ１５０の処理が終了すると、Ｓ１６０に移行し、
Ｓ１６０では、Ｓ１２０で取り込んだ最新の第ｎ車両移
動パラメータＭＶＡｎを、画像処理ユニット５の内部に
備えられる図示しない記憶領域（メモリ）に蓄積する処
理を行う。この時、記憶領域には、最大でＦ個の車両移
動パラメータが蓄積可能であり、（Ｆ＋１）個目の車両
移動パラメータを蓄積する際には、最も古い車両移動パ
ラメータを消去して最新の車両移動パラメータを蓄積し
ている。この結果、記憶領域に蓄積されるＦ個の車両移
動パラメータは、常に最新の状態となる。

【００４７】そして、Ｓ１６０の処理が終了すると、Ｓ
１２０に移行し、再び車両移動パラメータを取り込む処
理を行う。この後は、Ｓ１２０からＳ１６０までの処理
を繰り返し実行することで、最新のＦ個の車両移動パラ
メータに基づき車両Ｃの予測進路を更新する。

【００４８】このあと、進路予測部１７では、画像処理
ユニット５が停止するまで、上述した予測進路算出処理
が継続して実行され、画像処理ユニット５の停止ととも
に予測進路算出処理も停止する。なお、画像処理ユニッ
ト５が停止されるのは、後進駐車操作の終了時期であ
り、例えば、車両Ｃのシフトレンジがリバース（後進）
から他のレンジに変更されると後進駐車操作が終了した
と判定する。

【００４９】ここで、予測進路を車両周辺鳥瞰画像に重
ね合わせた予測進路合成画像ＭＦＬは、例えば、図５
（ｃ）に示すように車載モニタ３に表示される。このよ
うに、駐車区画ＰＡに対して予測進路ＤＬが重なること
で、運転者は車両Ｃが的確に駐車区画ＰＡに進入するこ
とを確認でき、後進駐車操作時の運転者の負担を軽減す
ることが可能となる。

【００５０】なお、このとき、領域推定部１５は、最新
の鳥瞰図画像に基づき車両Ｃの現在位置を判定し、車両
Ｃの現在位置に関する情報を描画部１９に送っており、
描画部１９は、車両Ｃの現在位置を予測進路合成画像に
対して重ね合わせて、車載モニタ３に表示する。

【００５１】以上、説明したように、本実施例の車両周
辺表示装置１によれば、撮影時刻の異なる２つの鳥瞰図
画像を用いて移動ベクトルを算出すると共に蓄積し、蓄
積した移動ベクトルに基づき車両の過去の移動軌跡を判
別して、判別した過去の移動軌跡に基づいて未来の移動
軌跡である予測進路を予測している。つまり、撮影した
画像の変化に基づき、車両の未来の移動軌跡である予測
進路を予測している。

【００５２】よって、本実施例の車両周辺表示装置１を
用いる場合には、車両の予測進路を予測するにあたり、
ステアリング舵角センサ等のセンサを車両に設ける必要
が無くなることから、装置の部品点数の増大を抑制で
き、コスト上昇を抑えることができる。また、ステアリ
ング舵角センサ等のセンサが不要であることから、この
車両周辺表示装置１は、既存の車両に対する追加設置を
比較的容易に実現することができる。

【００５３】また、本実施例の車両周辺表示装置１は、
領域推定部１５にて生成した車両周辺鳥瞰画像を表示す
るため、運転者に対してより広域な車両周辺に関する情
報を提供することができる。さらに、予測進路を重ね合
わせた予測進路合成画像を表示するため、運転者は、車
両の予測進路と車両周辺の障害物等との位置関係を容易
に把握でき、衝突の危険を回避してより安全に車両を運
転することができる。

【００５４】そして、本実施例の車両周辺表示装置１
は、カメラ２が車両後部に配置されていることから、運
転者は車両後方の障害物などを早期に発見することが可
能となるとともに、予測進路と車両後方の障害物等との
位置関係をより正確に把握することができ、この結果、
後進駐車操作時における運転者の負担を軽減することが
できる。

【００５５】また、本実施例の車両周辺表示装置１は、
車両Ｃの現在位置が、予測進路合成画像に対して重ね合
わせ表示されることから、車両Ｃと周囲配置物との相対
位置関係を画像として明確に表示することができる。こ
れにより、運転者は、周囲配置物に対する自車両の位置
を容易に把握することができ、駐車操作時等における負
担がさらに軽減される。

【００５６】なお、本実施例の車両周辺表示装置におい
ては、カメラ２が特許請求の範囲における撮影手段に相
当し、車載モニタ３が表示手段に相当し、座標変換部１
１が鳥瞰図画像生成手段に相当し、マッチング部１３お
よび進路予測部１７が進路予測手段に相当し、描画部１
９が表示処理手段に相当し、マッチング部１３が領域判
別手段に相当し、周辺画像作成手段が描画部１９に相当
するものである。

【００５７】以上、本発明の実施例について説明した
が、本発明は、上記実施例に限定されることはなく、種
々の態様をとることができる。例えば、コンピュータ
を、車両周辺表示装置の画像処理ユニット５での各処理
（画像の座標変換処理、予測進路や移動ベクトルの算出
処理など）の実行手段として機能させるためのプログラ
ムについても、本発明の範囲に含まれる。このプログラ
ムを利用することにより、コンピュータシステムを用い
た好適な車両周辺表示を行うことができる。

【００５８】また、コンピュータを、車両周辺表示装置
の画像処理ユニット５での各処理の実行手段として機能
させるためのプログラムを記録したコンピュータ読み取
り可能な記録媒体についても、本発明の範囲に含まれ
る。コンピュータシステムで実行されるプログラムは、
例えば、フロッピーディスク、光磁気ディスク、ＣＤ−
ＲＯＭ、ハードディスク等のコンピュータ読み取り可能
な記録媒体に記録することができる。そして、記録媒体
に記録したプログラムを必要に応じてコンピュータシス
テムにロードして起動することにより、コンピュータシ
ステムを用いた好適な車両周辺表示を行うことができ
る。

【００５９】なお、ＲＯＭやバックアップＲＡＭをコン
ピュータ読み取り可能な記録媒体として前記プログラム
を記録しておき、このＲＯＭあるいはバックアップＲＡ
Ｍをコンピュータシステムに組み込んで用いても良い。
そして、マッチング部は、撮影時刻の異なる２つの鳥瞰
図画像の比較を行い、それぞれの画像が一致する領域
（以下、一致領域）と画像が一致しない領域（不一致領
域）とを判別すると共に、一致領域に基づき移動ベクト
ルを算出できれば良く、判別方法は、ブロックマッチン
グ法に限定されることなく、他の判別方法を用いても良
い。

【００６０】また、領域推定部は、２個以上の鳥瞰図画
像を用いて車両周辺鳥瞰画像を生成するよう構成しても
良い。例えば、車両周辺鳥瞰画像と最新の鳥瞰図画像と
の不一致領域を判別し、車両周辺鳥瞰画像に対して最新
の鳥瞰図画像における不一致領域を付加する処理を繰り
返し行うことで、最新の車両周辺鳥瞰画像を生成しても
良い。つまり、前回の車両周辺鳥瞰画像に対して、新た
な不一致領域を逐次付加することで、最新の鳥瞰図画像
を生成するのである。この場合、車両周辺鳥瞰図像は、
過去の全ての鳥瞰図画像に基づき生成されることにな
り、不一致領域が付加されるに従い表示可能な領域が広
がることから、更に広範囲の車両周辺の状況を運転者に
提供することが可能となる。

【００６１】さらに、車両周辺表示装置は、コンピュー
タを用いて構成されたカーナビゲーション装置と一体に
構成してもよい。つまり、後進駐車操作時には、カーナ
ビゲーションシステムとしての処理は少なく、コンピュ
ータの処理負荷が低くなることから、車両周辺表示装置
としての各処理を実行することができる。この結果、１
台のコンピュータを無駄なく有効に利用することがで
き、車両周辺表示装置とカーナビゲーション装置とを別
個独立に備える場合に比べて車載機器を設置するスペー
スを縮小することができる。

【図面の簡単な説明】

【図１】 車両周辺表示装置の主要構成を示す説明図で
ある。

【図２】 車両周辺表示装置の主要構成および画像処理
ユニットの機能ブロックを示す説明図である。

【図３】 ２つの画像の一致領域を検出する方法を示す
説明図である。

【図４】 （ａ）は、移動前の車両および移動前の第１
画像領域を示す説明図であり、（ｂ）は、移動後の車
両、移動前の第１画像領域および移動後の第２画像領域
を示す説明図である。

【図５】 （ａ）は、時刻ｔ１における第１鳥瞰図画像
であり、（ｂ）は、時刻ｔ２における第２鳥瞰図画像で
あり、（ｃ）は、予測進路合成画像である。

【図６】 画像処理ユニットの進路予測部にて実行され
る予測進路算出処理の処理内容を、示すフローチャート
である。

【符号の説明】

１…車両周辺表示装置、２…カメラ、３…車載モニタ、
５…画像処理ユニット、１１…座標変換部、１３…マッ
チング部、１５…領域推定部、１７…進路予測部、１９
…描画部、Ｃ…車両。

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｂ６０Ｒ 21/00 ６２８ Ｂ６０Ｒ 21/00 ６２８Ｄ Ｇ０６Ｔ 1/00 ３３０ Ｇ０６Ｔ 1/00 ３３０Ａ 7/20 7/20 Ｂ １００ １００ 17/50 17/50 Ｇ０８Ｇ 1/16 Ｇ０８Ｇ 1/16 Ｃ (72)発明者 柳川 博彦 愛知県刈谷市昭和町１丁目１番地 株式会 社デンソー内 (72)発明者 今西 勝之 愛知県西尾市下羽角町岩谷14番地 株式会 社日本自動車部品総合研究所内 Ｆターム(参考） 5B050 BA04 DA02 EA07 EA27 FA02 5B057 AA16 BA02 CA12 CA16 CB13 CB16 CC02 CD20 DA08 DA16 DB02 DC32 5H180 AA01 BB13 CC04 LL02 LL17 5L096 AA09 BA04 CA02 DA01 DA04 EA35 FA26 GA08 HA04

Claims (6)

【特許請求の範囲】
1. 【請求項１】 車両周辺の画像を撮影する撮影手段と、
   画像を表示する表示手段とを備えた車両において、前記
   撮影手段により撮影された画像を処理して前記表示手段
   に表示する車両周辺表示装置であって、 前記撮影手段で撮影した画像を、前記撮影手段を視点と
   して投影した地上面座標系のデータに変換して鳥瞰図画
   像を逐次生成する鳥瞰図画像生成手段と、 該鳥瞰図画像生成手段により生成された前記鳥瞰図画像
   のうち、時間的に連続する少なくとも２つの鳥瞰図画像
   における一致領域の移動距離および移動方向を表す移動
   ベクトルを求めるとともに蓄積し、該蓄積した複数の移
   動ベクトルに基づき、当該車両の予測進路を予測する進
   路予測手段と、 該進路予測手段にて予測した前記予測進路を前記表示手
   段に表示する表示処理手段と、 を備えたことを特徴とする車両周辺表示装置。
2. 【請求項２】 前記鳥瞰図画像生成手段により生成され
   た第１鳥瞰図画像と、該第１鳥瞰図画像の生成時よりも
   後に生成された第２鳥瞰図画像とを比較して、その一致
   領域と不一致領域とを判別する領域判別手段と、 該領域判別手段により判別された前記不一致領域を前記
   第２鳥瞰図画像に加味した車両周辺鳥瞰画像を作成する
   周辺画像作成手段と、を備え、 前記表示処理手段が、前記予測進路を前記車両周辺鳥瞰
   画像に重ね合わせた予測進路合成画像を、前記表示手段
   に表示すること、 を特徴とする請求項１に記載の車両周辺表示装置。
3. 【請求項３】 前記撮影手段により撮影される画像は、
   車両の後方の画像であること、を特徴とする請求項１ま
   たは請求項２に記載の車両周辺表示装置。
4. 【請求項４】 前記表示手段に前記予測進路合成画像を
   表示する場合に、自車両を示す画像を加えて表示するこ
   と、 を特徴とする請求項１から請求項３のいずれかに記載の
   車両周辺表示装置。
5. 【請求項５】 コンピュータを、前記請求項１から請求
   項４のいずれかに記載の車両周辺表示装置における各手
   段として機能させるためのプログラム。
6. 【請求項６】 コンピュータを、前記請求項１から請求
   項４のいずれかに記載の車両周辺表示装置における各手
   段として機能させるためのプログラムを記録したコンピ
   ュータ読み取り可能な記録媒体。