JP2000272415A

JP2000272415A - 運転支援画像合成装置

Info

Publication number: JP2000272415A
Application number: JP11076924A
Authority: JP
Inventors: Nobuaki Miki; 修昭三木; Seiji Sakakibara; 聖治榊原
Original assignee: Aisin AW Co Ltd
Current assignee: Aisin AW Co Ltd
Priority date: 1999-03-19
Filing date: 1999-03-19
Publication date: 2000-10-03
Anticipated expiration: 2019-03-19
Also published as: JP4207298B2

Abstract

(57)【要約】【課題】目視し得ない死角部分を含む撮像装置からの
画像を、運転席から外界を見た実際の視界に近似するよ
うに応答性よく表示可能とする低コストの運転支援画像
合成装置を実現する。【解決手段】運転支援画像合成装置は、撮像装置と画
像処理装置からなる。撮像装置は、自車の角部９０’と
その近傍の外界と自車中心線Ｎ_L，Ｎ_R延長上の無限遠
方Ｐ_L，Ｐ_Rとを撮像範囲に含み、その取込み画像が左
右対称かつ無限遠方の水平線Ｈ_L，Ｈ_Rが自車中心線延
長上で水平となるように自車の左右両角部に設置する。
撮像装置の取込み画像を処理する画像処理装置は、両撮
像装置の取込み画像を相互に接続して疑似連続画面を合
成するようにした。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、運転者の死角とな
る車両周辺の情報を取り込む撮像装置により取得される
部分情報画像を、実際の視界に近似させた連続画像に合
成する運転支援画像合成装置に関する。

【０００２】

【従来の技術】自動車は運転者の四囲を囲む車体を持つ
ことから、運転者の視界が窓部を除く車体部により遮ら
れる死角部分を生じることは避け難いが、狭い道路上で
の特に背の低い障害物の回避や、移動する障害物に対す
る安全の確保、更には道路に描かれた白線に対する自車
位置の確認上、死角の解消が望ましい。そこで、こうし
た死角部分の情報が間接的に得られるように、車両に
は、従来から、大型車両のアンダーミラーに代表される
ような、死角解消手段が設置されている。また、近時の
映像機器の高性能化と小型化に伴って、これを利用した
装置も種々提案されている。こうした提案の中で、特に
単一画像で広い死角範囲をカバーするに有効と考えられ
るものに、特開平９−１４２２１０号公報に開示の技術
がある。この従来技術は、外界の情報を取り込む撮像装
置と、該撮像装置が取り込む画像を表示するモニターと
から構成され、撮像部が車両の後側上方ほぼ中央部に、
車両の後方直前領域から水平領域までを一画面に取り込
むように取り付けられたものである。この場合、車両後
端部の一部分（例えばバンパー）が画面下方に、また無
限遠方（水平線）が画面上方に位置する撮像画像が取得
される。

【０００３】

【発明が解決しようとする課題】ところで、上記従来技
術のように、撮像装置を車両のほぼ中央に設置する方法
では、特に乗用車のような車高の低い車両においては、
大型車両のように撮像部の位置を高く設定することがで
きない。そのため、障害物回避に最も重要な車両角部に
関して、バンパーの角部外縁から地上に下ろした垂線
と、車両中央上部の撮像部とバンパーの角部外縁とを結
ぶ直線とのなす角度が大きくなってしまい、得られる画
像としては、バンパーの角部の背景に障害物が重なって
見えるものとなってしまう。この結果、車両の角部と障
害物との間の距離感が一層つかみ辛くなる。また、上記
の角度が大きいことで、バンパーの角部のごく近傍に死
角部分が残ってしまうため、直近の背の低い障害物や道
路上の白線を確認することができない。

【０００４】他方、画像の歪みを少なくして的確な距離
感を得るべく、車両各部に配した個々の撮像装置により
死角部分を別個にカバーし、車両操作に応じて必要とな
る各部の情報を同時あるは必要に応じて適宜選択して取
得可能とすることも考えられないではない。こうした技
術として、特開平５−３１００７８号公報に開示の技術
がある。しかしながら、一般に、モニター画面による情
報は、それが車両のどの方向に対応し、どのような視点
で見たものかを直観的かつ迅速につかむことが容易では
なく、たとえそれができたとしても、運転操作による車
両の挙動と画像の変化とがかけ離れている場合、単に車
両各部の情報を取得可能としても、煩多な運転操作中に
それらが有効に活用されるとは限らない。

【０００５】したがって、上記のような分割された情報
を有効に利用可能とするには、個々に取得される部分情
報の羅列や取捨選択ではなく、総合して、一見して実視
界との対応が可能な、自然かつ広い視界範囲をカバーす
る情報として表示するのが有効な方法である。そこで想
起されるのが、画像のつなぎ合わせであるが、比較的画
角が狭い写真のつなぎ合わせによるパノラマ化で体験さ
れるように、画像を相互に接続すると、歪みの少ない画
像でもつなぎ目が連続せず、不自然が画像となる。こう
した不自然さは、画像を各々精密に分析し、連続性を加
味して合成する高度な画像処理技術を以てすれば解消で
きなくはないが、そうした画像処理は、膨大な演算処理
を要するため、画像表示の応答性を悪くし、かつ高コス
ト化を招くため、実用性に乏しい。

【０００６】本発明は、こうした事情に鑑みなされたも
のであり、比較的広い外界の情報をカバーしながら、距
離感を容易に把握可能な死角情報を取得する個々の撮像
装置からの画像を相互に接続することで、実際には目視
し得ない死角部分を含む撮像装置からの画像を、運転席
から外界を見た実際の視界に近似するように応答性よく
表示可能とする低コストの運転支援画像合成装置を提供
することを目的とする。

【０００７】

【課題を解決するための手段】上記の目的を達成するた
め、本発明は、自車の角部と、該角部の少なくとも近傍
の外界と、自車中心線延長上の無限遠方とを撮像範囲に
含み、その取込み画像が左右対称かつ無限遠方の水平線
が自車中心線延長上で水平となるように自車の左右両角
部に設置された撮像装置と、該撮像装置の取込み画像を
処理する画像処理装置とを備える運転支援画像合成装置
において、前記画像処理装置は、両撮像装置の取込み画
像を相互に接続して疑似連続画面を合成することを特徴
とする。

【０００８】具体的には、前記画像処理装置は、左角部
の撮像装置が取り込む画像の右辺と、右角部の撮像装置
が取り込む画像の左辺とを一致させて接続することで疑
似連続画面を合成する構成とされる。

【０００９】更に、前記画像処理装置は、合成された疑
似連続画面の画像が重複する部分に、適宜の絵柄をスー
パーインポーズする構成としてもよい。

【００１０】また、前記画像処理装置は、両撮像装置の
取込み画像の、左角部側のもについては右辺に平行、右
角部側のものについては左辺に平行で、かつ無限遠方に
おける自車左右最外側仮想延長線の収束点を通る直線に
沿って、左角部の撮像装置の取込み画像の右側と、右角
部の撮像装置の取込み画像の左側を切除し、残った画像
を前記直線を一致させて接続することで疑似連続画面を
合成する構成としてもよい。

【００１１】そして、前記画像処理装置は、自車の速度
が低いときには請求項２記載の疑似連続画面を合成し、
自車両の速度が高いときには請求項３記載の疑似合成画
面を合成する構成とするのが有効である。

【００１２】また、前記画像処理装置は、左角部の撮像
装置の取込み画像の右側を画像上の自車中心線に沿って
切除し、右角部の撮像装置の取込み画像の左側を画像上
の自車両中心線に沿って切除し、残った両前記画像を自
車中心線を相互に一致させて接続することで疑似連続画
面を合成する構成を採ることもできる。

【００１３】上記構成において、前記画像処理装置は、
疑似連続画面上に、自車の輪郭線をスーパーインポーズ
する構成を採るのが有効である。

【００１４】また、本発明は、自車中心線延長上の無限
遠方を撮像範囲に含み、その取込み画像が左右対称かつ
無限遠方の水平線が自車中心線延長上で水平となるよう
に自車の左右両角部に設置された撮像装置と、該撮像装
置の取込み画像を処理する画像処理装置とを備える運転
支援画像合成装置において、前記画像処理装置は、両撮
像装置の取込み画像の、左角部側のもについては右辺に
平行、右角部側のものについては左辺に平行で、かつ無
限遠方における自車左右最外側仮想延長線の収束点を通
る直線に沿って、左角部の撮像装置の取込み画像の右側
と、右角部の撮像装置の取込み画像の左側を切除し、残
った画像を前記直線を一致させて接続することで疑似連
続画面を合成することを特徴とする。

【００１５】更に、本発明は、自車中心線延長上の無限
遠方を撮像範囲に含み、その取込み画像が左右対称かつ
無限遠方の水平線が自車中心線延長上で水平となるよう
に自車の左右両角部に設置された撮像装置と、該撮像装
置の取込み画像を処理する画像処理装置とを備える運転
支援画像合成装置において、前記画像処理装置は、左角
部の撮像装置の取込み画像の右側を画像上の自車中心線
に沿って切除し、右角部の撮像装置の取込み画像の左側
を画像上の自車中心線に沿って切除し、残った両画像の
自車中心線を相互に一致させて接続することで疑似連続
画面を合成することを特徴とする。

【００１６】

【発明の作用及び効果】上記請求項１記載の構成では、
個々の撮像装置について、自車の角部とその近傍ととも
に、無限遠方を撮像範囲に含む配置とすることで、車両
の角部外縁から地上に下ろした垂線と、撮像部と車両の
角部外縁とを結ぶ直線とのなす角度を鋭角にすることが
できるので、あらゆる車両周辺状況において、車両角部
と障害物や地面に表示された白線との間に、実質、それ
らが接触するに至るまで、離隔距離に応じた地面を写し
込んだ取込み画像を得ることができ、障害物と自車の特
に角部との距離感の確認が容易に行なえる。したがっ
て、個々の取込み画像により、自車に対する障害物や白
線の位置を精度良く把握することができる。しかも、自
車の角部とその近傍の左右情報とともに、位置関係を直
観的に把握するに有効な無限遠方の情報を画像上で接続
することで、運転席から外界を見た状態に対して方向
感、距離感共に違和感のない画像が、衝突回避に最も必
要な死角情報を含み、広範囲な外界を映す疑似連続画像
として得られる。

【００１７】次に、請求項２記載の構成では、疑似連続
画像の合成に格別複雑な処理を用いず、取込み画像の簡
易な接続のみで、接続による情報の欠落を生じない比較
的自然な合成画像を得ているので、応答性のよい画像表
示を低コストで実現することができる。

【００１８】更に、請求項３記載の構成では、簡易な接
続による疑似連続画像を、簡単な処理で見やすいものと
することができる。

【００１９】また、請求項４記載の構成では、疑似連続
画像の合成に格別複雑な処理を用いず、取込み画像の簡
易なトリミングにより重複部分を除去して接続している
ので、接続部に違和感のない自然な合成画像を得ること
ができ、応答性のよい画像表示を低コストで実現するこ
とができる。

【００２０】そして、請求項５記載の構成では、運転者
にとって車両近傍の状況が重要となる低車速時には、接
続による情報の欠落のない連続画面が合成され、近傍の
情報を必要としない、あるいは近傍の情報が表示されて
も実質上意味のない中高速走行時は、実際の視界により
近い形態での連続画面が合成されることで、常に運転状
況に合った疑似連続画面の表示を可能とすることができ
る。

【００２１】また、請求項６記載の構成では、取込み画
像の簡易なトリミングと回転処理により、重複部分と欠
落部分が共に生じない画像接続が、処理時間を要するこ
となく可能となるため、視覚的な補助情報の表示への利
用に止まらず、先行車両や前方障害物等を画像分析によ
り検出して運転の支援を行うような制御技術での利用が
可能な形態の疑似合成画面の得ることができる。

【００２２】更に、請求項７記載の構成では、取込み画
像のトリミングと回転処理による接続で、連続画面とし
て特に自車の画像が、欠落部分がないにも関わらず不連
続となるのを補うことができるようになり、この画像合
成法による不具合を補完することができる。

【００２３】一方、請求項８記載の構成では、外界に対
する自車の位置関係を直観的に把握するに有効な無限遠
方を左右の撮像装置から取込み、しかもそれらの画像を
重複部分を生じない形態で接続しているので、簡易な画
像処理でありながら、接続部分が不自然にならず、運転
席から外界を見た状態と方向感、距離感共に違和感のな
い疑似連続画像を短い画像処理時間で得ることができ
る。

【００２４】また、請求項９記載の構成では、外界に対
する自車の位置関係を直観的に把握するに有効な無限遠
方を左右の撮像装置から取込み、しかもそれらの画像を
重複部分と欠落部分とを共に生じない形態で接続してい
るので、比較的簡易な画像処理でありながら、接続部分
が不自然にならず、運転席から外界を見た状態と方向
感、距離感共に違和感の少ない疑似連続画像を短い画像
処理時間で得ることができる。

【００２５】

【発明の実施の形態】以下、図面に沿い、本発明の実施
形態を説明する。図１は本発明の画像合成装置を含む運
転支援装置のシステム構成をブロックで示す。この装置
は、画像を処理するプログラムを内蔵する制御装置１を
主体として、制御に必要な各種情報を取り込む入力装置
２と、運転者が運転操作のために必要とする情報を適宜
選択する選択スイッチ３とから構成され、更に、ナビゲ
ーション装置との情報交換が可能なように、データベー
ス４とディスプレー５とを具備するナビゲーション装置
のナビＥＣＵ６に接続されている。これにより、本形態
では、ディスプレー５を本装置の情報表示のためのモニ
ターに利用している。なお、図中の選択スイッチ３につ
いては、ナビゲーション装置のディスプレー５を利用し
たタッチパネル方式や音声認識装置を用いた音声入力方
式の形態を採ることもできる。

【００２６】図２に車両に対する配置を模式平面で示す
ように、入力装置の１つを構成する撮像装置として、図
に○印で示すＣＣＤカメラ２１（以下、カメラと略記
し、個々のカメラを区別するとき、符号に代えて位置を
表す添字付きの略号Ｃ_{F L ,}Ｃ _{F R ,}Ｃ_{R L ,}Ｃ_{R R ,}
Ｃ_{M L ,}Ｃ_{M R}を付す）が、車両の４箇所の角部と左右
両側の中央に設置され、また、△印で示す距離検出装置
としての障害物検出センサー２８（同様に、略号Ｓ
_{F L ,}Ｓ_{F R ,}Ｓ_{R L ,}Ｓ_{R R ,}Ｓ_{M L ,}Ｓ_{M R}，Ｓ
_{F M ,}Ｓ_{R M}を付す）が、カメラ２１と同様の位置近傍
に設置されている他、前後端部の中央にも設置されてい
る。これら距離検出装置２８としては、超音波センサー
やレーザー、ミリ波レーダー等の距離を直接検出する既
知の装置を用いるが、上記複数のカメラ２１の取込み画
像を制御装置１内で画像処理することにより間接的に距
離を求める演算手段として、専用の検出部を無くす形態
を採ることもできる。

【００２７】本発明の主題とする画像合成には、その前
提として、運転上の各種操作を行うときに必要な画像情
報を、各カメラ２１について、運転者が運転席に座って
いる状態での視界感覚に一致させるように取得可能であ
ることが不可欠である。したがって、それを実現するた
めに、撮像装置については、カメラ２１の取付け方法、
詳しくは、設置姿勢と設置位置が工夫されている。

【００２８】図３に模式化して示すように、運転席に座
った運転者から物理的に見えない死角範囲は、ドアの窓
枠や屋根を支えるピラーにより見えない部分は除くとし
て、路面上で点Ｄ_{F L}，Ｄ_{F R}，Ｄ_{R R}，Ｄ_{R L}に囲ま
れる図に斜線を付した範囲となる。これに対して、この
見えない範囲をカバーし、しかも得られる画像情報を運
転者の感覚に一致させるために、設置姿勢の第１の工夫
として、各カメラ２１は、その取込み画像上の上側を車
両の前方に向け、かつ垂直下方に光軸を向けた姿勢（Ｃ
ｏ）を基準とし、車両に対する配設位置の前後左右に応
じ、基準の姿勢に対して前後左右方向に傾斜を付し、少
なくとも車両の縁部、すなわち前後については前後の端
部、左右については左右側端部を写し込む姿勢で設置す
る。

【００２９】この趣旨に沿い、車両角部に設置する各カ
メラ２１については、その設置位置に対応する車両の縁
部としての自車体の角部と、その近傍を含む車両周辺
と、無限遠方を同時に俯瞰するような方向になるように
設置する。この車両の角部について、特に近時の乗用車
等においては、デザイン上の工夫から丸みを持たせてあ
るため、必ずしも判然としないが、本発明に言う車両の
角部とは、自車両を平面で見たときの縁部すなわち最外
縁を含むその近傍を意味し、より具体的には、車両の前
端及び側端又は後端及び側端が延在する方向が推測でき
る形状になる範囲、例えば角部をバンパーとする場合、
バンパーの角の丸みがほぼ直線に近い曲率まで小さくな
ることで、バンパーの前縁及び側縁又は後縁及び側縁の
延びる方向から、車両の前端及び側端又は後端及び側端
がどのへんの位置となるかを推測できる範囲を言う。そ
のため、図６に各角部のカメラの画像例Ｐ_{F L ,}Ｐ
_{F R ,}Ｐ _{R L ,}Ｐ_{R R}を示すように、各々車体の前後
端、左右端の延長が推測できる形状になる範囲まで画像
に含むように、各カメラＣ_{F L ,}Ｃ_{F R ,}Ｃ_{R L ,}Ｃ
_{R R}の姿勢を設定する。図６において、略号Ｗ_{L L}，Ｗ
_{L R}は路面の白線、Ｗ’_{L L}，Ｗ’_{L R}は映像上の白
線、符号９０’は映像上の自車角部としてのバンパーを
示す。この場合、カメラ２１の取付け位置については、
後に詳述するが、概括的には、車体の各必要箇所におい
て、可能な限り高い所に設置し、広い視界を確保するよ
うにする。

【００３０】設置姿勢の第２の工夫として、カメラ２１
の水平方向の向きは、図３に示すように運転者が運転席
に座って、その必要方向を見るときの視線の方向と概略
一致するような方向、すなわち、光軸Ｘが、運転者とカ
メラ２１を結ぶ直線を含む垂直面の方向と実質上同様の
方向を向く姿勢に設置され、前記第１の工夫による姿勢
との関係で、光軸Ｘが地面と交わる点は、図中で点Ａ
_{F L ,}Ａ_{F R ,}Ａ_{R L ,}Ａ_{R R}となる。これにより、各
々のカメラ２１のカバーする上下方向の画角範囲を
α_F，α_R、横方向の画角範囲をα_{F L}，α_{F R}，α
_{R L ,}α_{R R}で示す。なお、上記の運転者とカメラ２１
を結ぶ直線は、運転者の体格や好みの姿勢によりシート
のスライド位置やリクライニングの傾きが異なり、更に
は各時々の姿勢の変化によっても異なるため、厳密に
は、それらに伴って向きが変動し、上記直線を含む垂直
面の向きも変動することになるが、上記垂直面の方向と
実質上同様の方向とは、こうした運転者の位置のずれや
姿勢の変化に伴う方向のずれを許容する範囲での同方向
であればよく、例えば、こうした全ての要素を加味した
標準的な位置を統計的に割り出して運転者の位置を決定
する等の手法で、それに合わせて方向を設定すればよ
い。

【００３１】そして、このままカメラ２１の映像上の横
軸が水平になるように設置したのでは、図６を参照し
て、自車のバンパー角部９０’は、例えばカメラＣ_{F L}
について、画面の中央下方に位置することになり、自車
両と並行する路面の白線Ｗ_{L L}が画面を左下（又は右
下）から右上（又は左上）方向に対角線状に横切る映像
となってしまう。そこで、更に設置姿勢の第３の工夫と
して、カメラ２１を光軸Ｘ周りに傾斜を付した姿勢に設
置する。例えば、車両に対して左側のカメラについて
は、光軸周りに右に捩じることで右回り傾斜を付す。こ
れにより画面は、図６に示すように前進方向が運転者の
感覚に合うような向きとなる。具体的には、画像Ｐ_{F L}
は左前角部に設置のカメラＣ_{F L}の画像であり、右下隅
に左前角部９０’が写し込まれ、前進方向への直線状の
白線Ｗ’_{L L}が画面中央下方から斜め右上方向へ、概ね
直線で写り、運転席から実際に自車の左側白線Ｗ_{L L}を
見たときの角度と遠近感に実感が合うようになる。更に
言えば、この画像は、例えば、前左の画像Ｐ_{F L}と前右
の画像Ｐ_{F R}を同時に画面の左右に配置した場合に、そ
のときの画像Ｐ_{F L}上の自車線左側白線Ｗ’_{L L}と、画
像Ｐ_{F R}上の自車線右側白線Ｗ’_{L R}が、あたかも一つ
のカメラで前方を撮影したときのように、無限遠方で交
わるように見える配置である。このように画面に与える
傾斜は、右側及び後ろ左右についても同様である。

【００３２】次に、撮像装置の設置位置について、図４
及び図５に左前角部へのカメラＣ_F _Lの取付け例を示す
ように、本形態では、カメラＣ_{F L}は、前照灯９１と一
体構成されたサイドランプ９２に組み込む構成とし、こ
れにより既存の車両にも僅かな改変で安価に取り付け可
能としている。なお、この位置については、この配置に
限るものではなく、ランプを小さくして、その余ったス
ペースに組み込み、あるいはランプ以外の外板に組み込
み、車体表面に直接取り付ける等の配置を採ることも可
能である。これによって、前記のようにカメラＣ_{F L}直
下の自車体左前角部最外縁（図では前バンパーの左角
部）９０と同時に車両周辺及び無限遠方を取り込むわけ
であるが、上記の諸条件を満足するように、できるだけ
広い範囲を取り込むためには、車種によっても異なる
が、上下方向の画角α_Fについて概ね９０°程度からそ
れより若干大きく、左右方向の画角α_{F L}についても概
ね９０°程度からそれより若干大きいて程度を確保でき
る広角レンズのカメラＣ_{F L}が必要となる。しかしなが
ら、あまり画角を広くすると、運転者の見る実体の距離
感とのずれが大きくなるので、自ずと限界がある。その
ため、本形態では、上下方向の画角α_Fを９７°、左右
方向の画角α_{F L}を１２５°としたカメラＣ_{F L}を使用
している。

【００３３】このような設置姿勢と設置位置により本発
明の狙いとする自然な画像が得られる。図７に自車前左
角部のカメラＣ_{F L}の画像Ｐ_{F L}の詳細例を示す。この
画面は、自車が平坦な直線道路の自車線の中央を図示上
向き矢印方向に直進している場合に見える前方の景色を
模式的に示す。画面の下側を右隅から幅方向中央まで延
びる像９０’は、自車の前左のパンパー角部の映像を示
し、通常実際には見えないが、無限遠方を仮想水平線
Ｈ’_Lで示す。この画面構成において、自車線の両側の
白線Ｗ’_{L L}，Ｗ’_{L R}や左隣車線の白線が全て仮想水
平線Ｈ’_L上の一点に収束して見える。また、当然に自
車中心線Ｎ_L−Ｎ_Lと、自車の最外側ラインを地面に下
ろした線の延長としての自車左右最外側延長線も同じ収
束点Ｐ_Lを通ることになる。図中の線Ｌ_L−Ｌ_Lは画像
右端を表し、線Ｍ_L−Ｍ_Lは無限遠の収束点Ｐ_Lを通り
画像右端線Ｌ_L−Ｌ_Lに対して平行な線を表す。また、
左斜め上方に向かう矢印は、車両角部に対する左真横方
向を表す。

【００３４】同様に、図８に自車前右角部のカメラＣ
_{F R}の画像Ｐ_{F R}の詳細例を示す。この画面は、図７に
示す画面に対して左右対称な画面となる。したがって、
各画像及び線について、右側のものであることを表す意
味で、Ｒの添字を付して説明に代える。このように左右
幅全体に写る無限遠方の中に、自車の正面、すなわち車
両の前後方向中心軸の延長上の無限遠方が含まれ、この
正面の無限遠方は、モニター上で自車両のバンパー角部
９０’の上方に、ほぼ水平に表示される。

【００３５】次に、表示手段としてのモニターは、本形
態では、前記のように、ナビゲーション装置のディスプ
レー５を用いている。こうしたモニターは、運転者の正
面のインストゥルメントパネル近辺に設置されている。
そして、運転者がこの画面を覗くときの感覚は、画面上
方を物理学的な上と捉えると同時に、道路上の交通標識
や案内図等が全て表示面の上方が前方を示す表記とされ
ているように、進行方向の前方と自ずと認識することに
なる。画面下方が物理学的な下と捉えると同時に、後方
と認識されることもまた自然である。そこで、本発明の
画面表示は、こうした認識を原則としてなされている。

【００３６】実際の方法は、図６に示すような各画像が
４隅について得られるようにカメラ２１の姿勢を設定す
る。特に、車両後方のカメラＣ_{R L}，Ｃ_{R R}の向きは、
いわゆる上下逆さに取り付ける。即ち、図３に示すよう
に、まず、運転者が運転席に座った状態の垂直線に光軸
を合わせ、車体前方が画面上方となるようにして真下を
俯瞰するカメラＣ_Oを仮想して、その状態から光軸を前
方かつ左方に傾け、更に光軸回りに右に傾けたのがカメ
ラＣ_{F L}であり、同様に光軸を前方かつ右方に傾け、更
に光軸回りに左に傾けたのがカメラＣ_{F R}である。ま
た、同様にして、光軸を後方かつ左右に傾け、更に光軸
回りに左右に捩じったのがカメラＣ_{R L ,}Ｃ_{R R}であ
る。ただし、図には前後方向の傾き及び左右方向の傾き
が示され、光軸回りの捩じりは示されていない。このよ
うな姿勢に設定すると、ディスプレー５にはそのまま表
示するだけで所望の画面が得られる。この点に関して、
後方をカメラで撮影し、その画像情報を左右反転処理し
てモニターに表示するという、いわゆるバックミラーで
覗くような鏡像とすることも考えられるが、システムが
複雑化する割に感覚的には合わないので、本装置ではこ
うした形態は採らない。こうして得られる画像は、図６
に示すように、画面上の左右の白線Ｗ’_{L L}，Ｗ’_{L R}
が運転者の位置から見た実際の白線Ｗ_{L L}，Ｗ_{L R}の向
きに合致するようになる。

【００３７】こうして得られる画像情報は、本システム
では、その表示を運転者の要求に応じた必要最小限に留
めることを基本として、場所、状況等に応じた支援情報
をスーパーインポーズし、選択して表示することを原則
としている。しかしながら、こうした各部単独の情報で
は、自ずと限界があり、場所や状況によっては、広範囲
の情報を一画面に表示することで、より適切な運転支援
を行う必要がある。そこで、本発明の主題に係る疑似連
続画面の合成が行われる。この画像合成は、図１に示す
制御装置１内で行われる。具体的には、映像信号変換回
路１０でアナログ映像のデジタル映像への変換がなさ
れ、画像処理回路１１で映像のトリミングと合成処理が
なされる。そして、ナビＥＣＵへは、デジタル方式のデ
ィスプレーに合わせてデジタル画像のまま出力される。

【００３８】図９は、第１実施形態の画像合成装置によ
る疑似連続画像を示す。この形態では、左右の画像をそ
のまま接続する。以下、この形態による疑似連続画像に
Ｐ_F _{L - R}１の略号を付す。この場合、基となる画像自
体が、運転席から直接白線を見たときの遠近感と概ね一
致する画像であるため、接続によって格別違和感は生じ
ない。しかしながら、より自然に表示するためには、左
右の画像が接続線で線対称になるようにカメラの取り付
けを調整しておくことが望ましい。具体的には、左前角
のカメラＣ_{F L}の設置方向と傾きを調整して、その取込
み画像上の収束点Ｐ_Lが、画面の上辺及び右辺から各々
一定距離になるように右上隅に位置させる。そして、収
束点Ｐ_Lにおける仮想水平線Ｈ_Lが画面の上辺と平行に
なるようにする。同様に、右前角のカメラＣ_{F R}の画像
の収束点Ｐ_Rが、画面の上辺及び左辺から上記一定距離
と同じ距離になるように左上隅に位置させる。更に、収
束点Ｐ_Rにおける仮想水平線Ｈ_Rが画面の上辺と平行に
なるようにする。こうすることによって、両画像は収束
点を通り画面左右辺に平行な線Ｍ_L−Ｍ_Rを中心として
左右対称なものとなる。そして、この線Ｍ_L−Ｍ_Rの画
面右辺及び左辺からの距離を車幅に合わせると、前記自
車左右最外側線は、線Ｍ_L−Ｍ_Rと一致することにな
る。なお、このカメラの設定方法については、後記する
第２実施形態の場合についても同様である。

【００３９】この第１実施形態による疑似連続画像（Ｐ
_{F L - R}１）の合成は、最も単純で、技術的にも極めて
容易な利点を持つものである。この画面構成の場合、左
右白線Ｗ’_{L L}，Ｗ’_{R R}の無限遠方水平線Ｈ’_L，
Ｈ’_Rとの交点Ｐ_L，Ｐ_Rがやや離れているため、個別
画像に比して、白線が開いた感じになるが、ドライバー
に違和感を与えるほどではない。また、画面の中央上部
に自車線を挟む反対側の白線が、図９に丸で囲って符号
Ｚで示すように、遠方に、極めて小さく写っており、ま
た、ハッチング部分（図７の自車中心線Ｎ_Lより右上部
分、図８の自車中心線Ｎ_Rより左上部分に該当する）に
は、先行車等があれば二重に写ることになるが、この領
域は一義的に定まる領域であるので、必要に応じて簡単
なマスキングや適宜の絵柄のスーパーインポーズ等の処
理で対処することもできる。この形態による接続方法
は、自車の近辺を優先した方法でもあるので、低速域で
の走行や狭い場所での運転操作の支援画像として適して
いる。また、中高車速域での走行時でも、自車間近から
一定距離、例えば１０〜３０ｍも見えれば十分な白線表
示や白線検出（これらの内容については後に詳記する）
には利用可能である。そして、これら白線表示や白線検
出の場合には、合成画面の左右の大部分は不要となるの
で、ディスプレーの形状に応じてその部分をカットすれ
ば、必要な画像を画面一杯に表示でき、運転者にとって
一層認識しやすいものとなる。

【００４０】次に、図１０は、第２実施形態の画像合成
装置による疑似連続画像を示す。この形態は、無限遠で
の収束点を合わせるように接続する方法である。この場
合、図７に示す個別画像の線Ｍ_L−Ｍ_Lより右側と、図
８に示す個別画像の線Ｍ_R−Ｍ_Rより左側をカットして
接続する。換言すれば、第１実施形態における収束点Ｐ
_L−Ｐ_Rの距離を０にしたのと同じである。以下、この
形態による疑似連続画像にＰ_{F L - R}２の略号を付す。
こうすれば、第１実施形態における自車線を挟む反対側
の白線が写るという、不自然さはなくなる。反面、この
場合、図７の線Ｍ_L−Ｍ_L，Ｎ_L−Ｎ_Lに囲まれた手前
車両側部分と、同様に図８の線Ｍ_R−Ｍ _R，Ｎ_R−Ｎ_R
に囲まれた手前車両側部分に写る自車前方の対象物の画
像情報は欠落することになる。なお、ここに言う欠落と
は、厳密な意味での欠落であって、対象物が車両等の大
きさのものである場合、一部が欠けるだけで、完全に欠
落するわけではない。このことに関連して、この画像で
は、先行車等がある場合、その画像の図７の線Ｍ_L−Ｍ
_Lより右側部分と、図８の線Ｍ_R−Ｍ_Rより左側部分に
存在する中央部分が欠けて接続された形に写り、やや不
自然さが残るが、大きな問題ではない。この場合も、左
右をカットして画面一杯に表現しても良いのは、第１実
施形態の場合と同様である。この接続方法は、自車近辺
より進行方向遠方を優先した方法であり、中高速走行時
に活用するのが適している。しかしながら、画像処理の
複雑さは増加する。こうした処理の複雑さを避ける意味
では、この第２実施形態の一変形形態として、線Ｍ_L−
Ｍ_L ，Ｍ_R−Ｍ_Rが、各々線Ｌ_L−Ｌ_L，Ｌ_R−Ｌ_Rと
一致するようにカメラを設定するのも有効である。

【００４１】次に、図１１は、第３実施形態の画像合成
装置による疑似連続画像を示す。この形態は、自車中心
線でカットして接続する方法である。この場合、図７及
び図８に示す個別画像の自車中心線Ｎ_L−Ｎ_L，Ｎ_R−
Ｎ_Rに沿って両画像をカットし、それらの線が一致する
ように画像を回転させて接続する。以下、この形態によ
る疑似連続画像にＰ_{F L - R}３の略号を付す。こうする
と接続線Ｎ_{L ,}Ｎ_Rを左右に横断して移る対象物（先行
車や自車バンパー等）は、歪んで見えることになるが、
ドライバーに違和感を与えないよう、図にハッチングを
施して示すように仮想バンパー９０_Iをスーパーインポ
ーズしたり、ディスプレー形状に合わせて表示範囲を図
に破線で囲って符号Ｄで示すように調整すれば、より自
然な表示とすることができる。すなわち、この接続方法
は、像が歪む点は否めないものの、接続によるオーバラ
ップや欠落が生じないという特徴があるため、先行車や
前方障害物等を画像処理技術等で検出する場合に適して
いる。この接続方法の場合には、接続場所が確定してい
るので、それを考慮して処理すれば簡単である。

【００４２】なお、この第３実施形態の場合、上記のよ
うに、第１実施形態に関連して説明したカメラの設定方
法のままの画像構成で接続を行うことも可能であるが、
この第３実施形態の接続方法に関してだけは、図７及び
図８に示す取込み画像の段階で、自車中心線Ｎ_L−
Ｎ_L，Ｎ_R−Ｎ_Rが、各々、右辺とＬ_L−Ｌ_L、Ｌ_R−
Ｌ _Rに対し平行となるようにカメラの向きを設定する変
形形態を採るのも有効である。この場合も、収束点
Ｐ_L，Ｐ_Rに関して線対称とするが、２点を通る仮想水
平線は各々の上辺と平行ではなくなる。このようにする
と、左右横方向の画像の歪みが大きくなる点は否めない
が、画像処理に際して回転処理の必要がなくなり、接続
が一層簡単になり、しかも第１及び第２実施形態のよう
に、得られる像が一部で二重になったり、欠けたりする
問題点は解消される利点が得られる。

【００４３】なお、以上の説明は、専ら車両前端の左右
角部に設置したカメラ画像の合成を例としているが、車
両後端の左右角部に設置されたカメラの画像合成につい
ても、画像の上下が逆転するだけで、実質的に同様であ
る。したがって、この後方画像については、同様に、第
１実施形態によるものにＰ_{R L - R}１、第２実施形態に
よるものにＰ_{R L - R}２、第３実施形態によるものにＰ
_{R L - R}３の略号を付す。また、図２に示す隣り合った
２つのカメラの全ての組み合わせの場合も、全て同様の
疑似連続画面の合成が可能であり、カメラの設置位置
も、図３の配置に限らず、目的に応じて最適な位置に設
定することで、前記第１〜第３実施形態のような画像合
成が可能となる。

【００４４】次に、上記各実施形態により得られる疑似
連続画像の運転支援装置での利用について説明する。運
転支援装置のシステム全体の処理フローを図１２に示
す。このシステムは基本的に、運転者操作の種類に沿っ
て分けられ、図上で○印を付した符号Ａで示す縁寄せ操
作、同じくＢで示す障害物回避操作、以下同様にＣで示
す駐車操作、Ｄで示すブラインドコーナー操作、Ｅの後
方死角確認、及びＦの白線確認をそれぞれ支援する意図
で構成されている。これらの支援に際して、低車速時の
縁寄せ操作Ａ、障害物回避操作Ｂ、駐車操作Ｃ、ブライ
ンドコーナー操作Ｄの場合には、第１実施形態の接続方
法による疑似連続画像（Ｐ_{F L - R}１）、中高速時の後
方死角確認Ｅ、白線表示Ｆ、白線検出Ｇの場合には第２
実施形態の接続方法による疑似連続画像（Ｐ
_{F L - R}２）が適している。そして、第３の接続方法に
よる（Ｐ_{F L - R}３）は、先行車や進行方向の障害物等
を画像処理により検出する等の場合に適している。

【００４５】上記のＡ〜Ｆの支援内容を実現すべく、最
初のステップＳ−１では、図１のシステムを構成する入
力装置２からデータ読込みを行う。そして、次のステッ
プＳ−２で、速度域により安全性、必要性を考慮して、
作動する機能を分ける。すなわち、車速センサー２５の
入力から低車速域の判断が成立するときは、次のステッ
プＳ−３で、選択ＳＷ（スイッチ）のオン判断を行い、
これが成立するときには、Ａの縁寄せ操作、Ｂの障害物
回避操作、Ｃの駐車操作又はＤのブラインドコーナー操
作の選択に応じた画面表示を行う。一方、ステップＳ−
２の低車速域の判断が不成立の中高車速域のときは、Ｅ
の後方死角確認、Ｆの白線確認の表示処理を行う。な
お、詳細な速度域については、それぞれの機能毎に異な
る基準が必要であるが、それらの具体的な設定は試験評
価等により、個別に設定すればよい。

【００４６】次に、低車速の場合にＡ〜Ｄの何れかのス
イッチ選択がなされたときに、その選択ＳＷに対応した
機能が作動する。これらの機能は、基本的には独立した
別目的の機能なので、複数選択はできないように構成し
ている。なお、スイッチが選択されてない場合でも、Ｂ
の障害物回避操作とＤのブラインドコーナー操作の表示
機能については安全性を考慮して、自動的に作動するよ
うにシステムを構成している。これらについて、図中に
○印を付した符号Ｂ’、Ｄ’で示している。また、中高
速域の場合には、Ｆの白線確認の機能からＥの後方死角
確認の機能に繋がって行く。以下、これらの機能のう
ち、本発明の主題に係る画像合成が行われる機能を主と
して説明する。

【００４７】縁寄せ選択ＳＷにより“左寄せ”、“右寄
せ”又は“縁寄せ”が選択されると、図１３に示す処理
フローＡが実行される。ただし、この縁寄せ表示は、前
ステップＳ−２の低車速を条件とする。その理由は、高
速走行時はこのような縁寄せ操作は危険であり、また、
画像情報そのものが運転者の注意力を分散させる可能性
があるからである。運転者により“左寄せ”が選択され
た場合、それがステップＳＡ−１で判定される。その状
態であらかじめ設定した車速以下になると、ステップＳ
Ａ−２の判断により前進走行中が成立するので、ステッ
プＳＡ−４の処理画像Ｐ_{F L}（この場合の画像処理は、
自車の最左外側ラインＬ_{B L}のスーパーインポーズ処理
となるが、本発明の主題と離れるので、説明と省略す
る。）が表示される。そこで、運転者は画面上の溝を目
標に、スーパーインポーズされる自車の最左外側ライン
Ｌ_{B L}を合わせるように運転操作することで、容易に縁
寄せができる。縁寄せが終わり、シフトレバーを“Ｐ”
レンジポジションに入れれば、それによるポジションＳ
Ｗ（スイッチ）２３の入力がステップＳＡ−１１で判断
されて、ステップＳＡ−１２で選択ＳＷが解除され、縁
寄せ支援は完了する。この解除条件は、他に、シフトレ
バーが“Ｎ”レンジポジションで車両停止一定時間以
上、ブレーキＳＷ（スイッチ）オンで車両停止一定時間
以上、あるいは、エンジン停止等も考えられる。縁寄せ
操作の途中、状況により後進する必要がある場合には、
シフトレバーを“Ｒ”レンジポジションにすると、ポジ
ションＳＷ（スイッチ）２３の入力によるステップＳＡ
−２の判断で、ステップＳＡ−５により画像がＰ_{R L}に
代わり、後進支援画面となる。特に、後進の場合は、車
両の前左角部が左右に振れるので、図１３の右上に示す
ように画像Ｐ_{F L}、Ｐ_{R L}を同時に表示する表示方法を
採るのが有効である。なお、以上の説明は、一般的な前
輪ステアリング機構を前提にしているが、一部の車に採
用されている４輪ステアリング機構の場合には、前進時
にも、図１３右上に示すように２画像同時表示とするの
が有効である。

【００４８】一方、状況により、運転者が車両を右側に
寄せたい場合には、“右寄せ”ＳＷの選択によりステッ
プＳＡ−１の右寄せ判断が成立し、ステップＳＡ−３の
前後進判断に応じてステップＳＡ−６又はステップＳＡ
−７の画面表示となる。

【００４９】また、狭い道ですれ違う時や障害物等で狭
くなっている所を通過するとき等は、中央の選択ＳＷ
“縁寄せ”を選択すれば、ステップＳＡ−１、ステップ
ＳＡ−８による判断で、先に述べた前・後進いずれかの
疑似連続画像（Ｐ_{F L - R}１，Ｐ_{R L - R}１）をステッ
プＳＡ−９又はステップＳＡ−１０により一画面に同時
に表示することができ、運転操作に合った支援を行うこ
とができる。なお、図１３における左縁寄せ画面以外
は、取込み画像を一部省略して画面を簡略化して示した
もので、実際の表示画面は、左縁寄せ画面と同様に撮像
画像を含むものとなる。

【００５０】障害物回避操作における支援表示は、図１
に示す選択ＳＷの“前左”、“前右”、“後左”又は
“後右”ＳＷの選択により実行される。この場合の表示
を行う条件は、図１４に示す処理フローに従い、縁寄せ
操作の場合と同じく低車速時に限定される。運転者が図
１に示す障害物回避用のいずれかの選択ＳＷを操作した
場合は、それに応じたステップＳＢ−１の判断で、ステ
ップＳＢ−２により対応する角部の画像（図６参照）を
表示する。その時にステアリング舵角センサー２６の入
力を基に、ステアリング舵角、前後進に対応した車体角
部の予測軌跡を併せて表示する。この表示は、ステップ
ＳＢ−３の判断により距離センサー２８の検出距離が全
て基準値以上となったときに、ステップＳＢ−４による
全ての角部ＳＷの解除処理により終了させる。また、ス
イッチが選択されない場合には、ステップＳＢ−１の判
断でＢ’に進み、ステップＳＢ−５の判断で各角部の距
離センサー２８の検出距離が一つ以上基準値以下にな
り、ステップＳＢ−６の判断で更にその距離が近付きつ
つある場合に、ステップＳＢ−７により、該当する角部
の画像を表示するとともにステップＳＢ−８により運転
者に警告する。

【００５１】駐車操作における支援表示は、図１５に示
す操作の処理フローに従う。この場合も前記２操作と同
様に低車速時のみ支援するものとする。このフローは、
図４に示す駐車ＳＷを運転者が選択することで開始す
る。例えば、左後ろ駐車の場合は、運転者は選択ＳＷ
“Ｐ_L”を、また右後ろ駐車の場合は選択ＳＷ“Ｐ_R”
を選択することになる。この選択に応じたステップＳＣ
−１の判断により左後ろ駐車の場合で説明すると、ステ
ップＳＣ−２の判断がポジションスイッチ２３の入力で
前進時は、ステップＳＣ−４により左後ろ画像Ｐ_{R L}に
駐車枠範囲Ｚ_Iをスーパーインポーズし、運転者がこの
範囲Ｚ_Iに実際の目標駐車スペースＵ’が入るように運
転操作すると、適切な後退開始位置に車両をもって行く
ことができる。運転者がこの状態を確認して後進にシフ
トレバーを入れると、ステップＳＣ−５により後ろの疑
似連続画像（Ｐ_{R L - R}１）を画面表示し、各々の角部
にステアリング舵角に応じた予測軌跡線をスーパーイン
ポーズする。運転者はこれを参考にして、画面に映って
いる実際の目標駐車スペースＵ’に入るように運転操作
をする。このフローは、ステップＳＣ−８のパーキング
レンジへのシフト判断によるステップＳＣ−９のスイッ
チ解除で終了させる。

【００５２】ブラインドコーナーにおける支援表示は、
図１６に示すブラインドコーナー表示の概略処理フロー
に従う。このフローは、前記メインフローで説明したよ
うに、低車速時のみ作動するものとする。そしてステッ
プＳＤ−１の判断で、図１に示すブラインドＳＷ（前
左、前右、後左、後右）が選択されていることを条件と
して、ステップＳＤ−２のポジションスイッチ２３の入
力判断による前・後進に応じて、図５に示す片側画面又
は疑似連続画面（Ｐ_{F L - R}１）若しくは疑似連続画面
（Ｐ_{R L - R}１）を表示する。疑似連続画面（Ｐ
_{F L - R}１）の場合で説明すると、疑似連続画面（Ｐ
_{F L - R}１）を自車の絵Ｍ_Iと対応させる位置に配置
し、距離標Ｌ_Kをスーパーインポーズする。そして、こ
の距離標Ｌ_Kは運転者の注視方向をも示しており、注視
時のポイントが解りやすくなっている。なお、図におい
て符号Ｎ’は視界障害物を示す。

【００５３】後方死角確認においては、図１７に示す表
示の流れとなる。この表示は、設定車速以上で、ナビ情
報から解るステップＳＥ−１の判断で片側２車線以上、
更にステップＳＥ−２の判断で交差点近くでない所で走
行中に、ステップＳＥ−３によるウィンカー操作が判断
された場合に、追い越し、又は割り込みと判断すること
で実行し、該当する後方画像をステップＳＥ−４又はス
テップＳＥ−５で表示する。この場合の後方画像は、疑
似連続画像（Ｐ_{R L - R}２）とするのも有効である。運
転者はこの画像を参考にして運転操作をする。車線判断
に関しては、後に述べる白線検出技術を用いて、走行し
ている道路の車線数、自車の走行している車線等は容易
に解る。また、主要道路に設置されている光ビーコンの
信号を用いても、同じことが容易に可能となる。これら
の情報を用いるだけでもウィンカー操作と組み合わせて
追い越し又は割り込みの判断は容易にできる。勿論、ナ
ビ情報と組み合わせれば、更に情報精度が高まるのは当
然である。

【００５４】白線確認は、図１８に示す処理フローとな
る。条件としては、ある一定車速以上で、ステップＳＦ
−１によるヘッドライト点灯判断が成立し、ステップＳ
Ｆ−２によるワイパー作動判断が成り立つ時を夜間、雨
の中を走行中と判断し、ステップＳＦ−４によりサイド
ランプを点灯し、左側面から前方の路面を照射し、ステ
ップＳＦ−５により疑似連続画像（Ｐ_{F L - R}２）を表
示する。なお、上記のフローにおいて、夜間、雨中の判
断が不成立のときは、前記後方死角確認の処理フローに
移り、上記両判断が成立のときでも、ウィンカー作動時
は、後方死角確認のフローの判断要件を跳ばして後方死
角画面を表示することになる。また、サイドランプ点灯
は、必ずしも必要条件ではない。それは、対向車等の前
照灯の方向に対して、前左右のカメラＣ_{F L ,}Ｃ_{F R}の
光軸方向は大きく異なるため、対向車の光が水膜に鏡面
反射してきても、カメラのＣＣＤには入らず、眩惑され
ることはなく、白線からの反射光は乱反射であるため、
ＣＣＤで捉えることが可能であるためである。したがっ
て、対向車や後続の車、隣の車、更には自車等の照明を
使って自車の横から、やや前方まで充分に検出可能であ
る。このように、サイドランプ点灯は更に見えやすくす
るためのものである。

【００５５】なお、本実施形態の各疑似連続画像、特に
第２実施形態の疑似連続画像（Ｐ_F _{L - R}２）は、白線
の検出にも使用することができる。白線検出の具体的手
法については、周知であるので説明を省略するが、それ
らの多くは、カメラを車室内のフロントガラス近辺に専
用に設置している。それに対して、本装置では、前記の
ように死角検出用に設けた車両前左右角部の二つのカメ
ラを用いて白線検出を行わせることができる。こうする
ことによって、疑似連続画像（Ｐ_{F L - R}２）の特徴で
ある横方向の視界の広さを利用した自車近辺の横の白線
の検出で、自車体との相対位置関係を精度良く検出でき
るとともに、前記の白線の表示で説明したように、夜間
降雨時や霧の時にも検出可能である等の利点が得られ
る。しかも、他の機能と兼用のため安価となる。

【００５６】以上、本発明の技術思想の理解の便宜のた
めに、３つの実施形態を基に若干の変形例を挙げて説明
したが、本発明は、例示の実施形態や変形例に限定され
るものではなく、特許請求の範囲の個々の請求項に記載
の事項の範囲内で、種々に具体的な構成を変更して実施
することができるものである。例えば、障害物回避や白
線認識時等のように自車近傍の情報が重要である場合、
必ずしも無限遠方を画像に含まない形態を採ることもで
きる。

【図面の簡単な説明】

【図１】本発明の画像合成装置を含む運転支援装置の全
体システム構成を示すブロック図である。

【図２】運転支援装置の撮像装置と距離検出装置の車両
への配置を模式化して示す平面図である。

【図３】撮像装置の車両角部への設置姿勢を示す説明図
である。

【図４】車両角部に対する撮像装置の具体的配設位置と
設置姿勢を模式化して例示する断面図である。

【図５】撮像装置の具体的設置位置を例示する車両正面
図である。

【図６】車両の各角部に設置した撮像装置の方向と取込
み画像の関係を示す説明図である。

【図７】自車左前角部の撮像装置の取込み画像例を詳細
に示す説明図である。

【図８】自車右前角部の撮像装置の取込み画像例を詳細
に示す説明図である。

【図９】画像合成装置による第１実施形態の疑似連続画
面を示す説明図である。

【図１０】画像合成装置による第２実施形態の疑似連続
画面を示す説明図である。

【図１１】画像合成装置による第３実施形態の疑似連続
画面を示す説明図である。

【図１２】運転支援装置のシステム全体の処理フロー示
すフローチャートである。

【図１３】運転支援装置による縁寄せ操作時の処理フロ
ーを示すフローチャートである。

【図１４】運転支援装置による障害物回避操作時の処理
フローを示すフローチャートである。

【図１５】運転支援装置による駐車操作時の処理フロー
を示すフローチャートである。

【図１６】運転支援装置によるブラインドコーナー表示
の処理フローを示すフローチャートである。

【図１７】運転支援装置による後方死角表示の処理フロ
ー示すフローヂャートである。

【図１８】運転支援装置による白線表示時の処理フロー
を示すフローチャートである。

【符号の説明】

１１画像処理回路（画像処理装置）２１ＣＣＤカメラ（撮像装置）９０バンパー角部（角部）９０_I輪郭線Ｈ’_L，Ｈ’_R水平線Ｎ_L 自車中心線Ｌ_L 右辺Ｌ_R 左辺Ｍ_L，Ｍ_R 直線Ｐ_L，Ｐ_R 収束点Ｐ_{F L - R}１〜Ｐ_{F L - R}３，Ｐ_{R L - R}１〜Ｐ
_{R L - R}３疑似連続画面

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 7/18 Ｇ０６Ｆ 15/62 ３８０Ｆターム(参考） 3D053 FF11 HH01 HH47 MM28 MM35 MM37 MM43 MM44 MM45 MM49 5B057 AA16 BA12 CE08 CE10 5C054 AA01 CA04 CC05 CD03 CG02 CH01 EA05 FC12 FE12 FF03 HA30 5H180 AA01 CC03 CC04 CC11 CC12 CC14 CC24 FF03 FF32 LL01 LL02 LL08 LL15

Claims

【特許請求の範囲】

【請求項１】自車の角部と、該角部の少なくとも近傍
の外界と、自車中心線延長上の無限遠方とを撮像範囲に
含み、その取込み画像が左右対称かつ無限遠方の水平線
が自車中心線延長上で水平となるように自車の左右両角
部に設置された撮像装置と、該撮像装置の取込み画像を処理する画像処理装置とを備
える運転支援画像合成装置において、前記画像処理装置は、両撮像装置の取込み画像を相互に
接続して疑似連続画面を合成することを特徴とする運転
支援画像合成装置。
【請求項２】前記画像処理装置は、左角部の撮像装置
が取り込む画像の右辺と、右角部の撮像装置が取り込む
画像の左辺とを一致させて接続することで疑似連続画面
を合成する、請求項１記載の運転支援画像処理装置。
【請求項３】前記画像処理装置は、合成された疑似連
続画面の画像が重複する部分に、適宜の絵柄をスーパー
インポーズする、請求項２記載の運転支援画像処理装
置。
【請求項４】前記画像処理装置は、両撮像装置の取込
み画像の、左角部側のもについては右辺に平行、右角部
側のものについては左辺に平行で、かつ無限遠方におけ
る自車左右最外側仮想延長線の収束点を通る直線に沿っ
て、左角部の撮像装置の取込み画像の右側と、右角部の
撮像装置の取込み画像の左側を切除し、残った画像を前
記直線を一致させて接続することで疑似連続画面を合成
する、請求項１記載の運転支援画像合成装置。
【請求項５】前記画像処理装置は、自車の速度が低い
ときには請求項２記載の疑似連続画面を合成し、自車両
の速度が高いときには請求項４記載の疑似合成画面を合
成することを特徴とする運転支援画像合成装置。
【請求項６】前記画像処理装置は、左角部の撮像装置
の取込み画像の右側を画像上の自車中心線に沿って切除
し、右角部の撮像装置の取込み画像の左側を画像上の自
車両中心線に沿って切除し、残った両前記画像を自車中
心線を相互に一致させて接続することで疑似連続画面を
合成する、請求項１記載の運転支援画像合成装置。
【請求項７】前記画像処理装置は、疑似連続画面上
に、自車の輪郭線をスーパーインポーズする、請求項６
記載の運転支援画像合成装置。
【請求項８】自車中心線延長上の無限遠方を撮像範囲
に含み、その取込み画像が左右対称かつ無限遠方の水平
線が自車中心線延長上で水平となるように自車の左右両
角部に設置された撮像装置と、該撮像装置の取込み画像を処理する画像処理装置とを備
える運転支援画像合成装置において、前記画像処理装置は、両撮像装置の取込み画像の、左角
部側のもについては右辺に平行、右角部側のものについ
ては左辺に平行で、かつ無限遠方における自車左右最外
側仮想延長線の収束点を通る直線に沿って、左角部の撮
像装置の取込み画像の右側と、右角部の撮像装置の取込
み画像の左側を切除し、残った画像を前記直線を一致さ
せて接続することで疑似連続画面を合成することを特徴
とする運転支援画像合成装置。
【請求項９】自車中心線延長上の無限遠方を撮像範囲
に含み、その取込み画像が左右対称かつ無限遠方の水平
線が自車中心線延長上で水平となるように自車の左右両
角部に設置された撮像装置と、該撮像装置の取込み画像を処理する画像処理装置とを備
える運転支援画像合成装置において、前記画像処理装置は、左角部の撮像装置の取込み画像の
右側を画像上の自車中心線に沿って切除し、右角部の撮
像装置の取込み画像の左側を画像上の自車中心線に沿っ
て切除し、残った両画像の自車中心線を相互に一致させ
て接続することで疑似連続画面を合成することを特徴と
する運転支援画像合成装置。