JP5674071B2 - 障害物警報装置 - Google Patents

Description

本発明は、車両に接近する障害物の存在を乗員に明示する障害物警報装置に関する。

車両の周囲には運転者の位置から視認できない死角があり、運転者は車両の運転にあたり当該車両の周囲に細心の注意を払う必要がある。特に、車両を後退して駐車させる場合には、駐車自体に苦手意識を持っているユーザも多く、精神的疲労も少なくない。そこで、従来、車両の周囲の障害物を監視する技術が利用されてきた（例えば特許文献１及び２）。

特許文献１に記載の車両の障害物警報装置は、横移動障害物検出手段と、横移動方向検出手段と、横移動情報提供手段とを備えて構成される。横移動障害物検出手段は車両前方において進行方向を横切る方向に移動する障害物を検出する。横移動方向検出手段は横移動障害物検出手段により検出された障害物の横移動方向を検出する。横移動情報提供手段は横移動方向検出手段により検出された障害物の横移動方向に関する情報をドライバーに提供する。この際、横移動情報提供手段は表示部に横移動方向検出手段により検出された横移動方向を表わす矢印をディスプレイに表示する。

特許文献２に記載の車両周囲監視装置は、撮像手段と、障害物検出手段と、表示手段とを備えて構成される。撮像手段は自車両の一部を含む車両周囲を撮像する。障害物検出手段は車両周囲に位置する障害物を検出し、検出した障害物と自車両との距離を算出する。表示手段は撮像手段によって撮像された撮像画像と障害物検出手段によって算出された距離を示す障害物表示画像とを１つの画面に表示する。

特開平１１−１１５６６０号公報 特開２００９−２１７７４０号公報

特許文献１や特許文献２に記載の技術のように車両の周囲の障害物を検出し、当該障害物を明示する情報（矢印等）を画面表示することで運転者に車両の周囲の障害物の存在を報知することが可能である。しかしながら、車両に搭載されるディスプレイ（表示手段）の画面サイズは大きいものではない。このため、ディスプレイに表示される車両の周囲の状況を示す画像上に矢印等を表示すると、車両の周囲の状況が見難くなったり障害物を把握できなくなったりする可能性がある。

本発明の目的は、上記問題に鑑み、車両の周囲の状況を見難くすることなく、車両に接近する障害物の存在を運転者に明示することが可能な障害物警報装置を提供することにある。

上記目的を達成するための本発明に係る障害物警報装置の特徴構成は、
車両の周囲の情景を撮影した撮影画像を取得する撮影画像取得部と、
前記撮影画像に注目領域を設定する注目領域設定部と、
前記撮影画像において前記注目領域の外側に外側領域を設定する外側領域設定部と、
前記外側領域に物体が存在するか否かを判定する物体存在判定部と、
前記物体の移動方向を判定する移動方向判定部と、
前記移動方向判定部により前記物体が前記注目領域の中央側に移動すると判定された場合に、前記外側領域と共に表示される前記注目領域において、前記物体が存在する外側領域の側から中央側に向けて、一定時間点灯したのち消灯する指標を順次異なる位置に表示させる明示画像出力部と、
を備えている点にある。

このような特徴構成とすれば、車両に接近する物体に応じて指標を注目領域内に表示するので、車両に接近する物体及び車両の周囲の状況の視認性を低下させることなく、運転者に車両に接近する物体の存在及び方向を明示することができる。したがって、表示装置の画面サイズが小さい場合でも、車両に接近する物体を見逃すことがなくなる。このように本発明によれば、車両の周囲の状況を見難くすることなく、車両に接近する障害物（物体）の存在を運転者に明示することが可能となる。

また、前記明示画像出力部が、前記指標の表示を繰り返し行うと好適である。

このような構成とすれば、車両に接近する障害物の存在の明示を運転者が見逃すことを防止できる。

また、前記指標が、前記注目領域の中央側に突出する凸部を有する矢印形状に構成してあると好適である。

このような構成とすれば、障害物の移動方向と凸部が向く方向とが一致しているので、運転者が直感的に障害物の移動方向を認識することができる。

また、前記明示画像出力部が、前記指標が複数ある場合に当該複数の指標どうしが一部重畳する位置に表示され、後に表示する指標と直前に表示した指標との重複部分については後に表示する指標を上書き表示するよう構成されてあると好適である。

このような構成とすれば、指標が画面の中央に迫ってくるように表示することができる。したがって、運転者が障害物の接近を直感的に認識し易くなる。

例えば、前記指標を、前記注目領域において所定の領域を囲む枠形状からなる枠指標の一部とすることもできる。

このような構成であっても、指標により車両に接近する障害物の存在を運転者に明示することができる。また、このような指標を含んで構成される枠指標で囲まれた領域には車両の周囲の情景が表示されるので、運転者が車両の周囲の状況が見難くなることもない。したがって、車両の周囲の状況を見難くすることなく、車両に接近する障害物の存在を運転者に明示することが可能となる。

また、前記枠指標の一部の前記注目領域の中央側への移動に合わせて、前記枠指標が前記注目領域の外縁部から中央側に向けて順次異なる位置に表示されると好適である。

このような構成とすれば、車両に接近する物体の移動に応じて枠指標も注目領域の中央側へ移動して表示することができる。このため、枠指標により注目領域の中央側へ移動する物体の視認性が低下することがない。

また、前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりもサイズが小さいことを特徴とすると好適である。

このような構成とすれば、枠指標が、画面の中央に迫ってくるように表示することができる。したがって、運転者が障害物の接近を認識し易くなる。

また、前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりも透明度が低いことを特徴とすると好適である。

このような構成とすれば、枠指標が、画面の中央により迫ってくるように表示することができる。したがって、運転者が障害物の接近を認識し易くなる。

また、前記明示画像出力部は、前記物体が前記注目領域に進入した場合に前記指標の出力を中止するよう構成してあると好適である。

このような構成とすれば、物体が注目領域内に映った時点で指標の表示を中止できるので、物体が指標に隠れることがない。したがって、車両に接近した物体を適切に視認することができる。

障害物警報装置の構成を模式的に示したブロック図である。 第１の実施形態に係る障害物警報装置の処理の一例を示した図である。 第１の実施形態に係る障害物警報装置の処理の一例を示した図である。 第１の実施形態に係る合成画像の一例を示した図である。 第１の実施形態に係る合成画像の一例を示した図である。 第１の実施形態に係る障害物警報装置の処理を模式的に示した図である。 第２の実施形態に係る障害物警報装置の処理の一例を示した図である。 第２の実施形態に係る合成画像の一例を示した図である。 第２の実施形態に係る障害物警報装置の処理を模式的に示した図である。

１．第１の実施形態
以下、本発明の実施の形態について、詳細に説明する。本発明に係る障害物警報装置１００は、車両に接近する物体がある場合に当該車両の運転者に物体が接近していることを明示する機能を備えている。以下、図面を用いて説明する。

図１は、障害物警報装置１００の構成を模式的に示したブロック図である。図１に示されるように、障害物警報装置１００は、撮影画像取得部１１、注目領域設定部１２、外側領域生成部１３、物体存在判定部１４、移動方向判定部１５、明示画像出力部１６、明示画像格納部１７、合成画像生成部１８、マスク領域設定部１９、マスク領域強調表示部２０、動作画像出力部３０、動作画像格納部３１の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の運転者に物体７の接近を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。

撮影画像取得部１１は、車両１の周囲の情景を撮影した撮影画像Ｇを取得する。ここで、車両１にはカメラ５が備えられる。本実施形態におけるカメラ５は、ＣＣＤ（charge coupled device）やＣＩＳ（CMOS image sensor）などの撮像素子を内蔵するとともに、撮影した情報を動画情報として出力するデジタルカメラにより構成される。このようなカメラ５は、図２（ａ）に示されるように、車両１の外側後部に備えられるライセンスププレートの近傍、或いは車両１の外側後部に備えられるエンブレムの近傍等に、車両１の後方に向けてやや俯角を有して配設される。また、カメラ５は広角レンズ（図示せず）を備えて構成される。これにより、車両１の後方を略１８０度に亘って、車両１の周囲の情景を撮影することができる。このような撮影範囲は、図２（ａ）の「広視野角」として示される。このカメラ５は、リアルタイムで動画を撮影画像Ｇとして出力する性能を有する。このような撮影画像Ｇは、撮影画像取得部１１に伝達される。

このような撮影画像Ｇの一例が図２（ｂ）に示される。図２（ｂ）の全幅は、図２（ａ）の広視野角に対応する。ここで、撮影画像Ｇは、図２（ａ）に示されるような車両１から後方を見て左側にいる物体７が、図２（ｂ）に示されるように撮影画像Ｇ内の右側にいるように鏡像処理が行われる。これは、モニタ５０に車両１の後方の情景を表示する際、車両１の運転者が撮影画像Ｇに含まれる物体７が車両１の左側にいるのか右側にいるのかを感覚的に理解し易くするためである。

図１に戻り、注目領域設定部１２は、撮影画像Ｇに注目領域Ｃを設定する。本実施形態では、撮影画像Ｇの撮影範囲は広視野角である。このため、注目領域設定部１２は、撮影画像Ｇの中央部分に注目領域Ｃを設定する。撮影画像Ｇは上述の撮影画像取得部１１から伝達される。本実施形態では、注目領域Ｃは、図２（ｂ）に示される撮影画像Ｇの横方向の中央部分が相当する。このような注目領域Ｃは、図２（ａ）の「狭視野角」のような例えば車両１の後方１２０〜１３０度程度の領域とすると好適である。

外側領域生成部（本願「外側領域設定部」に相当）１３は、注目領域Ｃの外側に外側領域Ｏを生成（設定）する。すなわち、撮影画像Ｇのうち注目領域Ｃの外側の外側領域Ｏを生成する。上述のように、撮影画像Ｇの横方向の中央部分に注目領域設定部１２により注目領域Ｃが生成される。外側領域生成部１３はこのような注目領域Ｃの横方向の外側に、図２（ｂ）のような外側領域Ｏを生成する。外側領域生成部１３により生成された外側領域Ｏは、後述する物体存在判定部１４に伝達される。本障害物警報装置１００では、このような外側領域Ｏ及び上述の注目領域Ｃが、後述するモニタ５０に表示される表示画像に対応する（図２（ｃ）参照）。

物体存在判定部１４は、外側領域Ｏに対応する領域に物体７が存在するか否かを判定する。外側領域Ｏは、外側領域生成部１３から伝達される。外側領域Ｏに対応する領域とは、外側領域Ｏに対応する実空間における領域である。本実施形態では、外側領域Ｏに対応する領域に物体７が存在するか否かの判定は、外側領域Ｏを参照して例えばパターンマッチング等の公知の画像認識処理を用いて行われる。もちろん、パターンマッチング以外の処理により、外側領域Ｏに物体７が存在するか否かを判定することは可能である。物体存在判定部１４の判定結果は、後述する移動方向判定部１５に伝達される。

移動方向判定部１５は、外側領域Ｏの物体７の移動方向を判定する。このような移動方向の判定は、物体存在判定部１４により、外側領域Ｏに物体７が存在すると判定された場合に行われる。特に本実施形態では、移動方向判定部１５により、外側領域Ｏの物体７が注目領域Ｃの側に移動するか否かが判定される。注目領域Ｃの側に移動するとは、車両１の後方において、車両１の幅方向外側から、車両１の真後ろの方向に移動することを示す。このような判定は、例えば現在の撮影画像Ｇにおける物体７の位置と所定時間前の撮影画像Ｇにおける物体７の位置とを比較して行うことも可能であるし、オプティカルフローを用いるなどの公知の手法を用いて行うことができる。このような移動方向の判定結果は、後述する明示画像出力部１６に伝達される。

明示画像出力部１６は、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃにおいて、物体７が存在する外側領域Ｏの側から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。したがって、明示画像出力部１６は、外側領域Ｏの物体７が注目領域Ｃの中央側に移動する場合に、注目領域Ｃのうち物体７が存在する外側領域Ｏの側から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。外側領域Ｏの物体７が注目領域Ｃの中央側に移動するか否かは、上述の移動方向判定部１５により判定される。注目領域Ｃのうち物体７が存在する外側領域Ｏの側とは、物体７が左側の外側領域Ｏにいる場合には注目領域Ｃ内の左側の領域が相当する。一方、物体７が右側の外側領域Ｏにいる場合には注目領域Ｃ内の右側の領域が相当する。

一定時間点灯したのち消灯する指標Ｓとは、指標Ｓが連続して表示されている状態ではなく、指標Ｓが点滅して表示されている状態を示す。本実施形態では、このような指標Ｓが表示されてから消灯し、更に次に表示される場合には、異なる位置に表示される。したがって、指標Ｓは、画面上の所定の２つの位置の間を点滅しながら移動している状態になる。明示画像出力部１６は、このような指標Ｓの点滅しながらの移動を繰り返し行う。

ここで、指標Ｓについて説明する。本実施形態に係る指標Ｓは、注目領域Ｃの中央側に突出する凸部を有する矢印形状に構成されている。このような指標Ｓは、図２（ｄ）に示されるように明示画像格納部１７に格納されている。図２（ｃ）には、図２（ｂ）に示されるような撮影画像Ｇ、すなわち右側の外側領域Ｏに物体７がいる場合に車両１のモニタ５０に表示される画像が示される。図２（ｃ）に示されるように、本実施形態ではモニタ５０に複数の指標Ｓが表示されることがある。係る場合、複数の指標Ｓどうしが一部重畳する位置に表示される。一部重複するとは、本実施形態では、複数の指標Ｓのうちの一方の矢印形状の凸部の側の部分と、複数の指標Ｓのうちの他方の矢印形状の凸部でない側の部分とが重複することをいう。また、複数の指標Ｓがある場合には、後に表示する指標Ｓと直前に表示した指標Ｓとの重複部分については後に表示する指標Ｓを上書き表示するよう構成される。すなわち、直前に表示された指標Ｓよりも、後の表示される指標Ｓの方が上の層に配置されるように構成される。本実施形態では、このような直前に表示される指標Ｓは、後に表示される指標Ｓよりも透明度が高く表示される。すなわち、後に表示される指標Ｓが、直前に表示された指標Ｓよりも透明度が低く表示される。したがって、指標Ｓが複数表示されている場合には、最上層の指標Ｓが最も透明度が低く、最下層の指標Ｓが最も透明度が高くなる。

また、指標Ｓは直前に表示された指標Ｓよりも、後に表示される指標Ｓの方が大きなサイズで構成される。したがって、指標Ｓが複数表示されている場合には、最上層の指標Ｓが最もサイズが大きく、最下層の指標Ｓが最もサイズが小さくなる。なお、夫々の指標Ｓは、互いに相似する形状でサイズの大小を設定しても良いし、指標Ｓの縦又は横の何れか一方の長さを変更してサイズの大小を設定しても良い。

明示画像出力部１６は、このような表示を繰り返し行う。ここで、本実施形態では、図２（ｃ）に示されるように、指標Ｓは注目領域Ｃに合成してモニタ５０に表示される。そこで、合成画像生成部１８は、注目領域Ｃに指標Ｓを合成した合成画像を生成する。これにより、図２（ｃ）に示されるような画像が生成される。また、上述のように、注目領域Ｃの両側には外側領域Ｏも表示される。

このように指標Ｓを表示することにより、指標Ｓが次第に大きくなるように表示させることが可能となる。これにより、車両１の乗員に対して当該車両１に物体７が接近していることを視覚的に明示することができる。

マスク領域設定部１９は、撮影画像Ｇのうち、車両１の周囲の情景の少なくとも一部を非表示にするマスク領域Ｍを設定する。本実施形態では、マスク領域Ｍは図２（ｃ）に示されるように、画面上部、すなわち、モニタ５０に表示される表示画像内の上側部分に設定される。モニタ５０に表示される表示画像とは、注目領域Ｃ及び外側領域Ｏの画像である。このマスク領域Ｍは、表示画像の横方向両側に亘って形成される。マスク領域Ｍ内は、車両１の上方の情景に対して半透明で重畳表示され、例えば黒色で彩色される。もちろん、他の色で彩色しても良い。なお、車両１の上方の情景が見えないように塗りつぶしても良い。また、マスク領域Ｍは非表示としても良い。

動作画像出力部３０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合に、指標Ｓがマスク領域Ｍのうち物体７が存在する側の外側領域Ｏと注目領域Ｃとの境界部から吸収される画像を出力する（図３（ｄ）参照）。外側領域Ｏの物体７が注目領域Ｃに進入したか否かは、移動方向判定部１５により判定される。マスク領域Ｍのうち物体７が存在する側とは、右側の外側領域Ｏに物体７が存在していた場合には、マスク領域Ｍの右側部であり、左側の外側領域Ｏに物体７が存在していた場合には、マスク領域Ｍの左側部である。吸収される画像とは、マスク領域Ｍに指標Ｓが吸収されて消滅していく画像である。このような画像は、動作画像格納部３１に予め格納されている。

ここで、注目領域Ｃのうち物体７が存在する外側領域Ｏには、指標Ｓが表示されている。このため、図３（ｃ）に示されるように、物体７が注目領域Ｃに進入した場合に、指標Ｓをマスク領域Ｍに吸収させることにより、注目領域Ｃに進入してきた物体７を指標Ｓにより隠すことなく表示することが可能となる。したがって、車両１の運転者に物体７の存在を適切に明示することが可能となる。

また、動作画像出力部３０は、マスク領域Ｍへの指標Ｓの吸収に伴い、当該指標Ｓが吸収された位置からマスク領域Ｍの表示色を変更するよう構成されている。すなわち、指標Ｓが右側の外側領域Ｏと注目領域Ｃとの境界部から吸収された場合には、マスク領域Ｍを右側の外側領域Ｏと注目領域Ｃとの境界部からマスク領域Ｍの両外側に向って彩色していく画像を出力し、指標Ｓが左側の外側領域Ｏと注目領域Ｃとの境界部から吸収された場合には、マスク領域Ｍを左側の外側領域Ｏと注目領域Ｃとの境界部からマスク領域Ｍの両外側に向って彩色していく画像を出力する。このようにマスク領域Ｍを彩色することにより、車両１の運転者に物体７が進入した側を明示することも可能となる。

このような指標Ｓを表示すると共に、指標Ｓがマスク領域Ｍに進入した後、マスク領域Ｍが彩色されていく一連の画像の一例が、図４及び図５に示される。図４は、外側領域Ｏにいる物体７が注目領域Ｃの側に移動している場合に、注目領域Ｃに指標Ｓが重畳して表示されている例を示している。図５（ａ）に示されるように、物体７が右側の外側領域Ｏから注目領域Ｃに進入すると、図５（ｂ）−（ｅ）に示されるように、指標Ｓが右側の外側領域Ｏと注目領域Ｃとの境界部から吸い込まれるようにマスク領域Ｍに進入する。これに合わせて、マスク領域Ｍの両外側に向けて順次彩色され、最終的にはマスク領域Ｍの全域が彩色される（図５（ｆ））。

図１に戻り、マスク領域強調表示部２０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合にマスク領域Ｍを強調表示させる。本実施形態では、強調表示とは、点滅表示である。外側領域Ｏの物体７が注目領域Ｃに進入したか否かは、移動方向判定部１５により判定される。マスク領域強調表示部２０は、移動方向判定部１５の判定結果に応じて、マスク領域Ｍを点滅させる。これにより、車両１の運転者に、注目領域Ｃに物体７が存在することを視覚的に明示することが可能となる。

また、マスク領域強調表示部２０は、物体７が注目領域Ｃから退出した場合にマスク領域Ｍの強調表示を中止する。物体７が注目領域Ｃから退出したか否かも、移動方向判定部１５により判定することが可能である。すなわち、移動方向判定部１５は、外側領域Ｏの注目領域Ｃ側から外側領域Ｏに進入する物体７があれば、物体７が注目領域Ｃから退出したと判定することが可能である。このような判定結果も、マスク領域強調表示部２０に伝達される。また、本実施形態では、強調表示とは点滅表示である。したがって、マスク領域強調表示部２０は、このような判定結果が伝達されると、マスク領域Ｍの点滅を中止する。これにより、車両１の運転者に、注目領域Ｃに物体７が存在していないことを視覚的に明示することが可能となる。

次に、障害物警報装置１００が、撮影画像Ｇに明示画像を重畳した合成画像をモニタ５０に表示する一連の処理について、図６の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃１）。

次に、注目領域設定部１２が、取得された撮影画像Ｇの中央部分を注目領域Ｃとして設定する（ステップ＃２）。一方、外側領域生成部１３が、取得された撮影画像Ｇの横方向両側部分を外側領域Ｏとして生成する（ステップ＃３）。このように生成された外側領域Ｏに物体７が存在しているか否か、物体存在判定部１４により判定される（ステップ＃４）。

外側領域Ｏに物体７が存在していると判定されると、移動方向判定部１５により当該物体７の移動方向が判定される（ステップ＃５）。物体７の移動方向が、外側領域Ｏから注目領域Ｃの側へのものである場合、更に物体７が注目領域Ｃ内に進入したか否かが判定される（ステップ＃６）。物体７が注目領域Ｃ内に進入していなければ、明示画像出力部１６により明示画像が出力される（ステップ＃７）。この明示画像は、明示画像格納部１７に格納されている明示画像を参照して出力される。

合成画像生成部１８は、ステップ＃２において生成された注目領域Ｃに、ステップ＃６で出力された明示画像を重畳して合成画像を生成する（ステップ＃８）。生成された合成画像は、モニタ５０に表示される（ステップ＃９）。

一方、ステップ＃６において、物体７が注目領域Ｃ内に進入していれば、動作画像出力部３０により動作画像が出力される（ステップ＃１０）。この動作画像は、動作画像格納部３１に格納されている動作画像を参照して出力される。

合成画像生成部１８は、ステップ＃２において生成された注目領域Ｃに、ステップ＃１０で出力された動作画像を重畳して合成画像を生成する（ステップ＃８）。生成された合成画像は、モニタ５０に表示される（ステップ＃９）。

このように注目領域Ｃへの物体７の進入に合わせて、明示指標をマスク領域Ｍに進入させるので、車両１の運転者に注目領域Ｃの物体７を注視させることが可能である。したがって、車両１の周囲の状況を把握させることができる。

このように本発明に係る障害物警報装置１００によれば、車両１に接近する物体７に応じて指標Ｓを注目領域Ｃ内に表示するので、車両１に接近する物体７及び車両１の周囲の状況の視認性を低下させることなく、運転者に車両１に接近する物体７の存在及び方向を明示することができる。このため、モニタ５０の画面サイズが小さい場合でも、車両１に接近する物体７を見逃すことがなくなる。このように、本発明によれば、車両１の周囲の状況を見難くすることなく、車両１に接近する障害物（物体７）の存在を運転者に明示することが可能となる。

２．第２の実施形態
次に、本発明に係る第２の実施形態について説明する。上記第１の実施形態では、指標Ｓが、注目領域Ｃの中央側に突出する凸部を有する矢印形状で構成されているとして説明した。第２の実施形態では、矢印形状の指標Ｓと、枠指標Ｗを構成する指標Ｓとが表示される点で上記第１の実施形態と異なる。特に枠指標Ｗを構成する指標Ｓの表示以外については、上記第１の実施形態と同様であるので、以下では差異を中心に説明する。

本実施形態に係る障害物警報装置１００は、上記第１の実施形態と同様に構成される。このため、本実施形態に係る障害物警報装置１００は、図１のブロック図で示される構成と同様である。本実施形態に係る障害物警報装置１００も上記第１の実施形態と同様に、撮影画像取得部１１、注目領域設定部１２、外側領域生成部１３、物体存在判定部１４、移動方向判定部１５、明示画像出力部１６、明示画像格納部１７、合成画像生成部１８、マスク領域設定部１９、マスク領域強調表示部２０、動作画像出力部３０、動作画像格納部３１の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の運転者に物体７の接近を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。

撮影画像取得部１１は、車両１の周囲の情景を撮影した撮影画像Ｇを取得する。撮影画像取得部１１は、上記第１の実施形態と同様に、車両１に備えられるカメラ５により、車両１の後方を略１８０度に亘って、撮影した車両１の周囲の情景を取得する。このような撮影範囲は、図７（ａ）の「広視野角」として示される。このカメラ５は、リアルタイムで動画を撮影画像Ｇとして出力する性能を有する。

このような撮影画像Ｇの一例が図７（ｂ）に示される。図７（ｂ）の全幅は、図７（ａ）の広視野角に対応する。図７（ｂ）においても、図２（ｂ）と同様に鏡像処理が行われて表示されている。

注目領域設定部１２は、撮影画像Ｇに注目領域Ｃを設定する。本実施形態では、撮影画像Ｇの撮影範囲は広視野角である。このため、注目領域設定部１２は、撮影画像Ｇの中央部分に注目領域Ｃを設定する。撮影画像Ｇは上述の撮影画像取得部１１から伝達される。本実施形態では、注目領域Ｃは、図７（ｂ）に示される撮影画像Ｇの横方向の中央部分が相当する。このような注目領域Ｃは、図７（ａ）の「狭視野角」のような例えば車両１の後方１２０〜１３０度程度の領域とすると好適である。

外側領域生成部（本願「外側領域設定部」に相当）１３は、注目領域Ｃの外側の外側領域Ｏを生成（設定）する。すなわち、撮影画像Ｇのうち注目領域Ｃの外側の外側領域Ｏを生成する。本実施形態でも、撮影画像Ｇの横方向の中央部分に注目領域設定部１２により注目領域Ｃが生成される。外側領域生成部１３はこのような注目領域Ｃの横方向の外側に、図７（ｂ）のような外側領域Ｏを生成する。外側領域生成部１３により生成された外側領域Ｏは、後述する物体存在判定部１４に伝達される。本障害物警報装置１００では、このような外側領域Ｏ及び上述の注目領域Ｃが、後述するモニタ５０に表示される表示画像に対応する（図７（ｃ）参照）。

物体存在判定部１４は、外側領域Ｏに対応する領域に物体７が存在するか否かを判定する。外側領域Ｏは、外側領域生成部１３から伝達される。外側領域Ｏに対応する領域とは、外側領域Ｏに対応する実空間における領域である。本実施形態では、外側領域Ｏに対応する領域に物体７が存在するか否かの判定は、外側領域Ｏを参照して例えばパターンマッチング等の公知の画像認識処理を用いて行われる。もちろん、パターンマッチング以外の処理により、外側領域Ｏに物体７が存在するか否かを判定することは可能である。物体存在判定部１４の判定結果は、後述する移動方向判定部１５に伝達される。

移動方向判定部１５は、外側領域Ｏの物体７の移動方向を判定する。このような移動方向の判定は、物体存在判定部１４により、外側領域Ｏに物体７が存在すると判定された場合に行われる。特に本実施形態では、移動方向判定部１５により、外側領域Ｏの物体７が注目領域Ｃの側に移動するか否かが判定される。注目領域Ｃの側に移動するとは、車両１の後方において、車両１の幅方向外側から、車両１の真後ろの方向に移動することを示す。このような判定は、例えば現在の撮影画像Ｇにおける物体７の位置と所定時間前の撮影画像Ｇにおける物体７の位置とを比較して行うことも可能であるし、オプティカルフローを用いるなどの公知の手法を用いて行うことができる。このような移動方向の判定結果は、後述する明示画像出力部１６に伝達される。

明示画像出力部１６は、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、外側領域Ｏと共に表示される注目領域Ｃにおいて、物体７が存在する外側領域Ｏの側から中央側へ向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。したがって、本実施形態においてもモニタ５０には注目領域Ｃ及び外側領域Ｏが表示されるが、明示画像出力部１６は、外側領域Ｏの物体７が注目領域Ｃの中央側に移動する場合に、注目領域Ｃの外縁部から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを注目領域Ｃ内において順次異なる位置に表示させる。

ここで、本実施形態では、指標Ｓは、注目領域Ｃにおいて所定の領域を囲む枠形状からなる枠指標Ｗの一部が相当する。ここで、所定の領域を囲む枠形状には、注目領域Ｃと等しいサイズのもの及び小さいサイズのものが含まれる。本実施形態に係る枠指標Ｗは、指標Ｓを含んで構成される。図７（ｃ）に示される例では、枠指標Ｗが有する辺のうち、物体７が存在する右側の外側領域Ｏの側に表示される縦方向の辺が相当する。また、本実施形態においては、上記第１の実施形態で説明した矢印形状の指標Ｓも表示される。矢印形状の指標Ｓの表示形態については、上記第１の実施形態と同様であるので、以下では説明は省略する。外側領域Ｏの物体７が注目領域Ｃの中央側に移動するか否かは、本実施形態でも第１の実施形態と同様に移動方向判定部１５により判定される。

枠指標Ｗは、当該枠指標Ｗの一部である指標Ｓの注目領域Ｃの中央側への移動に合わせて、注目領域Ｃの外縁部から中央側へ向けて順次異なる位置に表示される。本実施形態では、順次異なる位置に表示されるとは、枠指標Ｗが連続して表示されている状態ではなく、枠指標Ｗが点滅しながら、移動して表示されている状態を示す。したがって、枠指標Ｗは、次第に小さくなるように表示される。明示画像出力部１６は、このような枠指標Ｗの点滅しながらの移動を繰り返し行う。

ここで、枠指標Ｗについて説明する。図７（ｃ）に示されるように、本実施形態ではモニタ５０に複数の枠指標Ｗが表示されることがある。係る場合、枠指標Ｗは直前に表示された枠指標Ｗよりも、後の表示される枠指標Ｗの方が小さなサイズで構成される。また、枠指標Ｗは直前に表示された枠指標Ｗよりも、後に表示される枠指標Ｗの方が透明度が低く構成される。これにより、枠指標Ｗが画面中央側から飛び出してくるように表示することが可能となる。なお、このような枠指標Ｗは矢印形状の指標Ｓと共に、図７（ｄ）に示されるように明示画像格納部１７に格納されている。

明示画像出力部１６は、このような表示を繰り返し行う。ここで、本実施形態では、図７（ｃ）に示されるように、枠指標Ｗは矢印形状の指標Ｓと共に注目領域Ｃに合成してモニタ５０に表示される。そこで、合成画像生成部１８は、注目領域Ｃに枠指標Ｗ及び矢印形状の指標Ｓを合成した合成画像を生成する。これにより、図７（ｃ）に示されるような画像が生成される。

このように枠指標Ｗを表示することにより、枠指標Ｗが次第に接近してくるように表示させることが可能となる。これにより、車両１の乗員に対して当該車両１に物体７が接近していることを視覚的に明示することができる。

このような矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓを表示する一連の画像の一例が、図８に示される。図８は、外側領域Ｏにいる物体７が注目領域Ｃの側に移動している場合に、注目領域Ｃに矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓが重畳して表示されている例を示している。矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓは、物体７が右側の外側領域Ｏから注目領域Ｃに進入するまで繰り返して表示される。すなわち、図８（ｂ）−（ｅ）の表示が繰り返し行われる。図８（ｆ）に示されるように、物体７が右側の外側領域Ｏから注目領域Ｃに進入した場合に、明示画像出力部１６により矢印形状の指標Ｓ及び枠指標Ｗの出力が中止される。この際、矢印形状の指標Ｓは、上記第１の実施形態と同様に、物体７が右側の外側領域Ｏから注目領域Ｃに進入すると、右側の外側領域Ｏと注目領域Ｃとの境界部から吸い込まれるようにマスク領域Ｍに進入するように構成しても良い。もちろん、これに合わせて、マスク領域Ｍの両外側に向けて順次彩色され、最終的にはマスク領域Ｍの全域が彩色されるように構成することも当然に可能である。

次に、障害物警報装置１００が、注目領域Ｃに枠指標Ｗを重畳した合成画像をモニタ５０に表示する一連の処理について、図９の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃２１）。

次に、注目領域設定部１２が、取得された撮影画像Ｇの中央部分を注目領域Ｃとして生成する（ステップ＃２２）。一方、外側領域生成部１３が、取得された撮影画像Ｇの横方向両側部分を外側領域Ｏとして生成する（ステップ＃２３）。このように生成された外側領域Ｏに物体７が存在しているか否か、物体存在判定部１４により判定される（ステップ＃２４）。

外側領域Ｏに物体７が存在していると判定されると、移動方向判定部１５により当該物体７の移動方向が判定される（ステップ＃２５）。物体７の移動方向が、外側領域Ｏから注目領域Ｃの側へのものである場合、明示画像出力部１６により明示画像が出力される（ステップ＃２６）。この明示画像は、明示画像格納部１７に格納されている明示画像を参照して出力される。

合成画像生成部１８は、ステップ＃２２において生成された注目領域Ｃに、ステップ＃２６で出力された明示画像を重畳して合成画像を生成する（ステップ＃２７）。生成された合成画像は、モニタ５０に表示される（ステップ＃２８）。このように注目領域Ｃに明示画像（矢印形状の指標Ｓ及び枠指標Ｗ）を表示することにより車両１の運転者に車両１の近傍を注視させることが可能となる。したがって、車両１の周囲の状況を把握させることができると共に、障害物が接近していることを明示することが可能となる。

このように本発明に係る障害物警報装置１００によれば、車両１に接近する物体７に応じて指標Ｓとして枠指標Ｗを注目領域Ｃ内に表示するので、モニタ５０の画面サイズが小さい場合でも、車両１に接近する物体７を見逃すことがなくなる。また、このような枠指標Ｗは画面の側端部に表示されるので、運転者が車両１の周囲の状況を見難くなることもない。すなわち、枠指標Ｗにより画面の端部に表示される情景が隠れることがないので、急に物体７が飛び出してきた場合でも、適切に物体７を把握することが可能となる。したがって、車両１の周囲の状況を見難くすることなく、車両１に接近する障害物（物体７）の存在を運転者に明示することが可能となる。

３．その他の実施形態
上記実施形態では、明示画像出力部１６は、点滅表示した指標Ｓが移動する際、次第に大きくなるように表示するとして説明した。しかしながら、本発明に適用範囲はこれに限定されるものではない。指標Ｓを同じサイズで表示することも当然に可能である。もちろん、指標Ｓが、次第に小さくなるように表示することも当然に可能である。このような構成であっても、適切に車両１に接近する物体７を車両１の運転者に明示することが可能である。

上記実施形態では、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度よりも高いとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度よりも低く表示することも可能であるし、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度と同じように表示することも当然に可能である。

上記実施形態では、指標Ｓが複数ある場合に当該複数の指標Ｓどうしが一部重畳する位置に表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。複数の指標Ｓを表示する場合であっても、指標Ｓどうしが重畳しないように構成することも可能である。

上記実施形態では、指標Ｓが、注目領域Ｃの中央側に突出する凸部を有する矢印形状に構成してあるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。指標Ｓを他の形状で構成することも当然に可能である。

上記実施形態では、動作画像出力部３０は、マスク領域Ｍへの指標Ｓの吸収に伴い、当該指標Ｓが吸収された位置からマスク領域Ｍの表示色を変更するよう構成されているとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。マスク領域Ｍへの指標Ｓの吸収に伴い、指標Ｓが吸収された位置とは異なる位置からマスク領域Ｍの表示色を変更するよう構成することも可能である。或いは、マスク領域Ｍへ指標Ｓが吸収されてもマスク領域Ｍの表示色を変更しないように構成することも当然に可能である。

上記第１の実施形態では、動作画像出力部３０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合に、指標Ｓがマスク領域Ｍのうち物体７が存在する側の外側領域Ｏと注目領域Ｃとの境界部から吸収される画像を出力するとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。明示画像出力部１６は、物体７が注目領域Ｃに進入した場合に指標Ｓの出力を中止するように構成することも可能である。物体７が注目領域Ｃに進入したか否かは、上述の移動方向判定部１５により判定される。物体７が注目領域Ｃに進入した場合には、注目領域Ｃの端部に物体７が表示される。このため、このように指標Ｓの出力することにより、車両１の運転者は注目領域Ｃの端部に表示される物体７を指標Ｓに隠されることなく視認することが可能となる。

上記実施形態では、指標Ｓ及び枠指標Ｗが画面内に複数表示される場合があるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。指標Ｓ及び枠指標Ｗが画面内に夫々一つずつ表示する構成とすることも可能であるし、指標Ｓのみを表示する構成とすることも可能である。

上記実施形態では、物体７が存在するか否かの判定は、例えばパターンマッチング等の公知の画像認識処理を用いて行うことが可能であるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、ソナー等で検出することも当然に可能である。

上記実施形態では、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃのうち物体７が存在する外側領域Ｏの側から中央側に向けて、指標Ｓが表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃと当該注目領域Ｃのうち物体７が存在する外側領域Ｏとの境界位置から注目領域Ｃの中央側に向けて指標Ｓを表示する構成とすることも当然に可能である。

上記第２の実施形態では、枠指標Ｗが複数ある場合に、後に表示する枠指標Ｗが、直前に表示した枠指標Ｗよりもサイズが小さいとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、枠指標Ｗを同じサイズで表示することも当然に可能である。もちろん、枠指標Ｗが、次第に大きくなるように表示することも当然に可能である。このような構成であっても、適切に車両１に接近する物体７を車両１の運転者に明示することが可能である。

上記第２の実施形態では、枠指標Ｗが複数ある場合に、後に表示する枠指標Ｗが、直前に表示した枠指標Ｗよりも透明度が低いとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、直前に表示された枠指標Ｗは、後に表示された枠指標Ｗの透明度よりも高く表示することも可能であるし、直前に表示された枠指標Ｗは、後に表示された枠指標Ｗの透明度と同じように表示することも当然に可能である。

上記第２の実施形態では、枠指標Ｗは四角形で示した。しかしながら、本発明の適用範囲はこれに限定されるものではない。枠指標Ｗを四角形以外の形状で構成することも当然に可能である。また、この枠指標Ｗは、車両１の乗員の目に留まり易いように、彩色して構成すると好適である。係る場合、例えば赤色や黄色で彩色すると好適であるが、もちろん他の色で彩色することも可能である。更には、枠指標Ｗを規定する線の太さも適宜変更することも可能である。

上記実施形態では、明示画像出力部１６が、指標Ｓの表示を繰り返し行うとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。繰り返し行わずに構成することも当然に可能である。

上記第２の実施形態では、矢印形状の指標Ｓと枠指標Ｗを構成する指標Ｓとが表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。矢印形状の指標Ｓを表示せずに、枠指標Ｗを構成する指標Ｓのみを表示する構成とすることも当然に可能である。

上記実施形態では、外側領域Ｏに物体７が存在するか否かの判定は、公知の画像認識処理を用いて行われるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、ソナーやレーダセンサ等を用いて外側領域Ｏに対応する実空間における領域に物体７が存在するか否かを判定する構成とすることも当然に可能である。

本発明は、車両に接近する障害物の存在を乗員に明示する障害物警報装置に用いることが可能である。

１：車両
７：物体
１１：撮影画像取得部
１２：注目領域設定部
１４：物体存在判定部
１５：移動方向判定部
１６：明示画像出力部
１００：障害物警報装置
Ｃ：注目領域
Ｇ：撮影画像
Ｏ：外側領域
Ｓ：指標
Ｗ：枠指標

Claims (9)

1. 車両の周囲の情景を撮影した撮影画像を取得する撮影画像取得部と、
   前記撮影画像に注目領域を設定する注目領域設定部と、
   前記撮影画像において前記注目領域の外側に外側領域を設定する外側領域設定部と、
   前記外側領域に物体が存在するか否かを判定する物体存在判定部と、
   前記物体の移動方向を判定する移動方向判定部と、
   前記移動方向判定部により前記物体が前記注目領域の中央側に移動すると判定された場合に、前記外側領域と共に表示される前記注目領域において、前記物体が存在する外側領域の側から中央側に向けて、一定時間点灯したのち消灯する指標を順次異なる位置に表示させる明示画像出力部と、
   を備える障害物警報装置。
2. 前記明示画像出力部が、前記指標の表示を繰り返し行う請求項１に記載の障害物警報装置。
3. 前記指標が、前記注目領域の中央側に突出する凸部を有する矢印形状に構成してある請求項１又は２に記載の障害物警報装置。
4. 前記明示画像出力部が、前記指標が複数ある場合に当該複数の指標どうしが一部重畳する位置に表示され、後に表示する指標と直前に表示した指標との重複部分については後に表示する指標を上書き表示するよう構成されてある請求項１から３のいずれか一項に記載の障害物警報装置。
5. 前記指標が、前記注目領域において所定の領域を囲む枠形状からなる枠指標の一部である請求項１又は２に記載の障害物警報装置。
6. 前記枠指標の一部の前記注目領域の中央側への移動に合わせて、前記枠指標が前記注目領域の外縁部から中央側に向けて順次異なる位置に表示される請求項５に記載の障害物警報装置。
7. 前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりもサイズが小さいことを特徴とする請求項５又は６に記載の障害物警報装置。
8. 前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりも透明度が低いことを特徴とする請求項５から７のいずれか一項に記載の障害物警報装置。
9. 前記明示画像出力部は、前記物体が前記注目領域に進入した場合に前記指標の出力を中止するよう構成してある請求項１から８のいずれか一項に記載の障害物警報装置。

Images