JP2008187580A - 障害物検出装置、車両用表示装置及び障害物検出方法 - Google Patents

Abstract

【課題】コストの増大を抑制し、車両に設置された撮像装置によって得られる画像中の多様な障害物を検出することができる障害物検出装置を提供すること。
【解決手段】本発明の一態様に係る障害物検出装置は、車両に設置されたカメラ１０１によって連続して撮像された画像に基づいて、画像に含まれる検出対象点の画面上での動きベクトルを算出する動きベクトル算出部１１３と、車両の走行情報に基づいて、検出対象点の期待動きベクトルを算出する期待動きベクトル算出部１１４と、動きベクトルが、期待動きベクトルよりも第１の閾値より大きい場合、検出対象点が障害物上の点であると判定する異常動きベクトル検出部１１６とを備える。
【選択図】 図２

Description

本発明は、車両に設置された撮像装置の画像を用いて、車両の進行方向の前方の障害物を検出する障害物検出装置、車両用表示装置及び障害物検出方法に関する。

自動車を夜間走行する場合、運転者はヘッドライトや街灯などを頼りに低照度環境下で運転している。このため、昼間の運転に比べて視界が悪く、歩行者や障害物の発見が遅れ、事故の危険性が高くなる。そこで、自動車を安全に走行させるため前方視界を補助する情報のニーズが高まっており、これをより効果的に運転者へ伝達するための画像ＨＭＩ（Human Machine Interface）が求められている。

このような前方視界補助情報を提供する技術として、赤外線カメラを用いて自動車の前方を撮像し、得られた画像を表示するナイトビジョンシステムが提案されている（非特許文献１参照）。非特許文献１では、自動車に設置された２台の遠赤外線カメラにより自動車の前方を撮像し、得られた画像をインスツルメントパネル上に設けられたヘッドアップディスプレイで表示している。また、歩行者の位置を検出し、赤外線カメラによる画像中に歩行者を囲む強調枠を表示し運転者の注意を喚起している。

しかしながら、非特許文献１に記載の従来技術では、赤外線カメラにより撮像した画像から、歩行者であるかどうかの判断を、形状、大きさなどに基づいて行っていた。このような処理は多くの計算を必要とし複雑である。また、２台の赤外線カメラが必要であるため、画像表示装置自体が高価になってしまうという問題がある。そこで、３００ｍ前方まで検知することができる、温度を感知する１台の遠赤外線カメラを使用したナイトビジョンシステムが提案されている（非特許文献２参照）。
"ホンダ「インテリジェント・ナイトビジョンシステム」を新開発"、［online］、２００４年８月２４日、本田技研工業株式会社、［平成１９年１月２２日検索］、インターネット〈URL：http://www.honda.co.jp/news/2004/4040824a.html〉 "（ＢＭＷ）５／６シリーズにナイトビジョンを新設"、［online］、２００６年１月２６日、ＢＭＷ、［平成１９年１月２２日検索］、インターネット〈URL：http://motor.days.co.jp/its/othernews/20060126212323.html〉

非特許文献２に記載のナイトビジョンシステムでは、表示画像を余りに詳細に表示してしまうと運転者の気が散ってしまうため、影のような形で人だと認識できる程度に表示するにとどめている。しかしながら、検出対象を歩行者だけではなく自転車、バイク、他の車両等と広げて言った場合、形状を認識させるための処理が膨大となり、回路規模・コストの増大を招いてしまう。

本発明は、このような事情を背景としてなされたものであり、本発明の目的は、コストの増大を抑制し、車両に設置された撮像装置によって得られる画像中の多様な障害物を検出することができる障害物検出装置、車両用表示装置、障害物検出方法を提供することである。

本発明の第１の態様に係る障害物検出装置は、車両に設置された撮像装置によって連続して撮像された画像に基づいて、前記画像に含まれる検出対象点の画面上での動きベクトルを算出する動きベクトル算出部と、前記車両の走行情報に基づいて、前記検出対象点の期待動きベクトルを算出する期待動きベクトル算出部と、前記動きベクトルが、前記期待動きベクトルよりも第１の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する障害物判定部とを備えるものである。これにより、車両に設置された撮像装置によって得られる画像中の多様な障害物を簡便に検出することができる。

本発明の第２の態様に係る障害物検出装置は、上記の障害物検出装置において、前記障害物判定部は、前記動きベクトルと前記期待動きベクトルとがなす角が第２の閾値より大きい場合、前記検出対象点が障害物上の点であると判定するものである。これにより、車両に設置された撮像装置によって得られる画像中の多様な障害物のうち、注意喚起すべき部分を抜き出して検出することができる。

本発明の第３の態様に係る障害物検出装置は、上記の障害物検出装置において、前記動きベクトル算出部は、前記撮像装置によって撮像された連続する２フレームの画像に基づいて前記動きベクトルを算出するものである。これにより、バッファに保持されるデータ量を少なくすることができ、バッファサイズを小さくすることができる。

本発明の第４の態様に係る障害物検出装置は、上記の障害物検出装置において、前記期待動きベクトル算出部は、前記車両の走行情報のうち速度に基づいて、前記期待動きベクトルを算出するものである。これにより、簡便に期待動きベクトルを算出することが可能となる。

本発明の第５の態様に係る障害物検出装置は、上記の障害物検出装置において、前記検出対象点が障害物上の点であると判定された場合に、報知信号を発する報知部を備えるものである。これにより、運転者に障害物への注意喚起を促すことができる。

本発明の第６の態様に係る車両用表示装置は、上記いずれかに記載の障害物検出装置と、前記撮像装置によって撮像された画像と、前記障害物検出装置によって障害物上の点であると判定された検出対象点を強調した画像とを合成して表示する表示部とを備えるものである。これにより、運転者に視覚により障害物への注意喚起を促すことができる。

本発明の第７の態様に係る障害物検出方法は、車両に設置された撮像装置によって連続して画像を撮像し、撮像した画像に基づいて、前記画像に含まれる検出対象点の画面上での動きベクトルを算出し、前記車両の走行情報に基づいて、前記検出対象点の期待動きベクトルを算出し、前記動きベクトルが、前記期待動きベクトルよりも第１の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する。これにより、車両に設置された撮像装置によって得られる画像中の多様な障害物を簡便に検出することができる。

本発明の第８の態様に係る障害物検出方法は、上記の障害物検出方法において、前記動きベクトルと前記期待動きベクトルとがなす角が第２の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する。これにより、車両に設置された撮像装置によって得られる画像中の多様な障害物のうち、注意喚起すべき部分を抜き出して検出することができる。

本発明の第９の態様に係る障害物検出方法は、上記の障害物検出方法において、前記撮像装置によって撮像された連続する２フレームの画像に基づいて前記動きベクトルを算出する。これにより、バッファに保持されるデータ量を少なくすることができ、バッファサイズを小さくすることができる。

本発明の第１０の態様に係る障害物検出方法は、上記の障害物検出方法において、前記期待動きベクトルを、前記車両の走行情報のうち速度に基づいて算出する。これにより、簡便に期待動きベクトルを算出することが可能となる。

本発明の第１１の態様に係る障害物検出方法は、上記の障害物検出方法において、前記検出対象点が障害物上の点であると判定された場合に、報知信号を発する。これにより、運転者に障害物への注意喚起を促すことができる。

本発明の第１２の態様に係る障害物検出方法は、上記の障害物検出方法において、前記撮像装置によって撮像された画像と、前記障害物検出装置によって障害物上の点であると判定された検出対象点を強調した画像とを合成して表示する。これにより、運転者に視覚により障害物への注意喚起を促すことができる。

本発明によれば、コストの増大を抑制し、車両に設置された撮像装置によって得られる画像中の多様な障害物を検出することができる障害物検出装置、車両用表示装置、障害物検出方法を提供することができる。

以下に、本発明を適用可能な実施の形態について図を用いて説明する。以下の説明は、本発明の実施形態を説明するものであり、本発明が以下の実施形態に限定されるものではない。又、当業者であれば、以下の実施形態の各要素を、本発明の範囲において容易に変更、追加、変換することが可能である。

本発明の実施の形態にかかる障害物検出装置について、図１を参照して説明する。ここでは、自動車の前方視界補助情報を表示する障害物検出装置を備えた車両用の画像表示装置について説明する。図１は、本実施の形態に係る車両用表示装置１００の構成を示すブロック図である。図１に示すように、車両用表示装置１００は、カメラ１０１、ＭＰＵ（Micro Processing Unit）１０２、フレームバッファ１０３、ＬＣＤモジュール１０４を有している。ＬＣＤモジュール１０４は、電源回路１０５、タイミングコントローラ１０６、液晶ディスプレイ（ＬＣＤ）１０７、報知部１０８を有している。さらに、タイミングコントローラ１０６は、入力データ処理部１０９、ＬＣＤ用制御信号生成部１１０、障害物検出部１１１、フレームバッファ１１２を有している。

本発明にかかる車両用表示装置１００は、カメラ１０１により撮像したカメラ画像データに基づいて当該カメラ画像データに含まれる検出対象の画面上での動きベクトルを算出し、車両の走行情報に基づく検出対象の期待動きベクトルと比較することにより、液晶ディスプレイ１０７において検出対象を視認性よく表示するものである。本発明において注目すべき点は障害物検出部１１１であり、後に詳述する。

カメラ１０１は、自動車の走行方向（前方）に向けて取り付けられている。カメラ１０１は、自動車の前方の光景を連続して撮像し、撮像した動画像のカメラ画像データを出力する。カメラ１０１としては、例えば、赤外線領域まで感度をもつ赤外線カメラ等を用いることができる。赤外線カメラは、物体から放射される赤外線を検出することにより撮像を行う。ここで、全ての物体は、その物体自体の温度と一義的関係にある強度の赤外線を放射している。このため、赤外線カメラにより撮像される物体の温度が高いほど、階調の高いカメラ画像データとなる。従って、例えば、歩行者などの熱を発する物体は比較的高い階調のカメラ画像データとなり、対向車などは比較的低い階調のカメラ画像データとなる。赤外線カメラを用いた場合、暗い場所においても人間など障害物の存在を認識することができる。しかし、障害物と周囲との温度差が存在しなければ検知することができない。

また、自然光や照射光よりもエネルギーの小さな熱放射（熱輻射）に基づいて略常温の物体を撮像するので、得られる信号レベルが低く、また、ダイナミックレンジも狭い。このため、赤外線カメラにより得られる画像としては、鮮明な画像が得られない。そこで、本発明においては、障害物検出部１１１においてカメラ１０１から得られたカメラ画像データ中の障害物である検出対象の動きベクトルを用いて障害物を検出する。なお、カメラ１０１としては、可視光領域に感度を持つＣＣＤ（Charge Coupled Devices）カメラ等を用いてもよい。

なお、本実施の形態においては、説明を簡単にするために、カメラ１０１の光軸は自動車が直進しているときに、進行方向に平行な方向を向いているものとする。また、カメラ１０１で撮像された画像では、地平線が水平で画像の中心を通るものとする。

ＭＰＵ１０２の内部には、フレームバッファ１０３が設けられている。フレームバッファ１０３は、カメラ画像データを格納するメモリである。ＭＰＵ１０２は、フレームバッファ１０３へカメラ画像データを書き込み、ガンマ補正等の液晶ディスプレイ１０７に表示させるために必要な画像処理を行い、画像データを生成する。そして、ＭＰＵ１０２は、生成した画像データを入力データ処理部１０９に伝送する。また、ＭＰＵ１０２は、カメラ１０１が設置された自動車の車速情報をタイミングコントローラ１０６内に設けられた入力データ処理部１０９に入力する。さらに、ＭＰＵ１０２は、表示に必要な各種の同期信号を入力データ処理部１０９に入力する。

入力データ処理部１０９は、入力された同期信号等を後段のＬＣＤ用制御信号生成部１１０に、画像データを障害物検出部１１１に伝送する。ＬＣＤ用制御信号生成部１１０は、同期信号に基づいて液晶ディスプレイ１０７の表示に必要な制御信号等を出力する。障害物検出部１１１は、入力された画像データ、車速情報に基づいて障害物を検出し、表示データを出力する。また、障害物検出部１１１は、障害物を検出した場合、報知部１０８に対して障害物検出信号を出力する。この障害物検出部１１１の構成及び障害物検出方法については、後に詳述する。フレームバッファ１１２は、１フレーム分の画像データを保持する。

電源回路１０５は、タイミングコントローラ１０６、液晶ディスプレイ１０７に実装されたドライバＩＣ及び各ロジック回路にＤＣ／ＤＣコンバータを介して電圧を供給する。報知部１０８は、障害物検出信号が入力されると、自動車の運転者に対して、警告音、光等により異常を報知し、注意喚起を促す。

液晶ディスプレイ１０７は、障害物検出部１１１から出力される表示データに基づいて、画像を表示する。液晶ディスプレイ１０７は、複数の画素から構成される表示領域を有しており、ＴＦＴ（Thin Film Transistor）アレイ基板（不図示）と対向配置される対向基板（不図示）との間に液晶を挟持した一般的な構成を有している。ＴＦＴアレイ基板には、水平方向にゲート線（走査線）、垂直方向にソース線（信号線）がそれぞれ形成されており、ゲート線とソース線の交差点付近にはＴＦＴが設けられている。また、ゲート線とソース線との間にマトリクス状に形成された複数の画素電極を有している。一方、対向基板上にはコモン電極及びＲ（赤）、Ｇ（緑）Ｂ（青）のカラーフィルタが形成されている。また、液晶ディスプレイ１０７には図示しないドライバＩＣが設けられている。ドライバＩＣは、タイミングコントローラ１０６から入力された各種の制御信号に基づいて、液晶ディスプレイ１０７を駆動して画像を表示させる。

ここで、液晶ディスプレイ１０７の駆動方法について説明する。まず、電源回路１０５から、タイミングコントローラ１０６、液晶ディスプレイ１０７に実装されたドライバＩＣ電圧が供給される。カメラ１０１により撮像されたカメラ画像データは、ＭＰＵ１０２に入力され、画像処理を施し画像データとしてタイミングコントローラ１０６へ出力される。

また、タイミングコントローラ１０６には、例えば、１画素分の表示データの入力サイクルであるドットクロック信号、水平同期信号Ｈｓｙｎｃ、垂直同期信号Ｖｓｙｎｃなどを含む同期信号が入力されている。タイミングコントローラ１０６のＬＣＤ用制御信号生成部１１０は受信した各種信号を処理し、ドライバＩＣへ供給すべき各種制御信号を必要なタイミングで出力する。

これにより、１行目から後段の行に向けて、各行の画素を順次走査するように走査信号が出力される。そして、液晶ディスプレイ１０７の各ソース線に対して、タイミングコントローラ１０６から指示されるタイミングに従って、表示データに対応した表示信号が供給される。入力される表示信号がＴＦＴのソース／ドレインを介して画素電極に供給され、画素電極に階調に応じた電圧が印加される。そして、画素電極と対向電極との間の液晶に電界を印加する。このように、各スイッチング素子を駆動させ、蓄積させる電荷量を階調に応じて制御すると、画素ごとに液晶の配向状態が変化する。これによって、バックライト（不図示）から入射される光の透過量を制御し、画素ごとに明るさを変化させることができる。液晶ディスプレイ１０７の各画素は、透過する光量に応じた色の濃淡とＲＧＢいずれかの色表示により画像の表示を行う。

ここで、図２を参照して、本実施の形態にかかる障害物検出部１１１の構成について説明する。図２は、本実施の形態にかかる障害物検出部１１１の構成の一例を示すブロック図である。障害物検出部１１１は、図２において破線で示される。図２に示すように、障害物検出部１１１は、動きベクトル算出部１１３、期待動きベクトル算出部１１４、比較部１１５、異常動きベクトル検出部１１６、合成部１１７を有している。

動きベクトル算出部１１３は、入力される画像データに基づいて、当該画像データに含まれる検出対象の動きベクトルを算出し、比較部１１５に出力する。期待動きベクトル算出部１１４は、車速情報に基づいて期待動きベクトルを算出し、比較部１１５に出力する。比較部１１５は、入力された動きベクトルと、期待動きベクトルとを比較し、比較結果を異常動きベクトル検出部１１６に出力する。異常動きベクトル検出部１１６は、当該フレーム内において障害物が含まれる領域である異常動きベクトル部分を障害物として判定し、強調枠あるいは着色等のマーキングを行った障害物表示データの生成を行う。合成部１１７は、画像データと障害物表示データとを合成し、液晶ディスプレイ１０７に表示データとして出力する。

ここで、障害物検出部１１１における障害物検出方法について図３〜図７を参照して説明する。図３は、本実施の形態に係る障害物検出方法を説明するフロー図である。図４は、カメラ１０１によって撮像される画像領域を示す図である。図５は、カメラ画像データに基づいて算出される検出対象の動きベクトルを示している。また、図６は、車両の速度情報に基づいて算出される期待動きベクトルを示している。図７は、液晶ディスプレイ１０７に表示される表示画像を示している。

ここでは、車両用表示装置１００が搭載された自動車（自車）が車速６０ｋｍ／ｈで走行している例について説明する。また、図５に示すように、カメラ１０１により自車の前方に、自車と同じ６０ｋｍ／ｈの速度で走行している自動車（他車）Ｐと、自車に向かって走行する自転車Ｑとが撮像された場合について説明する。また、説明の簡略化のため、液晶ディスプレイ１０７の画面を３２分割して、分割した各領域について動きベクトルを算出する例について説明する。なお、説明のため、各分割領域において、他車Ｐ及び自転車Ｑが含まれる領域については、他車Ｐ、自転車Ｑ上の１画素を検出対象点とし、他の領域については、各領域の中心の１画素を検出対象点とする。なお、液晶ディスプレイ１０７の１画素ごとに、動きベクトルを求めることも可能である。

カメラ１０１は、あらかじめ定められたタイミングで連続して動画像の撮像を行っている。図４に示すように、画像データが順次データ入力処理部に入力される（ステップＳ１）。カメラ１０１は連続して撮像を行っているため、カメラ画像データに含まれる検出対象（他車Ｐ及び自転車Ｑ）は、１フレーム毎に画像領域内を移動する。本実施の形態では、連続する２フレームの画像データを用いて画像中の検出対象点の動きベクトル、すなわち、オプティカルフローを求める（ステップＳ２）。オプティカルフローとは、時間的に連続する画像中での物体の動きをベクトルで表したものである。すなわち、動きベクトルは、画像中のある点や図形が次の瞬間にどの方向へ、どの程度の距離を移動するかを、示すベクトルのことである。

本実施の形態においては、画面を３２分割した各検出対象点のそれぞれにつき、動きベクトルを算出する。フレームバッファ１１２に保持された前のフレームの画像データと、入力される画像データとを比較し、動きベクトルを算出する。この動きベクトルを、図５に示す。図５において他車Ｐが含まれる領域をｐとし、自転車Ｑが含まれる領域をｑとする。他車Ｐは、自車と同じ速度で走行しているため、自車に対する他車Ｐの相対速度は０である。このため、他車Ｐが含まれる領域においては、動きベクトルは０であり、図５においてはドットで示している。

そして、各検出対象点の動きベクトルのうち、図５においてドットで示したベクトルの向き及び大きさがないもの（ベクトル＝０）を検出対象から除く（ステップＳ３）。図５においてｐで示される検出対象点は、自車と同じ速度で走行しているため、衝突のおそれがない。このため、障害物として検出する必要がなく、検出対象から除いても問題がない。これにより、以降の障害物検出に係る時間を短縮することができる。

一方、車速情報は期待動きベクトル算出部１１４に入力される（ステップＳ４）。そして、期待動きベクトル算出部１１４は車速情報に基づいて期待動きベクトルを算出する（ステップＳ５）。この期待動きベクトルを、図６に示す。期待動きベクトルは、６０ｋｍ／ｈのときの自車の前方の景色が流れていく方向及び距離を示している。なお、各検出対象点の車速に応じた期待動きベクトルをあらかじめ設定しておき、入力される車速情報に応じて、設定された期待動きベクトルを選択するようにしてもよい。

その後、比較部１１５において、検出対象点毎に動きベクトル（図５参照）と期待動きベクトル（図６参照）とが比較される。具体的には、まず、動きベクトルと期待動きベクトルとのなす角が、ある閾値以上、例えば４５°より大きいか否かを判定する（ステップＳ６）。自転車Ｑが含まれる検出対象点において、画像の上側半分に位置する検出対象点での動きベクトルと期待動きベクトルとのなす角は４５°より大きくなっている。従って、ステップＳ６ＹＥＳに進み、動きベクトルと期待動きベクトルとの大きさの差が、ある閾値より大きいか、例えば０より大きいか否かを判定する（ステップＳ６）。

自転車Ｑが含まれる検出対象点において、画像の上側半分に位置する検出対象点での動きベクトルと期待動きベクトルとの差は０よりも大きい。このため、ステップＳ７ＹＥＳに進み、異常動きベクトル検出部１１６は、当該検出対象点を異常動きベクトルをもつ障害物として判定する（ステップＳ８）。そして、合成部１１７は、障害物として判定された検出対象点については、カメラ１０１から得られたもとの画像データと、障害物を強調枠にて強調する障害物表示データとを合成して表示データを生成する（ステップＳ９）。

一方、自転車Ｑが含まれる検出対象点以外では、動きベクトルと期待動きベクトルの向きは同じである。また、図５及び図６に示す例では、自転車Ｑが含まれる検出対象点であっても、画像の下側半分に位置する検出対象点では、動きベクトルと期待動きベクトルとのなす角は４５°以下となっている。このため、これらの検出対象点での動きベクトルと期待動きベクトルとのなす角は、４５°より小さくなる。従って、図３ステップＳ６Ｎｏに進み、表示データを生成する（ステップＳ９）。

また、ここでは図示していないが、検出対象点での動きベクトルと期待動きベクトルとの差が０以下である場合も、図３ステップＳ６ＮＯに進み、表示データを生成する（ステップＳ９）。従って、上記のように障害物として判定されなかった検出対象点については、カメラ１０１から得られたもとの画像データのみから表示データを生成する。このように、動きベクトルと期待動きベクトルの向き及び大きさを比較して障害物を判定することにより、カメラ１０１によって得られる画像中の多様な障害物のうち、注意喚起すべき部分を抜き出して検出することができる。

その後、液晶ディスプレイ１０７は、入力された表示データに応じてカメラ１０１により得られた元の画像上に障害物を強調枠にて強調して表示する（ステップＳ１０）。このようにして液晶ディスプレイ１０７で表示される画像においては、図７に示すように、自転車の含まれる領域が視認性高く強調して表示されている。このため、運転者は、自車に向かってくる障害物を同じ速度で走行している他車や道路等から分離して明確に認識することができる。また、ステップＳ８において異常動きベクトルを持つ障害物が検出された場合、異常動きベクトル検出部１１６は障害物検出信号を報知部１０８に出力し、警告音を発する。これにより、運転者に対して視覚のみならず聴覚により注意喚起を促すことができる。

なお、上述の説明では、動きベクトルと期待動きベクトルの向き及び大きさの両方を比較して障害物を認識したが、これに限定されない。例えば、動きベクトル及び期待動きベクトルの大きさのみを比較してあらかじめ設定された閾値以上であれば、障害物として判定することも可能である。他車が急ブレーキをかけた場合、他車が含まれる検出対象点の動きベクトルの向きは、期待動きベクトルの向きと同じである。しかしながら、動きベクトル及び期待動きベクトルの大きさのみを障害物の判定に用いれば、このような他車が急ブレーキをかけたような場合でも他車を障害物として検出することができる。また、動きベクトル及び期待動きベクトルの向きのみを障害物の判定に用いてもよい。

なお、ここでは、自動車の速度情報を用いて、期待動きベクトルを算出する場合について説明したが、これに限定されるものではない。例えば、車速情報のみに限らず、ハンドルの舵角等他の車両の走行情報を用いて、より詳細な期待動きベクトルを算出することも可能である。

なお、上述の例では、障害物検出部１１１を回路としてタイミングコントローラ１０６中に設ける構成としたが、これに限定されない。例えば、図８に示すように、障害物検出部１１１及びフレームバッファを備えた障害物検出ＩＣ１１８を既存のタイミングコントローラ１０６とは別に設けてもよい。また、図９に示すように、プログラム（ソフトウエア）としてＭＰＵ１０２中に障害物検出処理部１１９を設けてもよい。また、本発明は、液晶ディスプレイに限らず、ＰＤＰ、有機ＥＬなどさまざまな画像表示装置に利用することが可能である。

実施の形態に係る車両用表示装置の構成の一例を示すブロック図である。 実施の形態に係る障害物検出部の構成の一例を示すブロック図である。 実施の形態に係る障害物検出方法を説明するためのフロー図である。 カメラによって撮像される画像領域を示す図である。 カメラ画像データに基づいて算出される検出対象の動きベクトルを示す図である。 車両の速度情報に基づいて算出される期待動きベクトルを示す図である。 本実施の形態に係る障害物検出を行った後の液晶ディスプレイに表示される表示画像を示す図である。 実施の形態に係る車両用表示装置の構成の他の例を示すブロック図である。 実施の形態に係る車両用表示装置の構成の他の例を示すブロック図である。

符号の説明

１００ 車両用表示装置
１０１ カメラ
１０２ ＭＰＵ
１０３ フレームバッファ
１０４ 液晶モジュール
１０５ 電源回路
１０６ タイミングコントローラ
１０７ 液晶ディスプレイ
１０８ 報知部
１０９ 入力データ処理部
１１０ ＬＣＤ用制御信号生成部
１１１ 障害物検出部
１１２ フレームバッファ
１１３ 動きベクトル算出部
１１４ 期待動きベクトル算出部
１１５ 比較部
１１６ 異常動きベクトル検出部
１１７ 合成部
１１８ 障害物検出ＩＣ
１１９ 障害物検出処理部

Claims (12)

1. 車両に設置された撮像装置によって連続して撮像された画像に基づいて、前記画像に含まれる検出対象点の画面上での動きベクトルを算出する動きベクトル算出部と、
   前記車両の走行情報に基づいて、前記検出対象点の期待動きベクトルを算出する期待動きベクトル算出部と、
   前記動きベクトルが、前記期待動きベクトルよりも第１の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する障害物判定部と、
   を備える障害物検出装置。
2. 前記障害物判定部は、前記動きベクトルと前記期待動きベクトルとがなす角が第２の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する請求項１に記載の障害物検出装置。
3. 前記動きベクトル算出部は、前記撮像装置によって撮像された連続する２フレームの画像に基づいて前記動きベクトルを算出する請求項１又は２に記載の障害物検出装置。
4. 前記期待動きベクトル算出部は、前記車両の走行情報のうち速度に基づいて、前記期待動きベクトルを算出する請求項１、２又は３に記載の障害物検出装置。
5. 前記検出対象点が障害物上の点であると判定された場合に、報知信号を発する報知部を備える請求項１〜４のいずれか１項に記載の障害物検出装置。
6. 請求項１〜５に記載の障害物検出装置と、
   前記撮像装置によって撮像された画像と、前記障害物検出装置によって障害物上の点であると判定された検出対象点を強調した画像とを合成して表示する表示部と、
   を備える車両用表示装置。
7. 車両に設置された撮像装置によって連続して画像を撮像し、
   撮像した画像に基づいて、前記画像に含まれる検出対象点の画面上での動きベクトルを算出し、
   前記車両の走行情報に基づいて、前記検出対象点の期待動きベクトルを算出し、
   前記動きベクトルが、前記期待動きベクトルよりも第１の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する障害物検出方法。
8. 前記動きベクトルと前記期待動きベクトルとがなす角が第２の閾値より大きい場合、前記検出対象点が障害物上の点であると判定する請求項７に記載の障害物検出方法。
9. 前記撮像装置によって撮像された連続する２フレームの画像に基づいて前記動きベクトルを算出する請求項７又は８に記載の障害物検出方法。
10. 前記期待動きベクトルを、前記車両の走行情報のうち速度に基づいて算出する請求項７、８又は９に記載の障害物検出装置。
11. 前記検出対象点が障害物上の点であると判定された場合に、報知信号を発する請求項７〜１０のいずれか１項に記載の障害物検出方法。
12. 前記撮像装置によって撮像された画像と、前記障害物検出装置によって障害物上の点であると判定された検出対象点を強調した画像とを合成して表示する請求項７〜１１のいずれか１項に記載の障害物検出方法。

Images