JP2006240362A - 車両用表示装置 - Google Patents

Abstract

【課題】 赤外線カメラで撮影した映像中に運転者にとって危険となり得る対象物が存在する場合、運転者が運転する状況に合わせてその対象物を明示する。
【解決手段】 赤外線カメラ１０で撮影される映像の中から、運転者にとって危険となり得る対象物を検出し、対象物の座標およびサイズのデータを出力する検知部２０と、複数の状況を検出すると共に、検出した複数の状況をそれぞれ検出信号として出力する重み検出部３０と、重み検出部３０から入力される複数の検出信号にそれぞれ対応する重み係数を付与し、それら重み係数を用いて演算を行い、その結果から運転者に対象物の存在を知らせる場合に対象物を明示して表示する注意喚起画像を作成する注意喚起部４０と、赤外線カメラ１０で撮影された映像に対して、対象物が存在する位置に注意喚起画像を重ね合わせて画像表示する表示部５０と、を有する。
【選択図】 図１

Description

本発明は、運転者にとって危険となり得るものを自車の周辺、自車の状況、運転者の状況等に応じて明示して表示する車両用表示装置に関する。

従来より、赤外線カメラで撮影した映像の中から、運転者にとって危険となり得る対象物（例えば歩行者）を検出し、その対象物を例えば枠で囲んで表示することで、運転者に対象物の存在を認識させる障害物検出装置が提案されている（例えば特許文献１参照）。

この障害物検出装置は、赤外線カメラと、画像処理ユニットと、画像表示装置と、を備えて構成されている。画像処理ユニットは、赤外線カメラで撮影された映像の中から危険となり得る対象物を検出し、その対象物を明示して表示する処理を行う機能を有するものである。

具体的に、画像ユニットは、映像中の対象物の形状が、運転者にとって危険となり得るものとしてあらかじめ登録された登録形状に相当するか否かを判定する。対象物の形状が登録形状に相当する場合、画像処理ユニットは、その対象物を例えば枠で囲って映像中に表示する処理を行い、その処理結果を画像表示装置に出力する。そして、画像表示装置は、赤外線カメラで撮影された映像中に、運転者にとって危険となり得る対象物を囲った枠を重畳表示する。

このように、赤外線カメラで撮影された映像中に運転者にとって危険となり得る対象物が存在する場合、その対象物が枠で囲まれて明示されることで、運転者にその存在を気づかせるようにすることができる。
特開２００４−１０６６８２号公報

しかしながら、上記従来の技術では、映像中に存在するすべての対象物が検出されると共に、それらすべてに枠が付けられて画一的に表示されていた。つまり、映像中のすべての対象物が枠で囲まれて表示されるため、映像中に複数の枠が表示されてしまい、運転者にとって本当に危険な対象物がどれであるのかがわかりづらくなっていた。また、複数の枠が表示されると、運転者がすべての枠を認識できずに見落としてしまう可能性がある。

さらに、映像中に複数の枠が表示されると、赤外線カメラで撮影された景色が見づらくなり、運転者に煩わしさを与えることとなる。

本発明は、上記点に鑑み、赤外線カメラで撮影された映像中に運転者にとって危険となり得る対象物が存在する場合、運転者が運転する状況に合わせてその対象物を明示することができる車両用表示装置を提供することを目的とする。

上記目的を達成するため、請求項１に記載の発明では、自車の前方を撮影するカメラ（１０）から入力される映像の中から、運転者にとって危険となり得る対象物（８０）を検出すると共に、対象物の少なくとも座標およびサイズのデータを出力する検知部（２０）と、自車周辺、自車、運転者、そして対象物の情報をパラメータとして検出すると共に出力する重み検出部（３０）と、状態量に応じた重み係数があらかじめ設定されており、状態量と重み係数との関係から、重み検出部で検出された複数の重み付けパラメータにそれぞれ対応する重み係数を用いて、映像に含まれる各対象物に対して重み付け演算を行い、その演算結果の数値がしきい値を超えた場合、対象物を明示して表示するための注意喚起画像（９０）を作成する注意喚起部（４０）と、カメラで撮影された映像に対して、対象物が存在する位置に注意喚起画像を重ね合わせて画像表示する表示部（５０）と、を有していることを特徴としている。

このように、自車に関する情報を重み付けパラメータとして検出してそれぞれに対応する重み係数を用いて重み付け演算すると共に、演算結果から対象物の存在を知らせるべきか否かを判定する。これにより、自車や運転者の状況に応じて、映像中の対象物の存在を知らせるようにすることができる。また、映像中に複数の対象物が存在していたとしても、運転者にとって危険となり得る対象物のみを明示して表示するようにすることができる。したがって、状況に応じて運転者に注意を促すことができる。

さらに、上記のように映像中に複数の注意喚起画像を表示しないようにすることで、運転者に煩わしさを与えることなくカメラで撮影された景色を表示することができる。

請求項２に記載の発明では、注意喚起部には、演算結果の数値の大きさに応じて複数の段階の注意喚起処理が設定されており、注意喚起部にて演算結果から運転者に対象物の存在を知らせるべきであると判定されると、演算結果の数値の大きさに該当する段階の注意喚起処理が選択され、その注意喚起処理に基づいて注意喚起画像の画像データが作成されるようになっていることを特徴としている。

このように、演算結果の数値の大きさに応じて複数の段階の注意喚起処理が設定されている。これにより、各段階に応じて、運転者に認識させる度合を複数用意することができる。つまり、運転者に対象物の存在をより早く確実に知らせる注意喚起画像を作成する処理や、対象物の存在を知らせる程度の注意喚起画像を作成する処理を行うことができる。したがって、より状況に応じた注意喚起を行うことができる。

請求項３に記載の発明では、検知部では、対象物として移動物体が検出されるようになっており、注意喚起部では、検知部で検出された移動物体の移動方向に応じて異なる重み係数が設定されていることを特徴としている。

このように、移動物体の移動方向に応じて異なる重み係数を設定する。例えば移動物体が自車に近づく場合、移動物体は自車にとって危険となり得るため、重み係数の値を大きく設定する。逆に、移動物体が自車から遠ざかる場合、移動物体は危険ではなくなるので、上記重み係数よりも小さい値を設定する。これにより、注意喚起部にて移動物体の動きに応じた演算結果を求めることができ、その演算結果に応じた段階の注意喚起を行うことができる。

請求項４に記載の発明では、重み検出部は、天候、および自車の周囲の明るさを検出するようになっており、注意喚起部では、天候、自車の周囲の明るさに応じて異なる重み係数が設定されていることを特徴としている。

このように、自車周辺の状況、すなわち天候や周囲の明るさに応じて異なる重み係数を設定する。例えば、天候が晴れの場合、対象物を発見しやすいので重み係数を小さく設定する。逆に、天候が雨の場合、対象物を発見にしくいので重み係数を大きく設定する。このように、自車周辺の状況に応じて重み係数を設定することで、運転者が対象物を発見しにくい状況ほど、注意喚起処理によって運転者に対象物の存在を知らせるようにすることができる。

なお、上記各手段の括弧内の符号は、後述する実施形態に記載の具体的手段との対応関係を示すものである。

（第１実施形態）
以下、本発明の第１実施形態について図を参照して説明する。

図１は、本発明の一実施形態に係る車両用表示装置のブロック構成図である。図１に示されるように、車両用表示装置は、赤外線カメラ１０と、検知部２０と、重み検出部３０と、注意喚起部４０と、表示部５０と、を備えて構成されている。

赤外線カメラ１０は、車両前方の映像を撮影するカメラであり、例えば１秒間に３０枚の画像を撮影する。これら画像は連続して表示され、運転者に映像として認識される。赤外線カメラ１０にて撮影された車両前方の映像の信号は、ビデオ信号であるＮＴＳＣ信号に変換されてから検知部２０および表示部５０に出力される。なお、赤外線カメラ１０は、本発明のカメラに相当する。

検知部２０は、赤外線カメラ１０で撮影された映像の中から、運転者にとって危険となり得る対象物を検出するものである。具体的に、この検知部２０には、マイクロコンピュータが備えられており、あらかじめ運転者にとって危険となり得る対象物の形状が記憶されている。本実施形態では、対象物として人物（歩行者）を検出することとする。この検知部２０では、いわゆるパターンマッチングがなされ、赤外線カメラ１０にて撮影された映像の中から対象物が検出される。そして、検知部２０にて検出された対象物の座標およびサイズが注意喚起部４０に出力される。

重み検出部３０は、自車の周囲の情報、自車の情報、運転者の情報、および対象物の情報によって表される複数の状態量それぞれを重み付けパラメータとして検出するものである。つまり、運転者にとってどの対象物が危険であるのかを判定するための判定材料として複数の重み付けパラメータを検出して出力するものである。本実施形態では、重み付けパラメータを検出信号とする。以下、それぞれの状況と、それらの状況を検出する手段について説明する。

車両周囲の状況（状態量）とは、天候、周囲の明るさ、走行道路、対向車やガードレール等の状況を指す。これらの状況を検出するため、重み検出部３０は、ワイパースイッチと、コンライトＩＣと、ナビゲーションシステムと、レーダと、を備えている。

ワイパースイッチは、運転者の視界を確保するため、フロントウィンドシールド等のガラスに付着した雨滴を払拭するためのワイパーの始動および停止を制御するスイッチである。このワイパースイッチが作動または非作動の状態が検出信号として出力される。本実施形態では、ワイパースイッチが非作動の場合が晴れ、作動の場合が雨とされる。

コンライトＩＣは、周囲の明るさでヘッドライトの点灯または消灯を制御するＩＣである。このコンライトＩＣの作動または非作動の状態が検出信号として出力される。本実施形態では、コンライトＩＣが作動の場合が明るいとされ、非作動の場合が暗いとされる。

ナビゲーションシステムは、内蔵の記憶媒体、例えばＤＶＤに記憶された地図データに基づき、車両が運行している道路に関する地図データを出力するものであり、ＧＰＳアンテナを備えている。ナビゲーションシステムは、ＧＰＳアンテナから入力された側位信号に基づいて、車両の緯度および経度を特定して車両の現在位置を得て、車両運行に最適な地図データを検索し、その地図データを出力する。したがって、ナビゲーションシステムによって自車の走行場所（市街地や郊外等）が検出信号として出力される。

レーダは、車両前方の物体と自車との距離を検出するものである。具体的には、レーダは、パルス変調信号を車両前方に送信すると共に、車両前方に位置する障害物にて反射した反射波を受信する。そして、パルス変調信号を送信してから障害物からの反射波を受信するまでの時間を求め、この時間の半分の値に光速を乗ずることで車両前方の物体と自車との間の距離を得るようになっている。したがって、レーダで検出された距離が検出信号として出力される。

自車の状況（状態量）とは、車速、自車の進行方向、前車追従の状況を指す。これらの状況を検出するため、重み検出部３０は、車速センサと、方位センサ、ステアリングセンサおよび上述したナビゲーションシステムと、前車追従ＥＣＵと、を備えている。

車速センサは、車両の速度を検出するものであり、車両の速度に応じたパルス信号を出力するものである。このパルス信号は車速に変換される。したがって、パルス信号により得られた車速が検出信号として出力される。

方位センサは、車両がどの方向に運行しているのかを検出するものであり、例えばヨーレートセンサやジャイロセンサによって構成される。具体的には、方位センサは、ヨーレートセンサにより車両重心を通る鉛直軸まわりの車両回転角を検出し、ジャイロセンサによって道路の傾きを検出し、これらに基づいて車両の運行方向に関する方位信号を出力する。また、ステアリングセンサは、運転者がステアリングを操作したときの操舵角を検出するものである。このステアリングセンサは、例えば、ステアリングギアボックスに備えられ、ステアリングの操舵角に応じた信号を出力する。そして、操舵角信号がステアリングの操舵角に変換される。さらに、上述したナビゲーションシステムは、自車が走行している車線を車線信号として検出する。したがって、方位センサ、ステアリングセンサおよびナビゲーションシステムにより得られた方位信号、操舵角信号、車線信号が検出信号として出力される。

前車追従ＥＣＵは、前走車と自車との車間距離を一定維持しつつ、前走車を追従する制御を行うものであり、運転者によって設定された前車との車間距離、自車の速度等に基づき自車の速度、ブレーキ等を制御する。この前車追従ＥＣＵの作動または非作動の状態が検出信号として出力される。

運転者の状況（状態量）とは、運転者の個人情報、疲労、認識有無の状況を指す。これらの状況を検出するため、重み検出部３０は、個人情報入力装置と、車載カメラと、を備えている。

個人情報入力装置は、運転者の個人情報を入力するための装置である。具体的には、運転者の年齢（ベテラン、初心者）、視力、運動能力等を入力する。本実施形態では、個人情報として年齢を採用する。したがって、個人情報入力装置にて入力された運転者の年齢が検出信号として出力される。なお、将来的に免許証に個人情報が内蔵される場合、免許証の個人情報を読みとるようにしても良い。

車載カメラは、運転者の顔を撮影するカメラであり、例えばインストルメントパネルに設置される。この車載カメラは、運転者の顔や目線の動きを撮影し、顔や目線の向きに応じて運転者の疲労、認識有無を検出する。例えば、目線が地面方向を向くと疲労が現れていると言える。また、自車の右左折の際、曲がる方向に顔が向いている場合には認識有無が有ると言える。したがって、車載カメラにて得られた運転者の顔や目線の向きが検出信号として出力される。

対象物の状況（状態量）とは、運転者にとって危険となり得る対象物、すなわち歩行者の位置、進行方向の状況を指す。これらの状況を検出するため、重み検出部３０にはマイコンが備えられており、このマイコンに検知部２０から映像中の対象物の位置（座標）データが入力される。

本実施形態では、撮影される自車前方の範囲のうち自車からの距離に応じて範囲をＡ、Ｂ、Ｃとする。例えば、自車が走行する車線のうち車両前方の道路領域を範囲Ａとし、範囲Ａを囲う領域（例えば歩道）を範囲Ｂ、そして範囲Ｂを囲う領域（例えば歩道よりも遠い位置）を範囲Ｃとする。そして、検知部２０から入力される対象物の座標が上記範囲のどの範囲に属するのかがマイコンで判定され、対象物が属する範囲が検出信号として出力される。

また、対象物の座標の変化によって、対象物の行動、すなわち進行方向が検出される。つまり、対象物の進行方向が検出信号として出力される。

以上のように、各状況が重み検出部３０にてそれぞれ検出されて検出信号とされ、検出信号がそれぞれ注意喚起部４０に出力される。

注意喚起部４０は、上記状態量に応じた重み係数があらかじめ設定されており、状態量と重み係数との関係から、重み検出部３０で検出された複数の検出信号にそれぞれ対応する重み係数を用いて、映像に含まれる各対象物に対して重み付け演算を行い、検知部２０から入力される対象物の座標およびサイズに基づき対象物を明示して表示するための注意喚起画像を作成する処理を行うものである。本実施形態では、注意喚起画像として枠を採用する。

具体的に、上記重み検出部３０から注意喚起部４０にそれぞれ入力される検出信号には、各状況に応じて重み係数が付与される。つまり、運転者に注意を促すべき状況であるほど、検出信号に付与される重み係数の値は大きくなる。注意喚起部４０では、入力される検出信号すべてにそれぞれ重み係数が付与されると共に、それらすべての重み係数が用いられて重み付け演算がなされる。本実施形態では、演算としてすべての重みの積が求められる。そして、その演算結果に応じた注意喚起処理が行われる。

本実施形態では、注意喚起部４０でなされる注意喚起処理とは、「高度注意喚起処理」、「低度注意喚起処理」、「注意喚起しない処理」の３パターンである。このうち高度注意喚起および低度注意喚起が行われる際に、注意喚起部４０にて対象物を明示して表示するための枠が作成され、重み付けの演算結果から注意喚起しないと判定されると、対象物を囲う枠は作成されない。

上記高度注意喚起処理および低度注意喚起処理では、検知部２０から入力される対象物の座標およびサイズに基づき、枠の座標、色、サイズ、明るさを示す画像データが作成される。この画像データとは、赤外線カメラ１０で撮影される映像のサイズと同じサイズの中に枠のみが描かれたデータである。

そして、高度注意喚起の場合、枠の線が太く、赤く、さらに点滅表示されるように枠の画像データが形成される。一方、低度注意喚起の場合、検知部２０から入力される対象物の座標およびサイズに基づき、対象物を囲う枠が作成される。

上記のようにして、重み検出部３０から注意喚起部４０に入力された検出信号に重み付けがなされ、すべての重み数値の積の結果から注意喚起のパターンが選択される。そして、注意喚起のパターンに応じた枠が作成され、枠が描かれた画像の画像データが表示部５０に出力される。また、枠を作成しない場合には、注意喚起部４０から表示部５０には何も出力されない。

表示部５０は、赤外線カメラ１０で撮影された映像を表示するものであり、描画部６０と、表示器７０と、を備えて構成されている。

描画部６０は、赤外線カメラ１０から映像信号であるＮＴＳＣ信号を入力すると共に、そのＮＴＳＣ信号を表示器７０に出力するものである。また、描画部６０は、注意喚起部４０から枠のみが描画された画像の画像データを入力すると共に、この画像を赤外線カメラ１０の映像に重畳表示する処理を行うためのマイコンを備えている。

表示器７０は、描画部６０から入力されるＮＴＳＣ信号を画像表示するものであり、ヘッドアップディスプレイによって構成されている。図２は、ヘッドアップディスプレイの概略構成図である。また、図３はヘッドアップディスプレイの使用時における模式図である。

図２に示されるように、ヘッドアップディスプレイは、画像の画像光を射出する画像投射器７１と、画像投射器７１から射出される画像光を反射する平面鏡７２と、平面鏡７２にて反射した画像光を拡大してフロントウィンドシールドＷＳに導く拡大鏡７３と、拡大鏡７３から導かれる画像光を表示するための画像表示部７４と、ケース７５と、を備えて構成されている。

画像投射器７１は、フロントウィンドシールドＷＳの画像表示部７４に表示される画像の画像光を出力するものであり、光源としてのＬＥＤと、ＴＦＴ型液晶パネルと、を備えている。このような画像投射器７１では、光源から光が発せられ、描画部６０からＴＦＴ型液晶パネルにＮＴＳＣ信号が入力されると、ＴＦＴ型液晶パネルに画像が表示されると共に、その画像の画像光が射出される。

平面鏡７２は、画像投射器７１の画像光投射面に対向する位置に配置され、画像投射器７１から射出される画像光を反射して拡大鏡７３に導く鏡である。この平面鏡７２の角度は固定されており、画像投射器７１からの画像光を常に拡大鏡７３に導く。

拡大鏡７３は、平面鏡７２から導かれる画像光を反射し、この画像光をインストルメントパネルＩＰ上部に設けられた開口部から射出してフロントウィンドシールドＷＳに導く鏡である。なお、この拡大鏡７３の側部には、図示しないギアおよびギアを駆動するモータが備えられており、図示しない操作パネルから信号が入力されると拡大鏡７３の角度が変更される。これにより、フロントウィンドシールドＷＳの画像表示部７４に表示される画像の大きさが運転者にとって見やすいように調整できるようになっている。

画像表示部７４は、拡大鏡７３から導かれる画像光を結像させて画像として表示するフロントウィンドシールドＷＳの内表面に設けられる画像表示領域である。

このような表示器７０のうち、画像投射器７１、平面鏡７２、および拡大鏡７３はケース７５に収納され、図３に示されるように、インストルメントパネルＩＰ内に設置される。

以上が、本実施形態に係る車両用表示装置の構成である。

次に、上記車両用表示装置の作動について説明する。まず、赤外線カメラ１０にて車両前方の映像が撮影されると、その映像の映像信号がＮＴＳＣ信号として表示部５０の描画部６０を介して表示器７０の画像投射器７１に入力される。画像投射器７１には映像が表示され、その映像を構成する画像の画像光が画像投射器７１から射出される。射出された画像光は、平面鏡７２および拡大鏡７３を介して、インストルメントパネルＩＰ上部に設けられた開口部から射出され、フロントウィンドシールドＷＳの内表面上に結像される。具体的には、拡大鏡７３は画像投射器７１の画像を虚像として形成し、この虚像をフロントウィンドシールドＷＳの内表面上に結像させている。これにより、運転者はフロントウィンドシールドＷＳの画像表示部７４に表示される画像を視認できるようになっている。

続いて、赤外線カメラ１０で撮影された映像中に、運転者にとって危険となり得る対象物が映っている場合、運転者や自車の状況に応じた注意喚起を行う処理について説明する。まず、赤外線カメラ１０で撮影された映像のＮＴＳＣ信号が表示部５０および検知部２０に入力される。

検知部２０にＮＴＳＣ信号が入力されると、パターンマッチングの方法により、赤外線カメラ１０にて撮影された映像中から人物の座標およびサイズが検出される。そして、検出された人物の座標およびサイズのデータが注意喚起部４０に入力される。このようにしてパターンマッチングがなされる際、映像中に複数の人物を検出した場合、それぞれの座標およびサイズのデータが注意喚起部４０に入力される。

一方、重み検出部３０にて、車両周囲の状況、自車の状況、運転者の状況、および対象物の状況がそれぞれ検出されると共に、それぞれ検出された検出信号が注意喚起部４０に入力される。

続いて、各検出信号に応じた重みが付与される。この重みの値はあらかじめ注意喚起部４０に設定されており、具体的には図４の表の左欄に示される。図４は、重み検出部３０にて検出された各検出信号にそれぞれ重みを設定した表および重み付けの例をそれぞれ示した図である。

例えば、重み検出部３０で対象物（歩行者）の位置が、範囲Ａすなわち自車が走行している車道（または車線）上に位置している場合、重みは「１０」とされる。また、歩道である範囲Ｂでは「５」、歩道よりも遠い位置である範囲Ｃでは「１」とされる。このように、歩行者が自車前方に存在する状況では、その歩行者が属する範囲に応じて、重み付けが異なる。運転者に歩行者の存在をより知らせるべき状況である場合の重みの値は、範囲Ａのように大きく設定される。

また、重み検出部３０で自車が走行している道路が自動車道である場合、歩行者は存在しないので重みは「０」、一般歩道有りである場合の重みは「１」、一般歩道がない場合の重みは「１．５」とされる。このように、自車が自動車道を走行している際には、歩行者の危険はないのでその重みの値は０になっており、一般歩道がない場合のように、自車にとって歩行者が危険となり得る状況では重みの値が１．５になっている。

さらに、歩行者の進行方向が直進の場合、重みは「１」になっている。同様に、自車とは逆向きの場合、歩行者は危険ではないので重みは「０．５」、自車と同じ向きの場合、歩行者は自車にとって危険となり得るので重みは「１．２」になっている。

上記の例のように、重み検出部３０にて検出される各検出信号に対し、それぞれ重み付けが設定されている。

そして、図４の表の左欄に示される重みの値を用いて、右欄の例１〜例３に示されるように、３つの例について重み付け演算、すなわちすべての重みの積を計算した。その結果、例１では演算結果が「１２．９６」、例２では「２．４」、例３では「１」となった。

本実施形態では、重み付けの演算結果Ａが１０＜Ａである場合、高度注意喚起を行うこととする。同様に、演算結果Ａが２≦Ａ＜１０である場合、低度注意喚起を行うこととする。また、演算結果ＡがＡ＜２である場合、注意喚起はしないこととする。したがって、注意喚起部４０にて演算結果に応じた注意喚起処理がなされる。

具体的に、例１の場合、演算結果は１２．９６であるので、注意喚起部４０にて高度注意喚起処理が行われる。すなわち、検知部２０から入力される対象物の座標およびサイズに基づき、対象物を囲う枠が描かれた画像データが作成される。高度注意喚起処理では、対象物を囲う枠が太く、赤く作成される。そして、その枠が点滅表示されるように枠の画像データが作成される。

また、例２の場合、演算結果は２．４であるので、注意喚起部４０にて低度注意喚起処理が行われる。低度注意喚起処理では、対象物を囲う枠が描かれた画像データが作成される。さらに、例３の場合、演算結果は１であるので、注意喚起はなされず、枠の画像データは作成されない。

上記のように、例１および例２の演算結果によって注意喚起部４０で作成された枠の画像データは、表示部５０の描画部６０に入力される。描画部６０では、赤外線カメラ１０から入力された映像に注意喚起部４０から入力された枠の画像を重ね合わせた映像が作成される。そして、その映像のデータが描画部６０から表示器７０に入力され、図２および図３に示されるようにヘッドアップディスプレイに映像が表示される。

この様子を図５に示す。図５は、ヘッドアップディスプレイに表示される映像の例を示した図であり、（ａ）は赤外線カメラ１０にて撮影された車両前方の映像を示した図、（ｂ）は（ａ）の映像中に存在する歩行者を枠で囲った映像を示した図である。

図５（ａ）に示されるように、赤外線カメラ１０で撮影された映像の中に歩行者８０が存在すると、図５（ｂ）に示されるようにその歩行者８０を囲う枠９０が映像中に表示され、運転者に注意を促すようになっている。このとき、注意喚起度、すなわち高度注意喚起または低度注意喚起に応じて、枠９０が強調または単調に表示される。また、図５（ｂ）に示される枠９０は、赤外線カメラ１０で撮影された映像中に歩行者８０が撮影されていたとしても、運転者にとって危険となり得る場合にのみ表示されるため、運転者や自車の状況に合わせて運転者に注意を促すことができる。

なお、検知部２０にてパターンマッチングにより人物が検出されなかった場合には、注意喚部４０で注意喚起処理はなされず、赤外線カメラ１０で撮影された映像が表示部５０のヘッドアップディスプレイに表示されることとなる。

以上説明したように、本実施形態では、自車に関する状況を検出して検出結果にそれぞれ重み係数を付与し、これら重み係数を用いて重み付け演算を行う。そして、その演算結果から対象物８０の存在を知らせるべきか否かを判定する。これにより、自車や運転者の状況に応じて、映像中の対象物８０の存在を知らせるようにすることができる。

また、映像中に複数の対象物８０が存在していたとしても、運転者にとって危険となり得る対象物８０のみを明示して表示するようにすることができる。したがって、状況に応じて運転者に注意を促すことができる。さらに、上記のように映像中に複数の枠９０を表示しないようにすることで、運転者に煩わしさを与えることなく赤外線カメラ１０で撮影された景色を表示することができる。

本実施形態では、演算結果に応じて複数の段階の注意喚起処理が設定されている。これにより、各段階に応じて、運転者に対象物８０の存在をより早く確実に知らせる注意喚起画像を作成する処理や、対象物の存在を知らせる程度の注意喚起画像を作成する処理を行うことができ、より状況に応じた注意喚起を行うことができる。

（他の実施形態）
上記第１実施形態では、高度注意喚起処理において、枠を描画する画像に映像画面全体の色を変える処理を施しても良い。これにより、運転者に歩行者の存在をより確実に認識させることができる。また、映像中に対象物が存在し続ける限り枠９０が表示され続けるが、枠９０が一定時間表示されると消えるようにしても良い。

上記第１実施形態では、映像を表示する手段としてヘッドアップディスプレイを用いているが、映像を表示できるモニタを車両に搭載し、このモニタに赤外線カメラ１０で撮影された映像を表示するようにしても構わない。

上記第１実施形態では、注意喚起部４０で高度注意喚起処理を行う場合、枠９０を表示する際にブザーで音を鳴らすようにしても良い。また、映像中に枠９０が一定時間以上表示されていなかったときに、突然枠９０が表示される際にブザーを鳴らして運転者に枠９０の表示を知らせるようにしても良い。

上記第１実施形態で示された重み検出部３０は一例を示すものである。したがって、様々な状況を検出する手段を重み検出部３０に追加することができる。また、検出したい事項をユーザが設定できるようにしても良い。

また、図４に示される各状況に応じた重みの値は一例を示すものであって、自由に設定することができる。

上記第１実施形態では、注意喚起する段階を３段階（高度注意喚起、低度注意喚起、注意喚起しない）としているが、注意喚起する段階はこれに限るものではない。また、運転者がこの段階数を自由に変更できるようにしても良い。また、しきい値を設定し、重み係数を用いた演算結果の数値としきい値とを比較して注意喚起するか否かを判定するようにしても良い。

上記第１実施形態では、運転者にとって危険となり得る対象物として人物について説明したが、この対象物は例えば落下物や駐車車両等、人物以外のものであっても構わない。

本発明の一実施形態に係る車両用表示装置のブロック構成図である。 ヘッドアップディスプレイの概略構成図である。 ヘッドアップディスプレイの使用時における模式図である。 重み検出部にて検出された各検出信号にそれぞれ重みを設定した表および重み付けの例をそれぞれ示した図である。 ヘッドアップディスプレイに表示される映像の例を示した図であり、（ａ）は赤外線カメラにて撮影された車両前方の映像を示した図、（ｂ）は（ａ）の映像中に存在する歩行者を枠で囲った映像を示した図である。

符号の説明

１０…赤外線カメラ、２０…検知部、３０…重み検出部、４０…注意喚起部、
５０…表示部、６０…描画部、７０…表示器、８０…歩行者、９０…枠。

Claims (4)

1. 自車の前方を撮影するカメラ（１０）と、
   前記カメラから入力される映像の中から、運転者にとって危険となり得る対象物（８０）を検出すると共に、前記対象物の少なくとも座標およびサイズのデータを出力する検知部（２０）と、
   前記自車の周囲の情報、前記自車の情報、前記運転者の情報、および前記対象物の情報のうち少なくとも一つの情報によって表される複数の状態量それぞれを重み付けパラメータとして検出する重み検出部（３０）と、
   前記状態量に応じた重み係数があらかじめ設定されており、前記状態量と前記重み係数との関係から、前記重み検出部で検出された複数の重み付けパラメータにそれぞれ対応する重み係数を用いて、前記映像に含まれる各対象物に対して重み付け演算を行い、その演算結果の数値がしきい値を超えた場合、前記運転者に前記対象物の存在を知らせるべきであると判定し、前記検知部から入力される前記対象物の座標およびサイズに基づいて前記対象物を明示して表示するための注意喚起画像（９０）の画像データを出力する注意喚起部（４０）と、
   前記カメラで撮影された映像に対して、前記対象物が存在する位置に前記注意喚起画像を重ね合わせ、この重ね合わせた画像の画像データを作成する描画部（６０）を備え、前記描画部で作成された画像データを画像表示する表示部（５０）と、を有していることを特徴とする車両用表示装置。
2. 前記注意喚起部には、前記演算結果の数値の大きさに応じて複数の段階の注意喚起処理が設定されており、前記注意喚起部にて前記演算結果から前記運転者に前記対象物の存在を知らせるべきであると判定されると、前記演算結果の数値の大きさに該当する段階の注意喚起処理が選択され、その注意喚起処理に基づいて注意喚起画像の画像データが作成されるようになっていることを特徴とする請求項１に記載の車両用表示装置。
3. 前記検知部では、前記対象物として移動物体が検出されるようになっており、前記注意喚起部では、前記検知部で検出された前記移動物体の移動方向に応じて異なる重み係数が設定されていることを特徴とする請求項１または２に記載の車両用表示装置。
4. 前記重み検出部は、天候、および前記自車の周囲の明るさを検出するようになっており、前記注意喚起部では、前記天候、前記自車の周囲の明るさに応じて異なる重み係数が設定されていることを特徴とする請求項１ないし３のいずれか１つに記載の車両用表示装置。
   

Images