JP3942739B2

JP3942739B2 - 車両用表示装置

Info

Publication number: JP3942739B2
Application number: JP21148898A
Authority: JP
Inventors: 真河西
Original assignee: Calsonic Kansei Corp
Current assignee: Calsonic Kansei Corp
Priority date: 1998-07-27
Filing date: 1998-07-27
Publication date: 2007-07-11
Anticipated expiration: 2018-07-27
Also published as: JP2000046521A

Description

【０００１】
【発明の属する技術分野】
本発明は、赤外線暗視カメラによって撮像された画像を表示する車両用表示装置に関する。
【０００２】
【従来の技術】
従来、車両の速度等の情報を運転席前方のフロントガラスに反射表示させ、運転者がわざわざ視線をメータ方向に向けなくても前方の光景に重畳されて見ることの出来るものとして図３に示すヘッドアップ式表示装置がある。
【０００３】
すなわち、この車両用ヘッドアップ式表示装置は、運転席前方のインストルメントパネル２０内に埋設され、上面に開口２１を有する本体ケース２２内部に、速度計、回転計、燃料計、水温計等から構成された発光式表示器２３と、この表示器２３からの速度、エンジン回転数、燃料残量、水温等の表示像を上方に反射させる平面鏡２４とを設けている。また、前記インストルメントパネル２０の上方に位置するフロントガラス２５の内面側にハーフミラー２６を設け、表示器２３の表示像を平面鏡２４及びハーフミラー２６で反射させてこのハーフミラー２６で、車両前方の光景に重ね合わせて表示させ、表示器２３による表示像、すなわち速度、エンジン回転数、燃料残量、水温等の情報を、運転者が前方を見ながら常時読み取れるように構成されている。
【０００４】
【発明が解決しようとする課題】
しかしながら、近年、安全走行手段の一つとして検討され出した暗視カメラによる車両前方の光景を、このヘッドアップ式表示装置を用いて表示しようとした場合、夜間、濃霧の中等に歩行者等がいた場合には、歩行者等とその背景との赤外線の強度差がハッキリしないために、画像もハッキリせず、認識しにくいという問題点があった。
【０００５】
また、この暗視カメラを安全走行の支援装置として使用できるようにするためには、表示装置の表示面を運転者の視界の中に常時入るように設置しなくてはならない。しかしながら、この場合、走行に伴って変化する車両前方の光景がそのまま表示され、かつその表示画像の明暗が激しく変化するので、その光景の変化が視界の中に常時入ってきて運転者に煩わしさを与えてしまうという問題点があった。
【０００６】
この発明は上記問題点に鑑みてなされたもので、車両前方画像の必要な時には、分かり易く、かつ運転者に煩わしさを与えない装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
この車両用表示装置に係る発明は、車両前方の画像を撮像して画像データを出力する赤外線暗視カメラと、該赤外線暗視カメラからの画像データに基づいて歩行者の画像データを抽出する特定画像抽出手段と、該特定画像抽出手段から歩行者の表示画面上での位置座標が供給されると、前記位置座標に歩行者の存在を示すマークを添付して出力するマーク読み取り・貼付け手段と、運転者の視線が走行方向前方に向けられているか、表示装置に向けられているかを検出し、視線が走行方向前方に向けられているときは輝度低減信号を出力し、視線が前記表示装置に向けられているときは輝度回復信号を出力する視線方向算出手段と、前記赤外線暗視カメラからの画像データに、前記マーク読み取り・貼付け手段からのマークを重畳して表示する前記表示装置とを備え、前記表示装置は、前記視線方向算出手段から前記輝度回復信号が供給されている時は前記マークを明るく表示し、前記視線方向算出手段から前記輝度低減信号が供給されている時は前記マークを前記の明るさよりも暗く表示することを特徴とする。
【０００８】
【発明の実施の形態】
実施の形態１．
次に実施の形態を図１に基づいて以下に説明する。
１は赤外線暗視カメラで、自車両の走行方向に向けて取り付けられ、車両前方の光景を撮像し、それに対応する画像信号をビデオ信号形式にして出力する。２は画像信号処理手段で、前記赤外線暗視カメラ１から画像信号を受けて、それを座標表示するためにアドレスと輝度信号とに分解し、かつそのアドレスと輝度信号とを１対１に対応づけて出力する。
【０００９】
３は特定画像特徴メモリで、各種姿勢、状態の歩行者を撮像した時の歩行者の体の各部の形状の画像を、各部位別に、すなわち頭、腕、胴体及び足並びにそれらの組み合わせた場合の組み合わせ形状を記憶している。
【００１０】
４は特定画像抽出手段で、前記画像信号処理手段２から供給される画像信号（アドレスと輝度信号とからなる）を受けて、歩行者らしき先行物体の形状を抽出すると共に、その抽出した先行物体から頭、腕、胴体、足等の部位を抽出し、その抽出した各部位の形状と、前記特定画像特徴メモリ３に記憶された各種画像の形状との間の相関関数を計算して、その最大値が基準値以上あり、かつその基準値を上回ったものが、例えば３つ以上あった場合には、その先行物体を歩行者と断定して、その断定した先行物体の画面上での位置、すなわちアドレスを出力する。
【００１１】
５はマークメモリで、歩行者の表示マークＰを記憶している。６はマーク読み取り・貼り付け手段で、前記特定画像抽出手段４から歩行者の表示面上でのアドレスが供給されると、そのアドレス、すなわち画像上の座標に、前記マークメモリ５に記憶された歩行者の表示マークＰを添付して出力する。
【００１２】
７は眼球位置検出手段、８は眼球回転角検出手段、９は視線方向算出手段で、この視線方向算出手段９は、前記眼球位置検出手段７及び眼球回転角検出手段８のそれぞれからの検出信号を入力し、視線の方向、例えば本実施の形態のものでは、視線が走行方向前方の路面や前方車両に向けられているのか、また表示装置１１に向けられているのかを２つの状態に区分して検出し、視線が走行方向前方の路面や前方車両に向けられているときには輝度低減信号を、また表示装置１１に向けられているときには輝度回復信号を出力する。
【００１３】
なお、これらの各種検出手段７，８及び９は、特開平９−２３８９０５号に既に開示され、かつ詳細に説明されているので、その詳細説明は省略する。
【００１４】
１０は表示判断手段で、前記画像信号処理手段２から供給される画像信号を入力すると共に、前記マーク読み取り・貼り付け手段６から供給されるマークＰ及びそのマークＰが貼り付けられる画面上の番地とを入力し、前記視線方向算出手段９から輝度低減信号が供給されている時には表示判断手段１０は、前記画像信号処理手段２から供給される画像信号を表示装置１１に供給する。また輝度回復信号が供給されている時には運転者の視線が表示装置１１に向けられているものとして、前記マーク読み取り・貼り付け手段６から供給されるマークＰと、そのマークＰが貼り付けられる画面上の番地とを図３において説明したヘッドアップ式表示装置と同等の表示装置１１に供給して、歩行者を検出した場合、図２に示すように表示面Ａ上に、符号Ｐで示される歩行者マークを表示して歩行者の認識を容易にし、かつ画面の明るさを明るくして、読みやすく、且つ直感的に見て分かるようにする。なお、図２中、符号Ｂは路面、Ｃは白線である。
【００１５】
次に上記構成による表示装置の作用説明を行う。
運転者が前方に注意を払いながら運転をしていると、その前方の光景が赤外線暗視カメラ１によって撮像され画像信号処理手段２に供給され、ビデオ信号に変換された前方画像は、特定画像抽出手段４及び表示判断手段１０に供給され、表示判断手段１０によって、車両前方の画像が表示装置１１に表示される。また特定画像抽出手段４は、特定画像特徴メモリ３に記憶されたデータに基づいて、供給されたビデオ信号から歩行者の画像を抽出すると共に、画像上でのその抽出位置を検出して、マーク読み取り・貼り付け手段６でその抽出位置を示す番地にマークメモリ５に記憶されたマークＰを添付して表示判断手段１０に供給する。
【００１６】
また、一方で、眼球位置検出手段７と眼球回転角検出手段８からの出力信号に基づいて運転者の視線の向いている方向が求められ、視線方向算出手段９で、運転者が前方にのみ注意を払って前記表示装置１１による画像方向に視線を向けないと判断した場合には、表示判断手段１０は、画像信号処理手段２から供給されるビデオ信号を表示装置１１に供給して前方光景の画像の表示輝度を低減してフロントガラス２５上のハーフミラー２６に映し出す共に、マーク読み取り・貼り付け手段６から供給されるマークＰをそのハーフミラー２６に映し出された画像上に重ね表示する。
【００１７】
一方、視線方向算出手段９で、運転者が確認のために前記表示装置１１による画像方向に視線を向けていると判断した場合には、表示判断手段１０は、画像信号処理手段２から供給されるビデオ信号を表示装置１１に供給して前方光量の表示輝度を高めてフロントガラス２５上のハーフミラー２６に映し出す共に、マーク読み取り・貼り付け手段６から供給されるマークＰをそのハーフミラー２６に映し出された画像上に重ね表示する（図２参照）。
【００１８】
【発明の効果】
この発明によれば、車両前方の画像を撮像して画像データを出力する赤外線暗視カメラと、赤外線暗視カメラからの画像データに基づいて歩行者の画像データを抽出する特定画像抽出手段と、特定画像抽出手段から歩行者の表示画面上での位置座標が供給されると、位置座標に歩行者の存在を示すマークを添付して出力するマーク読み取り・貼付け手段と、運転者の視線が走行方向前方に向けられているか、表示装置に向けられているかを検出し、視線が走行方向前方に向けられているときは輝度低減信号を出力し、視線が表示装置に向けられているときは輝度回復信号を出力する視線方向算出手段と、赤外線暗視カメラからの画像データに、マーク読み取り・貼付け手段からのマークを重畳して表示する表示装置とを備え、表示装置は、視線方向算出手段から輝度回復信号が供給されている時はマークを明るく表示し、視線方向算出手段から輝度低減信号が供給されている時はマークをの明るさよりも暗く表示するように構成したので、夜間や霧の中で前方確認が難しい時に、前方に歩行者等がいるか、いないかを確認するために表示装置の表示面に視線を移した時に、マークが認識し易く、歩行者等の存在を確認しやすい。また、走行方向前方に視線を向けて表示面のマークを見ることが不要なときは表示輝度を低減するので、フロントガラスを通して車両前方の光景を見る運転者に煩わしさを与えないという効果が発揮される。
【図面の簡単な説明】
【図１】本発明による実施の形態１を示す回路ブロック説明図である。
【図２】図１における表示装置によって表示される画面を説明するための説明図である。
【図３】従来のヘッドアップ式表示装置の概略説明図である。
【符号の説明】
１赤外線暗視カメラ
２画像信号処理手段
３特定画像特徴メモリ
４特定画像抽出手段
５マークメモリ
６マーク読み取り・貼り付け手段
７眼球位置検出手段
８眼球回転角検出手段
９視線方向算出手段
１０表示判断手段
１１表示装置
２０インストルメントパネル
２１開口
２２本体ケース
２３発光式表示器
２４平面鏡
２５フロントガラス
２６ハーフミラー

Claims

車両前方の画像を撮像して画像データを出力する赤外線暗視カメラと、該赤外線暗視カメラからの画像データに基づいて歩行者の画像データを抽出する特定画像抽出手段と、該特定画像抽出手段から歩行者の表示画面上での位置座標が供給されると、前記位置座標に歩行者の存在を示すマークを添付して出力するマーク読み取り・貼付け手段と、運転者の視線が走行方向前方に向けられているか、表示装置に向けられているかを検出し、視線が走行方向前方に向けられているときは輝度低減信号を出力し、視線が前記表示装置に向けられているときは輝度回復信号を出力する視線方向算出手段と、前記赤外線暗視カメラからの画像データに、前記マーク読み取り・貼付け手段からのマークを重畳して表示する前記表示装置とを備え、
前記表示装置は、前記視線方向算出手段から前記輝度回復信号が供給されている時は前記マークを明るく表示し、前記視線方向算出手段から前記輝度低減信号が供給されている時は前記マークを前記の明るさよりも暗く表示することを特徴とする車両用表示装置。