JP2012131329A

JP2012131329A - 車両用表示装置

Info

Publication number: JP2012131329A
Application number: JP2010284459A
Authority: JP
Inventors: Hiromitsu Sato; 広充佐藤
Original assignee: Mitsubishi Fuso Truck and Bus Corp
Current assignee: Mitsubishi Fuso Truck and Bus Corp
Priority date: 2010-12-21
Filing date: 2010-12-21
Publication date: 2012-07-12

Abstract

【課題】運転者の視線を検出し、運転者に的確な情報を表示できる車両用表示装置を提供すること。
【解決手段】運転者の視線の方向を検出する視線方向検出手段と、視線方向検出手段が検出した視線の方向から、視線が移動した経路を検出する視線移動経路検出手段と、視線移動経路検出手段が検出した視線の経路に基づき、運転者が予定している行動を検出する予定行動検出手段と、予定行動検出手段が検出した運転者の予定行動に対応した情報を選択する情報選択表示手段と、情報選択表示手段が選択した情報内容を表示する表示装置と、から車両用表示装置を構成した。視線の移動経路から運転者の予定行動を検出するので、的確に運転者の予定行動を検出でき、正確な情報を運転者に表示できる。
【選択図】図１

Description

本発明は、運転に関する情報を、運転者に的確に表示する車両用表示装置に関する。

近年車両の周囲に撮像機を設置し、車両の前後左右の画像、更には車両周囲の画像を合成して、車両を俯瞰した状態の画像などを、車両の運転室に設けた表示装置に表示させることが行われている。これら各種画像は、例えば、後退動作を行うときには後方画像を表示させたり、車庫入れ時などにおいて、俯瞰画像を表示させるなど、運転者の運転動作に対応させて順次切り替えて表示することも行われている。

また特許文献１には、運転中に運転者の視線の方向を検出し、ヘッドアップディスプレィの表示位置を、運転者の視線の方向に合わせて表示する発明が記載されている。

特開２００２−１９４９１号公報

しかしながら運転者は、運転中に各種の動作を行っており、表示装置のスイッチ類を操作して画像を逐一切り換えることは煩雑であり、また運転中の注意力を散漫にさせるおそれもあった。

また、運転者の視線方向を検出して、運転者の操作に代えて表示装置の画像を切り換えることも考えられる。しかしながら、運転者は運転中に視線を、道路上の他の車両、交通信号機、各種標識、歩行者、車両の左右に設けられている後方鏡、車両に備えられた各種計器類など、多くの箇所に移動させる。そのため、検出された視線の方向が、運転者の何の行動を希望している視線であるのか、的確に判定することは困難であった。また、運転者の希望する行動を判定するために、一箇所に所定時間注視することを必要とするのでは、その間運転者が前方を注視することなく車両を運転させてしまうことが考えられる。

本発明は上記課題を解決し、運転者の視線の方向から運転者が希望する行動を的確に検出し、必要な情報を表示装置に表示できる車両用表示装置を提供することを目的とする。

本発明は、車両用表示装置を次のように構成した。

運転者の視線の方向を検出する視線方向検出手段と、視線方向検出手段が検出した視線の方向から、視線が移動した経路を検出する視線移動経路検出手段と、視線移動経路検出手段が検出した視線の経路に基づき、運転者が予定している行動を検出する予定行動検出手段と、予定行動検出手段が検出した運転者の予定行動に対応した情報を選択する情報選択表示手段と、情報選択表示手段が選択した情報内容を表示する表示手段と、から車両用表示装置を構成した。

本発明にかかる車両用表示装置によれば、運転者の視線の方向が移動した経路から、運転者が予定している行動を検出するので、運転者の予定行動を的確に検出できる。これは、運転者が右後方鏡を見たことを検出したり、左後方鏡を見たことを検出しただけでは、運転者がどのような動作を予定しているかは判断しにくい。しかしながら、例えば運転者が右後方鏡を見て、左後方鏡を見て、その後後方を表示している表示装置を見るという運転者の一連の行為を判断材料とすると、車両の周囲を確認した後、車両の後方を確認したことから運転者はおそらく後退動作を予定していると判定しても、かかる判定はかなり確実性が高い判定であると判断できるためである。

本発明にかかる車両用表示装置を備えた車両の運転室の一実施形態を示す正面図である。同車両を示す平面図である。同車両用表示装置を示すブロック図である。同運転室内を示す正面図である。同運転室内を示す正面図である。同運転室内を示す正面図である。同車両用表示装置の表示内容の一例を示す正面図である。同車両用表示装置の表示内容の一例を示す正面図である。同車両用表示装置の表示内容の一例を示す正面図である。同車両用表示装置の表示内容の一例を示す正面図である。

本発明にかかる車両用表示装置の一実施形態について説明する。
図１に、本発明にかかる車両用表示装置を備えた運転室１２を示す。図１は、図２に示す車両１４の運転室１２を、車両後方から前方に向けて見た場合を示している。車両１４は図２に示すように、前方にキャブ１６を有し、キャブ１６の後方に荷箱１８が取り付けられた貨物用車両である。運転室１２は、キャブ１６内に設けられている。

運転室１２について説明する。運転室１２は、図１に示すように前方にフロントウィンドガラス２０を備え、フロントウィンドガラス２０の上方に天井板２２が、右方に右Ａピラー２４が、左方に左Ａピラー２６がそれぞれ配置されている。

運転室１２には、フロントウィンドガラス２０の下端から室内側に延びるダッシュボード２８が設けてあり、ダッシュボード２８には各種メータ類やスイッチ類が取り付けられている。また運転室１２には、右方に運転席３０が、左方に助手席３２が設置されている。運転席３０の前方には、ハンドル３４が設けてあり、運転席３０の左側方には、ギヤポジションレバー３６が設けられている。またハンドル３４には、ウィンカーレバー３８が取り付けられている。

更に運転室１２には、車両用表示装置１０を構成する、表示手段としての表示装置４０が上部前方中央に、また運転者撮影機（室内カメラ）４２が運転席３０の前方に設けられている。表示装置４０は、液晶表示装置であり、通常室内ミラーが設置されている位置に、表示画面を運転席３０に向けて取り付けられている。表示装置４０は、ＧＰＳ（全地球位置把握システム）に接続し、地図情報や車両１４の現在位置、進行方向等を表示するとともに、車両用表示装置１０からの各種情報を表示する。室内カメラ４２は、運転席３０に着座している運転者（図示せず。）の少なくとも顔を撮影する。尚、表示装置４０は、天井板２２でなく、ダッシュボード２８の内部、あるいはダッシュボード２８の上部に設けてもよく、更に運転室１２の中央でなく、運転席３０の前方に設けてもよい。

運転室１２の外方には、右Ａピラー２４の近傍に右後方確認用の右後方鏡４４が設けてあり、左Ａピラー２６の近傍に左後方確認用の左後方鏡４６および車両前面下部確認用の凸面鏡４８が設けてある。

更に車両１４は、図２に示すように外部に、前方カメラ５２と、左右一対の右側方カメラ５４および左側方カメラ５６と、後方カメラ５８が、車外撮影機（車外カメラ）として取り付けられている。

前方カメラ５２は、車両１４のフロントウィンドガラス２０の下部中央に、撮影範囲を車両前方に向けて取り付けられている。右側方カメラ５４は、キャブ１６の右側方に、撮影範囲を後方に向けて取り付けられている。左側方カメラ５６は、キャブ１６の左側方に、撮影範囲を後方に向けて取り付けられている。後方カメラ５８は、荷箱１８の後部上端に、撮影範囲を後方に向けて取り付けられている。これら各車外カメラは、少なくとも左右の後方鏡４４、および４６の死角になる部分を撮影範囲としている。尚、各カメラの設置位置はこれに限るものではない。

次に、車両用表示装置１０について説明する。
車両用表示装置１０は、図３に示すように表示装置４０と、室内カメラ４２と、制御装置５０と、前方カメラ５２と、右側方カメラ５４と、左側方カメラ５６と、後方カメラ５８などを備えて構成されている。制御装置５０は、前方カメラ５２等が撮影した画像を処理するとともに処理した画像を表示装置４０に表示させる。

更に車両用表示装置１０には、ハンドル３４の操作検出センサ３５や、ギヤポジションレバー３６の操作検出センサ３７や、ウィンカーレバー３８の操作検出センサ３９などが接続されている。操作検出センサ３５は、ハンドル３４が操作されたときの操作量など、操作検出センサ３７は、ギヤポジションレバー３６の操作により設定されたギヤ段の値、操作検出センサ３９は、ウィンカーレバー３８が操作されたときの操作状態などをそれぞれ制御装置５０に送り出す。

更に制御装置５０は、主に画像表示を行うため、次に述べるような（１）から（４）の手段を備えている。

（１）室内カメラ４２が撮影した運転者の顔の画像から、運転者の視線方向を検出する視線方向検出手段。視線方向検出手段は、撮影した運転者の顔の向き、眼球の映像などから、運転者の視線の方向を検出する。

（２）視線方向検出手段が検出した運転者の視線の方向を記憶し、視線が移動した経路を検出する視線移動経路検出手段。視線が移動した経路とは、例えば右のバックミラーを見た後、視線を左に移動させ、左のバックミラーを見て、前方を見たことなど、運転者の視線の流れを逐一追跡して連続させたものである。

（３）視線移動経路検出手段が検出した運転者の視線の移動経路に基づき、運転者が予定している行動を検出する予定行動検出手段。予定行動検出手段は、視線移動経路検出手段が検出した視線の移動経路から、ある行動に直結した意味を有する視線移動を抽出し、抽出した視線移動経路から運転者が予定している行動を検出する。

（４）予定行動検出手段が検出した運転者の予定行動に基づき、予定行動に対応した情報を選択し、選択した情報内容を表示装置４０に表示させる情報選択表示手段。情報選択表示手段は、運転者が行っている行動に対して時間を追って表示装置４０に画像を送り、所定の画像を表示させることが好ましい。

更に制御装置５０は、画像処理手段を備えている。画像処理手段は、車両１４の周囲を撮影した画像を合成し、例えば、車両１４を俯瞰した状態の画像や、車両１４の後方を俯瞰した状態の画像などを作成する。

次に、車両用表示装置１０の作動について説明する。
車両１４を運転している間、室内カメラ４２で撮影した画像は、視線方向検出手段により、運転者の視線の方向が検出される。視線方向検出手段が検出した視線方向は、視線移動経路検出手段により記憶され、連続した視線の移動経路として検出される。
そして予定行動検出手段が、検出された視線の移動経路と、記憶されている視線の経路パターンとを比較し、一致するものを抽出する。検出された視線移動経路のある組み合わせの中から、記憶されている視線の経路パターンと一致したものが含まれていた場合、その視線の経路パターンに対応した行動を、運転者が予定していると判定する。運転者が予定している行動が判定されたなら、予定行動に合致した画像を、情報選択表示手段が選択して、表示装置４０に表示させる。

次に、具体的な例を挙げて画像表示について説明する。車両１４が走行している間は、表示装置４０には図７に示すようなＧＰＳ機能を用いたナビゲーション画面が表示されている。あるいは運転者が望む場合は、図８に示すように、後方カメラ５８が撮影した車両１４の後方の画像が表示される。図８の表示装置４０には、車両１４の後方を走行している車両８０の画像が表示されている。

そして図４に示すように、視線を運転者が前方から左後方鏡４６に、矢印ａに示すように移動させ、そして矢印ｂに示すように表示装置４０に視線を移動させたとする。これは、単に左側方を見ただけではなく、後方を確認した動作が連続して行われていることから左折を予定している場合に行われる視線移動経路である判断される。すると、表示装置４０には、左側方カメラ５６の画像が、運転者の視線が表示装置４０に戻ってから、例えば１秒経過後に表示される。

これにより、運転者は、左後方鏡４６による確認と、表示装置４０による後方確認と、左側方カメラ５６の撮影画像による確認が、一連の視線の移動により行うことができる。更に、ウィンカーレバー３８の操作行動と、視線の移動とを組み合わせて行ってもよい。

また図５に示すように、視線を運転者が前方から右後方鏡４４に矢印ｃに示すように移動させ、そして矢印ｄに示すように右後方鏡４４から左後方鏡４６に移動させ、更に矢印ｅに示すように左後方鏡４６から表示装置４０に視線を移動させるとする。この視線の移動経路は、後退を予定している場合の移動経路と同一と判断される。すると、表示装置４０には、後方カメラ５８の撮影による図９に示すような駐車スペースを示す白線８２が表示される。そしてその一秒後に、図１０に示すような後方画像と、車両１４を俯瞰した画像を組み合わせた画像が表示装置４０に表示される。これにより、後退時に運転者が必要とする画像が、適宜時間を追って表示装置４０に表示される。この場合、ギヤポジションレバー３６の操作を組み合わせて表示を行うようにしてもよい。

また、図６に示すように、視線を運転者が前方から右後方鏡４４に、矢印ｆに示すように移動させ、そして矢印ｇに示すように表示装置４０に視線を移動させたとする。これは、右折を予定している場合に行われる視線移動経路である判断される。すると、表示装置４０には、右側方カメラ５４の画像が、運転者の視線が表示装置４０に戻ってから、例えば１秒経過後に表示される。

以上述べたように、車両用表示装置１０によれば、視線の移動経路を用いて運転者の予定行動を判断することから、一点を注視した場合のような視線の方向のみからの判断に比較して、的確な判定が可能となり、正確な表示が実行できる。尚、本発明は、視線移動経路を用いたものであれば、運転者の予定行動でなく、例えば希望するスイッチ類の操作や各種情報の伝達など、その他の用途に用いてもよい。

また予定行動検出手段が記憶している比較対象としての視線の経路パターンを、任意に変更したり、新たに設定できるようにしてもよい。このようにすると、運転者等が視線の経路パターンを適宜変更、設定し、より正確な判定ができることなる。更に、予定行動検出手段などに学習機能を設け、運転者の癖などを把握して、視線の経路パターンを修正するようにしてもよい。

本発明は、表示内容の切り替え機能を備えた車両の車両用表示装置に用いられる。

１０…車両用表示装置１２…運転室１４…車両２０…フロントウィンドガラス２４…右Ａピラー２６…左Ａピラー２８…ダッシュボード３０…運転席３２…助手席３４…ハンドル３６…ギヤポジションレバー３８…ウィンカーレバー４０…表示装置４２…室内カメラ４４…右後方鏡４６…左後方鏡４８…凸面鏡５０…制御装置５２…前方カメラ５４…右側方カメラ５６…左側方カメラ５８…後方カメラ

Claims

運転者の視線の方向を検出する視線方向検出手段と、
前記視線方向検出手段が検出した視線の方向から、視線が移動した経路を検出する視線移動経路検出手段と、
前記視線移動経路検出手段が検出した視線の移動経路に基づき、前記運転者が予定している行動を検出する予定行動検出手段と、
前記予定行動検出手段が検出した前記運転者の予定行動に対応した情報を選択し、表示させる情報選択表示手段と、
前記情報選択表示手段が選択した情報内容を表示する表示手段と、から構成したことを特徴とする車両用表示装置。
運転者の視線方向を検出する視線方向検出手段と、
前記視線方向検出手段が検出した視線の方向から、視線が移動した経路を検出する視線移動経路検出手段と、
運転に関する操作手段が操作されたことを検出する操作検出手段と、
前記視線移動経路検出手段が検出した視線の経路に基づき、前記運転者が予定している行動を検出する予定行動検出手段と、
前記操作検出手段が検出した運転に関する操作手段の操作内容と前記予定行動検出手段が検出した前記運転者の予定行動に基づき、対応した情報を選択し表示させる情報選択表示手段と、
前記情報選択表示手段が選択した情報内容を表示する表示手段と、から構成したことを特徴とする車両用表示装置。
前記情報選択表示手段は、運転者の視線移動の平均パターンを得て、かかる平均パターンに従って表示装置に表示させる表示内容を切り換えることを特徴とする請求項１または２に記載の車両用表示装置。