JP6020371B2 - 車両用情報提供装置 - Google Patents

Description

本発明は、車両の乗員に対して情報を提供する車両用情報提供装置に関する。

従来、目の動きに基づいて運転者の視覚的活動性を測定し、この測定結果に基づいて、運転者に対し注意警告を提供する装置が知られている（例えば、特許文献１を参照）。

特許第４６０３２６４号公報

しかし、上記特許文献１に記載の技術は、自車両周辺の状況を考慮した測定を行っていないため、運転者が自車両周辺の状況に応じて適切な安全確認を行ったか否かを判断することができないという問題があった。

本発明は、こうした問題に鑑みてなされたものであり、運転者が周辺の状況に応じて適切な安全確認を行ったか否かを判断することができる技術を提供することを目的とする。

上記目的を達成するためになされた本発明の車両用情報提供装置は、周辺状況取得手段と、確認物体判断手段と、確認画像表示手段と、視線方向検出手段と、視線移動判断手段とを備える。

そして本発明の車両用情報提供装置では、まず周辺状況取得手段が、当該車両用情報提供装置が搭載された車両である自車両の周辺状況を示す周辺状況情報を取得する。また確認物体判断手段が、周辺状況取得手段により取得された周辺状況情報に基づいて、自車両の周辺に自車両の運転者が確認する必要がある物体である確認物体があるか否かを判断する。その後に確認画像表示手段が、確認物体があると確認物体判断手段が判断した場合に、確認物体を確認するように運転者に指示する運転者確認画像を運転者に対して表示する。また視線方向検出手段が、運転者の視線の方向を検出する。そして視線移動判断手段が、 視線方向検出手段による検出結果に基づいて、運転者確認画像が表示されている位置に向けて運転者が視線を移動させたか否かを判断する。

このように構成された車両用情報提供装置は、自車両の周辺状況を示す周辺状況情報を取得することにより、自車両の周辺において運転者が確認する必要がある物体（確認物体）を特定することができ、特定した確認物体に応じた運転者確認画像を運転者に対して表示する。

そして、運転者が、表示された運転者確認画像を視認すると、運転者確認画像が示す確認物体を実際に確認しようとする可能性が高く、一方、運転者が、運転者確認画像を視認していなければ、運転者確認画像が示す確認物体を実際に確認しようとしない可能性が高いと考えられる。

したがって、本発明の車両用情報提供装置によれば、運転者確認画像が表示されている位置に向けて運転者が視線を移動させたか否かを判断することにより、運転者が周辺の状況に応じて適切な安全確認を行ったか否かを判断することができる。

車両用情報提供装置１の構成を示すブロック図である。 ウインドシールド内での表示画面領域ＤＲの配置を示す図である。 情報提供処理を示すフローチャートである。 報知処理を示すフローチャートである。 運転者確認画像を示す図である。 自車両周辺の状況に対応した運転者確認画像を示す第１の説明図である。 自車両周辺の状況に対応した運転者確認画像を示す第２の説明図である。 自車両周辺の状況に対応した運転者確認画像を示す第３の説明図である。 自車両周辺の状況に対応した運転者確認画像を示す第４の説明図である。 別の実施形態の報知画像を示す図である。 別の実施形態の運転者確認画像を示す図である。 操作指示画像を説明する図である。 バック確認要求画像とサイド確認要求画像を説明する図である。

以下に本発明の実施形態を図面とともに説明する。
本実施形態の車両用情報提供装置１は、自動運転が可能な車両に搭載され、図１に示すように、ヘッドアップディスプレイ（Head Up Display）装置２（以下、ＨＵＤ装置２という）、運転席カメラ３、前方カメラ４、左後方カメラ５、右後方カメラ６、電子ミラー７、レーダ装置８、車速センサ９、ナビゲーション装置１０および制御部１１を備えている。

ＨＵＤ装置２は、画像を表示するための表示光を、ウインドシールドの下方からウインドシールドに向けて照射する。これにより、運転者は、その投影された虚像を車両前方の実際の風景に重ねて視認することになる。なおＨＵＤ装置２は、ウインドシールドの下側に設けられた矩形状の表示画面領域ＤＲに画像を表示する（図２を参照）。

運転席カメラ３は、運転席に座っている乗員（すなわち運転者）の顔を連続して撮影する。なお以下、運転席カメラ３が撮影することにより取得された画像データを顔画像データという。

前方カメラ４は、運転者がウインドシールド越しに視認可能な自車両前方の風景を連続して撮影する。なお以下、前方カメラ４が撮影することにより取得された画像データを前景画像データという。

左後方カメラ５は、車両の左端部に設置されており、車両の左後方の状況を撮影する。
右後方カメラ６は、車両の右端部に設置されており、車両の右後方の状況を撮影する。
電子ミラー７は、ダッシュボードの左側と右側に設置された表示装置である（図２を参照）。左側に設置された電子ミラー７は、左後方カメラ５により撮影された画像を表示し、右側に設置された電子ミラー７は、右後方カメラ６により撮影された画像を表示する。

レーダ装置８は、レーダ波を車両の後方に向けて送信し、反射したレーダ波を受信することにより、車両の後方に位置する車両（以下、後方車両という）の位置と、自車両と後方車両との相対速度とを検出する。

車速センサ９は、自車両の走行速度を検出する。
ナビゲーション装置１０は、道路地図データおよび各種情報を記録した地図記憶媒体から道路地図データを取得するとともに、ＧＰＳ（Global Positioning System）アンテナ（不図示）を介して受信したＧＰＳ信号等に基づいて車両の現在位置を検出するように構成されている。そしてナビゲーション装置１０は、車両の現在地を表示画面ＮＤ（図２を参照）に表示するための制御、および、現在地から目的地までの経路を案内するための制御などを実行するように構成されている。

ナビゲーション装置１０の表示画面ＮＤ上にはタッチパネルが設置されている。このため運転者は、表示画面ＮＤを指で押す操作を行うことにより、各種指示を入力することができる。

制御部１１は、ＣＰＵ、ＲＯＭ、ＲＡＭ、Ｉ／Ｏ及びこれらの構成を接続するバスラインなどからなる周知のマイクロコンピュータを中心に構成されている。そして制御部１１は、カメラ３，４，５，６、レーダ装置８、車速センサ９およびナビゲーション装置１０からの入力に基づいて各種処理を実行し、ＨＵＤ装置２、電子ミラー７およびナビゲーション装置１０を制御する。

このように構成された車両用情報提供装置１において、制御部１１は、後述する情報提供処理と報知処理を実行する。
まず、制御部１１が実行する情報提供処理の手順を説明する。情報提供処理は、車両用情報提供装置１の動作中に繰り返し実行される処理である。

この情報提供処理が実行されると、制御部１１は、図３に示すように、まずＳ１０にて、車速センサ９で検出した走行速度（以下、自車両走行速度という）に基づいて、自車両走行速度を示す現在速度画像ＶＰを（図６（ｂ）を参照）をＨＵＤ装置２に表示させる。本実施形態の現在速度画像ＶＰは、自車両の走行速度を数字と単位で示す画像である。

次にＳ２０にて、自車両の周辺状況を検出する。具体的には、前方カメラ４が撮影した前景画像データを用いて、画像認識処理（例えばパターンマッチング）を行うことにより、例えば道路標識、電光掲示板、道路上の障害物、左折専用レーン、右折専用レーン、横断歩道および信号機を検出する。また、車速センサ９で検出した自車両走行速度と、レーダ装置８で検出した後方車両の位置および相対速度とに基づいて、自車両に接近してくる後方車両（以下、接近後方車両ともいう）を検出する。

そしてＳ３０にて、Ｓ２０での検出結果に基づいて、運転者確認表示条件が成立しているか否かを判断する。本実施形態の運転者確認表示条件は、Ｓ２０において、道路標識、電光掲示板、道路上の障害物、左折専用レーン、右折専用レーン、横断歩道、信号機および接近後方車両の少なくとも１つを検出することである。

ここで、運転者確認表示条件が成立していない場合には（Ｓ３０：ＮＯ）、Ｓ８０に移行する。一方、運転者確認表示条件が成立している場合には（Ｓ３０：ＹＥＳ）、Ｓ４０にて、Ｓ２０での検出結果に応じて予め設定されている運転者確認画像（図６〜図９を参照）を表示する。

その後Ｓ５０にて、運転席カメラ３が撮影した顔画像データを用いて、運転者の視線方向を検出する。Ｓ５０では例えば、顔画像データから運転者の眼を抽出し、抽出した眼について画像認識処理（例えばパターンマッチング）を行うことにより、運転者の視線方向を検出する。

さらにＳ６０にて、Ｓ５０で検出した視線方向とに基づいて、運転者が、Ｓ４０で表示された運転者確認画像を確認したか否かを判定する。その後Ｓ７０にて、Ｓ６０での判定結果を記憶し、Ｓ８０に移行する。

そしてＳ８０に移行すると、Ｓ７０で記憶された判定結果を用いて、運転者が運転者確認画像を確認していないことを示す予め設定された報知条件が成立したか否かを判断する。本実施形態における報知条件は、例えば、予め設定された判定回数（例えば５回）連続して、運転者が運転者確認画像を確認していないことである。

ここで、報知条件が成立した場合には（Ｓ８０：ＹＥＳ）、Ｓ９０にて、報知処理フラグをセットし、情報提供処理を一旦終了する。一方、報知条件が成立した場合には（Ｓ８０：ＮＯ）、Ｓ１００にて、報知処理フラグをクリアし、情報提供処理を一旦終了する。

次に、制御部１１が実行する報知処理の手順を説明する。報知処理は、車両用情報提供装置１の動作中に繰り返し実行される処理である。
この報知処理が実行されると、制御部１１は、図４に示すように、まずＳ２１０にて、報知処理フラグがセットされているか否かを判断する。ここで、報知処理フラグがクリアされている場合には（Ｓ２１０：ＮＯ）、報知処理を一旦終了する。一方、報知処理フラグがセットされている場合には（Ｓ２１０：ＹＥＳ）、Ｓ２２０にて、運転者による運転者確認画像の確認が不十分である旨を示す報知画像をＨＵＤ装置２に表示させ、報知処理を一旦終了する。

次に、運転者確認画像の内容を説明する。
運転者確認画像は、図５に示すように、検出物画像ＣＰ１と、自車両画像ＣＰ２と、接近方向指示画像ＣＰ３と、視線方向指示画像ＣＰ４と、相対速度画像ＣＰ５を含む。

検出物画像ＣＰ１は、Ｓ２０で検出された物体（以下、検出物ともいう）を示す画像である。
自車両画像ＣＰ２は、自車両を上方から見た形状を簡略化した画像である。

接近方向指示画像ＣＰ３は、自車両画像ＣＰ２の周囲を覆うようにしてオーバル状に形成された画像である。オーバル状に形成された接近方向指示画像ＣＰ３は、自車両の前方、後方、右側方、左側方、右前方、左前方、右後方および左後方のそれぞれを示す８つの方向指示画像に分割されている。８つの方向指示画像のうちの少なくとも１つを強調表示することにより、自車両を基点とした接近後方車両の現在位置の方向が示される。

視線方向指示画像ＣＰ４は、人間の両目を簡略化して示した画像であり、円形状に形成された２個の白目画像が水平方向に沿って整列するように配置されている。そして、２個の白目画像それぞれの内部に黒目画像が配置されている。視線方向指示画像ＣＰ４は、白目画像内における黒目画像の位置により、運転者に対して視線方向を指示する。例えば、図５の視線方向指示画像ＣＰ４は、運転者に対して左前方に視線を向けるように指示している。

相対速度画像ＣＰ５は、接近後方車両との相対速度を示す画像である。相対速度画像ＣＰ５は、複数（本実施形態では１３）の矩形状画像ＲＰ０１，ＲＰ０２，ＲＰ０３，ＲＰ０４，ＲＰ０５，ＲＰ０６，ＲＰ０７，ＲＰ０８，ＲＰ０９，ＲＰ１０，ＲＰ１１，ＲＰ１２，ＲＰ１３を含む。

矩形状画像ＲＰ０１〜ＲＰ１３は、矩形状に形成された画像である。そして、左から右に向かって矩形状画像ＲＰ０１，ＲＰ０２，ＲＰ０３，ＲＰ０４，ＲＰ０５，ＲＰ０６，ＲＰ０７，ＲＰ０８，ＲＰ０９，ＲＰ１０，ＲＰ１１，ＲＰ１２，ＲＰ１３の順に水平方向に沿って整列するように配置されている。

矩形状画像ＲＰ０１〜ＲＰ１３はそれぞれ個別に強調表示可能に構成されている。そして相対速度画像ＣＰ５は、相対速度が大きくなるほど強調表示される矩形状画像の数が多くなるようにして、相対速度を表示する。

なお相対速度画像ＣＰ５は、視線方向指示画像ＣＰ４の直下に配置される。これは、視線方向指示画像ＣＰ４と相対速度画像ＣＰ５が一体として、顔を模した画像となるようにすることを意図している。すなわち、視線方向指示画像ＣＰ４が人の両目を表しており、相対速度画像ＣＰ５が人の口を表している。

次に、Ｓ２０で検出された検出物に応じて表示される運転者確認画像を説明する。
まず図６（ａ）に示すように、自車両ＭＣの左前方において、制限速度を示す道路標識を検出した場合には、図６（ｂ）に示すように、検出物画像ＣＰ１は、制限速度を道路標識の形式で示し、視線方向指示画像ＣＰ４は、運転者に対して左前方に視線を向けるように指示する。

また図６（ｃ）に示すように、自車両ＭＣの左前方において、高速道路の出口までの距離を示す案内標識を検出した場合には、図６（ｄ）に示すように、検出物画像ＣＰ１は、出口までの距離を示し、視線方向指示画像ＣＰ４は、運転者に対して左前方に視線を向けるように指示する。

また図７（ａ）に示すように、自車両ＭＣの左前方において、通行止を知らせる電光掲示板を検出した場合には、図７（ｂ）に示すように、検出物画像ＣＰ１は、通行止を道路標識の形式で示し、視線方向指示画像ＣＰ４は、運転者に対して左前方に視線を向けるように指示する。

また図７（ｃ）に示すように、自車両ＭＣの前方において障害物を検出した場合には、図７（ｄ）に示すように、検出物画像ＣＰ１は、障害物を簡略化して示し、視線方向指示画像ＣＰ４は、運転者に対して前方に視線を向けるように指示する。

また図８（ａ）に示すように、自車両ＭＣの後方から接近している車両を検出した場合には、図８（ｂ）に示すように、検出物画像ＣＰ１は、自車両の後方に車両が存在することを示す画像であり、接近方向指示画像ＣＰ３は、車両の接近方向を示す方向指示画像を強調表示する。図８（ｂ）の接近方向指示画像ＣＰ３は、自車両の後方と右後方からの車両接近を示している。また、視線方向指示画像ＣＰ４は、運転者に対して上前方、すなわちバックミラーＢＭ（図２を参照）に視線を向けるように指示する。

また図８（ｃ）に示すように、自車両ＭＣの前方において、左折専用レーンを示す白線を検出した場合には、図８（ｄ）に示すように、検出物画像ＣＰ１は、左折の白線を示し、視線方向指示画像ＣＰ４は、運転者に対して前方に視線を向けるように指示する。

また図９（ａ）に示すように、自車両ＭＣの前方において、横断歩道を示す白線と信号機を検出した場合には、図９（ｂ）に示すように、検出物画像ＣＰ１は、横断歩道と信号機を示し、視線方向指示画像ＣＰ４は、運転者に対して前方に視線を向けるように指示する。

このように構成された車両用情報提供装置１では、前方カメラ４とレーダ装置８が、自車両の周辺状況を示す周辺状況情報を取得する。また、前方カメラ４とレーダ装置８により取得された周辺状況情報に基づいて、自車両の周辺に自車両の運転者が確認する必要がある確認物体（本実施形態では、道路標識、電光掲示板、道路上の障害物、左折専用レーン、右折専用レーン、横断歩道、信号機および接近後方車両）があるか否かを判断する（Ｓ２０，Ｓ３０）。その後に、確認物体があると判断した場合に（Ｓ３０：ＹＥＳ）、確認物体を確認するように運転者に指示する運転者確認画像を運転者に対して表示する（Ｓ４０）。また、運転者の視線の方向を検出する（Ｓ５０）。そして、視線方向の検出結果に基づいて、運転者確認画像が表示されている位置に向けて運転者が視線を移動させたか否かを判断する（Ｓ６０）。

このように車両用情報提供装置１は、自車両の周辺状況を示す周辺状況情報を取得することにより、自車両の周辺において運転者が確認する必要がある物体（確認物体）を特定することができ、特定した確認物体に応じた運転者確認画像を運転者に対して表示する。

そして、運転者が、表示された運転者確認画像を視認すると、運転者確認画像が示す確認物体を実際に確認しようとする可能性が高く、一方、運転者が、運転者確認画像を視認していなければ、運転者確認画像が示す確認物体を実際に確認しようとしない可能性が高いと考えられる。

したがって、車両用情報提供装置１によれば、運転者確認画像が表示されている位置に向けて運転者が視線を移動させたか否かを判断することにより、運転者が周辺の状況に応じて適切な安全確認を行ったか否かを判断することができる。

また車両用情報提供装置１は、確認物体が道路標識である場合には（図６（ａ）を参照）、運転者確認画像を構成する検出物画像ＣＰ１として、道路標識を模した画像を表示する（図６（ｂ）を参照）。これにより車両用情報提供装置１は、確認すべき物体が道路標識である場合において、運転者に、確認すべき物体を直感的に特定させ易くすることができる。

また車両用情報提供装置１は、運転者確認画像を構成する視線方向指示画像ＣＰ４と相対速度画像ＣＰ５を、顔を模した形状となるように配置して表示する。これにより、運転者が運転者確認画像を視認する頻度を向上させることができる。人間は、人の顔に注意を喚起され易いためである。

以上説明した実施形態において、前方カメラ４とレーダ装置８は本発明における周辺状況取得手段、Ｓ２０，Ｓ３０の処理は本発明における確認物体判断手段、Ｓ４０の処理は本発明における確認画像表示手段、Ｓ５０の処理は本発明における視線方向検出手段、Ｓ６０の処理は本発明における視線移動判断手段である。

以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の技術的範囲に属する限り種々の形態を採ることができる。
例えば上記実施形態では、運転者による運転者確認画像の確認が不十分である旨を示す報知画像をＨＵＤ装置２に表示させることにより、休憩への誘導と動機付けを行うようにしたものを示した。しかし、休憩への誘導と動機付けを行う方法は、これに限定されるものではない。例えば、図１０に示す報知を行うことにより、休憩への誘導と動機付けを行うことができる。

具体的には、まず図１０（ａ）に示すように、割引クーポンのアイコン表示（図１０（ｂ）を参照）までのタイミングを示す表示タイミング画像ＤＰ１を、ウインドシールドの表示画面領域ＤＲ内に表示する。図１０（ａ）の表示タイミング画像ＤＰ１は、「１７Ｍ」という文字を表示しており、１７分後にアイコン表示が行われることを示している。

そして、表示タイミング画像ＤＰ１の表示から１７分が経過すると、図１０（ｂ）に示すように、割引クーポンアイコン画像ＤＰ２をウインドシールドの表示画面領域ＤＲ内に表示する。割引クーポンアイコン画像ＤＰ２は、割引クーポンを発行する店舗のロゴマークを示す店舗画像ＤＰ２１と、自車両が走行している道路の制限速度を示す制限速度画像ＤＰ２２と、接近後方車両との相対速度を示す相対速度画像ＤＰ２３を含む。なお、店舗画像ＤＰ２１と制限速度画像ＤＰ２２と相対速度画像ＤＰ２３は、一体として顔を模した画像となるようにすることを意図して配置されている。すなわち、店舗画像ＤＰ２１と制限速度画像ＤＰ２２が人の両目を表しており、相対速度画像ＤＰ２３が人の口を表している。

また、割引クーポンアイコン画像ＤＰ２が表示された直後に、図１０（ｃ）に示すように、ナビゲーション装置１０の表示画面ＮＤ内に、互いに異なる店舗を示す複数（図１０（ｃ）では６個）のロゴマークＬＭ１，ＬＭ２，ＬＭ３，ＬＭ４，ＬＭ５，ＬＭ６を表示する。

そして、運転者が、表示画面ＮＤを指で押す操作を行うことにより、表示画面ＮＤに表示されている複数のロゴマークＬＭ１〜ＬＭ６の中から、割引クーポンアイコン画像ＤＰ２の店舗画像ＤＰ２１と同じロゴマーク（図１０（ｃ）ではロゴマークＬＭ１）を選択する。これにより、割引クーポンを獲得したことを示す特典画像ＤＰ３を表示画面領域ＤＲ内に表示するとともに、割引クーポンの割引内容を示す割引内容画像ＤＰ４をナビゲーション装置１０の表示画面ＮＤ内に表示する。さらに、ナビゲーション装置１０は、運転者が選択したロゴマークＬＭ１に対応する店舗を自車両の経由地に設定する。

なお、図１０に示す表示は、運転者の状態を検出して居眠りの兆候があると予測した場合に行ってもよいし、居眠りを起こし易いエリアを走行中に行ってもよいし、居眠りを起こしやすいエリアに進入する前に行ってもよいし、定期的に行ってもよい。

また、図１０に示す表示において、運転者の状態（例えば、疲労度）に応じて、割引クーポンの割引内容を変化させるようにしてもよい。例えば、疲労または眠気の度合いが大きいほど、割引率を高くするようにしてもよい。これにより、疲労または眠気の度合いが大きい運転者を休憩へ誘導させることが容易になり、運転者の疲労または眠気回復を図ることができる。また、疲労または眠気の度合いに応じて割引クーポンアイコン画像ＤＰ２の表示タイミングを変更するようにしてもよい。

また、図１０に示す表示において、割引クーポンの代わりに、普及しているポイントカードグループのポイントを付与するようにしてもよい。これにより、ポイントを取得することの利用価値が向上し、上記アイコン表示が行われることに対する運転者の期待を高めることができる。

また、図１０に示す表示において、自車両が走行している道路で渋滞が発生する可能性がある場合に、店舗画像ＤＰ２１の表示を行い、渋滞回避のために、店舗画像ＤＰ２１に示す店舗で休憩させるようにしてもよい。これにより、渋滞を回避できる可能性を高めることができる。

また上記実施形態では、自車両の後方から接近している車両を検出した場合に、図８（ｂ）に示すように、検出物画像ＣＰ１と接近方向指示画像ＣＰ３と視線方向指示画像ＣＰ４により、運転者がミラーに視線を向けるようにするものを示した。しかし、運転者がミラーに視線を向けるようにする方法は、これに限定されるものではない。例えば、図１１に示す表示を行うことにより、運転者がミラーに視線を向けるようにすることができる。

具体的には、自車両に接近してくる後方車両を検出すると、自車両と後方車両との相対速度に基づいて、自車両が接近後方車両をサイドミラーで確認する必要があるタイミングを予測する。そして図１１（ａ）に示すように、自車両が接近後方車両をサイドミラーで確認するまでのタイミングを示す表示タイミング画像ＤＰ６と、後方車両の接近方向を示す方向指示画像ＤＰ７を、ウインドシールドの表示画面領域ＤＲ内に表示する。図１１（ａ）の表示タイミング画像ＤＰ６は、「２０Ｓ」という文字を表示しており、２０秒後に接近後方車両の確認が必要であることを示している。また、図１１（ａ）の方向指示画像ＤＰ７は、右後方から車両が接近していることを示している。

そして、表示タイミング画像ＤＰ６の表示から２０秒が経過すると、図１１（ｂ）に示すように、右側の電子ミラー７の表示画面内に、１文字を示す文字画像ＤＰ８を表示する。図１１（ｂ）の文字画像ＤＰ８は、「Ｂ」という文字を表示しており、図１０（ｂ）の店舗画像ＤＰ２１に対応する店舗の名前の一部分を構成する文字である。

そして、運転者が、右側の電子ミラー７に視線を向けて文字画像ＤＰ８を確認しステアリングスイッチを押すと、電子ミラー７に表示された文字を運転者が取得したとみなして、図１１（ｃ）に示すように、文字画像ＤＰ８と同一の文字を示す文字画像ＤＰ９をナビゲーション装置１０の表示画面ＮＤ内に表示する。

その後、表示画面ＮＤ内に表示された文字を手掛かりとして、思い付いた店舗名を運転者が発話すると、車両用情報提供装置１が音声認識で、運転者が発話した内容を確認し、店舗画像ＤＰ２１に対応する店舗の名前を発話したと判断した場合に、店舗画像ＤＰ２１に対応する店舗の割引クーポンを獲得したことを示す特典画像（不図示）を表示画面領域ＤＲ内に表示するとともに、割引クーポンの割引内容を示す割引内容画像（不図示）をナビゲーション装置１０の表示画面ＮＤ内に表示する。なお、右側の電子ミラー７に文字画像ＤＰ８が表示されてから、運転者が発話した名前が正解するまでの時間が短いほど、割引クーポンの割引内容が運転者にとって良いものとなる。

このように、運転者確認画像として、予め設定された複数の文字からなる文字列（図１１では「ＡＢＣ」）のうちの一部を示す文字画像ＤＰ８（図１１では「Ｂ」）を表示することにより、運転者は、文字画像ＤＰ８を手掛かりとして上記文字列を特定しようと考えるため、文字画像ＤＰ８が表示される方向に視線を向けようする。したがって、文字画像ＤＰ８を右側の電子ミラー７に表示することにより、運転者が右側の電子ミラー７に視線を向けようと考え易くなり、その結果、右側の電子ミラー７の確認が必要なときに運転者が右側の電子ミラー７に視線を向ける頻度を向上させることができる。

また上記実施形態では、運転者の視線方向を検出することにより、運転者が運転者確認画像を確認したか否かを判定するものを示した。しかし、運転者が運転者確認画像を確認したか否かを判定する方法は、これに限定されるものではない。例えば、検出物画像ＣＰ１が表示された直後に運転者がステアリングスイッチを操作した場合に、運転者が運転者確認画像を確認したと判断するようにしてもよい。そして、検出物画像ＣＰ１が表示された直後に運転者にステアリングスイッチを操作させるために、図１２に示すように、運転者確認画像が、操作指示画像ＣＰ６を含むようにするとよい。図１２の操作指示画像ＣＰ６は、「押」という文字を表示している。これにより、運転者は、運転者確認画像を確認した後にステアリングスイッチを押す必要があるということを認識することができる。

また上記実施形態では、Ｓ２２０にて、運転者による運転者確認画像の確認が不十分である旨を示す報知画像をＨＵＤ装置２に表示させるものを示したが、運転者確認画像の確認が不十分である場合の処理はこれに限定されるものではない。例えば、オーディオを停止させたり、エアコンをオフにしたりしてもよい。

また、運転者による運転者確認画像の確認が不十分であると車両用情報提供装置１が判断した場合において、運転者の疲労度を予測し、この予測結果に応じた処理を実行するようにしてもよい。疲労度の予測結果に応じた処理としては、例えば、ＨＵＤ装置２、ナビゲーション装置１０およびメータ（不図示）の少なくとも１つによる表示（文字、色、アイコン）、アプリケーションおよび車載機器の少なくとも１つの起動または停止、音または音声での警告などが挙げられる。また、疲労度の予測結果に応じた処理として、近くのサービスエリアを紹介するととともに、ナビゲーション装置１０の経由地を近くのサービスエリアに設定し、経路案内を開始するようにしてもよい。

また、運転者が運転者確認画像を確認した場合に運転者に対してポイントを付与するようにしてもよい。付与されたポイント数に応じて保険料、商品およびサービスの割引を行うなどして、ポイントビジネスと連携させることが可能である。また、運転者が運転者確認画像を確認することによりポイントが付与された場合に、その旨を、ＨＵＤ装置２、ナビゲーション装置１０およびメータ（不図示）により表示するようにしてもよい。

また、運転者が運転者確認画像を確認した場合に、その旨を、画像表示または音声出力により報知するようにしてもよい。
また上記実施形態では、カメラ３で撮影した画像を用いて画像認識処理を行うことにより、道路標識または電光掲示板などを検出するものを示した。しかし、道路標識または電光掲示板などが示す情報を取得する方法はこれに限定されるものではない。例えば、自車両の前方にレーダ波を照射するレーザーレーダにより取得された画像を用いて画像認識処理を行うことにより道路標識または電光掲示板などを検出するようにしてもよい。また、地図データを記憶する地図データベースを自車両に搭載し、地図データベースを参照することにより、道路標識または電光掲示板などが示す情報を取得するようにしてもよい。また、車両の走行経路付近に設置された路上機との間で無線通信を行う路車間通信機能、または自車両の周辺に存在する他車両との間で無線通信を行う車車間通信機能を有する無線通信機を自車両に搭載し、路車間通信または車車間通信を行うことにより、道路標識または電光掲示板などが示す情報を取得するようにしてもよい。

また、図８（ａ）に示すように自車両ＭＣの後方から車両が接近している場合において、バックミラーまたはサイドミラーで確認できる程度に後方車両が接近しているときには、図１３に示すように、バックミラーでの確認を要求するバック確認要求画像ＣＰ７、またはサイドミラーでの確認を要求するサイド確認要求画像ＣＰ８を表示するようにしてもよい。これにより、接近後方車両が映っているミラーへ運転者の視線を案内することができる。

１…車両用情報提供装置、２…ＨＵＤ装置、３…運転席カメラ、８…レーダ装置、１１…制御部

Claims (3)

1. 車両に搭載され、前記車両の乗員に対して情報を提供する車両用情報提供装置（１）であって、
   当該車両用情報提供装置が搭載された車両である自車両の周辺状況を示す周辺状況情報を取得する周辺状況取得手段（４，８）と、
   前記周辺状況取得手段により取得された前記周辺状況情報に基づいて、前記自車両の周辺に前記自車両の運転者が確認する必要がある物体である確認物体があるか否かを判断する確認物体判断手段（Ｓ２０，Ｓ３０）と、
   前記確認物体があると前記確認物体判断手段が判断した場合に、前記確認物体を確認するように前記運転者に指示する運転者確認画像を前記運転者に対して表示する確認画像表示手段（Ｓ４０）と、
   前記運転者の視線の方向を検出する視線方向検出手段（Ｓ５０）と、
   前記視線方向検出手段による検出結果に基づいて、前記運転者確認画像が表示されている位置に向けて前記運転者が視線を移動させたか否かを判断する視線移動判断手段（Ｓ６０）とを備え、
   前記確認画像表示手段は、前記運転者確認画像として、予め設定された複数の文字からなる文字列のうちの一部を示す画像を表示する
   ことを特徴とする車両用情報提供装置。
2. 前記確認画像表示手段は、
   前記確認物体が道路標識である場合には、前記運転者確認画像として、前記道路標識を模した画像を表示する
   ことを特徴とする請求項１に記載の車両用情報提供装置。
3. 前記確認画像表示手段は、
   前記運転者確認画像を構成する複数の画像のうちの少なくとも一部を、顔を模した形状となるように配置して表示する
   ことを特徴とする請求項１〜請求項２の何れか１項に記載の車両用情報提供装置。