JPWO2018220774A1 - 運転支援装置、運転支援システムおよび運転支援方法 - Google Patents

Abstract

実施形態の運転支援装置は、環境検出部と、リスト生成部と、視線検出部と、リスク評価部と、出力制御部とを有する。環境検出部は、運転者が運転する乗り物の周囲の環境を検出する。リスト生成部は、検出された環境に基づいてハザードとする対象物のハザードリストを生成する。視線検出部は、運転者の視線を検出する。リスク評価部は、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれる頻度に基いて、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する。出力制御部は、評価されたリスクが閾値以上の対象物に対応する運転支援情報を出力させる。

Description

本発明の実施形態は、運転支援装置、運転支援システムおよび運転支援方法に関する。

従来、車両等の乗り物において、運転者に対して、危険箇所、障害物等の存在（ハザード対象）を知らせることで、運転者に注意を促す運転支援装置が知られている。

この運転支援装置では、運転者が危険箇所等を見る時の視線方向に危険箇所等を特定する名称、符号等を表示し、運転者が発した音声が表示した名称、符号等の音声パターンと一致するか否かを判定する。そして、危険箇所等を特定する名称、符号等を表示した後の所定の時間内に音声パターンが一致しなかった場合、運転者に警告を発する。

特開２００８−４０９７４号公報 特開２００３−９９８９９号公報 特開平７−１６７６６８号公報 特開２００５−４４１４号公報

しかしながら、上記の従来技術では、運転者の認知活動に対して過度に警告が発せられ、運転支援が過度に行われる場合がある。

例えば、危険箇所等について、運転者が十分に認識しているにも関わらず、運転者に警告を発するような、運転支援が過度に行われる場合には、運転者の運転支援に依存する傾向が強くなる。運転支援に対する依存傾向の強い運転者は、危険箇所に対する認知活動が少なくなり、例えば、危険箇所に対する予測能力の向上が見られなくなる。このように、過度な運転支援は、運転者の認知活動に対する支援には結びつかないことがある。

１つの側面では、運転者に対して適度な運転支援を実現できる運転支援装置、運転支援システムおよび運転支援方法を提供することを目的とする。

第１の案では、運転支援装置は、環境検出部と、リスト生成部と、視線検出部と、リスク評価部と、出力制御部とを有する。環境検出部は、運転者が運転する乗り物の周囲の環境を検出する。リスト生成部は、検出された環境に基づいてハザードとする対象物のハザードリストを生成する。視線検出部は、運転者の視線を検出する。リスク評価部は、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれる頻度に基いて、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する。出力制御部は、評価されたリスクが閾値以上の対象物に対応する運転支援情報を出力させる。

本発明の１実施態様によれば、運転者に対して適度な運転支援を実現できる。

図１は、第１の実施形態にかかる運転支援装置の構成例を示すブロック図である。 図２は、運転者の認知構造モデルを説明する説明図である。 図３は、運転支援用ＥＣＵのハードウエア構成の一例を示すブロック図である。 図４は、動作情報格納部の一例を説明する説明図である。 図５は、ハザードリスト格納部およびリスクテーブル格納部の一例を説明する説明図である。 図６は、運転支援処理の一例を示すフローチャートである。 図７は、状況判定処理の一例を示すフローチャートである。 図８は、確認動作判定処理の一例を示すフローチャートである。 図９は、ハザードリスト生成処理の一例を示すフローチャートである。 図１０は、リスク評価処理の一例を示すフローチャートである。 図１１は、リスク算出を説明する説明図である。 図１２は、ハザードマップおよびリスクマップの一例を説明する説明図である。 図１３は、確認動作の一例を説明する説明図である。 図１４は、対象物に対する運転者の忘却度の一例を説明する説明図である。 図１５は、リスク評価処理の変形例を示すフローチャートである。 図１６は、乗り物外への報知例を説明する説明図である。 図１７は、第２の実施形態にかかる運転支援システムの構成例を示すブロック図である。

以下、図面を参照して、実施形態にかかる運転支援装置、運転支援システムおよび運転支援方法を説明する。実施形態において同一の機能を有する構成には同一の符号を付し、重複する説明は省略する。なお、以下の実施形態で説明する運転支援装置、運転支援システムおよび運転支援方法は、一例を示すに過ぎず、実施形態を限定するものではない。また、以下の各実施形態は、矛盾しない範囲内で適宜組みあわせてもよい。

なお、以下の各実施形態において、「注意喚起メッセージ」とは、車両等の乗り物（以下、車両と呼ぶ）において、運転者に対して、運転操作に関する注意を促すための運転支援情報を指す。

また、「運転者」とは、注意喚起メッセージを音声出力して運転の支援を行う対象者を指し、以下の各実施形態では、対象者が、車両を運転操作するための運転席の位置にいる場合について説明する。ただし、運転席の位置にいない場合であっても、運転操作できる位置にいる者も運転者に含まれるものとする。

また、「仮想出力者」とは、注意喚起メッセージを含む各種音声情報を音声出力する仮想音源を指す。仮想音源は、運転操作中の運転者の周囲に配された複数の音声出力部（スピーカ等の音声出力装置）を介して音声情報を出力する際に、音量（音圧）及び位相を制御することで、運転者の周囲の任意の方向に配置することができる。例えば、仮想音源ごとに声色を変えることで、仮想音源が配置されたそれぞれの方向に、所定の属性を有する人物がいるかのように、運転者に認識させてもよい。

なお、仮想出力者のうち、運転者の周囲の座席の位置に対応する位置に配置された仮想音源を、「仮想同乗者」と称する。

また、「確認動作」とは、運転者が操作する車両の状況（例えば、右左折、追い越し等）に応じて運転者が確認のために行う動作（例えば、目視による外界対象物の把握や、操作パネルやバックミラの確認など、運転環境や状況を把握するための動き等）をいう。

また、「呼称」とは、運転者の確認動作のうち、発声により行う確認動作をいう。なお、確認動作には、呼称のほか、指差し動作や視線の動き等が含まれるものとする。更に「呼称」は、車両センサによる周辺監視機能による「仮想同乗者」からの情報提供を含むものとする。

また、「復唱」とは、呼称の後に、呼称の内容に対応する情報（復唱情報）を、仮想同乗者が一斉に音声出力することをいう（ただし、完全に同時でなくてもよく、仮想同乗者間で音声出力のタイミングに多少のずれがあってもよい）。更に、「連呼」とは、呼称の後に、呼称の内容に対応する情報を、仮想同乗者が順次音声出力することをいう。ここで、仮想同乗者からの先行的な「呼称」に応答する運転者の「復唱」を含み、さらに「仮想同乗者」からの一斉に「復唱」する「連呼」を含むものとする。なお、以下の実施形態では、主に「復唱」する場合について説明するが、「連呼」する場合も同様の処理となる。

（第１の実施形態）
図１は、第１の実施形態にかかる運転支援装置の構成例を示すブロック図である。

図１に示すように、運転支援装置１００は、ナビゲーション装置１１１、車両制御ＥＣＵ１１２（ECU:Electronic Control Unit）、ジェスチャ検出部１１３、音声検出部１１４、視線検出部１１５および周辺環境検出部１１６を有する。また、運転支援装置１００は、運転支援用ＥＣＵ１２０、音声出力部１３１、表示出力部１３２および通信部１３３を有する。

運転支援装置１００は、運転者が運転する車両に設置され、音声出力部１３１による音声出力や表示出力部１３２による表示出力で運転支援情報を運転者に提供することで、運転時における運転者の認知活動を支援する装置である。

図２は、運転者の認知構造モデルを説明する説明図である。運転者は、車両の運転時において、例えば図２に例示する認知構造モデルのように周囲の状況を認知し、運転操作を行う。

具体的には、運転者は、車両の周囲環境とその状況下における歩行者、先行車、後続車、対向車などの車両といった危険箇所をハザード対象として認識する（Ｓ１）。そして、運転者は、自車両の監視（車線・速度など）、周辺のハザード対象の監視（前後左右の車間など）を行う（Ｓ２）。

また、運転者は、視界内における周辺視野の探索（Ｓ３）でハザード対象の探索を行い（Ｓ４）、ハザード対象の状況変化を確認する（Ｓ５）。状況変化がある場合（Ｓ５：ＹＥＳ）、運転者は、中心視野でハザード対象を探索し（Ｓ６）、ハザード対象を中心視野で補足することで（Ｓ７）、ハザード対象の認知を更新する（Ｓ８）。状況変化がない場合（Ｓ５：ＮＯ）、運転者は、中心視野内でハザード対象を補足することがなく、ハザード対象の忘却が進む（Ｓ９）。

次いで、運転者は、認知しているハザード対象などをもとに安全判定を行う（Ｓ１０）。例えば、運転者は、安全判定による車線変更（走行車線から追い越し車線への変更）の想起の有無により（Ｓ１１）、車線変更を想起しない場合（Ｓ１１：ＮＯ）、車間・速度を維持する操作（アクセル、ハンドル）を行う（Ｓ１２）。

車線変更を想起した場合（Ｓ１１：ＹＥＳ）、運転者は、ハザード対象についてリスク予測を行い（Ｓ１３）、リスク回避の安全確認を行う（Ｓ１４）。具体的には、運転手順に従って、前方のハザードの安全確認、右後方のハザードの安全確認、右死角のハザードの不在確認を行う。

次いで、運転者は、安全確認判断を行い、車線変更を決定する（Ｓ１５）。車線変更を決定した運転者は、ウインカを提示し（Ｓ１６）、右死角のハザードの不在を再確認（Ｓ１７）した後に、車線変更の操作（アクセル、ハンドル）を行う（Ｓ１８）。次いで、運転者は、安全確認を行い（Ｓ１９）、車線変更を完了する（Ｓ２０）。

このような、運転時における運転者の認知構造モデルに対し、運転支援装置１００は、運転者が運転する車両の周囲の環境を検出し、検出された環境に基づいてハザードとする対象物のハザードリストを生成する。そして、運転支援装置１００は、運転者の視線を検出し、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれる頻度に基いて、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスク（関心の低さ）を評価する。そして、運転支援装置１００は、評価されたリスクが閾値以上の対象物に対応する運転支援情報を音声出力部１３１による音声出力や表示出力部１３２による表示出力で出力させる。

したがって、運転支援装置１００は、周辺監視センサにより検知したハザードリストに含まれる対象物について、運転者の視野内に含まれる頻度に基いてリスクを評価し、リスクが閾値以上の対象物に対応する運転支援情報を提供することで、過度な運転支援を抑止でき、運転者に対して適度な運転支援を実現できる。例えば、運転支援装置１００は、運転者の視野内に含まれる頻度が高く、運転者が十分に関心が高い対象として認知している対象物については運転支援情報を提供することなく、対象物に対する運転者の認知活動を妨げないようにする。また、運転支援装置１００は、運転者の視野内に含まれる頻度が低く関心が低下し、運転者の認知が不十分な対象物については運転支援情報を提供し、運転者が対象物を忘却することを抑止する。

図１に戻り、ナビゲーション装置１１１は、走行中の車両の現在位置をＧＰＳ（Global Positioning System）を用いて検出し、位置情報として運転支援用ＥＣＵ１２０に送信する。また、ナビゲーション装置１１１は、車両の現在位置が、交差点や分岐点、合流点等の特定の位置に到達したことを検出し、検出結果（位置検出結果）を位置情報に含めて運転支援用ＥＣＵ１２０に送信する。

更に、ナビゲーション装置１１１は、目的地までの経路検索結果および車両状況（運転操作の履歴や車両の速度など）に基づいて、交差点に到達した際に自車両が直進するのか、右折するのか、左折するのかを検出する。同様に、ナビゲーション装置１１１は、目的地までの経路検索結果に基づいて、分岐点に到達した際に、左側に分岐するのか、右側に分岐するのかを検出する。更に、ナビゲーション装置１１１は、目的地までの経路検索結果に基づいて、合流点に到達した際に、右側から合流するのか、左側から合流するのかを検出する。ナビゲーション装置１１１は、これらの検出結果（進路検出結果）を位置情報に含めて運転支援用ＥＣＵ１２０に送信する。

車両制御ＥＣＵ１１２は、運転者が車両に対して行った運転操作を示す運転操作情報（例えば、ステアリングの操舵角、アクセルペダルの開度、ブレーキペダルの踏み込み量等）や、車両の状態を示す車両情報（例えば、車速）等を取得する。車両制御ＥＣＵ１１２は、取得した運転操作情報及び車両情報を、運転支援用ＥＣＵ１２０に送信する。

ジェスチャ検出部１１３は、車載カメラ（図示しない）などで撮影された車内の画像をもとに、運転者のジェスチャを検出する。また、ジェスチャ検出部１１３は、運転者が指差し動作を行っていたことを検出すると、指差し方向を判定して、指差し方向情報を運転支援用ＥＣＵ１２０に送信する。

音声検出部１１４は、車載マイク（図示しない）などで集音された車内の音声をもとに、運転者の呼称を検出して、呼称情報を運転支援用ＥＣＵ１２０に送信する。

視線検出部１１５は、車載カメラ（図示しない）などで撮影された運転者の顔画像をもとに、運転者の視線方向を検出して、視線方向情報を運転支援用ＥＣＵ１２０に送信する。

周辺環境検出部１１６は、例えば車載センサ（図示しない）や車載カメラ（図示しない）などによる検知情報をもとに、運転者が運転する車両周りの歩行者や他車両等の障害物を検出して、周辺環境情報を運転支援用ＥＣＵ１２０に送信する。具体的には、周辺環境検出部１１６は、検出した障害物（例えば歩行者、車両など）を識別した識別情報、運転者が運転する車両に対する障害物の位置情報および速度情報などを含む周辺環境情報を運転支援用ＥＣＵ１２０に送信する。すなわち、周辺環境検出部１１６は、環境検出部の一例である。なお、図１の例では、周辺環境検出部１１６は、歩行者や他車両等の障害物を検出した場合に、検出結果を、直接、運転支援用ＥＣＵ１２０に送信するものとしているが、検出結果をナビゲーション装置１１１や車両制御ＥＣＵ１１２に入力するようにしてもよい。この場合、ナビゲーション装置１１１または車両制御ＥＣＵ１１２が検出結果を解析し、周辺環境情報を運転支援用ＥＣＵ１２０に送信する。

また、周辺環境情報は、路車間通信や車々通信を介して取得して運転支援用ＥＣＵ１２０に送信するようにしてもよい。この場合、周辺環境検出部１１６は、通信手段として機能することになる。

運転支援用ＥＣＵ１２０は、注意喚起メッセージを音声出力または表示出力するための制御を行う。運転支援用ＥＣＵ１２０には、各種機能を実現するためのプログラムが格納されている。運転支援用ＥＣＵ１２０は、このプログラムを実行することで、状況判定部１２１、情報特定部１２２、動作判定部１２３、ハザードリスト生成部１２４、リスク評価部１２５および出力制御部１２６として機能する。また、運転支援用ＥＣＵ１２０は、動作情報、ハザードリスト、リスクテーブルなどの各種情報を格納する動作情報格納部１２７、ハザードリスト格納部１２８およびリスクテーブル格納部１２９を有する。

ここで、運転支援用ＥＣＵ１２０のハードウエア構成について説明する。図３は、運転支援用ＥＣＵ１２０のハードウエア構成の一例を示すブロック図である。

図３に示すように、運転支援用ＥＣＵ１２０は、ＣＰＵ２０１（CPU:Central Processing Unit）、ＲＯＭ２０２（ROM:Read Only Memory）、ＲＡＭ２０３（RAM:Random Access Memory）および接続装置２０４を有する。なお、運転支援用ＥＣＵ１２０の各部は、バス２０５を介して相互に接続されている。

ＣＰＵ２０１は、ＲＯＭ２０２に格納された各種プログラムを実行するコンピュータである。

ＲＯＭ２０２は不揮発性メモリであり、ＣＰＵ２０１により実行される各種プログラムや各種プログラムを実行する際に用いる情報（動作情報、ハザードリスト、リスクテーブル等）を格納する。

ＲＡＭ２０３は揮発性メモリであり、ＲＯＭ２０２に格納された各種プログラムがＣＰＵ２０１によって実行される際に展開される、作業領域を提供する。

接続装置２０４は、運転支援用ＥＣＵ１２０と外部機器とを接続し、外部機器との間で各種情報を送受信する。この外部機器は、例えば、ナビゲーション装置１１１、車両制御ＥＣＵ１１２、ジェスチャ検出部１１３、音声検出部１１４、視線検出部１１５、周辺環境検出部１１６、音声出力部１３１、表示出力部１３２および通信部１３３などがある。

図１に戻り、状況判定部１２１は、ナビゲーション装置１１１より受信した位置情報と、リスク評価部１２５に格納された動作情報とに基づいて、現在の車両の状況が、車両の運転者に対して注意喚起メッセージを出力すべき状況にあるか否かを判定する。状況判定部１２１は、車両の運転者に対して注意喚起メッセージを出力すべき状況にあると判定した場合に、現在の車両の状況に関する情報を情報特定部１２２に通知する。なお、状況判定部１２１は、更に、周辺環境検出部１１６より受信した周辺環境情報に応じて、現在の車両の状況を判定するようにしてもよい。

情報特定部１２２は、状況判定部１２１より、現在の車両の状況に関する情報を取得すると、動作情報格納部１２７の動作情報を参照し、運転者に対して注意喚起メッセージを音声出力する際に用いる情報を特定し、出力制御部１２６に通知する。すなわち、情報特定部１２２は、メッセージ特定部の一例である。

具体的には、情報特定部１２２は、現在の車両の状況に関する情報に基づいて、注意喚起メッセージとそのＩＤを取得する。また、情報特定部１２２は、取得した注意喚起メッセージに基づいて、運転者が確認すべき方向を特定し、特定した方向に関連付けて規定された仮想出力者を特定する。また、情報特定部１２２は、取得した注意喚起メッセージに関連付けて規定された、音声出力するタイミング、順序を特定する。更に、情報特定部１２２は、これらの情報を注意喚起メッセージを音声出力する際に用いる情報として、出力制御部１２６に通知する。

また、情報特定部１２２は、状況判定部１２１より、現在の車両の状況に関する情報を取得すると、リスク評価部１２５の動作情報を参照し、運転者の確認動作の適否を判定する際に用いる情報を特定し、動作判定部１２３に通知する。

具体的には、情報特定部１２２は、現在の車両の状況に関する情報に基づいて、注意喚起メッセージとそのＩＤを取得する。また、情報特定部１２２は、取得した注意喚起メッセージに関連付けて規定された、順序、指差し方向、呼称内容、視線方向を特定する。そして、情報特定部１２２は、これらの情報を運転者の確認動作の適否を判定する際に用いる情報として、動作判定部１２３に通知する。

動作判定部１２３は、情報特定部１２２より、運転者の確認動作の適否を判定する際に用いる情報を取得すると、ジェスチャ検出部１１３より指差し方向情報を受信し、音声検出部１１４より呼称情報を受信し、視線検出部１１５より視線方向情報を受信する。

また、動作判定部１２３は、受信した指差し方向情報、呼称情報、視線方向情報のうち、少なくともいずれか１つが、情報特定部１２２より取得した、運転者の確認動作の適否を判定する際に用いる情報に該当するか否かを判定する。動作判定部１２３は、該当すると判定した場合に、車両の運転者が適切な確認動作を行ったと判定する。

また、動作判定部１２３は、車両の運転者が適切な確認動作を行ったか否かの判定結果に基づいて、判定結果に応じた判定結果メッセージと、判定結果メッセージの仮想出力者とを予め設定された設定情報等より取得する。次いで、動作判定部１２３は、取得した判定結果メッセージおよび仮想出力者を出力制御部１２６に通知する。

ハザードリスト生成部１２４は、周辺環境検出部１１６により検出された周辺環境情報に基いて、車両の周囲においてハザードとする対象物のハザードリストを生成する。具体的には、ハザードリスト生成部１２４は、周辺環境検出部１１６が検出した障害物をハザードとする対象物とし、対象物を識別するための対象ＩＤを付与した上で、周辺環境情報に含まれる対象物毎の情報（識別情報、位置情報、速度情報等）を列挙したハザードリストをハザードリスト格納部１２８に格納する。

リスク評価部１２５は、ハザードリスト格納部１２８のハザードリストを参照し、視線検出部１１５により検出された視線方向情報をもとに、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する。次いで、リスク評価部１２５は、ハザードリストに含まれる対象物ごとのリスクの評価結果を出力制御部１２６に出力する。

具体的には、リスク評価部１２５は、ハザードリストに含まれる対象物ごとに、視線方向情報が示す運転者の視野内に含まれる頻度を求める。そして、リスク評価部１２５は、求めた頻度に応じて、対象物に対する運転者の忘却度合いを示す忘却度を算出する。例えば、リスク評価部１２５は、運転者の視野内に含まれる頻度が低い対象物ほど、忘却度を高く算出する。

また、リスク評価部１２５は、ハザードリストに含まれる対象物ごとの位置情報、速度情報により、車両に対する対象物の危険度合いを客観的に示すハザード情報を求める。このハザード情報には、例えば、対象物ごとの車両までの衝突時間であるＴＴＣ（Time-To-Collision）などがある。ＴＴＣは、対象物ごとの位置情報、速度情報に基づき、車両と対象物との距離を速度の差（相対速度）で割ることで算出される。

次いで、リスク評価部１２５は、ハザードリストに含まれる対象物ごとの忘却度にＴＴＣなどのハザード情報を掛け合わせることで、対象物ごとの運転者の運転にかかるリスクの評価値（以下、リスク値と呼ぶ）を求める。例えば、忘却度が高く、リスクのある対象物ほど、高いリスク値となる。次いで、リスク評価部１２５は、ハザードリストに含まれる対象物ごとのリスク値を出力制御部１２６に出力する。

出力制御部１２６は、情報特定部１２２より通知された、注意喚起メッセージとそのＩＤ、仮想出力者、タイミング、順序を取得する。出力制御部１２６は、取得した注意喚起メッセージを、取得したタイミングで音声出力部１３１を介して音声出力する。

また、出力制御部１２６は、リスク評価部１２５より通知された、ハザードリストに含まれる対象物ごとのリスク値をもとに、リスク値が予め設定された閾値以上の対象物にかかる注意喚起メッセージを音声出力部１３１を介して音声出力する。

具体的には、出力制御部１２６は、ハザードリスト格納部１２８を参照してリスク値が予め設定された閾値以上の対象物の位置情報を取得し、取得した位置情報をもとに、注意喚起メッセージにおける確認すべき方向と、対象物の位置とが一致する注意喚起メッセージを特定する。

次いで、出力制御部１２６は、特定した注意喚起メッセージを、対象物にかかる注意喚起メッセージとして音声出力部１３１を介して音声出力する。これにより、運転支援装置１００は、例えば、運転者の視野内に含まれる頻度が低く、運転者の認知が不十分な対象物について、注意喚起メッセージを運転者に提供できる。

動作情報格納部１２７は、例えばデータテーブルなどであり、ＩＤなどの識別情報ごとに、動作情報を格納する。図４は、動作情報格納部１２７の一例を説明する説明図である。

図４に示すように、動作情報格納部１２７は、動作情報の項目として、"位置"、"状況"、"ＩＤ"、"注意喚起メッセージ"、"確認すべき方向"、"仮想出力者"、"タイミング"、"順序"、"指差し方向"、"呼称内容"、"視線方向"を有する。

"位置"には、運転者に対して注意喚起メッセージを音声出力すべき位置が定義されている。図４の例は、車両が、交差点、分岐点、合流点のいずれかの位置に到達した場合に、注意喚起メッセージが音声出力されることを示している。

"状況"には、車両が、交差点、分岐点、合流点のいずれかの位置に到達した際の状況が定義されている。状況によって、運転者に確認させるべき方向が異なってくるからである。例えば、交差点に到達した際の状況が"直進"であった場合、運転支援装置１００は、運転者に対して、左側と右側とを確認させ、交差点に到達した際の状況が"右折"であった場合、運転者に対して、右前方と右折先とを確認させる。また、交差点に到達した際の状況が"左折"であった場合、運転支援装置１００は、運転者に対して、左折先と左後方とを確認させる。

"ＩＤ"には、"位置"及び"状況"に応じて音声出力される"注意喚起メッセージ"それぞれを識別するための識別子が格納される。

"注意喚起メッセージ"には、"位置"及び"状況"に応じて音声出力すべきメッセージが格納される。例えば、位置＝"交差点"、状況＝"直進"の場合、"交差点、注意。一時停止、確認。"、"左、確認。"、"右、確認"が音声出力すべきメッセージとして格納されている。

"確認すべき方向"には、"注意喚起メッセージ"を音声出力することで、運転者が確認すべき方向が規定される。例えば、注意喚起メッセージ＝"交差点です。一時停止してください。"の場合、運転者が確認すべき方向は前方である。このため、"確認すべき方向"には、"前方"が規定されている。注意喚起メッセージ＝"左側を確認してください。"の場合、運転者が確認すべき方向は左方向である。このため、"確認すべき方向"には、"左側"が規定されている。更に、注意喚起メッセージ＝"右側を確認してください。"の場合、運転者が確認すべき方向は右方向である。このため、"確認すべき方向"には、"右側"が規定されている。

"仮想出力者"には、注意喚起メッセージを音声出力することで、運転者が確認すべき方向に対応する位置に配置された仮想出力者が規定される。例えば、確認すべき方向＝"前方"の場合、"仮想出力者"には、車外前方の位置に配置された仮想出力者が規定されている。また、確認すべき方向＝"左側"の場合、"仮想出力者"には、助手席の位置に配置された仮想同乗者が規定されている。更に、確認すべき方向＝"右側"の場合、"仮想出力者"には、車両の車外右側の位置に配置された仮想出力者が規定されている。

"タイミング"には、注意喚起メッセージを音声出力するタイミングが規定され、"順序"には、注意喚起メッセージを音声出力する順序が規定される。

なお、"タイミング"に格納された式のうち、「Ｌ」は、車両の現在の位置から"位置"（例えば、交差点）までの距離を表しており、「Ｖ」は、車両の現在の車速を示している。

例えば、位置＝"交差点"、状況＝"直進"の場合、"交差点注意。一時停止、確認。"との注意喚起メッセージは、交差点に到達する（Ｌ／Ｖ＋１０）秒前に音声出力される。また、"右確認。"との注意喚起メッセージは、交差点に到達する（Ｌ／Ｖ＋５）秒前に音声出力される。更に、"左確認の注意喚起メッセージは、交差点に到達する（Ｌ／Ｖ）秒前に音声出力される。つまり、動作情報格納部１２７の動作情報の場合、注意喚起メッセージの音声出力のタイミングは、車両の現在の車速に基づいて決定され、それぞれの注意喚起メッセージは、所定の間隔この場合は５秒おきに規定された順序で音声出力される。状況に応じて、句読点の発話休止時間を拡縮してもよい。

"指差し方向"には、注意喚起メッセージが音声出力されたことに応じて、運転者が行うべき指差し動作の方向が格納される。"呼称内容"には、注意喚起メッセージが音声出力されたことに応じて、運転者が行うべき呼称内容が格納される。"視線方向"には、注意喚起メッセージが音声出力されたことに応じて運転者が向けるべき視線の方向が格納される。

図１に戻り、ハザードリスト格納部１２８は、例えばデータテーブルなどであり、ハザードリスト生成部１２４により生成されたハザードリストを格納する。リスクテーブル格納部１２９は、例えばデータテーブルなどであり、ハザードリストに含まれる対象物ごとのリスク評価にかかる情報（例えば、確認頻度、忘却度、リスク値、フラグ情報等）を格納する。

図５は、ハザードリスト格納部１２８およびリスクテーブル格納部１２９の一例を説明する説明図である。図５に示すように、ハザードリスト格納部１２８およびリスクテーブル格納部１２９では、同一の対象物についての情報が対象ＩＤで関連付けられている。

ハザードリスト格納部１２８は、対象ＩＤごとに、対象物のラベル情報、位置情報、車間情報、速度情報およびハザード情報を格納する。

ラベル情報は、対象物の識別内容（例えば歩行者、車両など）、位置関係（前、後）、相対速度をもとにラベリングされた情報である。例えば、前方を同じ方向に進む車両には「先行車」、後方を同じ方向に進む車両には「後続車」などのラベル情報が付与される。

位置情報、車間情報および速度情報は、周辺環境検出部１１６により検出された対象物の位置情報、速度情報に基づく、運転者の車両に対する位置、車間距離、相対速度などである。ハザード情報は、位置情報、車間距離および相対速度に基づき算出された対象物にかかるＴＴＣなどである。

リスクテーブル格納部１２９は、対象ＩＤごとに、対象物の確認頻度情報、忘却度、リスク値、フラグ情報を格納する。確認頻度情報は、対象物が運転者の視野内に捉えられた頻度を示す情報であり、例えば対象物が視野内にあることが確認された時間（時刻）などである。

忘却度は、リスク評価部１２５により算出された、対象物に対する運転者の忘却度合いを示す値である。同様に、リスク値は、リスク評価部１２５により算出された、対象物の運転者の運転にかかるリスクの評価値である。フラグ情報は、対象物に付与されたフラグである。例えば、フラグ情報には、対象物に対する運転操作（アクセル減など）が行われるなどして、対象物に対するリスクを運転者が予測（認知）していることを示すリスク予測フラグなどがある。

図１に戻り、音声出力部１３１は、出力制御部１２６の制御のもと、情報の音声出力を行うスピーカ等の音声出力装置である。音声出力部１３１は、出力制御部１２６から送信された音声情報（注意喚起メッセージ、判定結果メッセージ等）を音声出力する。

表示出力部１３２は、出力制御部１２６の制御のもと、情報の表示出力を行うディスプレイや表示灯などである。例えば、表示出力部１３２には、ダッシュボードなどに設けられたＬＣＤ（Liquid Crystal Display）、フロントガラスなどに投影する投影装置が適用できる。また、表示出力部１３２には、車両外に表示出力を行うため、車両外のサイドミラー等に設けられた表示灯１３２ａ（LED:Light Emitting Diode、図１６参照）などを含めてもよい。本実施形態では音声出力を主として説明しているが、注意喚起メッセージ、判定結果メッセージの出力は、上記の表示出力部１３２による表示出力であってもよいことは言うまでも無いことである。

通信部１３３は、運転支援用ＥＣＵ１２０の制御のもと、無線通信により外部機器と通信を行う通信装置である。具体的には、通信部１３３は、路車間通信、車々通信、無線ＬＡＮ（Local Area Network）を介したサーバ装置５０１（図１７参照）との通信などを行う。

次に、運転支援用ＥＣＵ１２０により実行される運転支援処理の流れについて説明する。図６は、運転支援処理の一例を示すフローチャートである。

図６に示す運転支援処理は、例えば車両のイグニッションスイッチがＯＮとなり、運転支援用ＥＣＵ１２０が起動することで開始される。図６に示すように、処理が開始されると、状況判定部１２１は、状況判定の処理を実行する（Ｓ２１）。

ここで、状況判定処理の詳細について説明する。図７は、状況判定処理の一例を示すフローチャートである。図７に示すように、状況判定処理が開始されると、状況判定部１２１は、ナビゲーション装置１１１より車両の現在の位置情報を受信する（Ｓ３０）。

次いで、状況判定部１２１は、受信した位置情報に含まれる、位置検出結果及び進路検出結果を抽出する。なお、位置検出結果には、交差点、分岐点、合流点のいずれかが含まれ、進路検出結果には、直進、右折、左折、右側へ分岐、左側へ分岐、右側から合流、左側から合流のいずれかが含まれる。

次いで、状況判定部１２１は、位置検出結果及び進路検出結果に基づいて、現在の車両の状況が、動作情報格納部１２７の動作情報において定義された状況に該当するか否かを判定する（Ｓ３１）。

動作情報において定義された状況に該当しないと判定した場合（Ｓ３１：ＮＯ）、状況判定部１２１は、Ｓ３０に処理を戻す。一方、動作情報において定義された状況に該当すると判定した場合（Ｓ３１：ＹＥＳ）、情報特定部１２２は、状況判定部１２１が判定した状況に対応するＩＤを動作情報格納部１２７の動作情報より取得する（Ｓ３２）。

例えば、車両が交差点を直進する状況であると判定された場合、情報特定部１２２は、動作情報より、ＩＤ＝"１"、"２"、"３"を取得する（図４参照）。

次いで、情報特定部１２２は、取得したＩＤに対応する注意喚起メッセージを取得する（Ｓ３３）。例えば、取得したＩＤが"１"、"２"、"３"であった場合、情報特定部１２２は、対応する注意喚起メッセージとして"交差点、注意。一時停止、確認。"、"左、確認。"、"右、確認。"を取得する（図４参照）。

次いで、情報特定部１２２は、動作情報格納部１２７の動作情報を参照し、取得した注意喚起メッセージに基づいて運転者が確認すべき方向を特定し、特定した方向に関連付けて規定された仮想出力者を特定する。また、情報特定部１２２は、動作情報を参照し、取得した注意喚起メッセージに関連付けて規定された、タイミング、順序を特定する（Ｓ３４）。

図４の例を参照し、例えば、取得した注意喚起メッセージが"交差点、注意。一時停止、確認。"であった場合、情報特定部１２２は、運転者が確認すべき方向として"前方"を特定し、"前方"に関連付けて規定された仮想出力者＝"車外前方の仮想出力者"を特定する。また、情報特定部１２２は、注意喚起メッセージ＝"交差点注意。一時停止、確認。"に関連付けて規定されたタイミング＝"（Ｌ／Ｖ＋１０）前"、順序＝"１"を特定する。同様に、取得した注意喚起メッセージが"左、確認。"であった場合、情報特定部１２２は、仮想出力者＝"助手席の仮想同乗者"、タイミング＝"（Ｌ／Ｖ＋５）秒前"、順序＝"２"を特定する。更に、取得した注意喚起メッセージが"右、確認。"であった場合、情報特定部１２２は、仮想出力者＝"車外右側の仮想出力者"、タイミング＝"（Ｌ／Ｖ）秒前"、順序＝"３"を特定する。

次いで、情報特定部１２２は、取得したＩＤ及び注意喚起メッセージと、特定した仮想出力者、タイミング、順序とを、注意喚起メッセージを音声出力する際に用いる情報として、出力制御部１２６に通知する（Ｓ３５）。

また、Ｓ３４、Ｓ３５の処理と並行して、情報特定部１２２は、動作情報を参照し、取得した注意喚起メッセージと関連付けて規定されている、順序、運転者の指差し方向、呼称内容、視線方向を特定する（Ｓ３６）。

図４の例を参照し、例えば、取得した注意喚起メッセージが"交差点、注意。一時停止、確認。"であった場合、情報特定部１２２は、順序＝"１"、指差し方向＝"前方"、呼称内容＝"一時停止よし"、視線方向＝"前方"を特定する。また、取得した注意喚起メッセージが"左確認。"であった場合、情報特定部１２２は、順序＝"２"、指差し方向＝"左側"、呼称内容＝"左よし"、視線方向＝"左側"を特定する。更に、取得した注意喚起メッセージが"右確認。"であった場合、情報特定部１２２は、順序＝"３"、指差し方向＝"右側"、呼称内容＝"右よし"、視線方向＝"右側"を特定する。

次いで、情報特定部１２２は、取得したＩＤと、特定した順序、指差し方向、呼称内容、視線方向とを、運転者の確認動作の適否を判定する際に用いる情報として、動作判定部１２３に通知する（Ｓ３７）。その後、情報特定部１２２は処理をリターンする。

図６に戻り、Ｓ２１に次いで、情報特定部１２２は、確認動作判定の処理を実行する（Ｓ２２）。

ここで、確認動作判定処理の詳細について説明する。図８は、確認動作判定処理の一例を示すフローチャートである。図８に示すように、確認動作判定処理が開始されると、動作判定部１２３は、ジェスチャ検出部１１３より、指差し方向情報を受信する（Ｓ４０）。

次いで、動作判定部１２３は、情報特定部１２２より通知された、運転者の確認動作の適否を判定する際に用いる情報に含まれる各指差し方向のうち、順序＝"ｎ"に対応する指差し方向を読み出す（Ｓ４１）。例えば、順序＝"１"の場合、動作判定部１２３は、指差し方向＝"前方"を読み出す。

次いで、動作判定部１２３は、運転者のジェスチャが適切か否かを判定する（Ｓ４２）。具体的には、動作判定部１２３は、Ｓ４０において取得した指差し方向情報と、Ｓ４１において読み出した"指差し方向"とが一致するか否かを判定する。一致すると判定した場合（Ｓ４２：ＹＥＳ）、動作判定部１２３は、Ｓ４９に処理を進める。

一致しないと判定した場合（Ｓ４２：ＮＯ）、動作判定部１２３は、運転者のジェスチャ（指差し動作）が適切でないと判定し、Ｓ４３へ処理を進める。Ｓ４３において、動作判定部１２３は、音声検出部１１４より、呼称情報を受信する。

次いで、動作判定部１２３は、情報特定部１２２より通知された、運転者の確認動作の適否を判定する際に用いる情報に含まれる各呼称内容のうち、順序＝"ｎ"に対応する呼称内容を読み出す（Ｓ４４）。例えば、順序＝"１"の場合、動作判定部１２３は、呼称内容＝"一時停止よし"を読み出す。

次いで、動作判定部１２３は、運転者の呼称が適切か否かを判定する（Ｓ４５）。具体的には、動作判定部１２３は、Ｓ４３において受信した呼称情報と、Ｓ４４において読み出した"呼称内容"とが一致するか否かを判定する。一致すると判定した場合（Ｓ４５：ＹＥＳ）、動作判定部１２３は、運転者の呼称が適切であると判定し、Ｓ４９に処理を進める。

一致しないと判定した場合（Ｓ４５：ＮＯ）、動作判定部１２３は、運転者の呼称が適切でないと判定し、Ｓ４６へ処理を進める。Ｓ４６において、動作判定部１２３は、視線検出部１１５より、視線方向情報を受信する。

次いで、動作判定部１２３は、情報特定部１２２より通知された、運転者の確認動作の適否を判定する際に用いる情報に含まれる各視線方向のうち、順序＝"ｎ"に対応する視線方向を読み出す（Ｓ４７）。例えば、順序＝"１"の場合、動作判定部１２３は、視線方向＝"前方"を読み出す。

次いで、動作判定部１２３は、運転者の視線方向が適切か否かを判定する（Ｓ４８）。具体的には、動作判定部１２３は、Ｓ４６において受信した視線方向情報と、Ｓ４７において読み出した"視線方向"とが一致するか否かを判定する。一致すると判定した場合（Ｓ４８：ＹＥＳ）、動作判定部１２３は、運転者の視線方向が適切であると判定し、Ｓ４９に処理を進める。

一致しないと判定した場合（Ｓ４８：ＮＯ）、動作判定部１２３は、運転者の視線方向が適切でないと判定し、Ｓ５２に処理を進める。

Ｓ４９において、動作判定部１２３は、運転者によって適切な確認動作が行われたと判定する。次いで、動作判定部１２３は、適切な確認動作が行われた場合に対応する判定結果メッセージおよび仮想出力者を予め設定された設定情報等から読み出し、出力制御部１２６に通知する（Ｓ５０）。例えば、判定結果メッセージとしては、適切な確認動作を褒める「よし」、「確認」などの音声や、クリア音などがある。また、仮想出力者は、"仮想同乗者全員"などであってもよい。また、運転者の連続した呼称を妨げないように最後の呼称「よし」のタイミングに合わせて、仮想同乗者による再度の「復唱」であってもよい（「連呼」）。

次いで、出力制御部１２６は、動作判定部１２３より通知された判定結果メッセージを音声出力部１３１を介して音声出力する（Ｓ５１）。これにより、「よし」、「確認」などの音声や、クリア音などで適切な確認動作が行われていることを運転者に通知できる。その後、出力制御部１２６は、処理をリターンする。

Ｓ５２において、動作判定部１２３は、運転者によって適切な確認動作が行われなかったと判定する。次いで、動作判定部１２３は、適切な確認動作が行われなかった場合に対応する判定結果メッセージおよび仮想出力者を予め設定された設定情報等から読み出し、出力制御部１２６に通知する（Ｓ５３）。例えば、判定結果メッセージとしては、適切な確認動作が行われていないことを示す「未確認です」などの音声や、ビープ音などがある。また、仮想出力者は、"仮想同乗者全員"などであってもよい。

次いで、出力制御部１２６は、動作判定部１２３より通知された判定結果メッセージを音声出力部１３１を介して音声出力する（Ｓ５４）。これにより、「未確認です」などの音声や、ビープ音などで適切に確認動作が行われていないことを運転者に通知できる。その後、出力制御部１２６は、処理をリターンする。

図６に戻り、Ｓ２２に次いで、ハザードリスト生成部１２４は、周辺環境検出部１１６により検出された周辺環境情報に基いて、車両の周囲においてハザードとする対象物のハザードリストを更新（生成）する（Ｓ２３）。

ここで、ハザードリスト更新（生成）処理の詳細について説明する。図９は、ハザードリスト生成処理の一例を示すフローチャートである。

図９に示すように、処理が開始されると、ハザードリスト生成部１２４は、周辺環境情報に基いて運転者が運転する車両の周辺にある車両を監視する（Ｓ６０）。次いで、ハザードリスト生成部１２４は、監視の結果、周辺の車両における変化（例えば、新たな車両の検出、既に検出されている車両の位置、速度の変化等）が補足されたか否かを判定する（Ｓ６１）。

変化が補足された場合（Ｓ６１：ＹＥＳ）、ハザードリスト生成部１２４は、変化が補足された車両（周辺車）について、周辺環境情報に基いて、「先行車」、「後続車」などのラベルを付与し（Ｓ６２）、車間・相対速度を計測する（Ｓ６３）。次いで、ハザードリスト生成部１２４は、Ｓ６２で付与されたラベルと、Ｓ６３で計測された車間・相対速度などをもとに、変化が補足された車両（対象物）にかかる、ハザードリスト格納部１２８のハザードリストを更新する（Ｓ６４）。

なお、変化が補足されない場合（Ｓ６１：ＮＯ）、ハザードリスト生成部１２４は、Ｓ６２、Ｓ６３をスキップしてＳ６４へ処理を進める。この場合、変化が補足された車両がないことから、ハザードリスト格納部１２８のハザードリストの内容は更新されず、そのままとなる。このＳ６４の後、ハザードリスト生成部１２４は、処理をリターンする。

図６に戻り、Ｓ２３に次いで、リスク評価部１２５は、ハザードリスト格納部１２８のハザードリストを参照し、視線検出部１１５により検出された視線方向情報をもとに、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する（Ｓ２４）。

ここで、リスク評価処理の詳細について説明する。図１０は、リスク評価処理の一例を示すフローチャートである。

図１０に示すように、処理が開始されると、リスク評価部１２５は、視線検出部１１５からの視線方向情報に基づいて運転者の視線を検知し、運転者の視野（中心視野および周辺視野）の方向を検知する（Ｓ７０）。例えば、運転者の視線が前方である場合、中心視野は「前」となり、周辺視野は「右前」、「左前」などとなる。

次いで、リスク評価部１２５は、中心視野において視線が所定の期間留まる停留があったか否かを確認し（Ｓ７１）、停留の有無を判定する（Ｓ７２）。中心視野において停留があった場合（Ｓ７２：ＹＥＳ）、リスク評価部１２５は、ハザードリスト格納部１２８に格納された位置情報をもとに、ハザードリストの対象物の中から中心視野内にある対象物（周辺車）を確認する（Ｓ７３）。

次いで、リスク評価部１２５は、中心視野内にあると確認された対象物について、リスクの評価を行う。具体的には、リスク評価部１２５は、ハザードリスト格納部１２８のハザードリストに含まれる対象物にかかる位置情報、速度情報により、ＴＴＣなどのハザード情報を求める。次いで、リスク評価部１２５は、中心視野内において直近に確認された対象物として、忘却度をクリア（忘却なしを示す値にリセット）した上で、忘却度にハザード情報を掛け合わせてリスク値を推定する（Ｓ７４）。

中心視野において停留がなかった場合（Ｓ７２：ＮＯ）、リスク評価部１２５は、周辺視野において所定の期間留まる停留があったか否かを確認し（Ｓ７５）、停留の有無を判定する（Ｓ７６）。

周辺視野において停留がなかった場合（Ｓ７６：ＮＯ）、リスク評価部１２５は、視野外にある対象物について、リスクの評価を行う。具体的には、リスク評価部１２５は、ハザードリスト格納部１２８のハザードリストに含まれる対象物にかかる位置情報、速度情報により、ＴＴＣなどのハザード情報を求める。次いで、リスク評価部１２５は、リスクテーブル格納部１２９より前回のリスク値を読み出し、視野外にある対象物として、忘却度を前回より増加した上で、忘却度にハザード情報を掛け合わせてリスク値を推定する（Ｓ７７）。

周辺視野において停留があった場合（Ｓ７６：ＹＥＳ）、リスク評価部１２５は、ハザードリスト格納部１２８に格納された位置情報をもとに、ハザードリストの対象物の中から周辺視野内にある対象物（周辺車）を確認する（Ｓ７８）。

次いで、リスク評価部１２５は、周辺視野内にあると確認された対象物について、リスクの評価を行う。具体的には、リスク評価部１２５は、ハザードリスト格納部１２８のハザードリストに含まれる対象物にかかる位置情報、速度情報により、ＴＴＣなどのハザード情報を求める。次いで、リスク評価部１２５は、リスクテーブル格納部１２９より前回のリスク値を読み出し、周辺視野内において直近に確認された対象物として、忘却度を維持（前回と同値）した上で、忘却度にハザード情報を掛け合わせてリスク値を推定する（Ｓ７９）。

図１１は、リスク算出を説明する説明図である。図１１に示すように、Ｓ７４、Ｓ７７、Ｓ７９においては、ハザードリストに含まれる対象物ごとに、確認頻度に対応する忘却度と、位置関係、距離、相対速度などで算出されるＴＴＣとを掛け合わせることで、リスク値を算出する。したがって、ハザードリストに含まれる対象物は、運転者の中心視野または周辺視野内にある頻度の高い対象物ほど、リスクがより低く評価される。逆に、運転者の視野外にある頻度の高い対象物ほど、リスクがより高く評価される。

Ｓ７４、Ｓ７７、Ｓ７９に次いで、リスク評価部１２５は、対象物について推定したリスク値をもとに、リスクテーブル格納部１２９におけるリスクテーブルを更新し（Ｓ８０）、処理をリターンする。

図６に戻り、Ｓ２４に次いで、出力制御部１２６は、リスク評価部１２５より通知された、ハザードリストに含まれる対象物ごとのリスク値をもとに、リスク値が予め設定された閾値以上の対象物があるか否かを判定する（Ｓ２５）。

リスク値が予め設定された閾値以上の対象物がある場合（Ｓ２５：ＹＥＳ）、出力制御部１２６は、判定された対象物にかかる注意喚起メッセージを音声出力部１３１を介して音声出力し、運転者に対して呼称誘導を行う（Ｓ２６）。リスク値が予め設定された閾値以上の対象物がない場合（Ｓ２５：ＮＯ）、出力制御部１２６は、処理をリターンする。

具体的には、出力制御部１２６は、ハザードリスト格納部１２８を参照してリスク値が予め設定された閾値以上の対象物の位置情報を取得し、取得した位置情報をもとに、注意喚起メッセージにおける”確認すべき方向”と、対象物の位置とが一致する注意喚起メッセージを特定する。

図１２は、ハザードマップおよびリスクマップの一例を説明する説明図である。図１２におけるハザードマップ３０１は、ハザードリスト格納部１２８のハザードリストをマップ形式で例示したものである。同様に、リスクマップ３０２は、リスクテーブル格納部１２９の内容（自車３１０に対する対象物３１１〜３１４）をマップ形式で例示したものである。ここで、対象物３１１〜３１４のリスク値は、３１１＜３１２＜３１３＜３１４と評価されており、対象物３１４のリスク値は、忘却度が高いことから、閾値以上であるものとする。

このように、リスク値が予め設定された閾値以上の対象物３１４の位置が”右側”である場合、出力制御部１２６は、情報特定部１２２より通知された注意喚起メッセージの中で、注意喚起メッセージにおける”確認すべき方向”が”右側”であるメッセージを特定する。

一例として、図４に例示した注意喚起メッセージの中でＩＤが”１”〜”３”のメッセージが情報特定部１２２より通知されているものとする。この場合、対象物の位置が”右側”であることから、出力制御部１２６は、「右、注意」とする注意喚起メッセージを特定する。

次いで、出力制御部１２６は、特定した注意喚起メッセージを、対象物にかかる注意喚起メッセージとして音声出力部１３１を介して音声出力する。これにより、運転支援装置１００は、例えば、運転者の視野内に含まれる頻度が低く、運転者の認知が不十分な対象物にかかる注意喚起メッセージを運転者に提供できる。例えば、「右、注意」などの注意喚起メッセージを提供し、運転者に対して右側確認の呼称誘導を行うことができる。もちろん、句読点を強調することで単語の意味の強調も可能であることは言うまでもない。

図１３は、確認動作の一例を説明する説明図である。リスク値が予め設定された閾値以上の対象物３１４の位置が”右側”である場合、図１３の”♯３”のように、「右、注意！」などの注意喚起メッセージが運転者に提供される。これにより、運転者は、忘却度が高くなっていた対象物３１４を再認識することができ、”♯４”における「右、よし！」などの呼称確認を誘導できる。

また、出力制御部１２６は、”♯４”における適切な確認動作については、”５”のように、クリア音などの判定結果メッセージを出力する。これにより、運転支援装置１００は、適切な確認動作が行われていることを運転者に通知できる。

図１４は、対象物に対する運転者の忘却度の一例を説明する説明図である。図１４は、対象物の認知度（高いほど忘却度合いが低く、忘却度とは逆となる値）のグラフ４００を示し、縦軸は認知度の値、横軸は時間軸である。図１４に示すように、運転者が視野内に対象物を捉える認知活動４１０が頻繁である場合は、対象物を忘却することなく、一定以上の認知度を保持している。運転支援装置１００は、認知活動４１０に間隔が空いて、グラフ４００が閾値４０１を下回ったところで（忘却度が閾値４０１を上回る）、報知４１１により注意喚起メッセージを運転者に提供する。これにより、運転者は、認知度が低くなった対象物を再認識することができる。

（変形例）
リスク評価処理については、運転者の視線だけでなく、対象物に対する運転操作（アクセル減など）が行われ、対象物に対するリスクを運転者が予測（認知）しているか否かをもとに行ってもよい。

図１５は、リスク評価処理の変形例を示すフローチャートである。図１５に示すように、リスク評価部１２５は、車両制御ＥＣＵ１１２からの運転操作情報をもとに、中心視野内の周辺車に対する運転操作（アクセル減）の有無を判定する（Ｓ８１）。運転操作があった場合（Ｓ８１：ＹＥＳ）、リスクテーブル格納部１２９における周辺車のフラグ情報にリスク予測フラグを格納する（Ｓ８２）。

次いで、リスク評価部１２５は、Ｓ７４、Ｓ７７、Ｓ７９において、リスク予測フラグの有無に応じて、リスク値を算出する。具体的には、リスク予測フラグがある場合は、対象物に対するリスクを運転者が予測（認知）していることから、無い場合に較べてリスク値を低く算出する。

また、出力制御部１２６は、確認動作判定処理（Ｓ４０〜Ｓ５４）の結果をもとに、確認動作の有無を車両の外側に設けられた表示装置に表示させてもよい。

図１６は、乗り物外への報知例を説明する説明図である。図１６に示すように、出力制御部１２６は、確認前については、サイドミラーに設けられた表示灯１３２ａを注意喚起を示す点灯表示（例えば黄色表示）とする（Ｓ９０）。次いで、確認動作判定処理において運転者Ｄにより適切な確認動作が行われたと判定された場合、出力制御部１２６は、表示灯１３２ａを安全確認を示す点灯表示（例えば青色表示）とする（Ｓ９１）。

逆に、確認動作判定処理において運転者Ｄにより適切な確認動作が行われなかったと判定された場合、出力制御部１２６は、表示灯１３２ａを無確認を示す点灯表示（例えば赤色表示）とする（Ｓ９２）。このように、車外に設けられた表示灯１３２ａにおいて、運転者Ｄの確認動作の有無を示す表示出力を行うことで、例えば、車車間で相互の安全確認を行うことができる。

また、リスク評価部１２５は、運転者Ｄなどにより設定された運転モード（自動運転モード、高速運転モード、先行車追従モード、手動運転モード等）に応じて、リスク値の評価を行う閾値を設定してもよい。例えば、自動運転モードから手動運転モードに切り替えた直後などは、自動運転モードに慣れた緩慢な認知活動となっている場合がある。よって、自動運転モードから手動運転モードに切り替えた直後などでは、閾値を低く設定し、注意喚起メッセージが出力される頻度を高めてももい。また、自動運転モードでは、手動運転モードほどの認知活動が不要となることから、閾値を高く設定し、注意喚起メッセージが出力される頻度を低くしてもよい。

（第２の実施形態）
上記の第１の実施形態では運転支援装置１００単体の構成を例示したが、運転支援装置１００とは別に運転支援用ＥＣＵ１２０と同様の機能を有するサーバ装置を用意し、通信ネットワークを介して互いに接続する運転支援装置１００とサーバ装置とが協働して上記の機能を実現してもよい。

図１７は、第２の実施形態にかかる運転支援システムの構成例を示すブロック図である。図１７に示すように、運転支援システム５００は、運転支援装置１００Ａ、１００Ｂと、サーバ装置５０１とが、無線ＬＡＮなどの通信ネットワークＮを介して互いに通信可能に接続されている。サーバ装置５０１は、上記の運転支援用ＥＣＵ１２０における状況判定部１２１、情報特定部１２２、動作判定部１２３、ハザードリスト生成部１２４およびリスク評価部１２５などの機能を通信ネットワークＮを介して接続する運転支援装置１００Ａ、１００Ｂ…に提供する。また、サーバ装置５０１は、動作情報格納部１２７の他、運転支援装置１００Ａ、１００Ｂ…ごとのハザードリスト、リスクテーブルを格納するハザードリスト格納部１２８およびリスクテーブル格納部１２９を有する。

このような運転支援システム５００構成とすることで、サーバ装置５０１では、運転支援装置１００Ａ、１００Ｂ…ごとの情報の一部を互いに補間できるというメリットがある。例えば、位置の近い車両同士のハザードリストにおいて、一方のハザードリストに不足している対象物を他方のハザードリストの内容から補間することができる。

以上のように、運転支援装置１００は、周辺環境検出部１１６と、ハザードリスト生成部１２４と、視線検出部１１５と、リスク評価部１２５と、出力制御部１２６とを有する。周辺環境検出部１１６は、運転者が運転する乗り物の周囲の環境を検出する。ハザードリスト生成部１２４は、検出された環境に基づいてハザードとする対象物のハザードリストを生成する。視線検出部１１５は、運転者の視線を検出する。リスク評価部１２５は、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれる頻度に基いて、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する。出力制御部１２６は、評価されたリスクが閾値以上の対象物に対応する運転支援情報を出力させる。

これにより、運転支援装置１００は、過度な運転支援を抑止でき、運転者に対して適度な運転支援を実現できる。例えば、運転支援装置１００は、運転者の視野内に含まれる頻度が高く、運転者が十分に認知している対象物については運転支援情報を提供することなく、対象物に対する運転者の認知活動を妨げないようにする。また、運転支援装置１００は、運転者の視野内に含まれる頻度が低く、運転者の認知が不十分な対象物については運転支援情報を提供し、運転者が対象物を忘却することを抑止する。

また、リスク評価部１２５は、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれるか否かに基いて対象物に対する運転者の忘却度合いを示す忘却度を算出する。そして、リスク評価部１２５は、算出した忘却度と、ハザードリストに含まれる対象物ごとの乗り物までの衝突時間とに基いてリスクを評価する。このように、対象物に対する運転者の忘却度、すなわち対象物の認知度合いと、対象物が車両に衝突する衝突時間、すなわち対象物の客観的なリスクとでリスク評価を行うことで、ハザードリストに含まれる対象物のリスク評価を適切に行うことができる。

また、リスク評価部１２５は、運転者の視線に基づく運転者の中心視野内に対象物が含まれる場合、対象物の忘却度の値をリセットする。また、運転者の視線に基づく運転者の周辺視野内に対象物が含まれる場合には、対象物の忘却度の値を維持する。また、運転者の視線に基づく運転者の中心視野および周辺視野内に対象物が含まれない場合には、対象物の忘却度の値を増加する。このように、対象物について、運転者の中心視野、周辺視野、そのどちらにも含まれない場合で対象物に対する運転者の忘却度の評価を変えることで、各対象物のリスク評価を適切に行うことができる。

なお、図示した各装置の各構成要素は、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。

また、運転支援装置１００、１００Ａ、１００Ｂ、サーバ装置５０１で行われる各種処理機能は、ＣＰＵ（またはＭＰＵ、ＭＣＵ（Micro Controller Unit）等のマイクロ・コンピュータ）上で、その全部または任意の一部を実行するようにしてもよい。また、各種処理機能は、ＣＰＵ（またはＭＰＵ、ＭＣＵ等のマイクロ・コンピュータ）で解析実行されるプログラム上、またはワイヤードロジックによるハードウエア上で、その全部または任意の一部を実行するようにしてもよいことは言うまでもない。また、サーバ装置５０１で行われる各種処理機能は、クラウドコンピューティングにより、複数のコンピュータが協働して実行してもよい。

上記の実施形態で説明した各種処理機能は、予め用意されたプログラムをコンピュータで実行することで実現できる。このプログラムは、コンピュータのメモリなどに記憶されていなくてもよい。例えば、コンピュータが読み取り可能な記憶媒体に記憶されたプログラムを読み出して実行するようにしてもよい。コンピュータが読み取り可能な記憶媒体は、例えば、ＣＤ−ＲＯＭやＤＶＤディスク、ＵＳＢ（Universal Serial Bus）メモリ等の可搬型記録媒体、フラッシュメモリ等の半導体メモリ、ハードディスクドライブ等が対応する。また、公衆回線、インターネット、ＬＡＮ等に接続された装置にプログラムを記憶させておき、コンピュータがこれらからプログラムを読み出して実行するようにしてもよい。

１００、１００Ａ、１００Ｂ…運転支援装置
１１１…ナビゲーション装置
１１２…車両制御ＥＣＵ
１１３…ジェスチャ検出部
１１４…音声検出部
１１５…視線検出部
１１６…周辺環境検出部
１２０…運転支援用ＥＣＵ
１２１…状況判定部
１２２…情報特定部
１２３…動作判定部
１２４…ハザードリスト生成部
１２５…リスク評価部
１２６…出力制御部
１２７…動作情報格納部
１２８…ハザードリスト格納部
１２９…リスクテーブル格納部
１３１…音声出力部
１３２…表示出力部
１３２ａ…表示灯
１３３…通信部
２０１…ＣＰＵ
２０２…ＲＯＭ
２０３…ＲＡＭ
２０４…接続装置
２０５…バス
３０１…ハザードマップ
３１０…自車
３１１〜３１４…対象物
３０２…リスクマップ
４００…グラフ
４０１…閾値
４１０…認知活動
４１１…報知
５００…運転支援システム
５０１…サーバ装置
Ｄ…運転者
Ｎ…通信ネットワーク

第１の案では、運転支援装置は、環境検出部と、リスト生成部と、視線検出部と、リスク評価部と、出力制御部とを有する。環境検出部は、運転者が運転する乗り物の周囲の環境を検出する。リスト生成部は、検出された環境に基づいてハザードとする対象物のハザードリストを生成する。視線検出部は、運転者の視線を検出する。リスク評価部は、検出された視線に基づく運転者の視野内にハザードリストに含まれる対象物が含まれる頻度に基いて、ハザードリストに含まれる対象物ごとの運転者の運転にかかるリスクを評価する。出力制御部は、評価されたリスクが閾値以上の対象物に対応する運転支援情報を出力させる。また、出力制御部は、リスクが閾値以上の対象物の方向に応じて、仮想同乗者を規定し、仮想同乗者の位置が音源となるように運転支援情報を出力させる。

Claims (21)

1. 運転者が運転する乗り物の周囲の環境を検出する環境検出部と、
   検出された前記環境に基づいてハザードとする対象物のハザードリストを生成するリスト生成部と、
   前記運転者の視線を検出する視線検出部と、
   検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれる頻度に基いて、前記ハザードリストに含まれる対象物ごとの前記運転者の運転にかかるリスクを評価するリスク評価部と、
   評価された前記リスクが閾値以上の対象物に対応する運転支援情報を出力させる出力制御部と、
   を有することを特徴とする運転支援装置。
2. 前記リスク評価部は、検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれるか否かに基いて前記対象物に対する運転者の忘却度合いを示す忘却度を算出し、当該算出した忘却度と、前記ハザードリストに含まれる対象物ごとの前記乗り物までの衝突時間とに基いて前記リスクを評価する、
   ことを特徴とする請求項１に記載の運転支援装置。
3. 前記リスク評価部は、前記視線に基づく前記運転者の中心視野内に前記対象物が含まれる場合、当該対象物の忘却度の値をリセットし、前記視線に基づく前記運転者の周辺視野内に前記対象物が含まれる場合、当該対象物の忘却度の値を維持し、前記視線に基づく前記運転者の中心視野および周辺視野内に前記対象物が含まれない場合、当該対象物の忘却度の値を増加する、
   ことを特徴とする請求項２に記載の運転支援装置。
4. 前記運転者が操作する乗り物の状況を判定する状況判定部と、
   判定された前記状況に基いて前記運転者に対して注意喚起を行うメッセージを特定するメッセージ特定部と、を更に有し、
   前記出力制御部は、特定された前記メッセージの中で、評価された前記リスクが閾値以上の対象物に対応するメッセージを前記運転支援情報として出力させる、
   ことを特徴とする請求項１乃至３のいずれか一項に記載の運転支援装置。
5. 判定された前記状況に対応する確認動作を運転者が行ったか否かを判定する動作判定部を更に有し、
   前記出力制御部は、前記確認動作を行ったと判定した場合、当該確認動作に対応するメッセージを出力させる、
   ことを特徴とする請求項４に記載の運転支援装置。
6. 前記出力制御部は、前記確認動作の有無を前記乗り物の外側に設けられた表示装置に表示させる、
   ことを特徴とする請求項５に記載の運転支援装置。
7. 前記出力制御部は、前記乗り物の運転モードに基づく閾値を設定する、
   ことを特徴とする請求項１に記載の運転支援装置。
8. 運転支援装置と、サーバ装置とが通信ネットワークを介して通信可能に接続される運転支援システムであって、
   前記運転支援装置は、
   運転者が運転する乗り物の周囲の環境を検出する環境検出部と、
   前記運転者の視線を検出する視線検出部と、を有する運転支援装置と、を有し、
   前記サーバ装置は、
   検出された前記環境に基づいてハザードとする対象物のハザードリストを生成するリスト生成部と、
   検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれる頻度に基いて、前記ハザードリストに含まれる対象物ごとの前記運転者の運転にかかるリスクを評価するリスク評価部と、
   評価された前記リスクが閾値以上の対象物に対応する運転支援情報を前記運転支援装置より出力させる出力制御部と、
   を有することを特徴とする運転支援システム。
9. 前記リスク評価部は、検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれるか否かに基いて前記対象物に対する運転者の忘却度合いを示す忘却度を算出し、当該算出した忘却度と、前記ハザードリストに含まれる対象物ごとの前記乗り物までの衝突時間とに基いて前記リスクを評価する、
   ことを特徴とする請求項８に記載の運転支援システム。
10. 前記リスク評価部は、前記視線に基づく前記運転者の中心視野内に前記対象物が含まれる場合、当該対象物の忘却度の値をリセットし、前記視線に基づく前記運転者の周辺視野内に前記対象物が含まれる場合、当該対象物の忘却度の値を維持し、前記視線に基づく前記運転者の中心視野および周辺視野内に前記対象物が含まれない場合、当該対象物の忘却度の値を増加する、
    ことを特徴とする請求項９に記載の運転支援システム。
11. 前記サーバ装置は、
    前記運転者が操作する乗り物の状況を判定する状況判定部と、
    判定された前記状況に基いて前記運転者に対して注意喚起を行うメッセージを特定するメッセージ特定部と、を更に有し、
    前記出力制御部は、特定された前記メッセージの中で、評価された前記リスクが閾値以上の対象物に対応するメッセージを前記運転支援情報として出力させる、
    ことを特徴とする請求項８乃至１０のいずれか一項に記載の運転支援システム。
12. 前記サーバ装置は、
    判定された前記状況に対応する確認動作を運転者が行ったか否かを判定する動作判定部を更に有し、
    前記出力制御部は、前記確認動作を行ったと判定した場合、当該確認動作に対応するメッセージを出力させる、
    ことを特徴とする請求項１１に記載の運転支援システム。
13. 前記出力制御部は、前記確認動作の有無を前記運転支援装置により前記乗り物の外側に設けられた表示装置に表示させる、
    ことを特徴とする請求項１２に記載の運転支援システム。
14. 前記出力制御部は、前記乗り物の運転モードに基づく閾値を設定する、
    ことを特徴とする請求項８に記載の運転支援システム。
15. 運転者が運転する乗り物の周囲の環境を検出する環境検出部より検出された前記環境に基づいてハザードとする対象物のハザードリストを生成し、
    前記運転者の視線を検出する視線検出部より検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれる頻度に基いて、前記ハザードリストに含まれる対象物ごとの前記運転者の運転にかかるリスクを評価し、
    評価された前記リスクが閾値以上の対象物に対応する運転支援情報を出力させる
    処理をコンピュータが実行することを特徴とする運転支援方法。
16. 前記リスクを評価する処理は、検出された前記視線に基づく前記運転者の視野内に前記ハザードリストに含まれる対象物が含まれるか否かに基いて前記対象物に対する運転者の忘却度合いを示す忘却度を算出し、当該算出した忘却度と、前記ハザードリストに含まれる対象物ごとの前記乗り物までの衝突時間とに基いて前記リスクを評価する、
    ことを特徴とする請求項１５に記載の運転支援方法。
17. 前記リスクを評価する処理は、前記視線に基づく前記運転者の中心視野内に前記対象物が含まれる場合、当該対象物の忘却度の値をリセットし、前記視線に基づく前記運転者の周辺視野内に前記対象物が含まれる場合、当該対象物の忘却度の値を維持し、前記視線に基づく前記運転者の中心視野および周辺視野内に前記対象物が含まれない場合、当該対象物の忘却度の値を増加する、
    ことを特徴とする請求項１６に記載の運転支援方法。
18. 前記運転者が操作する乗り物の状況を判定し、
    判定された前記状況に基いて前記運転者に対して注意喚起を行うメッセージを特定する処理を更にコンピュータが実行し、
    前記出力させる処理は、特定された前記メッセージの中で、評価された前記リスクが閾値以上の対象物に対応するメッセージを前記運転支援情報として出力させる、
    ことを特徴とする請求項１５乃至１７のいずれか一項に記載の運転支援方法。
19. 判定された前記状況に対応する確認動作を運転者が行ったか否かを判定する処理を更にコンピュータが実行し、
    前記出力させる処理は、前記確認動作を行ったと判定した場合、当該確認動作に対応するメッセージを出力させる、
    ことを特徴とする請求項１８に記載の運転支援方法。
20. 前記出力させる処理は、前記確認動作の有無を前記乗り物の外側に設けられた表示装置に表示させる、
    ことを特徴とする請求項１９に記載の運転支援方法。
21. 前記出力させる処理は、前記乗り物の運転モードに基づく閾値を設定する、
    ことを特徴とする請求項１５に記載の運転支援方法。

Images