JP7314898B2 - エージェント装置、エージェント方法及びエージェントプログラム - Google Patents

Description

本発明は、車両に係る機能の作動又は提案を行うエージェント装置、エージェント方法及びエージェントプログラムに関する。

特許文献１には、各種車載ユニットの操作に関係のある情報を提供する車両用エージェント処理装置が開示されている。

特開２００１－１４１５００号公報

特許文献１の車両用エージェント処理装置は、ドライバの発話を契機に発話内容に応じて車両に装備された機能の操作方法を提示するように構成されている。一方、提示された機能を利用するには、ドライバが再度発話をして機能を作動させるか、操作部を直接操作して作動させる必要がある。そのため、ドライバの負担軽減の観点から改善の余地がある。

本発明は、乗員の言動及び車両の環境に応じて車両の機能を作動させることで、乗員の操作負担の軽減を図ることを可能とするエージェント装置、エージェント方法及びエージェントプログラムを提供することを目的とする。

請求項１に記載のエージェント装置は、車両の乗員の言動を受け付ける受付部と、前記受付部が受け付けた言動の意図を理解する意図理解部と、前記意図理解部が理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定する選定部と、前記選定部により選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを、前記車両の環境に係る所定の条件に基づいて決定する決定部と、前記決定部の決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行う指示部と、前記車両の位置情報を取得する位置取得部と、を備え、前記決定部は、前記位置取得部が取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する。

請求項１に記載のエージェント装置は、受付部が乗員の言動を受け付けると、意図理解部が受け付けた言動を理解する。そして、選定部は、理解した乗員の意図に基づいて、車両における推奨機能を選定する。「推奨機能」とは、車両の機能のうち乗員に対して作動を推奨する機能である。推奨機能は、走行機能、安全機能、快適機能等の全ての機能が該当する。また、当該エージェント装置では、決定部が、推奨機能の作動、及び作動の提案の何れを実行するかを、車両の環境に係る所定の条件に基づいて決定すると、指示部が、推奨機能の作動又は作動の提案の指示を車両に対して行う。ここで、「車両の環境に係る所定の条件」は、車両が走行する地点の気象状態、車両の位置、及び車両の走行状態を含む。

一方、指示を受けた車両側の装置は、当該指示が推奨機能の作動に係る指示である場合に推奨機能を作動させる。以上、当該エージェント装置によれば、乗員の言動及び車両の環境に応じて車両の機能を作動させることで、乗員の操作負担の軽減を図ることができる。
また、請求項１に記載のエージェント装置では、決定部は位置取得部が取得した位置情報に対応する車両の位置に基づいて、推奨機能を作動させるか、及び作動の提案をするかの何れかを決定する。当該エージェント装置によれば、推奨機能の作動の可否を決定する際に車両の位置を用いることにより、乗員の意図を補いながら推奨機能の作動の可否を決定することができる。

請求項２に記載のエージェント装置は、請求項１に記載のエージェント装置において、前記受付部は、前記車両が搭載する撮像装置により撮像された前記乗員の撮像画像の情報を受け付け、前記意図理解部は、前記乗員の表情及び動きの少なくも一つに基づいて、前記乗員の意図を理解する。

請求項２に記載のエージェント装置では、意図理解部が、言語に加えて、乗員の表情及び動きの少なくも一つに基づいて、意図を理解する。当該エージェント装置によれば、乗員の表情や行動を基に機能を作動させることで、操作負担がさらに軽減される。

請求項３に記載のエージェント装置は、請求項１又は２に記載のエージェント装置において、前記車両が走行する地点の気象に関する気象情報を取得する気象取得部を備え、前記決定部は、前記気象取得部が取得した前記気象情報に係る気象状態を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する。

請求項３に記載のエージェント装置では、決定部は気象取得部が取得した気象情報に係る気象状態に基づいて、推奨機能を作動させるか、及び作動の提案をするかの何れかを決定する。当該エージェント装置によれば、推奨機能の作動の可否を決定する際に気象状態を用いることにより、乗員の意図を補いながら推奨機能の作動の可否を決定することができる。

請求項４に記載のエージェント装置は、請求項３に記載のエージェント装置において、前記決定部は、前記推奨機能が前記気象状態に対応付けられている機能の場合は前記推奨機能の作動を決定し、前記推奨機能が前記気象状態に対応付けられていない機能の場合は前記推奨機能の作動の提案を決定する。

請求項４に記載のエージェント装置では、決定部は推奨機能が車両の走行する地点の気象状態に対応する機能の場合は推奨機能の作動を決定し、推奨機能が車両の走行する地点の気象状態において対応しない機能の場合は推奨機能の作動の提案を決定する。当該エージェント装置によれば、作動させるべき気象状態ではない場合に推奨機能が作動することを抑制することができる。

請求項５に記載のエージェント装置は、請求項１に記載のエージェント装置において、前記決定部は、前記推奨機能の利用が可能な位置の場合は前記推奨機能の作動を決定し、前記推奨機能の利用が不可能な位置の場合は前記推奨機能の作動の提案を決定する。

請求項５に記載のエージェント装置では、決定部は推奨機能の利用が可能な位置の場合は推奨機能の作動を決定し、推奨機能の利用が不可能な位置の場合は推奨機能の作動の提案を決定する。当該エージェント装置によれば、作動させるべき走行場所ではない場合に推奨機能が作動することを抑制することができる。

請求項６に記載のエージェント装置は、請求項１～５の何れか１項に記載のエージェント装置において、前記車両の走行状態を取得する走行取得部を備え、前記決定部は、前記走行取得部が取得した前記車両の走行状態を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する。

請求項６に記載のエージェント装置では、決定部は、走行取得部が取得した車両の走行状態に基づいて、推奨機能を作動させるか、及び作動の提案をするかの何れかを決定する。当該エージェント装置によれば、推奨機能の作動の可否を決定する際に車両の走行状態を用いることにより、乗員の意図を補いながら推奨機能の作動の可否を決定することができる。

請求項７に記載のエージェント装置は、請求項６に記載のエージェント装置において、前記決定部は、前記車両が停止している場合は前記推奨機能の作動を決定し、前記車両が走行している場合は前記推奨機能の作動の提案を決定する。

請求項７に記載のエージェント装置では、決定部は車両が停止している場合は推奨機能の作動を決定し、車両が走行している場合は推奨機能の作動の提案を決定する。当該エージェント装置によれば、走行中に走行の妨げとなる推奨機能の作動を抑制することで、走行中の安全性を担保することができる。

請求項８に記載のエージェント方法は、車両の乗員の言動を受け付け、受け付けた言動の意図を理解し、理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定し、選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを、前記車両の環境に係る所定の条件に基づいて決定し、前記決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行い、前記車両の位置情報を取得し、取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する、処理をコンピュータが実行する。

請求項８に記載のエージェント方法では、コンピュータが乗員の言動を受け付けると、受け付けた当該言動を理解する。そして、コンピュータは、理解した乗員の意図に基づいて、推奨機能を選定する。また、当該エージェント方法では、コンピュータが、推奨機能の作動、及び作動の提案の何れを実行するかを、車両の環境に係る所定の条件に基づいて決定すると、推奨機能の作動又は作動の提案の指示を車両に対して行う。ここで、「推奨機能」及び「車両の環境に係る所定の条件」とは、上述のとおりである。一方、指示を受けた車両側の装置は、当該指示が推奨機能の作動に係る指示である場合に推奨機能を作動させる。以上、当該エージェント方法によれば、乗員の言動及び車両の環境に応じて車両の機能を作動させることで、乗員の操作負担の軽減を図ることができる。

請求項９に記載のエージェントプログラムは、車両の乗員の言動を受け付け、受け付けた言動の意図を理解し、理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定し、選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを前記車両の環境に係る所定の条件に基づいて決定し、前記決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行い、前記車両の位置情報を取得し、取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する、処理をコンピュータに実行させる。

請求項９に記載のエージェントプログラムでは、コンピュータが以下の処理を実行する。コンピュータが乗員の言動を受け付けると、受け付けた当該言動を理解する。そして、コンピュータは、理解した乗員の意図に基づいて、推奨機能を選定する。また、当該エージェントプログラムでは、コンピュータが、推奨機能の作動、及び作動の提案の何れを実行するかを、車両の環境に係る所定の条件に基づいて決定すると、推奨機能の作動又は作動の提案の指示を車両に対して行う。ここで、「推奨機能」及び「車両の環境に係る所定の条件」とは、上述のとおりである。一方、指示を受けた車両側の装置は、当該指示が推奨機能の作動に係る指示である場合に推奨機能を作動させる。以上、当該エージェントプログラムによれば、乗員の言動及び車両の環境に応じて車両の機能を作動させることで、乗員の操作負担の軽減を図ることができる。

本発明によれば、乗員の言動及び車両の環境に応じて車両の機能を作動させることで、乗員の操作負担の軽減を図ることができる。

第１の実施形態に係るエージェントシステムの概略構成を示す図である。 第１の実施形態の車両のハードウェア構成を示すブロック図である。 第１の実施形態のセンタサーバのハードウェア構成を示すブロック図である。 第１の実施形態のセンタサーバの機能構成を示すブロック図である。 第１の実施形態のセンタサーバにおいて実行される推奨処理の流れを示すフローチャートである。 第１の実施形態の車載器において実行される提供処理の流れを示すフローチャートである。 第１の実施形態における発話を通じた作用の一例である。 第１の実施形態におけるモニタを通じた作用の一例である。 第２の実施形態の車載器において実行される提供処理の流れを示すフローチャートである。

本発明のエージェント装置を含むエージェントシステムについて説明する。

［第１の実施形態］
図１に示されるように、第１の実施形態のエージェントシステム１０は、車両１２と、エージェント装置としてのセンタサーバ３０と、情報提供サーバ４０と、を含んで構成されている。車両１２には通知装置としての車載器２０が搭載されている。

車載器２０とセンタサーバ３０とは、ネットワークＮ１を通じて相互に接続されている。また、センタサーバ３０と情報提供サーバ４０とは、ネットワークＮ２を通じて相互に接続されている。なお、センタサーバ３０と情報提供サーバ４０とは、ネットワークＮ１を通じて接続されていてもよい。

（車両）
図２に示されるように、本実施形態に係る車両１２は、車載器２０と、複数のＥＣＵ２２と、複数の車載装置２３と、マイク２４と、カメラ２５と、入力スイッチ２６と、モニタ２７と、スピーカ２８と、ＧＰＳ装置２９と、を含んで構成されている。

車載器２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０Ａ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０Ｂ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０Ｃ、車内通信Ｉ／Ｆ（Ｉｎｔｅｒ Ｆａｃｅ）２０Ｄ、無線通信Ｉ／Ｆ２０Ｅ及び入出力Ｉ／Ｆ２０Ｆを含んで構成されている。ＣＰＵ２０Ａ、ＲＯＭ２０Ｂ、ＲＡＭ２０Ｃ、車内通信Ｉ／Ｆ２０Ｄ、無線通信Ｉ／Ｆ２０Ｅ及び入出力Ｉ／Ｆ２０Ｆは、内部バス２０Ｇを介して相互に通信可能に接続されている。

ＣＰＵ２０Ａは、中央演算処理ユニットであり、各種プログラムを実行したり、各部を制御したりする。すなわち、ＣＰＵ２０Ａは、ＲＯＭ２０Ｂからプログラムを読み出し、ＲＡＭ２０Ｃを作業領域としてプログラムを実行する。

ＲＯＭ２０Ｂは、各種プログラム及び各種データを記憶している。本実施形態のＲＯＭ２０Ｂには、車載器２０を制御するための制御プログラムが記憶されている。

ＲＡＭ２０Ｃは、作業領域として一時的にプログラム又はデータを記憶する。

車内通信Ｉ／Ｆ２０Ｄは、ＥＣＵ２２と接続するためのインタフェースである。当該インタフェースは、ＣＡＮプロトコルによる通信規格が用いられる。車内通信Ｉ／Ｆ２０Ｄは、外部バス２０Ｈに対して接続されている。ＥＣＵ２２は、車両１２の機能毎に複数設けられている。本実施形態のＥＣＵ２２としては、車両制御ＥＣＵ、エンジンＥＣＵ、ブレーキＥＣＵ、ボデーＥＣＵ、カメラＥＣＵ、マルチメディアＥＣＵが例示される。

また、各ＥＣＵ２２には、それぞれ、車載装置２３が接続されている。車載装置２３は、車両１２の機能を実現するための装置である。例えば、エンジンＥＣＵには、車載装置２３としてのスロットルアクチュエータが接続され、ブレーキＥＣＵには、車載装置２３としてのブレーキアクチュエータが接続されている。また、ボデーＥＣＵには、車載装置２３としての灯火装置、及びワイパー装置が接続されている。

無線通信Ｉ／Ｆ２０Ｅは、センタサーバ３０と通信するための無線通信モジュールである。当該無線通信モジュールは、例えば、５Ｇ、ＬＴＥ、Ｗｉ－Ｆｉ（登録商標）等の通信規格が用いられる。無線通信Ｉ／Ｆ２０Ｅは、ネットワークＮ１に対して接続されている。

入出力Ｉ／Ｆ２０Ｆは、車両１２に搭載されるマイク２４、カメラ２５、入力スイッチ２６、モニタ２７、スピーカ２８及びＧＰＳ装置２９と通信するためのインタフェースである。

音声入力装置としてのマイク２４は、車両１２のフロントピラー、又はダッシュボード等に設けられ、ユーザである車両１２の乗員Ｐ（図７Ａ参照）が発した音声を集音する装置である。なお、マイク２４は、後述するカメラ２５に設けられていてもよい。

撮像装置としてのカメラ２５は、車両１２のフロントピラー、ルームミラー、又はステアリングコラム等に設けられ、車両１２の乗員Ｐを撮像する装置である。なお、カメラ２５は、ＥＣＵ２２（例えば、カメラＥＣＵ）を経由して車載器２０に接続されていてもよい。

入力スイッチ２６は、インストルメントパネル、センタコンソール、ステアリングホイール等に設けられ、乗員Ｐの手指による操作を入力するスイッチである。入力スイッチ２６としては、例えば、押しボタン式のテンキー、及びタッチパッド等を採用することができる。

表示装置としてのモニタ２７は、インストルメントパネル、又はメータパネル等に設けられ、車両１２の機能に係る作動の提案、及び当該機能の説明に係る画像を表示するための液晶モニタである。モニタ２７は、入力スイッチ２６を兼ねたタッチパネルとして設けてもよい。

スピーカ２８は、インストルメントパネル、センタコンソール、フロントピラー、又はダッシュボード等に設けられ、車両１２の機能に係る作動の提案、及び当該機能の説明に係る音声を出力するための装置である。なお、スピーカ２８は、モニタ２７に設けられていてもよい。

ＧＰＳ装置２９は車両１２の現在位置を測定する装置である。ＧＰＳ装置２９は、ＧＰＳ衛星からの信号を受信する図示しないアンテナを含んでいる。なお、ＧＰＳ装置２９は、ＥＣＵ２２（例えば、マルチメディアＥＣＵ）に接続されるカーナビゲーションシステムを経由して車載器２０に接続されていてもよい。

（センタサーバ）
図３に示されるように、センタサーバ３０は、ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ、ストレージ３０Ｄ、及び通信Ｉ／Ｆ３０Ｅを含んで構成されている。ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ、ストレージ３０Ｄ及び通信Ｉ／Ｆ３０Ｅは、内部バス３０Ｇを介して相互に通信可能に接続されている。ＣＰＵ３０Ａ、ＲＯＭ３０Ｂ、ＲＡＭ３０Ｃ及び通信Ｉ／Ｆ３０Ｅの機能は、上述した車載器２０のＣＰＵ２０Ａ、ＲＯＭ２０Ｂ、ＲＡＭ２０Ｃ及び無線通信Ｉ／Ｆ２０Ｅと同じである。

ストレージ３０Ｄは、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）又はＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）により構成され、各種プログラム及び各種データを記憶している。

ＣＰＵ３０Ａは、ストレージ３０Ｄからプログラムを読み出し、ＲＡＭ３０Ｃを作業領域としてプログラムを実行する。

本実施形態のストレージ３０Ｄには、処理プログラム１００、機能データベース１１０及びオーナーズマニュアル１２０が記憶されている。なお、機能データベース１１０及びオーナーズマニュアル１２０は、センタサーバ３０とは異なるサーバに格納され、車載器２０又はセンタサーバ３０の処理が実行された場合に、読み出されてもよい。

エージェントプログラムとしての処理プログラム１００は、センタサーバ３０が有する各機能を実現するためのプログラムである。

機能データベース１１０は、車種、及びグレード別に搭載されている車両１２の機能を集約したデータベースである。

オーナーズマニュアル１２０は、車両１２の機能に係るマニュアルのデータである。オーナーズマニュアル１２０は、例えば、ＨＴＭＬ形式のデータとして記憶されている。

図４に示されるように、本実施形態のセンタサーバ３０では、ＣＰＵ３０Ａが、処理プログラム１００を実行することで、受付部２００、意図理解部２１０、機能制御部２２０及び取得部２４０として機能する。また、機能制御部２２０は、選定部２２２、決定部２２４及び指示部２２６を含み、取得部２４０は、気象取得部２４２、位置取得部２４４及び走行取得部２４６を含んでいる。

受付部２００は、車両１２の乗員Ｐの言動を受け付ける機能を有している。受付部２００は、乗員Ｐがマイク２４向けて発話したことにより生じた音声情報を車載器２０から受け付ける。また、受付部２００は、カメラ２５により撮像された乗員Ｐの撮像画像の画像情報を車載器２０から受け付ける。

意図理解部２１０は、受付部２００が受け付けた言動の意図を理解する機能を有している。意図理解部２１０は、乗員Ｐの発話の内容に基づいて乗員Ｐの意図を理解する。例えば、乗員Ｐが「温度を下げて」と発話した場合は、車室の温度を下げる意図を有していると理解する。また例えば、ＡＣＣ（Ａｄａｐｔｉｖｅ Ｃｒｕｉｓｅ Ｃｏｎｔｒｏｌ）の作動を提案された乗員Ｐが「ＯＮにして」と発話した場合は、ＡＣＣを作動させる意図を有していると理解する。

また、意図理解部２１０は、カメラ２５が撮像した乗員Ｐの表情及び動きの少なくも一つに基づいて、乗員Ｐの意図を理解する。例えば、乗員Ｐの目の瞬きの状態に基づいて眠気を有する意図を理解する。また例えば、ＡＣＣの作動を提案された乗員Ｐが手を横に振った場合は、ＡＣＣを作動させる意図を有していないと理解する。

機能制御部２２０は、車載器２０において実現されるエージェント機能を制御する機能を有している。エージェント機能としては、スピーカ２８による発話に限らず、モニタ２７による画像の提供を含む。

選定部２２２は、意図理解部２１０が理解した乗員Ｐの意図に基づいて、車両１２の推奨機能を選定する機能を有している。ここで、推奨機能とは、車両１２の機能のうち乗員Ｐに対して作動を推奨する機能である。例えば、上述のように意図理解部２１０が、乗員Ｐが車室の温度を下げる意図を有していると理解した場合、選定部２２２は、エアコンディショナーを推奨機能として選定する。

決定部２２４は、選定部２２２により選定された推奨機能の作動、及び作動の提案の何れを実行するかを車両１２の環境に係る所定の条件に基づいて決定する機能を有している。本実施形態における「車両１２の環境に係る所定の条件」には、車両１２が走行する地点の気象状態、車両１２の位置、及び車両１２の走行状態がある。

後述する気象取得部２４２が取得した気象情報に係る気象状態を所定の条件とする場合、決定部２２４は、推奨機能が現在の気象状態に対応付けられている機能の場合は推奨機能の作動を決定し、推奨機能が現在の気象状態に対応付けられていない機能の場合は推奨機能の作動の提案を決定する。例えば、選定部２２２がワイパーを推奨機能として選定した場合、気象状態が雨の場合は作動を決定し、気象状態が曇りの場合は作動の提案を決定する。

また、後述する位置取得部２４４が取得した位置情報に対応する車両１２の位置を所定の条件とする場合、決定部２２４は、推奨機能の利用が可能な位置の場合は推奨機能の作動を決定し、推奨機能の利用が不可能な位置の場合は推奨機能の作動の提案を決定する。例えば、選定部２２２がＡＣＣを推奨機能として選定した場合、車両１２の位置が高速道路上にある場合は作動を決定し、車両１２の位置が住宅街の路地である場合は作動の提案を決定する。

また、後述する走行取得部２４６が取得した車両１２の走行状態を所定の条件とする場合、決定部２２４は、車両１２が停止している場合は推奨機能の作動を決定し、車両１２が走行している場合は推奨機能の作動の提案を決定する。例えば、選定部２２２が動画の再生を推奨機能として選定した場合、車両１２が停止している場合は動画の再生を決定し、車両１２の走行している場合は動画の再生の提案を決定する。

指示部２２６は、決定部２２４の決定に基づいて、推奨機能の作動又は作動の提案の指示をコマンドとして車両１２に対して提供する機能を有している。

取得部２４０は、車両１２の周辺環境に係る情報、及び車両１２自体の情報を取得する機能を有している。

気象取得部２４２は、車両１２が走行する地点の気象に関する気象情報を取得する機能を有している。具体的に、気象取得部２４２は、車両１２が走行する地点の気象に関する気象情報を情報提供サーバ４０から取得する。この気象情報は、天候のみならず、気温、湿度、降水量、日射量、紫外線量等、気象に係る各種の情報を含む。

位置取得部２４４は、車両１２の位置情報を取得する機能を有している。具体的に、位置取得部２４４は、ＧＰＳ装置２９により取得された車両１２の位置情報を車載器２０から取得する。

走行取得部２４６は、車両１２の走行状態を取得する機能を有している。具体的に、走行取得部２４６は、車両制御ＥＣＵ等のＥＣＵ２２が有している車速情報を車載器２０から取得する。

（制御の流れ）
本実施形態のエージェントシステム１０において実行される処理の流れについて、図５及び図６のフローチャートを用いて説明する。

まず、車両１２では、乗員Ｐによる発話をマイク２４が集音した場合、車載器２０からセンタサーバ３０に向けて音声情報が送信される。また、カメラ２５が撮像した乗員Ｐの撮像画像に対し、車載器２０が何らかの意図を有すると判定した場合、当該車載器２０からセンタサーバ３０に向けて画像情報が送信される。また、車載器２０からセンタサーバ３０には、少なくとも、車両１２の位置情報、及び車両１２の車速情報が送信される。

一方、車載器２０からの情報を受信するセンタサーバ３０では、図５の推奨処理が実行される。同図の処理は、ＣＰＵ３０Ａが、受付部２００、意図理解部２１０、機能制御部２２０及び取得部２４０として機能することで実現される。

図５のステップＳ１００において、センタサーバ３０のＣＰＵ３０Ａは車載器２０から車両情報を受信する。この車両情報は、少なくとも上述の音声情報、画像情報、位置情報及び車速情報を含む。

ステップＳ１０１において、ＣＰＵ３０Ａは情報提供サーバ４０から環境情報を受信する。この環境情報は、少なくとも気象情報を含む。

ステップＳ１０２において、ＣＰＵ３０Ａは乗員Ｐの意図を理解する。具体的にＣＰＵ３０Ａは、乗員Ｐの発話に係る音声情報、表情及び動きに係る画像情報に基づいて乗員Ｐの意図を理解する。補足すると、音声情報及び画像情報に対する既知の意図を教師データとして機械学習を行った学習済みモデルに対して、ステップＳ１００において取得された音声情報及び画像情報を入力することで、乗員Ｐの意図を得る。

ステップＳ１０３において、ＣＰＵ３０Ａは推奨機能を選定する。すなわち、乗員Ｐの意図に即した車両１２の機能を推奨機能として選定する。

ステップＳ１０４において、ＣＰＵ３０Ａは推奨機能が車両１２の環境に係る所定の条件に合致したか否かを判定する。上述のように、車両１２が走行する地点の気象状態を所定の条件とする場合は、推奨機能が車両１２の走行する地点の気象状態に対応付けられている機能であるか否かを判定する。また、車両１２の位置を所定の条件とする場合は、推奨機能の利用が可能な位置であるか否かを判定する。さらに、車両１２の走行状態を所定の条件とする場合は、車両１２が停止しているか否かを判定する。ＣＰＵ３０Ａは推奨機能が所定の条件に合致したと判定した場合（ステップＳ１０４でＹＥＳの場合）、ステップＳ１０５に進む。一方、ＣＰＵ３０Ａは推奨機能が所定の条件に合致していないと判定した場合（ステップＳ１０４でＮＯの場合）、ステップＳ１０６に進む。

ステップＳ１０５において、ＣＰＵ３０Ａは推奨機能の作動を決定する。

ステップＳ１０６において、ＣＰＵ３０Ａは推奨機能の作動の提案を決定する。

ステップＳ１０７において、ＣＰＵ３０Ａは推奨機能の作動又は提案に係るコマンドを車載器２０に送信する。そして、推奨処理は終了する。

一方、センタサーバ３０からコマンドを受信する車載器２０では、図６の提供処理が実行される。同図の処理は、ＣＰＵ２０Ａが、ＲＯＭ２０Ｂに記憶されている制御プログラムを実行することで実現される。

図６のステップＳ２００において、ＣＰＵ２０Ａは推奨機能の作動又は提案に係るコマンドをセンタサーバ３０から受信する。

ステップＳ２０１において、ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動であるか否かを判定する。ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動であると判定した場合（ステップＳ２０１でＹＥＳの場合）、ステップＳ２０２に進む。一方、ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動ではない、すなわち、作動の提案であると判定した場合（ステップＳ２０１でＮＯの場合）、ステップＳ２０３に進む。

ステップＳ２０２において、ＣＰＵ２０Ａは推奨機能の作動処理を実行する。すなわち、ＣＰＵ２０Ａは、推奨機能に係るＥＣＵ２２を通じて推奨機能に係る車載装置２３を作動させる。そして、提供処理は終了する。

ステップＳ２０３において、ＣＰＵ２０Ａは推奨機能の提案処理を実行する。すなわち、ＣＰＵ２０Ａは、モニタ２７及びスピーカ２８を通じて乗員Ｐに対して推奨機能の作動の提案を行う。そして、提供処理は終了する。

センタサーバ３０による推奨処理、及び車載器２０による提供処理の実行に伴う、作用の例について図７Ａ及び図７Ｂを用いて説明する。

例えば、車速情報に基づいて車両１２が渋滞にはまっており、画像情報に基づいて乗員Ｐの疲労の意図を取得した場合、センタサーバ３０では、ブレーキホールド機能が推奨機能として選定される。そして、車両１２が走行中である場合、ブレーキホールド機能の作動の提案が決定され、車載器２０に提案に係るコマンドが送信される。なお、車両１２が停止中である場合、ブレーキホールド機能の作動が決定され、車載器２０に作動に係るコマンドが送信される。

そして、コマンドを受信した車載器２０は、スピーカ２８を介して乗員Ｐにブレーキホールド機能の作動の提案が行われる。具体的には、図７Ａに示されるように、スピーカ２８から「足が疲れていませんか？ブレーキホールドを使うと、停車時にブレーキをキープしてくれますよ。」の音声が出力される。

これに対して、乗員Ｐが「使い方を教えて」と発話した場合、センタサーバ３０のＣＰＵ３０Ａは、機能データベース１１０及びオーナーズマニュアル１２０を参照して、ブレーキホールド機能に係るマニュアルを車載器２０に対して送信する。

そして、マニュアルを受信した車載器２０は、図７Ｂに示されるように、モニタ２７を介して乗員Ｐに対して、ブレーキホールド機能の作動方法の説明を提示する。

（第１の実施形態のまとめ）
本実施形態のセンタサーバ３０は、受付部２００が乗員Ｐの言動を受け付けると、意図理解部２１０が受け付けた言動を理解する。そして、機能制御部２２０において、選定部２２２は、理解した乗員Ｐの意図に基づいて推奨機能を選定し、決定部２２４が、推奨機能の作動、及び作動の提案の何れを実行するかを、車両１２の環境に係る所定の条件に基づいて決定する。そして、機能制御部２２０において、指示部２２６が、推奨機能の作動又は作動の提案の指示をコマンドとして車載器２０に送信する。一方、コマンドを受信した車載器２０では、コマンドが推奨機能の作動に係る指示である場合に推奨機能を作動させる。以上、本実施形態のセンタサーバ３０によれば、乗員Ｐの言動及び車両１２の環境に応じて車両１２の機能を作動させることで、乗員Ｐの操作負担の軽減を図ることができる。

また、本実施形態のセンタサーバ３０では、意図理解部２１０が、言語に加えて、乗員Ｐの表情及び動きの少なくも一つに基づいて、意図を理解する。そのため、本実施形態によれば、乗員Ｐの表情や行動を基に機能を作動させることで、操作負担がさらに軽減される。

また本実施形態のセンタサーバ３０では、決定部２２４は気象取得部２４２が取得した気象情報に係る気象状態を「車両１２の環境に係る所定の条件」とし、当該気象状態に基づいて、推奨機能を作動させるか、又は作動の提案をするか決定する。本実施形態によれば、推奨機能の作動の可否を決定する際に気象状態を用いることにより、乗員Ｐの意図を補いながら推奨機能の作動の可否を決定することができる。

具体的に、決定部２２４は推奨機能が車両１２の走行する地点の気象状態に対応付けられている機能の場合は推奨機能の作動を決定し、推奨機能が車両１２の走行する地点の気象状態に対応付けられていない機能の場合は推奨機能の作動の提案を決定する。本実施形態によれば、例えば、降雨がなく曇りの場合にワイパーを作動させる等、作動させるべき気象状態ではない場合に推奨機能が作動することを抑制することができる。

また本実施形態のセンタサーバ３０では、決定部２２４は位置取得部２４４が取得した位置情報に対応する車両１２の位置を「車両１２の環境に係る所定の条件」とし、当該車両１２の位置に基づいて、推奨機能を作動させるか、又は作動の提案をするか決定する。本実施形態によれば、推奨機能の作動の可否を決定する際に車両１２の位置を用いることにより、乗員Ｐの意図を補いながら推奨機能の作動の可否を決定することができる。

具体的に、決定部２２４は推奨機能の利用が可能な位置の場合は推奨機能の作動を決定し、推奨機能の利用が不可能な位置の場合は推奨機能の作動の提案を決定する。本実施形態によれば、例えば、住宅街の路地を走行中にＡＣＣを作動させる等、作動させるべき走行場所ではない場合に推奨機能が作動することを抑制することができる。

さらに本実施形態のセンタサーバ３０では、決定部２２４は、走行取得部２４６が取得した車両１２の走行状態を「車両１２の環境に係る所定の条件」とし、当該車両１２の走行状態に基づいて、推奨機能を作動させるか、又は作動の提案をするか決定する。本実施形態によれば、推奨機能の作動の可否を決定する際に車両１２の走行状態を用いることにより、乗員Ｐの意図を補いながら推奨機能の作動の可否を決定することができる。

具体的に、決定部２２４は車両１２が停止している場合は推奨機能の作動を決定し、車両１２が走行している場合は推奨機能の作動の提案を決定する。本実施形態によれば、例えば、推奨機能である動画の再生を抑制することで、走行中の安全性を担保することができる。

なお、本実施形態では、気象状態、車両１２の位置、及び車両１２の走行状態を「車両１２の環境に係る所定の条件」としたが、この限りではなく、車両１２の走行時刻、車外の明るさ等を条件に加えてもよい。また、推奨機能を作動させるか、又は作動の提案をするかの決定において、各条件は単独用いてもよく、組み合わせて用いてもよい。

［第２の実施形態］
第１の実施形態では、車載器２０が推奨機能の作動に係るコマンドを受信した場合に当該推奨機能を作動させていたが、第２の実施形態では、推奨機能の作動に係るコマンドを受信した場合、乗員Ｐに対して作動の可否の確認を行っている。以下、第１の実施形態との相違点について説明する。なお、第１の実施形態とハードウェアの構成は同じであるため、説明は割愛する。

本実施形態の車載器２０において実行される提供処理の流れを、図８を用いて説明する。

図８のステップＳ２２０において、ＣＰＵ２０Ａは推奨機能の作動又は提案に係るコマンドをセンタサーバ３０から受信する。

ステップＳ２２１において、ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動であるか否かを判定する。ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動であると判定した場合（ステップＳ２２１でＹＥＳの場合）、ステップＳ２２２に進む。一方、ＣＰＵ２０Ａは受信したコマンドが推奨機能の作動ではない、すなわち、作動の提案であると判定した場合（ステップＳ２２１でＮＯの場合）、ステップＳ２２５に進む。

ステップＳ２２２において、ＣＰＵ２０Ａは推奨機能の作動の報知を行う。具体的にＣＰＵ２０Ａは、モニタ２７及びスピーカ２８を通じて乗員Ｐに対して推奨機能を作動させる旨の報知を行う。

ステップＳ２２３において、ＣＰＵ２０Ａは乗員Ｐが推奨機能の作動を拒否しているか否かを判定する。乗員Ｐが拒否をしているか否かは、乗員Ｐの発話、及び入力スイッチ２６に対する操作により判定することができる。ＣＰＵ２０Ａは乗員Ｐが推奨機能の作動を拒否していると判定した場合（ステップＳ２２３でＹＥＳの場合）、ステップＳ２２５に進む。一方、ＣＰＵ２０Ａは乗員Ｐが推奨機能の作動を拒否していないと判定した場合（ステップＳ２２３でＮＯの場合）、ステップＳ２２４に進む。

ステップＳ２２４において、ＣＰＵ２０Ａは推奨機能の作動処理を実行する。すなわち、ＣＰＵ２０Ａは、推奨機能に係るＥＣＵ２２を通じて推奨機能に係る車載装置２３を作動させる。そして、提供処理は終了する。

ステップＳ２２５において、ＣＰＵ２０Ａは推奨機能の提案処理を実行する。すなわち、ＣＰＵ２０Ａは、モニタ２７及びスピーカ２８を通じて乗員Ｐに対して推奨機能の作動の提案を行う。そして、提供処理は終了する。

以上、本実施形態の提供処理によれば、推奨機能を作動させる前に乗員Ｐに対して作動の可否を要求することで、意図理解部２１０における誤った意図理解により、又は、意図理解後の乗員Ｐの気変わりにより、乗員Ｐが望まない車両１２の機能の作動が抑制される。

［備考］
上記各実施形態では、乗員Ｐの発話、表情及び動きに基づいて、意図理解部２１０が乗員Ｐの意図を理解していたが、これに限らない。例えば、タッチパネルであるモニタ２７に対する乗員Ｐの操作に基づいて、意図理解部２１０が乗員Ｐの意図を理解してもよい。この場合の操作とは、例えば、乗員Ｐがモニタ２７に対して文字列を入力したり、選択肢を選択したりすることが挙げられる。

なお、上記実施形態でＣＰＵ２０Ａ、３０Ａがソフトウェア（プログラム）を読み込んで実行した各種処理を、ＣＰＵ以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の製造後に回路構成を変更可能なＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、及びＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、上述した受付処理を、これらの各種のプロセッサのうちの１つで実行してもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡ、及びＣＰＵとＦＰＧＡとの組み合わせ等）で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。

また、上記実施形態において、各プログラムはコンピュータが読み取り可能な非一時的記録媒体に予め記憶（インストール）されている態様で説明した。例えば、車載器２０における制御プログラムはＲＯＭ２０Ｂに、センタサーバ３０における処理プログラム１００はストレージ３０Ｄに、予め記憶されている。しかしこれに限らず、各プログラムは、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ－ＲＯＭ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及びＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ等の非一時的記録媒体に記録された形態で提供されてもよい。また、プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。

上記各実施形態における処理は、１つのプロセッサによって実行されるのみならず、複数のプロセッサが協働して実行されるものであってもよい。上記実施形態で説明した処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。

１２ 車両
２５ カメラ（撮像装置）
３０ センタサーバ（エージェント装置）
１００ 処理プログラム（エージェントプログラム）
２００ 受付部
２１０ 意図理解部
２２２ 選定部
２２４ 決定部
２２６ 指示部
２４２ 気象取得部
２４４ 位置取得部
２４６ 走行取得部
Ｐ 乗員

Claims (9)

1. 車両の乗員の言動を受け付ける受付部と、
   前記受付部が受け付けた言動の意図を理解する意図理解部と、
   前記意図理解部が理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定する選定部と、
   前記選定部により選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを、前記車両の環境に係る所定の条件に基づいて決定する決定部と、
   前記決定部の決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行う指示部と、
   前記車両の位置情報を取得する位置取得部と、
   を備え、
   前記決定部は、前記位置取得部が取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定するエージェント装置。
2. 前記受付部は、前記車両が搭載する撮像装置により撮像された前記乗員の撮像画像の情報を受け付け、
   前記意図理解部は、前記乗員の表情及び動きの少なくも一つに基づいて、前記乗員の意図を理解する請求項１に記載のエージェント装置。
3. 前記車両が走行する地点の気象に関する気象情報を取得する気象取得部を備え、
   前記決定部は、前記気象取得部が取得した前記気象情報に係る気象状態を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する請求項１又は２に記載のエージェント装置。
4. 前記決定部は、前記推奨機能が前記気象状態に対応付けられている機能の場合は前記推奨機能の作動を決定し、前記推奨機能が前記気象状態に対応付けられていない機能の場合は前記推奨機能の作動の提案を決定する請求項３に記載のエージェント装置。
5. 前記決定部は、前記推奨機能の利用が可能な位置の場合は前記推奨機能の作動を決定し、前記推奨機能の利用が不可能な位置の場合は前記推奨機能の作動の提案を決定する請求項１に記載のエージェント装置。
6. 前記車両の走行状態を取得する走行取得部を備え、
   前記決定部は、前記走行取得部が取得した前記車両の走行状態を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する請求項１～５の何れか１項に記載のエージェント装置。
7. 前記決定部は、前記車両が停止している場合は前記推奨機能の作動を決定し、前記車両が走行している場合は前記推奨機能の作動の提案を決定する請求項６に記載のエージェント装置。
8. 車両の乗員の言動を受け付け、
   受け付けた言動の意図を理解し、
   理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定し、
   選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを、前記車両の環境に係る所定の条件に基づいて決定し、
   前記決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行い、
   前記車両の位置情報を取得し、
   取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する、
   処理をコンピュータが実行するエージェント方法。
9. 車両の乗員の言動を受け付け、
   受け付けた言動の意図を理解し、
   理解した前記乗員の意図に基づいて、作動を推奨する前記車両の機能を推奨機能として選定し、
   選定された前記推奨機能の作動、及び作動の提案の何れを実行するかを、前記車両の環境に係る所定の条件に基づいて決定し、
   前記決定に基づいて、前記推奨機能の作動又は作動の提案の指示を前記車両に対して行い、
   前記車両の位置情報を取得し、
   取得した前記位置情報に対応する前記車両の位置を所定の条件の一つとして、前記推奨機能の作動、及び作動の提案の何れを実行するかを決定する、
   処理をコンピュータに実行させるためのエージェントプログラム。